Offre d’emploi : Ingénieur Databricks
Lieu : Sur site
Type de contrat : Temps plein
À propos du poste
Nous recherchons un Ingénieur Databricks talentueux pour rejoindre notre équipe Data en pleine croissance.
Dans ce rôle, vous serez responsable de la conception, du développement et de l’optimisation de pipelines de données évolutifs ainsi que de solutions analytiques basées sur Databricks.
Vous collaborerez avec des ingénieurs, des data scientists, des analystes et des équipes métiers afin de fournir des solutions de données fiables et performantes qui créent une réelle valeur pour l’entreprise.
Vos missions
- Développer et maintenir des pipelines ETL/ELT à l’aide de Databricks, PySpark, SQL et Delta Lake.
- Concevoir et mettre en œuvre des solutions Lakehouse évolutives dans le cloud.
- Ingérer, transformer et intégrer des données provenant de multiples sources structurées et non structurées.
- Gérer et optimiser les clusters, les tâches et les workflows Databricks.
- Garantir la qualité, la gouvernance et la conformité des données sur l’ensemble des pipelines.
- Collaborer avec des équipes pluridisciplinaires afin de soutenir les cas d’usage d’analytique avancée et de Machine Learning.
- Surveiller, diagnostiquer et améliorer les performances des pipelines de données.
- Contribuer à l’automatisation, aux pipelines CI/CD et aux meilleures pratiques DevOps.
Profil recherché
- Expérience confirmée en tant que Data Engineer avec une solide expertise pratique sur Databricks.
- Excellente maîtrise de PySpark, SQL et du traitement distribué des données.
- Bonne connaissance de Delta Lake et des architectures Data Lakehouse.
- Expérience sur au moins une plateforme cloud majeure (Azure, AWS ou GCP).
- Connaissance des technologies de streaming de données (Kafka, Event Hubs, Kinesis, etc.).
- Maîtrise des pipelines CI/CD et des outils de gestion de versions (GitHub, GitLab, Jenkins, Azure DevOps).
- Excellentes capacités d’analyse, de résolution de problèmes et de collaboration.
Atouts supplémentaires
- Expérience avec MLflow et les pratiques MLOps.
- Connaissance d’outils de Business Intelligence tels que Power BI, Tableau ou Looker.
- Familiarité avec les outils Infrastructure as Code (Terraform, Pulumi, CloudFormation).
- Expérience des projets de migration de données depuis des infrastructures sur site vers le cloud.
Pourquoi nous rejoindre ?
- Travaillez sur des projets innovants de Big Data et d’analytique.
- Rejoignez une équipe collaborative, innovante et en pleine croissance.
- Bénéficiez d’une rémunération compétitive, d’avantages attractifs et d’opportunités de développement professionnel.
- Profitez d’un environnement de travail flexible avec des possibilités de télétravail et de mode hybride.