Data Engineer Databricks – H/F

Rejoignez Synchrone pour un projet stratégique auprès d’un client grand compte . En tant que Data Engineer spécialisé Databricks , vous serez le pilote technique des pipelines Big Data sur Databricks , garantissant l’industrialisation, la scalabilité et la qualité des flux de données pour des projets analytiques et IA à grande échelle.

1️⃣ Concevoir, développer et maintenir des pipelines de données robustes et scalables sur Databricks .

2️⃣ Exploiter pleinement les fonctionnalités de Databricks : Delta Lake, Spark SQL, notebooks collaboratifs, MLflow pour gérer les workflows et modèles prédictifs.

3️⃣ Transformer et intégrer des données issues de sources multiples (bases relationnelles, API, fichiers, streaming) dans Databricks.

4️⃣ Collaborer avec les Data Scientists pour industrialiser les modèles de Machine Learning et Analytics dans Databricks.

5️⃣ Garantir la qualité, la sécurité et la fiabilité des données sur les environnements Databricks Cloud.

6️⃣ Participer aux choix d’architecture Cloud et Big Data pour optimiser les performances et la scalabilité.

7️⃣ Automatiser les processus de déploiement et de supervision via DataOps et CI/CD intégrés à Databricks.

Environnement technique :

• Machine Learning / IA : Modèles prédictifs, NLP, clustering, MLflow

Exemples de nos projets innovants :

⚡ Énergie : Prévisions de consommation et optimisation de l’équilibre offre/demande avec pipelines Databricks et MLflow.