Chargement en cours

Data Engineer: End-to-End Pipelines & Databricks Expert

PARIS, 75
il y a 2 jours

•Concevoir et implémenter des pipelines d'ingestion et de transformation de données (batch et temps réel), robustes et scalables.•Développer et maintenir les flux ETL Talend qui alimentent le datalake et les systèmes consommateurs.•Développer des traitements Python / PySpark sur Databricks et mettre en œuvre les modèles de données cibles.•Automatiser les transformations, la documentation et les tests de données avec dbt.•Configurer les pipelines d'acheminement des données, y compris les flux CDC.•Mettre en place les bonnes pratiques de qualité de données, de monitoring, d'alerting et de logging.•Développer des modules réutilisables (templates de pipelines, librairies communes, CI/CD) et exploiter les modules existants dans les nouveaux projets.•Réaliser les développements et les tests associés, et accompagner les mises en production.

#J-18808-Ljbffr
Entreprise
Sijo
Plateforme de publication
WHATJOBS
Offres pouvant vous intéresser
Soyez le premier à postuler aux nouvelles offres
Soyez le premier à postuler aux nouvelles offres
Créez gratuitement et simplement une alerte pour être averti de l’ajout de nouvelles offres correspondant à vos attentes.
* Champs obligatoires
Ex: boulanger, comptable ou infirmière
Alerte crée avec succès