Data Engineer GCP (H/F)
Contexte :Nous recherchons pour l'un de nos clients grands comptes un Data Engineer GCP (H/F) qui travaillera en relation avec une équipe à l'internationale. Responsabilités :Conception et développement des pipelines data
Concevoir et développer des pipelines de traitement de données robustes et scalables
Mettre en place des flux d'ingestion, transformation et stockage des données
Développer et optimiser les modèles de transformation avec dbt
Participer à l'industrialisation des processus de traitement des données
Architecture et plateforme data
Concevoir et maintenir des architectures data modernes sur le Cloud
Mettre en place et optimiser les entrepôts de données Snowflake
Participer à la modélisation des données (data warehouse / data lake / data lakehouse)
Garantir la performance, la qualité et la disponibilité des données
Intégration et orchestration
Développer et maintenir les pipelines d'intégration de données
Mettre en place des outils d'orchestration et de planification des workflows
Participer à l'intégration de différentes sources de données internes et externes
Qualité, gouvernance et optimisation
Mettre en place des processus de qualité et de validation des données
Optimiser les performances des requêtes et pipelines data
Contribuer à la gouvernance des données et aux bonnes pratiques data engineering
Collaboration et amélioration continue
Collaborer avec les équipes data science, BI et métiers
Participer aux revues techniques et à la documentation des pipelines
Contribuer à l'amélioration continue de la plateforme data Environnement technique associé :Google Cloud Platform (GCP)
Snowflake
DBTSQL / Python
Data Warehouse / Data Lake
Outils d'orchestration (Airflow, Cloud Composer ou équivalent)
CI/CD et bonnes pratiques Dev
Ops appliquées à la data