Data Engineer Snowflake - Freelance (H/F)
Localisation : Issy-les-Moulineaux (92)
Télétravail : 2 jours/semaine, dont le vendredi
Présentiel : 3 jours/semaine obligatoires
Démarrage : ASAP
Durée : Prestation longue durée
Nombre de profils recherchés : 2
Type de contrat : Freelance / prestation
CONTEXTE
Notre client, un grand groupe, fait évoluer son Data
Hub d'une architecture BI traditionnelle vers une architecture Data Lakehouse.
L'objectif est notamment de migrer les flux existants, mettre en place de nouvelles zones data et progressivement décommissionner Talend.
L'architecture cible s'appuie principalement sur Snowflake et AWS.
Dans ce contexte, nous recherchons 2 Data Engineers Snowflake pour renforcer l'équipe technique.
Les consultants interviendront à la fois sur les projets de migration vers le Lakehouse, les évolutions du périmètre data existant ainsi que sur les sujets de Run et de production.
VOS MISSIONS
MIGRATION TALEND → SNOWFLAKE
*
Analyser les jobs Talend existants
*
Reprendre et documenter les traitements
*
Migrer les traitements ETL vers des patterns ELT natifs Snowflake
*
Réécrire les jobs et réaliser les tests
*
Effectuer les recettes et tests de non-régression
*
Participer au décommissionnement progressif de Talend
DATA LAKEHOUSE
*
Participer à la conception et à la mise en œuvre de l'architecture Data Lakehouse
*
Travailler sur les différentes zones : Landing, Lakehouse, Data Products
*
Concevoir et développer des pipelines de données
*
Mettre en œuvre les patterns ELT
SNOWFLAKE
*
Développer en Snowflake SQL
*
Mettre en œuvre Snowpipe pour les flux batch et temps réel
*
Utiliser Snowpark / Python
*
Participer à la gestion des rôles et des accès avec RBAC
*
Mettre en œuvre le tagging et le masking
*
Superviser et optimiser les traitements Snowflake
*
Participer à l'optimisation des coûts
INDUSTRIALISATION & RUN
*
Automatiser les traitements et les déploiements
*
Participer à la mise en place et à l'amélioration de la CI/CD Data
*
Utiliser Terraform
*
Analyser et résoudre les incidents de production
*
Réaliser les analyses de cause racine
*
Mettre en place des corrections durables
*
Assurer le suivi et la documentation des incidents
PROJETS & ÉVOLUTIONS
*
Participer au cadrage des besoins
*
Réaliser les chiffrages
*
Concevoir et développer les évolutions
*
Réaliser les tests et la recette
*
Participer aux mises en production
*
Assurer la documentation des développements
COMPÉTENCES RECHERCHÉES
OBLIGATOIRES
*
Snowflake : expertise confirmée
*
SQL avancé
*
Snowpipe
*
Snowpark
*
Python
*
RBAC / sécurité Snowflake
*
Terraform
*
Talend ou un ETL équivalent
*
Expérience de migration ETL → ELT
*
Expérience en maintenance évolutive et corrective
LES COMPÉTENCES SUIVANTES SONT UN PLUS
*
AWS, notamment Lambda et services serverless
*
Power BI
*
Architecture Data Lakehouse
*
Architecture Data Mesh
*
CI/CD Data
*
Optimisation des coûts Snowflake
LIVRABLES
Le consultant pourra notamment être amené à produire :
*
Inventaire et documentation des jobs Talend repris
*
Pipelines Snowflake industrialisés
*
Modèles Data Lakehouse documentés
*
Contribution à la stratégie de migration et de décommissionnement de Talend
*
Développements sur les projets et demandes évolutives
*
Documentation et suivi des incidents de production
Nous recherchons un Data Engineer confirmé à senior, capable d'intervenir aussi bien sur les sujets de développement que sur l'industrialisation et le Run.
Le profil devra être particulièrement à l'aise sur Snowflake + Terraform + migration Talend/ETL vers ELT.
Une expérience concrète dans des environnements Data
