Data Engineer GCP
LILLE, 59
il y a 2 jours
Profil / Mission
Au sein d’une industrie qu’elle soit Retail, Luxe, pure player, tourisme ou autre, la Data est au cœur de l’activité.
En effet, il s’agit de maîtriser une architecture Data Centrics, plateforme de référence Data qui fournit des données en temps réel (via API) pour simplifier et accélérer les prises de décisions tech, business et digitales.
Davidson dispose d’un savoir-faire reconnu qui lui permet d’intervenir sur différentes phases d’un projet que ce soit en Conseil et organisation, Cadrage, Définition, Conception ou Optimisation. Nos consultants interviennent sur des projets Data ingénieur, Data Analytics et Data IA.
Ton rôle en tant que Data Engineer sera de contribuer à des projets Data :
- Concevoir, développer et maintenir des pipelines de données ETL/ELT sur Google Cloud Platform (GCP)
- Conception de data warehouses et data lakes scalables sur BigQuery , optimisation des schémas et partitions
- Optimisation des requêtes SQL, gestion du partitionnement, réduction des coûts BigQuery/Dataflow
- Versionning (Git), déploiement continu via Terraform , Cloud Build , GitLab CI
- Nettoyage, normalisation, contrôle de cohérence ; mise en place de tests et monitoring des données
- Stack technique : Cloud : GCP (BigQuery, Dataflow, Dataproc, Composer, Pub/Sub, Cloud Storage, Kafka) Langages : SQL, Python, Java/Scala Orchestration : Cloud Composer (Airflow), dbt
Exemples de projets menés
- Pour un client dans le secteur du luxe : concevoir et automatiser des pipelines de données scalables sur Google Cloud (BigQuery, Cloud Storage, Cloud Composer) pour alimenter la personnalisation, les recommandations produits et les tableaux de bord business
- Pour un autre client : concevoir et automatiser des pipelines de données scalables sur Google Cloud Platform à destination du département marketing digital (ciblage et activation marketing au travers de campagnes de dernière génération, publicité digitale ciblée, etc.)
Compétences requises ou à acquérir
- Tu es le/la reine (roi) de la Data ?
- Les termes BigQuery, Python, Scala, Kafka, Pub/Sub, GCP n’ont plus aucun secret pour toi ?
- Le Tea Time n’est pas un secret pour toi (tu parles anglais couramment ? ?)
- Tu aimes travailler en équipe ?
- Tu aimes la technique ?
Aptitudes / Savoir-être
- Esprit d’équipe et de partage !
- Appétence forte pour la technique
- Capacité rédactionnelle
Entreprise
Davidson consulting
Plateforme de publication
WHATJOBS
Offres pouvant vous intéresser
BOULOGNE BILLANCOURT
il y a 3 jours
LILLE, 59
il y a 12 jours
ÎLE- E FRANCE, FRANCE
il y a 26 jours
PARIS, 75
il y a 14 jours