Chargement en cours

Data Engineer - Freelance (H/F)

VILLENEUVE-D'ASCQ, 59
il y a 8 jours
Profession libérale

Les équipes de notre client opèrent sur data platform sur Google Cloud Platform (Big

Query, Cloud Composer/Airflow, Dataform, Cloud Run, Firestore), utilisée par les data engineers des squads et par des agents IA conversationnels en cours d'industrialisation.

La mission consiste à maintenir en condition opérationnelle et à faire évoluer cette plateforme selon les besoins des data engineers : gestion des droits et de l'IAM GCP, exploitation de Composer/Airflow et du dispatcher, industrialisation des déploiements (CI/CD, infrastructure as code), suivi Fin

Ops, et participation au chantier observabilité (monitoring, alerting, intégration Sifflet). Le RUN de la plateforme se compose surtout de demandes récurrentes : droits/IAM, anomalies Airflow et Finder, stockage/Fin

Ops, flux $U/IDL Pro.

Le Data Engineer développe, construit et maintient des infrastructures de données d'un point de vue système et sécurité. Il s'assure de la maîtrise de la donnée et est garant de la qualité de son utilisation afin d'en faciliter l'exploitation par les équipes. Il s'assure de la collecte, du stockage et de l'exploitation des flux de données répondant aux enjeux de l'entreprise. Il est garant de l'accès qualitatif des sources de données qui viennent alimenter le Data Lake afin d'en faciliter l'exploitation par les équipes de Data Science. Il définit également la structure des métadonnées. Son périmètre d'intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, Io

T... Il assure la supervision et l'intégration des données qui proviennent de ces sources multiples et vérifie la qualité des données qui entrent dans le Data Lake (il recette de la donnée, supprime les doublons, etc.).

Maîtrise obligatoire de Big

Query

Consultant basé en métropole lilloise

Entreprise
Collective.work
Plateforme de publication
France Travail
Offres pouvant vous intéresser
LILLE, 59
il y a 8 jours
LILLE, 59
il y a 10 jours
STRASBOURG, 67
il y a 10 jours
Soyez le premier à postuler aux nouvelles offres
Soyez le premier à postuler aux nouvelles offres
Créez gratuitement et simplement une alerte pour être averti de l’ajout de nouvelles offres correspondant à vos attentes.
* Champs obligatoires
Ex: boulanger, comptable ou infirmière
Alerte crée avec succès