Data Engineer GCP - Mission Freelance - Freelance (H/F)
Taux journalier (TJM): 475€HT/jour
CONTEXTE
Au sein du département IT d'une grande institution financière (DSI Corporate), la DSI T&O et BPA a pour vocation de fournir aux services Technologies & Opérations (pôles Global Business Management and Transformation (GBMT), Work
Place, CIO Office Groupe) et Banque de Proximité et Assurance (BPA), l'ensemble des applications nécessaires à leur fonctionnement.
MISSIONS
Nous recherchons un profil data engineer GCP qui sera en charge, en lien avec l'équipe de production applicative / devops, de mettre en œuvre techniquement les demandes métier sur le projet Dat
Ops. Passionné par le développement et le traitement des données, capable de s'adapter à un environnement dynamique et en constante évolution, le prestataire doit faire preuve d'autonomie, d'initiative et d'une forte capacité d'analyse pour résoudre des problèmes complexes.
Les tâches suivantes seront confiées au consultant :
- Mettre en œuvre de nouvelles ingestions de données, data prep/transformation
- Maintenir et faire évoluer nos outils de gestion des pipelines de données
- Adresser à l'équipe devops les demandes relatives aux évolutions de la plateforme
COMPÉTENCES MÉTIER
- Développe, construit des infrastructures de données d'un point de vue système et sécurité.
- S'assure de la collecte, du stockage et de l'exploitation des flux de données répondant aux enjeux de l'entreprise.
- Est garant de l'accès qualitatif des sources de données qui viennent alimenter des espaces de stockage afin d'en faciliter l'exploitation par les Data Scientist et Data Analyst.
- Définit également la structure des métadonnées.
- Industrialise les modèles de Machine Learning.
- Maintient et participe au suivi du RUN des applications/modèles développés.
- Cartographie et documente les sources de données.
- Assure la maintenance des différentes applications déployées en production et des infrastructures associées.
- Conçoit les solutions permettant le traitement de volumes importants de flux de données.
- Structure les bases de données (sémantique, format, etc.).
- Contribue à la gestion des référentiels de données.
- Capte et stocke les données (structurées ou non) produites dans les différentes applications ou venant de l'extérieur de l'entreprise.
- Assure la supervision et l'intégration des données de diverses natures qui proviennent de sources multiples. Vérifie la qualité des données et s'assure de leur sécurité.
- Assiste les Data Scientists dans l'optimisation des performances techniques des modèles de Machine Learning.
- Industrialise les modèles de Machine Learning conçus par les Data Scientists.
- Reste en alerte sur les technologies liées au traitement de la manipulation de la données et identifie les solutions utilisables.
- Propose des évolutions pour les infrastructures et solutions de données en place.
OUTILS & ENVIRONNEMENT
- Plateforme GCP (Google Cloud Platform)
- Big
- SQL, Python orienté objet, Pandas et/ou Dask
- Bash scripting, GIT
- Outils complémentaires appréciés : Cloud Functions, SAS, Alteryx, XLD/XLR, Control
- Méthodologie agile, notamment SCRUM
- Anglais courant à l'écrit et à l'oral
CONDITIONS DE TRAVAIL
- Démarrage : 28/09
- Dead line candidature : 24/09
- Localisation : Charenton-Le-Pont
- Durée mission : 5 mois
- TJM : 475€ HT
1. Excellente maîtrise de la plateforme GCP, et autres outils de la stack technique : Big
Query, cloud storage, SQL, Python orienté objet, Pandas et/ou Dask, bash scripting, GIT
2. Connaissances et expériences avec des outils complémentaires : Cloud functions, SAS, Alteryx, XLD/XLR, Control
M, Hadoop, Spark
3. Maîtrise de l'anglais, tant à l'écrit qu'à l'oral
4. Expérience dans des environnements agiles, en particulier avec la méthodologie SCRUM
5. Capacité à rédiger des spécifications techniques claires et précises
6. Dynamisme, excellent relationnel et capacité à travailler en équipe
7. Force de