Ingénieur DataOps / DevOps Data - Freelance (H/F)
Taux journalier (TJM): 600
Au sein de la division Data d'un grand groupe d'assurance, l'équipe BI Décisionnel gère une plateforme de pipelines de données (Hadoop HDFS/Hive, Oracle Exadata, Mongo
DB, Kafka et Qlik). En pleine préparation de sa migration vers GCP, l'équipe cherche à fiabiliser et automatiser l'exploitation de ses 4 environnements hors-production (DEV, RCT, PREPROD), aujourd'hui gérés manuellement.
Rattaché à l'équipe « Performance », l'Ingénieur Data
Ops assure le maintien en conditions opérationnelles (MCO), le support aux développeurs et l'automatisation des processus pour garantir la qualité et la stabilité des livraisons.
TÂCHES ET RESPONSABILITÉS (75 % OPS / 25 % SUPPORT DEV)
*
Gestion et MCO des environnements hors-prod : suivi des batchs et relances, analyse des logs, synchronisation des environnements et accompagnement de la migration hors-prod vers GCP.
*
Automatisation & Qualité : automatisation des procédures de refresh de données, gestion des pipelines de livraison CI/CD avec Git
Lab et contrôle de la cohérence des BDD.
*
Observabilité : création et maintien de tableaux de bord de suivi (exécutions, volumes) et force de proposition sur les outils de monitoring.
*
Coordination : interface technique centrale entre les équipes de développement Data, la Production, les Chefs de Projets et les utilisateurs internes.
*
Environnements & CI/CD : maîtrise des architectures On-Premise (obligatoire) et appétence/connaissance de GCP, Git
Lab CI/CD, scripting Python et Shell Linux.
*
Écosystème Data & ETL : traitements Spark, Hadoop (HDFS/Hive), Oracle (PL/SQL) et Mongo
DB. Idéalement maîtrise d'Informatica (ou un autre ETL du marché).
*
Ordonnancement & Monitoring : compréhension du fonctionnement d'un ordonnanceur (Op
Con fortement apprécié, ou Control-M, Airflow, Oozie) pour le suivi et les relances ; compétences en analyse de logs et monitoring.
*
Excellent relationnel et esprit d'équipe (travail très transversal).
*
Rigoureux, autonome et doté d'un fort esprit d'investigation.
*
Force de proposition sur l'automatisation et l'outillage de monitoring.
