Ingénieur en traitement de données (H/F)

Description du poste :

Concevoir, mettre en œuvre et maintenir des solutions techniques pour l'intégration, la qualité et la gouvernance des données. Garantir la fiabilité et la cohérence des données pour les systèmes décisionnels et opérationnels.

Responsabilités Développer et optimiser des pipelines de données pour l'extraction, la transformation et le chargement (ETL/ELT Administrer et configurer des solutions MDM pour la gestion des données maîtres.

• Mettre en place des architectures Data Lake / Delta Lake pour la gestion des données massives.
• Concevoir des flux temps réel et orchestrer des traitements.
• Définir et appliquer les règles de qualité et de gouvernance des données.
• Collaborer avec les équipes métiers et IT pour aligner les besoins et les solutions.

Compétences techniques ETL / Orchestration : Talend, Informatica, Apache Ni

Fi.

• Streaming & Messaging : Apache Kafka, Spark Streaming.
• Stockage & Architecture : Delta Lake, Data Lake, Hadoop, Spark sur un stockage S3-compatible (ex: Min

IO Master Data Management (MDM Mise en place de référentiels uniques avec des solutions comme Informatica MDM, Semarchy, IBM Info

Sphere.

• Bases de données : Oracle, Postgre

SQL, SQL Server.

• Connaissance des concepts Data Quality, Data Governance, modélisation des données Catalogage : Utilisation d'outils comme Open

Metadata ou Data

Hub pour le lignage et la documentation.

• Cloud / Infra : Maîtrise de Docker et Kubernetes (K8s Missions Principales***Design d'Architecture : Définir les schémas de données et choisir les briques technologiques adaptées.
• Standardisation : Créer des frameworks réutilisables pour l'ingestion et la transformation.
• Sécurité et Conformité : Garantir la sécurité des données, l'anonymisation et le contrôle des accès.
• Veille Technologique : Suivre activement les projets de l'écosystème Apache et de la Linux Foundation AI & Data.
• Accompagnement : Servir de référent te...