Alternance - 36 mois - Data Engineer H/F

Dans le cadre de la digitalisation de la plateforme Mod

Syst, nous cherchons un(e) alternant(e) pour concevoir et déployer un service transverse de gestion des données (DIGIMODSYS) conçu pour : (1) Automatiser l’ingestion, le stockage et le traitement des données techniques (caractérisations, simulations, procédés); (2) Structurer ces données dans un datalake et des bases relationnelles; (3) Mettre à disposition les résultats via un portail web et des API pour les utilisateurs internes (authentification et droits différenciés); (4) Intégrer une ""PV Toolbox"" (boîte à outils algorithmique) pour automatiser les traitements métiers (analyses, visualisations); (5) Assurer la compatibilité avec les évolutions futures (2027) de la DSI et du LITEN. Missions principales : 1. Concevoir et déployer l’architecture technique Vous serez en charge de concevoir une architecture hybride combinant une base de données Postgre

SQL et un stockage S3/Iceberg, de containeriser les services via Docker et d’automatiser les déploiements avec une pipeline CI/CD Git

Lab, tout en garantissant la compatibilité avec les évolutions prévues en 2027. 2. Développer le pipeline de données Vous automatiserez l’ingestion des données depuis les dossiers existants, les nettoierez et structurerez à l’aide d’outils comme Spark, Airflow et Python, puis intégrerez une boîte à outils algorithmique (PV Toolbox) pour réaliser les analyses métiers. 3. Créer les interfaces utilisateurs Vous développerez un portail web (Fast

API+Frontend) pour visualiser les données et résultats, implémenterez des API pour faciliter leur interrogation, et gérerez les droits d’accès via une authentification sécurisée (LDAP/OAuth2). 4. Assurer le monitoring et la maintenance Vous assurerez la surveillance des performances des services via Prometheus et Grafana, documenterez l’architecture et les procédures, et participerez activement aux mises à jour ainsi qu’à la veille technologique pour garantir l’évolution du...