Data Engineer Spark Scala, Airflow, Hive, Jenkins, Nexus, HDFS, Gitlab Nantes ( 3 à 4 jours TT)[...]

Data Engineer – Risk / Notation Squad

L'équipe est composée d'un Product Owner, d'un Scrum Master et de plusieurs profils BA et IT. Vous travaillerez dans un contexte d’Agile & Scrum, en étroite collaboration avec les équipes.

• Développer et intégrer des évolutions sur les solutions de la squad (Teradata, Hive, Phoenix, HDFS, API Spring Boot).
• Participer à la préparation et à la réalisation des mises en production, assurer le support (SAV).
• Gérer et maintenir la documentation fonctionnelle et technique.
• Contribuer à l’assistance à l’utilisation des solutions et à la formation des utilisateurs.
• Participer aux séances d’affinage technique en phase de conception.
• Veiller à la fiabilité, à l’évolutivité et à la performance des solutions.
• Maintenir et alimenter le backlog, anticiper les développements futurs.
• Réaliser l'analyse du patrimoine existant.

Data Engineer – Spark/Scala (Nantes)

1. Réaliser les développements en langage Scala/Spark.
2. Assurer la mise en production, le support N3 et la supervision des traitements.
3. Documenter les réalisations et maintenir un datalake en évolution.
4. Support N3 de la production et supervision.
5. Maximiser la performance et la robustesse des pipelines.

Tech Lead – Big Data (Hadoop/Cloudera)

Responsabilités clés :

• Exploitation et maintenance de la plateforme Hadoop/Cloudera.
• Résolution d’incidents niveau N3.
• Supervision technique et leadership sur les évolutions.
• Participation à la migration vers un modèle hybride (On-Premise → Cloud).

Data Engineer – Teradata, Hive, Phoenix, HDFS (Vannes)

• Expertise forte sur ces technologies et Cloudera.
• Développement et intégration des évolutions sur la squad.
• Préparation, réalisation des mises en production et SAV.
• Gestion de la documentation fonctionnelle et technique.
• Assistance à l'utilisation de solutions et participation aux séances d'affinage technique.
• Veille technologique régulière.
• Alimentation du backlog et analyse du patrimoine existant.

Developer – Big Data / Spark (Sierra)

1. Concevoir, développer et maintenir des pipelines de données en Spark (Java).
2. Migrer des traitements legacy vers des architectures Big Data modernes.
3. Assurer la maintenance des traitements existants (SQL / PL‑SQL).
4. Garantir la performance, la robustesse et la qualité des données.
5. Participer activement aux activités de RUN et à l’amélioration continue.
6. Partage de connaissances, mise à jour du référentiel documentaire.

Data Engineer – BI & Visualisation (Verbatim Unlock)

• Conception, développement et déploiement d’applications interactives (Streamlit, Tableau).
• Modélisation et transformation des données avec dbt et Snowflake.
• Optimisation des performances des requêtes et des chargements.
• Gestion des ressources cloud (Snowflake) pour équilibrer coûts et performances.
• Conception UI/UX pour interfaces utilisateur intuitives.
• Spécification technique pour le passage en production.

Tech Lead – Spark/Scala (Nantes)

• Piloter la migration vers Spark/Scala.
• Définir les choix techniques et accompagner les équipes de développement.
• Mettre en place les stratégies de tests, de validation et de CI/CD.
• Garantir la conformité des traitements migrés.
• Assurer le déploiement en production, la production de nouveaux traitements.
• Contribuer à l'utilisation d’IA pour automatiser des parties de la migration.

Location & Terms

Les missions se déroulent principalement sur site avec présence obligatoire 3 jours par semaine (ex. mardi et jeudi) pour les rôles basés à Vannes, Nantes ou Lyon. Certains postes offrent la possibilité de télétravail partiel.

La durée des missions est généralement de 2 ans, avec un démarrage dès que possible.