Data Engineer / Expert Hadoop (Société Générale – GCOO)

Contexte

Société Générale recherche un Data Engineer / Expert Hadoop pour assurer l'administration, la maintenance et l'évolution de sa plateforme Big Data Cloudera CDP . La mission porte sur la fiabilité, la performance, les montées de version et l'automatisation de l'infrastructure Big Data.

Missions principales

• Administrer et maintenir les clusters Hadoop Cloudera CDP .

• Participer aux montées de version des composants Hadoop.

• Résoudre les incidents techniques complexes et intervenir en task force.

• Automatiser les déploiements, le patching et l'exploitation avec Ansible et Terraform/Terragrunt .

• Garantir la disponibilité, la performance et la sécurité de la plateforme.

• Gérer les changements (tests, rollback, mise en production).

• Collaborer avec Cloudera et les équipes internes.

• Rédiger la documentation technique.

Stack technique

• Big Data : Hadoop, Cloudera CDP 7.1.9, Spark

• Ingestion : Kafka, Apache NiFi

• Automatisation : Ansible, Terraform, Terragrunt, AWX

• Versioning / Scripting : Shell, Git, GitHub