Data Engineer | Spark/PySpark, Hadoop, Big Data

Avantages du CDI Wolsome

• 25 jours de congés payés
• 8 à 11 jours de RTT
• 100% du titre de transport pris en charge par Wolsome
• 14€ de tickets restaurants (carte Swile) pris en charge à 50% par Wolsome
• Mutuelle d'entreprise ALAN avec 50% pris en charge par Wolsome
• Des formations sur-mesure (via UDEMY ou via nos experts Référents)

Nous recherchons un(e) Data Engineer expérimenté(e) pour intervenir sur un projet stratégique de gestion et valorisation de données au sein d’un grand groupe du secteur financier.

Vous contribuerez à la mise en place, l’optimisation et l’industrialisation des pipelines de traitement de données dans un environnement Big Data exigeant et technique

• Concevoir et développer des pipelines d’ingestion de données (batch et streaming)
• Implémenter des traitements de données via Spark (Scala ou PySpark)
• Maintenir et faire évoluer les outils de gestion des pipeline de données (Pyspark + shell scripting)
• Automatiser et mettre en production les flux de données dans le respect des standards techniques
• Collecter, transformer, normaliser et agréger les données à partir de sources variées
• Mettre en place des moyens de restitution via fichiers, API ou tableaux de bord
• Participer à la gestion des environnements de production (suivi, monitoring, optimisation)
• Contribuer à l’amélioration continue des architectures et des performances des traitements
• Collaborer avec les équipes projets, techniques et métiers sur les besoins en données
• Vous êtes diplômé(e) d’un Bac+5 en école d’ingénieur ou équivalent universitaire.
• Vous avez entre 4 et 7 ans d’expérience en tant que Data Enginee r.
• Vous maîtrisez la plateforme Hadoop , ainsi que le développement en Python/Spark/Scala.
• La maitrise de GCP est un véritable atout.
• Vous connaissez bien les environnements Big Data complexes .
• Vous avez une bonne maîtrise des chaînes d’intégration CI/CD.
• Vous êtes autonome et rigoureux(se) dans votre travail.
• Vous savez collaborer efficacement avec des équipes transverses.

Dans le cadre de notre politique Diversité et Inclusion, tous nos métiers sont ouverts aux personnes en situation de handicap. Wolsome s'engage à assurer l'égalité des chances.