ingenieur informatique HADOOP - PYSPARK (IT)

INGENIEUR HADOOP - PYSPARK Démarrage : ASAP Durée : 2 ans Localisation : Ile de France (Proche Paris) Télétravail : 50% Mission : ? Mettre en ?uvre de nouvelles ingestions de données, data prep/transformation ? Maintenir et faire évoluer nos outils de gestion des pipelines de données (Pyspark + shell scripting) ? Adresser à l'équipe devops les demandes relatives aux évolutions de la plateforme Le consultant idéal devra posséder les compétences suivantes : ? Excellente maîtrise de la plateforme Hadoop, ainsi que du développement en Python/Py

Spark et Hive. Une bonne connaissance de SQL, GIT, Jenkins, Jira, et du shell scripting sous Unix/Linux est également nécessaire. ? Maîtrise de l'anglais, tant à l'écrit qu'à l'oral, pour faciliter les échanges avec nos interlocuteurs basés à l'étranger qui représentent une part importante de notre équipe IT. ? Expérience dans des environnements agiles, en particulier avec la méthodologie SCRUM. ? Connaissances et expériences avec des outils et technologies tels que Indexima, Alteryx, Altair, GCP/Big Query, ainsi que des bibliothèques Python orientées API seraient des atouts appréciables. ? Capacité à rédiger des spécifications techniques claires et précises. ? Dynamisme, excellent relationnel et capacité à travailler en équipe. ? Force de proposition et curiosité technique pour explorer de nouvelles solutions et technologies Profil candidat: Profil : Nous recherchons un profil Hadoop / Py

Spark qui sera en charge, en lien avec l'équipe de production applicative / devops, de mettre en ?uvre techniquement les évolutions du datalake.