DÉVELOPPEUR BIG DATA (F/H)
Nos 35 référencements et bien d’autres à venir offrent un large champ de possibles !
Évidemment, nous privilégions les environnements innovants et donc organisés autour de méthodologies Agile voire de Clean Code.
Exemples de contexte mission :Contexte 1 : Développement d’applications de traitements parallèles, permettant d’appliquer des centaines de règles de gestion, d’agréger et calculer des métriques dans le but d’établir des bilans de stress tests financiers. Ces applications chargent leurs données issues de différentes sources (fichiers, base de données, HDFS etc…), ce qui nécessite aussi des pré-traitements de conformité.
Environnement technique : Java, Spark, Kafka, Postgre
SQL, Tera
Data, Shell
Contexte 2 : Développement de services dans le but de traiter et de gérer le flux entrant de données financières dans un environnement distribué. Cela comprend : le traitement des batchs, la maintenance du code legacy, la migration des services existants de On-Premise vers le Cloud et les API REST. Ces services doivent être performants pour répondre aux exigences de gestion des données financières.
Environnement technique : Java 8, Apache Hadoop, Apache Spark, Apache, Kafka, Apache HBase, Apache Hive, Apache Zeppelin, Apache Oozie, Postgresql, Asure Kubernetes Service (AKS), Azure Data Lake Storage (ADLS)