Data Engineer python/ Big Data/ AWS/ Redshift/ Linux / Energie (H/F) (IT) / Freelance
Nous recherchons pour le compte de notre client dans l'énergie, un data Engineer
Objectifs :
Participer au développement des assets de la nouvelle plateforme de données.
Participer au cadrage et au lancement des projets d'ingénierie et d’intelligence artificielle.
Prise en main des sujets pilotes et d’assurer le Run
La conception, la modélisation et l’optimisation des requêtes Redshift est un point clé dans cette mission
Missions :
Vous participer à la construction de la data plateform dans sa deuxième phase permettant de consolider le socle et mettre à disposition les moyens technique pour exploiter la donnée
Vous participez à l’étude opérationnelle de cadrage et d’architecture en anticipant les différentes contraintes avec les référents de l’équipe.
Vous serez amené à réaliser des POC et de spiker le backlog.
Vous complétez l’équipe avec vos compétences en ingénierie de données et en développement (scripting python, d’expertise sur les API, les tests, les bonnes pratiques, etc.)
Vous consacrer votre temps à travailler avec un squad Data Métier, de proposer des solutions technique pour les clients associé, d’assurer le Run et de développer la plateforme associée, et, ce, toute en respectant les consignes d’architecture
Participer à la mise en place des projets d’AI engineering - Savoir maîtriser les coûts des services est un Must pour ce poste et être force de proposition
Profil candidat:
Un minimum de 5 ans d'expérience dans le domaine de la Data engineering ou équivalent
Diplôme d’ingénieur dans un domaine orienté Data ou équivalent
Une première expérience dans le domaine des services énergétique est une préférence
Excellentes compétences en Configurations linux et les liaisons des outils et/ou des pipelines
Savoir benchmarker les solutions technique
Test sur les valeurs extrêmes et les limites des solutions
Excellentes Compétences sur le Cloud : AWS (Redshift, RDS, Lambda, SQS, SNS, Api Gateway, etc.), GCP
Excellentes compétences en DEV : Python, API (Fast ou Flask), GraphQL, Airflow, Linux, Git (Code review, Merge Request, etc.), Docker
Excellentes compétences DevOps : Docker, Terraform, CI/CD, Gitlab, Gitlab CI, etc.
excellentes compétences DATA : BDD, SGBDR, DataWarehouse,SQL, NOSQL et BIGDATA : HDFS, SPARK, Hadoop, etc.
Data Science (Modélisation, MLOPS)
Notions : Scalabilité, Clustering, Data Mesh, Data Virt, Data Qualité, etc.
Analytique : Tableau, Dataiku, Alteryx, etc.