Data Engineer Databricks F/H
En tant que Data Engineer Databricks vous participerez à la définition de l’architecture de la data platform et du Datawarehouse/Data Lake pour l'un de nos clients dans le secteur des transports.
- Concevoir et développer des nouvelles fonctionnalités sur des applications hébergées par les plateformes Data.
- Développer et maintenir des pipelines de données performants (batch & streaming) et participer à toutes les étapes de traitement des données du niveau bronze au niveau gold.
- Garantir la sécurité, la robustesse et la fiabilité des pipeline de données en veillant aux enjeux de performance, d’accessibilité et d’intégrité des données.
- Contribuer à l’implémentation d’un Data Lab pour accélérer les usages Data & IA.
- Mettre en place et industrialiser des chaines CI/CD.
- Participer aux mises en production et au support en cas d’incident majeur.
- Travailler aux côtés de Data Product Owner, Data Architect et de BI & Analytics Engineer.
- Participer aux cérémonies agiles organisées par la squad : daily, sprint planning, sprint review, sprint
- Effectuer une veille technologique continue sur de nouvelles solutions et tendances Data. Traitements distribués & language : Spark/ Scala Plateforme Data : Databricks Cloud : Azure Stckage : S3 BI : Power BI Data
Ops / Dev
Ops : Git, Ansible, Kubernetes, Datadog Sécurité & gouvernance : IAM, Alerting, Monitoring, Fin
Ops Astrelya est un cabinet de conseil franco/suisse, en très forte croissance depuis sa création en 2017, spécialisé dans la transformation digitale, l’excellence opérationnelle et l’innovation technologique. Il est composé de 300 experts passionnés. Le cabinet accompagne ses clients sur l’ensemble du cycle de transformation, depuis la phase de cadrage jusqu’à la mise en œuvre opérationnelle, avec une expertise forte en Data/IA, Cloud, Dev
Ops et méthodes agiles. Astrelya se distingue par un modèle fondé sur la proximité, la confiance et une culture humaine forte, qui place les collabor...