Data Engineer Databricks

Vos missions

• Conception et développement de solutions sur Microsoft Azure (Azure Data Factory, SQL Database, Synapse) pour des projets à forte valeur ajoutée.

• Developpements Azure Databricks: Unity Catalog, Lakehouse, Lakeflow, Databricks Apps,

• Participer à l’industrialisation de la donnée via des processus ETL/ELT en PySpark, SparkSQL, Python, SQL, Scala, DBT , avec la mise en œuvre de CI/CD (github, devops, Databricks Bundles) , de l’orchestration, du data management , de l’architecture et de la sécurité .

• Travailler au sein d’équipes pluridisciplinaires : chefs de projet, architectes, ingénieurs, data analystes… dans un esprit de collaboration et de partage.

• Participer aucadrage de projets : recueil des besoins, modélisation des données, définition de la solution technique, et accompagnement à lamaîtrise d’ouvrage .

• Contribuer aumanagement de projets et auxchoix d’orientations technologiques des clients.

• Participer à laconception d’offres innovantes autour de l’UX BI, BI Self-service, Data Engineering, Data Management… et à leurpromotion .

• Rédiger et soutenir des propositions sur mesure répondant aux besoins spécifiques de nos clients.

• Assurer uneformation continue et lepartage de connaissances avec vos collègues, notamment via notre organisme de formation interne.

Formation

Bac +5 en Ingénierie, Data engineer, ML, Mathématiques, Statistiques ou Informatique.

Compétences techniques

Maîtrise des technologies Microsoft Azure, Azure Databricks. Expérience avec les langages SQL et Python, ainsi que les frameworks de traitement de données comme PySpark et SparkSQL. Maîtrise Microsoft Azure : Administration, Azure Data Factory, Azure DevOps, CI/CD, Microsoft Fabric. Maitrise de Databricks: Administration, gestion des Catalogues, ETL.

Compétences en gestion de projets data, architecture et data management

Compétences en gestion de projets data, architecture et data management.

Qualités humaines

Esprit d’équipe et envie d’apprendre et d’évoluer dans un environnement collaboratif. Excellente capacité à communiquer et à partager vos connaissances. Rigueur, organisation, proactivité et capacité d’analyse.