Data Engineer
Licorne Society a été missionné par une startup, qui propose une solution B2B innovante conçue spécifiquement pour le secteur de l'hôtellerie, pour les aider à trouver leur Lead Data Engineer. Résumé du poste
Nous recherchons un Lead Data Engineer hautement qualifié pour rejoindre notre équipe et contribuer à l'évolution de notre infrastructure de données pour le lancement d'un nouveau produit. Dans ce rôle clé, vous superviserez le développement et l'optimisation de nos pipelines et architectures de données, en garantissant que les données sont ingérées, transformées et activées de manière efficace à travers divers systèmes. Vous travaillerez en étroite collaboration avec des équipes transversales, y compris les analystes de données, les data scientists et les équipes produits, afin d'utiliser les données pour améliorer les processus internes et les fonctionnalités des produits. Responsabilités
- Concevoir, construire et maintenir une infrastructure de données évolutive et performante pour répondre aux besoins de l'entreprise.
- Définir et mettre en œuvre les meilleures pratiques pour l'architecture des données, le stockage et les pipelines de traitement.
- Optimiser l'ingestion, la transformation et l'activation des données pour garantir l'efficacité et la scalabilité.
- Piloter la stratégie des entrepôts de données et des data lakes, en assurant une intégration fluide des données structurées et non structurées.
- Diriger le développement des workflows ETL en utilisant des outils comme Airflow, dbt, Apache Spark ou Ka
Wa.
- Implémenter et gérer des pipelines de traitement des données en batch et en temps réel.
- Améliorer la fiabilité, la qualité et l'accessibilité des données grâce à une surveillance et des journaux robustes.
- Développer et faire respecter les politiques de gouvernance des données, en assurant la conformité avec les normes de sécurité et de confidentialité (RGPD).
- Utiliser les services cloud pour un traitem