Expert Kafka - Confluent Platform H/F

Dans le cadre de la construction d'un socle d'échange de données, nous recherchons un expert Kafka / Confluent Platform pour accompagner notre client, un organisme de protection sociale.

Cette plateforme doit répondre aux besoins d'échange, de réplication et d'intégration de données du système d'information. Elle contribuera également au remplacement progressif de flux CDC, de traitements batch et d'un socle Web

Methods.

Vos responsabilités

• Concevoir et faire évoluer l'architecture Kafka / Confluent, du socle pilote vers une plateforme cible.
• Installer, configurer et administrer les clusters Kafka en production : brokers en mode KRaft, Schema Registry et workers Kafka Connect.
• Déployer et industrialiser des connecteurs Kafka Connect, notamment JDBC, Debezium, HDFS et Datastage.
• Accompagner la migration de flux CDC et batch vers des échanges temps réel.
• Sécuriser les flux et intégrer la gestion des habilitations au système d'information.
• Analyser les incidents complexes et optimiser les performances.
• Automatiser les déploiements et opérations récurrentes avec Ansible, Shell, Python et des pipelines CI/CD.
• Contribuer à la supervision de la plateforme avec Prometheus et Grafana.
• Rédiger la documentation d'architecture et d'exploitation, et transmettre vos connaissances aux équipes.