Validateur de Modèles IA / Model Risk Management (H/F) (IT)

Au sein du département Model Risk Management d'un acteur majeur du secteur financier, qui veille à la qualité et à la pertinence des modèles développés dans le groupe ainsi qu'au suivi du risque de modèle, nous recherchons un consultant pour renforcer les activités de validation indépendante (2? ligne de défense). L'équipe est notamment en charge de réaliser des benchmarks afin de tester les limites des modèles des entités auditées, incluant les modèles de data science et d'intelligence artificielle. Le consultant sera amené à : ? Réaliser la validation indépendante de modèles statistiques, de machine learning et d'IA générative ? Étudier et implémenter des benchmarks sur des systèmes multi-agents basés sur des LLM, dans le cadre de cas d'usage bancaires ? Analyser la performance, la stabilité et l'explicabilité des modèles ? Caractériser les erreurs, biais et limites des modèles évalués ? Documenter les travaux de validation et contribuer aux référentiels de gouvernance des modèles ? Restituer les conclusions auprès des équipes de modélisation et des instances de contrôle Profil candidat: Profil recherché : ? Bac+5 ou doctorat en mathématiques appliquées, statistiques, data science ou équivalent ? Expérience en modélisation ou validation de modèles en environnement bancaire ou assurantiel ? Solides compétences en machine learning et connaissance des LLM et systèmes multi-agents ? Maîtrise des méthodologies d'évaluation : métriques par tâche, analyse des erreurs, calibration ? Rigueur, indépendance de jugement et qualités rédactionnelles ? Anglais professionnel Technologies utilisées : Python · Frameworks ML (scikit-learn, XGBoost, Py

Torch) · LLM & systèmes multi-agents · Librairies d'évaluation de modèles · Notebooks & environnements de data science · Référentiels de gouvernance des modèles (exigences ACPR, cadre risque de modèle)