Description et livrables de la prestation Dans le cadre de l?accélération actuelle sur les sujets d?IA générative du client, la guilde de test batî actuellement une offre de service test permettant de répondre aux enjeux performance et qualité des différents Use cases développés ainsi qu?aux aspects robustesse des modèles développés. Pour cela, nous devons mettre en place une approche sur les tests liés aux vulnérabilités des modèles et se doter d?un outil d?automatisation interne en mode CICD pour checker régulièrement ses modèles dans les différents environnements. Aujourd?hui, les tribus passent par un partenaire externe pour réaliser ces tests de vulnérabilités. L?objectif étant de reprendre l?activité en interne, nous devons nous doter d?expert pouvant nous accompagner sur l?outillage ainsi que la mise en place d?une approche tests de vulnérabilités. Nous avons besoin d'un consultant expert IA pour : - Définir une approche de test robuste pour tester les vulnérabilités des IA (identifier quelles tests de vulnérabilités adapté pour tels uses cases, faire de la veille) - Mettre en place un outil permettant tester de manière continue les chatbots (tests fonctionnels et vulnérabilités) : faire de la veille, benchmarK, POC de solution etc