En bref
- La mission porte sur l’évaluation, la sécurité et l’observabilité des applications LLM.
- La formation s’adresse aux ingénieurs IA, développeurs LLM, responsables techniques et équipes de mise en production.
- Les sujets couvrent les jeux de tests, les systèmes RAG, les injections de prompt et le suivi en production.
- Les interventions sont proposées en présentiel ou à distance dans la région Béni Mellal Khénifra.
- Il s’agit d’une mission de formation proposée par FormaGroup.
Villes concernées
Béni MellalKhouribgaKhénifraFquih Ben SalahOued Zem
Votre rôle chez FormaGroup
Cette mission s’adresse à un professionnel capable d’accompagner des équipes techniques dans la conception de tests, l’identification des risques et le suivi d’applications utilisant des modèles de langage. Les sessions peuvent être organisées en présentiel ou à distance.
Missions confiées
- 1Présenter les principaux risques et modes de défaillance des applications LLM, puis aider les participants à relier ces risques à leurs cas d’usage.
- 2Encadrer la conception de jeux de tests et de jeux de référence représentatifs pour vérifier le comportement d’une application.
- 3Faire pratiquer l’évaluation de la pertinence, de la fidélité et de la robustesse des réponses, notamment pour des systèmes RAG.
- 4Animer des exercices de repérage des injections de prompt, de filtrage des entrées et de prévention de la divulgation de données.
- 5Expliquer comment protéger les données et contrôler les sorties produites par les applications LLM.
- 6Guider la mise en place de traces et d’indicateurs d’usage, ainsi que le suivi des versions en production.
- 7Accompagner la préparation d’un plan de mise en production et la documentation des limites et procédures de contrôle ou d’incident.
Programme de formation à animer
Une maîtrise pédagogique des thèmes suivants est attendue :
Module 1Risques et modes de défaillance des applications LLM
Module 2Conception de jeux de tests et jeux de référence
Module 3Évaluation des réponses et des systèmes RAG
Module 4Injection de prompt et filtrage des entrées
Module 5Protection des données et contrôle des sorties
Module 6Traçage, observabilité et suivi des versions
Module 7Plan de mise en production et procédure d’incident
Objectifs pédagogiques
Voir le programme complet de la formation →- Définir un jeu de tests représentatif pour une application LLM
- Mesurer la pertinence, la fidélité et la robustesse des réponses
- Repérer les risques d’injection de prompt et de divulgation
- Mettre en place des traces et indicateurs d’usage
- Documenter les limites et les procédures de contrôle
Public à former
Vous formerez des ingénieurs IA, des développeurs d’applications LLM, des responsables techniques et des équipes chargées de la mise en production. Le programme vise des professionnels qui souhaitent tester, sécuriser et suivre des applications utilisant des modèles de langage.
Approche pédagogique attendue
- Vous alternerez apports structurés et exercices de conception de jeux de tests représentatifs pour des applications LLM.
- Vous ferez pratiquer l’évaluation des réponses et des systèmes RAG au regard de leur pertinence, de leur fidélité et de leur robustesse.
- Vous proposerez des cas d’analyse autour des injections de prompt, de la divulgation de données et du contrôle des sorties.
- Vous accompagnerez la mise en place de traces et d’indicateurs, puis la préparation de procédures de production et d’incident.
- Vous aiderez les participants à documenter les limites et les méthodes de contrôle de leurs applications.
Profil recherché
- Vous maîtrisez l’évaluation, la sécurité et l’observabilité des applications LLM et pouvez expliquer leurs enjeux à des équipes techniques.
- Vous savez enseigner la conception de jeux de tests, l’évaluation de systèmes RAG, la détection des injections de prompt et les pratiques de protection des données.
- Vous êtes en mesure de présenter des méthodes de traçage, de suivi des versions et de contrôle en production, ainsi que d’en faire pratiquer les principes.
- Vous avez une expérience de la formation d’adultes et savez adapter vos explications à des ingénieurs IA, développeurs LLM, responsables techniques et équipes de mise en production.
Atouts appréciés
- Une pratique de la préparation de plans de mise en production et de procédures d’incident pour des applications LLM serait appréciée.
- La capacité à illustrer les notions par des cas pratiques issus de situations de développement ou de mise en production serait un atout.
Disponibilité et mobilité
Disponibilité
À convenir avec FormaGroup.
Mobilité
Mission couvrant la région Béni Mellal Khénifra, notamment Béni Mellal, Khouribga, Khénifra, Fquih Ben Salah et Oued Zem. Les interventions sont possibles en présentiel ou à distance.
Compétences clés
Évaluation des réponses LLMTests de systèmes RAGSécurité des applications LLMDétection d’injection de promptProtection des donnéesTraçage et observabilitéSuivi des versionsFormation d’adultes
Mots-clés de l’offre
#Évaluation LLM#Sécurité LLM#Observabilité LLM#Jeux de tests#Systèmes RAG#Injection de prompt#Protection des données#Mise en production
Critères de l’annonce
- Secteur d’activité
- Informatique et intelligence artificielle
- Région
- Béni-Mellal-Khénifra
- Travail à distance
- Hybride possible
- Type de contrat
- Mission indépendante (freelance)
- Disponibilité
- À convenir
- Niveau d’expérience
- Expérience entre 2 ans et 5 ans - Expérience entre 5 ans et 10 ans
- Niveau d’étude
- Bac+3 - Bac+5 et plus
- Langues
- Français
Vous souhaitez transmettre des méthodes concrètes pour tester, sécuriser et suivre des applications LLM ? FormaGroup vous propose de contribuer à cette formation dans la région Béni Mellal Khénifra.
Postuler maintenant