Contenu de la formation
La formation structure une démarche de tests adaptée aux assistants et applications documentaires. Les participants définissent des critères, des jeux de requêtes et des méthodes d’analyse des résultats.
Les participants apprennent à rendre visibles les étapes d’exécution d’une application LLM. La session montre comment exploiter les traces pour diagnostiquer les écarts de qualité.
Cette formation aide les équipes à passer d’évaluations ponctuelles à un processus reproductible. Elle couvre la sélection des cas de test et l’interprétation des indicateurs.
Pour qui ?
- Ingénieurs IA
- Data scientists
- Développeurs
- Architectes logiciels
- Responsables de produits IA
Comment se déroule la formation
- 1Définir les risques et attentes de qualité du cas d’usage
- 2Constituer un échantillon de requêtes représentatives
- 3Choisir les critères d’évaluation adaptés
- 4Collecter traces, réponses et éléments de contexte
- 5Analyser les écarts et identifier leurs causes possibles
- 6Formaliser un plan d’amélioration et de suivi
Les formateurs de cette formation
Questions fréquentes
Cette formation convient-elle à une application déjà en production ?
Elle peut être adaptée à une application existante comme à un projet en phase de prototype, selon les éléments partagés avant la session. FormaGroup organise l’échange de cadrage avec le formateur.
Faut-il disposer d’un grand volume de données de test ?
Non, un premier protocole peut être construit à partir d’un ensemble ciblé de requêtes représentatives. L’objectif est d’établir une démarche utile et reproductible.
La formation aborde-t-elle la sécurité des applications LLM ?
Le programme porte principalement sur l’évaluation et l’observabilité. Les enjeux de fiabilité et de contrôle des réponses peuvent être intégrés selon le contexte défini avec FormaGroup.
Dans le catalogue FormaGroup
FormaGroup organise cette formation dans votre ville ou à distance : dates, groupe ou session individuelle, attestation de formation.
S’inscrire