RAG Formation · Leçon · Génération de réponses étayées
Refus, incertitude et maîtrise des hallucinations
Définir un comportement sûr lorsque le corpus ne contient pas la réponse attendue par la QA, la conformité ou l’audit.
$ lesson --status
▸ course RAG Formation
▸ lesson 12 / 16
▸ phase Génération de réponses étayées
▸ status Terminé
● build → measure → learnLeçon autonome
Apprenez la leçon complète et vérifiez votre compréhension ici.
Le contenu des 16 leçons de RAG Formation est complet. Cette page contient le contenu complet, les références locales et des exercices immédiats dans le navigateur.
Le gain concret de cette leçon
À la fin de cette leçon, vous disposerez d’une politique de refus accompagnée de cas de test couvrant l’absence de preuve, les preuves partielles ou contradictoires et les questions ambiguës.
Regarder la vidéo
1 · La compétence
Prenez les six questions d’évaluation sans réponse possible et classez chaque réponse dans l’une de trois catégories : refus sûr, réserve dangereuse ou hallucination manifeste.
- Refus : indique clairement que les preuves indexées n’établissent pas le fait demandé.
- Incertitude : précise avec soin ce que les preuves étayent et ce qui reste une question ouverte.
- Hallucination : affirmation réelle et substantielle que les preuves autorisées n’étayent pas.
2 · Exécuter la boucle de preuve
cd demo
python3 eval.py run --mode answer --workspace meridian_demo --category unanswerable --tag lesson-12-refusalSuivez la précision des refus et le taux d’hallucination comme deux chiffres distincts, puis conservez un exemple de réponse ayant franchi la limite.
Attention : une réponse fluide et partielle peut tout de même être une hallucination dès qu’elle introduit une affirmation non étayée qui a de l’importance.
3 · Fiche de décision
| Preuve de référence | Une hypothèse/modification | Indicateur | Contrôle de régression | Conclusion délimitée |
|---|---|---|---|---|
| _____ | _____ | _____ | _____ | _____ |
4 · Exercice de récupération
Question : Vos preuves ne couvrent qu’une partie de la demande. Quelle est l’attitude sûre ?
Lien avec la mission
Dans les activités de QA, d’audit et de réglementation, un simple « Je ne peux pas le confirmer à partir des documents indexés » vaut mieux qu’une réponse assurée et inventée.
5 · Livrable et prochaine action
- Enregistrez la sortie de commande ou un rapport.
- Complétez la fiche de décision.
- Notez un cas d’échec et un élément à vérifier ensuite.
À la fin de cette leçon, vous disposerez d’une politique de refus accompagnée de cas de test couvrant l’absence de preuve, les preuves partielles ou contradictoires et les questions ambiguës.
Prochaine étape : leçon 13 — isolation des défaillances et dégradation progressive.
Vous avez des questions ? Posez-les-moi sur les preuves, l’indicateur, le cas d’échec ou l’expérience que vous souhaitez tenter ensuite. Je suis votre enseignant pour cette formation.