Yi SHENFull-stack & solutions IA

Paris • Singapour • Shanghai

RAG Formation · Leçon · Génération de réponses étayées

Des prompts qui répondent uniquement à partir des preuves

Transformer « répondre uniquement à partir des preuves » en un contrat de prompt observable et testable.

$ lesson --status
▸ course RAG Formation
▸ lesson 10 / 16
▸ phase Génération de réponses étayées
▸ status Terminé
● build → measure → learn

Leçon autonome

Apprenez la leçon complète et vérifiez votre compréhension ici.

Le contenu des 16 leçons de RAG Formation est complet. Cette page contient le contenu complet, les références locales et des exercices immédiats dans le navigateur.

Le gain concret de cette leçon

Une règle de prompt versionnée qui précise comment utiliser les preuves, gérer les faits manquants, citer les sources et savoir quand refuser.

Regarder la vidéo

1 · La compétence

Prenez une réponse erronée ou partiellement correcte de la leçon 4, comparez-la au prompt actuel et notez précisément une règle qui aurait permis de la corriger.

  • Génération ancrée : le modèle répond à partir des preuves que vous lui fournissez, et non de ce qu’il « sait » déjà.
  • Hiérarchie des instructions : vos règles système et développeur déterminent ce que le modèle peut faire lorsque les preuves sont insuffisantes ou contradictoires.
  • Contrat du prompt : une spécification testable du format de réponse, des conditions de refus, des citations et du traitement des preuves contradictoires.

Lecture principale : Optimiser la précision des LLM avec OpenAI

2 · Exécuter la boucle de preuve

cd demo
python3 eval.py run --mode answer --workspace meridian_demo --limit 10 --tag lesson-10-prompt-baseline

Choisissez une défaillance et notez : les preuves réellement disponibles, ce que le modèle a fait de dangereux avec elles, l’instruction à ajouter pour l’éviter et la catégorie d’évaluation à relancer.

Un prompt ne peut pas faire apparaître une source qui n’a jamais été récupérée : vérifiez la récupération et le contexte avant d’accuser la génération.

3 · Fiche de décision

Preuve de référenceUne hypothèse/modificationIndicateurContrôle de régressionConclusion délimitée
_________________________

4 · Exercice de récupération

Question : Le corpus ne contient pas le fait dont vous avez besoin. Que doit imposer un prompt correctement ancré au modèle ?

Lien avec la mission

Les lecteurs QA et réglementaires ont besoin de réponses suffisamment courtes pour être réellement auditées. Le prompt doit décrire le comportement sûr en termes explicites et mesurables, au lieu de laisser le modèle le deviner.

5 · Livrable et prochaine action

  1. Enregistrez la sortie de commande ou le rapport.
  2. Complétez la fiche de décision.
  3. Notez un cas d’échec et la prochaine vérification à exécuter.

Une règle de prompt versionnée couvrant l’utilisation des preuves, les faits manquants, les citations et les conditions de refus.

Prochaine étape : leçon 11 — conception des citations et fidélité aux sources.

Vous avez des questions ? Posez-les-moi sur les preuves, l’indicateur, le cas d’échec ou l’expérience à tenter ensuite : j’enseigne cette formation.