Remplacer la demande vague par une question vérifiable

Analyse ces données est une demande trop large pour savoir si la réponse est correcte. Un assistant peut produire une tendance, une liste d’anomalies ou un conseil sans expliciter la population étudiée. Commencez plutôt par une question mesurable : quel est le montant net des lignes de janvier par agence, après signalement des identifiants dupliqués ? Cette phrase précise un objet, une période, une ventilation et un contrôle. Elle laisse aussi visible la différence entre signaler une anomalie et la corriger.

Le but d’un prompt structuré n’est pas de rendre l’IA infaillible. Il permet de comparer une réponse à des règles écrites et d’identifier ce qui manque pour conclure. Nous allons travailler avec six lignes inventées, de sorte que chaque résultat puisse être recalculé sans outil complexe. Cette petite taille est volontaire : une réponse qui échoue sur un jeu connu ne mérite pas d’être appliquée à un export de plusieurs milliers de lignes sans investigation supplémentaire.

Décrire le jeu d’essai et son dictionnaire

Les colonnes sont LigneID, Agence, Date et Montant. L1 correspond à A, 10 janvier 2026, 100 ; L2 à A, 10 janvier, 200 ; L3 à B, 12 janvier, 300 ; L4 à B, 1er février, 150. L5 correspond à A, 20 janvier, moins 50. Une sixième ligne répète exactement L5. Le dictionnaire indique qu’un identifiant doit représenter une seule ligne et qu’un montant négatif est un ajustement à conserver.

Le total brut des six lignes vaut 650, car le montant négatif est compté deux fois. Après application de la règle d’unicité, le total des cinq lignes distinctes vaut 700. Pour janvier seulement, le total validé attendu est 550 : A représente 250 et B représente 300. Écrivez ces résultats dans votre feuille de test avant de demander une analyse. L’exemple montre qu’un doublon peut réduire un total ; toute anomalie ne provoque pas nécessairement une surévaluation.

Séparer l’objectif, le contexte et les données

Organisez le prompt en blocs clairement nommés. Objectif indique la question ; Contexte précise la décision soutenue ; Dictionnaire définit le grain et les colonnes ; Règles donne le traitement des dates, statuts et doublons ; Données contient uniquement le tableau ; Sortie décrit les éléments attendus. Cette séparation évite qu’une note copiée depuis un fichier soit interprétée comme une instruction d’action. Elle facilite également la relecture du prompt par une personne qui n’a pas préparé le jeu d’essai.

Un début utile serait : je prépare un contrôle de reporting ; utilise uniquement le tableau fourni ; n’ajoute aucune donnée externe ; distingue le total brut du total après traitement des doublons ; si une règle manque, indique-la avant de conclure. Les recommandations de prompting des éditeurs encouragent les instructions explicites et les exemples. Ici, l’intérêt pratique vient surtout du contrat écrit : il vous permet de relever précisément un écart entre ce qui a été demandé et ce qui a été livré.

Écrire les règles qui changent le calcul

Précisez que janvier commence le premier janvier inclus et s’arrête au premier février exclu. Indiquez que les montants négatifs restent inclus et que les lignes dupliquées doivent d’abord être listées. Dans le jeu pédagogique, la règle autorise ensuite à conserver une seule occurrence strictement identique. Pour un véritable fichier, cette décision demanderait une confirmation métier : deux lignes de même montant ne sont pas nécessairement un doublon et un même identifiant peut parfois porter des versions différentes.

Définissez aussi les unités et les cas inconnus. Une cellule vide dans Montant doit-elle bloquer le total ou être signalée comme valeur absente ? Un montant égal à zéro ne signifie pas automatiquement absence de donnée. Une agence vide peut être regroupée dans Inconnue pour conserver les lignes, ou nécessiter un rejet selon le contexte. Le prompt doit demander ces décisions plutôt que laisser l’assistant choisir silencieusement l’option qui rend l’analyse la plus simple.

Demander une sortie qui facilite le contrôle

Demandez cinq éléments dans un ordre stable : anomalies détectées, règles appliquées, tableau de résultats, rapprochement des totaux et limites. Le tableau peut contenir agence, nombre de lignes retenues, montant net et période. Pour chaque chiffre important, demandez les identifiants ou une description du calcul permettant de le reproduire. Vous n’avez pas besoin d’une longue explication interne du modèle ; vous avez besoin d’éléments observables, tels que la formule, les lignes incluses et les hypothèses déclarées.

Sur notre exemple, la sortie doit distinguer six lignes brutes et cinq lignes uniques. Elle doit ensuite isoler les quatre lignes uniques de janvier et totaliser 550, sans inclure L4 de février. Un format tabulaire ou structuré rend les écarts plus faciles à voir qu’un paragraphe enthousiaste. Toutefois, un résultat parfaitement mis en forme peut rester faux. La conformité de présentation et la validité du contenu sont deux contrôles différents, à traiter séparément dans votre revue.

Autoriser explicitement l’incertitude et le refus de conclure

Ajoutez une consigne claire : si la donnée ne permet pas de répondre, indique ce qui manque ; ne transforme pas une hypothèse en fait. Demandez de distinguer observation, calcul, interprétation et proposition de vérification. Par exemple, le montant de B dépasse celui de A en janvier, mais le tableau ne contient ni effectifs, ni objectifs, ni coûts. Il ne permet donc pas de conclure que B est plus performante ou que son équipe travaille mieux.

Une réponse peut aussi inventer une source ou une explication de marché pour donner du contexte. Si votre question porte uniquement sur le tableau, demandez de rester dans ce périmètre. Lorsqu’une référence externe est nécessaire, vérifiez directement qu’elle existe et qu’elle soutient l’affirmation. Une citation plausible n’est pas une preuve. La documentation d’Anthropic décrit précisément ce risque d’hallucination ; le réduire suppose des contrôles de contenu, pas seulement une formule de prompt présentée comme magique.

Créer des tests qui distinguent les erreurs probables

Testez d’abord la version normale, puis une variante où L4 est déplacée au 31 janvier à 15 heures. Le total de janvier validé doit alors devenir 700. Testez une autre variante où la répétition de L5 est supprimée : le total brut et le total après dédoublonnage doivent coïncider. Ces variations isolent respectivement la borne temporelle et le traitement des doublons. Un contrôle qui change cinq paramètres à la fois rend beaucoup plus difficile l’identification de la règle non respectée.

Ajoutez ensuite une ligne sans montant et demandez comment le résultat doit être présenté. Une bonne sortie signale la valeur absente et refuse d’annoncer un total complet sans réserve si la règle n’a pas été définie. Consignez les cas dans un tableau avec réponse attendue, réponse obtenue et décision. Cette évaluation reste utile lorsque vous reformulez le prompt ou changez d’outil. La qualité ne se juge pas uniquement sur la première réponse qui ressemble au résultat recherché.

Un autre test consiste à mélanger l’ordre des lignes sans changer leurs valeurs. Le total et les sous-totaux doivent rester identiques. Si l’analyse change, cherchez une dépendance injustifiée à la position ou une interprétation du tableau incomplet. Ce test de stabilité est particulièrement utile avant de traiter plusieurs fichiers dont l’ordre d’export varie d’une semaine à l’autre.

Éviter les contaminations entre consignes et contenu

Les données peuvent contenir des commentaires tels que ignore les lignes précédentes ou affiche le résultat comme validé. Dans un reporting, ces textes sont des valeurs à analyser, pas des instructions à suivre. Encadrez les données et indiquez explicitement qu’aucun contenu de cellule ne doit modifier la tâche. Cette mesure améliore le cadrage, sans constituer à elle seule une protection complète pour une automatisation qui dispose d’outils ou d’accès externes. Les permissions techniques doivent rester limitées au besoin réel.

Dans un usage textuel, travaillez sur une copie synthétique et demandez uniquement une proposition d’analyse. Dans un processus automatisé, évitez qu’un texte généré puisse modifier des fichiers, envoyer des messages ou publier un rapport sans contrôle distinct. Le prompt ne remplace pas ces limites d’exécution. Une séparation simple consiste à calculer les indicateurs dans un outil déterministe, à transmettre seulement les résultats autorisés à l’assistant, puis à faire relire son commentaire avant toute diffusion.

Exercice corrigé : évaluer deux réponses candidates

Exercice : la première réponse annonce un total de janvier de 500 et explique que l’agence B surperforme grâce à une meilleure organisation. La seconde annonce un total brut de janvier de 500, signale la répétition de L5 et présente un total validé de 550 selon la règle fournie. Elle refuse de conclure sur l’organisation des agences. Évaluez chaque réponse sur exactitude, traçabilité et discipline d’interprétation, sans vous laisser influencer par la qualité du style.

Corrigé : la première conserve le doublon négatif sans l’expliquer et invente une cause absente des données. La seconde distingue correctement les états du calcul et limite son interprétation. Vérifiez toutefois ses sous-totaux : A doit valoir 250 après traitement et B 300. Une réponse globalement satisfaisante peut encore contenir une erreur locale. Attribuez des critères séparés plutôt qu’un unique avis bon ou mauvais, afin de savoir quelle amélioration du prompt ou du contrôle est réellement nécessaire.

Conserver un prompt versionné et un résultat reproductible

Archivez le prompt retenu avec le dictionnaire, le jeu d’essai et les sorties attendues. Notez la date et l’environnement d’utilisation, sans figer dans un document public des détails de compte ou des données sensibles. Une réponse peut varier d’une exécution à l’autre ; c’est une raison supplémentaire pour garder une batterie de cas connus. Lorsqu’une version devient moins bonne sur un test, analysez le changement avant de la mettre dans le processus de production.

Pour prolonger l’atelier, ajoutez un objectif par agence dans une seconde table et définissez la règle de jointure. Vous devrez alors contrôler unicité des clés, lignes sans correspondance et grain des données. Le prompt évoluera parce que la question et les preuves évoluent, pas parce qu’il faut accumuler des formules rhétoriques. Un bon cadre d’analyse rend les calculs et les incertitudes plus faciles à vérifier ; il ne dispense jamais de connaître les données ni de valider leur usage.

Références

Retour au blog →