Un bon prompt décrit concrètement la tâche confiée au modèle et les conditions de réussite. Ajouter une formule particulière ne garantit pas de multiplier la qualité des réponses.
1. Définir d’abord les entrées et les sorties
Pour classer des demandes de clients, par exemple, précisez les catégories, la langue d’entrée et le traitement des cas ambigus. « Note les décisions, les responsables et les échéances séparément, et indique les informations absentes comme indéterminées » est plus facile à vérifier que « Fais un bon résumé ». Évaluez séparément le format de sortie et l’exactitude des faits.
2. Les critères que montrent les exemples
Des exemples associant une entrée au résultat souhaité peuvent transmettre les critères de la tâche. Ajoutez des cas limites et des entrées insuffisantes, pas uniquement des exemples faciles. Vérifiez aussi que les noms et les nombres des exemples ne sont pas réutilisés comme des faits concernant une nouvelle entrée.
3. Comparer les modifications
Comparez les versions du prompt sur le même ensemble d’entrées et notez les types d’erreurs. Distinguer omissions, informations inventées et défauts de format aide à repérer ce qu’il faut modifier. Une explication plus longue sollicitant le raisonnement ne prouve pas une meilleure exactitude : vérifiez séparément les fondements du résultat. Notez également les changements de modèle, de paramètres et d’entrées pour conserver des conditions de comparaison.
4. Exemple de structuration de notes de réunion
Imaginons cette note fictive : « Nous envisageons vendredi pour le déploiement. Minsu vérifiera l’état du serveur demain. La confirmation du calendrier attend l’accord de Jiyeon. » Présenter vendredi comme une échéance confirmée change un sens important, même si le texte est fluide. Définissez d’abord la tâche : « Consigner séparément les actions confirmées et les propositions », puis les champs : action, responsable, échéance, statut et preuve. Interdisez aussi de deviner les responsables et dates absents de la note.
Le résultat attendu distingue Minsu comme responsable du contrôle du serveur, demain comme échéance et l’attente d’approbation comme statut du déploiement. Sans date du jour en entrée, rien ne permet de convertir « demain » en date précise. Fournissez une date de référence ou demandez de conserver les dates relatives. Le responsable du déploiement, non indiqué, doit rester indéterminé. Cet exemple est un exercice de définition des critères de sortie, pas une citation de dossiers d’entreprise ni de résultats expérimentaux.
Un prompt est plus facile à examiner s’il décrit le périmètre des données et les règles de transformation, au lieu de se limiter à « Tu es un excellent assistant ». Demandez par exemple : « Utilise uniquement les notes suivantes, ne transforme pas les propositions en décisions confirmées et indique la phrase justificative à côté de chaque action. » Le but est de permettre à une personne de vérifier la correspondance entre notes et résultat, plutôt que de juger si l’explication paraît convaincante.
5. Distinguer les cas limites des instructions du texte externe
Pour une classification, imaginez une phrase mêlant remboursement et retard de livraison. Sans préciser si une seule catégorie est permise ou si plusieurs le sont, les évaluateurs ne s’accorderont pas sur la bonne réponse. « Aucune catégorie correspondante » diffère aussi d’« entrée insuffisante ». Distinguer un sens compris mais absent du classement d’un sens impossible à déterminer faute d’informations clarifie le traitement suivant.
Les exemples transmettent des réponses correctes, mais expliquent aussi ces limites. Plutôt que multiplier les phrases faciles sur la livraison, ajoutez une phrase où deux catégories entrent en conflit, une faute de frappe et une salutation sans demande. À l’inverse, révisez les exemples si leur longueur masque la règle principale ou si leurs noms propres se glissent dans les nouvelles entrées. Vérifiez également que description de tâche et exemples ne se contredisent pas.
Dans un document à résumer, une phrase telle qu’« Ignore les instructions précédentes » fait partie du matériau à résumer. Encadrer l’entrée par des délimiteurs facilite la lecture de la frontière, mais ne constitue pas à lui seul une barrière de sécurité contre les attaques. Si une application peut effectuer des actions externes, le code hors du prompt doit aussi vérifier les autorisations et les outils permis. Rédaction du texte et configuration des permissions système sont toutes deux nécessaires.
6. Réviser la grille d’évaluation avant le prompt
Une petite grille peut contenir l’entrée, les éléments essentiels attendus, les suppositions interdites, la sortie réelle et la cause de l’erreur. Si deux notes de réunion sur dix transforment des calendriers non confirmés en calendriers confirmés, cherchez d’abord ce que ces deux cas ont en commun. Préciser les définitions de proposition, d’attente d’approbation et de confirmation avec des exemples répond directement au problème, davantage que répéter « Sois plus attentif ».
Réévaluer seulement les cas ayant servi à la révision peut faire prendre un effet propre à ces cas pour un progrès général. Appliquez les mêmes règles à des entrées réservées à part et cherchez d’éventuelles nouvelles omissions dans les cas faciles. Consigner séparément respect du format et exactitude factuelle évite qu’un JSON valide masque des erreurs de contenu. Une réponse fausse accompagnée d’une justification plausible reste une erreur.
Les articles sur l’apprentissage à partir de quelques exemples et l’exploitation du raisonnement portent sur des modèles et tâches précis. Ils n’imposent pas la même formule à tous les modèles récents. Gardez surtout la définition du travail, des exemples représentatifs, le traitement de l’ambiguïté et des critères d’évaluation reproductibles, plutôt que des qualificatifs décoratifs. Revoyez ces quatre éléments si le modèle ou le format d’entrée change.
L’évaluation doit aussi tenir compte de la gravité des erreurs. Modifier l’ordre des phrases d’un compte rendu et inventer un responsable n’est pas le même échec. Le premier relève parfois d’une préférence de lecture ; le second peut créer une mauvaise consigne de travail. Distinguer les champs à contrôler impérativement par une personne de ceux pouvant passer automatiquement à l’étape suivante clarifie les responsabilités lors de l’usage réel. Ne supprimez pas le contrôle des champs importants au seul motif que les erreurs sont rares.
Lorsque vous modifiez le format de sortie, reliez vérification de forme et vérification de sens. Contrôler qu’un champ de date n’est pas vide établit seulement la présence d’une valeur. Savoir si cette date figure dans l’original ou a été correctement convertie avec la date de référence est une autre vérification. Si les champs obligatoires du parseur entrent en conflit avec ceux que le modèle ne doit pas remplir sans preuve, préférez un schéma représentant l’état indéterminé à l’exigence d’une chaîne vide.
Pour partager un prompt, créez des entrées fictives reproduisant les mêmes cas limites au lieu de recopier des exemples contenant des données personnelles réelles. Vérifiez si un numéro de contrat ou un événement rare identifie encore une personne malgré la suppression des noms. Même suffisamment anonymisées, les données envoyées à un modèle externe doivent respecter les règles de traitement de l’organisation. Un bon document décrit les tâches auxquelles le prompt s’applique et celles auxquelles il ne doit pas servir, ainsi que des exemples d’entrée.
Lors du contrôle final, demandez-vous si une autre personne peut comprendre les mêmes critères de réponse à partir du seul prompt. Compter sur une déduction automatique des circonstances internes connues seulement du rédacteur rend la reproduction difficile. Définir les termes ambigus, fournir date de référence et version du document, et permettre de laisser non renseignés les éléments sans fondement transforme même un prompt court en spécification vérifiable.