Lire les résultats d’une exécution
Comprenez le score d’une exécution, vérifiez chaque réponse avec ses points clés et appliquez le meilleur prompt.
La page d’une exécution montre ce que l’assistant intelligent a répondu à chaque question et la note que le juge lui a donnée. Pour l’ouvrir, cliquez sur un jeu d’évaluation sur la page "Jeux d’évaluation", puis sur une exécution.
Comment le score est calculé
-
Pour une question : la part de ses points clés attendus que le juge a trouvés dans la réponse. Avec trois points clés trouvés sur quatre, le résultat est 3/4, soit 75 %.
-
Pour une exécution : la moyenne des scores de ses questions. Les questions sans point clé n’ont pas de score et ne sont pas comptées.
Le score de l’exécution s’affiche à côté de son titre, avec son statut. Tant que l’exécution est en cours, il évolue à mesure que les réponses arrivent.
La couleur indique le niveau en un coup d’œil : vert à partir de 80 %, jaune à partir de 50 %, rouge en dessous.
Choisir un affichage
Les deux boutons en haut à droite changent l’affichage.
-
"Affichage de liste" : chaque question avec la réponse complète et ses points clés. Utilisez-le pour lire une exécution du début à la fin.
-
"Vue condensée" : une ligne par question, avec son résultat. Utilisez-la pour repérer rapidement les questions mal notées, puis cliquez sur une question pour ouvrir sa réponse dans un panneau latéral.
Vérifier une réponse
Pour chaque question, la page présente trois éléments.
-
"Answer" : le texte rédigé par l’assistant, avec le score de la question.
-
"Sources" : cliquez pour afficher les articles et les fichiers que l’assistant a lus pour rédiger sa réponse. Cliquez sur une source pour la prévisualiser. Une source qui n’est plus publiée, ou que vous ne pouvez pas voir, n’apparaît pas.
-
"Points clés attendus" : le verdict du juge sur chacun d’eux.
| Verdict | Signification |
|---|---|
| "Satisfait" (coche) | Le juge a trouvé le point clé dans la réponse. |
| "Non satisfait" (croix) | Le juge ne l’a pas trouvé. Le point clé est barré, et l’explication du juge figure en dessous. |
| "Non évalué" (tiret) | Le juge n’a pas rendu de verdict, par exemple parce que l’exécution a été annulée ou que la question est en échec. |
Quand le résultat d’une question est "Échec", l’assistant n’a pas pu répondre ou le juge n’a pas pu noter la réponse. Le message d’erreur remplace la réponse.
Trouver la cause d’un score faible
Un point clé non satisfait a trois causes possibles. Les sources et l’explication du juge vous indiquent laquelle.
| Ce que vous voyez | Cause probable | Que faire |
|---|---|---|
| La réponse est juste, mais le juge ne l’a pas acceptée. | Le point clé est trop strict ou trop vague. | Reformulez le point clé. |
| Le bon article ne figure pas dans les sources. | L’assistant n’a pas trouvé l’information : elle manque, elle est difficile à trouver, ou elle se situe hors des contenus auxquels l’assistant est limité. | Vérifiez les contenus sélectionnés pour l’assistant, puis les articles eux-mêmes. |
| Le bon article figure dans les sources, mais la réponse est fausse ou incomplète. | Le prompt ne guide pas assez l’assistant. | Testez un autre prompt dans une nouvelle exécution. |
Le juge est lui aussi un modèle d’IA, et il peut se tromper. Lisez son explication avant de vous fier à un verdict.
Retrouver les réglages de l’exécution
Le panneau de droite garde la trace des conditions de l’exécution.
-
"Paramètres" : l’assistant, le modèle, la date de lancement et l’administrateur qui a lancé l’exécution.
-
"Prompt" : le prompt utilisé pour cette exécution, qui peut différer du prompt actuel de l’assistant.
Appliquer le prompt à l’assistant
Quand une exécution a utilisé un meilleur prompt que celui de l’assistant, vous pouvez le copier vers l’assistant depuis l’exécution.
-
Ouvrez l’exécution.
-
Dans le panneau de droite, à côté de "Prompt", cliquez sur "Appliquer à l’assistant".
-
Lisez le message de confirmation et cliquez sur "Mettre à jour le prompt".
Le prompt de l’assistant est remplacé aussitôt, pour toutes les personnes qui l’utilisent. Les exécutions passées ne changent pas.
"Appliquer à l’assistant" n’apparaît que si le prompt de l’exécution diffère du prompt actuel de l’assistant, si l’assistant existe toujours et si vous pouvez gérer les assistants intelligents.
Comparer avec une autre exécution
Cliquez sur "Ajouter une exécution à comparer" en haut de la page et choisissez une exécution du même jeu d’évaluation. Consultez Comparer des exécutions.