Exécuter une évaluation
Lancez une exécution avec un assistant, un prompt et un modèle, puis suivez-la, annulez-la ou relancez-la.
Une exécution pose à un assistant intelligent toutes les questions d’un jeu d’évaluation et note ses réponses. Chaque exécution enregistre l’assistant, le prompt et le modèle utilisés : vous savez toujours ce qu’un score mesure.
Lancer une exécution
-
Sur la page "Jeux d’évaluation", cliquez sur "Nouvelle exécution" dans la ligne du jeu d’évaluation. Vous pouvez aussi ouvrir le jeu d’évaluation et cliquer sur "Nouvelle exécution" en haut de la page.
-
Sous "Assistant Intelligent", sélectionnez l’assistant à évaluer.
-
Le champ "Prompt de l’Assistant Intelligent" reprend le prompt actuel de l’assistant. Laissez-le tel quel pour tester l’assistant tel que vos utilisateurs l’utilisent aujourd’hui, ou modifiez-le pour tester un autre prompt.
-
Sous "Modèle", choisissez le modèle d’IA qui répondra. Laissez le champ vide pour utiliser le modèle par défaut de votre plateforme.
-
Cliquez sur "Exécuter".
La page de l’exécution s’ouvre. Les réponses et les scores s’affichent au fur et à mesure : inutile de recharger la page, et vous pouvez la quitter puis y revenir plus tard.
Ce qu’une exécution utilise
-
Le prompt et le modèle définis au lancement.
-
Les contenus de l’assistant. L’exécution cherche dans les contenus auxquels l’assistant est limité (ses espaces, ses modèles d’article et ses tags), tels qu’ils sont définis au lancement. Si l’assistant est modifié ensuite, une exécution déjà lancée n’en tient pas compte.
-
Vos droits d’accès. L’assistant répond comme dans une conversation avec vous : il ne lit que les articles que vous pouvez voir. Un collègue qui a d’autres droits peut obtenir des réponses différentes avec le même jeu d’évaluation.
Chaque question est posée séparément, comme le premier message d’une nouvelle conversation.
Suivre une exécution
Les exécutions sont numérotées dans l’ordre de leur lancement : "Exécution 1", "Exécution 2", etc. Une exécution a l’un de ces cinq statuts.
| Statut | Signification |
|---|---|
| "En attente" | L’exécution n’a pas encore démarré. |
| "En cours" | L’assistant répond aux questions. |
| "Terminé" | L’exécution est allée jusqu’au bout. Certaines questions peuvent tout de même afficher "Échec" si l’assistant n’a pas pu y répondre. |
| "Échec" | L’exécution s’est arrêtée sur une erreur. Le message d’erreur figure en haut de la page de l’exécution, et les réponses déjà enregistrées restent disponibles. |
| "Annulé" | Un administrateur a arrêté l’exécution. |
Annuler une exécution
Ouvrez l’exécution et cliquez sur "Annuler l’exécution" tant qu’elle est en attente ou en cours, puis confirmez.
Si elle était en attente, elle ne démarre pas. Si elle avait déjà démarré, elle s’arrête et conserve les réponses enregistrées.
Voir toutes les exécutions d’un jeu d’évaluation
Cliquez sur un jeu d’évaluation sur la page "Jeux d’évaluation". Ses exécutions s’affichent, la plus récente en premier.
| Colonne | Contenu |
|---|---|
| "Exécution" | Le numéro de l’exécution. Cliquez dessus pour lire ses résultats. |
| "Assistant Intelligent" | L’assistant évalué. S’il a été supprimé depuis, le nom qu’il portait à ce moment-là reste affiché. |
| "Modèle" | Le modèle d’IA qui a répondu. |
| "Horodatage" | La date et l’heure de lancement de l’exécution. |
| "Créé par" | L’administrateur qui a lancé l’exécution. |
| "Score" | Le score de l’exécution, "En cours" ou "Échec". Une médaille signale le meilleur score de toutes les exécutions terminées. |
Le panneau de droite affiche la description du jeu d’évaluation et ses questions. Cliquez sur une question pour voir ses points clés.
Relancer l’évaluation
Dans la liste des exécutions, cliquez sur "Relancer" au bout de la ligne de l’exécution à reprendre. La fenêtre s’ouvre avec l’assistant, le prompt et le modèle de cette exécution. Lancez l’exécution telle quelle, ou modifiez d’abord un réglage.
Deux cas demandent votre attention :
-
Si l’assistant a été supprimé, sélectionnez-en un autre.
-
Si le modèle n’est plus disponible sur votre plateforme, le champ est vide et l’exécution utilise le modèle par défaut.
Relancez l’évaluation après chaque changement à mesurer : un nouveau prompt, un autre modèle, ou une évolution des contenus que lit l’assistant. Ensuite, comparez les exécutions.