Approfondissement · module 81 de 100
Évaluation : benchmarks et rubriques
Mesure la qualité de la sortie de l’IA de manière cohérente.
Après cette leçon
Tu crées une rubrique simple pour évaluer les résultats de l’IA.
En image · Selon la même règle de mesure
Évaluer avec une grille fixe
Utilise par exemple l'exactitude, l'exhaustivité et le ton.
Décris pour chaque critère ce que signifie 'assez bien'.
Utilise les mêmes cas de test et la même grille pour les deux versions.
Partie 1 de 3 · Choisis des critères
Ta préférence pour moins de mouvement est prise en compte. Choisis chaque partie toi-même.
Qu'est-ce qu'une rubrique ?
Un ensemble fixe de critères avec des scores, par exemple l'exactitude, l'exhaustivité et le ton.
Pourquoi est-ce utile ?
Cela permet de comparer les résultats équitablement et de voir si un ajustement est réellement meilleur.
Reste pratique
3–5 critères suffisent. Trop de critères rendent l'évaluation lente.
Nouvel exemple d'exercice
De l'explication à un résultat utilisable.
Une grille d'évaluation décrit à l'avance ce que tu évalues et ce qu'un résultat satisfaisant implique concrètement.
Situation d'exercice fictiveFictif : tu évalues des résumés de dix ensembles de notes. Deux contiennent une exception importante.
Voir une résolution possible
Voici comment faire
Note séparément les faits corrects, les informations nécessaires et la base de la source. Fixe comme critère d'arrêt qu'une erreur changeant le sens n'est pas acceptable, même avec un langage fluide.
Pourquoi cela fonctionne
Une moyenne peut masquer des erreurs importantes. Regarde donc aussi les exemples individuels ratés.
Rends cela un peu plus difficile
Ajoute un exemple difficile qui n'a pas encore été utilisé pour améliorer ton prompt. Qu'apprends-tu de ce résultat ?
Entraîne-toi davantage, à ton rythme. Tu n'as rien à envoyer. Cela ne compte pas comme une évaluation automatique.
Ton lieu de travail · apprendre par la pratique
Crée quelque chose. Regarde ce qui change.
Vérification de la connexion IA en cours… Tu peux déjà consulter l'exemple écrit.
Présente ta mission à Ende.
Lis la réponse, change une seule chose et compare.
Version précédente
Nouvelle version
Tu gardes le contrôle
Que veux-tu améliorer dans ta prochaine tentative ?
Uniquement sur cet appareil. Les réponses de l’IA restent uniquement dans la mémoire de cette page. Il s'agit d'un auto-contrôle, pas d'une note.
Pourquoi cette approche fonctionne
Une moyenne peut masquer des erreurs importantes. Regarde donc aussi les exemples individuels ratés.
Une étape de plus
Ajoute un exemple difficile qui n'a pas encore été utilisé pour améliorer ton prompt. Qu'apprends-tu de ce résultat ?
Essaie & découvre · sans engagement
Compare la qualité avec une barre fixe
Donne beaucoup de poids au ton. Une réponse belle mais incorrecte peut-elle quand même passer ?
Fictif : un atelier en ligne, samedi de 10 à 11 heures. Le prix n'est pas encore connu.
Fluide mais incorrect
Découvre samedi notre incroyable atelier en ligne de 10 à 11 heures, entièrement gratuit !
Faits : 0/fr/3 · Toon: 3/fr/3
Stop : le prix gratuit est inventé. Un score total élevé n'annule pas cette erreur.
Factuel et sobre
Atelier : samedi, en ligne, 10–11 heures. Prix à confirmer.
Faits : 3/fr/3 · Toon: 1/fr/3
Peut passer au contrôle final humain.
Les deux scores de critères ont été attribués au préalable pour ce cas fictif. Tu modifies leur poids. Aucun texte libre n'est évalué automatiquement.
Cet essai fonctionne localement avec des données fictives et ne compte pas pour ta complétion de leçon. Elle recommencera lors d'une nouvelle leçon ou d'un rechargement.
Un prompt pour commencer
Crée une rubrique simple avec 4 critères pour évaluer la qualité d'un résumé IA. Donne une courte description par critère.
Applique-le
Deux évaluateurs donnent des scores très différents au même résumé IA, sans pouvoir expliquer leurs critères.
Quelle approche correspond le mieux à cette situation ?
- Utilise des critères fixes avec des ancres de score et compare quelques évaluations d'essai.
- Prends uniquement la moyenne de leurs scores intuitifs.
- Laisse chaque évaluateur choisir des critères différents par réponse.
Avec JavaScript, tu peux contrôler ton approche et recevoir un feedback immédiat.
Teste ta compréhension
Quel est l'avantage d'une rubrique ?
- Tu évalues les résultats de manière plus cohérente et tu peux mesurer les améliorations.
- IA s'en trouvera amélioré.
- Ce n'est pas nécessaire.
S'entraîner davantage
Crée une rubrique de 3 critères pour une tâche que tu fais souvent avec IA.
Critères : exactitude, exhaustivité, clarté. Chacun avec un score de 1–3.
