Base · module 31 de 100
Qu'est-ce qu'un jeton au juste ?
Comprends comment IA découpe le texte en morceaux et pourquoi cela influence la longueur et les coûts.
Après cette leçon
Tu peux expliquer ce qu'est un jeton et pourquoi des prompts courts et clairs fonctionnent souvent mieux.
En image · Du texte en morceaux
Le texte se compose de morceaux plus petits
Tu tapes des mots et de la ponctuation dans un prompt.
Un jeton peut être une partie de mot, un signe ou un mot entier.
L'entrée et la sortie utilisent des jetons ; cela joue un rôle dans les limites et les coûts.
Partie 1 de 3 · Ton texte
Ta préférence pour moins de mouvement est prise en compte. Choisis chaque partie toi-même.
Les jetons sont des morceaux de texte
Un jeton est une partie de mot, un mot ou un signe de ponctuation. “découverte” peut être composé de plusieurs jetons. Le modèle calcule en jetons, pas en mots.
Pourquoi c'est important
Plus de jetons signifie plus de calculs et parfois des coûts plus élevés. Un contexte long peut aussi confondre le modèle. Court et pertinent est souvent plus efficace.
Conseil pratique
Écris d'abord l'essentiel, n'ajoute des détails que si nécessaire. Demande au modèle de répondre brièvement si tu veux un résultat concis.
Nouvel exemple d'exercice
De l'explication à un résultat utilisable.
Un jeton est un morceau de texte traité. Ce n'est pas la même chose qu'un seul mot ou une seule lettre.
Situation d'exercice fictiveFictif : deux prompts contiennent autant de mots. L'un contient des phrases ordinaires ; l'autre contient beaucoup de codes produits et de noms inhabituels.
Voir une résolution possible
Voici comment faire
Ne pars pas du principe que le nombre de jetons est égal. Vérifie le traitement réel avec les outils du modèle utilisé et réserve de l'espace pour l'entrée et la sortie.
Pourquoi cela fonctionne
Le nombre de mots est une limite d'écriture pratique, mais pas une mesure technique exacte des jetons.
Rends cela un peu plus difficile
Compare des mots ordinaires, une adresse web et un code long. Que devrais-tu mesurer avant de budgétiser les coûts ?
Entraîne-toi davantage, à ton rythme. Tu n'as rien à envoyer. Cela ne compte pas comme une évaluation automatique.
Lire la suite : Google IA : traiter le texte comme des jetons. La situation ci-dessus est un exemple de leçon fictif personnel.
Ton lieu de travail · apprendre par la pratique
Crée quelque chose. Regarde ce qui change.
Vérification de la connexion IA en cours… Tu peux déjà consulter l'exemple écrit.
Présente ta mission à Ende.
Lis la réponse, change une seule chose et compare.
Version précédente
Nouvelle version
Tu gardes le contrôle
Que veux-tu améliorer dans ta prochaine tentative ?
Uniquement sur cet appareil. Les réponses de l’IA restent uniquement dans la mémoire de cette page. Il s'agit d'un auto-contrôle, pas d'une note.
Pourquoi cette approche fonctionne
Le nombre de mots est une limite d'écriture pratique, mais pas une mesure technique exacte des jetons.
Une étape de plus
Compare des mots ordinaires, une adresse web et un code long. Que devrais-tu mesurer avant de budgétiser les coûts ?
Essaie & découvre · sans engagement
Remplis la fenêtre de contexte
Rends ton entrée plus longue. Réserve ensuite plus d'espace pour la réponse. Où se situe la limite ?
Bleu : entréeVert : espace de réponseGris : espace libre
L'entrée spécifiée et la sortie réservée tiennent dans cette fenêtre.
Modèle d'entraînement, pas de tokenizer ou de limite de produit réelle. L'entrée comprend également les instructions et l'historique. Tarif fictif : € 0,002 par 1.000 jetons d'entrée et € 0,006 par 1.000 jetons de sortie. Les tarifs et règles de calcul réels diffèrent.
Cet essai fonctionne localement avec des données fictives et ne compte pas pour ta complétion de leçon. Elle recommencera lors d'une nouvelle leçon ou d'un rechargement.
Un prompt pour commencer
Explique en maximum 80 mots ce qu'est un jeton et donne én exemple où un prompt long fonctionne moins bien qu'un prompt court.
Applique-le
Un collègue compte 100 mots dans un prompt et estime donc précisément 100 jetons pour la requête.
Quelle approche correspond le mieux à cette situation ?
- Calcule toujours un jeton par mot.
- Utilise le tokenizer ou la mesure d'utilisation du modèle de langage choisi.
- Compte uniquement la ponctuation.
Avec JavaScript, tu peux contrôler ton approche et recevoir un feedback immédiat.
Teste ta compréhension
Qu'est-ce qu'un jeton ?
- Toujours un mot entier.
- Un morceau de texte (partie de mot, mot ou signe de ponctuation) avec lequel le modèle calcule.
- Uniquement des signes de ponctuation.
S'entraîner davantage
Écris une version courte et une version longue de la même question. Note celle que tu trouves la plus claire et pourquoi.
Court : “Donne trois conseils pour un e-mail clair.” Long : “Je voudrais que tu, en tenant compte de divers facteurs, expliques en détail comment je…” La version courte est souvent plus percutante.
