Concept · Comprendre l’IA

Token

Unité de représentation du texte ou d’un autre contenu utilisée par un modèle ; ce n’est pas nécessairement un mot.

En quelques mots

Unité de représentation du texte ou d’un autre contenu utilisée par un modèle ; ce n’est pas nécessairement un mot.

Dans la pratique pédagogique

Un mot arabe ou français peut être représenté par plusieurs tokens.

Pour aller plus loin

Un bon prompt en six repères · Vérifier sans se fier à l’assurance de l’IA

Sources et révision

Contenu pédagogique éditorial : adaptation du fichier fourni ou nouvelle proposition du portail.

Révision éditoriale : 2026-09-15. Pas de vérification externe complète revendiquée. Cette proposition doit être ajustée et validée par l’enseignant avant la classe.

Limites

Un token ne correspond pas toujours à un mot ; le découpage dépend du modèle et de la langue.

Risques

Comparer des limites sans tenir compte de la tokenisation.

À retenir

Les limites techniques portent souvent sur des tokens.