C’est quoi un token en IA ?
- Un token ≈ 4 caractères, soit environ trois quarts d’un mot.
- La « fenêtre de contexte » (ce que l’IA lit d’un coup) se mesure en tokens.
- Le prix des API se compte en tokens (entrée + sortie).
Le mot « token » revient partout dès qu’on parle d’IA. C’est en réalité simple, et ça explique les limites et le prix des outils. Voici l’essentiel.
Un token, concrètement
L’IA ne lit pas des mots entiers mais des morceaux de mots appelés tokens. En français, comptez environ 4 caractères par token, soit à peu près ¾ d’un mot. Une page de texte, c’est quelques centaines de tokens.
Pourquoi ça compte
Deux raisons. La fenêtre de contexte : la quantité de texte que l’IA peut prendre en compte d’un coup se mesure en tokens ; au-delà, elle « oublie » le début. Le coût : quand on utilise une IA via une API, on paie au token, en entrée comme en sortie.
Ce que ça change pour vous
Pour de longs documents, privilégiez un modèle à grand contexte. Et un prompt clair et concis coûte moins de tokens qu’un pavé. Pour comparer les modèles, voyez quelle est la meilleure IA.
Questions fréquentes
Combien de tokens dans une page ?
Pourquoi ma conversation « oublie » le début ?
Par où commencer ?