Concepts
Concept

Tokens

Les tokens sont les petits morceaux dans lesquels l'IA découpe le texte avant de le traiter. Un mot courant comme "chat" est un seul token, mais un mot long ou rare peut être découpé en plusieurs tokens. C'est important car les IA ont une limite de tokens qu'elles peuvent lire d'un coup (la "fenêtre de contexte"), et les services payants facturent au nombre de tokens utilisés. En gros, plus ton texte est long, plus il faut de tokens, plus ça coûte cher.