AI标着“100万Token上下文”，就等于能读100万字吗？

答案：不能直接画等号。🤖

Token不是“字数”，更像入场票。文章送进模型前，会被切成大小不一的文本片段：有的票对应一个字，有的可能对应词的一部分、整个词或标点。模型数的是票有多少张，不是原文有多少字。🎟️

为什么不能固定换算？因为语言、文本内容，以及模型采用的切分方式都会影响结果。同样长度的两段文字，Token数可能不同。

所以，“100万”说的是容量额度，“Token”才决定它在数什么。真要知道一篇文章能不能放进去，得用对应模型的计数方式看实际文本。你以前把Token直接当字数了吗？💬

图解科技 Token 人工智能 AI科普