Token 是 AI 模型读取或生成的一小段文本。它可能是一个短词、较长单词的一部分、标点符号,也可能是一段代码。

可以想象一句话在交给 AI 前被切成许多小片段。这些片段就是 token。它们与单词并不完全相同:一个单词可能占用多个 token,具体切分也取决于文本和模型。

AI 工具在设置限制或估算费用时可能会统计 token。因此,token 数量并不直接等于你输入的单词数。