全部词条
白话词典

Token

也叫:词元 · tokens

Token 是模型处理文本的基本单位。上下文长短和费用,常按 token 计算。

他们说

按 token 计量上下文长度与推理成本

老白翻译

AI 计费和“能读多长”,大致按小碎块字算。

它到底是什么

模型不按“字”或“单词”思考,而按 token(小文本块)切。中文里,一个字有时是 1 个或多个 token。

上下文上限、API 账单,常和 token 数量相关。

生活里的例子

寄快递按重量计费。Token 就像重量:内容越多,越贵,也越容易超重(超出上下文)。

常见误解

  • 误解:1 token = 1 个汉字。 中英文比例不同,只能粗估。
  • 误解:token 只和钱有关。 也决定一次能塞进多少资料。

普通人怎么用

长文档先摘要再问;对话太长就新开话题。关注产品说明里的上下文和计费方式。