← 返回

词元

token的介绍

AI 处理语言的最小单位。一个英文单词约等于 1-2 个 token,一个中文字约等于 1-2 个 token。模型不是按「字」算的,而是按 token 算的。

中文举例:「我爱AI」这四个字符,大约会拆成 3-4 个 token。你每月用的 AI 额度,通常就是按 token 计费的。

分享