AI 术语
词元是什么意思? Token 大白话解释
Token · 基础概念
一句话解释
AI 读写文字的最小单位。它不按字算,而是把文字切成一小块一小块来处理。
打个比方
像把一篇文章切成乐高积木块。一段中文可能被切成好几块,英文单词也可能被切一半。AI 是按块数算钱、算容量的。
为什么你需要懂
所有 AI 服务都是按 Token 计费的,额度上限、价格、能读多长的文章,全和这个有关。懂了它,你就能看懂账单和额度提示。
常见误解
以为 1 个字等于 1 个 Token。一般中文大约 1 个汉字对应 1 个左右 Token,英文一个单词可能拆成多个,实际以模型的分词规则为准。
常见问题
词元是什么意思?
AI 读写文字的最小单位。它不按字算,而是把文字切成一小块一小块来处理。
词元需要学会吗?
所有 AI 服务都是按 Token 计费的,额度上限、价格、能读多长的文章,全和这个有关。懂了它,你就能看懂账单和额度提示。