AIZY的小站
AI 术语

词元是什么意思? Token 大白话解释

Token · 基础概念

一句话解释

AI 读写文字的最小单位。它不按字算,而是把文字切成一小块一小块来处理。

打个比方

像把一篇文章切成乐高积木块。一段中文可能被切成好几块,英文单词也可能被切一半。AI 是按块数算钱、算容量的。

为什么你需要懂

所有 AI 服务都是按 Token 计费的,额度上限、价格、能读多长的文章,全和这个有关。懂了它,你就能看懂账单和额度提示。

常见误解

以为 1 个字等于 1 个 Token。一般中文大约 1 个汉字对应 1 个左右 Token,英文一个单词可能拆成多个,实际以模型的分词规则为准。

常见问题

词元是什么意思?

AI 读写文字的最小单位。它不按字算,而是把文字切成一小块一小块来处理。

词元需要学会吗?

所有 AI 服务都是按 Token 计费的,额度上限、价格、能读多长的文章,全和这个有关。懂了它,你就能看懂账单和额度提示。

相关术语