词元（Token）

AI知见编辑部 · 基础概念 · 持续更新

一句话说清

AI处理文字的最小单位，1个Token约等于1~2个汉字。

大白话详解

想象你给朋友发了一条微信：“今天天气真好，我们出去玩吧。”朋友不会一个字一个字地看，而是会分成几个意思块来理解，比如“今天”“天气”“真好”“我们”“出去玩吧”。AI也是这样，它把你说的话切成一小块一小块，每一块就叫一个“词元”。这些块不一定是完整的词，可能是半个词、一个标点，甚至一个字母，具体怎么切是AI自己定的规矩。

为什么AI要这么干？因为它没法像人一样一口气看懂整句话，只能一块一块地“吃”进去，再拼起来理解。就像你拼乐高，得先有一堆小积木才能搭出城堡。词元就是AI的乐高积木。你输入的文字、AI回复的内容，都会被拆成词元来处理。所以，你说话越长，词元就越多，AI要干的活儿也越多。

有个常见的误会：很多人以为词元就是“字”或“单词”。其实不一定。比如英文里“unbelievable”可能被切成“un”“believ”“able”三块，中文里“人工智能”可能被切成“人工”和“智能”两块。这取决于AI的“词典”怎么设计。你不需要懂具体规则，只要知道：词元是AI处理语言的基本单位，就像你数豆子时的一颗豆子。

跟你有什么关系

关系你的钱：API按Token计费；也关系你的体验——聊天记录太长被AI"忘记"，就是Token超了上下文。

大家常问

词元和字数有什么区别？

字数是你肉眼数的，词元是AI自己切的。同样一句话，字数固定，但词元数量可能不同，因为AI会按它的习惯切，可能把“很好”切成一个词元，也可能切成两个。

普通人需要懂词元吗？

不用专门学。但知道这点能帮你理解：为什么AI有时回答得很短却算你很多钱？因为可能它把每个标点也算成词元了。平时说话精简点，能省点费用。

下一步做什么

去试一个免费的顶级AI（DeepSeek实测） · 今日一招：3分钟一个实操技巧 · 去AI实验室边玩边巩固