Tokens是啥？为啥大模型按Tokens收费？和API调用、订阅收费区别？

特大号 · 公众号 · · 2025-02-17 11:05

正文

Token是大模型处理的最小单位

相当于一种“计算粒度”

不是直接用字或单词来计量

而是文本经过模型分词器切分后

得到的最小单位

比如，英文「 I love AI ! 」

再比如

中文的「 人工智能很强大 」

简单理解

Token ≠ 单词 ≠ 字符

而且Token的长度并不固定

它的长度取决于

具体模型的Tokenizer（分词器）规则

主要是因为

大模型运行的计算成本非常高

推荐文章

马靖昊说会计 · 跳出财报

13 小时前

会计雅苑 · 限价119万！要求派出至少50人，其中CPA不少于40人！国资委中央企业内控体系有效性抽查评价中标公告

昨天

哔哩哔哩 · 起猛了，看见双头人了

2 天前

哔哩哔哩 · B站2025毕业歌发布，给最棒的你们！

2 天前

会计雅苑 · 客户现场验收，售后代管，确认收入的合理性分析及行业案例

2 天前

营销兵法 · 杜蕾斯败了，这款冬日啪啪啪神器拯救了处女座！

8 年前

杭州交通918 · 变态！家有娇妻，他却蹲点火车站将摄像头对准女乘客的…

8 年前

蔡礼旭老师 · 接济与我断交的人，照顾与我绝情的人，原谅对我行不义的人

8 年前

中国医疗保险 · 王东进：公正评估助力医保久久为功——十年医保评估的回顾与感悟（上）

8 年前

新华网 · 不满10岁儿子偷拿200元买玩具母亲一怒之下却做出这样的举动...

7 年前