央广网北京4月1日消息(记者韩萌 谢元森 任磊萍 孙玲娟)据中央广播电视总台中国之声报道,你有没有遇到过,用某个AI产品,问着问着突然弹出一行字:“今日免费额度已用完,请开通会员继续使用”?其实你和AI的每一次对话,背后都有一串数字在“燃烧”?它叫Token,中文可以叫词元,就是它在背后默默计算着你的AI使用量。
Token作为AI语言的“最小碎片”,正从技术术语变成AI时代的“计价单位”。有人说Token是AI时代的“新货币”,算力成本、电费消耗撑起它的价格,重度用户与AI企业已率先买单,智能体的出现更让Token消耗呈指数级暴涨。Token收费会成为大模型普及的新常态吗?
用户问AI大模型一句“今天天气怎么样?”它马上告诉你答案。我们觉得这很自然,就像朋友聊天一样。但你有没有想过,AI是怎么“听懂”这句话的?其实,在我们看不见的背后,AI首先把这句话拆分成一个个它能理解的小碎片,每个小碎片都对应一个数字,AI就是通过这些数字来理解语义的,而这些小碎片,就是我们最近经常能听到的一个词——Token,也叫词元。
大模型处理信息为什么必须要用Token,直接用人类语言不行吗?腾讯研究院教授级工程师王鹏解释说,计算机只认识数字,听不懂人类语言。但如果每一句话都要翻译成一组数字,人类的语言有无穷多种组合,这个存储量就太大了,根本不现实。所以大模型的做法是,先把自然语言拆成一个个最小的语义单位,就是Token,然后让计算机去理解和计算这些Token,从而感知整句话的意思,也同样作出回答。
王鹏表示:“大模型技术能够将我们的日常语言拆解成一个个机器可以理解的最小语义单元。这个过程就像查字典一样,AI需要在它的知识库中查找每个语义单元的含义。这些语义单元之间还可以进行计算,例如‘国王’加上‘女性’就得到‘女王’,‘国王’加上‘配偶’就得到‘王后’。通过这种方式,计算机既能够理解语义,也能够进行计算。”
既然Token是大模型理解语言的“小碎片”,那它是不是通用的?比如,在A模型里用的Token,能直接拿给B模型用吗?答案肯定是不能。王鹏说,因为每家模型都有自己的“分词法”,怎么拆、怎么算,规则都不一样。所以,Token又有点像各家模型自造的“方言”,互相之间没法通用。
王鹏说:“每个模型都有自己的分词方法和向量化算法,也有一套自己的输入输出理解方式。不同模型之间是无法直接互通的,但在同一个模型内部,使用的是一套统一的方法。”
我们每一次与大模型的对话,背后都在消耗着成千上万个Token。有消耗,就有成本。有成本也会有价格。目前国内Token的定价是在怎样的水平,又会基于哪些成本定价呢?
王鹏认为:“Token的生产本身也是一个工业化的流程。其中最大的成本支出就是算力成本,需要用到价格昂贵的GPU显卡,这部分存在折旧费用。第二个成本是电费,因为生产过程中非常耗电。这两项加起来,就已经构成了Token成本的主要部分。目前百万级别的Token的定价大约几毛钱到几块钱不等。100万个Token是什么概念呢?大约相当于一本《红楼梦》加上一本《西游记》的体量。”
说到这儿,很多人可能会问:我天天用大模型,也没交过钱啊,这Token的费用我也没付呀!其实,大家平时问个问题、聊两句天,或者简单让模型给写个文本,消耗的Token非常少,少到厂商愿意免费请你用。不过,对于一些重度AI用户来说,Token的费用已经实实在在地出现在了账单里。江西吉安的视频创作者肖先生,日常用AI辅助剪辑、特效和画面生成,最近用AI做了一个2分钟的短剧宣传片,全程按生成时长和画面精度扣费,算下来花了400块钱,不过对于这个价格他还是比较认可的。只是Token收费也会让他平时用AI更精打细算一些。
肖远煜表示:“收到账单的时候,觉得这个费用还是可以接受的。毕竟对我们来说,使用AI直接省去了人工拍摄和后期打磨的大量时间和人力成本,这笔费用与原来的成本相比,降低了差不多80%。当然,费用的出现也改变了我们的使用习惯。以前没有算成本的时候,都是随便生成素材,不满意就删掉重做;现在有了费用支出,每次使用之前都会提前做好脚本,尽量一次生成合格的素材,毕竟能省一笔是一笔。”
现在,真正为Token买单的主要是两类人:一类是AI创业公司,它们的AI产品每被用户用一次,背后烧的都是真金白银的Token;另一类,是那些让AI独立替自己干活的“重度用户”。比如最近火遍全网的AI智能体“龙虾”(OpenClaw),能让AI自动处理邮件、做表格、甚至写代码。听起来很酷,但账单更惊人——有程序员养了两天“龙虾”,就烧掉近5000万Token,费用直奔1700元。为什么这类“智能体”这么烧钱?王鹏解释说,因为以前我们是用AI聊天,现在是用AI干活,这完全是两个量级。
王鹏表示:“以前我们说话聊天是很省Token的,国内厂商的策略也是先免费。但现在大家开始重视起来,主要是因为有了智能体这个东西——它除了聊天说话,还开始‘干活’了。比如我最近在写一本书,书稿可能要几十万字,我需要让它一次性读完我之前上百万字的论文。这样一来,写这一本书花掉的Token费用,可能就相当于上百美元甚至几百美元。再比如日常做个PPT,它既要看图、又要看视频,还要帮我排版,做下来可能也要几十块钱人民币。”
数据显示,到今年3月,我国日均Token的调用量已经超过了140万亿——相当于1000万亿个中文词汇,也相当于250个中国国家图书馆的资源量。随着调用量的大幅增长,Token价格会不会出现变化?王鹏认为,长远看Token价格一定会越来越便宜,不过近期行业也出现了小幅涨价。
王鹏认为:“近期有一个趋势,大家都在涨价。这并不是说一定要靠这个赚钱,而是之前的定价可能离成本太近了,甚至有时还在赔钱。随着使用量大幅增加,大家都难以承受,为了可持续发展,近期确实需要适当上调价格。”
从最初的聊天问答,到如今的帮人干活,随着AI快速迭代,它正在越来越深地嵌入普通人的日常生活。当AI能帮我们做的事情越来越多,Token的调用量也随之成倍增长。一个现实的问题浮出水面:未来,普通用户用AI是不是也要收费了?如果真到那一天,我们愿意为此买单吗?来看看大家都怎么说。
徐姗姗表示:“如果未来使用AI需要付费的话,我应该会减少使用量。但如果有比较优惠的会员包形式,费用在一年两百块钱以内的话,我还是会继续使用的。如果费用过高,超出了我的心理预期,我就会去寻求新的免费AI产品。”
王昊认为:“一个月不超过600元的话,我就可以接受。毕竟AI是优质生产力的代表,能够帮助人们处理很多烦琐、枯燥的工作,600块钱在外面是雇不到一个人的。而对有需要的人来说,只要相比人工成本更便宜,大家还是会选择继续使用AI的。”
也有人预测,未来Token的收费模式很可能会像手机流量一样,从精打细算的按量付费,走向更灵活的包月套餐。当然,除了个人买单之外,王鹏也给出了另外一种可能——这笔Token费用未来将由企业买单,而非落到普通用户的身上。
王鹏说:“今年以来,大量非程序员开始使用Agent工具来提升工作效率,他们也会逐渐习惯于大量消耗Token。但这笔费用,我觉得未来不一定由个人承担,很有可能是由企业来承担。因为这本质上是在提高企业的生产效率。所以如果消耗量很大,成本就会转由企业来承担。比如现在很多大厂,已经开始给员工发放Token了。”
从随口问答到深度协作,Token早已不只是技术的最小语义单元,更成为丈量AI与人类关系的新刻度。它燃烧算力与电量,助推生产力的变革,也标记着智能时代从免费走向普惠、从尝鲜走向刚需的必经之路。收费与否只是表象,真正值得期待的,是技术在成本与普惠之间,走出一条更可持续、更贴近普通人的未来之路。
转载申请事宜以及报告非法侵权行为,请联系我们:010-56807194



