设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

人工智能研究者:从Token到“词元”,变化背后的分量很重

发布时间: 来源:

  日前,在中国发展高层论坛2026年年会上,国家数据局局长刘烈宏明确将Token称为“词元”,并将它定义为“结算单位”。作为一名长期跟踪人工智能发展的研究人员,我一下子就捕捉到这个表述的变化。这个变化背后的分量很重。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  它意味着,我国人工智能正在从“能力布局”迈向“能力结算”,从模型好不好,转向智能服务如何计量、如何定价、如何交易。过去,很多企业采购软件,买的是许可证、账号数和部署周期;如今,越来越多企业采购的,是可调用、可核算、可复盘的智能服务量。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元,正是那个把智能服务折算成成本与价值的刻度。真正值得重视的,不只是一个译名,而是一个计量体系正在成形。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  数据显示,2024年初,中国日均词元调用量为1000亿;到2025年底,跃升至100万亿;到2026年3月,已突破140万亿,两年增长超过1000倍。自2026年1月底以来,有的模型企业创下20天收入超过2025年全年总收入的业绩纪录。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  短短两组数据,已经足以说明一个事实:词元不再只是技术指标,而正在成为人工智能商业化速度、应用深度和产业景气度的重要观测值。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  中文语境下,给Token定名为“词元”,格外有意义。它比“词”更准确,也比“令牌”“标记”更贴近语言处理场景。特别是强调了“基础单元”这个属性,既方便公众理解,也有助于产业、媒体和政策口径统一。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  但如果把2026年3月23日看成“词元”横空出世的时刻,也并不准确。事实上,Token并不是大模型爆红后才临时冒出来的新词。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  往前追溯,在学理脉络上,它可追溯至20世纪初研究者提出的type-token区分,随后进入语言学、计算语言学和自然语言处理领域,成为文本处理的基础概念。在中文规范体系,2018年已有计算机学科术语规范工具书,将相关场景下的Token译为“词元”。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元本质上是大模型处理信息的最小信息单元。人类说出一句话之后,模型要先把文本切分成词元,再把词元映射成编号,随后才能完成关联、推断和生成。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  这也是为什么同样一句中文,在不同模型里,词元数量往往并不相同。切分规则不同,成本就不同,速度就不同,可容纳的上下文长度也会不同。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  为何词元调用量快速攀升到140万亿?答案不是简单的“聊天变多了”,而是应用形态变了。对话应用消耗词元,长流程任务更消耗词元,调用工具、读取文档、连续规划、多轮反馈,同样都要反复吃进上下文、生成新输出。表面看,用户只是让模型“帮我做件事”,而系统内部,实际上是一次次高密度的信息拆分、调用和结算。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  正如刘烈宏在同一场演讲中所说的:人工智能正从“对话”走向“决策执行”,智能体正在驱动中国大模型应用规模爆发式增长。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  另一方面,词元调用增长越快,越说明数据供给体系正在跟上模型推理与应用消耗的节奏,也说明数据、模型、场景与商业闭环开始贯通,“词元经济”雏形正在显现,“数据供给—价值释放”的良性循环已初现端倪。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  但词元多,并不自动等于智能强。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我在和企业交流时,常会碰到一种误解:是不是词元消耗得越多,模型就越聪明、答案就越好?0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  事实并非如此。词元更像水表和电表,负责记录消耗,不负责保证质量。真正决定结果的,仍然是模型能力、数据质量、任务设计和提示组织方式。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  一句话:没有高质量数据,词元只是空转;没有合适场景,再便宜的词元也难以转化出真正的生产力。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  词元像是一块很小的砖,却可能正在垫高一个时代的门槛。很多人第一次听见“词元”时,会觉得它抽象、陌生。但从此刻起,词元正像“字节”“流量”“千瓦时”那样,成为普通人必须逐步理解的新单位。这也意味着人工智能开始被纳入更成熟的经济叙事。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人工智能研究者:从Token到“词元”,变化背后的分量很重

  2025年8月28日,参展商与观展者在2025中国国际大数据产业博览会会场交流城市数智化实践情况。新华社记者陶亮 摄0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我第一次强烈意识到词元的这种叙事改变,不是在实验室,而是在一张预算表前。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  前段时间,我和几位企业负责人讨论大模型接入方案。大家谈完模型能力、幻觉率、知识库召回率,财务负责人忽然指着一行费用问我:为什么这套系统不是按账号数收费,也不是按调用次数收费,而是按“月度词元消耗量”核算?0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  那一刻,我意识到,词元已经像工业时代的度电、互联网时代的流量一样,成为企业理解人工智能时代“成本”的新度量衡。它不只服务于技术研发,也会越来越多地出现在预算表、采购单、报价单和监管语境里。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  我们当然不能把一个时代的变化,全部压缩进一个术语里。但有些时候,一个术语的正式定名,恰恰标志着一个产业阶段已经悄然切换。今天的词元,也许就站在这样的节点上。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  等到更多人读懂词元,人工智能的落地方式也会被重新理解。以后再听到“这个模型很费词元”“上下文又超了”“本月词元预算不够了”时,我们不妨少一点陌生感。这也在提醒我们:人工智能已经不只是在展示聪明,它正在像水、电、网络和云资源一样,被精确计量,被持续调度,被大规模交易。0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  真正变化的,也从来不只是一个中文名字。(作者系赛迪研究院人工智能研究中心副研究员钟新龙)0C5速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

  三四线城市贡献增至近六成!龙年春节档票房创新高,也有公司被烫伤  春节档票房之争基本落下帷幕,龙年电影市场迎来开门红。  2月18日消息,根据国家电影局初步统计,2024年春节假期(2月10日至2月17日)全国电影票房为8   下班后涌入医院做推拿;常年服用多种保健品;关注艾灸、刮痧、八段锦等调理攻略  “脆皮年轻人”花式养生,有人月均账单超千元  中医专家提醒,应审慎评价身体状况,切勿盲目跟风  本报记者 王羡茹 曲欣悦  阅读提   傅园慧称在长白山包车被勒索 当地交通部门:正按流程处理  中新网北京2月17日电(记者 刘星晨)17日,游泳世界冠军傅园慧通过社交平台发布求助帖称,她在吉林长白山包车出行时遭遇勒索,询问网友是否需要报警。  图片 共建“一带一路”倡议提出十年来,从亚欧大陆扩展至全球,为许多人带去了更好的发展机遇。与此同时,在某些西方媒体的宣传中,“债务陷阱”等阴谋论字眼却甚嚣尘上。中国日报起底工作室针对这一说法 农工党中央召开两会情况通报会农工党中央拟向全国政协十四届二次会议提交34件中央提案、26件界别小组提案中国改革报、中国发展网记者田新元2月20日,在全国两会即将召开之际,农工党中央在京召开中央和   独家 | 库迪咖啡回应闭店:自开业以来总共闭店解约门店数为61家  2月22日每经快讯,自去年末起,不断有库迪联营商在小红书等社交媒体上发帖称库迪出现供应链问题、品牌现金流疑似出现危机,称有很多库迪联营商正在撤离 。

本文链接:人工智能研究者:从Token到“词元”,变化背后的分量很重http://www.sushuapos.com/show-5-96080-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: “龙虾”、Token怎么看?AI大咖们这样说

下一篇: 夜宵“顶流”小龙虾,竟是防治污染的利器?

热门资讯

推荐资讯

  • 支付宝发布出境游消费新趋势

      近日,支付宝发布出境游消费新趋势:可持续出游成为出境游的新方式。国内游客除了想要更多的目的地优惠、更好的汇率、更地道的攻略,还希望去远方旅行时继续实践可持续低碳行

  • 米芾到底写了多少“第一山”?

    “二月天杨柳醉春烟,三月三来山青草漫漫。”在央视2024年的春节联欢晚会后,一首《上春山》传唱大江南北。既然要上春山,就要上天下“第一山”,那这“第

  • 科幻小说的独特能力是什么

    在不久前揭晓的第二届科幻星球奖获奖名单上,天瑞说符的《我们生活在南京》荣获“文学奖冠军·最佳科幻长篇小说”。小说以无线电技术这一专业

  • “士别三日”的他,因读书让人“刮目相看”

    吕蒙为三国时期东吴大将,是人们熟知的那句成语典故“士别三日,刮目相待”的主人公。正是靠着读书,吕蒙让孙权、鲁肃等比他知名度更高的三国群雄刮目相

  • 河北邯郸市推进大型旅游景区消费维权服务站全覆盖

      近日,河北省邯郸市市场监管局印发《关于进一步加强全市旅游景区消费维权服务站规范化建设的通知》,大力推进旅游景区消费维权服务站规范化建设,进一步畅通消费维权渠道。 

  • 一场破天荒的对话中,中西文化热烈碰撞

    为了京昆新歌剧《凯撒》的上海演出,当代传奇剧场艺术总监、著名演员吴兴国提前一周抵沪,与“昆曲王子”张军一起排练。今年2月,这部用京剧和昆曲演绎

  • 王府井集团2024年一季度实现营收33.08亿元

      近日,王府井集团发布2024年第一季度财报。报告显示,王府井集团2024年一季度实现营业收入约33.08亿元,同比下降1.74%;归属于上市公司股东的净利润约2.02亿元,同比下降10.86%

  • 酒店分销商SiteMinder与携程深化合作,Q1中国游客预订量同比增长75%

    澳洲酒店分销技术商SiteMinder与携程加强合作,帮助更多酒店发展中国出境游市场。携程参与了SiteMinder的Channels Plus计划,将更多酒店接入携程平台,SiteMinder帮酒店实现对多

  • “五一”假期收官,多省市接待游客及旅游收入创历史新高

      5月6日,为期5天的“五一”假期正式收官。全国各省市持续发布接待游客及旅游收入相关数据。从数据上看,创历史新高。  据北京市文化和旅游局消息,“五一”假期期间,北京共

  • 哈萨克斯坦本地电子钱包 Kaspi.kz 和蚂蚁集团达成合作

      近日,哈萨克斯坦本地电子钱包 Kaspi.kz 和蚂蚁集团达成合作,通过Alipay+ 跨境服务,Kaspi.kz用户在超过8000万支付宝商家均可扫码消费,实现“一部手机游中国”。至此,已有9个

  • 吉林桦甸第二座五星酒店即将建成投用,总投资1.8亿元

    据江城日报消息,日前,地处吉林省桦甸市桦甸大街繁华路段的华宇国际酒店项目已完成主体封闭,全面进入内部装修阶段,预计7月1日正式对外开放营业。这标志着桦甸市继白云国际酒店后

  • 《红楼梦》的神秘茶器

    话说《红楼梦》第四十一回,写贾母带了刘姥姥等众人至栊翠庵来,妙玉为贾母等人奉上茶后,又让宝钗和黛玉到耳房内吃“梯己茶”,宝玉悄悄地随后跟了来。有

  • 日榜
  • 周榜
  • 月榜
    SQL Error: select * from ***_ecms_news11 where id in(183,255,,165,227,228,17,119,118,182,100,173) limit 12