设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

国内首个全国产化千亿参数细粒度MoE语义大模型开源

发布时间: 2025-12-29 09:28:38 来源: 中国科学报

 fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日,中电信人工智能科技有限公司和中国电信人工智能研究院(TeleAI)的星辰语义大模型研发团队宣布,国内首个全国产化训练的千亿参数细粒度MoE语义大模型TeleChat3-105B-A4.7-Thinking正式开源。fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

该模型采用细粒度MoE 架构,基础模型训练数据超 15T,共包括 1 个共享专家和 192 个路由专家(每次激活 4 个专家),模型整体共 105B 参数量,实际激活参数为 4.7B,专家稀疏比处于业界前列。在IFEval、Math-500、AIME2025、Tau2-Bench等十多个权威评测集上,效果对标GPT-OSS-120B、Qwen3-30B-A3B、Qwen3-32B等模型。fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

面对综合任务场景,TeleChat3-105B-A4.7-Thinking可高效拆解任务需求,整合多项代码能力,一次性交付出完整可运行的代码,实现代码补全、代码修改、网站和网页游戏生成等多类任务,省去大量人工调试时间投入,运行流畅,结果准确。fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

此外,团队还同步开源了稠密参数模型 TeleChat3-36B-Thinking ,在知识问答、逻辑推理、智能体等维度实现了能力提升,并实现了文本创作、语义理解、角色扮演等任务的针对性优化。fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

据了解,此前中电信人工智能科技有限公司和中国电信人工智能研究院(TeleAI)已陆续开源自研的TeleChat、TeleChat2 及 TeleChat2.5 系列模型,以传统稠密参数架构为主,模型尺寸覆盖十亿到千亿,构建了全尺寸大模型的开源布局。fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM


fyV速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

日前,高等教育数字化与课程思政建设研讨会暨中国高校财经慕课联盟首届“同课异构”教学竞赛颁奖典礼在对外经济贸易大学 细菌锰离子外排对于锰离子和铁离子稳态均具有重要意义。TerC家族蛋白是存在于所有细菌中的一种保守蛋白质。然而,长期以 未来航天会是什么样?它会是在现有技术的基础上缓慢地进步吗?还是会以一种更激进、更意想不到的方式向前?人们能否实现类似 2024年度中日韩前瞻计划项目指南 “中日韩前瞻计划”(A3 Foresight Program)是国家自然科学基金委员会(NSFC)与日本学 科技日报讯 (记者张佳欣)当有人开始哭泣时,其他人常常会感到同情和关心,但其背后的生物学原因不仅仅是激发了同情心。据 文|卜金婷 田瑞颖 《自然》近日发文警告,对人工智能(AI)的不当使用或将催生大量不可靠或无用的研究,导致可重复性 。

本文链接:国内首个全国产化千亿参数细粒度MoE语义大模型开源http://www.sushuapos.com/show-11-30010-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 2025中国节能协会创新奖揭晓

下一篇: 时速700公里 国防科大创造超导电动磁悬浮推进世界纪录

热门资讯

推荐资讯

  • 日榜
  • 周榜
  • 月榜