设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

研究人员提出面向多模态推荐的解耦与蒸馏动态集成框架

发布时间: 来源: 中国科学院

近日,中国科学院软件研究所团队聚焦多模态推荐中模态信息差异化推荐价值被削弱的问题,针对联合学习与特征融合策略,引入梯度提升机制,提出了解耦与蒸馏动态集成框架,提升了模态共享信息和特有信息的样本级判别能力。mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

不同模态信息的差异化推荐价值是指各类型信息在用户之间表现出不同的贡献程度。联合优化的集成策略要求各模态同时拟合全部样本,导致模型倾向于学习整体平均表现,难以保持不同信息在特定样本上的优势。mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对上述问题,研究团队提出了由特征成分解耦模块和知识蒸馏增强的梯度提升模块组成的D3ER框架。特征成分解耦模块将多模态表示拆分为共享成分与特有成分,通过对比学习和分布对齐提取跨模态共享信息,并利用分离约束保留视觉、文本各自独有的任务相关语义。在此基础上,D3ER分别建立共享信息、视觉特有信息和文本特有信息对应的推荐模型,并通过梯度提升进行交替训练,使各模型重点学习此前尚未充分拟合的样本,发挥不同信息成分的优势,缓解联合训练造成的预测偏好弱化。mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对传统梯度提升需要持续保存历史模型的问题,D3ER进一步引入知识蒸馏,将累积知识压缩至固定规模模型中,并结合全局校正约束提升训练稳定性,在保持模型互补性的基础上,兼顾存储与计算效率。mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

研究团队将D3ER分别接入MGCN、DiffMM和PGL三种基座模型,在Amazon三个交互稀疏度均超过 99.8%的多模态推荐数据集进行对比实验,验证其对不同推荐架构的适配能力。结果显示,D3ER在三个数据集和多项评价指标上均稳定提升。消融实验表明,分别移除特征解耦、梯度提升与蒸馏机制后,模型性能均出现下降,其中移除全局校正约束的影响最为明显。mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

相关论文被多媒体领域国际学术会议ACM MM 2026接收。mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

D3ER整体框架mjA速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日,西安交通大学钱军民教授团队构建了一种中空结构钙/铜双金属纳米放大器,通过诱导内质网-线粒体应激级联循环放大用于   日前,教育部印发通知,部署各地各高校抢抓秋招关键期,于11月至12月集中开展2025届高校毕业生“秋季校园招聘月”系列活动。  本次活动以“协同联动拓岗位 凝心聚力促就业”为主题,将在全国范围内深入开展人才专场招   当地时间11月1日,教育部副部长陈杰在巴西福塔莱萨出席二十国集团(G20)教育部长会议和2024年全球教育会议期间,会见英国教育部国务大臣雅基·史密斯。双方就尽快重启中英教育部长级磋商机制达成一致,并同意在此基础上探 中国教育报-中国教育新闻网讯(记者 方梦宇)记者日前从中国科学技术大学获悉,该校与合肥国家实验室相关研究人员合作,利用激光冷原子方法制备成基于自旋的薛定谔猫态,其寿命达到分钟量级,有助于提升 中国教育报-中国教育新闻网讯(记者 杨国良)9月27日,重庆市召开秋季学前教育教研工作会,此次会议以“落实《幼儿园保育教育质量评估指南》提升学前教育质量”为主题,来自重庆市各区县及成渝共同体 中国教育报-中国教育新闻网讯(记者 郑翅)11月12日,国家教育行政学院特邀东北大学校史题材话剧《离离原上草》来院演出。国家教育行政学院副院长樊平军,东北大学副校长王兴伟等出席演出现场。“话 。

本文链接:研究人员提出面向多模态推荐的解耦与蒸馏动态集成框架http://www.sushuapos.com/show-12-4454-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 研究解析植物高效光合作用分子机制

下一篇: 大语言模型强化学习与推理可靠性研究获进展

热门资讯

推荐资讯

  • 日榜
  • 周榜
  • 月榜