Soul 作为少有以虚拟人设提供即时交流互动体验的应用和 AI Native 的社交网络，自成立以来一直积极探索AI大模型及其应用落地，在此领域积累了丰富的经验和成果。近日，Soul App语音技术团队在第二届多模态情感识别挑战赛的半监督学习赛道荣获第一名，彰显了团队的前沿洞察和技术能力。
国际人工智能联合会议（International Joint Conference on Artificial Intelligence,IJCAI）是人工智能领域顶级的国际学术会议之一，也是中国计算机学会(CCF)推荐的A类会议。为促进情感计算在人机交互领域的发展，深入探讨该领域最新研究进展、未来发展方向和技术在真实场景中的落地应用，来自清华大学、中国科学院自动化研究所、帝国理工学院、奥卢大学、南洋理工大学等高校的多位专家学者联合在IJCAI2024上举办多模态情感识别挑战赛MER24，并在ACM国际多媒体会议（ACM International Conference on Multimedia，ACM MM 2024）上组织多模态与可靠性情感计算研讨会MRAC24（Multimodal, Generative and Responsible Affective Computing 2024）。
此次多模态情感识别挑战赛（MER24）上，设置了SEMI（半监督学习）、NOISE（噪声鲁棒性）、OV（开放式词汇情绪识别）三个赛道，共吸引了来自知名高校、科技企业等近百支参赛队伍。
其中，SEMI赛道旨在探索和改进半监督学习策略，以便更好地利用未标记数据来提高情绪识别的性能。因当前在实际应用中，获取大量带有情绪标签的数据是困难且成本高昂的，半监督学习是一种减少对标记数据依赖的方法，因此SEMI为大赛中颇受关注、参赛队伍最多且难度高的赛道，Soul语音技术团队凭借平台扎实的技术能力积累和创新技术方案在此赛道中获得第一名。
一直以来，多模态情感识别在人工智能领域都是一个活跃的研究课题，它的主要目标是整合多种模态来识别人类的情绪状态。特别是在社交领域，多模态情感识别技术更是重要的一环。社交的本质是情感的流动，只有能够实现情感的识别，才能让AI更好的理解人性、情绪和情感，实现理想的人机互动。
Soul定位为新型开放式社交平台，致力于用底层技术和产品模式创新持续提升用户的社交体验。自2016年上线，Soul便不断思考AI在社交场景的具体落地应用。2020年，Soul启动对AIGC的技术研发工作，系统推进在智能对话、图像生成、语音&音乐生成等AIGC关键技术能力研发工作。为了让AI更能理解情绪，为用户带来更好的情绪反馈和陪伴感，情感识别是Soul技术团队关注的焦点之一。
目前，Soul具备多模态情感识别能力的语言大模型 Soul X、语音大模型均已上线，并推出了“AI苟蛋”“狼人魅影”“异世界回响”等功能/产品，相关技术已在AI辅助社交、AI陪伴、AI游戏等多个创新场景中得到应用。
在第二届多模态情感识别挑战赛（MER24）上，基于目前平台自研大模型部分模块，Soul语音技术团队重新调整了创新方案参赛，包括提出微调模型EmoVCLIP，用于适应视频的情感识别；使用Self-training策略，通过循环对无标签数据打伪标签与训练模型之间相互迭代从而提升模型的泛化性能；针对模型不同模态之间融合存在的竞争效应，首次在多模态情感识别领域使用Modality Dropout，有效提高模型情感识别准确率等，最终凭借极高的准确性和泛化性能在比赛中获胜。
现阶段，让AI“理解”人、实现有情感的人机交互已经成为学界、科技领域关注的焦点。在近日举办的ChinaJoy AIGC大会上，Soul 副总裁及产品负责人车斌表示，相比“智商”，社交领域更需要有“情商”的大模型，即需要多模态的、具备拟人化属性，确保实现情感化、个性化和生活化。
在未来，Soul仍将积极推进AI在社交场景的应用落地，致力于更充分地利用多模态情感识别技术能力辅助社交，提高用户的社交体验，更好地与AI进行互动，进一步探索人与AI，人与人之间链接的可能性。（咸宁新闻网）
新快报讯 3月1日，经拱北海关所属斗门海关检验检疫合格，一批珠海市振盟肉禽有限公司的1034只生鲜鸡肉顺利装车，随后经港珠澳大桥通关出口运往澳门，1个小时后，就出现在澳门市场销售。 斗门海关关员对供澳生鲜鸡进行监管 新快报讯 据中山纪检监察3月1日披露，中山翠亨新区党工委委员，南朗街道党工委副书记、办事处主任许行涉嫌严重违纪违法，目前正接受中山市纪委监委纪律审查和监察调查。 采写：新快报记者 李红云 新发展 新空间 新动能 据新华社电 横琴粤澳深度合作区3月1日零时正式实施封关运行。澳门各界表示，横琴封关运作将为澳门实现新发展提供新空间、新动能，是实现深合区第一阶段发展目标的标志性举措，也是推动构建琴澳一体化 2月28日上午由江南米道科技有限公司主办的“博鳌健康食品科学大会-低GI稻米创新分论坛”在博鳌正式召开,开启了一场低GI稻米产业发展深度交流的盛宴。本次论坛邀请了食品行业各领域的众多重磅专家及 阴和俊 科技部部长 2023年全国研发经费投入超过3.3万亿元，在量子技术、集成电路、人工智能、生物医药、新能源等领域取得一批重大原创成果，把对青年科技人才的培养作为一项长期的战略性工作……在5日举行的十四 21世纪经济报道记者吴文汐 北京报道 3月5日，十四届全国人大二次会议在人民大会堂开幕，国务院总理李强作政府工作报告。“加强生态文明建设，推进绿色低碳发展”被作为2024年的重要任务 。本文链接：Soul App以领先AI技术能力，荣获多模态情感识别挑战赛冠军http://www.sushuapos.com/show-1-23264-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。