设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

中国科大-云知声联合团队斩获CVPR2024三项季军

发布时间: 2024-07-09 17:19:45 来源:

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日, IEEE/CVF计算机视觉国际顶级会议——CVPR 2024公布第六届开放环境下情感行为分析国际挑战赛(The 6th Workshop and Competition on Affective Behavior Analysis in-the-wild,简称ABAW6)成绩。由中国科学技术大学信息学院自动化系於俊老师带队的中国科学技术大学与云知声共同组队,一举夺得人脸情绪识别(Expression Recognition, EXPR)、复合情绪识别(Compound Expression Recognition, CE)、情绪模仿强度估计(Emotional Mimicry Intensity Estimation, EMI)三个赛道季军。以此竞赛为基础,联合团队将最新的研究成果整理成多篇学术论文,并在 CVPR workshop 上发表和分享。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

CVPR会议是由IEEE主办的计算机视觉和模式识别领域的国际学术盛会,其汇集了全球该领域内最前沿的研究成果和技术进展,是全球计算机视觉领域的三大顶级会议之一。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

ABAW赛事是专注于开放环境下(in-the-wild)的情感行为分析的国际赛事,其致力于推动计算机视觉技术在开放环境下对人类情感行为的分析能力,进而增强人机交互系统在多样化场景中的应用性和适应性,至今已成功举办六届,成为全球范围内学术翘楚与业界巨头的汇聚之地,吸引了包括南加州大学、中国科学技术大学、南洋理工大学、莱斯特大学、清华大学、天翼云、俄罗斯科学院、加拿大蒙特利尔计算机研究所、美国普渡大学等在内的诸多研究团队和行业专家参与其中。在最新一届的赛事中,中国科大-云知声联合团队从众多实力强劲的参赛队伍中脱颖而出,充分展现其在情感行为分析赛道的领先实力。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人类情感行为分析旨在通过多种模态信息(视觉、听觉、文本等模态)来捕获人类有关表情和情绪的状态,从而分析人类内心的潜在目的或心理状况。该领域致力于自动识别、理解和解释人类情感表达和行为,以及将其应用于情感识别、人机交互、心理健康等领域。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人类情感行为分析是一门跨学科领域,它综合运用视觉、听觉、文本等多种模态信息来捕捉和解析人类表情和情绪状态,以此实现对人类情感表达和行为的自动检测、深入理解与精确解释,进而推动情感识别、人机交互、心理健康监测等一系列应用的发展。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

ABAW6涵盖了面部表情分析相关的多个挑战项目,包括AU、EXPR和VA三个传统挑战赛道,此外,今年ABAW6还新增了混合情绪识别(CE)和情绪模仿强度估计(EMI)两个全新赛道——CE赛道提供56个无任何标注的视频,要求参赛者利用已有的数据资源和预训练模型预测其中的7种混合情绪;而EMI赛道则要求参赛者分析模仿者的视频,以推断原始“源”视频中所表达的情感强度。五个赛道各有千秋,拥有各自独特应用价值的同时,也带来不同的挑战。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对EXPR赛道数据集规模有限的挑战,研究团队采用了半监督学习技术。该技术通过为未标记的面部数据生成表情类别伪标签,扩充了训练数据集,从而提升了模型的泛化能力和识别精度。同时,研究团队针对数据集中的类别不平衡问题和半监督学习中可能存在的数据偏差,引入了去偏反馈学习策略,有效提升了模型的稳健性和准确性。为了进一步弥补仅从静态图像获取特征的局限性,研究团队还引入了时间编码器(Temporal Encoder)。该组件能够学习和捕捉相邻表情图像特征之间的时间关系,从而增强了模型对面部表情随时间变化的动态理解能力。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对CE赛道人类情绪表达变得复杂的挑战,需要同时考虑局部和全局的面部表情来做出判断,研究团队提出了一种基于集成学习的解决方案,采用卷积网络、视觉Transformer和多尺度局部注意网络分别训练三个表情分类模型,并通过后期融合技术将它们的输出合并,以综合考量局部和全局表情特征,从而显著提升了在RAF-DB数据集上的识别准确度。此外,方法还展示了在C-EXPR-DB数据集上部分区域实现零样本学习的能力,为复合表情识别的进一步研究和应用提供了新的方法和视角。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对EMI赛道数据集中情感表达的复杂性和多样性的挑战,研究团队基于ResNet18和面部动作单元(AUs)提取了丰富的双通道视觉特征用于视频模态,以及基于Wav2Vec2.0提取了有效的单通道音频特征用于音频模态。这使我们能够获得视听模态下综合的情感特征。此外,通过后期融合策略,我们对视觉和声学模型的预测进行了平均,从而更准确地估计了视听情感模仿强度。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

作为这些成果的延续与总结,研究团队将这些研究成果整理成四篇学术论文,并于国际顶级(CVPR)会议上发表。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

继2023年发布山海大模型以来,云知声持续推动AGI技术在智慧物联、智慧医疗等领域全面应用。基于山海大模型,云知声持续拓展智能体(Agent)、检索增强生成(RAG)及多模态融合能力,积极探索更广泛的应用场景,并先后入选北京市通用人工智能十大模型伙伴及大模型十大应用案例,成为大模型领域的佼佼者。这次技术评测,是云知声多模态能力拓展的重要阶段性成果。kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

展望未来,中国科大-云知声联合团队将继续秉持技术创新的精神,积极推动情感行为分析技术的研发与升级,打造更加真实、生动且富有情感温度的人机智能对话世界。(咸宁新闻网)kos速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

2月28日上午由江南米道科技有限公司主办的“博鳌健康食品科学大会-低GI稻米创新分论坛”在博鳌正式召开,开启了一场低GI稻米产业发展深度交流的盛宴。本次论坛邀请了食品行业各领域的众多重磅专家及 近日,河南一家公司董事长在接受媒体采访时透露,公司将对员工生育进行奖励,生二胎奖励3万,生三胎奖励10万。这一消息一经报道,立即引发了社会的热议。据悉,该公司的生育奖励政策自2022年1月1日开始实行,目前已有五六名符合条 3月5日上午,北京人民大会堂,十四届全国人大二次会议开幕。首位盲人全国人大代表王永澄,拿到一份特别的政府工作报告—— 雪白的8K纸,环形装订,上面有序排列着凹凸的盲文…… 王永澄代表一边认真聆听报告,一边用双手仔细摩挲 21世纪经济报道记者李莎 北京报道 “三农”是关系国计民生的根本性问题,在今年政府工作报告重点部署的十项工作任务中,第七项即坚持不懈抓好“三农”工作,扎实推进乡村全面振兴。政府工 新华社北京3月7日电 中共中央政治局委员、外交部长王毅7日在两会记者会上就中美关系阐明中方原则立场。(直播 | 十四届全国人大二次会议举行外交主题记者会) 王毅表示,中美关系关乎两国人民福祉,关乎人类和世界前途。无 2023年5月,中广欧特斯成功服务浙江丽缙五金科技产业园科创中心,为23层的科创中心主楼、3层的裙楼共计约3.1万㎡的冷暖面积,配备了24台50HP商用热泵空调(风冷热泵模块机组),末端为风机盘管。中广欧特斯工 。

本文链接:中国科大-云知声联合团队斩获CVPR2024三项季军http://www.sushuapos.com/show-1-17840-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: Witsbb健敏思牵手京东健康,与“无敏”国际营养品牌共同助力敏宝健康成长

下一篇: 宏昆控股集团董事长陈芳与新奥莱控股集团董事长刘文献举行会谈

热门资讯

推荐资讯

  • 牛仔色小香风外套里面搭什么颜色?

    牛仔色小香风外套里面搭什么颜色?牛仔色小香风外套里面可以搭配以下颜色: 1.白色:白色作为经典基础色,不仅能提亮造型,还能展现出优雅干净的气息。 2.黑色:黑色服饰具有显瘦的

  • 男生冬季韩风穿搭(男生韩式风格穿衣搭配)

    男生冬季韩风穿搭冬季的韩风穿搭通常以时尚潮流和舒适保暖为主,以下是男生冬季韩风穿搭的一些详细建议: 上衣: 抓绒外套:选择一件抓绒外套,可以增加保暖性,同时潮流感十足。

  • 军绿色配什么颜色:时尚搭配的“秘密武器”

    一、引言在时尚界,军绿色一直是备受青睐的经典色彩。那么,如何搭配军绿色才能展现出它的独特魅力呢?本文将为您揭秘军绿色搭配的“秘密武器”,让您的穿搭风格更加出众。二、军

  • 粉色卫衣怎么搭配下身?这三种方法让你时尚又减龄

    粉色卫衣是一种非常受欢迎的时尚单品,无论是男生还是女生,都可以轻松驾驭。但是,如何搭配下身才能既时尚又减龄呢?本文将为你介绍三种搭配方法,让你轻松穿出少女心。一、粉色卫

  • 红咖色搭配什么颜色:探索时尚界的色彩密码

    一、引言在时尚界,色彩搭配一直是备受关注的话题。近年来,红咖色在各大秀场和街头时尚中脱颖而出,成为了备受追捧的流行色彩。那么,如何才能将红咖色搭配出独特的时尚感呢?本文

  • 橘色配哪三种颜色好看?这三种搭配让你时尚感爆棚!

    在时尚界,色彩搭配一直是备受关注的话题。而对于那些追求时尚的人来说,如何将橘色与其他颜色搭配得当,以达到视觉上的完美呈现,成为了一个值得探讨的问题。今天,我就来给大家分

  • 黑色连衣裙搭配什么颜色外套?这三种颜色让你时尚又显瘦!

    在时尚界,黑色连衣裙一直是备受追捧的经典单品。那么,如何搭配外套才能让黑色连衣裙显得更加出彩呢?今天,我就为大家推荐三种颜色外套,让你时尚又显瘦!(关键词自然部署)一、黑色连

  • 橙色衣服配什么裤子好看?教你打造时尚又个性的穿搭

    一、引言橙色是一种充满活力的颜色,给人以温暖、明亮的感觉。在日常生活中,越来越多的人喜欢穿上橙色的衣服,展示自己的个性和时尚。但是,如何搭配裤子才能让橙色衣服更加出彩

  • 短款黑色羽绒服搭配下身:探索时尚新境界

    一、引言寒冬腊月,羽绒服成为了我们日常生活中的保暖必备品。在众多款式和颜色的羽绒服中,短款黑色羽绒服无疑是最受欢迎的一款。那么,如何搭配下身才能更好地展现时尚品味呢

  • 当灵植师穿成豪门假少爷:探寻灵性与权贵的碰撞

    一、 子在这个充满神秘与奇幻的世界里,灵植师们操控着花草树木,发挥着神奇的力量。然而,当一位灵植师意外穿越,成为豪门假少爷,将会演绎出怎样的故事呢?这无疑是一个充满诱惑与

  • 学穿搭配衣服软件

    一、引子:穿搭界的“神器”——学穿搭配衣服软件穿搭是一门艺术,如何在繁多的服饰中选出最适合自己的一款,成为了许多人心中的难题。幸运的是,随着科技的发展,一款专为穿搭而

  • 白色开衫配什么颜色内搭?别再纠结,看这里!

    春天来了,白色开衫成为了不少仙女们的首选。但是,白色开衫配什么颜色内搭好呢?别急,今天我们一起来探讨一下这个话题,让你告别纠结,轻松穿出时尚感!一、白色开衫++ 浅色系内搭1.

  • 日榜
  • 周榜
  • 月榜