设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

中国科大-云知声联合团队斩获CVPR2024三项季军

发布时间: 2024-07-09 17:19:45 来源:

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日, IEEE/CVF计算机视觉国际顶级会议——CVPR 2024公布第六届开放环境下情感行为分析国际挑战赛(The 6th Workshop and Competition on Affective Behavior Analysis in-the-wild,简称ABAW6)成绩。由中国科学技术大学信息学院自动化系於俊老师带队的中国科学技术大学与云知声共同组队,一举夺得人脸情绪识别(Expression Recognition, EXPR)、复合情绪识别(Compound Expression Recognition, CE)、情绪模仿强度估计(Emotional Mimicry Intensity Estimation, EMI)三个赛道季军。以此竞赛为基础,联合团队将最新的研究成果整理成多篇学术论文,并在 CVPR workshop 上发表和分享。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

CVPR会议是由IEEE主办的计算机视觉和模式识别领域的国际学术盛会,其汇集了全球该领域内最前沿的研究成果和技术进展,是全球计算机视觉领域的三大顶级会议之一。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

ABAW赛事是专注于开放环境下(in-the-wild)的情感行为分析的国际赛事,其致力于推动计算机视觉技术在开放环境下对人类情感行为的分析能力,进而增强人机交互系统在多样化场景中的应用性和适应性,至今已成功举办六届,成为全球范围内学术翘楚与业界巨头的汇聚之地,吸引了包括南加州大学、中国科学技术大学、南洋理工大学、莱斯特大学、清华大学、天翼云、俄罗斯科学院、加拿大蒙特利尔计算机研究所、美国普渡大学等在内的诸多研究团队和行业专家参与其中。在最新一届的赛事中,中国科大-云知声联合团队从众多实力强劲的参赛队伍中脱颖而出,充分展现其在情感行为分析赛道的领先实力。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人类情感行为分析旨在通过多种模态信息(视觉、听觉、文本等模态)来捕获人类有关表情和情绪的状态,从而分析人类内心的潜在目的或心理状况。该领域致力于自动识别、理解和解释人类情感表达和行为,以及将其应用于情感识别、人机交互、心理健康等领域。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人类情感行为分析是一门跨学科领域,它综合运用视觉、听觉、文本等多种模态信息来捕捉和解析人类表情和情绪状态,以此实现对人类情感表达和行为的自动检测、深入理解与精确解释,进而推动情感识别、人机交互、心理健康监测等一系列应用的发展。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

ABAW6涵盖了面部表情分析相关的多个挑战项目,包括AU、EXPR和VA三个传统挑战赛道,此外,今年ABAW6还新增了混合情绪识别(CE)和情绪模仿强度估计(EMI)两个全新赛道——CE赛道提供56个无任何标注的视频,要求参赛者利用已有的数据资源和预训练模型预测其中的7种混合情绪;而EMI赛道则要求参赛者分析模仿者的视频,以推断原始“源”视频中所表达的情感强度。五个赛道各有千秋,拥有各自独特应用价值的同时,也带来不同的挑战。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对EXPR赛道数据集规模有限的挑战,研究团队采用了半监督学习技术。该技术通过为未标记的面部数据生成表情类别伪标签,扩充了训练数据集,从而提升了模型的泛化能力和识别精度。同时,研究团队针对数据集中的类别不平衡问题和半监督学习中可能存在的数据偏差,引入了去偏反馈学习策略,有效提升了模型的稳健性和准确性。为了进一步弥补仅从静态图像获取特征的局限性,研究团队还引入了时间编码器(Temporal Encoder)。该组件能够学习和捕捉相邻表情图像特征之间的时间关系,从而增强了模型对面部表情随时间变化的动态理解能力。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对CE赛道人类情绪表达变得复杂的挑战,需要同时考虑局部和全局的面部表情来做出判断,研究团队提出了一种基于集成学习的解决方案,采用卷积网络、视觉Transformer和多尺度局部注意网络分别训练三个表情分类模型,并通过后期融合技术将它们的输出合并,以综合考量局部和全局表情特征,从而显著提升了在RAF-DB数据集上的识别准确度。此外,方法还展示了在C-EXPR-DB数据集上部分区域实现零样本学习的能力,为复合表情识别的进一步研究和应用提供了新的方法和视角。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对EMI赛道数据集中情感表达的复杂性和多样性的挑战,研究团队基于ResNet18和面部动作单元(AUs)提取了丰富的双通道视觉特征用于视频模态,以及基于Wav2Vec2.0提取了有效的单通道音频特征用于音频模态。这使我们能够获得视听模态下综合的情感特征。此外,通过后期融合策略,我们对视觉和声学模型的预测进行了平均,从而更准确地估计了视听情感模仿强度。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

作为这些成果的延续与总结,研究团队将这些研究成果整理成四篇学术论文,并于国际顶级(CVPR)会议上发表。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

继2023年发布山海大模型以来,云知声持续推动AGI技术在智慧物联、智慧医疗等领域全面应用。基于山海大模型,云知声持续拓展智能体(Agent)、检索增强生成(RAG)及多模态融合能力,积极探索更广泛的应用场景,并先后入选北京市通用人工智能十大模型伙伴及大模型十大应用案例,成为大模型领域的佼佼者。这次技术评测,是云知声多模态能力拓展的重要阶段性成果。yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

展望未来,中国科大-云知声联合团队将继续秉持技术创新的精神,积极推动情感行为分析技术的研发与升级,打造更加真实、生动且富有情感温度的人机智能对话世界。(咸宁新闻网)yqS速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

二月的北京,春寒料峭,然而在易车的年会现场,却是一片热闹喜庆的氛围,欢声笑语此起彼伏。易车“2023不可思易New年会”在北京星光影视基地盛大举行。易车CEO张序安在年会上发表演讲,不仅回顾了过去五 最近,大S因为穿着暴露出席小S公公的葬礼而成为热议话题,但台媒却选择遮掩不报道这一事件,评论全是嘲讽。大S的行为引发了外界的质疑和批评,但台媒却选择性报道,甚至帮助大S修图,试图掩盖她的丑闻。大S的穿着和造型在葬礼上 广州东站至新塘站五六线工程环评再公示 广州“高铁进城”又有新进展!3月5日,《新建铁路广州铁路枢纽广州东站至新塘站五六线工程环境影响评价征求意见稿》(以下简称《征求意见稿》)公示,里面还包含了公众关注的广州东站改 南方财经全媒体记者张雅婷 广州报道近年来,广东汕头大力发展以国际数据传输为核心的数字经济产业,于2014年9月设立的华侨经济文化合作试验区(简称“华侨试验区”)是全国唯一一个以“华 新快报讯 3月6日,十四届全国人大二次会议新闻中心发布公告,广东代表团将于3月7日上午9时举行开放团组会议,审议政府工作报告,审查计划报告和草案、预算报告和草案,并在会后接受采访。 为了进一步深化校企合作,2024年3月7日,中顺洁柔集团董事长刘鹏带队赴广州美术学院,开展了新一年度合作交流会。中顺洁柔副总裁(人力)赵明、副总裁兼首席内容官吕白等一众人员随行参加了本次活动。会上,广州 。

本文链接:中国科大-云知声联合团队斩获CVPR2024三项季军http://www.sushuapos.com/show-1-17840-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: Witsbb健敏思牵手京东健康,与“无敏”国际营养品牌共同助力敏宝健康成长

下一篇: 宏昆控股集团董事长陈芳与新奥莱控股集团董事长刘文献举行会谈

热门资讯

推荐资讯

  • 今年流行一字肩衬衫吗?

    今年流行一字肩衬衫吗?一字肩衬衫在今年非常流行。 一字肩衬衫是一种非常女性化的设计,它可以让人们的视觉集中在美丽的颈部和肩膀上,从而凸显出女性特有的优雅和魅力。这种

  • 夏季衬衣搭配技巧?

    衬衣搭配技巧? 衬衣的搭配方式很多,以下是一些搭配建议: 1.搭配西装裤:衬衣搭配西装裤是十分经典和正式的搭配方式,适合在商务场合或正式场合穿着。 2.搭配牛仔裤:衬衣和牛仔

  • 男士工装裤一般搭配什么衣服?

    男士工装裤一般搭配什么衣服?1.工装裤+T恤 版型简洁的工装裤,没有过多的修饰,颜色淡雅不花哨,简约素雅范,与T恤搭配很协调。简单的T恤搭配工装裤,大气有格调。勾勒出男士的健硕

  • 鸡女和鼠男相配婚姻如何?揭秘最佳配对秘诀!

    在十二生肖中,鸡和鼠是两种截然不同的属相。那么,鸡女和鼠男在婚姻生活中是否相配呢?本文将为您详细分析鸡女和鼠男相配婚姻如何,揭秘最佳配对秘诀!一、鸡女和鼠男相配婚姻如何

  • 秋装时尚女装搭配

    随着秋季的到来,时尚的女装搭配成为了女性们关注的焦点。在这个凉爽的季节里,如何穿出时尚感、展现出自己的个性成为许多女性们的追求。因此,本文将为大家介绍一些关于秋装时

  • 咖色搭配什么颜色好看?

    在时尚界,咖色一直是一种备受青睐的颜色。它不仅给人一种低调、高雅的感觉,还非常百搭。那么,咖色搭配什么颜色好看呢?今天,就让我来为大家揭秘咖色的时尚搭配法则。让我们来谈

  • 得物上的北面羽绒服是正品吗?揭秘真相!

    随着寒冬的到来,羽绒服成为了人们保暖的首选。得物作为一款热门的购物软件,其销售的北面羽绒服引起了很多人的关注。那么,得物上的北面羽绒服是正品吗?今天,我就为大家揭秘这一

  • 衣服如何搭配更好看:打造时尚达人的必备技巧

    一、引言穿着时尚、衣服搭配得好看,一直以来都是大多数人追求的目标。然而,对于很多新手来说,如何搭配衣服才能更好看,仍然是一个不小的难题。本文将为大家详细介绍一些实用的

  • 格子大衣配什么内搭最好看?这三种搭配让你时尚感爆棚!

    近年来,格子大衣成为了时尚圈的新宠,无论是欧美街头还是国内都市,都能看到它的身影。但是,格子大衣配什么内搭最好看呢?本文将为你推荐三种时尚的搭配方式,让你轻松穿出高级感!一

  • 粉色卫衣配什么颜色马甲好看?时髦精告诉你答案!

    粉色卫衣是许多女孩子衣橱里的必备单品,那么如何搭配马甲才能更好看呢?今天时髦精就来为大家解答这个疑惑,让你成为时尚 ICON!一、粉色卫衣++ 白色马甲粉色和白色的组合一直都

  • 发好的面团怎么保存到明天

    一、引子:烘焙过程中,发好的面团是制作美味面包的关键。然而,很多时候我们不得不面对一个现实问题:如何将发好的面团保存到明天,以便继续制作美味的面包。本文将为你详细介绍

  • 黑色大衣配什么裤子?别再为了搭配而犯愁!

    黑色大衣作为时尚圈的经典单品,一直以来都备受追捧。但是搭配什么裤子才能更好地展现个性和时尚感呢?本文将为您提供一些实用的建议,让您在穿着黑色大衣时,能够轻松搭配出与众

  • 日榜
  • 周榜
  • 月榜