设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

中国科大-云知声联合团队斩获CVPR2024三项季军

发布时间: 2024-07-09 17:19:45 来源:

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日, IEEE/CVF计算机视觉国际顶级会议——CVPR 2024公布第六届开放环境下情感行为分析国际挑战赛(The 6th Workshop and Competition on Affective Behavior Analysis in-the-wild,简称ABAW6)成绩。由中国科学技术大学信息学院自动化系於俊老师带队的中国科学技术大学与云知声共同组队,一举夺得人脸情绪识别(Expression Recognition, EXPR)、复合情绪识别(Compound Expression Recognition, CE)、情绪模仿强度估计(Emotional Mimicry Intensity Estimation, EMI)三个赛道季军。以此竞赛为基础,联合团队将最新的研究成果整理成多篇学术论文,并在 CVPR workshop 上发表和分享。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

CVPR会议是由IEEE主办的计算机视觉和模式识别领域的国际学术盛会,其汇集了全球该领域内最前沿的研究成果和技术进展,是全球计算机视觉领域的三大顶级会议之一。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

ABAW赛事是专注于开放环境下(in-the-wild)的情感行为分析的国际赛事,其致力于推动计算机视觉技术在开放环境下对人类情感行为的分析能力,进而增强人机交互系统在多样化场景中的应用性和适应性,至今已成功举办六届,成为全球范围内学术翘楚与业界巨头的汇聚之地,吸引了包括南加州大学、中国科学技术大学、南洋理工大学、莱斯特大学、清华大学、天翼云、俄罗斯科学院、加拿大蒙特利尔计算机研究所、美国普渡大学等在内的诸多研究团队和行业专家参与其中。在最新一届的赛事中,中国科大-云知声联合团队从众多实力强劲的参赛队伍中脱颖而出,充分展现其在情感行为分析赛道的领先实力。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人类情感行为分析旨在通过多种模态信息(视觉、听觉、文本等模态)来捕获人类有关表情和情绪的状态,从而分析人类内心的潜在目的或心理状况。该领域致力于自动识别、理解和解释人类情感表达和行为,以及将其应用于情感识别、人机交互、心理健康等领域。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

人类情感行为分析是一门跨学科领域,它综合运用视觉、听觉、文本等多种模态信息来捕捉和解析人类表情和情绪状态,以此实现对人类情感表达和行为的自动检测、深入理解与精确解释,进而推动情感识别、人机交互、心理健康监测等一系列应用的发展。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

ABAW6涵盖了面部表情分析相关的多个挑战项目,包括AU、EXPR和VA三个传统挑战赛道,此外,今年ABAW6还新增了混合情绪识别(CE)和情绪模仿强度估计(EMI)两个全新赛道——CE赛道提供56个无任何标注的视频,要求参赛者利用已有的数据资源和预训练模型预测其中的7种混合情绪;而EMI赛道则要求参赛者分析模仿者的视频,以推断原始“源”视频中所表达的情感强度。五个赛道各有千秋,拥有各自独特应用价值的同时,也带来不同的挑战。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对EXPR赛道数据集规模有限的挑战,研究团队采用了半监督学习技术。该技术通过为未标记的面部数据生成表情类别伪标签,扩充了训练数据集,从而提升了模型的泛化能力和识别精度。同时,研究团队针对数据集中的类别不平衡问题和半监督学习中可能存在的数据偏差,引入了去偏反馈学习策略,有效提升了模型的稳健性和准确性。为了进一步弥补仅从静态图像获取特征的局限性,研究团队还引入了时间编码器(Temporal Encoder)。该组件能够学习和捕捉相邻表情图像特征之间的时间关系,从而增强了模型对面部表情随时间变化的动态理解能力。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对CE赛道人类情绪表达变得复杂的挑战,需要同时考虑局部和全局的面部表情来做出判断,研究团队提出了一种基于集成学习的解决方案,采用卷积网络、视觉Transformer和多尺度局部注意网络分别训练三个表情分类模型,并通过后期融合技术将它们的输出合并,以综合考量局部和全局表情特征,从而显著提升了在RAF-DB数据集上的识别准确度。此外,方法还展示了在C-EXPR-DB数据集上部分区域实现零样本学习的能力,为复合表情识别的进一步研究和应用提供了新的方法和视角。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

针对EMI赛道数据集中情感表达的复杂性和多样性的挑战,研究团队基于ResNet18和面部动作单元(AUs)提取了丰富的双通道视觉特征用于视频模态,以及基于Wav2Vec2.0提取了有效的单通道音频特征用于音频模态。这使我们能够获得视听模态下综合的情感特征。此外,通过后期融合策略,我们对视觉和声学模型的预测进行了平均,从而更准确地估计了视听情感模仿强度。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

作为这些成果的延续与总结,研究团队将这些研究成果整理成四篇学术论文,并于国际顶级(CVPR)会议上发表。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

继2023年发布山海大模型以来,云知声持续推动AGI技术在智慧物联、智慧医疗等领域全面应用。基于山海大模型,云知声持续拓展智能体(Agent)、检索增强生成(RAG)及多模态融合能力,积极探索更广泛的应用场景,并先后入选北京市通用人工智能十大模型伙伴及大模型十大应用案例,成为大模型领域的佼佼者。这次技术评测,是云知声多模态能力拓展的重要阶段性成果。tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

展望未来,中国科大-云知声联合团队将继续秉持技术创新的精神,积极推动情感行为分析技术的研发与升级,打造更加真实、生动且富有情感温度的人机智能对话世界。(咸宁新闻网)tQU速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

美国在联合国大会上再次一票否决呼吁加沙停火的决议草案,这一举动再次引发了外界对美国在中东问题上的立场和偏袒以色列的质疑。巴勒斯坦常驻联合国观察员曼苏尔在会上发言时,手举因以军行动及围困而严重营养不良的加沙 最近看到一组杂志照片,还在想这是哪个明星,怎么美得这么清新自然,后来惊觉那原来是王诗龄。有种“我云养的闺女长大了”的激动,但更多的是意外。《爸爸去哪儿》第一季,我是一集不落追过来的,那时候几个小朋友里,我最喜欢的是 21世纪经济报道记者张梓桐 北京报道21世纪经济报道记者注意到,今年《政府工作报告》(以下简称《报告》)提到对2024年经济增长目标设定在5%左右,强调今年我国发展面临的环境仍是战略机遇 不同的品牌在选择品牌大使方面有着各不相同的标准,更多品牌会选择“流量明星”,通过爆发式的流量和热度,让品牌获得更多的曝光。不过与流量明星合作可能会导致喧宾夺主,大众容易把目光放在明星身上,反而更 一、区域经济深圳就业登记人数创历史新高2023年,深圳全市新引进人才入户15.67万人;截至2023年底,深圳就业登记人数1255.95万人,达历史新高,其中非深户籍就业人数995.50万人。在《中国城 在当下这个充满变革与创新的时代,“新质生产力”正成为推动社会进步的重要力量。新质生产力以其高科技、高效能、高质量的特性,正在逐渐替代传统的经济增长方式和生产力发展路径,引领着各行各业走向更加 。

本文链接:中国科大-云知声联合团队斩获CVPR2024三项季军http://www.sushuapos.com/show-1-17840-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: Witsbb健敏思牵手京东健康,与“无敏”国际营养品牌共同助力敏宝健康成长

下一篇: 宏昆控股集团董事长陈芳与新奥莱控股集团董事长刘文献举行会谈

热门资讯

推荐资讯

  • 九分牛仔裤和衬衫搭配图片

    九分牛仔裤和衬衫搭配图片:九分牛仔裤搭配什么鞋子?1.休闲风搭配:选择一双休闲款的运动鞋或帆布鞋,增添轻松休闲感。 2.正式休闲搭配:选择一双皮质驾车鞋或船鞋,既舒适又展现绅

  • 牛仔半身开叉长裙怎么穿好看?

    牛仔半身开叉长裙搭配什么上衣?牛仔半身开叉长裙是一种时尚而又休闲的款式,适合各种场合。以下是几种常见的搭配建议: 1.简约休闲风搭配:搭配一件简约的白色T恤或黑色T恤,简洁

  • 牛仔包臀短裙配什么鞋(牛仔包臀短裙穿搭推荐)

    牛仔包臀短裙搭配什么鞋子?牛仔包臀短裙搭配的鞋子可以选择高跟鞋、尖头高跟靴或者凉鞋。这些鞋子都可以让穿着者看起来更加修长和优雅,也能和牛仔包臀短裙的时尚感相匹配。另

  • 接龙派利是,今晚到谁家?

    话不多说,YOKA君这就带你好好盘点一下: ――龙情趣意组―― 这一组的选手拼的可不止是红包的设计,还有创意! RIMOWA RIMOWA用趣意呈现新春祝福,迷你象棋「帅」先

  • 每日五行穿衣运势

    一、引言在日常生活中,我们常常会关注每日的运势,希望能够在这个基础上调整自己的状态,从而让生活更加顺利。而五行穿衣运势作为运势调整的一种方式,自古以来就受到了人们的

  • 短款羽绒服搭配图片女:时尚实用必备,让你成为冬季的焦点

    一、引言冬天来了,气温骤降,羽绒服成为了许多女性保暖的首选。短款羽绒服相较于长款,不仅更加时尚,而且实用性也更强。那么,如何搭配短款羽绒服,才能让你成为冬季的焦点呢?本文将

  • 粉色大衣搭配什么颜色打底?告别撞色,教你打造绝美搭配

    一、引言寒冬腊月,粉色大衣凭借其甜美可人的气息成为了不少女性的心头好。然而,如何为粉色大衣搭配合适的打底颜色,以打造出令人惊艳的视觉效果,成为了一道摆在众多时尚新手面

  • 狗男和鼠女相配婚姻如何

    狗男和鼠女相配婚姻如何?这是一个非常有趣的话题,让我们来深入探讨一下。我们需要了解一下狗男和鼠女的性格特点。狗男通常忠诚、稳重、有责任感,而鼠女则聪明、机智、善于

  • 黑灰色搭配什么颜色好看?

    在时尚界,黑灰色搭配一直是一种经典且不过时的组合。这两种颜色的搭配可以营造出一种简约、高雅和神秘的氛围。那么,黑灰色搭配什么颜色好看呢?今天,我将为大家分享一下我的一

  • 女老爹鞋配什么裤子好看?这三种搭配让你时尚又个性!

    在时尚潮流不断变化的今天,女老爹鞋已经成为了越来越多女生鞋柜里的必备单品。但是,如何搭配裤子才能更好地展示女老爹鞋的独特魅力呢?今天,我就为大家推荐三种搭配方式,让你穿

  • 灰色大衣搭配图片:时尚与经典的碰撞,让你成为街头焦点

    一、引言随着时尚潮流的不断演变,人们对于穿搭的追求也越来越高。在众多服饰中,灰色大衣始终以其简约、优雅的特点备受青睐。那么如何将灰色大衣穿出独特的时尚感呢?本文将为

  • 深蓝色最佳配色表:打造优雅与舒适的视觉空间

    一、引言在室内设计和平面设计中,配色至关重要。正确的配色可以营造出一种独特的氛围,使空间更具吸引力。深蓝色是一种优雅且沉稳的颜色,适合用于多种场合。那么,如何搭配深蓝

  • 日榜
  • 周榜
  • 月榜