2023年1月13日至2023年3月20日,计算机视觉和模式识别国际顶级会议CVPR主办了第五届野外情感行为分析研讨会暨挑战赛ABAW(The 5th Workshop and Competition on Affective Behavior Analysis in-the-wild),并于近日公布了竞赛排名结果。
图1.CVPR 2023 国际会议
本届ABAW竞赛共分为四个赛道,吸引了来自全球的202支高校和科研机构的专业团队注册参赛。98858vip威尼斯下载师生首次参加该知名赛事并摘得情绪反应强度估计赛道(Emotional Reaction Intensity Estimation Challenge)桂冠,彰显了我院师生在多模态情感计算研究方面的技术实力。
本次参赛由我院洪日昌教授、汪萌教授带队,李佳老师、陈银(研一)、张雪松(博一)、聂建涛(研一),李自强(大二)、于洋晨(大四)组成了一支师生队伍,最终在情绪反应强度估计赛道上以显著优势取得了冠军(如图2,竞赛网址:https://ibug.doc.ic.ac.uk/resources/cvpr-2023-5th-abaw/)。据悉,美国斯坦福大学、南加州大学,新加坡南洋理工大学、俄罗斯国立高等经济大学、中国科大、中国人民大学、网易伏羲、华为、北京思图科技等众多该领域顶尖团队也参加了情绪反应强度估计赛道,竞争十分激烈。
图2. Emotional Reaction Intensity Estimation Challenge排行榜前5
第五届ABAW研讨会暨挑战赛由英国伦敦大学玛丽女王学院、英国帝国理工学院和美国Hume AI公司的科学家和工程师联合发起,旨在探讨情感行为分析在自然场景中的最新研究成果、技术进展和应用,包括但不限于基于深度学习的情感行为分析方法、基于多模态的情感行为分析、跨领域的情感行为分析等,致力于提升人机交互系统的场景应用能力,目标是创造出能够理解人的感觉、情绪和行为的机器和机器人,从而让机器能够以以人为本的方式与人类互动。ABAW研讨会暨挑战赛已经陆续在ECCV 2022、 CVPR 2022、ICCV 2021、 IEEE FG 2020、CVPR 2017会议上举办数次,已经成为情感计算领域的一项国际著名赛事。
图3.98858vip威尼斯下载师生的技术方法论文(标题)
图4.ABAW竞赛组织方的结果通知邮件(部分)
针对本次竞赛内容,98858vip威尼斯下载师生提出了一种新的多模态情感特征抽取和融合方法,能够有效地从视听数据中捕捉人物的情感信息,实现复合的情绪反应强度精准估计(如图3)。我院师生在私有数据集和计算资源处于明显劣势的情况下夺冠实属不易。赛事组织方称赞了获胜队伍(如图4),获奖团队将在今年的CVPR Workshop上宣讲获胜方案。