跳至内容
MLNLP社区是国内外知名的机器学习与自然语言处理社区,受众覆盖国内外NLP硕博生、高校老师以及企业研究人员。
社区的愿景是促进国内外自然语言处理,机器学习学术界、产业界和广大爱好者之间的交流和进步,特别是初学者同学们的进步。
https://avamerg.github.io/MM25-challenge/
介绍
我们在ACM MM平台发起了AvaMERG:基于虚拟人的多模态共情响应生成挑战赛,旨在推动具备更强情感理解与表达能力的人工智能系统的发展。传统的共情对话研究多聚焦于纯文本模式,难以充分体现人类在多模态交流中所传递的情绪与态度。而本次挑战面向更加真实复杂的人机交互场景,要求参赛模型在接收
多模态对话上下文(文本、语音、图像)的基础上,生成具有情感温度的共情回复,包含三个高度同步的部分:文本回复、富有情感的语音音频,以及具备面部表情与口型同步的视频虚拟人头像。
本任务不仅考验模型对跨模态情感线索的综合建模与理解能力,也对生成的协调性、表现力和人类亲和力提出了更高要求,标志着多模态情感对话研究向更具沉浸感与共情力的方向迈进。获奖者会获得奖牌以及相关奖励,并推荐提交论文发表到MM25。
https://avamerg.github.io/MM25-challenge/
AvaMERG赛道设置
赛道1 Multimodal-Aware Empathetic Response Generation.
参赛者需开发一个能够处理多模态对话上下文,并生成文本共情回复的模型。
赛道2 Multimodal Empathetic Response Generation.
参赛者需开发一个能够处理多模态对话上下文,并生成共情多模态响应的模型。
注册和报名方式
https://docs.google.com/forms/d/e/1FAIpQLSdrBjx4zarmGPMfz5DX36G7Qy3JD0j7j7-oq9uwdP5DLSPLWQ/viewform
重要时间
组织者
官方交流群
关于我们
MLNLP 社区是由国内外机器学习与自然语言处理学者联合构建的民间学术社区,目前已经发展为国内外知名的机器学习与自然语言处理社区,旨在促进机器学习,自然语言处理学术界、产业界和广大爱好者之间的进步。
社区可以为相关从业者的深造、就业及研究等方面提供开放交流平台。欢迎大家关注和加入我们。
(文:机器学习算法与自然语言处理)