新闻中心
新闻中心

当前位置:首页 / 新闻中心 / 实验室动态 / 正文

CSA多模态情感计算课题组第22期学术组会召开

2025-05-17

5月15日,CSA多模态情感计算课题组第22期学术组会成功召开,会议由国际联合实验室宋斌老师主持。本次组会的主题是在复杂情境下的多模态情感分析。

河南科技大学2023级硕士研究生徐梓博汇报了文献《Multimodal Mutual Attention-Based Sentiment Analysis Framework Adapted to Complicated Contexts》。该文献提出了一种适用于复杂语境的多模态基于相互注意的情感分析框架(MMSA)。该框架包括3个层次的子任务:保持单一模态的**语义并增强共同语义;挖掘**语义与共同语义之间的关联;平衡**语义与共同语义的决策。在该框架下,开发了多视角分层融合模块(MHF),实现了多模态数据的充分融合,不同模态之间相互约束,并在下一步调整融合顺序以增强跨模态的互补性.为了平衡数据,通过对阳性和阴性样本应用不同的权重来计算损失。在CH-SIMS和CMU-MOSEI多模态数据集上的实验结果证明了多模态情感分析方法的有效性。

图片1.png

在交流讨论环节,宋斌老师对汇报内容进行了总结,并提出了建议,与会成员主要针对文献的研究思路、创新点及不明之处展开了热烈的讨论,为下一阶段课题研究提供了新思路。

(图文/徐梓博  审核/宋斌)


微信扫码分享