MC-CA:基于模态时序列耦合与交互式多头注意力的多模态情感分析

摘要：

针对现有多模态情感分析模型对模态交互问题的忽视导致其性能受限的问题,提出一种基于模态时序列耦合与交互式多头注意力的多模态情感分析模型(MC-CA).利用仿射变换耦合模态的情感信息和时序信息,使用交互式多头注意力机制获取模态间的交互信息,利用多通道情感预测方法综合全局与局部信息实现多模态协同训练.在多个公开数据集上的实验结果表明,该模型能够建立多模态数据之间的交互,在多模态情感分析任务中取得优异的性能.

关键词：多模态情感分析、仿射变换、交互式多头注意力

所属期刊栏目：35

分类号：TP391(计算技术、计算机技术)

在线出版日期：2023-08-25（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：680-687