基于交互注意力机制的多模态情感识别算法

摘要：

在多模态语音情感识别中,现有的研究通过提取大量特征来识别情感,但过多的特征会导致关键特征被淹没在相对不重要特征里,造成关键信息遗漏.为此提出了一种模型融合方法,通过两种注意力机制来寻找可能被遗漏的关键特征.本方法在IEMOCAP数据集上的四类情感识别准确率相比现有文献有明显提升;在注意力机制可视化下,两种注意力机制分别找到了互补且对人类情感识别重要的关键信息,从而证明了所提方法相比传统方法的优越性.

关键词：多模态情感识别、注意力机制、信息交互

所属期刊栏目：38

分类号：TP183(自动化基础理论)

在线出版日期：2021-06-09（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：1689-1693