多媒体情感标签标注中音频信号重要性分析

摘要：

情感标签标注是情感计算中的一个重要领域.该领域中针对音频、图像和多媒体内容的情感标签标注已有多个相关工作发表.为分析某个基于脑电图的大脑编码的多媒体情感标签标注中音频信号的重要性,情感计算公开数据库DEAP被用作测试基准.基于DEAP数据库的多媒体刺激,共提取了音频特征和三类视频特征.首先仅使用视频特征基于该框架进行多媒体标签标注任务,之后联合使用音频和视频特征进行同样的工作.实验结果表明,与仅使用视频特征的结果相比,联合使用音视频特征可以提高标注准确率,并且没有因为增加特征维数造成性能损失.

关键词：情感计算、情感标签标注、脑电图、多模态融合

所属期刊栏目：54

分类号：TP37(计算技术、计算机技术)

资助基金：国家自然科学基金61333017

在线出版日期：2018-06-15（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：1-4