融合3D DenseNet的零样本视频分类

摘要：

零样本视频分类(zero-shot video classification,ZS VC)采用的点积分类方式容易使神经元产生较高方差,从而导致模型对输入分布的变化非常敏感.针对该问题,采用三维密集网络(3D DenseNet)与余弦相似性相结合的方法,提出了一种基于 3D DenseNet 的零样本视频分类(3D DenseNet for zero-shot video classification,DZSVC)算法,通过使用余弦相似性的分类方式替代点积分类方式来控制方差的范围,使模型对不同的输入幅值具有更强的鲁棒性.该算法首先将视频数据输入到3D DenseNet中,利用3D DenseNet的密集特性提取更丰富的时间和空间信息,并将提取出来的特征向量映射到公共空间.采用基于余弦相似性的方法对视频进行分类,在UCF101数据集和HMDB51数据集上的准确率分别为32.9％和20.2％,UCF50数据集和HMDB25数据集上的准确率分别为41.4％和23.7％,实验结果表明所提算法具有良好的分类效果.

关键词：零样本、三维密集网络、余弦相似性、视频分类

所属期刊栏目：48

分类号：P208(一般性问题)

资助基金：国家自然科学基金61772328

在线出版日期：2023-04-28（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：480-488