结合BiLSTM和注意力机制的视频行人再识别

摘要：

目的 跨摄像头跨场景的视频行人再识别问题是目前计算机视觉领域的一项重要任务.在现实场景中,光照变化、遮挡、观察点变化以及杂乱的背景等造成行人外观的剧烈变化,增加了行人再识别的难度.为提高视频行人再识别系统在复杂应用场景中的鲁棒性,提出了一种结合双向长短时记忆循环神经网络(BiLSTM)和注意力机制的视频行人再识别算法.方法 首先基于残差网络结构,训练卷积神经网络(CNN)学习空间外观特征,然后使用BiLSTM提取双向时间运动信息,最后通过注意力机制融合学习到的空间外观特征和时间运动信息,以形成一个有判别力的视频层次表征.结果 在两个公开的大规模数据集上与现有的其他方法进行了实验比较.在iLIDS-VID数据集中,与性能第2的方法相比,首位命中率Rank1指标提升了4.5％;在PRID2011数据集中,相比于性能第2的方法,首位命中率Rank1指标提升了3.9％.同时分别在两个数据集中进行了消融实验,实验结果验证了所提出算法的有效性.结论 提出的结合BiLSTM和注意力机制的视频行人再识别算法,能够充分利用视频序列中的信息,学习到更鲁棒的序列特征.实验结果表明,对于不同数据集,均能显著提升识别性能.

关键词：计算机视觉、行人再识别、卷积神经网络、双向长短时记忆循环神经网络(BiLSTM)、注意力机制

所属期刊栏目：24

分类号：TP301.6(计算技术、计算机技术)

在线出版日期：2019-11-12（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：1703-1710