多注意力结合光流的视频超分辨方法

摘要：

针对现如今监控摄像、卫星遥感以及视频娱乐等领域对视频图像的清晰度要求越来越高,而目前大部分视频超分辨方法存在参数量大、恢复的视频存在抖动等问题,提出了一种多注意力结合光流的视频超分辨方法,通过引入多个注意力包括空间注意力、通道注意力以及自注意力来提升超分辨性能.具体而言,作为一种特征加权的增强方法,这些注意力可以捕获视频帧的时空特征并增强自适应性和通道间的依赖性,实现全局学习的功能;同时,提出双阶段特征对齐思路,首先利用光流对视频进行估计,进行第一阶段的特征对齐,然后引入长短是记忆网络结构增强位置和通道的特征融合,进行第二阶段的特征对齐,以防止恢复的视频帧出现抖动.实验结果表明:该方法在评估标准和可视化效果方面都取得了令人满意的效果.

关键词：深度学习、注意力机制、特征对齐、光流估计、视频超分辨

所属期刊栏目：39

分类号：TP391(计算技术、计算机技术)

资助基金：国家自然科学基金61971004

在线出版日期：2022-08-11（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：1-8