两阶段的视频字幕检测和提取算法

摘要：

视频字幕检测和提取是视频理解的关键技术之一.文中提出一种两阶段的字幕检测和提取算法,将字幕帧和字幕区域分开检测,从而提高检测效率和准确率.第一阶段进行字幕帧检测:首先,根据帧间差算法进行运动检测,对字幕进行初步判断,得到二值化图像序列;然后,根据普通字幕和滚动字幕的动态特征对该序列进行二次筛选,得到字幕帧.第二阶段对字幕帧进行字幕区域检测和提取:首先,利用Sobel边缘检测算法初检文字区域;然后,利用高度约束等剔除背景,并根据宽高比区分出纵向字幕和横向字幕,从而得到字幕帧中的所有字幕,即静止字幕、普通字幕、滚动字幕.该方法减少了需要检测的帧数,将字幕检测效率提高了约11%.实验对比结果证明,相比单一使用帧间差和边缘检测的方法,该方法在F值上提升约9%.

关键词：视频字幕、检测和提取、帧间差、动态特征、Sobel边缘检测

所属期刊栏目：45

分类号：TP391(计算技术、计算机技术)

资助基金：国家自然科学基金61472059,61772108

在线出版日期：2018-09-06（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：50-53,62