基于运动学动态图的人体动作识别方法

摘要：

为了识别RGB-D视频中的人体动作,针对视频中运动信息利用不充分的问题,提出了一种基于运动学动态图的人体动作识别方法.首先利用RGB视频序列和对应的深度图序列生成场景流特征图,基于场景流特征图计算运动学特征图序列,其中包含丰富的运动信息;使用分层排序池化将运动学特征图序列编码为运动学动态图,同时将RGB视频序列编码为外观动态图,最后将运动学动态图和外观动态图输入到双流卷积网络进行人体动作识别.结果表明:基于运动学动态图和双流卷积网络的人体动作识别方法融合了外观信息和运动信息,不仅充分表征了视频的动态,而且使用了视频中具有丰富运动信息的运动学特征;在公开的数据集上对本方法进行验证,在M2I数据集和SBU Kinect Interaction数据集的动作识别率分别为91.8％和95.2％.

关键词：人体动作识别、运动学特征、动态图、双流卷积网络

所属期刊栏目：40

分类号：TN911.73

资助基金：天津市科技支撑计划重点项目14ZCZDGX00033

在线出版日期：2021-03-31（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：53-59