基于RGB-D图像弱监督学习的3D人体姿态估计

摘要：

针对于深度图数据缺乏大量的3D标签、泛化能力差的问题,结合现有的弱监督网络结构,提出一种基于RGB-D图像的弱监督模型实现3 D人体姿态估计的方法,整体呈现两级级联结构.首先通过使用预处理后的RGB-D数据作为2 D姿态估计模块的输入,提取出人体关节热图;然后将热图进行积分回归生成对应的关节点坐标;最后将生成的关节点作为改进型深度回归模块的输入完成姿态估计.通过在公开数据集Human 3.6M和ITOP上进行验证,实验结果表明:本文提出的弱监督网络模型在参数量上减少了20.9％,训练时间上降低了37.9％.提出的模型能同时适用于深度图和彩色图,且具有较强的鲁棒性.

关键词：3D人体姿态估计;深度图像;弱监督;积分回归;沙漏结构

所属期刊栏目：41

分类号：TP391(计算技术、计算机技术)

资助基金：国家重点研发计划2017YFB0404604

在线出版日期：2022-01-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：69-71,84