基于UV位置图的视频三维人脸表情克隆

摘要：

为了解决三维人脸表情克隆时的准确性与实时性问题,提出了一种基于UV位置图的视频三维人脸表情克隆方法.首先逐帧读取视频进行人脸检测,然后裁剪出人脸区域,输入到位置图回归网络中得到UV位置图,最后根据UV位置图获得人脸关键点三维信息,驱动三维人脸模型产生变形,完成人脸表情克隆.为了提高克隆效果,构建了基于Ghost瓶颈的轻量级网络,并根据人脸肌肉运动规律与表情变化特征设计了一种新的人脸分区方式及权重,结合Wing Loss损失函数,对卷积神经网络模型进行训练.使用所提算法与其他算法在AFLW2000-3D、COFW-68数据集上进行对比实验,结果表明,所提算法提高了人脸关键点检测的准确率,能够有效解决视频三维人脸表情克隆的准确性与实时性问题.

关键词：表情克隆、UV位置图、人脸关键点检测、卷积神经网络、三维人脸模型

所属期刊栏目：55

分类号：TP391.4(计算技术、计算机技术)

资助基金：河北省自然科学基金F2019202054

在线出版日期：2023-01-11（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：49-56