基于实时视频感知的虚拟体育交互系统

摘要：

针对疫情常态化背景下,?传统体育项目受场地、器材等限制,?市场上相关产品价格昂贵、可扩展性不足等问题,?提出了一种基于实时视频感知的虚拟体育交互系统.?该系统设计视频数据采集模块和人体关节点提取模块,结合OpenPose获取人体的关节点坐标,?实时捕捉人体手势以及肢体动作.?动作语义理解模块包括运动动作理解和绘图动作理解.?前者根据运动中肢体关节点的相对位置关系,?识别运动动作语义.?后者将手腕部关节点绘图动作轨迹生成为草图图像,?使用AlexNet进行识别分类,?解析为对应的绘制动作语义.?该模型在边缘端设备的分类准确率为98.83％.?采用基于Unity设计的草图游戏应用作为可视化交互界面,?实现在虚拟场景中的运动交互.?该系统使用实时视频感知交互方式实现居家运动健身,?无需其他的外部设备,?具有更强的参与度和趣味性.

关键词：草图识别、动作识别、动作语义、虚拟体育、人机交互、边缘计算

所属期刊栏目：32

分类号：TP391;G852.9;TN911.73

资助基金：江苏省高校自然科学研究重大项目;江苏省国际科技合作项目

在线出版日期：2023-03-16（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：125-132