一种基于动作识别及语音技术的手语和唇语互译系统

摘要：

本实用新型公开了一种基于动作识别及语音技术的手语和唇语互译系统，包括有壳体，壳体内设置有FPGA及DSP，壳体上设置有一对用于采集聋哑人手语动作的摄像头A和一对用于采集正常人唇语的摄像头B以及一个用于采集正常人声音的语音识别模块，两摄像头A、两摄像头B、语音识别模块分别通过信号线接入FPGA，FPGA与DSP双向通信连接，DSP分别通过I2C/SPI总线与两摄像头A、两摄像头B、语音识别模块连接，DSP还通过USB总线与上位机通讯连接，上位机外接有显示器、语音播放模块。公开了本实用新型可实现手语和唇语互译，具有很好的应用前景。

专利类型：实用新型

申请/专利号：CN201220688601.2

申请日期：2012-12-13

公开/公告号：CN203070756U

公开/公告日：2013-07-17

主分类号：G10L15/25(2013.01)I

申请/专利权人:合肥寰景信息技术有限公司

发明/设计人:陈拥权;王略志;刘思杨;胡翀豪

主申请人地址:230088 安徽省合肥市高新区黄山路616号3楼

专利代理机构:安徽合肥华信知识产权代理有限公司 34112

代理人:方琦

国别省市代码:安徽;34

权利要求：

一种基于动作识别及语音技术的手语和唇语互译系统，包括有壳体，其特征在于：所述壳体内设置有FPGA及DSP，壳体上设置有一对用于采集聋哑人手语动作的摄像头A和一对用于采集正常人唇语的摄像头B以及一个用于采集正常人声音的语音识别模块，两摄像头A、两摄像头B、语音识别模块分别通过信号线接入FPGA，所述FPGA与DSP双向通信连接，所述DSP分别通过I2C/SPI总线与两摄像头A、两摄像头B、语音识别模块连接，DSP还通过USB总线与上位机通讯连接，上位机外接有显示器、语音播放模块，上位机将DSP传来的摄像头A采集的聋哑人手语动作的图像数据合成视频信号，再将视频信号转化为语音信息通过语音播放模块播出，上位机将DSP传来的摄像头B采集的正常人唇语的图像数据和语音识别模块采集的正常人声音的音频数据合成视频信号，再将视频信号转化为手语动作并在显示器上显示。