监控系统、方法、装置、服务器及存储介质
本申请公开了一种监控系统、方法、装置、服务器及存储介质，属于监控技术领域。系统包括：语音采集设备、情感识别服务器和数据管理服务器，语音采集设备，用于采集语音信号，将语音信号和与语音采集设备具有关联关系的用户的身份标识发送给情感识别服务器；情感识别服务器，用于基于身份标识调用用户的所有情感识别模型，每个情感识别模型与用户的一种情感状态对应；基于语音信号，通过调用的情感识别模型确定用户当前的情感状态信息；将确定的情感状态信息发送给数据管理服务器；数据管理服务器，用于对情感状态信息进行管理。该监控系统可以对用户的情感状态进行监控，增加了监控系统的管理性能。
发明专利
CN201910219098.2
2019-03-21
CN111739558A
2020-10-02
G10L25/63(2013.01)
杭州海康威视数字技术股份有限公司
李婉瑜;陈展
310051 浙江省杭州市滨江区阡陌路555号
北京三高永信知识产权代理有限责任公司
李珂珂
浙江;33
1.一种监控系统，其特征在于，所述系统包括：语音采集设备、情感识别服务器和数据管理服务器，所述情感识别服务器分别与所述语音采集设备和所述数据管理服务器建立通信连接； 所述语音采集设备，用于采集语音信号，将所述语音信号和与所述语音采集设备具有关联关系的用户的身份标识发送给所述情感识别服务器； 所述情感识别服务器，用于基于所述身份标识调用所述用户的所有情感识别模型，每个情感识别模型与所述用户的一种情感状态对应；基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息；将确定的情感状态信息发送给所述数据管理服务器； 所述数据管理服务器，用于对所述情感状态信息进行管理。 2.如权利要求1所述的系统，其特征在于，所述情感识别服务器，用于基于所述身份标识调用所述用户的所有情感识别模型，包括： 所述情感识别服务器，用于基于所述身份标识，从存储的参考对应关系中确定对应的所有情感识别模型标识，所述参考对应关系用于存储多个用户中每个用户的身份标识与所述每个用户的所有情感识别模型标识之间的对应关系；调用所确定的所有情感识别模型标识对应的情感识别模型。 3.如权利要求1或2所述的系统，其特征在于，所述情感识别服务器，用于基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息，包括： 所述情感识别服务器，用于提取所述语音信号的声纹特征；分别将所述声纹特征输入至调用的所有情感识别模型中的每个情感识别模型，由所述每个情感识别模型对所述声纹特征进行识别处理并输出情感相似度；基于输出的所有情感相似度，确定最大情感相似度对应的情感识别模型；将确定的情感识别模型对应的情感状态信息确定为所述用户当前的情感状态信息。 4.如权利要求1所述的系统，其特征在于，所述情感识别服务器基于所述身份标识调用所述用户的所有情感识别模型之前，还用于： 基于所述身份标识，调用所述用户对应的语音验证模型；通过所述语音验证模型对所述语音信号进行语音验证；对应的，当对所述语音信号验证通过时，执行所述基于所述身份标识调用所述用户的所有情感识别模型的操作。 5.如权利要求1所述的系统，其特征在于，所述情感识别服务器基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息之后，还用于： 将所述语音信号和所述情感状态信息保存为训练样本，所述训练样本用于对所述情感状态信息对应的情感识别模型继续训练。 6.如权利要求1所述的系统，其特征在于，所述将确定的情感状态信息发送给所述数据管理服务器，包括： 将所述语音信号和所述确定的情感状态信息发送给所述数据管理服务器； 对应的，所述数据管理服务器，用于对所述情感状态信息进行管理，包括： 所述数据管理服务器，用于对所述语音信号和所述情感状态信息进行管理。 7.一种监控方法，其特征在于，所述方法应用于监控系统的情感识别服务器中，所述监控系统还包括语音采集设备和数据管理服务器，所述情感识别服务器分别与所述语音采集设备和所述数据管理服务器建立通信连接； 接收所述语音采集设备采集的语音信号和与所述语音采集设备具有关联关系的用户的身份标识； 基于所述身份标识调用所述用户的所有情感识别模型，每个情感识别模型与所述用户的一种情感状态对应； 基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息； 将确定的情感状态信息发送给所述数据管理服务器进行管理。 8.如权利要求7所述的方法，其特征在于，所述基于所述身份标识调用所述用户的所有情感识别模型，包括： 基于所述身份标识，从存储的参考对应关系中确定对应的所有情感识别模型标识，所述参考对应关系用于存储多个用户中每个用户的身份标识与所述每个用户的所有情感识别模型标识之间的对应关系； 调用所确定的所有情感识别模型标识对应的情感识别模型。 9.如权利要求7或8所述的方法，其特征在于，所述基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息，包括： 提取所述语音信号的声纹特征； 分别将所述声纹特征输入至调用的所有情感识别模型中的每个情感识别模型，由所述每个情感识别模型对所述声纹特征进行识别处理并输出情感相似度； 基于输出的所有情感相似度，确定最大情感相似度对应的情感识别模型； 将确定的情感识别模型对应的情感状态信息确定为所述用户当前的情感状态信息。 10.如权利要求7所述的方法，其特征在于，所述基于所述身份标识调用所述用户的所有情感识别模型之前，还包括： 基于所述身份标识，调用所述用户对应的语音验证模型； 通过所述语音验证模型对所述语音信号进行语音验证； 对应的，当对所述语音信号验证通过时，执行所述基于所述身份标识调用所述用户的所有情感识别模型的操作。 11.如权利要求7所述的方法，其特征在于，所述基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息之后，还包括： 将所述语音信号和所述情感状态信息保存为训练样本，所述训练样本用于对所述情感状态信息对应的情感识别模型继续训练。 12.如权利要求7所述的方法，其特征在于，所述将确定的情感状态信息发送给所述数据管理服务器，包括： 将所述语音信号和所述确定的情感状态信息发送给所述数据管理服务器进行管理。 13.一种监控装置，其特征在于，配置于监控系统的情感识别服务器中，所述监控系统还包括语音采集设备和数据管理服务器，所述情感识别服务器分别与所述语音采集设备和所述数据管理服务器建立通信连接；所述装置包括： 接收模块，用于接收所述语音采集设备采集的语音信号和与所述语音采集设备具有关联关系的用户的身份标识； 调用模块，用于基于所述身份标识调用所述用户的所有情感识别模型，每个情感识别模型与所述用户的一种情感状态对应； 确定模块，用于基于所述语音信号，通过调用的情感识别模型确定所述用户当前的情感状态信息； 发送模块，用于将确定的情感状态信息发送给所述数据管理服务器进行管理。 14.如权利要求13所述的装置，其特征在于，所述调用模块用于： 基于所述身份标识，从存储的参考对应关系中确定对应的所有情感识别模型标识，所述参考对应关系用于存储多个用户中每个用户的身份标识与所述每个用户的所有情感识别模型标识之间的对应关系； 调用所确定的所有情感识别模型标识对应的情感识别模型。 15.如权利要求13或14所述的装置，其特征在于，所述确定模块用于： 提取所述语音信号的声纹特征； 分别将所述声纹特征输入至调用的所有情感识别模型中的每个情感识别模型，由所述每个情感识别模型对所述声纹特征进行识别处理并输出情感相似度； 基于输出的所有情感相似度，确定最大情感相似度对应的情感识别模型； 将确定的情感识别模型对应的情感状态信息确定为所述用户当前的情感状态信息。 16.如权利要求13所述的装置，其特征在于，所述调用模块还用于： 基于所述身份标识，调用所述用户对应的语音验证模型； 通过所述语音验证模型对所述语音信号进行语音验证； 当对所述语音信号验证通过时，基于所述身份标识调用所述用户的所有情感识别模型。 17.如权利要求13所述的装置，其特征在于，所述装置还包括： 存储模块，用于将所述语音信号和所述情感状态信息保存为训练样本，所述训练样本用于对所述情感状态信息对应的情感识别模型继续训练。 18.如权利要求13所述的装置，其特征在于，所述发送模块用于： 将所述语音信号和所述确定的情感状态信息发送给所述数据管理服务器进行管理。 19.一种情感识别服务器，其特征在于，包括： 处理器； 用于存储处理器可执行指令的存储器； 其中，所述处理器被配置为实现权利要求7-12所述的任一项方法的步骤。 20.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现权利要求7-12所述的任一项方法的步骤。