基于情绪预测模型的语音发送方法、装置和计算机设备
本申请涉及人工智能技术领域，应用于智慧城市中，揭示了一种基于情绪预测模型的语音发送方法、装置、计算机设备和存储介质，采集侧面压力数据；采集背面温度数据；实时输入行为模式识别模型中，得到行为模式序列；若指定行为模式标记占比大于比例阈值，则实时获取第一语音数据；将第一语音数据输入的情绪值预测模型中，从而得到二维情绪坐标值；若二维情绪坐标值不符合标准，则实时获取第二语音数据，并修改得到第二修正语音数据；得到修正情绪坐标值；若修正情绪坐标值符合标准，则将第二修正语音数据发送给第二通话终端。从而实现高效的语音信息交互。此外，本申请还涉及区块链技术，所述情绪值预测模型可存储于区块链中。
发明专利
CN202010733108.7
2020-07-27
CN111899765A
2020-11-06
G10L25/63(2013.01)
中国平安人寿保险股份有限公司
邹芳;曹磊;袁思明
518000 广东省深圳市福田区益田路5033号平安金融中心14、15、16、41、44、45、46层
深圳市明日今典知识产权代理事务所(普通合伙)
王杰辉%曹勇
广东;44
1.一种基于情绪预测模型的语音发送方法，其特征在于，应用于第一通话终端，所述第一通话终端至少具有四个侧面和一个背面，包括： 在所述第一通话终端与第二通话终端进行语音通话时，通过预设的压力检测器阵列实时采集所述第一通话终端的侧面压力数据，其中所述压力检测器阵列均匀分布于所述第一通话终端的四个侧面； 通过预设的温度检测器阵列实时采集所述第一通话终端的背面温度数据，其中所述温度检测器阵列均匀分布于所述第一通话终端的背面侧； 将所述侧面压力数据和所述背面温度数据，实时输入预设的行为模式识别模型中进行处理，从而得到所述行为模式识别模型输出了行为模式序列，其中所述行为模式序列由多个行为模式标记按时间先后顺序连接而成； 从所述行为模式序列中选出数量最多的指定行为模式标记，并判断所述指定行为模式标记在所述行为模式序列中的数量占比是否大于预设的比例阈值； 若所述指定行为模式标记在所述行为模式序列中的数量占比大于预设的比例阈值，则采用所述第一通话终端上预设的麦克风，实时获取输入的第一语音数据； 将所述第一语音数据输入预设的情绪值预测模型中，从而得到所述情绪值预测模型实时输出的二维情绪坐标值，并根据预设的行为模式标记与二维坐标值标准的对应关系，获取与所述指定行为模式标记对应的指定二维坐标值标准，判断所述二维情绪坐标值是否符合所述指定二维坐标值标准；其中所述二维情绪坐标值由一维情绪数值和另一维置信度数值构成； 若所述二维情绪坐标值不符合所述指定二维坐标值标准，则采用所述第一通话终端上预设的麦克风，实时获取输入的第二语音数据，并根据预设的声学特征修改方法，修改所述第二语音数据中的声学特征，从而得到第二修正语音数据； 将所述第二修正语音数据输入预设的情绪值预测模型中，从而得到所述情绪值预测模型输出的修正情绪坐标值，并判断所述修正情绪坐标值是否符合所述指定二维坐标值标准； 若所述修正情绪坐标值符合所述指定二维坐标值标准，则将所述第二修正语音数据发送给所述第二通话终端。 2.根据权利要求1所述的基于情绪预测模型的语音发送方法，其特征在于，所述温度检测器阵列为非接触式的温度检测器阵列，所述通过预设的温度检测器阵列实时采集所述第一通话终端的背面温度数据的步骤,包括： 根据所述侧面压力数据，模拟出所述第一通话终端的使用者持握第一通话终端的手掌姿势，并获取所述手掌姿势的掌心位置； 从所述温度检测器阵列中选出与所述掌心位置距离最近的指定温度检测器，并获取与所述指定温度检测器与所述掌心位置的第一距离； 利用所述温度检测器阵列实时进行圆锥体空间温度采集操作，从而得到所述第一通话终端的实时背面温度数据；其中所述圆锥体空间温度采集指采集虚拟圆锥体的圆锥面的温度，所述虚拟圆锥体指以所述掌心位置为顶点、所述第一距离为高、所述指定温度检测器为底面中心且底面半径等于预设半径数值的圆锥体。 3.根据权利要求1所述的基于情绪预测模型的语音发送方法，其特征在于，所述将所述侧面压力数据和所述背面温度数据，实时输入预设的行为模式识别模型中进行处理，从而得到所述行为模式识别模型输出了行为模式序列，其中所述行为模式序列由多个行为模式标记按时间先后顺序连接而成的步骤之前，包括： 从预设的数据库中调取预先收集的样本数据，并将所述样本数据按照预设比例划分为训练数据和验证数据；其中所述样本数据包括时间上连续的训练用压力数据、时间上连续的训练用背面温度数据和人工标注的行为模式序列； 调取预设的神经网络模型，并利用所述训练数据对所述神经网络模型进行训练处理，从而得到暂时神经网络模型； 利用所述验证数据对所述神经网络模型进行验证处理，以得到验证结果，并判断所述验证结果是否为合格； 若所述验证结果为合格，则将所述暂时神经网络模型作为所述行为模式识别模型。 4.根据权利要求1所述的基于情绪预测模型的语音发送方法，其特征在于，所述情绪值预测模型由部分语义识别网络结构与情绪值预测网络结构顺序连接构成，所述部分语义识别网络结构用于对所述第一语音数据进行部分语义识别，所述将所述第一语音数据输入预设的情绪值预测模型中，从而得到所述情绪值预测模型实时输出的二维情绪坐标值的步骤,包括： 将所述第一语音数据输入所述部分语义识别网络结构中，从而得到所述部分语义识别网络结构输出的部分语义文本；其中，所述部分语义识别指仅对输入的语音数据中的部分进行识别； 从所述第一语音数据中提取出与所述部分语义文本对应的声学特征；其中所述声学特征至少包括音量与语速； 将所述部分语义文本和所述部分语义文本对应的声学特征输入所述情绪值预测网络结构中，从而得到所述情绪值预测网络结构实时输出的二维情绪坐标值。 5.根据权利要求1所述的基于情绪预测模型的语音发送方法，其特征在于，所述判断所述二维情绪坐标值是否符合所述指定二维坐标值标准的步骤,包括： 对所述情绪值预测模型实时输出的所有的二维情绪坐标值进行异常坐标值去除处理，以得到正常坐标值；其中所述异常坐标值指置信度数值大于预设的置信度阈值的二维情绪坐标值； 建立平面直角坐标系，并以时间为横坐标，所述正常坐标值中的情绪数值为纵坐标，绘制出第一情绪曲线，并生成与所述第一情绪曲线对应的第一情绪函数； 根据公式： F(t)＝min(D(t),p),其中C(t)＝A(t)-B(t)，计算出衡量函数F(t)；其中A(t)为所述第一情绪函数，B(t)为预设的标准情绪函数，C(t)为所述第一情绪函数和所述标准情绪函数的差值函数，min指最小值函数，t为时间，p为预设的误差参数，p大于0； 根据公式：可信时间比值＝第一时间长度/(第一时间长度+第二时间长度)，计算出可信时间比值；其中第一时间长度指所述衡量函数F(t)不等于数值p时的时间轴长度，第二c时间长度指所述衡量函数F(t)等于数值p时的时间轴长度； 判断所述可信时间比值是否大于预设的可信时间阈值； 若所述可信时间比值大于预设的可信时间阈值，则判定所述二维情绪坐标值符合所述指定二维坐标值标准。 6.一种基于情绪预测模型的语音发送装置，其特征在于，应用于第一通话终端，所述第一通话终端至少具有四个侧面和一个背面，包括： 侧面压力数据采集单元，用于在所述第一通话终端与第二通话终端进行语音通话时，通过预设的压力检测器阵列实时采集所述第一通话终端的侧面压力数据，其中所述压力检测器阵列均匀分布于所述第一通话终端的四个侧面； 背面温度数据采集单元，用于通过预设的温度检测器阵列实时采集所述第一通话终端的背面温度数据，其中所述温度检测器阵列均匀分布于所述第一通话终端的背面侧； 行为模式序列获取单元，用于将所述侧面压力数据和所述背面温度数据，实时输入预设的行为模式识别模型中进行处理，从而得到所述行为模式识别模型输出了行为模式序列，其中所述行为模式序列由多个行为模式标记按时间先后顺序连接而成； 比例阈值判断单元，用于从所述行为模式序列中选出数量最多的指定行为模式标记，并判断所述指定行为模式标记在所述行为模式序列中的数量占比是否大于预设的比例阈值； 第一语音数据获取单元，用于若所述指定行为模式标记在所述行为模式序列中的数量占比大于预设的比例阈值，则采用所述第一通话终端上预设的麦克风，实时获取输入的第一语音数据； 二维情绪坐标值获取单元，用于将所述第一语音数据输入预设的情绪值预测模型中，从而得到所述情绪值预测模型实时输出的二维情绪坐标值，并根据预设的行为模式标记与二维坐标值标准的对应关系，获取与所述指定行为模式标记对应的指定二维坐标值标准，判断所述二维情绪坐标值是否符合所述指定二维坐标值标准；其中所述二维情绪坐标值由一维情绪数值和另一维置信度数值构成； 第二语音数据获取单元，用于若所述二维情绪坐标值不符合所述指定二维坐标值标准，则采用所述第一通话终端上预设的麦克风，实时获取输入的第二语音数据，并根据预设的声学特征修改方法，修改所述第二语音数据中的声学特征，从而得到第二修正语音数据； 修正情绪坐标值获取单元，用于将所述第二修正语音数据输入预设的情绪值预测模型中，从而得到所述情绪值预测模型输出的修正情绪坐标值，并判断所述修正情绪坐标值是否符合所述指定二维坐标值标准； 第二修正语音数据发送单元，用于若所述修正情绪坐标值符合所述指定二维坐标值标准，则将所述第二修正语音数据发送给所述第二通话终端。 7.根据权利要求6所述的基于情绪预测模型的语音发送装置，其特征在于，所述温度检测器阵列为非接触式的温度检测器阵列，所述背面温度数据采集单元,包括： 掌心位置获取子单元，用于根据所述侧面压力数据，模拟出所述第一通话终端的使用者持握第一通话终端的手掌姿势，并获取所述手掌姿势的掌心位置； 第一距离获取子单元，用于从所述温度检测器阵列中选出与所述掌心位置距离最近的指定温度检测器，并获取与所述指定温度检测器与所述掌心位置的第一距离； 空间温度采集子单元，用于利用所述温度检测器阵列实时进行圆锥体空间温度采集操作，从而得到所述第一通话终端的实时背面温度数据；其中所述圆锥体空间温度采集指采集虚拟圆锥体的圆锥面的温度，所述虚拟圆锥体指以所述掌心位置为顶点、所述第一距离为高、所述指定温度检测器为底面中心且底面半径等于预设半径数值的圆锥体。 8.根据权利要求6所述的基于情绪预测模型的语音发送装置，其特征在于，所述装置，包括： 样本数据调取单元，用于从预设的数据库中调取预先收集的样本数据，并将所述样本数据按照预设比例划分为训练数据和验证数据；其中所述样本数据包括时间上连续的训练用压力数据、时间上连续的训练用背面温度数据和人工标注的行为模式序列； 训练单元，用于调取预设的神经网络模型，并利用所述训练数据对所述神经网络模型进行训练处理，从而得到暂时神经网络模型； 验证单元，用于利用所述验证数据对所述神经网络模型进行验证处理，以得到验证结果，并判断所述验证结果是否为合格； 行为模式识别模型标记单元，用于若所述验证结果为合格，则将所述暂时神经网络模型作为所述行为模式识别模型。 9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述方法的步骤。 10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法的步骤。