一种智能洗浴控制方法、设备及存储介质
本发明公开了一种智能洗浴控制方法、设备及存储介质，所述方法包括：采集洗浴场景内用户的语音数据和图像数据；根据所述语音数据进行语音识别输出机器指令，并根据所述图像数据分析得到洗浴场景的分类结果；根据所述机器指令与所述洗浴场景的分类结果，确定设备控制指令；根据所述设备控制指令，控制所述洗浴设备执行控制操作。本发明通过同时采集用户在洗浴场景下的语音数据以及图像数据，然后对语音数据和图像数据进行分析处理，根据得到机器指令并结合图像数据对应的洗浴场景输出不同的设备控制指令，控制洗浴设备执行对应的操作，实现用户对智能洗浴设备的控制，方便用户在洗浴过程中对洗浴设备的控制。
发明专利
CN201910649042.0
2019-07-18
CN112309377A
2021-02-02
G10L15/22(2006.01)
TCL集团股份有限公司
李楠;赵向军;王鑫;郭泽
516006 广东省惠州市仲恺高新技术开发区十九号小区
深圳市君胜知识产权代理事务所(普通合伙)
王永文%刘文求
广东;44
1.一种智能洗浴控制方法，应用于洗浴设备，其特征在于，所述智能洗浴控制方法包括： 采集洗浴场景内用户的语音数据和图像数据； 根据所述语音数据进行语音识别输出机器指令，并根据所述图像数据分析得到洗浴场景的分类结果； 根据所述机器指令与所述洗浴场景的分类结果，确定设备控制指令； 根据所述设备控制指令，控制所述洗浴设备执行控制操作。 2.根据权利要求1所述的智能洗浴控制方法，其特征在于，所述根据所述语音数据进行语音识别输出机器指令，并根据所述图像数据分析得到洗浴场景的分类结果的步骤，包括： 将所述语音数据输入到语音分析模型中进行语音识别，所述语音分析模型输出所述语音数据对应的语音识别结果，并将所述语音识别结果转化为机器指令； 所述语音分析模型已基于历史语音信息与历史语音识别结果的对应关系进行了训练； 将所述图像数据输入到图像分析模型中进行图像分析，获取到所述图像分析模型根据洗浴场景是否存在用户的判断结果输出洗浴场景的分类结果； 所述图像分析模型已基于历史图像信息与历史分类结果的对应关系进行了训练。 3.根据权利要求2所述的智能洗浴控制方法，其特征在于，所述将所述图像数据输入到图像分析模型中进行图像分析，获取到所述图像分析模型根据洗浴场景是否存在用户的判断结果输出洗浴场景的分类结果的步骤包括： 将所述图像数据输入已训练的所述图像分析模型中，所述图像数据依次经过图像去噪、图像压缩、图像特征提取和图像分类的处理后，所述图像分析模型输出洗浴场景的分类结果； 所述图像去噪包括：经过卷积层、批标准化层和线性整流函数处理，使得处理后的图像数据的数值大于0； 所述图像压缩包括：通过全连接网络将高维图像数据压缩为低维图像数据； 所述图像特征提取包括：通过卷积层提取所述低维图像数据中人体的位置特征和边缘特征，并将所述位置特征和所述边缘特征进行拼接输出总的人体图像特征； 所述图像分类包括：将所述人体图像特征经过全连接层进行维度压缩，再经过归一化指数函数得出分类概率，根据分类概率判断分类结果为有人或者无人。 4.根据权利要求3所述的智能洗浴控制方法，其特征在于，所述经过卷积层、批标准化层和线性整流函数处理，使得处理后的图像数据的数值大于0的步骤，包括： 经过所述卷积层对输入的图像数据提取总体特征，经过所述线性整流函数使得处理后的图像数据的数值大于0； 再经过四层结构进行处理，所述四层结构的每一层均包括卷积层、批标准化层和线性整流函数； 先经过所述卷积层处理经过所述线性整流函数处理过的图像数据，提取图像数据的总体特征，再将经过卷积后的图像数据经过所述批标准化层进行标准化处理，最后经过所述线性整流函数使得处理后的图像数据的数值大于0。 5.根据权利要求2所述的智能洗浴控制方法，其特征在于，所述对所述语音数据进行分析处理，根据不同的语音指令输出不同的语音识别结果的步骤，包括： 将所述语音数据输入已训练的所述语音分析模型中，所述语音数据依次经过语音数据编码、语音特征提取和语音数据解码处理后，所述语音分析模型输出语音识别结果； 所述语音数据编码包括：将所输入的语音数据通过编码算法编码为语音数据向量； 所述语音特征提取包括：将所述语音数据向量进行语音特征提取，输出语音数据的特征向量； 所述语音数据解码包括：将所述语音数据通过带有归一化指数函数的全连接神经网络层解码为文字。 6.根据权利要求5所述的智能洗浴控制方法，其特征在于，所述将所述语音识别结果转化为机器指令的步骤，包括： 将用户语音转换为文字指令，将所述文字指令通过编码器使用循环神经网络进行编码； 在编码完成后，将所述文字指令中每一个词的编码向量依次输入到解码器进行解码，生成机器指令。 7.根据权利要求1或2所述的智能洗浴控制方法，其特征在于，所述洗浴场景包括：有用户有语音指令场景、有用户无语音指令场景、无用户有语音指令场景和无用户无语音指令场景。 8.根据权利要求7所述的智能洗浴控制方法，其特征在于，当所述洗浴场景为有用户有语音指令场景时，根据所述语音数据的分析结果生成机器指令，所述洗浴设备根据所述机器指令切换不同的状态。 9.根据权利要求7所述的智能洗浴控制方法，其特征在于，当所述洗浴场景为有用户无语音指令场景时，判断所述洗浴设备处于开启状态还是关闭状态； 当所述洗浴设备处于开启状态时，激活第一计时器，所述第一计时器内部设置有设备状态开启时长参数，当所述第一计时器超过所述设备状态开启时长参数时，则询问用户是否需要切换当前的洗浴设备状态，根据用户的回答生成相应的洗浴指令，对所述洗浴设备的状态进行切换； 当所述洗浴设备处于关闭状态时，激活第二计时器，所述第二计时器内部设置由用户图像连续存在时长参数，当所述第二计时器超过所述用户图像连续存在时长参数时，则询问用户是否需要开启所述洗浴设备，根据用户的回答生成相应的洗浴指令，对所述洗浴设备的状态进行切换。 10.根据权利要求9所述的智能洗浴控制方法，其特征在于，当所述洗浴场景为无用户有语音指令场景时，判断所述洗浴设备处于开启状态还是关闭状态； 当所述洗浴设备处于开启状态时，根据用户的语音数据生成相应的机器指令，所述洗浴设备切换到相应的状态，激活第三计时器，所述第三计时器内部设置有用户离开时长参数，当所述第三计时器超过所述用户离开时长参数时，则生成关闭洗浴设备指令； 当所述洗浴设备处于关闭状态时，根据用户的语音数据生成相应的机器指令，所述洗浴设备切换到相应的状态，激活所述第一计时器，当所述第一计时器超过所述设备状态开启时长参数时，且仍未检测到用户图像，则生成关闭洗浴设备指令。 11.根据权利要求10所述的智能洗浴控制方法，其特征在于，当所述洗浴场景为无用户无语音指令场景时，判断所述洗浴设备处于开启状态还是关闭状态； 当所述洗浴设备处于开启状态时，激活所述第三计时器，当所述第三计时器超过所述用户离开时长参数时，则生成关闭洗浴设备指令； 当所述洗浴设备处于关闭状态时，根据所述语音数据和所述图像数据的输出结果生成保持洗浴设备状态不变的机器指令。 12.一种智能洗浴控制设备，其特征在于，所述智能洗浴控制设备包括： 数据收集模块，用于接收音频采集器采集的语音数据和红外热成像设备采集的图像数据，并将所述语音数据和所述图像数据分别输入到语音分析模块和图像分析模块； 图像分析模块，用于对所述图像数据进行分析处理，判断洗浴场景是否存在用户，并根据洗浴场景是否存在用户的判断结果进行洗浴场景的分类； 语音分析模块，用于对所述语音数据进行分析处理，根据不同的语音指令输出不同的语音识别结果； 指令生成模块，用于将所述语音识别结果中的文字指令转化为机器指令； 智能控制模块，用于接收所述图像分析模块和所述语音分析模块的分析结果，根据不同的洗浴场景输出不同的设备控制指令； 设备控制模块，用于接收所述智能控制模块输出的所述设备控制指令，控制洗浴设备执行控制操作； 所述智能洗浴控制设备还包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的智能洗浴控制程序，所述智能洗浴控制程序被所述处理器执行时实现如权利要求1-11任一项所述的智能洗浴控制方法的步骤。 13.一种存储介质，其特征在于，所述存储介质存储有智能洗浴控制程序，所述智能洗浴控制程序被处理器执行时实现如权利要求1-11任一项所述的智能洗浴控制方法的步骤。