一种基于人工智能的服务测试方法及装置

摘要：

本申请提供了一种基于人工智能的服务测试方法、装置、电子设备及计算机可读存储介质；方法包括：响应于针对电子设备中服务的测试请求操作，根据语料输出用于测试所述电子设备的语音指令；对所述电子设备针对所述语音指令的响应过程进行图像采集，得到所述电子设备在所述响应过程中输出的图像数据；对所述图像数据进行识别处理，得到所述响应过程中的多个不同阶段的图像；呈现所述响应过程中的多个不同阶段的图像。通过本申请，能够自动化的测试服务从而提升测试效率。

专利类型：发明专利

申请/专利号：CN202010879057.9

申请日期：2020-08-27

公开/公告号：CN112037763A

公开/公告日：2020-12-04

主分类号：G10L15/01(2013.01)

申请/专利权人:腾讯科技(深圳)有限公司

发明/设计人:张杰;唐文

主申请人地址:518000 广东省深圳市南山区高新区科技中一路腾讯大厦35层

专利代理机构:北京派特恩知识产权代理有限公司

代理人:李昂%张颖玲

国别省市代码:广东;44

权利要求：

1.一种基于人工智能的服务测试方法，其特征在于，所述方法包括： 响应于针对电子设备中服务的测试请求操作，根据语料输出用于测试所述服务的语音指令； 对所述电子设备针对所述语音指令的响应过程进行图像采集，得到所述电子设备在所述响应过程中输出的图像数据； 对所述图像数据进行识别处理，得到所述响应过程中的多个不同阶段的图像； 呈现所述响应过程中的多个不同阶段的图像。 2.根据权利要求1所述的方法，其特征在于， 所述多个不同阶段中包括所述电子设备的唤醒前阶段； 所述对所述图像数据进行识别处理，得到所述响应过程的多个不同阶段的图像，包括： 从所述图像数据中识别出第一帧图像，将所述第一帧图像确定为所述电子设备在所述唤醒前阶段的图像。 3.根据权利要求1所述的方法，其特征在于， 所述多个不同阶段中包括所述电子设备的语音指令识别完成阶段； 所述对所述图像数据进行识别处理，得到所述响应过程中的多个不同阶段的图像，包括： 在所述电子设备的人机交互界面中确定语音指令识别区域，其中，所述语音指令识别区域是用于显示针对所述语音指令的语音识别结果的区域； 针对所述图像数据中的每一帧图像，识别出所述每一帧图像的所述语音指令识别区域包括的字符串； 将包括最长字符串的语音指令识别区域对应的图像，确定为所述电子设备在所述语音指令识别完成阶段的图像。 4.根据权利要求1所述的方法，其特征在于， 所述多个不同阶段中包括所述电子设备的语音指令识别完成阶段； 所述对所述图像数据进行识别处理，得到所述响应过程中的多个不同阶段的图像，包括： 在所述电子设备的人机交互界面中确定标准区域，其中，所述标准区域是在响应所述语音指令前未发生变化的区域； 在所述电子设备的人机交互界面中确定语音指令识别区域，其中，所述语音指令识别区域是用于显示针对所述语音指令的语音识别结果的区域； 确定所述图像数据中的第一帧图像的标准区域与后续每帧图像的标准区域之间的第一相似度，将所述第一相似度大于第一相似度阈值的图像组成第一图像集合； 确定所述图像数据中的第一帧图像的语音指令识别区域与后续每帧图像的语音指令识别区域之间的第二相似度，将所述第二相似度小于第二相似度阈值的图像组成第二图像集合； 确定所述第一图像集合和所述第二图像集合中相同的图像，并将所述相同的图像中最后被采集的图像，确定为所述电子设备在所述语音指令识别完成阶段的图像。 5.根据权利要求3所述的方法，其特征在于，所述方法还包括： 针对所述电子设备在所述语音指令识别完成阶段的图像，执行以下处理： 将所述图像的所述语音指令识别区域中的任一位置确定为种子点； 在所述图像中确定与所述种子点相连通、且与所述种子点之间的色差小于色差阈值的目标像素点； 从所述图像中提取出由所述种子点、以及多个所述目标像素点组成的区域； 将从所述区域识别出的字符与所述语料进行比对，并根据比对结果确定所述服务针对所述语音指令的识别结果。 6.根据权利要求5所述的方法，其特征在于，所述根据比对结果确定所述服务针对所述语音指令的识别结果，包括： 当所述字符与所述语料一致时，确定所述服务针对所述语音指令的识别结果正确； 当所述字符与所述语料不一致时，确定所述服务针对所述语音指令的识别结果错误。 7.根据权利要求1所述的方法，其特征在于， 所述多个不同阶段中包括所述电子设备的语音指令响应阶段； 所述对所述图像数据进行识别处理，得到所述响应过程的多个不同阶段的图像，包括： 在所述电子设备的人机交互界面中确定标准区域，其中，所述标准区域是在响应所述语音指令前未发生变化的区域； 确定所述图像数据中第一帧图像的标准区域与后续每帧图像的标准区域之间的第一相似度； 将与所述第一帧图像的标准区域的第一相似度最小的图像，确定为所述电子设备在所述语音指令响应阶段的图像。 8.根据权利要求1至7任一项所述的方法，其特征在于，所述方法还包括： 对所述电子设备针对所述语音指令的响应过程进行音频采集，得到音频数据； 对所述音频数据进行语音识别，得到所述电子设备用于响应所述语音指令的应答文本。 9.根据权利要求8所述的方法，其特征在于，所述方法还包括： 获取针对所述图像以及所述应答文本的评价数据，其中，所述评价数据用于表征所述服务响应所述语音指令的准确性； 将所述图像、所述应答文本以及所述评价数据存储到数据库中。 10.一种基于人工智能的服务测试装置，其特征在于，所述装置包括： 输出模块，用于响应于针对电子设备中服务的测试请求操作，根据语料输出用于测试所述服务的语音指令； 采集模块，用于对所述电子设备针对所述语音指令的响应过程进行图像采集，得到所述电子设备在所述响应过程中输出的图像数据； 识别模块，用于对所述图像数据进行识别处理，得到所述响应过程中的多个不同阶段的图像； 呈现模块，用于呈现所述响应过程中的多个不同阶段的图像。