用于在线互动平台的处理方法、装置及电子设备
本申请提出了一种用于在线互动平台的处理方法、装置及电子设备，在登录多方互动平台进行多方通话的场景下，参与者说话过程中，其使用的第一电子设备可以检测其采集到的音频帧是否包含预设关键词，并在确定第一时刻采集到的音频帧包含预设关键词时，提取能够表达与该预设关键词关联的完整语义的多个目标音频帧，并将所提取的目标音频帧发送至预设关键词关联的第二电子设备，以使得使用第二电子设备参与者未听清楚该目标音频帧的内容的情况下，通过输出多个目标音频帧能够得知之前其错过的通话内容，提高了多方通话质量，且提高了用户对在线互动平台的体验感受。
发明专利
CN202010624062.5
2020-06-30
CN111798872A
2020-10-20
G10L25/57(2013.01)
联想(北京)有限公司
张学荣;周席龙;许威;张晓平;李斌
100085 北京市海淀区上地信息产业基地创业路6号
北京集佳知识产权代理有限公司
姚璐华
北京;11
1.一种用于在线互动平台的处理方法，所述方法包括： 检测第一电子设备采集的音频帧是否包含预设关键词； 在所述第一电子设备音频采集过程中，如果在第一时刻采集的音频帧包含所述预设关键词，提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧； 将所述多个目标音频帧发送至所述预设关键词关联的第二电子设备。 2.根据权利要求1所述的方法，所述提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧，包括： 对从所述第一电子设备从第二时刻开始连续采集的音频帧进行语义分析，其中，所述第二时刻晚于所述第一时刻； 依据所述语义分析结果，从所述连续采集的音频帧中，提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧。 3.根据权利要求2所述的方法，所述依据所述语义分析结果，从所述连续采集的音频帧中，提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧，包括： 检测从所述第二时刻到当前时刻已缓存的历史音频帧，与所述当前时刻采集的音频帧的语义分析结果是否满足条件，所述条件是指能够表达与所述预设关键词关联的完整语义； 如果不满足所述条件，继续对下一时刻采集的音频帧的语义分析结果进行检测，直至得到的语义分析结果满足所述条件，提取满足所述条件的多个目标音频帧。 4.根据权利要求1所述的方法，所述检测第一电子设备采集的音频帧是否包含预设关键词，包括： 对第一电子设备采集的音频帧进行文本转换，检测得到的文本信息中是否包含预设关键词；或者， 对第一电子设备采集的音频帧进行声谱分析，依据声谱分析结果，确定当前采集到的音频帧是否包含预设关键词。 5.根据权利要求1～4任一项所述的方法，所述方法还包括： 在确定所述多个目标音频帧的过程中，同步确定所述第一电子设备展示或图像采集器采集的，与所述目标音频帧的时间信息对应的目标视频帧； 所述将所述多个目标音频帧发送至所述预设关键词关联的第二电子设备，包括： 由同一时间信息对应的目标音频帧和目标视频帧，构建目标音视频数据包，并将构建的多个所述目标音视频数据包发送至所述预设关键词关联的第二电子设备；或者， 将所述多个目标音频帧以及确定的多个目标视频帧，分别通过对应的数据传输通道，发送至与所述预设关键词关联的第二电子设备。 6.根据权利要求1～4任一项所述的方法，所述将所述多个目标音频帧发送至所述预设关键词关联的第二电子设备，包括： 对所述多个目标音频帧进行语义文本转换，得到目标文本信息； 将所述目标文本信息发送至与所述预设关键词关联的第二电子设备输出； 接收所述第二电子设备采集的针对所述目标文本信息的反馈音频帧； 响应针对所述反馈音频帧的播放指令，播放所述反馈音频帧。 7.一种用于在线互动平台的处理方法，所述方法包括： 接收第一电子设备采集并发送的音频帧； 在输出所述音频帧过程中，检测所述音频帧是否包含针对自身电子设备的预设关键词； 如果在第一时刻输出的音频帧包含所述预设关键词，提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧； 对所述多个目标音频帧进行存储。 8.一种用于在线互动平台的处理装置，所述装置包括： 音频帧检测模块，用于检测第一电子设备采集的音频帧是否包含预设关键词； 目标音频帧提取模块，用于在所述第一电子设备音频采集过程中，如果第一时刻采集的音频帧包含所述预设关键词，提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧； 目标音频帧传输模块，用于将所述多个目标音频帧发送至所述预设关键词关联的第二电子设备。 9.一种用于在线互动平台的处理装置，所述装置包括： 音频帧接收模块，用于接收第一电子设备采集并发送的音频帧； 音频帧检测模块，用于在输出所述音频帧过程中，检测所述音频帧是否包含针对自身电子设备的预设关键词； 目标音频帧提取模块，用于在第一时刻输出的音频帧包含所述预设关键词的情况下，提取能够表达与所述预设关键词关联的完整语义的多个目标音频帧； 目标音频帧存储模块，用于对所述多个目标音频帧进行存储。 10.一种电子设备，所述电子设备包括： 音频采集器；音频播放器； 存储器，用于存储实现如权利要求1～7任一项所述的用于在线互动平台的处理方法的程序； 处理器，用于加载并执行所述存储器存储的所述程序，以实现如权利要求1～7任一项所述的用于在线互动平台的处理方法的各步骤。