音视频数据处理方法及装置

摘要：

本申请实施例提供了一种音视频数据处理方法及装置，在获得多路待处理音频数据后，针对各路待处理音频数据，根据所述待处理音频数据设定对应的降噪系数。再针对各路所述待处理音频数据，根据得到的所述降噪系数及预设规则设定对应的滤波系数，利用所述滤波系数对所述待处理音频数据进行滤波，得到待混音音频数据。如此，通过对待处理音频数据进行降噪系数获取、滤波及混音处理，有效降低噪声，改善了后续在视频文件中存在多路对讲音频时，出现的播放不连续及音量较低的问题，提高了用户体验。

专利类型：发明专利

申请/专利号：CN201910322621.4

申请日期：2019-04-22

公开/公告号：CN111833892A

公开/公告日：2020-10-27

主分类号：G10L21/007(2013.01)

申请/专利权人:浙江宇视科技有限公司

发明/设计人:王行骏;王陈;黄龙滨

主申请人地址:310000 浙江省杭州市滨江区西兴街道江陵路88号10幢南座1-11层、2幢A区1-3楼、2幢B区2楼

专利代理机构:北京超凡宏宇专利代理事务所(特殊普通合伙)

代理人:杨奇松

国别省市代码:浙江;33

权利要求：

1.一种音视频数据处理方法，其特征在于，所述方法包括： 获得多路待处理音频数据； 针对各路所述待处理音频数据，根据所述待处理音频数据设定降噪系数； 针对各路所述待处理音频数据，根据得到的所述降噪系数及预设规则设定对应的滤波系数，利用所述滤波系数对所述待处理音频数据进行滤波，得到待混音音频数据。 2.根据权利要求1所述的音视频数据处理方法，其特征在于，所述针对各路所述待处理音频数据，根据所述待处理音频数据设定降噪系数的步骤包括： 针对各路所述待处理音频数据，获得所述待处理音频数据的当前第一采样点的值，并获得所述当前第一采样点对应的降噪系数； 根据所述当前第一采样点的值判断所述当前第一采样点是否是噪声点； 若所述当前第一采样点为噪声点，则增大所述降噪系数，若所述当前第一采样点不为噪声点，则降低所述降噪系数。 3.根据权利要求1所述的音视频数据处理方法，其特征在于，所述针对各路所述待处理音频数据，根据得到的所述降噪系数及预设规则设定对应的滤波系数，利用所述滤波系数对所述待处理音频数据进行滤波，得到待混音音频数据的步骤包括： 根据得到的降噪系数及预设规则为各路所述待处理音频数据设定对应的滤波系数； 针对各路所述待处理音频数据，获得所述待处理音频数据中的多个第二采样点，判断各所述第二采样点的绝对值是否大于所述滤波系数； 若所述第二采样点的绝对值大于所述滤波系数，则保持所述第二采样点的值不变，且降低所述降噪系数； 若所述第二采样点的绝对值等于或小于所述滤波系数，则将所述第二采样点的值置零，且增大所述降噪系数； 根据处理后得到的多个第二采样点获得所述待处理音频数据对应的待混音音频数据。 4.根据权利要求3所述的音视频数据处理方法，其特征在于，所述根据得到的所述降噪系数及预设规则为各路所述待处理音频数据设定对应的滤波系数的步骤包括： 获得各路所述待处理音频数据中的当前第二采样点； 获得多个当前第二采样点中的最大值； 获得各所述当前第二采样点对应的降噪系数； 根据得到的最大值、各所述当前第二采样点对应的降噪系数及待处理音频数据的总路数并按以下公式为各路所述待处理音频数据设定对应的滤波系数： FC”i”＝AudioMax×NRC”i”×F(N),i∈”0,N-1” 其中，FC”i”为第i路待处理音频数据对应的滤波系数，AudioMax为所述最大值，NRC”i”为第i路待处理音频数据中当前第二采样点对应的降噪系数，N为待处理音频数据的总路数，N越大F(N)的值越大。 5.根据权利要求1所述的音视频数据处理方法，其特征在于，所述得到待混音音频数据的步骤之后，所述方法还包括： 获得各路所述待混音音频数据中的当前第三采样点； 根据预设采样精度获得所述当前第三采样点可取得的最大值和最小值； 对多个所述当前第三采样点进行累加操作，以获得累加值； 将衰减因子与所述累加值相乘，并判断得到的乘积是否处于所述最小值和所述最大值之间； 若所述乘积处于所述最小值和所述最大值之间，则保持所述衰减因子和所述累加值不变； 若未处于所述最小值和所述最大值之间，则根据所述最大值或最小值对所述衰减因子及所述累加值进行调整； 根据调整后得到的累加值获得多路待混音音频数据对应的目标音频数据。 6.根据权利要求5所述的音视频数据处理方法，其特征在于，所述根据所述最大值或最小值对所述衰减因子及所述累加值进行调整的步骤，包括： 在所述乘积小于或等于所述最小值时，将所述衰减因子置为所述最小值与所述累加值的比值，并将所述累加值置为所述最小值； 在所述乘积大于或等于所述最大值时，将所述衰减因子置为所述最大值与所述累加值的比值，并将所述累加值置为所述最大值。 7.根据权利要求5所述的音视频数据处理方法，其特征在于，所述根据调整后得到的累加值获得多路待混音音频数据对应的目标音频数据的步骤之后，所述方法还包括： 获得待处理视频数据； 分别对所述待处理视频数据及所述目标音频数据进行编码，获得编码视频数据及编码音频数据； 合并所述编码音频数据及编码视频数据。 8.一种音视频数据处理装置，其特征在于，所述装置包括： 获得模块，用于获得多路待处理音频数据； 降噪模块，用于针对各路所述待处理音频数据，根据所述待处理音频数据设定降噪系数； 滤波模块，用于针对各路所述待处理音频数据，根据得到的所述降噪系数及预设规则设定对应的滤波系数，利用所述滤波系数对所述待处理音频数据进行滤波，得到待混音音频数据。 9.根据权利要求8所述的音视频数据处理装置，其特征在于，所述降噪模块用于通过以下方式设定所述降噪系数： 针对各路所述待处理音频数据，获得所述待处理音频数据的当前第一采样点的值，并获得所述当前第一采样点对应的降噪系数； 根据所述当前第一采样点的值判断所述当前第一采样点是否是噪声点； 若所述当前第一采样点为噪声点，则增大所述降噪系数，若所述当前第一采样点不为噪声点，则降低所述降噪系数。 10.根据权利要求8所述的音视频数据处理装置，其特征在于，所述滤波模块用于通过以下方式获得待混音音频数据： 根据得到的所述降噪系数及预设规则为各路所述待处理音频数据设定对应的滤波系数； 针对各路所述待处理音频数据，获得所述待处理音频数据中的多个第二采样点，判断各所述第二采样点的绝对值是否大于所述滤波系数； 若所述第二采样点的绝对值大于所述滤波系数，则保持所述第二采样点的值不变，且降低所述降噪系数； 若所述第二采样点的绝对值等于或小于所述滤波系数，则将所述第二采样点的值置零，且增大所述降噪系数； 根据处理后得到的多个第二采样点获得所述待处理音频数据对应的待混音音频数据。