买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：百视通网络电视技术发展有限责任公司

摘要：本发明涉及一种盲人无障碍电影音频处理方法、装置及存储介质，其中方法包括：分离得到正片视频帧队列QvideoES、正片音频帧队列QaudioES和AD轨音频帧队列QaudioES，并完成时间轴同步；提取正片处理段PCM数据帧序列和AD轨处理段PCM数据帧序列；对AD轨处理段PCM数据帧序列进行语音活动检测，得到每一帧的语音活动状态；对正片处理段PCM数据帧序列的每一帧计算音量，并对该正片音量序列种的元素逐个计算移动平均值；对AD轨处理段PCM数据帧序列中语音活动状态为不活动的帧修改为静音值，并对剩余帧逐个计算移动平均值；基于语音活动检测结果逐帧调节正片平均音量序列和AD轨平均音量序列。与现有技术相比，本发明具有使讲解内容能穿插在高动态范围的电影原声中进行播放等优点。

主权项：1.一种基于外挂AD音轨的盲人无障碍电影音频处理方法，其特征在于，包括：获取正片的媒体数据流和外挂AD音轨的媒体数据流；基于正片的媒体数据流解析分离得到正片视频帧队列QvideoES、正片音频帧队列QaudioES，并基于外挂AD音轨的媒体数据流解析分离得到AD轨音频帧队列QaudioESAD，并完成正片视频帧队列QvideoES、正片音频帧队列QaudioES和AD轨音频帧队列QaudioESAD的时间轴同步；基于正片音频帧队列QaudioES提取正片处理段PCM数据帧序列，并基于AD轨音频帧队列QaudioESAD提取AD轨处理段PCM数据帧序列；对AD轨处理段PCM数据帧序列进行语音活动检测，得到每一帧的语音活动状态，其中，所述语音活动状态为活动或不活动；对正片处理段PCM数据帧序列的每一帧计算音量，得到正片音量序列，并对该正片音量序列种的元素逐个计算移动平均值，得到正片平均音量序列；对AD轨处理段PCM数据帧序列中语音活动状态为不活动的帧修改为静音值，并对剩余帧逐个计算移动平均值，得到AD轨平均音量序列；基于语音活动检测结果逐帧调节正片平均音量序列和AD轨平均音量序列；基于处理得到的正片平均音量序列和AD轨平均音量序列生成待播放的音频；所述基于语音活动检测结果逐帧调节正片平均音量序列和AD轨平均音量序列，具体包括：初始调节值生成步骤：逐帧确定正片平均音量序列和AD轨平均音量序列中每帧音量的相对调节幅度，得到正片相对调节值序列和AD轨相对调节值序列；音量调节步骤：根据正片相对调节值序列和AD轨相对调节值序列调节正片平均音量序列和AD轨平均音量序列；所述正片相对调节值序列和AD轨相对调节值序列中任一帧的调节值的确定过程如下：当该帧的语音活动状态为不活动时，正片相对调节值和AD轨相对调节值均为0；当该帧的语音活动状态为活动时，则计算该帧的正片平均音量和AD轨平均音量的差值：若该帧的正片平均音量和AD轨平均音量的差值小于-10，则正片相对调节值和AD轨相对调节值均为0；若该帧的正片平均音量和AD轨平均音量的差值小于在-10到0之间，AD轨相对调节值为0，正片相对调节值为Dmovie＝LAD't-Lmovie't-10，其中，Dmovie为正片相对调节值，LAD't为AD轨平均音量，Lmovie't为正片平均音量；若该帧的正片平均音量和AD轨平均音量的差值小于在0到10之间，则正片相对调节值为-10，AD轨相对调节值为DADt＝Lmovie't-LAD't-10；若该帧的正片平均音量和AD轨平均音量的差值大于10，则正片相对调节值为-10，AD轨相对调节值为10；所述基于语音活动检测结果逐帧调节正片平均音量序列和AD轨平均音量序列，还包括：调节值优化步骤：对由初始调节值生成步骤得到的正片相对调节值序列和AD轨相对调节值序列进行平滑处理；所述音量调节步骤中具体为使用调节值优化步骤得到的结果进行音量调节。

全文数据：

权利要求：

百度查询： 百视通网络电视技术发展有限责任公司 盲人无障碍电影音频处理方法、装置及存储介质