买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：国家电网有限公司信息通信分公司

摘要：本发明涉及语音分析技术领域，具体涉及一种基于机器学习的视频会议声音延迟检测方法及系统，包括：在视频会议时采集视频数据和每个设备在每个时刻的声音振动数据；根据每个设备与其他设备的声音振动数据在每个预设的延迟时间下的数据差异，对所述延迟时间进行筛选，得到每两个设备在最优延迟时间下的匹配关联度；根据每个设备在每个时刻与其他设备在最优延迟时间下的声音振动数据之间的差异分布、所述匹配关联度得到数据稳定程度，获得每个设备在每个时刻的数据贡献程度；基于数据贡献程度进行特征分解，将特征分解结果和视频数据进行内容匹配，获得视频会议声音延迟的检测结果。本发明利用特征分解结果进行音画匹配的结果更加准确。

主权项：1.一种基于机器学习的视频会议声音延迟检测方法，其特征在于，该方法包括以下步骤：在视频会议时采集视频数据和每个设备在每个时刻的声音振动数据；根据每个设备的声音振动数据与其他设备的声音振动数据在每个预设的延迟时间下的数据差异分布情况，以及每任意两个设备在所述延迟时间下的数据差异，对所述延迟时间进行筛选，得到每两个设备在最优延迟时间下的匹配关联度；根据每个设备在每个时刻与其他设备在最优延迟时间下的声音振动数据之间的差异分布、每个设备与其他设备在最优延迟时间下的匹配关联度，得到每个设备在每个时刻的数据稳定程度；利用所述数据稳定程度分析每个设备在每个时刻与其他时刻的声音振动数据之间的差异情况，得到每个设备在每个时刻的数据贡献程度；基于所述数据贡献程度对每个设备的声音振动数据进行特征分解，将特征分解结果和视频数据进行内容匹配，根据匹配结果获得视频会议声音延迟的检测结果；所述根据每个设备的声音振动数据与其他设备的声音振动数据在每个预设的延迟时间下的数据差异分布情况，以及每任意两个设备在所述延迟时间下的数据差异，对所述延迟时间进行筛选，得到每两个设备在最优延迟时间下的匹配关联度，具体包括：将任意一个时刻记为目标时刻，将目标时刻在预设的每个延迟时间下对应的时刻均记为目标时刻在每个延迟时间下对应的对照时刻；将任意一个延迟时间记为目标延迟时间，对于任意一个设备；根据设备在目标时刻的声音振动数据与每个其他设备在目标延迟时间对应的对照时刻的声音振动数据之间的差异情况，得到在目标时刻下设备在目标延迟时间对应的数据稳度；根据在每个时刻下设备与任意一个其他设备在目标延迟时间对应的数据稳度之间的差异、以及每个时刻与目标延迟时间对应的对照时刻的声音振动数据之间的差异，得到设备与任意一个其他设备在目标延迟时间下的匹配关联度；对设备与任意一个其他设备在每个延迟时间下的匹配关联度进行筛选，确定最优延迟时间，获得设备与任意一个其他设备在最优延迟时间下的匹配关联度；所述根据每个设备在每个时刻与其他设备在最优延迟时间下的声音振动数据之间的差异分布、每个设备与其他设备在最优延迟时间下的匹配关联度，得到每个设备在每个时刻的数据稳定程度，具体包括：将任意一个时刻记为选定时刻，将任意一个设备记为选定设备，将除选定设备之外的其他设备均记为参考设备；对于任意一个参考设备，计算选定设备在选定时刻的声音振动数据和选定时刻在最优延迟时间下对应的时刻的声音振动数据之间的差值绝对值得到参考设备在选定时刻的数据差异系数；将选定设备与参考设备在最优延迟时间下的匹配关联度与所述数据差异系数的乘积作为参考设备在选定时刻的差异程度；对所有参考设备在选定时刻的差异程度的累加和进行负相关映射得到选定设备在选定时刻的数据稳定程度；所述利用所述数据稳定程度分析每个设备在每个时刻与其他时刻的声音振动数据之间的差异情况，得到每个设备在每个时刻的数据贡献程度，具体包括：将除选定时刻之外的其他时刻均记为参考时刻，对于任意一个参考时刻，计算选定设备在选定时刻的数据稳定程度与声音振动数据之间乘积记为第一乘积，计算选定设备在参考时刻的数据稳定程度声音振动数据之间的乘积记为第二乘积；将所述第一乘积与第二乘积的差值绝对值作为选定设备在参考时刻对应的特征差异；根据选定设备在每个参考时刻对应的特征差异确定选定设备在选定时刻的数据贡献程度。

全文数据：

权利要求：

百度查询： 国家电网有限公司信息通信分公司 基于机器学习的视频会议声音延迟检测方法及系统