申请/专利权人：吉林大学

申请日：2024-05-21

公开（公告）日：2024-06-25

公开（公告）号：CN118248174A

主分类号：G10L25/51

分类号：G10L25/51;G08B21/02;G10L25/30;G06V20/59;G06N3/0464;G06V40/18;H04N7/14

优先权：

专利状态码：在审-公开

法律状态：2024.06.25#公开

摘要：本发明属于数据识别技术领域，涉及一种驾驶人视频通话的识别与预警方法及系统，该系统包括音频数据库、驾驶人驾驶习性数据库、车载终端；其中，车载终端包括音频采集模块、音频识别模块、眼动信息采集模块、视觉识别模块、风险预警模块；音频识别模块包括音频处理模块、音频特征提取模块、音频相似性计算模块、音频损失值计算模块；视觉识别模块包括眼动信息处理模块、视线动态指数计算模块、视线偏差值计算模块、视线区域判定计算模块。该系统实现对驾驶人是否处于视频通话进行识别，弥补了现有研究对视频通话的实时识别的空缺，具有识别结果准确、可靠的优势。

主权项：1.一种驾驶人视频通话的识别与预警方法，其特征在于，包括以下步骤：步骤S1：车内音频信号采集车载终端的音频采集模块实时采集车内音频信息并将信息发送至音频识别模块；步骤S2：音频识别与匹配车载终端的音频识别模块实时处理接收的音频信息，根据处理后的音频信息与在音频数据库中储存的视频来电与拨通的铃声音频数据通过计算损失值进行匹配，若损失值小于阈值，则匹配成功，则执行步骤S3；反之，则执行步骤S1；步骤S3：注视点坐标采集车载终端的眼动信息采集模块收集驾驶人注视点坐标，每秒获取个驾驶人注视点坐标，之后将信息发送到视觉识别模块；步骤S4：视觉识别车载终端的视觉识别模块在接收到驾驶人眼动信息后，对驾驶人视线动态指数及驾驶人视线动态指数阈值、视线偏差值进行计算，并对视线区域进行判定；若计算结果为真，则认为此时驾驶人处于视频通话，并将信息发送至风险预警模块，执行步骤S5；反之，执行步骤S3；其中，驾驶人视线动态指数包括时刻当前窗口的平均横坐标在时间的概率分布、时刻当前窗口的平均纵坐标在时间的概率分布、时间上驾驶人视线动态指数横坐标分量、时间上驾驶人视线动态指数纵坐标分量；驾驶人视线动态指数阈值计算时，先估算驾驶人视觉搜索区域，确定驾驶人视觉搜索区域边界，之后确定驾驶人视觉搜索区域边界坐标，根据边界点集合计算视线动态指数阈值；视线偏差值计算时，结合驾驶人驾驶习性数据库的车辆类型修正系数、驾驶人身高修正系数、驾驶人扫视位置修正系数、车辆前挡风玻璃中心点横纵坐标、驾驶人视线动态指数横纵坐标分量计算期望注视点横纵坐标，根据期望注视点横纵坐标和当前窗口的平均横纵坐标计算视线偏差值；视线区域判定时，根据内部已经储存的驾驶人视觉划分区域确定视频区域边界，根据视频区域边界同时进行视觉持续性判定和视觉反复性判定，视线区域指标判定公式如下： ；其中，是视线区域判定指标；是视觉持续性判定指标；是视觉反复性判定指标；步骤S5：风险预警车载终端的风险预警模块在接收到视觉识别模块的信息后，开始进行预警，直至信息停止发送。

全文数据：

权利要求：

百度查询： 吉林大学 一种驾驶人视频通话的识别与预警方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD