申请/专利权人：中网华信科技股份有限公司

申请日：2024-04-17

公开（公告）日：2024-06-25

公开（公告）号：CN118071112B

主分类号：G06Q10/0631

分类号：G06Q10/0631;G06Q10/0635;G06Q50/02;G06F18/25;G06V20/52;G06V10/764;G06V10/82;G06N3/044;G06N3/0464;G06N3/048;G06N3/08

优先权：

专利状态码：有效-授权

法律状态：2024.06.25#授权;2024.06.11#实质审查的生效;2024.05.24#公开

摘要：本发明涉及煤矿安全领域，公开了一种基于语音交互和大模型的指挥调度系统，包括：多个监控设备，用于采集监控数据；多个传感器，用于采集传感器数据；智慧管理后台，用于进行匹配并得到数据组，然后输入井下危险事件预警大模型，得到危险事件预测结果；若预测概率大于预设概率阈值，获取实时定位数据集并从中筛选出目标实时定位数据组；分别向识别卡组中每个识别卡发送控制信息，以控制每个识别卡发出提示信号；智慧管理后台还用于通过监控设备播放提示语音，以提示工人撤离。由此，实现了及时对井下危险事件进行预警。

主权项：1.一种基于语音交互和大模型的指挥调度系统，其特征在于，包括：多个监控设备，所述多个监控设备部署于生产区的多个实际监控点，每个监控设备包括图像模块和语音模块，所述图像模块用于采集对应的实际监控点的监控图像，并将所述监控图像和对应的实际监控点的位置组成二元组，得到监控数据并上传至智慧管理后台；多个传感器，每个传感器用于采集生产设备的运行数据或所述生产区的环境数据，将所述运行数据或环境数据和对应的传感器位置组成二元组，得到传感器数据并上传至智慧管理后台；所述智慧管理后台用于对多个监控数据和多个传感器数据进行匹配，匹配成功的一个监控数据和一个传感器数据组成一个数据组，每个数据组包括融合位置，其中，所述融合位置是通过对所述实际监控点的位置和所述传感器位置融合得到的；所述智慧管理后台还用于将所述数据组输入井下危险事件预警大模型，得到危险事件预测结果，所述危险事件预测结果用于表征发生危险事件的概率；若所述概率大于预设概率阈值，将所述数据组所包括的融合位置确定为目标融合位置，并获取当天每个下井工人所佩戴的识别卡的实时定位数据，得到实时定位数据集；从所述实时定位数据集中筛选出与所述目标融合位置之间的距离小于预设距离阈值的多个实时定位数据并组成目标实时定位数据组，所述目标实时定位数据组中各个实时定位数据分别对应的识别卡组成识别卡组；分别向所述识别卡组中每个识别卡发送控制信息，以控制每个识别卡发出提示信号；所述智慧管理后台还用于通过监控设备播放提示语音，以提示工人撤离；所述智慧管理后台部署有生产区三维模型，所述生产区三维模型与所述生产区具有映射关系，所述生产区三维模型中包括多个监控设备模型，所述多个监控设备模型与所述多个监控设备一一对应，所述生产区三维模型中包括多个传感器模型，所述多个传感器模型与所述多个传感器一一对应；所述智慧管理后台还用于根据所述融合位置将每个数据组与所述生产区三维模型中的监控设备模型和传感器模型关联；所述提示语音是通过以下步骤生成的：在所述生产区三维模型中确定所述目标融合位置所对应的虚拟融合位置，并确定所述生产区三维模型的多个虚拟出口位置；根据所述虚拟融合位置和所述多个虚拟出口位置，构建多条撤离路径；根据每条撤离路径的预估撤离时间、每条撤离路径的照明条件评级和每条撤离路径所包括的分叉口的数量，生成每条撤离路径的评分；从所述多条撤离路径选取评分最高的撤离路径并确定为主撤离路径，选取评分次高的撤离路径并确定为备选撤离路径，确定所述目标融合位置对应的待撤离人数，所述待撤离人数是根据所述识别卡组所包括的识别卡数量确定的；若待撤离人数大于单条撤离路径的预设容纳人数，生成包含所述主撤离路径或所述备选撤离路径的撤离提示文本；将所述撤离提示文本进行语音合成，得到对应的提示语音。

全文数据：

权利要求：

百度查询： 中网华信科技股份有限公司 一种基于语音交互和大模型的指挥调度系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD