买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:应急管理部大数据中心
摘要:本发明公开了一种基于互联网的非煤矿山灾害情报实时搜集方法及系统,涉及情报搜集技术领域,该方法包括:基于目标关键词,设置情报搜索范围;将目标关键词作为目标词汇,进行语义相似扩充,得到目标关键相似扩充词汇集;配置分布式网络爬虫集群架构;利用分布式网络爬虫集群架构,进行多渠道抓取,得到第一搜集数据、得到第二搜集数据;通过搜集数据进行内容分析,提取情报关联特征;构建实时舆情图谱,将实时情报需求代入实时舆情图谱中进行情报实时搜集,并发送至非煤矿山灾害情报公示平台。本发明解决现有技术受限于数据源的局限性,难以获取全面、准确信息的技术问题,达到提高情报实时搜集高效性和精准性的技术效果。
主权项:1.一种基于互联网的非煤矿山灾害情报实时搜集方法,其特征在于,所述方法包括:基于目标关键词,设置情报搜索范围,所述情报搜索范围对应的网络数据格式包括文本、图片、音频、视频;基于所述情报搜索范围,将所述目标关键词作为目标词汇,进行语义相似扩充,得到目标关键相似扩充词汇集;配置分布式网络爬虫集群架构,所述分布式网络爬虫集群架构包含多个爬虫节点,每个爬虫节点用于独立抓取对应区域的网络数据;利用所述分布式网络爬虫集群架构,根据所述目标关键词进行多渠道抓取,得到第一搜集数据;利用所述分布式网络爬虫集群架构,根据所述目标关键相似扩充词汇集进行多渠道抓取,得到第二搜集数据;通过所述第一搜集数据、第二搜集数据进行内容分析,提取情报关联特征,其中,所述情报关联特征包括信息点、热点话题信息和潜在趋势信息;基于所述情报关联特征,构建实时舆情图谱,将实时情报需求代入所述实时舆情图谱中进行情报实时搜集,并发送至非煤矿山灾害情报公示平台。
全文数据:
权利要求:
百度查询: 应急管理部大数据中心 一种基于互联网的非煤矿山灾害情报实时搜集方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。