首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种基于网络爬虫的跨场景比价系统_北京分贝通科技有限公司_202410264264.1 

申请/专利权人:北京分贝通科技有限公司

申请日:2024-03-08

公开(公告)日:2024-05-28

公开(公告)号:CN118096073A

主分类号:G06Q10/10

分类号:G06Q10/10;G06Q30/0201;G06F16/951;G06F16/22

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.06.14#实质审查的生效;2024.05.28#公开

摘要:本发明公开了一种基于网络爬虫的跨场景比价系统,涉及爬虫技术领域。本发明与之前的比价系统相比,改进了现有比价系统中各个业务场景的比价爬取流程中重复工作比例较大;没有一套通用的技术对接规范进行规范化管理;无法全面地管控整个公司的爬取业务,以及通用化地构建价格报表分析体系的问题,将比价流程中的投放比价爬取任务入口,爬取任务分发,爬取数据接收,比价数据分析均进行统一处理,极大的降低了重复工作占比,同时通过定义通用的数据协议规范和通用的对接接口规范定时拉取下发的爬取任务和推送数据,进行规范化处理,实现了任务控制端和数据接收端统一的、安全性的全面管控,提升了爬取速度。

主权项:1.一种基于网络爬虫的跨场景比价系统,其特征在于,包括:场景报价端1、爬取任务池2、任务控制器3、爬虫端4、数据接收器5和数据分析模块6;所述场景报价端1用于为用户提供多场景报价页面;所述爬取任务池2用于对场景报价端1进行投放爬取任务;所述任务控制器3用于对爬取任务池2中的任务进行汇总控制;所述爬虫端4用于通过规定的接口从任务控制器3中拉取任务,并按照规定的协议数据格式,通过接口向数据接收器5推送数据;所述数据接收器5接收爬虫端4推送的数据并进行存储;所述数据分析模块6用于对获取的价格数据进行比较分析。

全文数据:

权利要求:

百度查询: 北京分贝通科技有限公司 一种基于网络爬虫的跨场景比价系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。