首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种可配置化定时采集数据、调度数据、加密传输、可视化的方法 

申请/专利权人:杭州雷数科技有限公司

申请日:2021-11-19

公开(公告)日:2024-06-28

公开(公告)号:CN114064777B

主分类号:G06F16/25

分类号:G06F16/25;G06F16/28;G06F16/2455;G06F16/215;G06F16/21

优先权:

专利状态码:有效-授权

法律状态:2024.06.28#授权;2022.03.08#实质审查的生效;2022.02.18#公开

摘要:本发明公开了一种可配置化定时采集数据、调度数据、加密传输、可视化的方法,包括:核心数据采集引擎采集数据,清洗数据,将数据落入目标数据源;可视化指挥中心读取经过核心数据采集引擎沉淀的数据源,根据数据进行智能建模、智能分析,生成智能报表;核心调度引擎同样也会读取经过核心数据采集引擎沉淀的数据源,规则引擎,对已经配置的规则进行解析,生成调度任务,最后再下发给每一个采集端用户端,此过程通过MySql进行二次数据沉淀、Redis实现热点数据高性能缓存、InfluxDB进行时序数据存储。本发明适用于多场景下的资源调配优化,构建了完善强大的可视化指挥中心,对资源预期、调整、效率等,提供了强大的基石与力量。

主权项:1.一种可配置化定时采集数据、调度数据、加密传输、可视化的方法,其特征在于,应用于多种类型异构型数据源和异构型目标源数据的传输、采集,针对采集数据进行清洗、解析、建模、分析从而生成调度任务,对资源进行调配优化,包括:核心数据采集引擎采集数据,清洗数据,将数据落入目标数据源;可视化指挥中心读取经过核心数据采集引擎沉淀的数据源,根据数据进行智能建模、智能分析,生成智能报表;核心调度引擎同样也会读取经过核心数据采集引擎沉淀的数据源,规则引擎,对已经配置的规则进行解析,生成调度任务,最后再下发给每一个采集端用户端,此过程通过MySql进行二次数据沉淀、Redis实现热点数据高性能缓存、InfluxDB进行时序数据存储;对当前多异质设备进行数据采集,包括:针对多异质设备数据进行采集,基于不同的系统,甚至不同的编程语言,采用统一的方式采集上报数据;插件式采集实现;采集后,核心采集引擎会根据清洗规则对采集数据进行入库;且上报频率、上报内容、清洗规则可配置化,一切基于配置文件驱动;为复杂的业务场景与需求提供了拓展性与灵活性;核心调度引擎对清洗数据的解析并生成调度任务,包括:根据规则引擎所配置的规则执行对应解析任务,对解析完成的数据进行再次沉淀,一部分落入MySql关系型数据库,一部分落入时序数据库InfluxDB;再根据规则引擎中所配置的调度规则,针对调度引擎沉淀的实时数据,生成调度任务;调度任务执行完毕后,会将调度任务通过加密请求,重新下发返回给采集端用户端;规则引擎提供了强大的规则配置与任务生成,包括:通过规则引擎所定义的规则模板配置规则;通过规则引擎所定义的任务模板定义任务;通过规则引擎关联规则与任务;解析规则、生成任务。

全文数据:

权利要求:

百度查询: 杭州雷数科技有限公司 一种可配置化定时采集数据、调度数据、加密传输、可视化的方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。