首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种分布式大数据计算引擎_中国兵器工业计算机应用技术研究所_202311844217.6 

申请/专利权人:中国兵器工业计算机应用技术研究所

申请日:2023-12-28

公开(公告)日:2024-06-14

公开(公告)号:CN118193565A

主分类号:G06F16/242

分类号:G06F16/242;G06F16/2455;G06F16/25;G06F16/245;G06F9/50

优先权:

专利状态码:在审-公开

法律状态:2024.06.14#公开

摘要:本发明涉及一种分布式大数据计算引擎,包括:统一接口模块、分布式计算引擎模块和运算结果处理模块;统一接口模块用于接收计算任务,并基于计算任务的数据类型标识进行任务解析,以启动对应的计算引擎;分布式计算引擎模块包括流计算引擎、批计算引擎和批流一体计算引擎,分别用于读取并执行对应的计算任务;运算结果处理模块用于采集各个计算引擎的运行状态数据,进行运行状态监控并向客户端返回任务计算结果。本发明解决了现有技术中的大数据计算引擎在面对多种复杂的计算场景时,无法针对多类型的数据处理任务提供并行高效的实时计算,以进行实时快速响应的问题。

主权项:1.一种分布式大数据计算引擎,其特征在于,包括:统一接口模块、分布式计算引擎模块和运算结果处理模块;所述统一接口模块用于接收计算任务,并基于所述计算任务的数据类型标识进行任务解析,以启动对应的计算引擎;所述分布式计算引擎模块包括流计算引擎、批计算引擎和批流一体计算引擎,分别用于读取并执行对应的计算任务;所述流计算引擎用于基于有向无环图中各节点的任务信息及对应的各物理计算节点的资源信息进行任务调度,以实现流数据的低延时处理;所述运算结果处理模块用于采集各个计算引擎的运行状态数据,进行运行状态监控并向客户端返回任务计算结果。

全文数据:

权利要求:

百度查询: 中国兵器工业计算机应用技术研究所 一种分布式大数据计算引擎

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。