首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

批量数据处理方法、装置、设备及存储介质 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:杭州政云数据技术有限公司;杭州新中大科技股份有限公司

摘要:本发明公开了一种批量数据处理方法、装置、设备及存储介质。所述方法包括:获取待处理批量数据的服务器相关信息,根据服务器相关信息构建数据队列;确定待处理批量数据的数据类型,并从至少一个参考任务处理器中选取与数据类型相对应的目标任务处理器;确定所需构建的目标任务处理器的处理器数量,并基于处理器数量构建至少一个目标任务处理器;根据服务相关信息,确定各目标任务处理器的数据处理量;通过数据队列,向各目标任务处理器下发待处理批量数据,由各目标任务处理器基于自身数据处理量进行批量数据处理,得到数据处理结果;由目标任务处理器将自身的数据处理结果下发至预先构建的目标存储器,以供目标存储器对数据处理结果进行存储。

主权项:1.一种批量数据处理方法,其特征在于,包括:获取待处理批量数据所属服务器的服务器相关信息,并根据所述服务器相关信息,构建数据队列;确定所述待处理批量数据的数据类型,并从预先进行标签定义的至少一个参考任务处理器中选取与所述数据类型相对应的目标任务处理器;各所述参考任务处理器用于处理不同数据类型的批量数据;确定所需构建的目标任务处理器的处理器数量,并基于所述处理器数量构建至少一个目标任务处理器;根据所述服务器相关信息,确定各所述目标任务处理器的数据处理量;通过所述数据队列,向各所述目标任务处理器下发待处理批量数据,由各所述目标任务处理器基于自身数据处理量进行批量数据处理,得到数据处理结果;由所述目标任务处理器将自身的数据处理结果下发至预先构建的目标存储器,以供所述目标存储器对所述数据处理结果进行存储。

全文数据:

权利要求:

百度查询: 杭州政云数据技术有限公司 杭州新中大科技股份有限公司 批量数据处理方法、装置、设备及存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。