买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京一流科技有限公司

摘要：本发明公开了一种类单机的分布式数据处理系统，由分布式部署的多个数据处理设备集成，用于执行分布式数据处理。所述系统包括：设备拓扑关系获取组件，用于获取分布式部署的多个数据处理设备之间的拓扑关系并编号，从而使得每个数据处理设备具备位置标识；用户需求计算容量分配组件，基于用户的指定分配用户指定数量的位置标识连续的数据处理设备；初始逻辑节点生成组件，生成用于所指定的数据处理设备的初始逻辑节点拓扑图；候选SBP签名加载组件，按照加载规则为每个初始逻辑节点加载一个或多个候选SBP签名；SBP分布描述符初始配置组件，基于任务配置数据基于用户申请的用于执行数据处理设备，赋予SBP分布描述符以及位置标识；以及SBP分布描述符推导组件，用于基于每个逻辑节点的候选SBP签名，推导出每个逻辑节点的输出张量的SBP分布描述符以及位置标识。

主权项：1.一种类单机的分布式数据处理系统，由分布式部署的多个数据处理设备集成，用于执行分布式数据处理，包括：设备拓扑关系获取组件，用于获取分布式部署的多个数据处理设备之间的拓扑关系，并按照拓扑层级进行设备的一级或多级编号，从而使得每个数据处理设备具备位置标识；用户需求计算容量分配组件，基于用户的指定，为用户所需要执行的数据处理从所述分布式部署的多个数据处理设备中分配用户指定数量的位置标识连续的数据处理设备；初始逻辑节点生成组件，接收用户输入的任务配置数据，生成用于所指定的数据处理设备的初始逻辑节点拓扑图；候选SBP签名加载组件，获取每个初始逻辑节点的类型，并按照加载规则为每个初始逻辑节点加载一个或多个候选SBP签名；SBP分布描述符初始配置组件，基于任务配置数据，获取待处理数据的并行处理模式，并基于用户申请的用于执行数据处理设备，赋予每个作为源逻辑节点的输入张量的初始输入数据的SBP分布描述符以及与所赋予的SBP分布描述符对应的数据处理设备的位置标识；以及SBP分布描述符推导组件，用于从源逻辑节点开始，逐级遍历初始逻辑节点拓扑图的每个逻辑节点，基于每个逻辑节点的候选SBP签名，推导出每个逻辑节点的输出张量的SBP分布描述符以及与所推导出的SBP分布式对应的数据处理设备的位置标识。

全文数据：

权利要求：

百度查询： 北京一流科技有限公司 类单机的分布式数据处理系统及其数据处理方法