首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

面向DFS的全局聚合命名空间下跨计算节点的持久性缓存方法和装置 

申请/专利权人:之江实验室

申请日:2023-03-31

公开(公告)日:2023-07-14

公开(公告)号:CN116436962A

主分类号:H04L67/2885

分类号:H04L67/2885;H04L67/10

优先权:

专利状态码:在审-实质审查的生效

法律状态:2023.08.01#实质审查的生效;2023.07.14#公开

摘要:面向DFS的全局聚合命名空间下跨计算节点的持久性缓存方法,包括:所有计算节点能按需访问存储在宿主计算节点、远端计算节点或数据存储服务器的任意文件;计算节点根据任务需求和元数据服务器给出的文件布局信息,通过策略引擎预设的缓存预取策略,反向使用条带化技术,根据缓存类型需求,将相关文件从数据存储服务器端复制或迁移到相应的多个计算节点本地持久性缓存设备;当缓存在多个计算节点的数据满足预设条件时,通过策略引擎预设的缓存替换或驱逐策略,将对相关计算节点端数据进行替换或驱逐到数据存储服务器端;根据待操作的相关文件是否已经缓存到对应计算节点本地持久性存储器中的情形,协同完成相关操作。

主权项:1.一种面向DFS的全局聚合命名空间下跨计算节点的持久性缓存方法,包括:元数据服务器拥有全局聚合命名空间,提供数据一致性保证,维护统一目录树视图,在该视图下,所有计算节点能按需访问存储在宿主计算节点、远端计算节点或数据存储服务器的任意文件;计算节点根据任务需求和元数据服务器给出的文件布局信息,通过策略引擎预设的缓存预取策略,反向使用条带化技术,根据缓存类型需求,将相关文件从数据存储服务器端复制或迁移到相应的多个计算节点本地持久性缓存设备;当缓存在多个计算节点的数据满足预设条件时,通过策略引擎预设的缓存替换或驱逐策略,将对相关计算节点端数据进行替换或驱逐到数据存储服务器端;多个计算节点协同工作,对相应文件进行读写IO操作时,如果待操作的相关文件已经缓存到对应计算节点本地持久性存储器中,且相应计算节点对已缓存到计算节点本地的文件具有相应的操作权限,则各个计算节点可以直接访问各自本地的缓存或其他计算节点本地的缓存,协同完成相关操作;若待操作文件仅有部分缓存到对应计算节点本地持久性存储器中,那么根据缓存类型分为两种情况处理:1当为只读缓存时,相应计算节点对已缓存在计算节点端的数据直接访问,对未缓存的数据,通过网络远程访问数据存储服务器端的数据并协同完成操作;2当为读写缓存时,等待未缓存的数据缓存完毕,再根据任务需求,各个计算节点直接访问各自本地的缓存或其他计算节点本地的缓存,协同完成相关操作;若待操作文件均未缓存到计算节点本地持久性存储器中,则计算节点通过网络远程访问数据存储服务器端的数据并协同完成操作。

全文数据:

权利要求:

百度查询: 之江实验室 面向DFS的全局聚合命名空间下跨计算节点的持久性缓存方法和装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。