首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种数据同步过程中实现数据血缘统计的方法 

申请/专利权人:浪潮云信息技术股份公司

申请日:2024-02-27

公开(公告)日:2024-06-28

公开(公告)号:CN118260361A

主分类号:G06F16/27

分类号:G06F16/27;G06F16/2458

优先权:

专利状态码:在审-公开

法律状态:2024.06.28#公开

摘要:本发明特别涉及一种数据同步过程中实现数据血缘统计的方法。该数据同步过程中实现数据血缘统计的方法,改进数据同步工具Nifi的处理器逻辑,利用改进的数据同步工具Nifi实现数据同步,在数据流转过程中生成流程文件flowfile;在每个流程文件flowfile所生成的属性中添加对应数据流转链路的数据处理信息,包括数据的来源、数据的去向以及字段之间的映射;最后,将收集到的所有的流程文件flowfile的属性信息发送给元数据管理系统,进行完整的数据血缘关系展示。该数据同步过程中实现数据血缘统计的方法,改进了数据同步过程中组件的处理数据的逻辑,通过统一收集数据来源、数据去向和数据处理过程的全链路信息,实现了数据血缘的直观展示和分析。

主权项:1.一种数据同步过程中实现数据血缘统计的方法,其特征在于:改进数据同步工具Nifi的处理器逻辑,利用改进的数据同步工具Nifi实现数据同步,在数据流转过程中生成流程文件flowfile;在每个流程文件flowfile所生成的属性中添加对应数据流转链路的数据处理信息,包括数据的来源、数据的去向以及字段之间的映射;最后,将收集到的所有的流程文件flowfile的属性信息发送给元数据管理系统,进行完整的数据血缘关系展示。

全文数据:

权利要求:

百度查询: 浪潮云信息技术股份公司 一种数据同步过程中实现数据血缘统计的方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。