买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜深圳市明睿数据科技有限公司申请的专利一种数据处理系统及数据处理方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119226377B 。

龙图腾网通过国家知识产权局官网在2025-04-29发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411731737.0，技术领域涉及：G06F16/25；该发明授权一种数据处理系统及数据处理方法是由张世恒;张江波设计研发完成，并于2024-11-29向国家知识产权局提交的专利申请。

本一种数据处理系统及数据处理方法在说明书摘要公布了：本申请提供了一种数据处理系统及数据处理方法，应用于数据处理技术领域，该系统包括：数据同步模块和数据仓库。数据同步模块用于从多个数据源获取业务数据，并基于与数据源对应的同步方式，将业务数据同步存储至数据仓库。数据源包括：无规则数据和有规则数据。有规则数据包括以下一种或多种：服务商系统、数据库、企业产生的本地文件。数据仓库包括：ODS层、DW层、ADS层；数据仓库用于将业务数据输入至ODS层；利用DW层对业务数据进行配置，得到宽表数据；宽表数据用于表示预设主题下多个维度的业务数据；利用ADS层根据用户需求从宽表数据中调用与用户需求对应的业务数据，生成业务数据表，可以实现数据互通，提高数据管理效率。

本发明授权一种数据处理系统及数据处理方法在权利要求书中公布了：1.一种数据处理系统，其特征在于，所述系统包括：数据同步模块和数据仓库；所述数据同步模块用于从多个数据源获取业务数据，并基于与所述数据源对应的同步方式，将所述业务数据同步存储至所述数据仓库；所述业务数据的数据内容包括：无规则数据和有规则数据；所述数据源包括以下一种或多种：服务商系统、数据库、企业产生的本地文件；所述数据仓库包括：ODS层、DW层、ADS层；所述数据仓库用于将所述业务数据输入至所述ODS层；利用所述DW层对所述业务数据进行配置，得到宽表数据；所述宽表数据用于表示预设主题下多个维度的所述业务数据；利用所述ADS层根据用户需求从所述宽表数据中调用与所述用户需求对应的业务数据，生成业务数据表；所述业务数据的数据内容为无规则数据，所述数据同步模块具体用于获取所述业务数据的数据类型，基于所述数据类型，将所述业务数据存储至所述数据仓库；所述数据类型包括以下一种或多种：数据量小于预设数据量的数据、记录详细动作信息的记录表数据、带有更新变化的同步数据、以文件形式存储的数据和带有删除行为的数据；对于数据源中业务数据的数据类型为记录详细动作信息的记录表数据，数据同步模块按照业务数据的日期字段，将业务数据同步到数据仓库；如果业务数据没有日期字段，对业务数据记录已同步的自增id；在数据同步过程中，利用自增id先查出已同步的数据中最大的id，再从数据源中筛选出数据id已经同步的最大id的数据进行同步；对于数据源中业务数据的数据类型为有更新变化的数据同步时，数据同步模块筛选更新日期和创建日期均为当日的数据同步到数据仓库；通过DW层对数据进行预处理，按照时间顺序方式，取最新一条数据，保证数据与数据源一致，同时记录数据的变化信息；对于数据源中业务数据的数据类型为以文件存储的业务数据，数据同步模块先对该业务数据进行压缩，再通过网络将业务数据传输至数据仓库；对于数据源中有删除行为的业务数据，数据同步模块在业务层面上对业务数据添加逻辑删除字段；当业务数据不能添加逻辑删除字段时，数据同步模块通过读取数据库binlog日志方式、同步主键id字段再由数据仓库对业务数据进行处理，还原至dwd层。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人深圳市明睿数据科技有限公司，其通讯地址为：518000 广东省深圳市南山区粤海街道高新区社区沙河西路1819号深圳湾科技生态园7栋B座705；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。