首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明授权】一种分布式数据库并行数据采集处理方法_天津南大通用数据技术股份有限公司_202410405920.5 

申请/专利权人:天津南大通用数据技术股份有限公司

申请日:2024-04-07

公开(公告)日:2024-06-18

公开(公告)号:CN117992257B

主分类号:G06F9/54

分类号:G06F9/54;G06F16/23;G06F16/27

优先权:

专利状态码:有效-授权

法律状态:2024.06.18#授权;2024.05.24#实质审查的生效;2024.05.07#公开

摘要:本发明提供了一种分布式数据库并行数据采集处理方法,包括:将每个数据节点内的数据库日志发送至日志消息队列组件,并在数据库日志中插入全局标识;事务信息提取组件从日志消息队列组件的数据库日志中获取相应的全局标识,并将全局标识的信息写入事务消息队列;事务位面控制器从事务消息队列中读取全局标识,并从日志消息队列组件获取提交不晚于当前全局标识的数据库日志;数据处理模块并行处理每个事务消息队列上的日志,将结果并行输出给数据采集者。本发明有益效果:有效提升系统的性能、实时性、可扩展性和可靠性,为分布式数据库的并行数据采集处理提供了有力支持。

主权项:1.一种分布式数据库并行数据采集处理方法,其特征在于,包括:将每个数据节点内的数据库日志发送至日志消息队列组件,并在数据库日志中插入全局标识;事务信息提取组件从日志消息队列组件的数据库日志中获取相应的全局标识,并将全局标识的信息写入事务消息队列;事务位面控制器从事务消息队列中读取全局标识,并从日志消息队列组件获取提交不晚于当前全局标识的数据库日志;数据处理模块并行处理每个事务消息队列上的日志,将结果并行输出给数据采集者。

全文数据:

权利要求:

百度查询: 天津南大通用数据技术股份有限公司 一种分布式数据库并行数据采集处理方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。