买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:上海沄熹科技有限公司
摘要:本发明公开结合KV存储引擎和时序存储引擎查询OLAP的方法,涉及分布式数据库技术领域;根据数据表类型,调用相应存储引擎存储数据:若数据表类型是时序表,则调用时序存储引擎,按照跟随分区方式将时序表转发给时序存储节点;通过时序存储节点上的时序表维护内存跳表结构,将插入的数据按照时间戳的方式排序,进行数据缓存,将缓存数据追加到分区文件;采用混合查询方式进行OLAP数据表查询,包括:扫描读取数据表,根据过滤条件读取数据表,以及利用表连接查询数据表,所述表连接查询数据表包括普通表与时序表连接方式查询和时序表连接方式查询。
主权项:1.结合KV存储引擎和时序存储引擎查询OLAP的方法,其特征是根据数据表类型,调用相应存储引擎存储数据:若数据表类型是普通表,则调用KV存储引擎根据Raft协议将普通表存入RocksDB的节点,若数据表类型是时序表,则调用时序存储引擎,按照时序表连接方式将时序表转发给时序存储节点,所述时序表连接方式指一个时序表的主键为另一个时序表的外键,按照时序表连接方式转发时序表至时序存储节点时,能够使时序表之间存储在同一时序存储节点;通过时序存储节点上的时序表维护内存跳表结构,将插入的数据按照时间戳的方式排序,进行数据缓存,将缓存数据追加到分区文件;采用混合查询方式进行OLAP数据表查询,包括:扫描读取数据表,根据过滤条件读取数据表,以及利用表连接查询数据表,所述表连接查询数据表的方式包括:普通表与时序表连接的查询方式和时序表之间连接的查询方式,所述普通表与时序表连接的查询方式,包括:判断普通表是否为小表,若普通表是小表,将普通表广播到各个时序存储节点构建哈希表,扫描时序表分区作为探测表进行哈希连接,汇总各时序存储节点的连接结果集,否则利用时序表上的谓词过滤数据,将时序表数据集返回SQL层构建哈希表,扫描普通表作为探测表,所述时序表之间连接的查询方式,包括:根据时序表连接方式时序表之间在同一时序存储节点存储,在各个时序存储节点上构建局部哈希表,哈希连接后汇总各时序存储节点的连接结果。
全文数据:
权利要求:
百度查询: 上海沄熹科技有限公司 结合KV存储引擎和时序存储引擎查询OLAP的方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。