恭喜青岛文达通科技股份有限公司管洪清获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜青岛文达通科技股份有限公司申请的专利一种基于HBase的社区数据管理方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114253966B 。
龙图腾网通过国家知识产权局官网在2025-05-13发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111416610.6,技术领域涉及:G06F16/22;该发明授权一种基于HBase的社区数据管理方法及系统是由管洪清;徐亮;王伟;尹广楹;张元杰;孙浩云;张大千设计研发完成,并于2021-11-25向国家知识产权局提交的专利申请。
本一种基于HBase的社区数据管理方法及系统在说明书摘要公布了:本发明提供了一种基于HBase的社区数据管理方法及系统,首先,获取社区数据,按照社区数据的结构形式,将相关数据存储至HBase表;然后,使用基于列特征聚类的混合压缩算法对HBase表中的数据进行压缩,同时将压缩过程中产生的聚类中心点作为索引存储至HBase表中;最后,采用聚类索引存储模型将聚类中心点索引按照访问频率写入磁盘或缓存中。解决了数据压缩过程中存在的数据离散以及粒度选择问题,实现了对海量且结构多样的社区服务平台相关数据进行管理,使社区服务相关应用能够实时地对社区数据进行调用。
本发明授权一种基于HBase的社区数据管理方法及系统在权利要求书中公布了:1.一种基于HBase的社区数据管理方法,其特征在于,包括以下过程:获取社区数据,按照社区数据的结构形式,将相关数据存储至HBase表;所述社区数据的结构形式包括半结构化的数据和非结构化的数据;对于半结构化的数据,将半结构化的数据的列或列簇存储至HBase表;对于非结构化的数据,将非结构化的数据转化为二进制文件后存储至HDFS文件系统中,同时建立与二进制文件特征相关的关键字联系表,将关键字联系表存储至HBase表;使用基于列特征聚类的混合压缩算法对HBase表中的数据进行压缩,同时将压缩过程中产生的聚类中心点作为索引存储至HBase表中;所述基于列特征聚类的混合压缩算法的具体步骤为:将HBase表中的数据按列进行划分为多个子表;对子表中的数据进行编码,并计算特征相似度;采用层次聚类算法对子表中的数据进行自底向上的聚类;采用聚类索引存储模型将聚类中心点索引按照访问频率写入磁盘或缓存中;所述聚类索引存储模型还使用一致性Hash算法优化缓存地址定位过程,具体的:所述一致性Hash算法将整个哈希值空间组织成一个环状区域以连续存储聚类中心点索引以及其周围的列数据,且缓存服务器的地址也被安排至环状区域内;当待检索的索引通过Hash算法定位到环状区域时,其顺时针方向遇到的第一个服务器即为待检索的索引应该定位到的服务器,由此待检索的索引以及周围连续空间内的列数据在该服务器中被访问。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人青岛文达通科技股份有限公司,其通讯地址为:266500 山东省青岛市黄岛区望江路500号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。