龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：贵州大学
摘要：本发明公开了一种游戏引擎数据湖分层可扩展设计与流批组合即席分析系统，包括业务数据库模块、埋点数据模块、数据采集模块、数据存储模块、数据计算与查询模块和任务调度模块，数据采集模块对业务数据库模块和埋点数据模块进行采集处理，数据存储模块对采集后的数据进行处理存储，数据计算与查询模块对存储的数据进行分析，任务调度模块根据分析后的结果进行调配，数据计算与查询模块的Phonix子模块分别在hbase子模块上建立了多级索引和数据预计算，还包括对数据湖进行数据离线分层扩展设计的分层可扩展设计模块。本发明降低复杂业务指标实现难度，提高计算效率、代码复用性和可靠性，隔离了数据隐私，并解决了离线复杂指标计算过慢的问题。
主权项：1.一种游戏引擎数据湖分层可扩展设计与流批组合即席分析系统，其特征在于：包括业务数据库模块、埋点数据模块、数据采集模块、数据存储模块、数据计算与查询模块和任务调度模块，业务数据库模块通过数据采集模块中的sqoop子模块同步到存储模块的hdfs子模块中，埋点数据模块包括网页游戏埋点、ios端游戏埋点及android端游戏埋点，用户触发埋点，埋点数据通过客户端sdk进行加密并请求Nginx服务器，记录日志，数据采集模块中的Flume子模块则对日志数据进行采集，并发送到消息中间件kafka集群中，数据计算与查询模块中的sparkstreaming子模块实时对消息队列kafka中的日志数据进行消费、解密、清洗、预处理、做实时分析，并将预处理后数据存储到hdfs子模块，将新增ip存储到存储模块的hbase子模块，将实时统计结果存到存储模块的mysql子模块，ip地址位置解析算法则对hbase子模块中的ip维表进行信息补充；任务调度模块对数据计算与查询模块的Hiveonspark程序进行任务调度，并将统计结果存回mysql子模块，数据计算与查询模块的Phonix子模块分别在hbase子模块上建立了多级索引和数据预计算，还包括对数据湖进行数据离线分层扩展设计的分层可扩展设计模块。
全文数据：
权利要求：
百度查询： 贵州大学 一种游戏引擎数据湖分层可扩展设计与流批组合即席分析系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号