买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：中国联合网络通信集团有限公司;联通云数据有限公司

摘要：本申请提供一种数据采集方法与系统，涉及通信技术领域。该数据采集方法，由于对多个第一运行参数标识计算节点服务器的服务器ID；对多个第二运行参数标识管理节点服务器的服务器ID；对多个第三运行参数标识存储节点服务器的服务器ID；每个聚合中心的聚合服务器对聚合后生成的每个数据组标识数据中心ID，且同一数据组中的每条数据携带有采集该条数据的服务器的服务器ID，实现了对各个数据中心的数据规范管理。再者，由于每个数据中心的聚合服务器，将聚合后的标识有数据中心ID的数据组上传至第一kafka集群存储；进而，第二kafka集群存储有来自各个数据中线的数据组。如此，当用户可以根据故障类型查询到多个数据中心的数据，查询到的数据更加全面。

主权项：1.一种数据采集方法，其特征在于，应用于数据采集系统，所述数据采集系统包括多个数据中心与第一kafka集群，每个所述数据中心与所述第一kafka集群通信连接，每个所述数据中心包括依次通信连接的数据采集服务群、第二kafka集群以及聚合服务器，其中，所述数据采集服务群包括计算节点服务器、管理节点服务器、以及存储节点服务器，所述方法包括：在每个所述数据中心内，所述计算节点服务器采集自身的多个第一运行参数，并对所述多个第一运行参数标识所述计算节点服务器的服务器ID；所述管理节点服务器采集自身的多个第二运行参数，并对所述多个第二运行参数标识所述管理节点服务器的服务器ID；所述存储节点服务器采集自身的多个第三运行参数，并对所述多个第三运行参数标识所述存储节点服务器的服务器ID；所述第二kafka集群接收并存储来自所述计算节点服务器的多个第一运行参数、来自所述管理节点服务器的多个第二运行参数、以及来自所述存储节点的服务器的多个第三运行参数；所述聚合服务器从所述第二kafka集群中，提取所述多个第一运行参数、所述多个第二运行参数、以及多个所述第三运行参数，对所述多个第一运行参数、所述多个第二运行参数、以及所述多个第三运行参数聚合，对聚合后生成的每个数据组标识数据中心ID，且同一数据组中的每条数据携带有采集该条数据的服务器的服务器ID；每个所述数据中心的聚合服务器，将聚合后的标识有数据中心ID的数据组上传至所述第一kafka集群存储；所述多个第二运行参数包括第二核心监控数据和第二类型监控数据；所述第二核心监控数据被标识有所述管理节点服务器的服务器ID，且所述第二核心监控数据包括：所述管理节点服务器的CPU使用率、内存使用率、以及磁盘使用率；所述第二类型监控数据包括：部署在所述管理节点服务器的mysql数据库的工作参数、部署在所述管理节点服务器的rabbitmq消息队列的工作参数、以及部署在所述管理节点服务器的redis数据库的工作参数，其中，所述mysql数据库的工作参数被标识有所述管理节点服务器的服务器ID，所述rabbitmq消息队列的工作参数被标识有所述管理节点服务器的服务器ID，所述redis数据库的工作参数被标识有所述管理节点服务器的服务器ID。

全文数据：

权利要求：

百度查询： 中国联合网络通信集团有限公司 联通云数据有限公司 数据采集方法与系统