基于分布式通信的数据分析方法及系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107463648A(43)申请公布日2017.12.12(21)申请号201710618929.4(22)申请日2017.07.26(71)申请人苏州乐麟无线信息科技有限公司地址215000江苏省苏州市科灵路78号苏高新软件园12栋6楼(72)发明人刘睿(74)专利代理机构苏州国诚专利代理有限公司32293代理人杨淑霞(51)Int.Cl.G06F17/30(2006.01)权利要求书1页说明书4页附图2页(54)发明名称基于分布式通信的数据分析方法及系统(57)摘要本发明涉及一种基于分布式通信的数据分析方法及系统，其中基于分布式通信的数据分析方法包括以下步骤：初始数据流入时，在工作服务器上生成对应于该初始数据的日志；将对应于该初始数据的日志传输至分析服务器，由所述分析服务器对该日志进行数据分析及优化，以得到优化数据；将该优化数据插入数据库中，并当优化数据完成插入后，向所述工作服务器发送回执。上述基于分布式通信的数据分析方法利用将数据由工作服务器形成日志，并将该日志传输至上述分析服务器，由该分析服务器对该日志进行分析处理，得到优化数据，这样可有效地提升上述工作服务器的工作效率。CN107463648ACN107463648A权利要求书1/1页1.一种基于分布式通道的数据分析方法，其特征在于，包括以下步骤：初始数据流入时，在工作服务器上生成对应于该初始数据的日志；将对应于该初始数据的日志传输至分析服务器，由所述分析服务器对该日志进行数据分析及优化，以得到优化数据；将该优化数据插入数据库中，并当优化数据完成插入后，向所述工作服务器发送回执。2.根据权利要求1所述的基于分布式通道的数据分析方法，其特征在于，在所述初始数据流入时，在工作服务器上生成对应于该初始数据的日志的步骤中，还包括以下步骤：判断所述初始数据是否大于阈值时，生成对应于该初始数据的日志。3.根据权利要求1所述的基于分布式通道的数据分析方法，其特征在于，在将对应于该初始数据的日志传输至分析服务器，由所述分析服务器对该日志进行数据分析及优化，以得到优化数据的步骤中，所述对应于该初始数据的日志通过RPC通信传输至分析服务器。4.根据权利要求1所述的基于分布式通信的数据分析方法，其特征在于，在将对应于该初始数据的日志传输至分析服务器，由所述分析服务器对该日志进行数据分析及优化，以得到优化数据的步骤中，所述分析服务器对该日志进行数据分析及优化包括：对日志进行数据解析、数据去重、数据概率计算。5.根据权利要求1所述的基于分布式通信的数据分析方法，其特征在于，在将该优化数据插入数据库中，并当优化数据完成插入后，向所述工作服务器发送回执的步骤之前，包括：对优化数据进行备份。6.一种基于分布式通信的数据分析系统，其特征在于，包括：日志生成模块，用于当初始数据流入时，在工作服务器上生成对应于该初始数据的日志；日志分析模块，用于将对应于该初始数据的日志传输至分析服务器，由所述分析服务器对该日志进行数据分析及优化，以得到优化数据；数据插入模块，用于将该优化数据插入数据库中，并当优化数据完成插入后，向所述工作服务器发送回执。7.根据权利要求6所述的基于分布式通信的数据分析系统，其特征在于，所述日志生成模块包括：判断单元，用于判断所述初始数据是否大于阈值时，生成对应于该初始数据的日志。8.根据权利要求6所述的基于分布式通信的数据分析系统，其特征在于，所述日志分析模块将对应于该初始数据的日志通过RPC通信传输至分析服务器。9.根据权利要求6所述的基于分布式通信的数据分析系统，其特征在于，所述日志分析模块可对日志进行数据解析、数据去重、数据概率计算。10.根据权利要求6所述的基于分布式通信的数据分析系统，其特征在于，所述基于分布式通信的数据分析系统还包括：备份单元，用于对所述优化数据进行备份。2CN107463648A说明书1/4页基于分布式通信的数据分析方法及系统技术领域[0001]本发明涉及通信领域，特别是涉及一种基于分布式通信的数据分析方法及系统。背景技术[0002]现如今互联网性能逐渐更新换代的今天。数据量成几何倍数逐年增长，基于数据的服务器质量判断，变得更加的细致化。同时也要求数据分析服务器的要求也十分的高，否则在这样的数据量下也无法挖掘价值。[0003]一直以来单机游戏计费产生的数据量十分巨大，这些数据包含了用户行为数据，用户买点数据，运营商支付回调数据等等，少则一天单点几十万的请求数据，多则上百万的独立数据。根据现近的移动互联网趋势下的风向，单机游戏更偏向休闲模式，数据并发呈现不规则形式。这样，便对于服务器的质量考核十分的重要，目前市场上对于通道分析主要还是采用数据库存贮数据，进行取数据运算分析的方式。[0