一种日志数据异步处理方法及装置.pdf
岚风****55
亲,该文档总共20页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
一种日志数据异步处理方法及装置.pdf
本发明公开了一种日志数据异步处理方法及装置,该方法包括:创建一个daemon进程作为管理者;根据配置信息创建工作进程,形成工作进程群,并根据工作进程群的实时运行情况灵活自动的控制工作进程群中工作进程的个数;多个工作进程循环监听设定的接收数据端口,工作进程接收数据后,在数据库连接正常时,将接收到的银行系统的交易日志信息作为交易日志数据写入数据库;否则工作进程将接收到的交易日志数据写入本地日志文件,待所述数据库恢复后,将所述本地日志文件中的所述交易日志数据导入所述数据库。本发明去除银行系统对数据库的依赖,有效
一种日志数据预处理方法及装置.pdf
本发明提供一种日志数据预处理方法及装置,通过对获取的待处理的第一日志文件进行格式转换,得到第二日志文件,为第二日志文件中同类型的错误日志数据分配相同错误标记,得到第三日志文件,基于具有不同错误标记的所有错误日志数据的时间戳和预设序列长度,构建多个故障相关序列,计算所有故障相关序列之间的序列似然度,将序列似然度小于预设值的故障相关序列对划分为一组,得到聚类后的故障相关序列并进行训练,得到对应的故障分类模型。基于上述,对日志数据进行预处理时,能够在减少数据量的基础上保留更多与故障相关的日志数据,有利于后续故障
日志数据的处理方法及装置.pdf
本申请公开了一种日志数据的处理方法及装置。其中,该方法包括:采集日志数据,其中,日志数据的来源包括:主服务器日志,以及与主服务器关联的至少一个客户终端的客户端日志;基于日志数据,获取待检测数据,其中,待检测数据包括:客户终端的登录用户的用户画像,以及在客户终端上发生操作时产生的行为数据;基于安全标准数据对待检测数据进行分析,确定是否存在异常数据。本申请解决了传统信息安全技术是基于规则和专家经验,通过人为设定阈值来进行防护检测,面对合法进程中的恶意攻击存在安全可见性盲区,因无法检测到未知攻击造成误报的技术问
处理日志数据的方法、装置、存储介质及系统.pdf
本发明公开了一种处理日志数据的方法、装置、存储介质及系统。其中,该方法包括:获取待处理的语音信号;将语音信号转换为时频谱信号;对时频谱信号进行卷积混合处理,得到关键词检测结果;基于关键词检测结果对应的控制指令,执行目标控制操作。本发明解决了相关技术中由于APP版本的高频次更新而造成的对于埋点日志的监测时效性差的技术问题。
一种离线日志数据处理的方法和装置.pdf
本发明公开了一种离线日志数据处理的方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:抽取离线日志数据,并获取离线日志数据的属性信息;根据所述离线日志数据的属性信息,从构建的数据集合中确定所述离线日志数据的目标数据集合;所述构建的数据集合为根据预设的分类属性构建的;将所述离线日志数据存入所述目标数据集合。该方法能够快速的完成数据抽取和数据解析,并降低了任务的高并发,进而释放更多资源,降低了机器负载。