日志流处理方法、装置、电子设备及存储介质.pdf
含平****ng
亲,该文档总共12页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
日志流处理方法、装置、电子设备及存储介质.pdf
本公开披露了一种日志流处理方法、装置、电子设备及存储介质。该日志流处理方法应用于数据库技术领域,包括:系统初始化时,创建控制日志流;变更数据日志流,且在控制日志流中写入数据日志流的变更日志;数据日志流的变更日志包括日志流标识和变更操作,数据日志流用于记录针对数据进行操作的日志。本公开通过在控制日志流中写入数据日志流的变更日志,使备份数据库能感知到分布式数据库中数据日志流的变化,从而分布式数据库和备份数据库的日志流具有一致性,进而可保证备份数据库能够同步到分布式数据库上的全部日志,减少了数据库运维过程中的人
日志处理方法、装置、电子设备及存储介质.pdf
本发明实施例公开了一种日志处理方法、装置、电子设备及存储介质,该方法包括:当接收到日志处理请求时,获取采集的各已监控平台所对应的目标文件集;基于至少三个评估维度对所述待分析信息进行处理,得到与各评估维度相对应的评估属性信息;其中,所述至少三个评估维度包括事件类型维度、基于资源定位符确定的业务域类型维度、以及基于待分析信息所确定的关键字类型维度;基于各评估维度的评估属性信息,确定各已监控平台所对应的质量分析报告。本发明实施例的技术方案,能够自动高效地对系统出现的问题进行多维度的分析汇总,降低了人力成本和时间
增量日志处理方法、装置、电子设备及存储介质.pdf
本公开实施例提供了一种增量日志处理方法、装置、电子设备及存储介质。该方法包括:获取与增量日志对应的多个目标数据包,其中,每个目标数据包包括序号标识,其中,每个序号标识用于表征获取目标数据包的顺序;针对多个目标数据包中的每个目标数据包,确定与目标数据包对应的解析单元;调用与目标数据包对应的解析单元并行解析目标数据包,得到与目标数据包对应的解析结果,其中,每个解析结果包括用于表征获取目标数据包的顺序的序号标识;按照由多个序号标识确定的输出顺序输出多个解析结果。
日志数据处理方法、装置、电子设备及存储介质.pdf
本申请实施例公开了一种日志数据处理方法、装置、电子设备及存储介质,该方法包括:获取通过日志采集模块采集的系统日志数据;采用与所述系统日志数据所属的数据类型匹配的数据压缩方式,对所述系统日志数据进行数据压缩处理,得到目标日志数据。上述的日志数据处理方法、装置、电子设备及存储介质,能够减少日志数据的数据量,以减少日志数据占用的存储空间,且提高了对日志数据进行数据压缩的效果。
日志数据处理方法、装置、存储介质与电子设备.pdf
本公开提供一种日志数据处理方法、装置、存储介质与电子设备,涉及数据处理技术领域。其中,所述日志数据处理方法包括:根据待处理的日志数据中的事件标识,将所述日志数据划分成一个或多个一级数据片段;将所述一级数据片段划分成一个或多个二级数据片段;根据所述二级数据片段中所述事件标识所属的区间,确定所述二级数据片段的位图,以得到所述二级数据片段的索引信息;所述位图中的每一位对应一个区间。本公开在一定程度上降低了日志数据的存储成本。