数据记录的批量写入方法、装置、电子设备及存储介质.pdf
论文****酱吖
亲,该文档总共15页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
数据记录的批量写入方法、装置、电子设备及存储介质.pdf
本申请实施例所公开的一种数据记录的批量写入方法、装置、电子设备及存储介质,包括获取待写入数据记录集合和目标数据库,基于数据缓存单元对应的预设写入参数,将待写入数据记录集合中的待写入数据记录写入数据缓存单元,向模板生成单元发送第一获取请求,并接收第一获取响应,第一获取响应包括预设写入参数对应的第一多行写入模板集合,将数据缓存单元中的待写入数据记录写入第一多行写入模板集合中的每个第一多行写入模板,根据第一多行写入模板集合,确定第一写入程序,当第一写入程序被执行时,将第一多行写入模板集合中的待写入数据记录写入目
数据写入方法、装置、电子设备及存储介质.pdf
本发明公开了一种数据写入方法、装置、电子设备及存储介质,其中,方法包括:确定缓存写满时,将缓存中的数据划分为N个数据块,N为大于1的整数;将N个数据块依次写入非易失性存储器中,并且在将第i个数据块写入非易失性存储器之前,判断是否存在优先级更高的线程需要使用非易失性存储器,其中,1<i≤N;若存在优先级更高的线程需要使用非易失性存储器,则暂停将第i个数据块写入非易失性存储器,以便执行线程。该方法通过将缓存中的数据分成了N个数据块,大大缩短每次数据写入占用的时间,避免了数据写入占用的时间较长导致优先级翻转的情
数据写入方法、装置、存储介质以及电子设备.pdf
本发明公开了一种数据写入方法、装置、存储介质以及电子设备。该方法包括:接收对数据库中的数据进行处理的处理请求;根据处理请求,对数据库中的数据进行处理,得到增量数据;将增量数据存储在内存中;在内存中的增量数据的数据量大小达到目标阈值的情况下,将增量数据写入到数据库中。本发明解决了分布式存储系统负担大的技术问题。
数据写入方法、装置、电子设备和存储介质.pdf
本公开实施例提供了一种数据写入方法、装置、电子设备和存储介质。该方法包括:当接收到数据写入请求时,获取所述数据写入请求的场景信息以及与所述场景信息对应的目标架构配置信息,所述目标架构配置信息记录于配置文件中;根据所述目标架构配置信息加载目标数据存储架构;控制所述目标数据存储架构中的存储节点写入目标数据,所述目标数据为所述数据写入请求请求写入的数据。本公开实施例通过采用上述技术方案,在服务器的配置文件而非服务器提供数据写入服务程序代码中记录服务器在不同应用场景中写数据时使用的数据存储架构的架构配置信息,能够
数据批量同步方法、装置、电子设备及存储介质.pdf
本申请提出一种数据批量同步方法、装置、电子设备及存储介质,数据批量同步方法包括:从源数据系统获取所有待同步数据以构建待同步数据集;基于目标数据系统的实时状态计算实时同步批量;从待同步数据集中提取数量为实时同步批量的待同步数据作为同步批次,将同步批次从待同步数据集中删除以更新待同步数据集;对同步批次执行数据同步操作得到同步结果;若同步失败,依据预设查找算法对同步批次执行多次数据同步操作以查找异常数据和异常数据的位置信息;若同步成功,则不断获取同步批次以执行数据同步,直至遍历所有待同步数据;基于异常数据的数量