数据迁移方法、装置、系统和计算机可读存储介质.pdf
如灵****姐姐
亲,该文档总共18页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
数据迁移方法、装置、系统和计算机可读存储介质.pdf
本公开涉及一种数据迁移方法、装置、系统和计算机可读存储介质,涉及计算机技术领域。本公开的方法包括:确定新增的图引擎服务的标签在哈希环中的位置;根据标签在哈希环中的位置和已分配的各个图分片数据在哈希环中的位置的距离,确定属于新增的图引擎服务的待迁移的图分片数据;向新增的图引擎服务和待迁移的图分片数据的原图引擎服务发送指示信息,将待迁移的图分片数据由原图引擎服务迁移到新增的图引擎服务。
一种数据迁移方法、装置和计算机可读存储介质.pdf
本申请提供一种数据迁移方法,包括:获取目标迁移文件;根据当前系统空闲IO的属性与预设的每个文件迁移任务需要的迁移IO,确定并发迁移的迁移个数;根据迁移个数向客户端发送目标迁移文件的迁移任务,以便客户端根据迁移任务对目标迁移文件进行并发迁移;其中,当前系统空闲IO为系统最大IO中去除用户实际占用IO和预留IO后的IO。本申请通过设置预留IO供用户缓冲使用,快速清理快速池提升存储系统整体性能的同时,不影响用户使用;通过利用当前系统空闲IO的属性确定并发迁移的迁移个数,自适应的调整并发迁移的迁移个数,提高数据迁
数据处理方法、装置、系统和计算机可读存储介质.pdf
本发明公开了一种数据处理方法、装置、系统和计算机可读存储介质,涉及网络传输技术领域。数据处理方法包括:获取数据接收点的数据处理压力值;将数据处理压力值与预设阈值进行比较;根据比较结果对数据接收点的数据接收间隔进行调整,以便数据接收点根据调整后的数据接收间隔分批截取和处理数据。本发明的实施例可以根据数据处理压力动态地调整数据接收点的数据接收间隔、即时间窗口值,从而使得设置的数据接收间隔与实际需求更匹配,提高了数据处理的稳定性和资源利用率。
数据同步方法、装置、系统及计算机可读存储介质.pdf
本发明提供了一种数据同步方法、装置、系统及计算机可读存储介质,涉及大数据和互联网技术领域,在进行数据同步时,先根据与源存储组件对应的接入配置信息,将源存储组件中每个服务实例对应的源数据实时写入分布式日志系统Kafka的对应主题中;当监听到存在待处理的同步任务时,获取同步任务的配置数据,该配置数据包括源存储组件、Kafka的目标主题和目的存储组件的地址信息;进而根据该配置数据,执行同步任务。本发明支持多服务实例接入,可以满足多种存储组件间的数据同步需求,实现了数据同步的实时性,从而能够保证业务进度,且与传统
数据迁移方法、装置、电子设备及可读存储介质.pdf
本申请公开了一种数据迁移方法、装置、电子设备及可读存储介质。其中,方法包括预先构建存储性能不同的第一存储池和第二存储池,第一存储池的存储性能优于第二存储池;将目标数据分割为第一子数据和第二子数据,将第一子数据存储至第一存储池,第二子数据存储至第二存储池;当接收到目标数据的迁移指令,将从第一存储池读取的第一子数据写入至第二存储池,同时向元数据服务器发送更新目标数据的存储位置信息的请求;当元数据服务器应答更新完成,从第一存储池删除第一子数据,以完成目标数据的迁移操作,从而可以提高文件迁移效率的基础上,降低文件