一种分布式任务调度方法、装置和电子设备.pdf
骊蓉****23
亲,该文档总共24页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
一种分布式任务调度方法、装置和电子设备.pdf
本发明公开了一种分布式任务调度方法、装置和电子设备。该方法包括:获取当前待调度的任务数量和分布式节点服务器对应的节点服务器总数量;基于任务数量,构建待优化的任务调度向量;基于离散粒子群优化方式、任务资源约束条件和节点服务器总数量,以最大化负载均衡度为优化目标,将任务调度向量作为粒子位置进行全局位置迭代优化,获得迭代后的目标全局最优位置;基于目标全局最优位置对应的目标任务调度向量,确定目标调度策略。通过本发明的技术方案,可以解决离散化的任务调度优化问题,保证了任务调度的准确性。
一种分布式任务调度方法、装置、存储介质及电子设备.pdf
本申请实施例公开了一种分布式任务调度方法、装置、存储介质及电子设备。该方法包括:接收第三方应用发送的任务调度请求;其中,所述任务调度请求包括调度策略和任务类型;根据所述任务类型,确定与所述任务类型相对应的预先配置的分布式任务调度组件;其中,所述分布式任务调度组件包括任务管理组件、任务运行组件、任务分析组件以及任务统计组件中的至少一种;基于所述调度策略,利用所述分布式任务调度组件创建目标任务,并对所述目标任务进行调度执行。本技术方案,可以基于预先配置的分布式任务调度组件实现对各个任务调度的执行,工作效率高。
任务分布式调度的方法和装置.pdf
本发明公开了任务分布式调度的方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:接收应用系统的待处理任务,根据待处理任务的任务信息确定待处理任务的分片总数,然后将待处理任务写入对应优先级的任务列表;任务信息包括:任务标识和优先级;异步从每个优先级的任务列表中获取任务分片放入对应优先级的任务分片调度队列;异步消费每个优先级的任务分片调度队列中的任务分片,然后调用应用系统中的程序幂等执行消费到的任务分片。该实施方式能够在复杂多变的任务分布式处理需求下,高效、健壮、平滑地支持大任务的分布式调度。
任务调度方法、装置和电子设备.pdf
本说明书实施例提出了一种任务调度方法、装置和电子设备,其中,上述任务调度方法中,获取MPC训练任务描述文件之后,将MPC训练任务描述文件拆分为子任务描述文件,然后根据上述子任务描述文件,对上述MPC训练任务拆分获得的子任务进行调度,记录调度成功的子任务的信息。最后,根据记录的信息,确定上述MPC训练任务拆分获得的子任务均调度成功之后,将拆分获得的子任务下发给对应的执行机构,从而可以实现将MPC训练任务拆分为多个K8s支持的单方任务来执行,达到运行MPC多方任务的效果,使K8s适用于MPC场景;并且上述方法
分布式任务调度方法、装置、电子设备及存储介质.pdf
本申请涉及数据处理技术领域,尤其涉及一种分布式任务调度方法、装置、电子设备及存储介质,应用于分布式系统,分布式系统包括多个服务节点,该方法包括:接收客户端发送的交易请求,并获取每一服务节点可处理的任务量;将交易请求对应的待处理任务量与多个服务节点的可处理的任务量进行比对;根据比对结果确定对应的负载均衡策略,并基于负载均衡策略将交易请求对应的各个任务分配至对应的服务节点进行处理;其中,负载均衡策略包括并发度优先策略和消息容量优先策略。这样,可将并发度高、交易量大的批量交易进行有效拆分,提高部署策略的灵活性,