资源分配方法、装置、电子设备及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114327894A(43)申请公布日2022.04.12(21)申请号202111636358.X(22)申请日2021.12.29(71)申请人中国光大银行股份有限公司地址100033北京市西城区太平桥大街25号、甲25号中国光大中心(72)发明人解培李银凤(74)专利代理机构北京品源专利代理有限公司11332代理人康欢欢(51)Int.Cl.G06F9/50(2006.01)G06F9/48(2006.01)G06N5/04(2006.01)权利要求书2页说明书9页附图3页(54)发明名称资源分配方法、装置、电子设备及存储介质(57)摘要本发明公开了一种资源分配方法、装置、电子设备及存储介质，属于计算机技术领域。该方法包括：获取用户发送的包括任务信息的目标任务；若根据所述任务信息中的紧急度信息识别到所述目标任务为紧急启动任务，则根据所述任务信息中需求资源、集群系统中当前剩余资源和集群系统中当前处理中任务的状态信息，为所述目标任务分配资源，以执行所述目标任务。通过上述技术方案，在保证集群系统中的资源能够被充分且合理利用的情况下，满足了紧急任务立刻执行的需求。CN114327894ACN114327894A权利要求书1/2页1.一种资源分配方法，其特征在于，包括：获取用户发送的包括任务信息的目标任务；若根据所述任务信息中的紧急度信息识别到所述目标任务为紧急启动任务，则根据所述任务信息中需求资源、集群系统中当前剩余资源和集群系统中当前处理中任务的状态信息，为所述目标任务分配资源，以执行所述目标任务。2.根据权利要求1所述的方法，其特征在于，根据所述任务信息中需求资源、集群系统中当前剩余资源和集群系统中当前处理中任务的状态信息，为所述目标任务分配资源，包括：若识别到所述当前剩余资源不满足所述需求资源，则根据所述当前剩余资源和所述需求资源，确定需释放资源；根据所述需释放资源和所述当前处理中任务的状态信息，从所述当前处理中任务中选择可中止任务；停止所述可中止任务的执行操作，以释放所述可中止任务所占用的资源；基于释放的资源为所述目标任务分配资源。3.根据权利要求2所述的方法，其特征在于，根据所述需释放资源和所述当前处理中任务的状态信息，从所述当前处理中任务中选择可中止任务，包括：根据所述需释放资源、所述当前处理中任务的指定优先级、以及所述当前处理中任务的状态信息，从所述当前处理中任务中选择可中止任务。4.根据权利要求1‑3任一所述的方法，其特征在于，所述当前处理中任务包括训练任务，所述状态信息包括当前迭代轮数、每轮执行时长、当前轮次剩余时长和资源占用情况中的至少一项。5.根据权利要求4所述的方法，其特征在于，停止所述可中止任务的执行操作之前，还包括：对所述可中止任务的模型参数进行存储。6.根据权利要求1所述的方法，其特征在于，获取用户发送的包括任务信息的目标任务之后，还包括：若根据所述任务信息中的紧急度信息识别到所述目标任务为正常启动任务，则将所述目标任务添加至任务队列中，并根据所述任务队列中待处理任务的策略优先级，为所述任务队列中的待处理任务分配资源。7.根据权利要求6所述的方法，其特征在于，所述任务队列中待处理任务的策略优先级根据任务等待时长、需求资源和剩余迭代轮数中的至少一项确定。8.根据权利要求1所述的方法，其特征在于，为所述目标任务分配资源之后，还包括：在执行所述目标任务的过程中，采用监控进程对所述目标任务的执行状态进行监控，以获取所述目标任务的状态信息。9.一种资源分配装置，其特征在于，包括：目标任务获取模块，用于获取用户发送的包括任务信息的目标任务；资源分配模块，用于若根据所述任务信息中的紧急度信息识别到所述目标任务为紧急启动任务，则根据所述任务信息中需求资源、集群系统中当前剩余资源和集群系统中当前处理中任务的状态信息，为所述目标任务分配资源，以执行所述目标任务。2CN114327894A权利要求书2/2页10.一种电子设备，其特征在于，包括：一个或多个处理器；存储器，用于存储一个或多个程序；当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1‑8中任一项所述的资源分配方法。11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1‑8中任一项所述的资源分配方法。3CN114327894A说明书1/9页资源分配方法、装置、电子设备及存储介质技术领域[0001]本发明实施例涉及计算机技术领域，尤其涉及一种资源分配方法、装置、电子设备及存储介质。背景技术[0002]目前，用于处理深度学习任务的集群系统，通常按照队列的先进先出原则，对用户所提交的任务进行处理。该处理方式无法