CN112130983A - 任务处理方法、装置、设备、系统及存储介质 - Google Patents

任务处理方法、装置、设备、系统及存储介质 Download PDF

Info

Publication number
CN112130983A
CN112130983A CN202011160128.6A CN202011160128A CN112130983A CN 112130983 A CN112130983 A CN 112130983A CN 202011160128 A CN202011160128 A CN 202011160128A CN 112130983 A CN112130983 A CN 112130983A
Authority
CN
China
Prior art keywords
task
resource
target
source data
configuration information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011160128.6A
Other languages
English (en)
Inventor
张宁
邹雨竹
王之龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Original Assignee
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sensetime Lingang Intelligent Technology Co Ltd filed Critical Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority to CN202011160128.6A priority Critical patent/CN112130983A/zh
Publication of CN112130983A publication Critical patent/CN112130983A/zh
Priority to KR1020217039205A priority patent/KR20220058850A/ko
Priority to PCT/CN2021/085940 priority patent/WO2022088612A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Abstract

本公开关于一种任务处理方法、装置、设备、系统及存储介质,该方法包括:终端向服务器发送包括源数据配置信息和运行配置信息的资源调度请求;服务器根据源数据配置信息确定任务源数据,服务器根据运行配置信息在目标资源节点创建和启动目标容器;服务根据目标容器确定路由条目,并将任务源数据发送至目标资源节点;服务器向终端发送资源调度完成消息;终端通过路由条目调用目标容器和任务源数据执行目标任务。利用本公开提供的技术方案可实现灵活简单的资源配置,无需用户进行运行环境搭建,也无需用户进行源数据配置,大大降低了在线编程教育的资源配置的复杂度和出错率,进而大大提高了任务处理过程中的灵活性和任务处理速度。

Description

任务处理方法、装置、设备、系统及存储介质
技术领域
本公开涉及互联网技术领域,尤其涉及任务处理方法、装置、设备、系统及存储介质。
背景技术
随着互联网技术的高速发展,在线编程教育越来越普及,例如在线人工智能教育等。
相关技术中,往往仅提供一些案例等编程源数据资源,使用者需要自己配置运行环境(即运行资源),但人工智能等编程教育的运行环境的搭建比较复杂且容易出错。因此,相关技术的在线编程教育存在运行资源搭建困难出错率高。
发明内容
本公开提供一种任务处理方法、装置、设备、系统及存储介质。本公开的技术方案如下:
根据本公开实施例的一方面,提供一种任务处理方法,包括:
接收终端发送的目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息;
根据所述源数据配置信息确定所述目标任务的任务源数据;
根据所述运行配置信息在目标资源节点创建和启动目标容器;
根据所述目标容器确定路由条目,并将所述任务源数据发送至所述目标资源节点;
向所述终端发送资源调度完成消息,以使所述终端通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
采用上述方案用户可以直接通过终端进行源数据配置信息和运行配置信息的选择,实现了灵活简单的资源配置,无需用户进行运行环境搭建,也无需用户进行源数据配置,大大降低了在线编程教育的资源配置的复杂度和出错率,进而大大提高了任务处理过程中的灵活性和任务处理速度。
可选的,所述根据所述运行配置信息在目标资源节点创建和启动目标容器,包括:
向资源编排服务器发送资源分配请求,所述资源分配请求包括所述运行配置信息,以使所述资源编排服务器基于所述运行配置信息在目标资源节点创建并启动目标容器。
结合资源编排服务器进行运行资源的配置,可以大大降低服务器压力,提高资源调度的可用性和稳定性。
可选的,所述向资源编排服务器发送资源分配请求包括:
通过消息队列向资源调度服务器发送包括所述运行配置信息的资源调度任务,以使所述资源调度服务器向所述资源编排服务器发送资源分配请求,所述资源分配请求包括所述运行配置信息。
结合资源调度服务器进行资源调度,可以实现调度与请求的解耦,大大提高资源调度的可用性和稳定性。
可选的,所述根据所述目标容器确定路由条目,包括:
接收所述资源编排服务器发送的容器启动成功消息,所述容器启动成功消息包括所述目标容器的路由条目;
将所述路由条目发送至路由管理服务器,以使所述路由管理服务器在本地添加所述路由条目;
在运行资源配置过程中,将目标容器的路由条目添加至路由管理服务器,后续任务运行过程中,终端可以直接通过路由管理服务器控制目标容器进行任务运行,将终端与服务器间进行解耦,实现用户管理与资源调度管理独立开来,即使用户通过第三方账号也可以进行任务的执行控制,实现了第三方集成,进而大大提高了任务处理过程中的灵活性和任务处理速度。
可选的,所述容器启动成功消息还包括所述目标资源节点的地址信息,所述将所述任务源数据发送至所述目标资源节点包括:
根据所述地址信息将所述任务源数据发送至所述目标资源节点。
可选的,在接收终端发送的目标任务的资源调度请求之前,所述方法还包括:
接收所述终端在监控到任务资源调度配置页面输入源数据配置信息的情况下,发送的资源配置推荐请求,所述资源配置推荐请求包括输入的源数据配置信息;
根据所述输入的源数据配置信息确定推荐运行配置信息;
将所述推荐运行配置信息发送给所述终端,以使所述终端在所述任务资源调度配置页面显示资源配置确认消息,所述资源配置确认消息包括所述推荐运行配置信息;
所述接收终端发送的目标任务的资源调度请求包括:
接收所述终端响应于对采用所述推荐运行配置信息的确认指令,发送的所述目标任务的资源调度请求。结合源数据配置信息进行运行配置信息的推荐,可以提高运行配置的精准性。
可选的,在接收所述资源编排服务器发送的容器启动成功消息之后,所述方法还包括:
监控所述目标容器的运行状态;
在监控到所述目标容器的运行状态为空闲状态,且所述空闲状态的持续时长大于等于预设空闲时长阈值的情况下,向所述资源编排服务器发送资源销毁指令,以使所述资源编排服务器控制所述目标资源节点删除所述目标容器。通过资源空闲回收,有效避免了资源浪费,进而也可以提高资源集群的可用性。
可选的,在将所述任务源数据发送至所述目标资源节点之后,所述方法还包括:
接收所述目标资源节点发送的所述目标容器的资源使用信息;
所述资源调度完成消息还包括目标容器的资源使用信息,以使所述终端显示包括所述资源使用信息的任务运行确认页面。通过资源使用信息反馈,便于用户掌握已经使用的资源情况。
可选的,在接收所述目标资源节点发送的所述目标容器的资源使用信息之后,所述方法还包括:
根据所述资源使用信息对所述目标任务的运行资源进行合理性分析;
在分析的结果为不合理的情况下,向所述终端发送重新启动任务调度信息,以使所述终端显示还包括所述重新启动任务调度信息的任务运行确认页面。结合源资源使用信息进行运行资源的合理性分析,进而提高运行配置的精准性。
可选的,所述目标任务包括深度学习任务,所述目标任务的任务源数据包括:与所述源数据配置信息对应的训练数据集和与所述源数据配置信息对应的神经网络。
根据本公开实施例的另一方面,还提供一种任务处理方法,包括:
向服务器发送目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息,以使所述服务器根据所述源数据配置信息确定所述目标任务的任务源数据;以及根据所述运行配置信息在目标资源节点创建和启动目标容器;以及根据所述目标容器确定路由条目;
接收所述服务器发送的资源调度完成消息;
通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
采用上述方案用户可以直接通过终端进行源数据配置信息和运行配置信息的选择,实现了灵活简单的资源配置,无需用户进行运行环境搭建,也无需用户进行源数据配置,大大降低了在线编程教育的资源配置的复杂度和出错率,进而大大提高了任务处理过程中的灵活性和任务处理速度。
可选的,所述通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务包括:
向路由管理服务器发送所述目标任务的任务运行请求,以使所述路由管理服务器基于所述路由条目向所述目标容器发送所述任务运行请求,以使所述目标容器响应于所述任务运行请求,基于所述任务需求源数据运行所述目标任务。
在任务运行过程中,终端直接通过路由管理服务器控制目标容器进行任务运行,将终端与服务器间进行解耦,实现用户管理与资源调度管理独立开来,即使用户通过第三方账号也可以进行任务的执行控制,实现了第三方集成,进而大大提高了任务处理过程中的灵活性和任务处理速度。
可选的,在向服务器发送目标任务的资源调度请求之前,所述方法还包括:
在监控到任务资源调度配置页面输入源数据配置信息的情况下,向服务器发送资源配置推荐请求,所述资源配置推荐请求包括输入的源数据配置信息;以使所述服务器根据所述输入的源数据配置信息确定推荐运行配置信息;
接收所述服务器发送的推荐运行配置信息;
在所述任务资源调度配置页面显示资源配置确认消息,所述资源配置确认消息包括所述推荐运行配置信息;
所述向服务器发送目标任务的资源调度请求包括:
响应于对采用所述推荐运行配置信息的确认指令,向所述服务器发送所述目标任务的资源调度请求。结合源数据配置信息进行运行配置信息的推荐,进而提高运行配置的精准性。
可选的,所述资源调度完成消息还包括目标容器的资源使用信息;所述方法还包括:
显示包括所述资源使用信息的任务运行确认页面。通过反馈资源使用信息,便于用户掌握已经使用的资源情况。
可选的,所述任务运行确认页面还包括重新启动任务调度信息;所述方法还包括:
响应于基于所述重新启动任务调度信息的重启指令,显示任务资源调度配置页面;
向所述服务器发送资源回收指令,以使所述服务器执行资源回收操作。在运行资源不合理的情况下,重新进行资源调度配置,可以提高运行资源配置的精准性和合理性,并回收已经创建启动的资源,避免资源浪费。
根据本公开实施例的另一方面,还提供一种任务处理系统,包括:终端和服务器;
所述终端,用于向服务器发送目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息;以及用于通过路由条目调用目标容器和任务源数据执行所述目标任务;
所述服务器,用于根据所述源数据配置信息确定所述目标任务的任务源数据;以及用于根据所述运行配置信息在目标资源节点创建和启动目标容器;以及用于根据所述目标容器确定路由条目,并将所述任务源数据发送至所述目标资源节点;以及用于向所述终端发送资源调度完成消息。
根据本公开实施例的另一方面,还提供一种任务处理装置,包括:
资源调度请求接收模块,被配置为执行接收终端发送的目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息;
任务源数据确定模块,被配置为执行根据所述源数据配置信息确定所述目标任务的任务源数据;
容器创建启动模块,被配置为执行根据所述运行配置信息在目标资源节点创建和启动目标容器;
路由条目确定模块,被配置为执行根据所述目标容器确定路由条目;
任务源数据发送模块,被配置为执行将所述任务源数据发送至所述目标资源节点;
资源调度完成消息发送模块,被配置为执行向所述终端发送资源调度完成消息,以使所述终端通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
可选的,所述容器创建启动模块包括:
资源分配请求发送单元,被配置为执行向资源编排服务器发送资源分配请求,所述资源分配请求包括所述运行配置信息,以使所述资源编排服务器基于所述运行配置信息在目标资源节点创建并启动目标容器。
可选的,所述资源分配请求发送单元具体被配置为执行通过消息队列向资源调度服务器发送包括所述运行配置信息的资源调度任务,以使所述资源调度服务器向所述资源编排服务器发送资源分配请求,所述资源分配请求包括所述运行配置信息。
可选的,所述路由条目确定模块包括:
容器启动成功消息接收单元,被配置为执行接收所述资源编排服务器发送的容器启动成功消息,所述容器启动成功消息包括所述目标容器的路由条目;
路由条目发送单元,被配置为执行将所述路由条目发送至路由管理服务器,以使所述路由管理服务器在本地添加所述路由条目;
可选的,所述容器启动成功消息还包括所述目标资源节点的地址信息,所述任务源数据发送模块具体被配置为执行根据所述地址信息将所述任务源数据发送至所述目标资源节点。
可选的,所述装置还包括:
资源配置推荐请求接收模块,被配置为执行接收所述终端在监控到任务资源调度配置页面输入源数据配置信息的情况下,发送的资源配置推荐请求,所述资源配置推荐请求包括输入的源数据配置信息;
推荐运行配置信息确定模块,被配置为执行根据所述输入的源数据配置信息确定推荐运行配置信息;
推荐运行配置信息发送模块,被配置为执行将所述推荐运行配置信息发送给所述终端,以使所述终端在所述任务资源调度配置页面显示资源配置确认消息,所述资源配置确认消息包括所述推荐运行配置信息;
所述资源调度请求接收模块还被配置为执行:接收所述终端响应于对采用所述推荐运行配置信息的确认指令,发送的所述目标任务的资源调度请求。
可选的,所述装置还包括:
空闲回收模块,被配置为执行监控所述目标容器的运行状态;
资源销毁指令发送模块,被配置为执行在监控到所述目标容器的运行状态为空闲状态,且所述空闲状态的持续时长大于等于预设空闲时长阈值的情况下,向所述资源编排服务器发送资源销毁指令,以使所述资源编排服务器控制所述目标资源节点删除所述目标容器。
可选的,在将所述任务源数据发送至所述目标资源节点之后,所述装置还包括:
资源使用信息接收模块,被配置为执行接收所述目标资源节点发送的所述目标容器的资源使用信息;
所述资源调度完成消息还包括目标容器的资源使用信息,以使所述终端显示包括所述资源使用信息的任务运行确认页面。
可选的,所述装置还包括:
合理性分析模块,被配置为执行根据所述资源使用信息对所述目标任务的运行资源进行合理性分析;
重新启动任务调度信息发送模块,被配置为执行在分析的结果为不合理的情况下,向所述终端发送重新启动任务调度信息,以使所述终端显示还包括所述重新启动任务调度信息的任务运行确认页面。
可选的,所述运行配置信息包括:容器镜像和算力信息。
可选的,所述目标任务包括深度学习任务,所述目标任务的任务源数据包括:与所述源数据配置信息对应的训练数据集和与所述源数据配置信息对应的神经网络。
根据本公开实施例的另一方面,还提供一种任务处理装置,包括:
资源调度请求发送模块,被配置为执行向服务器发送目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息,以使所述服务器根据所述源数据配置信息确定所述目标任务的任务源数据;以及根据所述运行配置信息在目标资源节点创建和启动目标容器;以及根据所述目标容器确定路由条目;
资源调度完成消息接收模块,被配置为执行接收所述服务器发送的资源调度完成消息;
目标任务执行模块,被配置为执行通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
可选的,所述目标任务执行模块包括:
任务运行请求发送单元,被配置为执行向路由管理服务器发送所述目标任务的任务运行请求,以使所述路由管理服务器基于所述路由条目向所述目标容器发送所述任务运行请求,以使所述目标容器响应于所述任务运行请求,基于所述任务需求源数据运行所述目标任务。
可选的,所述装置还包括:
资源配置推荐请求发送模块,被配置为执行在监控到任务资源调度配置页面输入源数据配置信息的情况下,向服务器发送资源配置推荐请求,所述资源配置推荐请求包括输入的源数据配置信息;以使所述服务器根据所述输入的源数据配置信息确定推荐运行配置信息;
推荐运行配置信息接收模块,被配置为执行接收所述服务器发送的推荐运行配置信息;
资源配置确认消息显示模块,被配置为执行在所述任务资源调度配置页面显示资源配置确认消息,所述资源配置确认消息包括所述推荐运行配置信息;
所述资源调度请求发送模块具体,被配置为执行响应于对采用所述推荐运行配置信息的确认指令,向所述服务器发送所述目标任务的资源调度请求。
可选的,所述资源调度完成消息还包括目标容器的资源使用信息;所述装置还包括:
任务运行确认页面显示模块,被配置为执行显示包括所述资源使用信息的任务运行确认页面。
可选的,所述任务运行确认页面还包括重新启动任务调度信息;所述装置还包括:
任务资源调度配置页面显示模块,被配置为执行响应于基于所述重新启动任务调度信息的重启指令,显示任务资源调度配置页面;
资源回收指令发送模块,被配置为执行向所述服务器发送资源回收指令,以使所述服务器执行资源回收操作。
根据本公开实施例的另一方面,提供一种任务处理设备,包括:处理器;用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现如上述任一项所述的方法。
根据本公开实施例的另一方面,提供一种计算机可读存储介质,当所述存储介质中的指令由任务处理设备的处理器执行时,使得所述任务处理设备能够执行本公开实施例的上述任一所述方法。
根据本公开实施例的另一方面,提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行本公开实施例的上述任一项所述的方法。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1根据一示例性实施例示出的一种应用环境的示意图;
图2根据一示例性实施例示出的另一种应用环境的示意图;
图3是根据一示例性实施例示出的一种任务处理方法的流程图;
图4是根据一示例性实施例示出的一种资源编排服务器基于运行配置信息在目标资源节点创建并启动目标容器的流程图;
图5是根据一示例性实施例示出的一种空闲资源回收的流程图;
图6是根据一示例性实施例示出的一种推荐运行配置信息的流程图;
图7是根据一示例性实施例示出的另一种任务处理方法的流程图;
图8是根据一示例性实施例示出的一种任务处理装置的框图;
图9是根据一示例性实施例示出的一种任务处理装置的框图;
图10是根据一示例性实施例示出的一种用于任务处理的电子设备的框图;
图11是根据一示例性实施例示出的一种用于任务处理的电子设备的框图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
请参阅图1,图1根据一示例性实施例示出的一种应用环境的示意图,如图1所示,该应用环境可以包括终端100和服务器200。
在一个可选的实施例中,终端100可以提供任务资源调度配置页面,以供用户根据需求为目标任务自定义源数据配置信息和运行配置信息,向服务器200发送反映用户需求的目标任务的资源调度请求(包括源数据配置信息和运行配置信息的资源调度请求)。具体的,终端100可以包括但不限于智能手机、台式计算机、平板电脑、笔记本电脑、智能音箱、数字助理、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、智能可穿戴设备等类型的实体设备。也可以为运行于实体设备的软体,例如应用程序,浏览器等。可选的,实体设备上运行的操作系统可以包括但不限于安卓系统、IOS系统、linux、windows等。
在一个可选的实施例中,服务器200可以基于终端侧发送的反映用户需求的目标任务的资源调度请求为该目标任务进行资源调度。本说明书实施例中,调度的资源可以包括运行资源和源数据资源。可选的,源数据资源可以为预先存储在服务器的,相应的,服务器可以结合资源调度请求中的源数据配置信息来调度相应的源数据资源。可选的,运行资源可以由服务器200提供,具体的,可以结合资源调度请求中的运行配置信息为目标任务调度相应的运行资源。具体的,服务器200可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以包括云服务器或云服务器集群。
此外,需要说明的是,图1所示的仅仅是本公开提供的任务处理方法的一种应用环境,在实际应用中,还可以包括其他应用环境,例如,运行资源可以由资源节点集群300提供,相应的,如图2所示,在一个可选的实施例中,资源节点集群300可以包括资源编排服务器301和资源节点集群302。可选的,资源编排服务器301可以结合用户需求从资源节点集群302中为用户分配相应的资源。资源节点集群302可以用于执行目标任务。具体的,资源编排服务器301可以包括独立的物理服务器,也可以包括多个物理服务器构成的服务器集群或者分布式系统,还可以包括云服务器或云服务器集群。资源节点集群302可以包括多个物理服务器构成的服务器集群或者分布式系统,还可以包括云服务器集群。
本说明书实施例中,上述终端100、服务器200和资源节点集群300间可以通过有线或无线通信方式进行直接或间接地连接,本公开在此不做限制。
以下介绍本公开一种任务处理方法图3是根据一示例性实施例示出的一种任务处理方法的流程图,本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的系统或服务器产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。具体的如图3所示,该任务处理方法可以包括:
S301:终端向服务器发送目标任务的资源调度请求。
本说明书实施例中,资源调度请求可以包括目标任务的源数据配置信息和运行配置信息。可选的,用户可以在终端侧提供任务资源调度配置页面,按照自身需求自定义目标任务的源数据配置信息和运行配置信息,并触发终端通过http(超文本传送协议)将包括源数据配置信息和运行配置信息的资源调度请求发送给服务器。本说明书实施例中,目标任务可以为任一需要利用调度的资源进行处理的编程学习任务。本说明书实施例中,任务的类型可以结合实际应用需求有一种或多种,在一个具体的实施例中,任务类型可以包括但不限于深度学习类型、测试类型等。
本说明书实施例中,运行配置信息可以包括执行目标任务的资源配置。在一个具体的实施例中,运行配置信息可以包括容器镜像和算力信息。本说明书实施例中,容器镜像可以包括创建并运行目标容器(目标容器为执行任务处理的容器)所需的数据,在一个具体的实施例中,容器镜像可以包括但不限于提供容器运行时所需的程序、库、资源、配置等文件。本说明书实施例中,算力信息可以包括执行目标任务所需的算力。在一个具体的实施例中,算力信息可以包括但不限于CPU(central processing unit,中央处理器)、内存、GPU(Graphics Processing Unit,图形处理器)的性能参数。
本说明书实施例中,源数据配置信息可以包括实现目标任务所需的源数据的信息。在一个具体的实施例中,在目标任务可以为深度学习任务(即深度学习类型的任务)的情况下,可选的,源数据配置信息可以为训练数据集中图像的类型、训练数据集中图像的数量和神经网络的结构信息。可选的,训练数据集中图像可以为具有标注信息的图像。在另一个具体的实施例中,在目标任务为测试任务的情况下,可选的,源数据配置信息可以为测试数据的标识信息和测试程序的标识信息。
在实际应用中,不同的目标任务可以对应不同的运行配置信息和源数据配置信息,用户可以结合实际需求在终端设置。
S303:服务器根据源数据配置信息确定目标任务的任务源数据。
在一个可选的实施例中,服务器可以预先存储有处理大量任务的源数据。在目标任务为深度学习任务的情况下,目标任务的任务源数据可以包括:与源数据配置信息对应的训练数据集和与源数据配置信息对应的神经网络。在一个具体的实施例中,源数据配置信息为训练数据集中图像的类型、训练数据集中图像的数量和神经网络的结构信息的情况下,可以根据该图像的类型、该图像的数量选取上述数量张上述类型的图像为训练数据集;以及根据神经网络的结构信息选取该结构信息对应的神经网络;将选取的训练数据集和神经网络作为目标任务的任务源数据。
在另一个具体的实施例中,在源数据配置信息可以为测试数据的标识信息和测试程序的标识信息的情况下,可以分别根据测试数据的标识信息和测试程序的标识信息选取相应的测试数据和测试程序;将选取的测试数据和测试程序作为目标任务的任务源数据。
S305:服务器根据运行配置信息在目标资源节点创建和启动目标容器。
在一个可选的实施例中,服务器根据运行配置信息在目标资源节点创建和启动目标容器可以包括:服务器向资源编排服务器发送资源分配请求,资源分配请求可以包括运行配置信息;资源编排服务器基于运行配置信息在目标资源节点创建并启动目标容器。
在一个可选的实施例中,上述向资源编排服务器发送资源分配请求可以包括:
通过消息队列向资源调度服务器发送包括运行配置信息的资源调度任务;
资源调度服务器向资源编排服务器发送资源分配请求,资源分配请求包括运行配置信息。
本说明书实施例中,在任务的资源调度管理过程中,采用可以采用两个服务器(资源管理服务器和资源调度服务器)进行联合调度管理,由资源管理服务器面向多个终端接收资源调度请求,将多个资源调度请求以资源调度任务的形式放入消息队列,然后,由资源调度服务器从消息队列依次取出资源调度任务,进行运行资源的调度,可以实现调度与请求的解耦,大大提高资源调度的可用性和稳定性。
在一个可选的实施例中,服务器可以设置有进程生成模块,相应的,可以由进程生成模块与资源编排服务器建立通信,并将包括运行配置信息的资源分配请求请求发送给资源编排服务器。
在一个可选的实施例中,如图4所示,资源编排服务器基于运行配置信息在目标资源节点创建并启动目标容器可以包括:
S3051:资源编排服务器根据算力信息,从资源节点集群中确定目标资源节点;
S3053:资源编排服务器向目标资源节点发送容器创建启动指令,容器创建启动指令包括容器镜像;
S3055:目标资源节点利用容器镜像在本地创建并启动目标容器。
在另一个可选的实施例中,上述服务器可以为服务器集群,该服务器集群可以包括主服务器和资源服务集群,可选的,服务器根据运行配置信息在目标资源节点创建和启动目标容器可以包括:
主服务器可以根据算力信息,从资源服务集群中确定目标资源节点;主服务器向目标资源节点发送容器创建启动指令,容器创建启动指令包括容器镜像;目标资源节点利用容器镜像在本地创建并启动目标容器。
本说明书实施例中,结合运行配置信息中算力信息可以选取空闲算力能够满足处理目标任务所需的算力的资源节点为目标资源节点。并由目标资源节点结合容器镜像在目标资源节点本地创建并启动目标容器,实现目标任务的运行资源的配置。且结合容器镜像和算力信息,创建并启动单独运行目标任务的容器,可以实现不同目标任务间的资源使用需求的平衡。
S307:服务器根据目标容器确定路由条目。
在一个可选的实施例中,以上述服务器包括主服务器和资源服务集群的应用场景为例,主服务可以获取目标容器的路由条目,在本地添加该路由条目。
具体的,目标容器的路由条目可以为指向目标容器的网络地址的路径信息,具体的,该路由条目可以包括目的IP(即目标容器的IP地址)、网络掩码(与目的IP一起标识目标容器所在的网段的地址)、下一跳地址(路由条目的下一跳IP地址)、源IP(即终端的IP地址)。
在另一个可选的实施例中,以上述结合资源编排服务器和资源节点集群的应用场景为例,服务器根据目标容器确定路由条目可以包括:资源编排服务器获取目标容器的路由条目;资源编排服务器向服务器发送容器启动成功消息,容器启动成功消息包括路由条目;服务器将上述路由条目发送至路由管理服务器;路由管理服务器在本地添加路由条目。
本说明书实施例中,创建并启动目标容器之后,资源编排服务器可以获取目标容器的路由条目,并向服务器反馈包括路由条目的容器启动成功消息。
在一个可选的实施例中,服务器可以设置有路由代理模块,相应的,可以通过该路由代理模块获取目标容器的路由条目,并将目标容器的路由条目发送至路由管理服务器,以便路由管理服务器进行目标容器的路由条目添加。
本说明书实施例中,通过路由管理服务器来管理目标容器的路由条目,后续终端可以直接通过路由管理服务器控制目标容器进行任务运行,实现终端与服务器间的解耦,将用户管理与资源调度管理独立开来,即使用户通过第三方账号也可以进行任务的运行控制,大大提高了任务处理过程中的灵活性和任务处理速度。
S309:服务器将任务源数据发送至目标资源节点。
在一个可选的实施例中,创建并启动目标容器之后,服务器可以获取目标资源节点的地址信息,根据地址信息将任务源数据发送至目标资源节点。
在另一个可选的实施例中,创建并启动目标容器之后,资源编排服务器可以获取目标资源节点的地址信息,相应的,上述资源编排服务器发送的容器启动成功消息中还可以携带有目标资源节点的地址信息。服务器根据该地址信息将任务源数据发送至目标资源节点。
具体以的,目标资源节点的地址信息可以为网络地址,网络地址是互联网上的节点在网络中具有的逻辑地址,基于该网络地址可实现对节点的寻址。
本说明书实施例中,服务器根据目标资源节点的地址信息建立与目标资源节点间的通信,进而将任务源数据同步至目标资源节点,实现任务的源数据资源的配置。在实际应用中,目标资源节点可以设置有运维服务模块,相应的,可以由该运维服务模块与服务器进行通信,实现任务源数据的同步,为后续目标容器执行目标任务提供源数据支持。
S311:服务器向终端发送资源调度完成消息。
本说明书实施例中,在调度好运行资源和源数据资源,且实现目标容器的路由配置后,可以向终端发送资源调度完成消息,以便用户触发任务运行请求。
在一个可选的实施例中,服务器可以实时的向终端发送目标任务的资源调度进展同步信息,相应的,终端可以显示一个资源调度进展界面,并根据服务器反馈的资源调度进展同步信息,更新资源调度进展界面中的资源调度进展同步信息。在一个具体的实施例中,资源调度进展同步信息可以包括但不限于容器启动进展信息、数据同步进展信息等。可选的,当终端向服务器发送资源调度请求之后,终端显示的资源调度进展界面中资源调度进展同步信息可以包括资源调度中。可选的,当服务器接收到容器启动成功消息之后,可以向终端反馈容器启动成功的信息,相应的,终端显示的资源调度进展界面中资源调度进展同步信息可以包括容器启动成功和数据包同步中。可选的,当服务器向终端资源调度完成消息之后,终端显示的资源调度进展界面中资源调度进展同步信息可以包括容器启动成功和数据包同步完成。
本说明书实施例中,通过实时的向终端发送目标任务的资源调度进展同步信息,可以让用户及时了解资源调度进展情况,有效改善用户体验。
S313:终端通过路由条目调用目标容器和任务源数据执行目标任务。
在一个可选的实施例中,终端通过路由条目调用目标容器和任务源数据执行目标任务可以包括:终端向路由管理服务器发送目标任务的任务运行请求;路由管理服务器基于路由条目向目标容器发送任务运行请求;目标容器响应于任务运行请求,基于任务需求源数据运行目标任务。
在一个可选的实施例中,在终端接收到资源调度完成消息之后,可以显示任务运行确认页面;该任务运行确认页面中可以设置有相应的触发区域,例如触发按键等。相应的,用户可以通过该触发按键,触发终端向路由管理服务器发送目标任务的任务运行请求。
在实际应用中,任务运行请求可以携带有目标任务的标识信息,相应的,分配给每一目标任务的目标容器的路由条目也可以对应该目标任务的标识信息;相应的,路由管理服务器基接收到一个目标任务的任务运行请求,可以结合目标任务的标识信息来确定对应的路由条目,进而基于该路由条目将任务运行请求转发给对应的目标容器。
本说明书实施例中,目标容器响应于任务运行请求,可以从所在目标资源节点调用相应的任务需求源数据,以运行目标任务。
将目标容器的路由条目添加至路由管理服务器,在任务运行过程中,终端可以直接通过路由管理服务器控制目标容器进行任务运行,将终端与服务器间进行解耦,实现用户管理与资源调度管理独立开来,即使用户通过第三方账号也可以进行任务的执行控制,实现了第三方集成,进而大大提高了任务处理过程中的灵活性和任务处理速度。
由以上本说明书实施例提供的技术方案可见,本说明书实施例中用户可以直接通过终端进行源数据配置信息和运行配置信息的选择,实现了灵活简单的资源配置,无需用户进行运行环境搭建,也无需用户进行源数据配置,大大降低了在线编程教育的资源配置的复杂度和出错率,进而大大提高了任务处理过程中的灵活性和任务处理速度。且在运行资源配置过程中,将目标容器的路由条目添加至路由管理服务器,在任务运行过程中,终端可以直接通过路由管理服务器控制目标容器进行任务运行,将终端与服务器间进行解耦,实现用户管理与资源调度管理独立开来,即使用户通过第三方账号也可以进行任务的执行控制,实现了第三方集成,进而大大提高了任务处理过程中的灵活性和任务处理速度。
在另一个可选的实施例中,终端通过路由条目调用目标容器和任务源数据执行目标任务可以包括:终端向理服务器发送目标任务的任务运行请求;服务器基于路由条目向目标容器发送任务运行请求;目标容器响应于任务运行请求,基于任务需求源数据运行目标任务。
本说明书实施例中,上述结合服务器转发任务运行请求实现目标任务执行的实施例的具体细化步骤可以参见上述结合路由管理服务器转发任务运行请求实现目标任务执行的实施例的具体细化步骤,在此不再赘述。
由以上本说明书实施例提供的技术方案可见,本说明书实施例中用户可以直接通过终端进行源数据配置信息和运行配置信息的选择,实现了灵活简单的资源配置,无需用户进行运行环境搭建,也无需用户进行源数据配置,大大降低了在线编程教育的资源配置的复杂度和出错率,进而大大提高了任务处理过程中的灵活性和任务处理速度。
在实际应用中,存在容器启动后,不运行任务,造成运行资源的浪费的问题;在一个可选的实施例中,还可以提供空闲资源回收的方案,在一个可选的实施例中,如图5所示,图5是根据一示例性实施例示出的一种空闲资源回收的流程图,具体的,可以包括:
S501:服务器监控目标容器的运行状态;
S503:在监控到目标容器的运行状态为空闲状态,且空闲状态的持续时长大于等于预设空闲时长阈值的情况下,服务器向资源编排服务器发送资源销毁指令;
S505:资源编排服务器向目标资源节点发送空闲回收指令;
S507:目标资源节点删除目标容器。
本说明书实施例中,空闲状态可以为目标容器启动但未运行任务。预设空闲时长阈值可以结合实际应用需求进行设置。
在一个可选的实施例中,资源编排服务器可以定时向服务器上报目标容器的运行状态,以便服务器及时掌握目标容器的运行状态。可选的,服务器可以设置有空闲回收模块,相应的,可以利用空闲回收模块监控目标容器的运行状态,在空闲回收模块监控到目标容器的运行状态为空闲状态,且空闲状态的持续时长大于等于预设空闲时长阈值的情况下,空闲回收模块可以通过相应的应用程序接口向资源编排服务器发送资源销毁指令。
在另一个可选的实施例中,空闲资源回收可以包括:服务器监控目标容器的运行状态;在监控到目标容器的运行状态为空闲状态,且空闲状态的持续时长大于等于预设空闲时长阈值的情况下,服务器向目标资源节点发送空闲回收指令;目标资源节点删除目标容器。
本说明书实施例中,通过对目标容器的运行状态的监控,可以及时的回收空闲资源,有效避免了资源浪费,进而也可以提高资源集群的可用性。
在一个可选的实施例中,在终端向服务器发送目标任务的资源调度请求之前,可以结合用户输入源数据配置信息进行运行配置信息的推荐。如图6所示,图6是根据一示例性实施例示出的一种推荐运行配置信息的流程图,具体的,可以包括:
S601:在终端监控到任务资源调度配置页面输入源数据配置信息的情况下,向服务器发送资源配置推荐请求,资源配置推荐请求包括输入的源数据配置信息;
S603:服务器根据输入的源数据配置信息确定推荐运行配置信息;
S605:服务器将推荐运行配置信息发送给终端;
S607:终端在任务资源调度配置页面显示资源配置确认消息,资源配置确认消息包括推荐运行配置信息;
相应的,上述终端向服务器发送目标任务的资源调度请求可以包括:终端响应于对采用推荐运行配置信息的确认指令,向服务器发送目标任务的资源调度请求。
在一个可选的实施例中,用户也可以不采用上述推荐运行配置信息,相应的,资源配置确认消息中可以包括表征采用上述推荐运行配置信息的确认触发区域和表征不采用上述推荐运行配置信息的取消触发区域。可选的,用户可以通过点击确认触发区域来触发采用上述推荐运行配置信息的确认指令;可选的,用户可以通过点击取消触发区域来触发不采用上述推荐运行配置信息的确认指令。
本说明书实施例中,通过结合用户输入的源数据配置信息,由服务器进行运行配置信息的推荐,可以大大提高运行资源配置的精准性,避免用户请求的运行资源过高带来的资源浪费,或用户请求的资源过低带来后续任务处理失败或效率低等问题。
在一个可选的实施例中,在服务器根据地址信息将任务源数据发送至目标资源节点之后,上述方法还可以包括:目标资源节点向服务器发送目标容器的资源使用信息。
相应的,上述资源调度完成消息还可以包括目标容器的资源使用信息;上述方法还可以包括:终端显示包括资源使用信息的任务运行确认页面;
本说明书实施例中,资源使用信息可以为已经使用的运行资源占请求的运行资源的比例。本说明书实施例中,在完成资源调度之后,可以将目标容器的资源使用信息反馈给终端,以便用户掌握运行资源的使用情况。
在一个可选的实施例中,在目标资源节点向服务器发送目标容器的资源使用信息之后,上述方法还可以包括:服务器根据资源使用信息对目标任务的运行资源进行合理性分析;在分析的结果为不合理的情况下,服务器向终端发送重新启动任务调度信息;
相应的,上述任务运行确认页面还可以包括重新启动任务调度信息。
相应的,上述方法还可以包括:终端响应于基于重新启动任务调度信息的重启指令,显示任务资源调度配置页面。
终端向服务器发送资源回收指令;
服务器响应于资源回收指令,执行资源回收操作。
在一个可选的实施例中,服务器执行资源回收操作可以包括向资源编排服务器发送资源销毁指令,以使资源编排服务器向目标资源节点发送空闲回收指令,相应的,目标资源节点删除目标容器。
在另一个可选的实施例中,服务器执行资源回收操作可以包括器向目标资源节点发送空闲回收指令,相应的,目标资源节点删除目标容器。
本说明书实施例中,重新启动任务调度信息可以包括是否重新启动任务调度的确认信息。
在一个可选的实施例中,可以以完成资源调度为节点,预先结合大量任务处理在该节点之前已经使用的运行资源占请求的运行资源的比例来确定一个运行资源占比阈值。可选的,例如选取大量任务处理在该节点之前已经使用的运行资源占请求的运行资源的比例的均值为运行资源占比阈值,在目标任务的已经使用的运行资源占请求的运行资源的比例(资源使用信息)与该运行资源占比阈值间差值的绝对值大于一定阈值的情况下,可以确定为不合理,服务器可以向终端发送重新启动任务调度信息;反之,可以确定为合理,服务器可以向终端仅发送资源使用信息。
在一个可选的实施例中,若用户触发了重新启动任务调度的指令,终端可以显示任务资源调度配置页面。若用户触发了取消重新启动任务调度的指令,终端可以向路由管理服务器发送任务运行请求。
本说明书实施例中,通过在完成资源调度之后,通过资源使用信息对调度的运行资源进行合理性分析,可以提高运行资源配置的精准性,避免用户请求的运行资源过高带来的资源浪费,或用户请求的资源过低带来后续任务处理失败或效率低等问题。
以下以服务器为执行主体,介绍本公开实施例提供的一种任务处理方法,具体的,可以包括:
接收终端发送的目标任务的资源调度请求,该资源调度请求包括目标任务的源数据配置信息和运行配置信息;
根据源数据配置信息确定目标任务的任务源数据;
根据运行配置信息在目标资源节点创建和启动目标容器;
根据目标容器确定路由条目,并将任务源数据发送至目标资源节点;
向终端发送资源调度完成消息,以使终端通过路由条目调用目标容器和任务源数据执行目标任务。
可选的,根据运行配置信息在目标资源节点创建和启动目标容器,包括:
向资源编排服务器发送资源分配请求,资源分配请求包括运行配置信息,以使资源编排服务器基于运行配置信息在目标资源节点创建并启动目标容器。
可选的,上述向资源编排服务器发送资源分配请求包括:
通过消息队列向资源调度服务器发送包括运行配置信息的资源调度任务,以使资源调度服务器向资源编排服务器发送资源分配请求,资源分配请求包括运行配置信息。
可选的,上述根据目标容器确定路由条目,包括:
接收资源编排服务器发送的容器启动成功消息,容器启动成功消息包括目标容器的路由条目;
将路由条目发送至路由管理服务器,以使路由管理服务器在本地添加路由条目;
可选的,上述容器启动成功消息还包括目标资源节点的地址信息,将任务源数据发送至目标资源节点包括:
根据地址信息将任务源数据发送至目标资源节点。
可选的,在接收终端发送的目标任务的资源调度请求之前,上述方法还包括:
接收终端在监控到任务资源调度配置页面输入源数据配置信息的情况下,发送的资源配置推荐请求,资源配置推荐请求包括输入的源数据配置信息;
根据输入的源数据配置信息确定推荐运行配置信息;
将推荐运行配置信息发送给终端,以使终端在任务资源调度配置页面显示资源配置确认消息,资源配置确认消息包括推荐运行配置信息;
相应的,接收终端发送的目标任务的资源调度请求包括:
接收终端响应于对采用推荐运行配置信息的确认指令,发送的目标任务的资源调度请求。
可选的,在接收资源编排服务器发送的容器启动成功消息之后,上述方法还包括:
监控目标容器的运行状态;
在监控到目标容器的运行状态为空闲状态,且空闲状态的持续时长大于等于预设空闲时长阈值的情况下,向资源编排服务器发送资源销毁指令,以使资源编排服务器控制目标资源节点删除目标容器。
可选的,在将任务源数据发送至目标资源节点之后,上述方法还包括:
接收目标资源节点发送的目标容器的资源使用信息;
相应的,资源调度完成消息还包括目标容器的资源使用信息,以使终端显示包括资源使用信息的任务运行确认页面。
可选的,在接收目标资源节点发送的目标容器的资源使用信息之后,上述方法还包括:
根据资源使用信息对目标任务的运行资源进行合理性分析;
在分析的结果为不合理的情况下,向终端发送重新启动任务调度信息,以使终端显示还包括重新启动任务调度信息的任务运行确认页面。
可选的,目标任务包括深度学习任务,目标任务的任务源数据包括:与源数据配置信息对应的训练数据集和与源数据配置信息对应的神经网络。
上述以服务器为执行主体的任务处理方法的具体细化方案可以参见上述从交互角度撰写的任务处理方法的实施例,在此不再赘述。
以下以终端为执行主体,介绍本公开实施例提供的一种任务处理方法,具体的,可以包括:
向服务器发送目标任务的资源调度请求,资源调度请求包括目标任务的源数据配置信息和运行配置信息,以使服务器根据源数据配置信息确定目标任务的任务源数据;以及根据运行配置信息在目标资源节点创建和启动目标容器;以及根据目标容器确定路由条目;
接收服务器发送的资源调度完成消息;
通过路由条目调用目标容器和任务源数据执行目标任务。
可选的,上述通过路由条目调用目标容器和任务源数据执行目标任务包括:
向路由管理服务器发送目标任务的任务运行请求,以使路由管理服务器基于路由条目向目标容器发送任务运行请求,以使目标容器响应于任务运行请求,基于任务需求源数据运行目标任务。
可选的,在向服务器发送目标任务的资源调度请求之前,上述方法还包括:
在监控到任务资源调度配置页面输入源数据配置信息的情况下,向服务器发送资源配置推荐请求,资源配置推荐请求包括输入的源数据配置信息;以使服务器根据输入的源数据配置信息确定推荐运行配置信息;
接收服务器发送的推荐运行配置信息;
在任务资源调度配置页面显示资源配置确认消息,资源配置确认消息包括推荐运行配置信息;
相应的,向服务器发送目标任务的资源调度请求包括:
响应于对采用推荐运行配置信息的确认指令,向服务器发送目标任务的资源调度请求。
可选的,资源调度完成消息还包括目标容器的资源使用信息;上述方法还包括:
显示包括资源使用信息的任务运行确认页面。
可选的,任务运行确认页面还包括重新启动任务调度信息;上述方法还包括:
响应于基于重新启动任务调度信息的重启指令,显示任务资源调度配置页面;
向服务器发送资源回收指令,以使服务器执行资源回收操作。
上述以终端为执行主体的任务处理方法的具体细化方案可以参见上述从交互角度撰写的任务处理方法的实施例,在此不再赘述。
根据本公开实施例的另一方面,还提供一种任务处理系统,可以包括:终端和服务器;
终端,用于向服务器发送目标任务的资源调度请求,资源调度请求包括目标任务的源数据配置信息和运行配置信息;以及用于通过路由条目调用目标容器和任务源数据执行目标任务;
服务器,用于根据源数据配置信息确定目标任务的任务源数据;以及用于根据运行配置信息在目标资源节点创建和启动目标容器;以及用于根据目标容器确定路由条目,并将任务源数据发送至目标资源节点;以及用于向终端发送资源调度完成消息。
在一个可选的实施例中,服务器可以包括资源管理服务器、资源调度服务器、资源编排服务器和路由管理服务器。可选的,如图7所示,图7是根据一示例性实施例示出的另一种任务处理方法的流程图,具体的,可以包括:
S701:终端向资源管理服务器发送目标任务的资源调度请求,资源调度请求包括源数据配置信息和运行配置信息;
S703:资源管理服务器根据源数据配置信息确定目标任务的任务源数据;
S705:资源管理服务器通过消息队列向资源调度服务器发送资源调度任务,资源调度任务包括运行配置信息;
S707:资源调度服务器向资源编排服务器发送资源分配请求,该资源分配请求包括运行配置信息;
S709:资源编排服务器基于运行配置信息在目标资源节点创建并启动目标容器;
S711:资源编排服务器获取目标资源节点的地址信息和目标容器的路由条目;
S713:资源编排服务器向资源调度服务器发送容器启动成功消息,容器启动成功消息包括路由条目和地址信息;
S715:资源调度服务器将路由条目发送至路由管理服务器;
S717:资源调度服务器将地址信息通过上述消息队列发送至资源管理服务器;
S719:资源管理服务器根据地址信息将任务源数据发送至目标资源节点;
S721:资源管理服务器向终端发送资源调度完成消息;
S723:终端向资源编排服务器发送任务运行请求;
S725:路由管理服务器基于路由条目向目标容器发送任务运行请求;
S727:目标容器响应于任务运行请求,基于任务需求源数据运行目标任务。
在一个可选的实施例中,资源管理服务器通过消息队列向资源调度服务器发送资源调度任务可以包括:资源管理服务器启动资源调度任务,资源调度任务包括运行配置信息;资源管理服务器将资源调度任务存储到消息队列;资源调度服务器从消息队列中拉取资源调度任务。
本说明书实施例中,在任务的资源调度管理过程中,采用资源管理服务器和资源调度服务器进行联合调度管理,由资源管理服务器面向多个终端接收资源调度请求,将多个资源调度请求以资源调度任务的形式放入消息队列,然后,由资源调度服务器从消息队列依次取出资源调度任务,进行运行资源的调度,可以实现调度与请求的解耦,大大提高资源调度的可用性和稳定性。
上述实施例中的相关步骤的具体细化方案可以参见上述图3对应的单个服务器的相关实施例,在此不再赘述。
根据本公开实施例的另一方面,还提供一种任务处理装置,如图8所示,可以包括:
资源调度请求接收模块810,被配置为执行接收终端发送的目标任务的资源调度请求,资源调度请求包括目标任务的源数据配置信息和运行配置信息;
任务源数据确定模块820,被配置为执行根据源数据配置信息确定目标任务的任务源数据;
容器创建启动模块830,被配置为执行根据运行配置信息在目标资源节点创建和启动目标容器;
路由条目确定模块840,被配置为执行根据目标容器确定路由条目;
任务源数据发送模块850,被配置为执行将任务源数据发送至目标资源节点;
资源调度完成消息发送模块860,被配置为执行向终端发送资源调度完成消息,以使终端通过路由条目调用目标容器和任务源数据执行目标任务。
可选的,上述容器创建启动模块包括:
资源分配请求发送单元,被配置为执行向资源编排服务器发送资源分配请求,资源分配请求包括运行配置信息,以使资源编排服务器基于运行配置信息在目标资源节点创建并启动目标容器。
可选的,上述资源分配请求发送单元具体被配置为执行通过消息队列向资源调度服务器发送包括运行配置信息的资源调度任务,以使资源调度服务器向资源编排服务器发送资源分配请求,资源分配请求包括运行配置信息。
可选的,上述路由条目确定模块包括:
容器启动成功消息接收单元,被配置为执行接收资源编排服务器发送的容器启动成功消息,容器启动成功消息包括目标容器的路由条目;
路由条目发送单元,被配置为执行将路由条目发送至路由管理服务器,以使路由管理服务器在本地添加路由条目;
可选的,上述容器启动成功消息还包括目标资源节点的地址信息,上述任务源数据发送模块具体被配置为执行根据地址信息将任务源数据发送至目标资源节点。
可选的,上述装置还包括:
资源配置推荐请求接收模块,被配置为执行接收终端在监控到任务资源调度配置页面输入源数据配置信息的情况下,发送的资源配置推荐请求,资源配置推荐请求包括输入的源数据配置信息;
推荐运行配置信息确定模块,被配置为执行根据输入的源数据配置信息确定推荐运行配置信息;
推荐运行配置信息发送模块,被配置为执行将推荐运行配置信息发送给终端,以使终端在任务资源调度配置页面显示资源配置确认消息,资源配置确认消息包括推荐运行配置信息;
相应的,资源调度请求接收模块还被配置为执行:接收终端响应于对采用推荐运行配置信息的确认指令,发送的目标任务的资源调度请求。
可选的,装置还包括:
空闲回收模块,被配置为执行监控目标容器的运行状态;
资源销毁指令发送模块,被配置为执行在监控到目标容器的运行状态为空闲状态,且空闲状态的持续时长大于等于预设空闲时长阈值的情况下,向资源编排服务器发送资源销毁指令,以使资源编排服务器控制目标资源节点删除目标容器。
可选的,在根据地址信息将任务源数据发送至目标资源节点之后,装置还包括:
资源使用信息接收模块,被配置为执行接收目标资源节点发送的目标容器的资源使用信息;
相应的,资源调度完成消息还包括目标容器的资源使用信息,以使终端显示包括资源使用信息的任务运行确认页面。
可选的,装置还包括:
合理性分析模块,被配置为执行根据资源使用信息对目标任务的运行资源进行合理性分析;
重新启动任务调度信息发送模块,被配置为执行在分析的结果为不合理的情况下,向终端发送重新启动任务调度信息,以使终端显示还包括重新启动任务调度信息的任务运行确认页面。
可选的,目标任务包括深度学习任务,目标任务的任务源数据包括:与源数据配置信息对应的训练数据集和与源数据配置信息对应的神经网络。
根据本公开实施例的另一方面,还提供一种任务处理装置,如图9所示,可以包括:
资源调度请求发送模块910,被配置为执行向服务器发送目标任务的资源调度请求,资源调度请求包括目标任务的源数据配置信息和运行配置信息,以使服务器根据源数据配置信息确定目标任务的任务源数据;以及根据运行配置信息在目标资源节点创建和启动目标容器;以及根据目标容器确定路由条目;
资源调度完成消息接收模块920,被配置为执行接收服务器发送的资源调度完成消息;
目标任务执行模块930,被配置为执行通过路由条目调用目标容器和任务源数据执行目标任务。
可选的,目标任务执行模块包括:
任务运行请求发送单元,被配置为执行向路由管理服务器发送目标任务的任务运行请求,以使路由管理服务器基于路由条目向目标容器发送任务运行请求,以使目标容器响应于任务运行请求,基于任务需求源数据运行目标任务。
可选的,装置还包括:
资源配置推荐请求发送模块,被配置为执行在监控到任务资源调度配置页面输入源数据配置信息的情况下,向服务器发送资源配置推荐请求,资源配置推荐请求包括输入的源数据配置信息;以使服务器根据输入的源数据配置信息确定推荐运行配置信息;
推荐运行配置信息接收模块,被配置为执行接收服务器发送的推荐运行配置信息;
资源配置确认消息显示模块,被配置为执行在任务资源调度配置页面显示资源配置确认消息,资源配置确认消息包括推荐运行配置信息;
相应的,资源调度请求发送模块具体,被配置为执行响应于对采用推荐运行配置信息的确认指令,向服务器发送目标任务的资源调度请求。
可选的,资源调度完成消息还包括目标容器的资源使用信息;装置还包括:
任务运行确认页面显示模块,被配置为执行显示包括资源使用信息的任务运行确认页面。
可选的,任务运行确认页面还包括重新启动任务调度信息;装置还包括:
任务资源调度配置页面显示模块,被配置为执行响应于基于重新启动任务调度信息的重启指令,显示任务资源调度配置页面;
资源回收指令发送模块,被配置为执行向服务器发送资源回收指令,以使服务器执行资源回收操作。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图10是根据一示例性实施例示出的一种用于任务处理的电子设备的框图,该电子设备可以是终端,其内部结构图可以如图10所示。该电子设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该电子设备的处理器用于提供计算和控制能力。该电子设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该电子设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种任务处理的方法。该电子设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该电子设备的输入装置可以是显示屏上覆盖的触摸层,也可以是电子设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
图11是根据一示例性实施例示出的一种用于任务处理的电子设备的框图,该电子设备可以是服务器,其内部结构图可以如图11所示。该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该电子设备的处理器用于提供计算和控制能力。该电子设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该电子设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种任务处理方法。
本领域技术人员可以理解,图10和图11中示出的结构,仅仅是与本公开方案相关的部分结构的框图,并不构成对本公开方案所应用于其上的电子设备的限定,具体的电子设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在示例性实施例中,还提供了一种任务处理设备,包括:处理器;用于存储该处理器可执行指令的存储器;其中,该处理器被配置为执行该指令,以实现如本公开实施例中的任务处理方法。
在示例性实施例中,还提供了一种计算机可读存储介质,当该存储介质中的指令由任务处理设备的处理器执行时,使得任务处理设备能够执行本公开实施例中的任务处理方法。
在示例性实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行本公开实施例中的任务处理方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本公开所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (20)

1.一种任务处理方法,其特征在于,包括:
接收终端发送的目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息;
根据所述源数据配置信息确定所述目标任务的任务源数据;
根据所述运行配置信息在目标资源节点创建和启动目标容器;
根据所述目标容器确定路由条目,并将所述任务源数据发送至所述目标资源节点;
向所述终端发送资源调度完成消息,以使所述终端通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
2.根据权利要求1所述的任务处理方法,其特征在于,所述根据所述运行配置信息在目标资源节点创建和启动目标容器,包括:
向资源编排服务器发送资源分配请求,所述资源分配请求包括所述运行配置信息,以使所述资源编排服务器基于所述运行配置信息在目标资源节点创建并启动目标容器。
3.根据权利要求2所述的任务处理方法,其特征在于,所述向资源编排服务器发送资源分配请求包括:
通过消息队列向资源调度服务器发送包括所述运行配置信息的资源调度任务,以使所述资源调度服务器向所述资源编排服务器发送资源分配请求,所述资源分配请求包括所述运行配置信息。
4.根据权利要求2所述的任务处理方法,其特征在于,所述根据所述目标容器确定路由条目,包括:
接收所述资源编排服务器发送的容器启动成功消息,所述容器启动成功消息包括所述目标容器的路由条目;
将所述路由条目发送至路由管理服务器,以使所述路由管理服务器在本地添加所述路由条目。
5.根据权利要求4所述的任务处理方法,其特征在于,所述容器启动成功消息还包括所述目标资源节点的地址信息,所述将所述任务源数据发送至所述目标资源节点包括:
根据所述地址信息将所述任务源数据发送至所述目标资源节点。
6.根据权利要求1所述的任务处理方法,其特征在于,在接收终端发送的目标任务的资源调度请求之前,所述方法还包括:
接收所述终端在监控到任务资源调度配置页面输入源数据配置信息的情况下,发送的资源配置推荐请求,所述资源配置推荐请求包括输入的源数据配置信息;
根据所述输入的源数据配置信息确定推荐运行配置信息;
将所述推荐运行配置信息发送给所述终端,以使所述终端在所述任务资源调度配置页面显示资源配置确认消息,所述资源配置确认消息包括所述推荐运行配置信息;
所述接收终端发送的目标任务的资源调度请求包括:
接收所述终端响应于对采用所述推荐运行配置信息的确认指令,发送的所述目标任务的资源调度请求。
7.根据权利要求2所述的任务处理方法,其特征在于,在接收所述资源编排服务器发送的容器启动成功消息之后,所述方法还包括:
监控所述目标容器的运行状态;
在监控到所述目标容器的运行状态为空闲状态,且所述空闲状态的持续时长大于等于预设空闲时长阈值的情况下,向所述资源编排服务器发送资源销毁指令,以使所述资源编排服务器控制所述目标资源节点删除所述目标容器。
8.根据权利要求1所述的任务处理方法,其特征在于,在将所述任务源数据发送至所述目标资源节点之后,所述方法还包括:
接收所述目标资源节点发送的所述目标容器的资源使用信息;
所述资源调度完成消息还包括目标容器的资源使用信息,以使所述终端显示包括所述资源使用信息的任务运行确认页面。
9.根据权利要求8所述的任务处理方法,其特征在于,在接收所述目标资源节点发送的所述目标容器的资源使用信息之后,所述方法还包括:
根据所述资源使用信息对所述目标任务的运行资源进行合理性分析;
在分析的结果为不合理的情况下,向所述终端发送重新启动任务调度信息,以使所述终端显示还包括所述重新启动任务调度信息的任务运行确认页面。
10.根据权利要求1至9任一所述的任务处理方法,其特征在于,所述目标任务包括深度学习任务,所述目标任务的任务源数据包括:与所述源数据配置信息对应的训练数据集和与所述源数据配置信息对应的神经网络。
11.一种任务处理方法,其特征在于,包括:
向服务器发送目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息,以使所述服务器根据所述源数据配置信息确定所述目标任务的任务源数据;以及根据所述运行配置信息在目标资源节点创建和启动目标容器;以及根据所述目标容器确定路由条目;
接收所述服务器发送的资源调度完成消息;
通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
12.根据权利要求11所述的任务处理方法,其特征在于,所述通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务包括:
向路由管理服务器发送所述目标任务的任务运行请求,以使所述路由管理服务器基于所述路由条目向所述目标容器发送所述任务运行请求,以使所述目标容器响应于所述任务运行请求,基于所述任务需求源数据运行所述目标任务。
13.根据权利要求11所述的任务处理方法,其特征在于,在向服务器发送目标任务的资源调度请求之前,所述方法还包括:
在监控到任务资源调度配置页面输入源数据配置信息的情况下,向服务器发送资源配置推荐请求,所述资源配置推荐请求包括输入的源数据配置信息;以使所述服务器根据所述输入的源数据配置信息确定推荐运行配置信息;
接收所述服务器发送的推荐运行配置信息;
在所述任务资源调度配置页面显示资源配置确认消息,所述资源配置确认消息包括所述推荐运行配置信息;
所述向服务器发送目标任务的资源调度请求包括:
响应于对采用所述推荐运行配置信息的确认指令,向所述服务器发送所述目标任务的资源调度请求。
14.根据权利要求11所述的任务处理方法,其特征在于,所述资源调度完成消息还包括目标容器的资源使用信息;所述方法还包括:
显示包括所述资源使用信息的任务运行确认页面。
15.根据权利要求14所述的任务处理方法,其特征在于,所述任务运行确认页面还包括重新启动任务调度信息;所述方法还包括:
响应于基于所述重新启动任务调度信息的重启指令,显示任务资源调度配置页面;
向所述服务器发送资源回收指令,以使所述服务器执行资源回收操作。
16.一种任务处理系统,其特征在于,包括:终端和服务器;
所述终端,用于向服务器发送目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息;以及用于通过路由条目调用目标容器和任务源数据执行所述目标任务;
所述服务器,用于根据所述源数据配置信息确定所述目标任务的任务源数据;以及用于根据所述运行配置信息在目标资源节点创建和启动目标容器;以及用于根据所述目标容器确定路由条目,并将所述任务源数据发送至所述目标资源节点;以及用于向所述终端发送资源调度完成消息。
17.一种任务处理装置,其特征在于,包括:
资源调度请求接收模块,被配置为执行接收终端发送的目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息;
任务源数据确定模块,被配置为执行根据所述源数据配置信息确定所述目标任务的任务源数据;
容器创建启动模块,被配置为执行根据所述运行配置信息在目标资源节点创建和启动目标容器;
路由条目确定模块,被配置为执行根据所述目标容器确定路由条目;
任务源数据发送模块,被配置为执行将所述任务源数据发送至所述目标资源节点;
资源调度完成消息发送模块,被配置为执行向所述终端发送资源调度完成消息,以使所述终端通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
18.一种任务处理装置,其特征在于,包括:
资源调度请求发送模块,被配置为执行向服务器发送目标任务的资源调度请求,所述资源调度请求包括所述目标任务的源数据配置信息和运行配置信息,以使所述服务器根据所述源数据配置信息确定所述目标任务的任务源数据;以及根据所述运行配置信息在目标资源节点创建和启动目标容器;以及根据所述目标容器确定路由条目;
资源调度完成消息接收模块,被配置为执行接收所述服务器发送的资源调度完成消息;
目标任务执行模块,被配置为执行通过所述路由条目调用所述目标容器和任务源数据执行所述目标任务。
19.一种任务处理设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至15中任一项所述的任务处理方法。
20.一种计算机可读存储介质,其特征在于,当所述存储介质中的指令由任务处理设备的处理器执行时,使得任务处理设备能够执行如权利要求1至15中任一项所述的任务处理方法。
CN202011160128.6A 2020-10-27 2020-10-27 任务处理方法、装置、设备、系统及存储介质 Pending CN112130983A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202011160128.6A CN112130983A (zh) 2020-10-27 2020-10-27 任务处理方法、装置、设备、系统及存储介质
KR1020217039205A KR20220058850A (ko) 2020-10-27 2021-04-08 작업 처리 방법, 장치, 기기, 시스템 및 저장 매체
PCT/CN2021/085940 WO2022088612A1 (zh) 2020-10-27 2021-04-08 任务处理方法、装置、设备、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011160128.6A CN112130983A (zh) 2020-10-27 2020-10-27 任务处理方法、装置、设备、系统及存储介质

Publications (1)

Publication Number Publication Date
CN112130983A true CN112130983A (zh) 2020-12-25

Family

ID=73853758

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011160128.6A Pending CN112130983A (zh) 2020-10-27 2020-10-27 任务处理方法、装置、设备、系统及存储介质

Country Status (3)

Country Link
KR (1) KR20220058850A (zh)
CN (1) CN112130983A (zh)
WO (1) WO2022088612A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112596863A (zh) * 2020-12-28 2021-04-02 南方电网深圳数字电网研究院有限公司 监控训练任务的方法、系统及计算机存储介质
CN113179308A (zh) * 2021-04-23 2021-07-27 上海商汤智能科技有限公司 服务请求处理方法、装置、电子设备及存储介质
WO2022088612A1 (zh) * 2020-10-27 2022-05-05 上海商汤临港智能科技有限公司 任务处理方法、装置、设备、系统及存储介质
WO2023225049A1 (en) * 2022-05-17 2023-11-23 Schlumberger Technology Corporation Integrated customer delivery system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115774573B (zh) * 2023-02-10 2023-06-30 美云智数科技有限公司 应用集成方法、装置、电子设备和存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107888669B (zh) * 2017-10-31 2020-06-09 武汉理工大学 一种基于深度学习神经网络的大规模资源调度系统及方法
CN109992373B (zh) * 2017-12-29 2021-04-09 华为技术有限公司 资源调度方法、信息管理方法和装置及任务部署系统
CN108777661A (zh) * 2018-06-06 2018-11-09 亚信科技(中国)有限公司 一种数据传输方法、装置及系统
CN111105006B (zh) * 2018-10-26 2023-08-04 杭州海康威视数字技术股份有限公司 一种深度学习网络训练系统及方法
CN110781007B (zh) * 2019-10-31 2023-12-26 广州市网星信息技术有限公司 任务处理方法、装置、服务器、客户端、系统和存储介质
CN112130983A (zh) * 2020-10-27 2020-12-25 上海商汤临港智能科技有限公司 任务处理方法、装置、设备、系统及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022088612A1 (zh) * 2020-10-27 2022-05-05 上海商汤临港智能科技有限公司 任务处理方法、装置、设备、系统及存储介质
CN112596863A (zh) * 2020-12-28 2021-04-02 南方电网深圳数字电网研究院有限公司 监控训练任务的方法、系统及计算机存储介质
CN113179308A (zh) * 2021-04-23 2021-07-27 上海商汤智能科技有限公司 服务请求处理方法、装置、电子设备及存储介质
WO2023225049A1 (en) * 2022-05-17 2023-11-23 Schlumberger Technology Corporation Integrated customer delivery system

Also Published As

Publication number Publication date
WO2022088612A1 (zh) 2022-05-05
KR20220058850A (ko) 2022-05-10

Similar Documents

Publication Publication Date Title
CN112130983A (zh) 任务处理方法、装置、设备、系统及存储介质
CN112181397B (zh) 流程可视化监控方法、装置、计算机设备及存储介质
CN107391114B (zh) 页面可视化渲染方法及装置
Younas et al. Agile development in the cloud computing environment: A systematic review
CN110083455B (zh) 图计算处理方法、装置、介质及电子设备
KR20160087706A (ko) 가상화 플랫폼을 고려한 분산 데이터 처리 시스템의 자원 할당 장치 및 할당 방법
CN109656690A (zh) 调度系统、方法和存储介质
US10809681B2 (en) Data collection for assistance in an industrial automation environment
CN108681777A (zh) 一种基于分布式系统的机器学习程序运行的方法和装置
KR20180112008A (ko) 자율 서비스들 구성에 대한 방법 및 장치
US11403084B2 (en) System and method for implementing an orchestration engine
CN112068847B (zh) 基于kubernets平台的计算环境部署方法及装置
CN113590146A (zh) 服务器及容器升级方法
CN115202729A (zh) 基于容器服务的镜像生成方法、装置、设备及介质
CN113419818B (zh) 基础组件部署方法、装置、服务器及存储介质
CN111369011A (zh) 机器学习模型应用的方法、装置、计算机设备和存储介质
GB2564863A (en) Containerized application platform
CN115361382B (zh) 基于数据群组的数据处理方法、装置、设备和存储介质
Meng et al. Task-Oriented Metaverse Design in the 6G Era
CN114090242A (zh) 模型训练方法、装置、设备、存储介质及程序产品
CN110380930A (zh) 一种测试方法、装置及服务器、计算机存储介质
CN116360918A (zh) 建模数据处理方法、装置、计算机设备和存储介质
EP3783547B1 (en) System and methods for reply date response and due date management in manufacturing
CN114217919A (zh) 任务处理方法、装置、电子设备及存储介质
CN108459902A (zh) 用于处理订单业务的方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40039169

Country of ref document: HK