CN107807854A - 一种自动调度节点机的方法及渲染任务处理方法 - Google Patents

一种自动调度节点机的方法及渲染任务处理方法 Download PDF

Info

Publication number
CN107807854A
CN107807854A CN201711009972.7A CN201711009972A CN107807854A CN 107807854 A CN107807854 A CN 107807854A CN 201711009972 A CN201711009972 A CN 201711009972A CN 107807854 A CN107807854 A CN 107807854A
Authority
CN
China
Prior art keywords
task
node station
node
attribute
station
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711009972.7A
Other languages
English (en)
Inventor
晏仁科
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHENZHEN RENDERBUS TECHNOLOGY Co Ltd
Original Assignee
SHENZHEN RENDERBUS TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN RENDERBUS TECHNOLOGY Co Ltd filed Critical SHENZHEN RENDERBUS TECHNOLOGY Co Ltd
Priority to CN201711009972.7A priority Critical patent/CN107807854A/zh
Publication of CN107807854A publication Critical patent/CN107807854A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5044—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering hardware capabilities

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开一种自动调度节点机的方法，所述节点机有若干台，包括以下步骤：对节点机设置“属性、要求”，对任务设置“属性、要求”；根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机。本发明还公开一种渲染任务处理方法，包括以下步骤：向管理服务器提交任务；管理服务器根据前述的自动调度节点机方法将任务分配至匹配的节点机；节点机运行任务；节点机将任务运行结果上传至管理服务器，任务结束。本发明根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机，使得任务分配至节点机更加合理，节点机的利用也十分充分。

Description

一种自动调度节点机的方法及渲染任务处理方法
技术领域
本发明涉及云计算技术领域，尤其涉及一种自动调度节点机的方法及渲染任务处理方法。
背景技术
渲染集群(或称渲染农场)属于分布式集群计算系统，是一种利用现有CPU、以太网、及操作系统构建的超级计算机，它使用主流的商业计算机硬件设备达到或接近超级计算机的计算能力。渲染农场建立在计算机集群上，集群系统中的单个计算机通常称为节点，其中一个或多个作为管理节点，其它节点称为计算节点，节点间通常通过局域网连接，但也有其它的可能连接方式。集群能够改进单个计算机的计算速度和/或可靠性。一般情况下集群计算机比单个计算机，比如工作站或超级计算机性能价格比要高得多。渲染农场包括客户端、渲染任务管理平台、真实感渲染引擎等软件系统。用户通过客户端在线提交渲染任务，由渲染任务管理平台进行任务调度和管理，将渲染任务交由集群中部署于计算节点上的渲染引擎完成。
目前的云技术、云服务、云计算领域中，对机房节点机的控制一直都是一个重要的环节，如何对机房的节点机进行有效自如的控制调配，是在云计算领域中的一大难题。
因此，现有技术存在缺陷，需要改进。
发明内容
本发明要解决的技术问题是：提供一种自动调度节点机的方法及渲染任务处理方法，提升节点机的利用效率。
本发明的技术方案如下：提供一种自动调度节点机的方法，所述节点机有若干台，包括以下步骤：
S1：对节点机设置“属性、要求”，对任务设置“属性、要求”。
S2：根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机。如果某个任务带有ABC的属性，节点机带有ABC的要求，那个任务就会跑到带有ABC的要求和其它非ABC要求的节点机，但是要求为ABC的节点机只会接收带ABC属性的任务。如果某个任务带有abc的要求，那么有节点机设定了abc的属性，那么这个任务就只能在abc属性的节点机上面进行渲染。任务的属性对应节点机的要求(如果节点机没有要求，那任何没有要求的任务就可以上这种没有要求的节点机)。任务的要求对应节点机的属性(如果任务没有要求，那么这种任务可以上任何没有要求的节点机)。
进一步地，所述节点机还设置有约束、类别，所述节点机分为不同的组。所述约束为外部条件的限制，如license(软件使用授权)，例如渲染平台只有200个license，那么设置一个约束条件为vray＝200(台)，新的任务要处理时，如果平台的200个license已经全部在运行，那么新的任务会一直等待直到占用license的其它任务处理完，有空余的license可用，新的任务便可以进行。同组的节点机只能进行同一个任务。
进一步地，所述任务还设置有约束、类别、等级、节点机数上限、节点机数下限、调度频率、在同一台节点机最多能连续失败的次数、能否被更高优先级任务中断、单个子任务需要使用节点机的数量。所述约束为外部条件的限制，如license(软件使用授权)，例如渲染平台只有200个license，那么设置一个约束条件为vray＝200(台)，新的任务要处理时，如果平台的200个license已经全部在运行，那么新的任务会一直等待直到占用license的其它任务处理完，有空余的license可用，新的任务便可以进行。低优先级任务可被高优先级的任务强制抢占节点机。设置节点机数上下限，使调度更合乎用户要求和资源的充分运用，所述调度频率为单位时间内最多能新增多少个子任务，对任务设置在同一台节点机最多能连续失败的次数，提升节点机的使用效率，避免任务一直占据节点机。
进一步地，本发明还提供一种渲染任务处理方法，包含有以下步骤：
1)向管理服务器提交任务，用户通过网页端或者客户端向服务器提交渲染任务。
(2)管理服务器根据前述的自动调度节点机方法将任务分配至匹配的节点机；
(3)节点机运行任务；
(4)节点机将任务运行结果上传至管理服务器，管理服务器标记任务状态，任务结束。所述管理服务器将渲染后的结果保存，用户可通过网页端或者客户端下载。
进一步地，所述步骤(2)还包括当任务不能匹配到节点机时，更改任务或节点机的属性、要求，并重新进行匹配。
采用上述方案，本发明提供一种自动调度节点机的方法及渲染任务处理方法，通过对任务和节点机进行属性和要求等方面的设置，并根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机，使得任务分配至节点机更加合理，节点机的利用也十分充分。
附图说明
图1为本发明的渲染任务处理流程图。
具体实施方式
以下结合附图和具体实施例，对本发明进行详细说明。
本发明提供一种自动调度节点机的方法，所述节点机有若干台，包括以下步骤：
S1：对节点机设置“属性、要求”，对任务设置“属性、要求”。
S2：根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机。如果某个任务带有ABC的属性，节点机带有ABC的要求，那个任务就会跑到带有ABC的要求和其它非ABC要求的节点机，但是要求为ABC的节点机只会接收带ABC属性的任务。如果某个任务带有abc的要求，那么有节点机设定了abc的属性，那么这个任务就只能在abc属性的节点机上面进行处理。任务的属性对应节点机的要求(如果节点机没有要求，那任何没有要求的任务就可以上这种没有要求的节点机)。任务的要求对应节点机的属性(如果任务没有要求，那么这种任务可以上任何没有要求的节点机)。
所述节点机还设置有约束、类别，所述节点机分为不同的组。所述约束为外部条件的限制，如license(软件使用授权)，例如渲染平台只有200个license，那么设置一个约束条件为vray＝200(台)，新的任务要处理时，如果平台的200个license已经全部在运行，那么新的任务会一直等待直到占用license的其它任务处理完，有空余的license可用，新的任务便可以进行。同组的节点机只能进行同一个任务。
所述任务还设置有约束、类别、等级、节点机数上限、节点机数下限、调度频率、在同一台节点机最多能连续失败的次数、能否被更高优先级任务中断、单个子任务需要使用节点机的数量。所述约束为外部条件的限制，如license(软件使用授权)，例如渲染平台只有200个license，那么设置一个约束条件为vray＝200(台)，新的任务要处理时，如果平台的200个license已经全部在运行，那么新的任务会一直等待直到占用license的其它任务处理完，有空余的license可用，新的任务便可以进行。低优先级任务可被高优先级的任务强制抢占节点机。设置节点机数上下限，使调度更合乎用户要求和资源的充分运用，所述调度频率为单位时间内最多能新增多少个子任务，对任务设置在同一台节点机最多能连续失败的次数，提升节点机的使用效率，避免任务一直占据节点机。
请参阅图1，本发明还提供一种渲染任务处理方法，包含有以下步骤：
(1)向管理服务器提交任务，用户通过网页端或者客户端向服务器提交渲染任务。
(2)管理服务器根据前述的自动调度节点机方法将任务分配至匹配的节点机；
(3)节点机运行任务；
(4)节点机将任务运行结果上传至管理服务器，管理服务器标记任务状态，任务结束。所述管理服务器将渲染后的结果保存，用户可通过网页端或者客户端下载。
所述步骤(2)还包括当任务不能匹配到节点机时，更改任务或节点机的属性、要求，并重新进行匹配。
综上所述，本发明提供一种自动调度节点机的方法及渲染任务处理方法，通过对任务和节点机进行属性和要求等方面的设置，并根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机，使得任务分配至节点机更加合理，节点机的利用也十分充分。
以上仅为本发明的较佳实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (5)

1.一种自动调度节点机的方法，所述节点机有若干台，其特征在于，包括以下步骤：
S1：对节点机设置“属性、要求”，对任务设置“属性、要求”；
S2：根据节点机的“属性”包括任务的全部“要求”并且任务的“属性”包括节点机的全部“要求”的原则给任务匹配节点机。
2.根据权利要求1所述的一种自动调度节点机的方法，其特征在于，所述节点机还设置有约束、类别，所述节点机分为不同的组。
3.根据权利要求1所述的一种自动调度节点机的方法，其特征在于，所述任务还设置有约束、类别、等级、节点机数上限和、节点机数下限、调度频率、在同一台节点机最多能连续失败的次数、能否被更高优先级任务中断、单个子任务需要使用节点机的数量。
4.一种渲染任务处理方法，其特征在于，包含有以下步骤：
(1)向管理服务器提交任务；
(2)管理服务器根据权利要求1-3任一项所述的自动调度节点机方法将任务分配至匹配的节点机；
(3)节点机运行任务；
(4)节点机将任务运行结果上传至管理服务器，管理服务器标记任务状态，任务结束。
5.根据权利要求4所述的一种渲染任务处理方法，其特征在于，所述步骤(2)还包括当任务不能匹配到节点机时，更改任务或节点机的属性、要求，并重新进行匹配。
CN201711009972.7A 2017-10-25 2017-10-25 一种自动调度节点机的方法及渲染任务处理方法 Pending CN107807854A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711009972.7A CN107807854A (zh) 2017-10-25 2017-10-25 一种自动调度节点机的方法及渲染任务处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711009972.7A CN107807854A (zh) 2017-10-25 2017-10-25 一种自动调度节点机的方法及渲染任务处理方法

Publications (1)

Publication Number Publication Date
CN107807854A true CN107807854A (zh) 2018-03-16

Family

ID=61592468

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711009972.7A Pending CN107807854A (zh) 2017-10-25 2017-10-25 一种自动调度节点机的方法及渲染任务处理方法

Country Status (1)

Country Link
CN (1) CN107807854A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109144726A (zh) * 2018-08-09 2019-01-04 深圳市瑞云科技有限公司 一种通过群组来调度节点机的方法
CN109361744A (zh) * 2018-09-30 2019-02-19 北京金山安全软件有限公司 一种隔离网络环境下的数据分发方法、装置及电子设备
CN110968406A (zh) * 2018-09-30 2020-04-07 北京国双科技有限公司 处理任务的方法、装置、存储介质和处理器
CN111104217A (zh) * 2019-11-27 2020-05-05 江苏艾佳家居用品有限公司 基于语义分析的渲染农场智能流量调度方法和系统
CN115858177A (zh) * 2023-02-08 2023-03-28 成都数联云算科技有限公司 一种渲染机资源分配方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013106828A1 (en) * 2012-01-13 2013-07-18 Antecea, Inc. Server aggregated application streaming
CN103617062A (zh) * 2013-12-05 2014-03-05 山东大学 一种柔性的渲染集群动态部署系统与方法
CN104104721A (zh) * 2014-07-17 2014-10-15 浪潮电子信息产业股份有限公司 一种基于windows域控实现windows渲染集群管理并提高部署效率的方法
CN104572305A (zh) * 2015-01-26 2015-04-29 赞奇科技发展有限公司 均衡负载的集群渲染任务调度方法
CN105446810A (zh) * 2015-12-24 2016-03-30 赞奇科技发展有限公司 基于成本代价的多农场云渲染任务分发系统与方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013106828A1 (en) * 2012-01-13 2013-07-18 Antecea, Inc. Server aggregated application streaming
CN103617062A (zh) * 2013-12-05 2014-03-05 山东大学 一种柔性的渲染集群动态部署系统与方法
CN104104721A (zh) * 2014-07-17 2014-10-15 浪潮电子信息产业股份有限公司 一种基于windows域控实现windows渲染集群管理并提高部署效率的方法
CN104572305A (zh) * 2015-01-26 2015-04-29 赞奇科技发展有限公司 均衡负载的集群渲染任务调度方法
CN105446810A (zh) * 2015-12-24 2016-03-30 赞奇科技发展有限公司 基于成本代价的多农场云渲染任务分发系统与方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109144726A (zh) * 2018-08-09 2019-01-04 深圳市瑞云科技有限公司 一种通过群组来调度节点机的方法
CN109361744A (zh) * 2018-09-30 2019-02-19 北京金山安全软件有限公司 一种隔离网络环境下的数据分发方法、装置及电子设备
CN110968406A (zh) * 2018-09-30 2020-04-07 北京国双科技有限公司 处理任务的方法、装置、存储介质和处理器
CN111104217A (zh) * 2019-11-27 2020-05-05 江苏艾佳家居用品有限公司 基于语义分析的渲染农场智能流量调度方法和系统
CN115858177A (zh) * 2023-02-08 2023-03-28 成都数联云算科技有限公司 一种渲染机资源分配方法、装置、设备及介质
CN115858177B (zh) * 2023-02-08 2023-10-24 成都数联云算科技有限公司 一种渲染机资源分配方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN107807854A (zh) 一种自动调度节点机的方法及渲染任务处理方法
CN106033373B (zh) 一种云计算平台中虚拟机资源调度方法和调度系统
CN103475538B (zh) 一种基于多接口的自适应的云服务测试方法
CN102012840A (zh) 一种数据的批量调度方法和系统
CN106254471A (zh) 一种异构云环境下资源统一调度方法及系统
CN104008012B (zh) 一种基于虚拟机动态迁移的高性能MapReduce实现方法
CN111327692A (zh) 模型训练方法、装置及集群系统
CN105786611A (zh) 一种分布式集群的任务调度方法及装置
CN106293933A (zh) 一种支持多大数据计算框架的集群资源配置与调度方法
CN106227397A (zh) 基于应用虚拟化技术的计算集群作业管理系统及方法
CN105338045A (zh) 一种云计算资源的处理装置、方法及云计算系统
CN116954873B (zh) 异构计算系统及其算力节点选择方法、装置、设备、介质
CN107203421A (zh) 一种云计算环境中自适应的组合工作流方法
CN105007311A (zh) 一种基于云平台和云计算的资源管理系统和方法
CN111124640A (zh) 任务分配方法及系统、存储介质、电子装置
CN102098223B (zh) 节点设备调度方法、装置和系统
CN108446174A (zh) 基于资源预分配与公共引导代理的多核作业调度方法
CN105159784A (zh) 一种虚拟服务器的部署方法及系统
CN105653347A (zh) 一种服务器、资源管理方法及虚拟机管理器
CN103067450B (zh) 用于云环境的应用程序控制方法和系统
CN104699520B (zh) 一种基于虚拟机迁移调度的节能方法
CN103838631B (zh) 一种面向片上网络的多线程调度实现方法
CN104967661B (zh) 应用于云环境下应用系统混合部署的组件部署方法和装置
CN105187244A (zh) 一种支持多种管理模式的数字通信设备访问管理系统
CN109104497A (zh) 一种基于云平台的业务处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180316