CN111158885B - 作业调度系统中并发度控制方法及装置 - Google Patents
作业调度系统中并发度控制方法及装置 Download PDFInfo
- Publication number
- CN111158885B CN111158885B CN201911417335.2A CN201911417335A CN111158885B CN 111158885 B CN111158885 B CN 111158885B CN 201911417335 A CN201911417335 A CN 201911417335A CN 111158885 B CN111158885 B CN 111158885B
- Authority
- CN
- China
- Prior art keywords
- concurrency
- operation unit
- lifted
- total
- scheduling system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000004590 computer program Methods 0.000 claims description 14
- 238000013507 mapping Methods 0.000 claims description 13
- 238000003860 storage Methods 0.000 claims description 12
- 230000006870 function Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 239000000872 buffer Substances 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000009826 distribution Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/217—Database tuning
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供一种作业调度系统中并发度控制方法及装置，方法包括：获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。本发明能够根据数据库并发度情况进行高效并发，提高作业效率。
Description
技术领域
本发明涉及作业调度技术领域，具体涉及一种作业调度系统中并发度控制方法及装置。
背景技术
作业调度系统主要是根据作业控制块中的信息，审查系统能否满足用户作业的资源需求，以及按照一定的算法，从外存的后备队列中选取某些作业调入内存，并为它们创建进程、分配必要的资源。然后再将新创建的进程插入就绪队列，准备执行。
在作业调度系统运行过程中，核心调度调起每个作业单元，由于作业调度系统处理作业的时间点集中在晚上，经常发生的问题是瞬间调起来大量作业单元，大量作业单元执行需要的并发度叠加起来会导致数据库阻塞或处理变慢。
发明内容
针对现有技术中的问题，本发明提供一种作业调度系统中并发度控制方法及装置，根据数据库并发度情况进行高效并发，提高作业效率。
为解决上述技术问题，本发明提供以下技术方案：
第一方面，本发明提供一种作业调度系统中并发度控制方法，包括：
获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。
其中，所述获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度，包括：
从作业配置表中读取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度。
其中，所述根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，包括：
根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度确定比例系数；
根据所述比例系数来判断是否为该调起的作业单元分配并发度，其中，若所述比例系数小于预设比例系数，则为该调起的作业单元分配并发度；若所述比例系数大于或等于预设比例系数，则该调起的作业单元未分配并发度。
其中，在所述根据所述比例系数来判断是否为该调起的作业单元分配并发度之后，还包括：
为该调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系。
其中，还包括：
执行调起的作业单元并在执行完成后，根据该作业单元与分配的并发度之间的映射关系释放并发度。
其中，在所述根据所述比例系数来判断是否为该调起的作业单元分配并发度之后，还包括：
调起的作业单元未分配并发度，在预设时段后重新调起未分配并发度的作业单元并判断是否分配并发度。
第二方面，本发明提供一种作业调度系统中并发度控制装置，包括：
获取单元，用于获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
分配单元，用于通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。
其中，所述获取单元包括：
读取子单元，用于从作业配置表中读取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度。
其中，所述分配单元包括：
比例子单元，用于根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度确定比例系数；
分配子单元，用于根据所述比例系数来判断是否为该调起的作业单元分配并发度，其中，若所述比例系数小于预设比例系数，则为该调起的作业单元分配并发度；若所述比例系数大于或等于预设比例系数，则该调起的作业单元未分配并发度。
其中，所述分配单元还包括：
记录子单元，用于为该调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系。
其中，还包括：
释放子单元，用于执行调起的作业单元并在执行完成后，根据该作业单元与分配的并发度之间的映射关系释放并发度。
其中，还包括：
延时子单元，用于调起的作业单元未分配并发度，在预设时段后重新调起未分配并发度的作业单元并判断是否分配并发度。
第三方面，本发明提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现所述的作业调度系统中并发度控制方法的步骤。
第四方面，本发明提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述的作业调度系统中并发度控制方法的步骤。
由上述技术方案可知，本发明提供一种作业调度系统中并发度控制方法及装置，通过获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，实现根据数据库并发度情况进行高效并发，提高作业效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中的作业调度系统中并发度控制方法的第一种流程示意图。
图2为本发明实施例中的作业调度系统中并发度控制方法的第二种流程示意图。
图3为本发明实施例中的作业调度系统中并发度控制方法的第三种流程示意图。
图4为本发明实施例中的作业调度系统中并发度控制装置的结构示意图。
图5为本发明实施例中的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供一种作业调度系统中并发度控制方法的实施例，参见图1，所述作业调度系统中并发度控制方法具体包含有如下内容：
S101：获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
在本步骤中，从作业配置表中读取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度。
需要说明的是，作业单元可被调度运行的程序单元。并发度是数据中执行sql语句时的并发粒度。
S102：通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。
在本步骤中，需要根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度确定比例系数；并根据该比例系数确定是否为该调起的作业单元分配并发度，具体包括：若所述比例系数小于预设比例系数，则为该调起的作业单元分配并发度；若所述比例系数大于或等于预设比例系数，则该调起的作业单元未分配并发度。
通过排他锁的方式控制各个调起的作业单元，即为从各个调起的作业单元中选取一个作业单元，判断是否为该作业单位分配并发度，在确定分配结果(分配或不分配)之前，不选取其他作业单位以及不判断是否为其他作业单位分配并发度。
需要说明的是，比例系数是根据使用需求自行设置。在本实施例中，该比例系数为0.4-0.8之间。
本发明实施例提供一种计算比例系数的具体方法，包括：步骤1计算每个调起的作业单元对应的并发度与当前正在运行作业单元对应的总并发度之和；步骤2：确定步骤1中的结果与实例节点总的并发度的比例，将该比例确定为比例系数。
进一步的，参见图2，在所述根据所述比例系数来判断是否为该调起的作业单元分配并发度之后，还包括：
S103：为该调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系。
S104：执行调起的作业单元并在执行完成后，根据该作业单元与分配的并发度之间的映射关系释放并发度。
生成并记录调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系，便于作业单元完成作业释放并发度后的并发度计算。
进一步的，参见图3，在根据所述比例系数来判断是否为该调起的作业单元分配并发度之后，还包括：
步骤S105：调起的作业单元未分配并发度，在预设时段后重新调起未分配并发度的作业单元并判断是否分配并发度。
需要说明的是，作业单元不会被调起，会sleep(睡眠或延时)一定时间，再次该流程。其中，
从上述描述可知，本发明实施例提供的作业调度系统中并发度控制方法，通过获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，实现根据数据库并发度情况进行高效并发，提高作业效率。
本发明实施例提供一种能够实现所述作业调度系统中并发度控制方法中全部内容的作业调度系统中并发度控制装置的具体实施方式，参见图4，所述作业调度系统中并发度控制装置具体包括如下内容：
获取单元10，用于获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
分配单元20，用于通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。
其中，所述获取单元包括：
读取子单元，用于从作业配置表中读取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度。
其中，所述分配单元包括：
比例子单元，用于根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度确定比例系数；
分配子单元，用于根据所述比例系数来判断是否为该调起的作业单元分配并发度，其中，若所述比例系数小于预设比例系数，则为该调起的作业单元分配并发度；若所述比例系数大于或等于预设比例系数，则该调起的作业单元未分配并发度。
其中，所述分配单元还包括：
记录子单元，用于为该调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系。
其中，还包括：
释放子单元，用于执行调起的作业单元并在执行完成后，根据该作业单元与分配的并发度之间的映射关系释放并发度。
其中，还包括：
延时子单元，用于调起的作业单元未分配并发度，在预设时段后重新调起未分配并发度的作业单元并判断是否分配并发度。
本发明提供的作业调度系统中并发度控制装置的实施例具体可以用于执行上述实施例中的作业调度系统中并发度控制方法的实施例的处理流程，其功能在此不再赘述，可以参照上述方法实施例的详细描述。
从上述描述可知，本发明实施例提供的作业调度系统中并发度控制装置，通过获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，实现根据数据库并发度情况进行高效并发，提高作业效率。
本申请提供一种用于实现所述作业调度系统中并发度控制方法中的全部或部分内容的电子设备的实施例所述电子设备具体包含有如下内容：
处理器(processor)、存储器(memory)、通信接口(Communications Interface)和总线；其中，所述处理器、存储器、通信接口通过所述总线完成相互间的通信；所述通信接口用于实现相关设备之间的信息传输；该电子设备可以是台式计算机、平板电脑及移动终端等，本实施例不限于此。在本实施例中，该电子设备可以参照实施例用于实现所述作业调度系统中并发度控制方法的实施例及用于实现所述作业调度系统中并发度控制装置的实施例进行实施，其内容被合并于此，重复之处不再赘述。
图5为本申请实施例的电子设备9600的系统构成的示意框图。如图5所示，该电子设备9600可以包括中央处理器9100和存储器9140；存储器9140耦合到中央处理器9100。值得注意的是，该图5是示例性的；还可以使用其他类型的结构，来补充或代替该结构，以实现电信功能或其他功能。
一实施例中，作业调度系统中并发度控制的功能可以被集成到中央处理器9100中。其中，中央处理器9100可以被配置为进行如下控制：
获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。
从上述描述可知，本申请的实施例提供的电子设备，通过获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，实现根据数据库并发度情况进行高效并发，提高作业效率。
在另一个实施方式中，作业调度系统中并发度控制装置可以与中央处理器9100分开配置，例如可以将作业调度系统中并发度控制的配置为与中央处理器9100连接的芯片，通过中央处理器的控制来实现作业调度系统中并发度控制的功能。
如图5所示，该电子设备9600还可以包括：通信模块9110、输入单元9120、音频处理器9130、显示器9160、电源9170。值得注意的是，电子设备9600也并不是必须要包括图5中所示的所有部件；此外，电子设备9600还可以包括图5中没有示出的部件，可以参考现有技术。
如图5所示，中央处理器9100有时也称为控制器或操作控件，可以包括微处理器或其他处理器装置和/或逻辑装置，该中央处理器9100接收输入并控制电子设备9600的各个部件的操作。
其中，存储器9140，例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息，此外还可存储执行有关信息的程序。并且中央处理器9100可执行该存储器9140存储的该程序，以实现信息存储或处理等。
输入单元9120向中央处理器9100提供输入。该输入单元9120例如为按键或触摸输入装置。电源9170用于向电子设备9600提供电力。显示器9160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器，但并不限于此。
该存储器9140可以是固态存储器，例如，只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器，其即使在断电时也保存信息，可被选择性地擦除且设有更多数据，该存储器的示例有时被称为EPROM等。存储器9140还可以是某种其它类型装置。存储器9140包括缓冲存储器9141(有时被称为缓冲器)。存储器9140可以包括应用/功能存储部9142，该应用/功能存储部9142用于存储应用程序和功能程序或用于通过中央处理器9100执行电子设备9600的操作的流程。
存储器9140还可以包括数据存储部9143，该数据存储部9143用于存储数据，例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器9140的驱动程序存储部9144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块9110即为经由天线9111发送和接收信号的发送机/接收机9110。通信模块(发送机/接收机)9110耦合到中央处理器9100，以提供输入信号和接收输出信号，这可以和常规移动通信终端的情况相同。
基于不同的通信技术，在同一电子设备中，可以设置有多个通信模块9110，如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)9110还经由音频处理器9130耦合到扬声器9131和麦克风9132，以经由扬声器9131提供音频输出，并接收来自麦克风9132的音频输入，从而实现通常的电信功能。音频处理器9130可以包括任何合适的缓冲器、解码器、放大器等。另外，音频处理器9130还耦合到中央处理器9100，从而使得可以通过麦克风9132能够在本机上录音，且使得可以通过扬声器9131来播放本机上存储的声音。
本发明的实施例还提供能够实现上述实施例中的作业调度系统中并发度控制方法中全部步骤的一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中的作业调度系统中并发度控制方法的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：
获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度。
从上述描述可知，本发明实施例提供的计算机可读存储介质，通过获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，实现根据数据库并发度情况进行高效并发，提高作业效率。
虽然本发明提供了如实施例或流程图所述方法操作步骤，但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中装置或客户端产品执行时，可以按照实施例或者附图所示方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。
本领域技术人员应明白，本说明书的实施例可提供为方法、装置(系统)或计算机程序产品。因此，本说明书实施例可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例方法、装置(系统)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。术语“上”、“下”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。本发明并不局限于任何单一的方面，也不局限于任何单一的实施例，也不局限于这些方面和/或实施例的任意组合和/或置换。而且，可以单独使用本发明的每个方面和/或实施例或者与一个或更多其他方面和/或其实施例结合使用。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。
Claims (12)
1.一种作业调度系统中并发度控制方法，其特征在于，包括：
获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度；
所述根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度，包括：
根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度确定比例系数；
根据所述比例系数来判断是否为该调起的作业单元分配并发度，其中，若所述比例系数小于预设比例系数，则为该调起的作业单元分配并发度；若所述比例系数大于或等于预设比例系数，则该调起的作业单元未分配并发度；
确定所述比例系数，包括：
计算每个调起的作业单元对应的并发度与当前正在运行作业单元对应的总并发度之和；
将求和结果与实例节点总的并发度的比例，确定为所述比例系数。
2.根据权利要求1所述的作业调度系统中并发度控制方法，其特征在于，所述获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度，包括：
从作业配置表中读取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度。
3.根据权利要求1所述的作业调度系统中并发度控制方法，其特征在于，在所述根据所述比例系数来判断是否为该调起的作业单元分配并发度之后，还包括：
为该调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系。
4.根据权利要求3所述的作业调度系统中并发度控制方法，其特征在于，还包括：
执行调起的作业单元并在执行完成后，根据该作业单元与分配的并发度之间的映射关系释放并发度。
5.根据权利要求1所述的作业调度系统中并发度控制方法，其特征在于，在所述根据所述比例系数来判断是否为该调起的作业单元分配并发度之后，还包括：
调起的作业单元未分配并发度，在预设时段后重新调起未分配并发度的作业单元并判断是否分配并发度。
6.一种作业调度系统中并发度控制装置，其特征在于，包括：
获取单元，用于获取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度；
分配单元，用于通过排他锁的方式控制各个调起的作业单元，并根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度来判断是否为该调起的作业单元分配并发度；
所述分配单元包括：
比例子单元，用于根据每个调起的作业单元对应的并发度、当前正在运行作业单元对应的总并发度和实例节点总的并发度确定比例系数；
分配子单元，用于根据所述比例系数来判断是否为该调起的作业单元分配并发度，其中，若所述比例系数小于预设比例系数，则为该调起的作业单元分配并发度；若所述比例系数大于或等于预设比例系数，则该调起的作业单元未分配并发度；
确定所述比例系数，包括：
计算每个调起的作业单元对应的并发度与当前正在运行作业单元对应的总并发度之和；
将求和结果与实例节点总的并发度的比例，确定为所述比例系数。
7.根据权利要求6所述的作业调度系统中并发度控制装置，其特征在于，所述获取单元包括：
读取子单元，用于从作业配置表中读取当前正在运行的作业单元对应的总并发度和各个调起的作业单元各自对应并发度。
8.根据权利要求6所述的作业调度系统中并发度控制装置，其特征在于，所述分配单元还包括：
记录子单元，用于为该调起的作业单元分配并发度并记录该调起的作业单元与分配的并发度之间的映射关系。
9.根据权利要求8所述的作业调度系统中并发度控制装置，其特征在于，还包括：
释放子单元，用于执行调起的作业单元并在执行完成后，根据该作业单元与分配的并发度之间的映射关系释放并发度。
10.根据权利要求6所述的作业调度系统中并发度控制装置，其特征在于，还包括：
延时子单元，用于调起的作业单元未分配并发度，在预设时段后重新调起未分配并发度的作业单元并判断是否分配并发度。
11.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至5任一项所述的作业调度系统中并发度控制方法的步骤。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至5任一项所述的作业调度系统中并发度控制方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911417335.2A CN111158885B (zh) | 2019-12-31 | 2019-12-31 | 作业调度系统中并发度控制方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911417335.2A CN111158885B (zh) | 2019-12-31 | 2019-12-31 | 作业调度系统中并发度控制方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111158885A CN111158885A (zh) | 2020-05-15 |
| CN111158885B true CN111158885B (zh) | 2023-05-23 |
Family
ID=70560358
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911417335.2A Active CN111158885B (zh) | 2019-12-31 | 2019-12-31 | 作业调度系统中并发度控制方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111158885B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106557363A (zh) * | 2016-12-05 | 2017-04-05 | 广发证券股份有限公司 | 一种大数据任务调度的系统以及方法 |
| CN108510213A (zh) * | 2018-05-11 | 2018-09-07 | 苏州华兴源创电子科技有限公司 | 将任务依次分配至任务组的方法、装置、设备及介质 |
| CN110191155A (zh) * | 2019-05-07 | 2019-08-30 | 中国人民解放军国防科技大学 | 一种面向胖树互连网络的并行作业调度方法、系统及存储介质 |
| CN110471758A (zh) * | 2019-07-02 | 2019-11-19 | 中国电力科学研究院有限公司 | 一种网络分析应用多用户并发作业调度系统及方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9015724B2 (en) * | 2009-09-23 | 2015-04-21 | International Business Machines Corporation | Job dispatching with scheduler record updates containing characteristics combinations of job characteristics |
-
2019
- 2019-12-31 CN CN201911417335.2A patent/CN111158885B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106557363A (zh) * | 2016-12-05 | 2017-04-05 | 广发证券股份有限公司 | 一种大数据任务调度的系统以及方法 |
| CN108510213A (zh) * | 2018-05-11 | 2018-09-07 | 苏州华兴源创电子科技有限公司 | 将任务依次分配至任务组的方法、装置、设备及介质 |
| CN110191155A (zh) * | 2019-05-07 | 2019-08-30 | 中国人民解放军国防科技大学 | 一种面向胖树互连网络的并行作业调度方法、系统及存储介质 |
| CN110471758A (zh) * | 2019-07-02 | 2019-11-19 | 中国电力科学研究院有限公司 | 一种网络分析应用多用户并发作业调度系统及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111158885A (zh) | 2020-05-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105917311B (zh) | 用于便携式设备中的同步任务分发的系统和方法 | |
| CN112445575B (zh) | 多集群资源调度方法、装置及系统 | |
| CN110648054A (zh) | 机器人流程自动化的任务并行处理方法及装置 | |
| CN112463535B (zh) | 多集群异常处理方法及装置 | |
| CN103873587B (zh) | 一种基于云平台实现调度的方法及装置 | |
| CN110413673B (zh) | 数据库数据统一采集与分发方法及系统 | |
| CN109684080B (zh) | 集中式任务调度方法、系统及存储介质 | |
| CN109669775B (zh) | 分布式任务调度方法、系统及存储介质 | |
| CN112988362B (zh) | 一种任务处理方法、装置、电子设备及存储介质 | |
| KR20100021725A (ko) | 이동통신 단말기의 메모리 재할당 장치 및 방법 | |
| CN113419846B (zh) | 资源配置方法和装置、电子设备及计算机可读存储介质 | |
| CN109857551A (zh) | 基于云计算的服务资源的调度方法及装置、电子设备 | |
| CN111679790B (zh) | 远程软件开发存储空间分配方法及装置 | |
| CN114072767B (zh) | 资源调度、申请与定价方法、设备、系统及存储介质 | |
| JP2010108295A (ja) | 移動機及びアプリケーションの切替方法 | |
| CN111445331A (zh) | 交易撮合方法及装置 | |
| CN112035066B (zh) | 日志保留时长的计算方法及装置 | |
| CN114615340A (zh) | 一种请求处理方法、装置、计算机设备和存储装置 | |
| CN110427260B (zh) | 主机作业调度方法、装置及系统 | |
| CN109753353B (zh) | 虚拟机资源分配方法、装置及电子设备 | |
| CN111158885B (zh) | 作业调度系统中并发度控制方法及装置 | |
| CN112559158A (zh) | 微服务定时任务调度方法及装置 | |
| CN113721936B (zh) | 一种应用管理方法及智能终端、装置及存储介质 | |
| CN112286663B (zh) | 任务调度方法及装置 | |
| CN111414232B (zh) | 虚拟机模板数据处理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |