CN105740073A - 一种动态控制操作系统进程数量的方法及装置 - Google Patents

一种动态控制操作系统进程数量的方法及装置 Download PDF

Info

Publication number
CN105740073A
CN105740073A CN201610042140.4A CN201610042140A CN105740073A CN 105740073 A CN105740073 A CN 105740073A CN 201610042140 A CN201610042140 A CN 201610042140A CN 105740073 A CN105740073 A CN 105740073A
Authority
CN
China
Prior art keywords
system process
operating system
numerical value
control operations
dynamic control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610042140.4A
Other languages
English (en)
Inventor
聂维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Beijing Electronic Information Industry Co Ltd
Original Assignee
Inspur Beijing Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Beijing Electronic Information Industry Co Ltd filed Critical Inspur Beijing Electronic Information Industry Co Ltd
Priority to CN201610042140.4A priority Critical patent/CN105740073A/zh
Publication of CN105740073A publication Critical patent/CN105740073A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种动态控制操作系统进程数量的方法及装置，该方法包括：按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。本发明可以根据CPU、IO、Memory资源的繁忙程度动态调整操作系统进程的配置数值，提高了资源的利用率，缩短了运行时间，且无需增加额外的资源。

Description

一种动态控制操作系统进程数量的方法及装置
技术领域
本发明涉及计算机系统设计技术领域，特别是涉及一种动态控制操作系统进程数量的方法及装置。
背景技术
当用户需要拷贝几千个数据文件或者对几千个数据库表同时进行维护时，通常只能串行或者固定几个并发进程去处理；但是由于CPU、IO、Memory等资源情况无法准确预估，导致其运行中的不同阶段CPU、IO、Memory等资源不是过度繁忙就是过度空闲，导致处理窗口时间过长，甚至无法在固定时间内完成，严重影响了生产业务。
发明内容
本发明的目的是提供一种动态控制操作系统进程数量的方法及装置，目的在于解决现有对批量数据进行处理时，不能有效利用资源导致无法在规定时间内完成处理的问题。
为解决上述技术问题，本发明提供一种动态控制操作系统进程数量的方法，包括：
按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；
将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；
当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；
其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。
可选地，所述按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量包括：
在拷贝多个数据文件时，将所有拷贝文件名称定向值，然后通过for循环依次后台执行，每个文件拷贝执行前实时判断操作系统进程的数量。
可选地，所述预设时间为1s。
可选地，所述操作系统进程的配置数值为分别根据不同阶段CPU、IO、Memory资源的繁忙程度预先调整设定的数值。
本发明还提供了一种动态控制操作系统进程数量的装置，包括：
确定模块，用于按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；
比较模块，用于将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；
处理模块，用于当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；
其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。
可选地，所述确定模块具体用于：
在拷贝多个数据文件时，将所有拷贝文件名称定向值，然后通过for循环依次后台执行，每个文件拷贝执行前实时判断操作系统进程的数量。
可选地，所述预设时间为1s。
可选地，所述操作系统进程的配置数值为分别根据不同阶段CPU、IO、Memory资源的繁忙程度预先调整设定的数值。
本发明所提供的动态控制操作系统进程数量的方法及装置，按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；将操作系统进程的数量与预设的操作系统进程的配置数值相比较；当操作系统进程的数量大于配置数值时，间隔预设时间后再次比较操作系统进程的数量与配置数值的大小，直到操作系统进程的数量小于配置数值为止，执行对当前数据的处理。本发明所提供的动态控制操作系统进程数量的方法及装置，可以根据CPU、IO、Memory资源的繁忙程度动态调整操作系统进程的配置数值，资源繁忙时减少操作系统进程的配置数值，资源空闲时加大操作系统进程的配置数值，即可实现动态增加或减少对数据处理的进程，提高了资源的利用率，缩短了运行时间，且无需增加额外的资源。
附图说明
为了更清楚的说明本发明实施例或现有技术的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明所提供的动态控制操作系统进程数量的方法的一种具体实施方式的流程图；
图2为本发明所提供的动态控制操作系统进程数量的方法的另一种具体实施方式的流程图；
图3为本发明实施例提供的动态控制操作系统进程数量的装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明所提供的动态控制操作系统进程数量的方法的一种具体实施方式的流程图如图1所示，该方法包括：
步骤S101：按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；
步骤S102：将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；
步骤S103：当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；
具体地，预设时间可以为1s，当然也可以为其他数值，这均不影响本发明的实现。
其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。
作为一种具体实施方式，操作系统进程的配置数值为分别根据不同阶段CPU、IO、Memory资源的繁忙程度预先调整设定的数值。在资源繁忙时减少操作系统进程的配置数值，资源空闲时加大操作系统进程的配置数值。
本发明所提供的动态控制操作系统进程数量的方法，按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；将操作系统进程的数量与预设的操作系统进程的配置数值相比较；当操作系统进程的数量大于配置数值时，间隔预设时间后再次比较操作系统进程的数量与配置数值的大小，直到操作系统进程的数量小于配置数值为止，执行对当前数据的处理。本发明所提供的动态控制操作系统进程数量的方法，可以根据CPU、IO、Memory资源的繁忙程度动态调整操作系统进程的配置数值，资源繁忙时减少操作系统进程的配置数值，资源空闲时加大操作系统进程的配置数值，即可实现动态增加或减少对数据处理的进程，提高了资源的利用率，缩短了运行时间，且无需增加额外的资源。
本发明所提供的动态控制操作系统进程数量的方法可以具体用于对几千个数据文件进行拷贝或者对几千个数据库表同时进行维护的情况。下面通过用户对几千个数据文件进行拷贝的具体过程对本发明的又一具体实施方式进行进一步详细描述。
如图2本发明所提供的动态控制操作系统进程数量的方法的另一种具体实施方式的流程图所示，该方法包括：
步骤S201：在拷贝多个数据文件时，将所有拷贝文件名称定向值，然后通过for循环依次后台执行，每个文件拷贝执行前实时判断操作系统进程的数量；
步骤S202：将操作系统进程的数量与预设的操作系统进程的配置数值相比较；
步骤S203：当操作系统进程的数量大于配置数值时，等待1s，再次比较操作系统进程的数量与配置数值的大小，直到操作系统进程的数量小于配置数值为止，后台执行该文件的拷贝，然后依次下一次循环。
当用户需要拷贝几千个数据文件时，通过配置文件parallelism.txt控制进程的数量，首先将所有需要拷贝文件名称定向值file.lst.然后通过for循环依次后台执行，每个文件拷贝执行之前判断操作系统该进程的数量，如果进程数量大于parallelism.txt文件中的数值则等待1S，然后再次判断，待操作系统该进程的数量小于parallelism.txt文件中的数值时，后台执行该文件的拷贝，然后执行下一次循环即下一个文件的拷贝。
本发明实施例可以根据CPU、IO、Memory等资源的繁忙程度动态调整parallelism.txt文件中的数值，资源繁忙时减少parallelism.txt数值，资源空闲时加大parallelism.txt数值，即可实现动态增加或减少拷贝文件的进程，提高了资源利用率，缩短了数据处理的运行时间。
下面对本发明实施例提供的动态控制操作系统进程数量的装置进行介绍，下文描述的动态控制操作系统进程数量的装置与上文描述的动态控制操作系统进程数量的方法可相互对应参照。
图3为本发明实施例提供的动态控制操作系统进程数量的装置的结构框图，参照图3动态控制操作系统进程数量的装置可以包括：
确定模块100，用于按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；
比较模块200，用于将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；
处理模块300，用于当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；
其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。
作为一种具体实施方式，本发明所提供的动态控制操作系统进程数量的装置中上述确定模块100具体用于：
在拷贝多个数据文件时，将所有拷贝文件名称定向值，然后通过for循环依次后台执行，每个文件拷贝执行前实时判断操作系统进程的数量。
作为一种具体实施方式，本发明所提供的动态控制操作系统进程数量的装置中，预设时间可以为1s。
作为一种具体实施方式，本发明所提供的动态控制操作系统进程数量的装置中，操作系统进程的配置数值为分别根据不同阶段CPU、IO、Memory资源的繁忙程度预先调整设定的数值。
本发明所提供的动态控制操作系统进程数量的装置，按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；将操作系统进程的数量与预设的操作系统进程的配置数值相比较；当操作系统进程的数量大于配置数值时，间隔预设时间后再次比较操作系统进程的数量与配置数值的大小，直到操作系统进程的数量小于配置数值为止，执行对当前数据的处理。本发明所提供的动态控制操作系统进程数量的装置，可以根据CPU、IO、Memory资源的繁忙程度动态调整操作系统进程的配置数值，资源繁忙时减少操作系统进程的配置数值，资源空闲时加大操作系统进程的配置数值，即可实现动态增加或减少对数据处理的进程，提高了资源的利用率，缩短了运行时间。本发明在无需增加额外的资源的前提下，最少减少了三分之一的时间。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的动态控制操作系统进程数量的方法以及装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (8)

1.一种动态控制操作系统进程数量的方法，其特征在于，包括：
按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；
将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；
当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；
其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。
2.如权利要求1所述的动态控制操作系统进程数量的方法，其特征在于，所述按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量包括：
在拷贝多个数据文件时，将所有拷贝文件名称定向值，然后通过for循环依次后台执行，每个文件拷贝执行前实时判断操作系统进程的数量。
3.如权利要求1或2所述的动态控制操作系统进程数量的方法，其特征在于，所述预设时间为1s。
4.如权利要求3所述的动态控制操作系统进程数量的方法，其特征在于，所述操作系统进程的配置数值为分别根据不同阶段CPU、IO、Memory资源的繁忙程度预先调整设定的数值。
5.一种动态控制操作系统进程数量的装置，其特征在于，包括：
确定模块，用于按照预设顺序对批量数据进行处理，实时确定操作系统进程的数量；
比较模块，用于将所述操作系统进程的数量与预设的操作系统进程的配置数值相比较；
处理模块，用于当所述操作系统进程的数量大于所述配置数值时，间隔预设时间后再次比较所述操作系统进程的数量与所述配置数值的大小，直到所述操作系统进程的数量小于所述配置数值为止，执行对当前数据的处理；
其中，所述操作系统进程的配置数值为根据各资源的繁忙程度调整设定的数值。
6.如权利要求5所述的动态控制操作系统进程数量的装置，其特征在于，所述确定模块具体用于：
在拷贝多个数据文件时，将所有拷贝文件名称定向值，然后通过for循环依次后台执行，每个文件拷贝执行前实时判断操作系统进程的数量。
7.如权利要求5或6所述的动态控制操作系统进程数量的装置，其特征在于，所述预设时间为1s。
8.如权利要求7所述的动态控制操作系统进程数量的装置，其特征在于，所述操作系统进程的配置数值为分别根据不同阶段CPU、IO、Memory资源的繁忙程度预先调整设定的数值。
CN201610042140.4A 2016-01-21 2016-01-21 一种动态控制操作系统进程数量的方法及装置 Pending CN105740073A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610042140.4A CN105740073A (zh) 2016-01-21 2016-01-21 一种动态控制操作系统进程数量的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610042140.4A CN105740073A (zh) 2016-01-21 2016-01-21 一种动态控制操作系统进程数量的方法及装置

Publications (1)

Publication Number Publication Date
CN105740073A true CN105740073A (zh) 2016-07-06

Family

ID=56247489

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610042140.4A Pending CN105740073A (zh) 2016-01-21 2016-01-21 一种动态控制操作系统进程数量的方法及装置

Country Status (1)

Country Link
CN (1) CN105740073A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109508239A (zh) * 2017-09-15 2019-03-22 北京国双科技有限公司 进程的控制方法及装置
CN111209110A (zh) * 2019-12-31 2020-05-29 浙江明度智控科技有限公司 一种实现负载均衡的任务调度管理方法、系统和存储介质
CN112015260A (zh) * 2019-05-31 2020-12-01 中兴通讯股份有限公司 处理器的性能状态的调节方法、装置、uefi及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033784A (zh) * 2010-11-18 2011-04-27 山东中创软件工程股份有限公司 一种应用服务器的优化方法及装置
CN102088485A (zh) * 2010-12-30 2011-06-08 用友软件股份有限公司 数据获取方法和装置
CN102331950A (zh) * 2011-09-15 2012-01-25 北京安天电子设备有限公司 基于Linux定时任务的守护进程实现方法和系统
CN103164282A (zh) * 2011-12-19 2013-06-19 中国移动通信集团安徽有限公司 一种调整交易中间件服务进程最大数的方法和系统
US20150095603A1 (en) * 2013-09-30 2015-04-02 Samsung Electronics Co., Ltd. Method and device for clearing process in electronic device
CN105183854A (zh) * 2015-09-08 2015-12-23 浪潮(北京)电子信息产业有限公司 一种数据库卸载数据的调度方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033784A (zh) * 2010-11-18 2011-04-27 山东中创软件工程股份有限公司 一种应用服务器的优化方法及装置
CN102088485A (zh) * 2010-12-30 2011-06-08 用友软件股份有限公司 数据获取方法和装置
CN102331950A (zh) * 2011-09-15 2012-01-25 北京安天电子设备有限公司 基于Linux定时任务的守护进程实现方法和系统
CN103164282A (zh) * 2011-12-19 2013-06-19 中国移动通信集团安徽有限公司 一种调整交易中间件服务进程最大数的方法和系统
US20150095603A1 (en) * 2013-09-30 2015-04-02 Samsung Electronics Co., Ltd. Method and device for clearing process in electronic device
CN105183854A (zh) * 2015-09-08 2015-12-23 浪潮(北京)电子信息产业有限公司 一种数据库卸载数据的调度方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109508239A (zh) * 2017-09-15 2019-03-22 北京国双科技有限公司 进程的控制方法及装置
CN112015260A (zh) * 2019-05-31 2020-12-01 中兴通讯股份有限公司 处理器的性能状态的调节方法、装置、uefi及存储介质
CN111209110A (zh) * 2019-12-31 2020-05-29 浙江明度智控科技有限公司 一种实现负载均衡的任务调度管理方法、系统和存储介质
CN111209110B (zh) * 2019-12-31 2023-10-10 明度智云(浙江)科技有限公司 一种实现负载均衡的任务调度管理方法、系统和存储介质

Similar Documents

Publication Publication Date Title
US9032175B2 (en) Data migration between storage devices
WO2019128475A1 (zh) 数据训练方法及装置、存储介质、电子装置
US9143562B2 (en) Managing transfer of data from a source to a destination machine cluster
JP6818014B2 (ja) ジョブ用の動作リトライ方法及び機器
CN104199784B (zh) 一种基于分级存储的数据迁移方法及装置
DE102013104328A1 (de) Aufgabenzuteilung in großen und kleinen Kernen
US20210247987A1 (en) Algorithm program loading method and related apparatus
JP2011165164A (ja) サービス品質に基づくストレージ階層化及び移動技法のためのシステム及び方法
CN110389842B (zh) 一种动态资源分配方法、装置、存储介质及设备
US20180089095A1 (en) Flushing pages from solid-state storage device
US20130232487A1 (en) Control computer and method for managing virtual machine
US20150199134A1 (en) System and method for resolving dram page conflicts based on memory access patterns
US11216345B2 (en) Technologies for limiting performance variation in a storage device
DE102013104329A1 (de) Aufgabenzuteilung in großen und kleinen Kernen
US10891150B2 (en) Storage control method and storage controller for user individual service environment
CN108572876A (zh) 一种读写锁的实现方法及装置
US20170142186A1 (en) Method, apparatus, and electronic device for downloading files
JP2019016402A (ja) 走査対象情報を走査する方法、装置、及びコンピュータデバイス
CN105740073A (zh) 一种动态控制操作系统进程数量的方法及装置
US9069621B2 (en) Submitting operations to a shared resource based on busy-to-success ratios
US20170169254A1 (en) Preemption of a container in a secure computation environment
US20190332326A1 (en) Method, device, and computer program product for operation control in storage system
CN108198582B (zh) 一种NAND Flash控制方法、装置及SSD
WO2017015059A1 (en) Efficient cache warm up based on user requests
CN107515724B (zh) 用于再现存储系统的输入输出的方法和设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160706