JP2012146157A - スケジューリング方法およびスケジューリングシステム - Google Patents

スケジューリング方法およびスケジューリングシステム Download PDF

Info

Publication number
JP2012146157A
JP2012146157A JP2011004507A JP2011004507A JP2012146157A JP 2012146157 A JP2012146157 A JP 2012146157A JP 2011004507 A JP2011004507 A JP 2011004507A JP 2011004507 A JP2011004507 A JP 2011004507A JP 2012146157 A JP2012146157 A JP 2012146157A
Authority
JP
Japan
Prior art keywords
task
job
scheduling
scheduler
scheduling process
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011004507A
Other languages
English (en)
Other versions
JP5632754B2 (ja
Inventor
Yukio Okuya
行央 奥谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Systems Ltd
Original Assignee
Hitachi Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Systems Ltd filed Critical Hitachi Systems Ltd
Priority to JP2011004507A priority Critical patent/JP5632754B2/ja
Publication of JP2012146157A publication Critical patent/JP2012146157A/ja
Application granted granted Critical
Publication of JP5632754B2 publication Critical patent/JP5632754B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

【課題】大量のタスク/ジョブを実行する場合においてもシステムがハングアップしないスケジューリングシステム提供する。
【解決手段】スケジューリングシステムにおいて、タスク/ジョブの登録を受け付けるタスク/ジョブマネージャ2と、タスク/ジョブマネージャ2にタスク/ジョブの登録があると、タスク/ジョブをBusy状態でないスケジューリングプロセス部6へ割り当てるスケジューリングプロセスコントローラ4とを備え、スケジューリングプロセス部6は、タスク/ジョブ特性とスケジューラの対応付けのデータベースを有し、割り当てられたタスク/ジョブのタスク/ジョブ特性に基づいて、データベースからタスク/ジョブ特性に最適なスケジューラを検索し、検索されたスケジューラによるタスク/ジョブの処理を行う。
【選択図】図1

Description

本発明は、タスク/ジョブのスケジュールを行うスケジューリング技術に関し、特にクラウドサービスのバックエンドにおいて、大量、様々な実行間隔、様々な実行時間をもつタスク/ジョブを扱う際のスケジューリング方法およびスケジューリングシステムに関するものである。
近年、仮想化技術の発展と企業のITシステムに対する考えの「所有」から「利用」への変化に伴って、コンピュータリソースを必要に応じて必要なだけ利用するクラウドサービスの利用が増加している。
クラウドサービスでは、薄利多売モデルであるケースが多く、そのバックエンドで稼動する基盤システムでは高いスケーラビリティが要求される。タスク/ジョブのスケジューリングシステムもその1つである。
現在、様々なタスク/ジョブのスケジューリングシステムが存在するが、以下のような問題点があり、クラウドサービス向けに利用することは難しい。
(1)コマンドベースによるタスク/ジョブの実行方式であるため、大量のタスク/ジョブを実行する場合、プロセスが大量に生成され、システムがハングアップする可能性がある。
(2)スケジュールの間隔が長い場合も短い場合も一様にスケジューリングされるため、短いスケジュール間隔で数多く実行されるようなタスク/ジョブでは、実行開始時刻の誤差が許容範囲を超えてしまう可能性がある。元々限られた資源で高いスケーラビリティを実現するためには、タスク/ジョブスケジューリングシステムとしては、スケジューリングの厳密性をある程度犠牲にする必要があるが、タスク/ジョブごとにその度合いを制御できなければシステムとして意味をもたないものとなってしまう。
そこで、本発明の目的は、以下の2点である。
(1)大量のタスク/ジョブを実行する場合においてもシステムがハングアップしないスケジューリング方法およびスケジューリングシステムを提供すること。
(2)タスク/ジョブの特性(スケジュール間隔、実行時間、過去の履歴)に応じて実行開始時刻の誤差を許容範囲内に抑えることができるスケジューリング方法およびスケジューリングシステムを提供すること。
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述および添付図面から明らかになるであろう。
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、次の通りである。
すなわち、代表的なものの概要は、スケジューリング方法において、タスク/ジョブの登録があると、スケジューリングプロセスコントローラにより、タスク/ジョブをBusy状態でないスケジューリングプロセス部へ割り当てるステップと、スケジューリングプロセス部により、割り当てられた前記タスク/ジョブのタスク/ジョブ特性に基づいてスケジューラを検索し、検索されたスケジューラによるタスク/ジョブの処理を行うステップとを有するものである。
また、スケジューリングシステムにおいて、タスク/ジョブの登録を受け付けるタスク/ジョブマネージャと、タスク/ジョブマネージャにタスク/ジョブの登録があると、タスク/ジョブをBusy状態でないスケジューリングプロセス部へ割り当てるスケジューリングプロセスコントローラとを備え、スケジューリングプロセス部は、タスク/ジョブ特性とスケジューラの対応付けのデータベースを有し、割り当てられたタスク/ジョブのタスク/ジョブ特性に基づいて、データベースからタスク/ジョブ特性に最適なスケジューラを検索し、検索されたスケジューラによるタスク/ジョブの処理を行うものである。
本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下の通りである。
すなわち、代表的なものによって得られる効果は、大量のタスク/ジョブを実行する場合においてもシステムがハングアップせず、タスク/ジョブの特性(スケジュール間隔、実行時間、過去の履歴)に応じて実行開始時刻の誤差を許容範囲内に抑えることができるので、クラウドサービスのバックエンド基盤システムとして十分にスケーラブルなタスク/ジョブスケジューリング機能を提供でき、高品質で安定したクラウドサービスの実現を期待できる。
本発明の一実施の形態に係るスケジューリングシステムの構成を示す構成図である。 本発明の一実施の形態に係るスケジューリングシステムのスケジューリングプロセス部によるスケジューリング処理を説明するための説明図である。
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。
図1により、本発明の一実施の形態に係るスケジューリングシステムの構成について説明する。図1は本発明の一実施の形態に係るスケジューリングシステムの構成を示す構成図である。
図1において、スケジューリングシステムは、例えばサーバなどの情報処理装置上でスケジューリングプログラムなどを実行することにより動作しており、スケジューリングシステムの各処理部は、サーバなどの情報処理装置の記憶装置に格納されたスケジューリングプログラムなどをCPUにより処理することで動作するようになっている。
スケジューリングシステムの各処理部は、タスク/ジョブマネージャ2、タスク/ジョブマスタファイル3、スケジューリングプロセスコントローラ4、メモリ上にタスク/ジョブ情報5を保持したスケジューリングプロセス部6から構成され、クラウドサービス1からのタスク/ジョブ登録を受け付けている。
クラウドサービス1は、タスク/ジョブマネージャ2に対してタスク/ジョブ登録を行う。タスク/ジョブマネージャ2は、受信したタスク/ジョブをタスク/ジョブマスタファイル3として保存する。
スケジューリングプロセスコントローラ4は、タスク/ジョブマスタファイル3の登録を検出し、タスク/ジョブマスタファイル3の内容に基づいて、Busy状態でないスケジューリングプロセス部6へ割り当てる。
スケジューリングプロセス部6は、メモリ上にタスク/ジョブ情報5を保持しており、後述する図2での処理を行う。
また、スケジューリングプロセスコントローラ4は、Busy状態でないスケジューリングプロセス部6が存在しない場合は、新たに起動する。
また、クラウドサービス1からタスク/ジョブの解除を指定された場合、タスク/ジョブマネージャ2は、タスク/ジョブマスタファイル3を削除する。スケジューリングプロセスコントローラ4は、タスク/ジョブマスタファイル3の削除を検出し、スケジューリングプロセス部6への割り当てを解除し、スケジューリングプロセス部6は、該当タスク/ジョブのスケジューリングを停止する。
次に、図2により、本発明の一実施の形態に係るスケジューリングシステムのスケジューリングプロセス部によるスケジューリング処理について説明する。図2は本発明の一実施の形態に係るスケジューリングシステムのスケジューリングプロセス部によるスケジューリング処理を説明するための説明図である。
図2において、スケジューリングプロセス部6は、タスク/ジョブスケジューラオプティマイザ7、タスク/ジョブ特性とスケジューラ対応付けのデータベース8、タスク/ジョブ実行履歴のデータベース9、スケジューラ10、スケジューリングアルゴリズムメソッド11、スケジューリングスレッド12、スケジューリングプロセス部6におけるタスク/ジョブ情報13、タスク/ジョブ処理スレッド14、タスク/ジョブメソッド15、誤差情報16を有している。
タスク/ジョブ特性とスケジューラ対応付けのデータベース8には、スケジュール間隔、実行時間、誤差許容範囲、スケジューラ名を列としてもつテーブルが格納され、タスク/ジョブ実行履歴のデータベース9には、タスク/ジョブ名、実行時間(実績)、誤差(実績)、スケジューラ名を列としてもつテーブルが格納されている。
まず、タスク/ジョブがスケジューリングプロセス部6に割り当てられると、タスク/ジョブスケジューラオプティマイザ7は、タスク/ジョブのスケジュール情報からタスク/ジョブ特性であるスケジュール間隔の算出、想定実行時間の取得、誤差許容範囲の取得を行う。この値を基に最も適切なスケジューラ10をタスク/ジョブ特性とスケジューラ対応付けのデータベース8から検索する(S100)。
そして、検索されたスケジューラ10にタスク/ジョブ情報13が割り当てられると(S101)、スケジューリングスレッド12はスケジューリングアルゴリズムメソッド11を用いて、スケジュール処理を開始する(S102)。
タスク/ジョブの処理開始を検出すると、タスク/ジョブ処理スレッド14はダイナミックリンクライブラリ(DLL)によりインプロセスでタスク/ジョブメソッド15を実行する(S103)。タスク/ジョブメソッド15が終了すると、その結果と共に誤差情報16をタスク/ジョブ実行履歴のデータベース9へ保存する(S104)。
また、スケジューリングスレッド12は、誤差情報16を参照し(S105)、過去実行した誤差情報16を基にスケジュール精度を許容誤差範囲内に抑えるようにスケジューリングを行う。具体的には、他のタスク/ジョブの誤差に余裕があれば、誤差が大きいタスク/ジョブの優先度を上げる。誤差に余裕がなければ、タスク/ジョブ実行履歴のデータベース9へ情報を登録する(S106)。
このタスク/ジョブ実行履歴のデータベース9に登録された情報をタスク/ジョブスケジューラオプティマイザ7が検出すると(S107)、余裕のあるスケジューラ10を再選択する。このとき、余裕のあるスケジューラ10が存在しない場合、スケジューラ10を新たに自動起動する。スケジューラ10を新たに起動するリソースがない場合、図1に示すスケジューリングプロセスコントローラ4が新たなスケジューリングプロセス部6を起動する。
本実施の形態では、スケジューリングプロセス部6により、タスク/ジョブ特性に応じて、最も適切なスケジューラ10をタスク/ジョブ特性とスケジューラ対応付けのデータベース8から検索するので、タスク/ジョブ特性に応じて最適なスケジューリングを行うことができる。また、過去実行した誤差情報16を基にスケジュール精度を許容誤差範囲内に抑えるようにスケジューリングを行うので、大量のタスク/ジョブを実行する場合においてもシステムがハングアップしないようにすることができる。
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。
本発明は、タスク/ジョブのスケジュールを行うスケジューリングシステムに関し、クラウドサービス提供におけるバックエンドの共通基盤として広く利用することができる。
1…クラウドサービス、2…タスク/ジョブマネージャ、3…タスク/ジョブマスタファイル、4…スケジューリングプロセスコントローラ、5…タスク/ジョブ情報、6…スケジューリングプロセス部、7…タスク/ジョブスケジューラオプティマイザ、8…タスク/ジョブ特性とスケジューラの対応付けのデータベース、9…タスク/ジョブ実行履歴のデータベース、10…スケジューラ、11…スケジューリングアルゴリズムメソッド、12…スケジューリングスレッド、13…タスク/ジョブ情報、14…タスク/ジョブ処理スレッド、15…タスク/ジョブメソッド、16…誤差情報。

Claims (6)

  1. タスク/ジョブのスケジュールを行うスケジューリングシステムのスケジューリング方法であって、
    前記タスク/ジョブの登録があると、スケジューリングプロセスコントローラにより、前記タスク/ジョブをBusy状態でないスケジューリングプロセス部へ割り当てるステップと、
    前記スケジューリングプロセス部により、割り当てられた前記タスク/ジョブのタスク/ジョブ特性に基づいてスケジューラを検索し、検索されたスケジューラによる前記タスク/ジョブの処理を行うステップとを有することを特徴とするスケジューリング方法。
  2. 請求項1に記載のスケジューリング方法において、
    前記スケジューラによる前記タスク/ジョブの処理は、インプロセスで行われることを特徴とするスケジューリング方法。
  3. 請求項2に記載のスケジューリング方法において、
    前記スケジューラによる前記タスク/ジョブの処理は、過去実行した前記タスク/ジョブのスケジューリングの誤差情報に基づいて、スケジュール精度を予め設定された許容誤差範囲内に抑えるようにスケジューリングが行われることを特徴とするスケジューリング方法。
  4. タスク/ジョブの登録を受け付けるタスク/ジョブマネージャと、
    前記タスク/ジョブマネージャに前記タスク/ジョブの登録があると、前記タスク/ジョブをBusy状態でないスケジューリングプロセス部へ割り当てるスケジューリングプロセスコントローラとを備え、
    前記スケジューリングプロセス部は、タスク/ジョブ特性とスケジューラの対応付けのデータベースを有し、割り当てられた前記タスク/ジョブのタスク/ジョブ特性に基づいて、前記データベースからタスク/ジョブ特性に最適なスケジューラを検索し、検索されたスケジューラによる前記タスク/ジョブの処理を行うことを特徴とするスケジューリングシステム。
  5. 請求項4に記載のスケジューリングシステムにおいて、
    前記スケジューラによる前記タスク/ジョブの処理は、インプロセスで行われることを特徴とするスケジューリングシステム。
  6. 請求項5に記載のスケジューリングシステムにおいて、
    前記スケジューラによる前記タスク/ジョブの処理は、過去実行した前記タスク/ジョブのスケジューリングの誤差情報に基づいて、スケジュール精度を予め設定された許容誤差範囲内に抑えるようにスケジューリングが行われることを特徴とするスケジューリングシステム。
JP2011004507A 2011-01-13 2011-01-13 スケジューリング方法およびスケジューリングシステム Expired - Fee Related JP5632754B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011004507A JP5632754B2 (ja) 2011-01-13 2011-01-13 スケジューリング方法およびスケジューリングシステム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011004507A JP5632754B2 (ja) 2011-01-13 2011-01-13 スケジューリング方法およびスケジューリングシステム

Publications (2)

Publication Number Publication Date
JP2012146157A true JP2012146157A (ja) 2012-08-02
JP5632754B2 JP5632754B2 (ja) 2014-11-26

Family

ID=46789656

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011004507A Expired - Fee Related JP5632754B2 (ja) 2011-01-13 2011-01-13 スケジューリング方法およびスケジューリングシステム

Country Status (1)

Country Link
JP (1) JP5632754B2 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0954699A (ja) * 1995-08-11 1997-02-25 Fujitsu Ltd 計算機のプロセススケジューラ
JP2001117786A (ja) * 1999-10-19 2001-04-27 Nec Corp プロセススケジューリング装置およびプロセススケジューリング方法
JP2007317171A (ja) * 2006-04-27 2007-12-06 Matsushita Electric Ind Co Ltd マルチスレッド計算機システム、マルチスレッド実行制御方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0954699A (ja) * 1995-08-11 1997-02-25 Fujitsu Ltd 計算機のプロセススケジューラ
JP2001117786A (ja) * 1999-10-19 2001-04-27 Nec Corp プロセススケジューリング装置およびプロセススケジューリング方法
JP2007317171A (ja) * 2006-04-27 2007-12-06 Matsushita Electric Ind Co Ltd マルチスレッド計算機システム、マルチスレッド実行制御方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSNG200100215007; 北口 修一: 'ユーザレベルスレッドライブラリPPLにおける柔軟なスケジューリング機構' 情報処理学会論文誌 第40巻,第6号, 19990615, pp.2585-2595, 社団法人情報処理学会 *
JPN6014026970; 北口 修一: 'ユーザレベルスレッドライブラリPPLにおける柔軟なスケジューリング機構' 情報処理学会論文誌 第40巻,第6号, 19990615, pp.2585-2595, 社団法人情報処理学会 *

Also Published As

Publication number Publication date
JP5632754B2 (ja) 2014-11-26

Similar Documents

Publication Publication Date Title
JP6092718B2 (ja) 運用計画立案支援システム及び方法
CN106775977B (zh) 任务调度方法、装置及系统
US9262220B2 (en) Scheduling workloads and making provision decisions of computer resources in a computing environment
US9250960B2 (en) Planning execution of tasks with dependency resolution
WO2017193737A1 (zh) 一种软件测试方法及系统
US9483247B2 (en) Automated software maintenance based on forecast usage
Reuther et al. Scheduler technologies in support of high performance data analysis
WO2016061935A1 (zh) 一种资源调度方法、装置及计算机存储介质
US20160034315A1 (en) Information processing system, deployment method, processing device, and deployment device
TWI459223B (zh) 海量資料索引建立系統及方法
WO2016074130A1 (zh) 一种系统调用命令的批处理方法及装置
JP2008090507A (ja) ジョブ実行のスケジューリングプログラム、ジョブ実行のスケジューリング方法、ジョブ実行のスケジューリング装置
US20180081788A1 (en) Debugging a transaction in a replica execution environment
US11157273B2 (en) Scaled agile framework program board
US11327788B2 (en) Methods for scheduling multiple batches of concurrent jobs
CN104700255B (zh) 多进程处理方法、装置和系统
US9170839B2 (en) Method for job scheduling with prediction of upcoming job combinations
CN113313353A (zh) 一种持续交付流水线管理方法及装置
JP5632754B2 (ja) スケジューリング方法およびスケジューリングシステム
CN113051245A (zh) 用于迁移数据的方法、装置及系统
JP4112511B2 (ja) タスク管理プログラムおよびタスク管理装置
WO2016082463A1 (zh) 一种多核处理器下的数据处理方法、装置及存储介质
Liu et al. A concurrent approach for improving the efficiency of Android CTS testing
US9870257B1 (en) Automation optimization in a command line interface
CN111797110B (zh) 一种生成调度模型的方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131024

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140617

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140701

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140825

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140916

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141010

R150 Certificate of patent or registration of utility model

Ref document number: 5632754

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees