JP5666634B2 - 分散処理システム、分散処理装置、分散処理プログラム及び分散処理方法 - Google Patents
分散処理システム、分散処理装置、分散処理プログラム及び分散処理方法 Download PDFInfo
- Publication number
- JP5666634B2 JP5666634B2 JP2013024146A JP2013024146A JP5666634B2 JP 5666634 B2 JP5666634 B2 JP 5666634B2 JP 2013024146 A JP2013024146 A JP 2013024146A JP 2013024146 A JP2013024146 A JP 2013024146A JP 5666634 B2 JP5666634 B2 JP 5666634B2
- Authority
- JP
- Japan
- Prior art keywords
- processing
- external
- job
- external command
- execution means
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000000034 method Methods 0.000 claims description 47
- 230000008569 process Effects 0.000 claims description 43
- 230000006870 function Effects 0.000 description 92
- 238000010586 diagram Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Stored Programmes (AREA)
Description
11…入力部
12…Master機能部
121…実行連携部
13…データ取得部
14…出力部
15…キューDB
16…設定ファイル
2−1,・・・,2−N…Worker機能部
21…コマンド実行部
3…コマンド処理部
100…ネットワーク
Claims (6)
- 管理装置と複数の処理装置を備え、前記管理装置が受け付けたジョブに対応する処理を前記複数の処理装置それぞれに分割して割り当ててジョブを実行する分散処理システムであって、
前記管理装置は、
ジョブに応じて必要な外部コマンドの情報と前記処理装置毎に実行可能な外部コマンドの一覧を記載した設定ファイルと、
受け付けたジョブに応じた外部コマンドの情報を前記設定ファイルから取得するコマンド取得手段と、
前記外部コマンドの一覧に基づいて処理を割り当てる前記処理装置を決めて、前記外部コマンドの情報を当該処理装置に送信して処理を割り当てる割当手段と、を有し、
前記処理装置は、
前記外部コマンドの情報を受信し、当該外部コマンドの情報が示す外部コマンドを外部の処理手段に実行させて結果を受信する実行手段を有すること
を特徴とする分散処理システム。 - 前記管理装置は、
受け付けたジョブを一時的に保持するキューを有し、
前記コマンド取得手段は、前記処理装置が処理可能な場合に、前記キューからジョブを取得することを特徴とする請求項1記載の分散処理システム。 - 前記割当手段は、前記複数の処理装置毎に異なる処理を割り当てることを特徴とする請求項1又は2記載の分散処理システム。
- 受け付けたジョブに対応する処理を分割して複数の実行手段で実行する分散処理装置であって、
ジョブに応じて必要な外部コマンドの情報と前記実行手段毎に実行可能な外部コマンドの一覧を記載した設定ファイルと、
受け付けたジョブに応じた外部コマンドの情報を前記設定ファイルから取得するコマンド取得手段と、
前記外部コマンドの一覧に基づいて処理を割り当てる前記実行手段を決めて、前記外部コマンドの情報を当該実行手段に送信して処理を割り当てる割当手段と、
前記外部コマンドの情報を受信し、当該外部コマンドの情報が示す外部コマンドを外部の処理手段に実行させて結果を受信する複数の実行手段と、
を有することを特徴とする分散処理装置。 - 受け付けたジョブに対応する処理を分割して複数の実行手段で実行する分散処理プログラムであって、
受け付けたジョブに応じた外部コマンドの情報をジョブに応じて必要な外部コマンドの情報と前記実行手段毎に実行可能な外部コマンドの一覧を記載した設定ファイルから取得する処理と、
前記外部コマンドの一覧に基づいて処理を割り当てる前記実行手段を決めて、前記外部コマンドの情報を当該実行手段に送信して処理を割り当てる処理と、
前記実行手段による、前記外部コマンドの情報を受信し、当該外部コマンドの情報が示す外部コマンドを外部の処理手段に実行させて結果を受信する処理と、をコンピュータに実行させ、
前記複数の実行手段により、前記外部コマンドを外部の処理手段に実行させて結果を受信する処理を並列して実行させることを特徴とする分散処理プログラム。 - 受け付けたジョブに対応する処理を分割して複数の実行手段で実行する分散処理方法であって、
受け付けたジョブに応じた外部コマンドの情報をジョブに応じて必要な外部コマンドの情報と前記実行手段毎に実行可能な外部コマンドの一覧を記載した設定ファイルから取得するステップと、
前記外部コマンドの一覧に基づいて処理を割り当てる前記実行手段を決めて、前記外部コマンドの情報を当該実行手段に送信して処理を割り当てるステップと、
前記実行手段による、前記外部コマンドの情報を受信し、当該外部コマンドの情報が示す外部コマンドを外部の処理手段に実行させて結果を受信するステップと、を有し、
前記複数の実行手段により、前記外部コマンドを外部の処理手段に実行させて結果を受信するステップは並列して実行させることを特徴とする分散処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013024146A JP5666634B2 (ja) | 2013-02-12 | 2013-02-12 | 分散処理システム、分散処理装置、分散処理プログラム及び分散処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013024146A JP5666634B2 (ja) | 2013-02-12 | 2013-02-12 | 分散処理システム、分散処理装置、分散処理プログラム及び分散処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014153982A JP2014153982A (ja) | 2014-08-25 |
JP5666634B2 true JP5666634B2 (ja) | 2015-02-12 |
Family
ID=51575777
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013024146A Active JP5666634B2 (ja) | 2013-02-12 | 2013-02-12 | 分散処理システム、分散処理装置、分散処理プログラム及び分散処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5666634B2 (ja) |
-
2013
- 2013-02-12 JP JP2013024146A patent/JP5666634B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014153982A (ja) | 2014-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8863138B2 (en) | Application service performance in cloud computing | |
CN108776934B (zh) | 分布式数据计算方法、装置、计算机设备及可读存储介质 | |
US11080090B2 (en) | Method and system for scalable job processing | |
CN109729106B (zh) | 处理计算任务的方法、系统和计算机程序产品 | |
US9244737B2 (en) | Data transfer control method of parallel distributed processing system, parallel distributed processing system, and recording medium | |
KR101471749B1 (ko) | 클라우드 서비스의 가상자원 할당을 위한 퍼지 로직 기반의 자원평가 장치 및 방법 | |
JP2012064070A (ja) | クラウドコンピューティングシステム、クラウドコンピューティングシステムの制御方法、および管理アプリケーション | |
US10944683B1 (en) | Hybrid queue system for request throttling | |
US11250360B2 (en) | Methods and systems for estimating lag times in a cloud computing infrastructure | |
CN112087520B (zh) | 数据处理方法、装置、设备及计算机可读存储介质 | |
KR20190081306A (ko) | 빅데이터 분석 소프트웨어에 대한 자원 할당 방법, 상기 방법을 이용하는 가상화 자원 할당 장치 | |
JP2006067401A (ja) | 計算機システム及び計算機システムの帯域制御方法 | |
JP2014102740A (ja) | 情報処理方法、プログラム、情報処理装置、及び情報処理システム。 | |
KR101335711B1 (ko) | 서버, 연산 처리 방법 및 연산 처리 시스템 | |
US8775767B2 (en) | Method and system for allocating memory to a pipeline | |
JP6748359B2 (ja) | 接続数制御プログラム、振り分け装置および接続数制御方法 | |
US20160308991A1 (en) | Analytics system architecture | |
JP5666634B2 (ja) | 分散処理システム、分散処理装置、分散処理プログラム及び分散処理方法 | |
US9628401B2 (en) | Software product instance placement | |
JP2005234658A (ja) | タスク管理プログラムおよびタスク管理装置 | |
JP2018041190A (ja) | 情報処理装置、制御方法およびプログラム | |
JP2016045802A (ja) | 情報処理装置、負荷分散システム、負荷分散方法、及び、プログラム | |
JP5541289B2 (ja) | 仮想サーバシステム、その自律制御サーバ、そのデータ処理方法およびコンピュータプログラム | |
WO2013065151A1 (ja) | 計算機システム、データ転送方法、および、データ転送プログラム | |
KR102662496B1 (ko) | 멀티 gpu를 사용한 다수의 딥러닝 모델 기반 추론 응답 생성을 위한 배치 스케줄링 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140603 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140804 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141118 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141210 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5666634 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |