JP2018072907A5 - - Google Patents

Download PDF

Info

Publication number
JP2018072907A5
JP2018072907A5 JP2016208345A JP2016208345A JP2018072907A5 JP 2018072907 A5 JP2018072907 A5 JP 2018072907A5 JP 2016208345 A JP2016208345 A JP 2016208345A JP 2016208345 A JP2016208345 A JP 2016208345A JP 2018072907 A5 JP2018072907 A5 JP 2018072907A5
Authority
JP
Japan
Prior art keywords
application program
processing
management server
execution
parallelism
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016208345A
Other languages
Japanese (ja)
Other versions
JP6796994B2 (en
JP2018072907A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2016208345A priority Critical patent/JP6796994B2/en
Priority claimed from JP2016208345A external-priority patent/JP6796994B2/en
Priority to PCT/JP2017/034689 priority patent/WO2018079162A1/en
Publication of JP2018072907A publication Critical patent/JP2018072907A/en
Publication of JP2018072907A5 publication Critical patent/JP2018072907A5/ja
Application granted granted Critical
Publication of JP6796994B2 publication Critical patent/JP6796994B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (13)

管理サーバと、複数の処理サーバを有する情報処理システムであって、
前記処理サーバはそれぞれ、アプリケーションプログラムを実行するための1以上のプロセッサを有し、
前記管理サーバは、それぞれの前記処理サーバが有する計算機リソースの使用状態を管理しており、
前記管理サーバは、ユーザから前記アプリケーションプログラムの並列度を受領すると、
複数の前記処理サーバの有する使用可能な計算機リソースの中から、前記並列度で前記アプリケーションプログラムを実行するために必要な計算機リソースを確保し、
前記確保された計算機リソースを有する前記処理サーバに、前記アプリケーションプログラムを配置し、前記アプリケーションプログラムを並列実行させる、
ことを特徴とする情報処理システム。
An information processing system having a management server and a plurality of processing servers,
The processing servers each have one or more processors for executing application programs;
The management server manages the use state of computer resources that each of the processing servers has,
When the management server receives the degree of parallelism of the application program from the user,
Among the available computer resources possessed by the plurality of processing servers, the computer resources necessary for executing the application program with the degree of parallelism are secured,
Arranging the application program on the processing server having the secured computer resource and executing the application program in parallel;
An information processing system characterized by
前記管理サーバは、前記アプリケーションプログラムを並列実行させる時、
前記確保された計算機リソースを有する前記処理サーバのうち1つを選定し、
選定された前記処理サーバに対して、前記アプリケーションプログラムの実行を依頼する、
ことを特徴とする、請求項1に記載の情報処理システム。
When the management server executes the application programs in parallel,
Select one of the processing servers having the secured computer resources;
Requesting the selected processing server to execute the application program;
The information processing system according to claim 1, characterized in that:
前記アプリケーションプログラムは前記プロセッサに、前記ユーザから受領した入力データの処理を行わせるためのプログラムであって、
前記管理サーバは、前記ユーザから前記入力データと並列度(n)を受け取ると、1つの前記プロセッサが前記アプリケーションプログラムを実行することによって前記入力データに係る処理を実行した場合の実行時間と、n個の前記プロセッサで前記入力データに係る処理を並列実行した場合の実行時間と、を算出して前記ユーザに提示する、
ことを特徴とする、請求項1および請求項2のいずれかに記載の情報処理システム。
The application program is a program for causing the processor to process input data received from the user,
When the management server receives the degree of parallelism (n) with the input data from the user, an execution time when one processor executes a process related to the input data by executing the application program, n Calculating and presenting to the user an execution time when the processing related to the input data is executed in parallel by the plurality of processors.
The information processing system according to any one of claims 1 and 2, characterized in that:
前記管理サーバは、前記プロセッサが前記アプリケーションプログラムを実行することによって前記入力データに係る処理を実行した場合の実行時間を算出するための計算ロジックを、前記アプリケーションプログラムごとに保持している、
ことを特徴とする、請求項3に記載の情報処理システム。
The management server holds, for each application program, calculation logic for calculating an execution time when the processor executes a process related to the input data by executing the application program.
The information processing system according to claim 3, characterized in that.
前記入力データに係る処理は、第1の処理と第2の処理を含んでおり、
前記計算ロジックは、前記第1の処理の実行時間を算出するための第1の計算ロジックと前記第2の処理の実行時間を算出するための第2の計算ロジックとを含んでいる、
ことを特徴とする、請求項4に記載の情報処理システム。
The process according to the input data includes a first process and a second process,
The calculation logic includes a first calculation logic for calculating an execution time of the first process and a second calculation logic for calculating an execution time of the second process.
The information processing system according to claim 4, characterized in that.
前記管理サーバは、前記第1の処理の並列度と前記第2の処理の並列度とを受け付け可能に構成されており、
前記管理サーバは、前記第1の処理の並列度(N)と前記第2の処理の並列度(M)とを受け取ると、前記計算ロジックを用いて、
N個の前記プロセッサで前記第1の処理を実行した場合の第1実行時間と、M個の前記プロセッサで前記第2の処理を実行した場合の第2実行時間と、前記第1実行時間と前記第2実行時間の合計と、を算出して前記ユーザに提示する、
ことを特徴とする、請求項5に記載の情報処理システム。
The management server is configured to be able to receive the degree of parallelism of the first process and the degree of parallelism of the second process,
When the management server receives the degree of parallelism (N) of the first process and the degree of parallelism (M) of the second process, using the calculation logic,
A first execution time when the first process is executed by N processors, a second execution time when the second process is executed by M processors, and the first execution time Calculating the sum of the second execution times and presenting the calculated result to the user;
The information processing system according to claim 5, characterized in that:
前記管理サーバは、前記並列度と、前記入力データに係る処理を並列実行した場合の実行時間とから、前記情報処理システムの使用料金を算出して前記ユーザに提示する、
ことを特徴とする、請求項3ないし請求項6のいずれかに記載の情報処理システム。
The management server calculates a charge for use of the information processing system from the degree of parallelism and an execution time in parallel processing of the input data, and presents it to the user.
The information processing system according to any one of claims 3 to 6 , characterized in that:
前記管理サーバは、前記計算機リソースの使用状態を管理するための管理情報記憶部を有し、
前記管理サーバは前記管理情報記憶部に、それぞれの前記処理サーバが有するプロセッサ数と、前記プロセッサのうち前記アプリケーションプログラムの実行で使用中のプロセッサ数とを保持しており、
前記管理サーバは、前記アプリケーションプログラムの並列度を受領すると、
前記管理情報記憶部を参照することで、複数の前記処理サーバの中から未使用の前記プロセッサを有する前記処理サーバを、前記並列度を充足するために必要な数だけ確保し、前記管理情報記憶部に、前記アプリケーションプログラムの実行で使用する前記処理サーバと前記プロセッサの数についての情報を、前記アプリケーションプログラムの名称と対応付けて記録し、
前記確保された前記処理サーバに、前記アプリケーションプログラムの実行を依頼する、
ことを特徴とする、請求項1ないし請求項7のいずれかに記載の情報処理システム。
The management server has a management information storage unit for managing the usage state of the computer resource,
The management server holds, in the management information storage unit, the number of processors possessed by each of the processing servers, and the number of processors being used for execution of the application program among the processors.
When the management server receives the degree of parallelism of the application program,
By referring to the management information storage unit, the number of processing servers having the unused processor among the plurality of processing servers is secured by the number necessary to satisfy the degree of parallelism, and the management information storage is stored. Storing information on the number of the processing server and the number of processors used in the execution of the application program in association with the name of the application program;
Request the execution of the application program from the secured processing server
The information processing system according to any one of claims 1 to 7 , characterized in that:
前記管理サーバは、前記処理サーバから前記アプリケーションプログラムの実行が終了した旨を受領すると、
前記アプリケーションプログラムを実行していた各処理サーバに、前記アプリケーションプログラムのアンインストールを実行させ、
前記アプリケーションプログラムの実行に使用していた前記処理サーバと前記プロセッサの数についての情報を前記管理情報記憶部から削除する、
ことを特徴とする、請求項8に記載の情報処理システム。
When the management server receives from the processing server that execution of the application program has been completed,
Having each processing server that was executing the application program uninstall the application program;
Deleting information on the number of the processing server and the number of processors used for executing the application program from the management information storage unit;
The information processing system according to claim 8, characterized in that.
前記アプリケーションプログラムは、
入力データに係る処理を前記プロセッサに実行させるプログラムコードである実行部と、
複数の前記プロセッサに前記実行部の実行を指示させるためのプログラムコードである振分部と、を有し、
前記選定された前記処理サーバのプロセッサは前記振分部を実行することで、前記複数の前記処理サーバに、前記実行部を実行させるためのメッセージを発行し、
前記メッセージを受領したそれぞれの前記処理サーバが前記実行部を実行することで、並列に前記入力データに係る処理を実行する、
ことを特徴とする、請求項2ないし請求項9のいずれかに記載の情報処理システム。
The application program is
An execution unit that is a program code that causes the processor to execute a process related to input data;
And a distribution unit which is a program code for instructing the plurality of processors to execute the execution unit,
The processor of the selected processing server executes the distribution unit to issue a message for causing the plurality of processing servers to execute the execution unit.
Each processing server that has received the message executes the processing related to the input data in parallel by executing the execution unit.
The information processing system according to any one of claims 2 to 9 , characterized in that.
管理サーバと、アプリケーションプログラムを実行するための1以上のプロセッサを備えた処理サーバを複数有する情報処理システムの制御方法であって、
a) ユーザが前記管理サーバに、入力データと、前記アプリケーションプログラムの並列度(n)を送信する工程と、
b) 前記管理サーバが、1つの前記プロセッサが前記アプリケーションプログラムを実行することによって前記入力データに係る処理を実行した場合の実行時間と、n個の前記プロセッサで前記アプリケーションプログラムを実行することによって前記入力データに係る処理を並列実行した場合の実行時間である並列処理実行時間と、を算出して前記ユーザに提示する工程と、
c) 前記ユーザが、前記並列処理実行時間に基づいて、前記アプリケーションプログラムを実行させる時の並列度である実行時並列度を決定する工程と、
d) 前記管理サーバが前記ユーザから、前記実行時並列度を受領する工程と、
e) 前記管理サーバが、複数の前記処理サーバの有する使用可能な計算機リソースの中から、前記実行時並列度で前記アプリケーションプログラムを実行するために必要な計算機リソースを確保する工程と、
f) 前記管理サーバが、前記確保された計算機リソースを有する前記処理サーバに前記アプリケーションプログラムを配置する工程と、
g) 前記管理サーバが前記処理サーバに、前記アプリケーションプログラムを並列実行させる工程と、
を実行することを特徴とする情報処理システムの制御方法。
A control method of an information processing system including a plurality of management servers and a plurality of processing servers provided with one or more processors for executing application programs,
a) the user transmitting input data and the degree of parallelism (n) of the application program to the management server;
b) execution time when the management server executes a process related to the input data by one processor executing the application program, and n the processor executes the application program Calculating a parallel processing execution time, which is an execution time when executing processing relating to input data in parallel, and presenting the same to the user;
c) determining a run-time parallelism, which is a degree of parallelism at which the user executes the application program, based on the parallel processing execution time;
d) the management server receives the run-time parallelism from the user;
e) securing the computer resources required to execute the application program with the degree of parallel execution among the available computer resources of the plurality of processing servers, and e) the management server;
f) placing the application program on the processing server having the secured computer resource, the management server;
g) the management server causing the processing server to execute the application program in parallel;
And controlling the information processing system.
前記工程g)は、
前記確保された計算機リソースを有する前記処理サーバのうち1つを選定する工程と、
選定された前記処理サーバに対して、前記管理サーバが前記アプリケーションプログラムの実行を依頼する工程と、
を含むことを特徴とする、請求項11に記載の情報処理システムの制御方法。
Said step g)
Selecting one of the processing servers having the secured computer resources;
A step of the management server requesting execution of the application program to the selected processing server;
The control method of the information processing system according to claim 11, characterized by including:
前記方法はさらに、
h) 前記処理サーバでの前記アプリケーションプログラムの実行が終了すると、前記アプリケーションプログラムを実行していた各処理サーバに、前記アプリケーションプログラムのアンインストールを実行させる工程、
を含むことを特徴とする、請求項11および請求項12のいずれかに記載の情報処理システムの制御方法。
The method further comprises
h) causing each processing server that was executing the application program to execute uninstallation of the application program when the execution of the application program on the processing server is completed,
The control method of the information processing system according to any one of claims 11 and 12 , characterized by including:
JP2016208345A 2016-10-25 2016-10-25 Information processing system Active JP6796994B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016208345A JP6796994B2 (en) 2016-10-25 2016-10-25 Information processing system
PCT/JP2017/034689 WO2018079162A1 (en) 2016-10-25 2017-09-26 Information processing system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016208345A JP6796994B2 (en) 2016-10-25 2016-10-25 Information processing system

Publications (3)

Publication Number Publication Date
JP2018072907A JP2018072907A (en) 2018-05-10
JP2018072907A5 true JP2018072907A5 (en) 2019-07-18
JP6796994B2 JP6796994B2 (en) 2020-12-09

Family

ID=62024696

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016208345A Active JP6796994B2 (en) 2016-10-25 2016-10-25 Information processing system

Country Status (2)

Country Link
JP (1) JP6796994B2 (en)
WO (1) WO2018079162A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7471091B2 (en) 2020-01-22 2024-04-19 株式会社日立製作所 JOB EXECUTION SUPPORT SYSTEM AND JOB EXECUTION SUPPORT METHOD
JP7421606B1 (en) 2022-07-13 2024-01-24 株式会社三菱Ufj銀行 Resource application system
JP7340663B1 (en) 2022-07-13 2023-09-07 株式会社三菱Ufj銀行 Resource application system
JP7318084B1 (en) 2022-09-20 2023-07-31 株式会社三井E&S Control device and control program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6241300B2 (en) * 2014-02-04 2017-12-06 富士通株式会社 Job scheduling apparatus, job scheduling method, and job scheduling program
WO2016079802A1 (en) * 2014-11-18 2016-05-26 株式会社日立製作所 Batch processing system and control method therefor

Similar Documents

Publication Publication Date Title
JP6672456B2 (en) Stream-based accelerator processing of computation graphs
US9262220B2 (en) Scheduling workloads and making provision decisions of computer resources in a computing environment
US10740128B2 (en) Selecting a cloud from a plurality of clouds for a workload
US9262228B2 (en) Distributed workflow in loosely coupled computing
US9529630B1 (en) Cloud computing platform architecture
US9081618B2 (en) Method and apparatus for the scheduling of computing tasks
US10554575B2 (en) Equitable sharing of system resources in workflow execution
US10162656B2 (en) Minimizing guest operating system licensing costs in a processor based licensing model in a virtual datacenter
JP2018072907A5 (en)
US11816464B1 (en) Cloud computing platform architecture
JP2016511489A5 (en)
JP2014194820A5 (en)
US20150180950A1 (en) Test management using distributed computing
Zeng et al. Fiu-miner: a fast, integrated, and user-friendly system for data mining in distributed environment
US20190146847A1 (en) Dynamic distributed resource management
US9971971B2 (en) Computing instance placement using estimated launch times
US20170351868A1 (en) Choreographed distributed execution of programs
Nguyen et al. Koha: Building a kafka-based distributed queue system on the fly in a hadoop cluster
WO2018079162A1 (en) Information processing system
US10917458B2 (en) Message broker configuration
US8863133B2 (en) License management in a cluster environment
Nino-Ruiz et al. Elastic scaling of e-infrastructures to support data-intensive research collaborations
US20210160138A1 (en) Dynamic network of supercomputing resources with unified management interface
Kuzmanovska et al. Dynamically scheduling a component-based framework in clusters
Geetha et al. Hadoop scheduler with deadline constraint