JP6524875B2 - 処理設定検索装置、方法及びプログラム - Google Patents
処理設定検索装置、方法及びプログラム Download PDFInfo
- Publication number
- JP6524875B2 JP6524875B2 JP2015193035A JP2015193035A JP6524875B2 JP 6524875 B2 JP6524875 B2 JP 6524875B2 JP 2015193035 A JP2015193035 A JP 2015193035A JP 2015193035 A JP2015193035 A JP 2015193035A JP 6524875 B2 JP6524875 B2 JP 6524875B2
- Authority
- JP
- Japan
- Prior art keywords
- load
- predetermined
- processing
- information
- setting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Description
実行環境において所定の負荷を発生させる負荷発生部と、
前記所定の負荷を発生させた状態での所定の処理設定による処理の試行における所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて記憶する試行情報記憶部と、
前記実行環境における負荷情報を取得する負荷情報取得部と、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する検索部と、
を備える。
実行環境において所定の負荷を発生させ、
前記所定の負荷を発生させた状態で所定の処理設定による処理を試行し、
前記試行による所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて試行情報記憶部に記憶し、
前記実行環境における負荷情報を取得し、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する。
実行環境において所定の負荷を発生させる処理と、
前記所定の負荷を発生させた状態で所定の処理設定による処理を試行する処理と、
前記試行による所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて試行情報記憶部に記憶する処理と、
前記実行環境における負荷情報を取得する処理と、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する処理と、
をコンピュータに実行させる。
図1は、本発明の実施の形態1にかかる処理設定検索装置100の構成を示すブロック図である。処理設定検索装置100は、所定の実行環境における負荷に応じて、所定のプログラム等による処理に最適な処理設定を検索するための情報処理装置である。ここで、実行環境とは、例えば、プロセッサ、メモリ、ハードディスク等のリソースを有する計算機等であるが、これに限定されない。
本発明の実施の形態2は、上述した実施の形態1の一実施例である。まず、図3を用いて、本発明の実施の形態2にかかるデータ処理システム200の構成について説明する。データ処理システム200は、処理対象データを記録した入力ファイルを入力し、当該データを対象とするソート処理を行うシステムである。
入力ファイルサイズ:1GB、メモリ使用量:0GB、メモリ使用率:20%
入力ファイルサイズ:1GB、メモリ使用量:1GB、メモリ使用率:20%
入力ファイルサイズ:1GB、メモリ使用量:2GB、メモリ使用率:20%
入力ファイルサイズ:1GB、メモリ使用量:3GB、メモリ使用率:20%
入力ファイルサイズ:1GB、メモリ使用量:0GB、メモリ使用率:40%
入力ファイルサイズ:1GB、メモリ使用量:1GB、メモリ使用率:40%
・・・
入力ファイルサイズ:1GB、メモリ使用量:3GB、メモリ使用率:80%
本発明の実施の形態3は、上述した実施の形態2の変形例である。本発明の実施の形態3は、実運用段階におけるソート部22による現在の負荷情報の取得を複数回行うものである。尚、本発明の実施の形態3にかかるデータ処理システムの構成は、上述したデータ処理システム200と同等であるため、図示及び重複する説明は省略する。
上述した本発明の各実施の形態により、ユーザによって異なるデータ特性や実行環境において、より速いソートを含む任意の処理を実現するような設定やオプション指定を自動で見つけ出し、高速で実行できる。
(付記1)
実行環境において所定の負荷を発生させる負荷発生部と、
前記所定の負荷を発生させた状態での所定の処理設定による処理の試行における所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて記憶する試行情報記憶部と、
前記実行環境における負荷情報を取得する負荷情報取得部と、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する検索部と、
を備える処理設定検索装置。
(付記2)
前記負荷情報取得部は、
前記実行環境において、前記処理の実行による負荷を含まない負荷を前記負荷情報として取得する
付記1に記載の処理設定検索装置。
(付記3)
前記検索された処理設定による前記処理の実行後に、前記処理の実行時における当該処理以外の負荷を負荷履歴情報として記憶する負荷情報記憶部をさらに備え、
前記負荷情報取得部は、前記検索時に、前記負荷情報記憶部内の前記負荷履歴情報を前記負荷情報として取得する
付記1又は2に記載の処理設定検索装置。
(付記4)
前記負荷情報取得部は、
前記検索された処理設定による前記処理の実行前後の複数の前記負荷情報を前記実行環境から取得し、
前記負荷情報記憶部は、
前記取得された複数の前記負荷情報に所定の統計処理を行って前記負荷履歴情報を更新する
付記3に記載の処理設定検索装置。
(付記5)
前記負荷発生部は、指定された負荷条件のうち前記実行環境における現在の負荷情報を除外した分を前記所定の負荷として疑似的に発生させる
付記1乃至4のいずれか1項に記載の処理設定検索装置。
(付記6)
前記負荷発生部は、前記処理の試行中に、当該処理以外のプロセスによる負荷の変動に応じて、前記疑似的に発生させた負荷を調整する
付記5に記載の処理設定検索装置。
(付記7)
前記処理設定は、前記処理の実行時に割り当てるメモリ量であり、
前記負荷は、前記処理以外のプロセスにより使用されるメモリ量である
付記1乃至6のいずれか1項に記載の処理設定検索装置。
(付記8)
実行環境において所定の負荷を発生させ、
前記所定の負荷を発生させた状態で所定の処理設定による処理を試行し、
前記試行による所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて試行情報記憶部に記憶し、
前記実行環境における負荷情報を取得し、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する
処理設定検索方法。
(付記9)
実行環境において所定の負荷を発生させる処理と、
前記所定の負荷を発生させた状態で所定の処理設定による処理を試行する処理と、
前記試行による所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて試行情報記憶部に記憶する処理と、
前記実行環境における負荷情報を取得する処理と、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する処理と、
をコンピュータに実行させる処理設定検索プログラム。
110 負荷発生部
120 試行情報記憶部
121 所要時間
122 負荷情報
123 処理設定
130 負荷情報取得部
140 検索部
200 データ処理システム
1 入力部
2 データ処理部
21 分析部
22 ソート部
23 情報収集部
24 環境負荷発生部
3 記憶部
31 分析結果記憶部
32 負荷情報記憶部
4 出力部
Claims (9)
- 実行環境において所定の負荷を発生させる負荷発生部と、
前記所定の負荷を発生させた状態での所定の処理設定による処理の試行における所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて記憶する試行情報記憶部と、
前記実行環境における負荷情報を取得する負荷情報取得部と、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する検索部と、
を備える処理設定検索装置。 - 前記負荷情報取得部は、
前記実行環境において、前記処理の実行による負荷を含まない負荷を前記負荷情報として取得する
請求項1に記載の処理設定検索装置。 - 前記検索された処理設定による前記処理の実行後に、前記処理の実行時における当該処理以外の負荷を負荷履歴情報として記憶する負荷情報記憶部をさらに備え、
前記負荷情報取得部は、前記検索部の2回目以降の検索時に、前記負荷情報記憶部内の前記負荷履歴情報を前記負荷情報として取得する
請求項1又は2に記載の処理設定検索装置。 - 前記負荷情報取得部は、
前記検索された処理設定による前記処理の実行前後の複数の前記負荷情報を前記実行環境から取得し、
前記負荷情報記憶部は、
前記取得された複数の前記負荷情報に所定の統計処理を行って前記負荷履歴情報を更新する
請求項3に記載の処理設定検索装置。 - 前記負荷発生部は、指定された負荷条件のうち前記実行環境における現在の負荷情報を除外した分を前記所定の負荷として疑似的に発生させる
請求項1乃至4のいずれか1項に記載の処理設定検索装置。 - 前記負荷発生部は、前記処理の試行中に、当該処理以外のプロセスによる負荷の変動に応じて、前記疑似的に発生させた負荷を調整する
請求項5に記載の処理設定検索装置。 - 前記処理設定は、前記処理の実行時に割り当てるメモリ量であり、
前記負荷は、前記処理以外のプロセスにより使用されるメモリ量である
請求項1乃至6のいずれか1項に記載の処理設定検索装置。 - 実行環境において所定の負荷を発生させ、
前記所定の負荷を発生させた状態で所定の処理設定による処理を試行し、
前記試行による所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて試行情報記憶部に記憶し、
前記実行環境における負荷情報を取得し、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する
処理設定検索方法。 - 実行環境において所定の負荷を発生させる処理と、
前記所定の負荷を発生させた状態で所定の処理設定による処理を試行する処理と、
前記試行による所要時間を、当該所定の負荷を示す負荷情報及び当該所定の処理設定と関連付けて試行情報記憶部に記憶する処理と、
前記実行環境における負荷情報を取得する処理と、
前記試行情報記憶部の中から、前記取得した負荷情報に関連付けられた処理設定のうち、前記所要時間が所定の条件を満たすものを検索する処理と、
をコンピュータに実行させる処理設定検索プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015193035A JP6524875B2 (ja) | 2015-09-30 | 2015-09-30 | 処理設定検索装置、方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015193035A JP6524875B2 (ja) | 2015-09-30 | 2015-09-30 | 処理設定検索装置、方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017068568A JP2017068568A (ja) | 2017-04-06 |
JP6524875B2 true JP6524875B2 (ja) | 2019-06-05 |
Family
ID=58494807
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015193035A Active JP6524875B2 (ja) | 2015-09-30 | 2015-09-30 | 処理設定検索装置、方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6524875B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7131005B2 (ja) * | 2018-03-22 | 2022-09-06 | 日本電気株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000066907A (ja) * | 1998-08-21 | 2000-03-03 | Matsushita Electric Ind Co Ltd | ワーストケース試験機能付きリアルタイムos |
JP5967091B2 (ja) * | 2011-08-04 | 2016-08-10 | 日本電気株式会社 | システムパラメータ設定支援システム、システムパラメータ設定支援装置のデータ処理方法、およびプログラム |
JP6287101B2 (ja) * | 2013-11-21 | 2018-03-07 | 日本電気株式会社 | データ処理システム、データ処理方法及びプログラム |
-
2015
- 2015-09-30 JP JP2015193035A patent/JP6524875B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017068568A (ja) | 2017-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11055360B2 (en) | Data write-in method and apparatus in a distributed file system | |
JP5774742B2 (ja) | データ重複除去方法及び装置 | |
CN108573355B (zh) | 模型更新后替换运行的方法、装置、及业务服务器 | |
CN109582485B (zh) | 一种配置变更异常检测方法及装置 | |
CN109343793B (zh) | 数据迁移方法及装置 | |
JP2009116380A (ja) | 仮想サーバ移動制御装置、仮想サーバ移動制御方法およびプログラム | |
EP3640813A1 (en) | Random walk method, apparatus and device, and cluster-based random walk method, apparatus and device | |
US20170329645A1 (en) | Apparatus and method for adding nodes to a computing cluster | |
CN109144715B (zh) | 一种资源优化与更新的方法、服务器及设备 | |
JP6524875B2 (ja) | 処理設定検索装置、方法及びプログラム | |
CN106570091B (zh) | 一种增强分布式集群文件系统的高可用性的方法 | |
JP2018018175A (ja) | 仮想マシン制御プログラム、仮想マシン制御方法および仮想マシン制御装置 | |
JP2014229235A (ja) | ストレージ制御装置、ストレージ制御方法およびストレージ制御プログラム | |
US10394615B2 (en) | Information processing apparatus and job management method | |
US20150095897A1 (en) | Method and apparatus for converting programs | |
US9658965B2 (en) | Cache utilization to efficiently manage a storage system | |
CN108804625B (zh) | 一种lsm树的优化方法、装置及计算机设备 | |
US20190324428A1 (en) | State identification device, state identification method and mechanical device | |
US10089151B2 (en) | Apparatus, method, and program medium for parallel-processing parameter determination | |
JP6310532B1 (ja) | 生成装置、生成方法、及び生成プログラム | |
JP6287101B2 (ja) | データ処理システム、データ処理方法及びプログラム | |
KR101507355B1 (ko) | 벡터 분류 장치 및 방법 | |
JP7131005B2 (ja) | 情報処理装置、情報処理方法、及び情報処理プログラム | |
JP2016218847A (ja) | 逐次クラスタリング装置、方法、及びプログラム | |
JP2021018711A (ja) | タスク実行管理装置、タスク実行管理方法、および、タスク実行管理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180806 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190205 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190320 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190409 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190422 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6524875 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |