JP2008027442A - サブタスク・プロセッサの分散スケジューリング - Google Patents
サブタスク・プロセッサの分散スケジューリング Download PDFInfo
- Publication number
- JP2008027442A JP2008027442A JP2007184406A JP2007184406A JP2008027442A JP 2008027442 A JP2008027442 A JP 2008027442A JP 2007184406 A JP2007184406 A JP 2007184406A JP 2007184406 A JP2007184406 A JP 2007184406A JP 2008027442 A JP2008027442 A JP 2008027442A
- Authority
- JP
- Japan
- Prior art keywords
- node
- subtask
- task
- nodes
- local node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 25
- 238000012545 processing Methods 0.000 claims description 41
- 230000005540 biological transmission Effects 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 10
- 239000007788 liquid Substances 0.000 claims description 5
- 238000003672 processing method Methods 0.000 claims 21
- 230000000717 retained effect Effects 0.000 claims 1
- 238000004364 calculation method Methods 0.000 abstract description 3
- 230000002085 persistent effect Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 9
- 238000012546 transfer Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 239000006185 dispersion Substances 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002829 reductive effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002195 synergetic effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/5044—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering hardware capabilities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/50—Indexing scheme relating to G06F9/50
- G06F2209/5017—Task decomposition
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multi Processors (AREA)
- Information Transfer Between Computers (AREA)
Abstract
【解決手段】ローカル・ノードにタスクを生成するステップと処理タスクを1以上のサブタスクに分割するステップと、ローカル・ノードからアクセス可能なノード群においてサブタスク群を実行させるのに関連するパラメータの少なくとも一部に基づいて、前記1以上のサブタスクを実行するための最適ノード数xを判定するステップと、xに基づいて、ローカル・ノードで前記タスクを実行するか、ローカル・ノードからアクセス可能な1以上の分散ノードに前記タスクを分散させるかを判定するステップと、を備える。
【選択図】図2
Description
Lisa Cingiser et al.,、「Global Scheduling and Binding in a Real-Time Embedded Distributed System」、 Proceedings of the Real-Time & Embedded DOC 、2002.7、[online]、インターネット<URL:http://rtdoc.cs.uri.edu/downloads/dre_workshop02.pdf>
以下の記述においては、例示のために多くの特定的な詳細を含むけれども、本発明の範囲内において、以下の詳細について多くの変形や変更が可能であることは、当業者には理解されるところである。したがって、下記に示す本発明の実施例は、請求項に記載の発明の一般性を失わせるものでも制約を設けるものでもない。
ET:1つのノードにおける全タスクの実行時間を示す。
TS:サブタスク群で分割されるべきデータの総サイズを示す。
CS:各サブタスクが必要とする定数サイズのデータ(たとえば、コードのサイズ)を示す。
RS:タスク群が生成する出力データの総サイズを示す。
BWo,BWi:それぞれ、全プロセッサ・ノードについての出力および入力の帯域幅を示す。
RTT:プロセッサ・ノードに対するラウンドトリップメッセージ時間(往復遅延時間)を示す。
これらの値は、ブロック202のパラメータ収集時に取得され、パラメータテーブル205に保持されてもよい。
ET=5秒
TS=1KByte
CS=1KByte
RS=10KByte
BWo=30KByte/s
BWi=400KByte/s
RTT=0.2秒
ET=5秒
TS=100KByte
CS=0KByte
RS=10KByte
BWo=30KByte/s
BWi=400KByte/s
RTT=0.2秒
Claims (36)
- ローカル・ノードにタスクを生成するステップと、
前記タスクを1以上のサブタスクに分割するステップと、
ローカル・ノードからアクセス可能なノード群においてサブタスク群を実行させるのに関連するパラメータの少なくとも一部に基づいて、前記1以上のサブタスクを実行するための最適ノード数xを判定するステップと、
xに基づいて、ローカル・ノードで前記タスクを実行するか、ローカル・ノードからアクセス可能な1以上の分散ノードに前記タスクを分散させるかを判定するステップと、
を備えることを特徴とするプロセッサにて実行可能なタスクの処理方法。 - サブタスク群をxノードに分散させて処理させるステップ、を更に備えることを特徴とする請求項1に記載の処理方法。
- xノードからサブタスクの出力データを取得するステップ、を更に備えることを特徴とする請求項2に記載の処理方法。
- サブタスク群の実行に関連する前記パラメータを収集するステップ、を更に備えることを特徴とする請求項1に記載の処理方法。
- ローカル・プロセッサによりアクセス可能なデータ記録媒体に前記パラメータを記録するステップ、を更に備えることを特徴とする請求項4に記載の処理方法。
- 前記パラメータは、利用可能ノード数、前記ローカル・ノードおよび1以上の分散ノード間におけるデータ伝送率、前記ローカル・ノードおよび1以上の分散ノード間におけるラウンドトリップ時間、サブタスクのプロセッサ・サイクル数、サブタスクが必要とするメモリ領域の大きさ、サブタスクが必要とするストレージ領域の大きさ、および、サブタスクの関連データの転送において利用可能なネットワーク帯域幅、のうちの1以上のを含むことを特徴とする請求項4に記載の処理方法。
- 前記タスクの実効実行時間(EET:Effective Execution Time)の最低値に基づいて、前記最適ノード数xを判定することを特徴とする請求項1に記載の処理方法。
- 前記実効実効時間は、以下の式によって計算され、
ここで、ETは、1つのノードにおける全サブタスクの実行時間、
TSは、サブタスク群で分割されるべきデータの総サイズ、
CSは、各サブタスクが必要とする定数サイズのデータ、
RSは、タスク群が生成する出力データの総サイズ、
BWo、BWiは、それぞれ、全プロセッサ・ノードについての出力および入力の帯域幅、
RTTは、前記ローカル・ノードから分散ノードへのラウンドトリップメッセージ時間(往復遅延時間)、をそれぞれを示すことを特徴とする請求項7に記載の処理方法。 - 1ノードにおける全タスクの実行時間(ET:Execution Time)と前記ローカル・ノードから分散ノードへのラウンドトリップメッセージ時間(RTT:Round-trip Message Time)に基づいてxを決定することを特徴とする請求項1に記載の処理方法。
- ETとRTTとの比率に基づいてxを決定することを特徴とする請求項9に記載の処理方法。
- 追加的基準を含めて、前記最適ノード数xを決定することを特徴とする請求項1に記載の処理方法。
- 前記追加的基準として、サブタスクの実行コストの判定を含むことを特徴とする請求項11に記載の処理方法。
- サブタスクの実行コストの判定には、ノード当たりのコストの判定が含まれることを特徴とする請求項12に記載の処理方法。
- ノード当たりのコストの判定には、分散ノードの帯域幅、または、実行時間の判定が含まれることを特徴とする請求項13に記載の処理方法。
- ノード当たりのコストの決定は、ノード数x、求められるサービス品質、定数サイズデータの大きさ、伝送コスト、使用コスト、のうちの1以上に基づくことを特徴とする請求項13に記載の処理方法。
- サブタスクの実行コストの判定には、プロバイダから示されるコストのルックアップテーブルからのコスト取得処理が含まれることを特徴とする請求項13に記載の処理方法。
- サブタスクの処理コストの判定には、プロバイダが顧客に入札する流動資本市場の使用を含むことを特徴とする請求項13に記載の処理方法。
- 前記追加的基準は、1以上のユーザ定義ポリシを含むことを特徴とする請求項11に記載の処理方法。
- サブタスクは、あるタイプのサブタスクと別のタイプのサブタスクを識別し、および/または、最適ノード数xを決定するための情報を提供するサブタスクタイプによって特定されることを特徴とする請求項1に記載の処理方法。
- 1以上の分散ノードに関連づけられるキャッシュの内容を判定するステップ、を更に含むことを特徴とする請求項1に記載の処理方法。
- サブタスクを実行するのに必要なコードやノードを有するノードに対して前記サブタスクを優先的に分散させるステップ、を更に含むことを特徴とする請求項20に記載の処理方法。
- 複数の分散ノードと接続されるローカル・ノードと、
ローカル・ノードによる実行命令群であって、プロセッサにて読み取り可能な記録媒体に保持されるプロセッサ実行可能な命令群と、を備え、
前記命令群は、
ローカル・ノードにタスクを生成する1以上の命令と、
前記タスクを1以上のサブタスクに分割する1以上の命令と、
ローカル・ノードからアクセス可能なノード群においてサブタスク群を実行させるのに関連するパラメータの少なくとも一部に基づいて、前記1以上のサブタスクを実行するための最適ノード数xを判定する1以上の命令と、
xに基づいて、ローカル・ノードで前記タスクを実行するか、1以上の分散ノードに前記タスクを分散させるかを判定する1以上の命令と、
を含むことを特徴とする複数の分散ノード群に処理を分散させるシステム。 - 前記ローカル・ノードに接続されるメモリ、を更に備えることを特徴とする請求項22に記載のシステム。
- 前記メモリに前記パラメータに関する情報を保持することを特徴とする請求項23に記載のシステム。
- 前記パラメータは、利用可能ノード数、前記ローカル・ノードおよび1以上の他ノード間におけるデータ伝送率、前記ローカル・ノードおよび1以上の他ノード間におけるラウンドトリップ時間、サブタスクのプロセッサ・サイクル数、サブタスクが必要とするメモリ領域の大きさ、サブタスクが必要とするストレージ領域の大きさ、および、サブタスクの関連データの転送において利用可能なネットワーク帯域幅、のうちの1以上を含むことを特徴とする請求項22に記載のシステム。
- 前記プロセッサにて実行可能な命令群は、更に、分散ノードから前記パラメータを収集する1以上の命令を含むことを特徴とする請求項22に記載のシステム。
- 前記ローカル・ノードに接続されるメモリ、を更に備え、
前記プロセッサにて実行可能な命令群は、前記メモリに前記パラメータを記録するの1以上の命令を含むことを特徴とする請求項26に記載のシステム。 - 前記プロセッサにて実行可能な命令群は、前記メモリの前記パラメータを更新する1以上の命令を含むことを特徴とする請求項27に記載のシステム。
- 前記プロセッサにて実行可能な命令群は、実効実行時間(EET:Effective Execution Time)の最低値に基づいて、xを決定する1以上の命令を含むことを特徴とする請求項22に記載のシステム。
- 前記実効実効時間は、以下の式によって計算され、
ここで、ETは、1つのノードにおける全サブタスクの実行時間、
TSは、サブタスク群で分割されるべきデータの総サイズ、
CSは、各サブタスクが必要とする定数サイズのデータ、
RSは、タスク群が生成する出力データの総サイズ、
BWo、BWiは、それぞれ、全プロセッサ・ノードについての出力および入力の帯域幅、
RTTは、前記ローカル・ノードから、前記ローカル・ノードによりアクセス可能なノードへのラウンドトリップメッセージ時間(往復遅延時間)、をそれぞれを示すことを特徴とする請求項29に記載のシステム。 - 1ノードにおける全タスクの実行時間(ET:Execution Time)と前記ローカル・ノードから、前記ローカル・ノードによりアクセス可能なノードへのラウンドトリップメッセージ時間(RTT:Round-trip Message Time)に基づいてxを決定することを特徴とする請求項22に記載のシステム。
- ETとRTTとの比率に基づいてxを決定することを特徴とする請求項31に記載のシステム。
- 1以上の追加的基準を含めて、xを決定することを特徴とする請求項22に記載のシステム。
- 前記追加的基準は、サブタスクの実行コスト、および/または、1以上のユーザ定義ポリシを含むことを特徴とする請求項33に記載のシステム。
- サブタスクは、あるタイプのサブタスクと別のタイプのサブタスクを識別し、および/または、最適ノード数xを決定するための情報を提供するサブタスクタイプによって特定されることを特徴とする請求項22に記載のシステム。
- プロセッサ実行可能なタスクの処理方法を実装するための命令群であって、
ローカル・ノードにタスクを生成する1以上の命令と、
前記タスクを1以上のサブタスクに分割する1以上の命令と、
ローカル・ノードにからアクセス可能なノード群においてサブタスク群を処理するのに関連するパラメータの少なくとも一部に基づいて、前記1以上のサブタスクを実行するための最適ノード数xを判定する1以上の命令と、
xに基づいて、前記ローカル・ノードで前記タスクを実行するか、前記ローカル・ノードからアクセス可能な1以上の分散ノードに前記タスクを分散させるかを判定する1以上の命令と、
を含む命令群を保持するプロセッサにて読み取り可能な記録媒体。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/459,301 US7730119B2 (en) | 2006-07-21 | 2006-07-21 | Sub-task processor distribution scheduling |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008027442A true JP2008027442A (ja) | 2008-02-07 |
JP4421637B2 JP4421637B2 (ja) | 2010-02-24 |
Family
ID=38972678
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007184406A Expired - Fee Related JP4421637B2 (ja) | 2006-07-21 | 2007-07-13 | サブタスク・プロセッサの分散スケジューリング |
Country Status (2)
Country | Link |
---|---|
US (2) | US7730119B2 (ja) |
JP (1) | JP4421637B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012023175A1 (ja) * | 2010-08-17 | 2012-02-23 | 富士通株式会社 | 並列処理制御プログラム、情報処理装置、および並列処理制御方法 |
JP2012511200A (ja) * | 2008-12-06 | 2012-05-17 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 写実的画像形成の処理負荷を分散するためのシステム及び方法 |
JP2015053686A (ja) * | 2010-03-26 | 2015-03-19 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | ネットワークリソースをリースすること |
WO2015071975A1 (ja) * | 2013-11-13 | 2015-05-21 | 株式会社日立製作所 | アプリケーション及びデータの配置管理方法、アプリケーション及びデータの配置管理システム及び記憶媒体 |
US10761888B2 (en) | 2017-08-30 | 2020-09-01 | Fujitsu Limited | Method for deploying task to node based on execution completion point, task deployment apparatus and storage medium |
Families Citing this family (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7730119B2 (en) * | 2006-07-21 | 2010-06-01 | Sony Computer Entertainment Inc. | Sub-task processor distribution scheduling |
US8112751B2 (en) * | 2007-03-01 | 2012-02-07 | Microsoft Corporation | Executing tasks through multiple processors that process different portions of a replicable task |
US20080320088A1 (en) * | 2007-06-19 | 2008-12-25 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Helping valuable message content pass apparent message filtering |
US8006175B2 (en) * | 2007-10-29 | 2011-08-23 | Microsoft Corporation | Calculation of spreadsheet data |
US8477975B2 (en) * | 2007-12-20 | 2013-07-02 | Phonak Ag | Hearing system with joint task scheduling |
US9043801B2 (en) * | 2008-01-15 | 2015-05-26 | International Business Machines Corporation | Two-tiered dynamic load balancing using sets of distributed thread pools |
WO2009113172A1 (ja) * | 2008-03-13 | 2009-09-17 | 富士通株式会社 | ジョブ割当装置、ジョブ割当装置の制御プログラム及び制御方法 |
US8201176B2 (en) * | 2008-08-06 | 2012-06-12 | International Business Machines Corporation | Detecting the starting and ending of a task when thread pooling is employed |
KR20100018289A (ko) * | 2008-08-06 | 2010-02-17 | 삼성전자주식회사 | 멀티 태스킹 성능 예측 방법 및 시스템 |
US9910708B2 (en) * | 2008-08-28 | 2018-03-06 | Red Hat, Inc. | Promotion of calculations to cloud-based computation resources |
US8661129B2 (en) * | 2008-11-05 | 2014-02-25 | Xerox Corporation | System and method for decentralized job scheduling and distributed execution in a network of multifunction devices |
US20130302644A1 (en) * | 2009-02-20 | 2013-11-14 | Nucor Corporation | Hot rolled thin cast strip product and method for making the same |
US8266289B2 (en) * | 2009-04-23 | 2012-09-11 | Microsoft Corporation | Concurrent data processing in a distributed system |
WO2011027302A1 (en) * | 2009-09-02 | 2011-03-10 | Plurality Ltd. | Associative distribution units for a high flow-rate synchronizer/scheduler |
JP2011076513A (ja) * | 2009-10-01 | 2011-04-14 | Olympus Corp | 分散処理システム |
CN102043673B (zh) * | 2009-10-21 | 2015-06-03 | Sap欧洲公司 | 并行处理中执行任务的节点数量的优化选择系统及方法 |
US8504400B2 (en) * | 2010-03-24 | 2013-08-06 | International Business Machines Corporation | Dynamically optimized distributed cloud computing-based business process management (BPM) system |
EP2580633A4 (en) * | 2010-06-11 | 2015-12-30 | Optuminsight Inc | APPARATUSES AND METHODS FOR PARALLEL ANALYTICAL PROCESSING |
JP5598229B2 (ja) * | 2010-10-01 | 2014-10-01 | 富士ゼロックス株式会社 | ジョブ分散処理システム、情報処理装置及びプログラム |
US8768748B2 (en) * | 2010-12-17 | 2014-07-01 | Verizon Patent And Licensing Inc. | Resource manager |
US8589938B2 (en) | 2011-03-03 | 2013-11-19 | International Business Machines Corporation | Composite contention aware task scheduling |
JP6138701B2 (ja) * | 2011-03-04 | 2017-05-31 | 富士通株式会社 | 分散計算方法及び分散計算システム |
US8949305B1 (en) * | 2011-07-15 | 2015-02-03 | Scale Computing, Inc. | Distributed dynamic system configuration |
CN103748559B (zh) * | 2011-08-05 | 2018-03-13 | 英特尔公司 | 利用工作需求反馈进行处理器工作划分的方法和系统 |
US9098329B1 (en) * | 2011-08-30 | 2015-08-04 | Amazon Technologies, Inc. | Managing workflows |
US10257109B2 (en) | 2012-01-18 | 2019-04-09 | International Business Machines Corporation | Cloud-based content management system |
US8902774B1 (en) * | 2012-03-28 | 2014-12-02 | Amdocs Software Systems Limited | System, method, and computer program for distributing telecommunications resources |
US8869157B2 (en) * | 2012-06-21 | 2014-10-21 | Breakingpoint Systems, Inc. | Systems and methods for distributing tasks and/or processing recources in a system |
US10095526B2 (en) * | 2012-10-12 | 2018-10-09 | Nvidia Corporation | Technique for improving performance in multi-threaded processing units |
US9152467B2 (en) * | 2013-01-18 | 2015-10-06 | Nec Laboratories America, Inc. | Method for simultaneous scheduling of processes and offloading computation on many-core coprocessors |
US9367357B2 (en) * | 2013-01-18 | 2016-06-14 | Nec Corporation | Simultaneous scheduling of processes and offloading computation on many-core coprocessors |
US20140245319A1 (en) * | 2013-02-27 | 2014-08-28 | Greenbutton Limited | Method for enabling an application to run on a cloud computing system |
US10180880B2 (en) * | 2013-07-31 | 2019-01-15 | International Business Machines Corporation | Adaptive rebuilding rates based on sampling and inference |
US9451025B2 (en) * | 2013-07-31 | 2016-09-20 | International Business Machines Corporation | Distributed storage network with alternative foster storage approaches and methods for use therewith |
US10325032B2 (en) * | 2014-02-19 | 2019-06-18 | Snowflake Inc. | Resource provisioning systems and methods |
CN103905337B (zh) * | 2014-03-31 | 2018-01-23 | 华为技术有限公司 | 一种网络资源的处理装置、方法和系统 |
KR20160003502A (ko) * | 2014-07-01 | 2016-01-11 | 삼성전자주식회사 | 병렬화 방법 및 전자 장치 |
GB2513779B (en) * | 2014-08-14 | 2015-05-13 | Imp Io Ltd | A method and system for scalable job processing |
US10509683B2 (en) * | 2015-09-25 | 2019-12-17 | Microsoft Technology Licensing, Llc | Modeling resource usage for a job |
US10554568B2 (en) * | 2015-09-25 | 2020-02-04 | Intel Corporation | Technologies for network round-trip time estimation |
WO2017106619A1 (en) * | 2015-12-18 | 2017-06-22 | Interdigital Patent Holdings, Inc. | Systems and methods associated with edge computing |
US10476322B2 (en) * | 2016-06-27 | 2019-11-12 | Abb Schweiz Ag | Electrical machine |
US10078468B2 (en) | 2016-08-18 | 2018-09-18 | International Business Machines Corporation | Slice migration in a dispersed storage network |
US10387207B2 (en) * | 2016-12-06 | 2019-08-20 | International Business Machines Corporation | Data processing |
CN108572863B (zh) * | 2017-03-13 | 2022-07-12 | 国家新闻出版广电总局广播电视卫星直播管理中心 | 分布式任务调度系统及方法 |
WO2019164644A1 (en) | 2018-02-23 | 2019-08-29 | Idac Holdings, Inc. | Device-initiated service deployment through mobile application packaging |
US10866837B2 (en) | 2018-07-30 | 2020-12-15 | Lendingclub Corporation | Distributed job framework and task queue |
US10606636B2 (en) | 2018-07-30 | 2020-03-31 | Lendingclub Corporation | Automated predictions for not-yet-completed jobs |
KR20210020570A (ko) | 2019-08-16 | 2021-02-24 | 삼성전자주식회사 | 전자 장치 및 이의 제어 방법 |
CN110532077B (zh) * | 2019-08-22 | 2021-12-07 | 腾讯科技(深圳)有限公司 | 任务处理方法、装置及存储介质 |
CN112395085B (zh) * | 2020-11-05 | 2022-10-25 | 深圳市中博科创信息技术有限公司 | 一种基于hdfs的分布式关系数据库的调度方法 |
JP2022088762A (ja) * | 2020-12-03 | 2022-06-15 | 富士通株式会社 | 情報処理装置およびジョブスケジューリング方法 |
CN113434273B (zh) * | 2021-06-29 | 2022-12-23 | 平安科技(深圳)有限公司 | 数据处理方法、装置、系统及存储介质 |
CN114020442A (zh) * | 2022-01-04 | 2022-02-08 | 连连宝(杭州)信息技术有限公司 | 一种任务处理方法、装置、电子设备及可读存储介质 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5031089A (en) * | 1988-12-30 | 1991-07-09 | United States Of America As Represented By The Administrator, National Aeronautics And Space Administration | Dynamic resource allocation scheme for distributed heterogeneous computer systems |
JP3208870B2 (ja) | 1992-10-30 | 2001-09-17 | 株式会社日立製作所 | データ分割パタンの評価方法 |
JP2800884B2 (ja) | 1995-10-27 | 1998-09-21 | 日本電気株式会社 | 横型dsaパワーmosfetを備えた半導体装置 |
JPH1139271A (ja) | 1997-07-15 | 1999-02-12 | Toshiba Corp | ライブラリシステムおよびライブラリの割り当て方法 |
US6112225A (en) * | 1998-03-30 | 2000-08-29 | International Business Machines Corporation | Task distribution processing system and the method for subscribing computers to perform computing tasks during idle time |
US6009455A (en) * | 1998-04-20 | 1999-12-28 | Doyle; John F. | Distributed computation utilizing idle networked computers |
US6327050B1 (en) * | 1999-04-23 | 2001-12-04 | Electronics For Imaging, Inc. | Printing method and apparatus having multiple raster image processors |
JP2001325041A (ja) | 2000-05-12 | 2001-11-22 | Toyo Eng Corp | 計算機資源活用方法及びシステム |
US20030005068A1 (en) * | 2000-12-28 | 2003-01-02 | Nickel Ronald H. | System and method for creating a virtual supercomputer using computers working collaboratively in parallel and uses for the same |
US7174381B2 (en) * | 2001-12-04 | 2007-02-06 | Aspeed Software Corporation | Parallel computing system, method and architecture |
US7103628B2 (en) * | 2002-06-20 | 2006-09-05 | Jp Morgan Chase & Co. | System and method for dividing computations |
US7376693B2 (en) * | 2002-02-08 | 2008-05-20 | Jp Morgan Chase & Company | System architecture for distributed computing and method of using the system |
JP2004038226A (ja) | 2002-06-28 | 2004-02-05 | Hitachi Ltd | Pcクラスタおよびその中間ソフトウエア |
US7346906B2 (en) * | 2002-07-09 | 2008-03-18 | International Business Machines Corporation | Workload management in a computing environment |
US7467180B2 (en) * | 2003-05-29 | 2008-12-16 | International Business Machines Corporation | Automatically segmenting and populating a distributed computing problem |
US20050131893A1 (en) * | 2003-12-15 | 2005-06-16 | Sap Aktiengesellschaft | Database early parallelism method and system |
US8429660B2 (en) * | 2004-08-23 | 2013-04-23 | Goldman, Sachs & Co. | Systems and methods to allocate application tasks to a pool of processing machines |
US7210053B2 (en) * | 2004-08-31 | 2007-04-24 | Emc Corporation | Systems and methods for assigning tasks to derived timers of various resolutions in real-time systems to maximize timer usage |
US8463971B2 (en) * | 2005-08-22 | 2013-06-11 | Oracle America Inc. | Approach for distributing interrupts from high-interrupt load devices |
US20070088828A1 (en) * | 2005-10-18 | 2007-04-19 | International Business Machines Corporation | System, method and program product for executing an application |
US20070288638A1 (en) * | 2006-04-03 | 2007-12-13 | British Columbia, University Of | Methods and distributed systems for data location and delivery |
US7730119B2 (en) * | 2006-07-21 | 2010-06-01 | Sony Computer Entertainment Inc. | Sub-task processor distribution scheduling |
-
2006
- 2006-07-21 US US11/459,301 patent/US7730119B2/en active Active
-
2007
- 2007-07-13 JP JP2007184406A patent/JP4421637B2/ja not_active Expired - Fee Related
-
2010
- 2010-05-24 US US12/786,250 patent/US20100235845A1/en not_active Abandoned
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012511200A (ja) * | 2008-12-06 | 2012-05-17 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 写実的画像形成の処理負荷を分散するためのシステム及び方法 |
JP2015053686A (ja) * | 2010-03-26 | 2015-03-19 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | ネットワークリソースをリースすること |
WO2012023175A1 (ja) * | 2010-08-17 | 2012-02-23 | 富士通株式会社 | 並列処理制御プログラム、情報処理装置、および並列処理制御方法 |
JPWO2012023175A1 (ja) * | 2010-08-17 | 2013-10-28 | 富士通株式会社 | 並列処理制御プログラム、情報処理装置、および並列処理制御方法 |
WO2015071975A1 (ja) * | 2013-11-13 | 2015-05-21 | 株式会社日立製作所 | アプリケーション及びデータの配置管理方法、アプリケーション及びデータの配置管理システム及び記憶媒体 |
US10761888B2 (en) | 2017-08-30 | 2020-09-01 | Fujitsu Limited | Method for deploying task to node based on execution completion point, task deployment apparatus and storage medium |
Also Published As
Publication number | Publication date |
---|---|
JP4421637B2 (ja) | 2010-02-24 |
US20100235845A1 (en) | 2010-09-16 |
US7730119B2 (en) | 2010-06-01 |
US20080021987A1 (en) | 2008-01-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4421637B2 (ja) | サブタスク・プロセッサの分散スケジューリング | |
US11010188B1 (en) | Simulated data object storage using on-demand computation of data objects | |
US9940162B2 (en) | Realtime optimization of compute infrastructure in a virtualized environment | |
US9729488B2 (en) | On-demand mailbox synchronization and migration system | |
US9201690B2 (en) | Resource aware scheduling in a distributed computing environment | |
US20110191781A1 (en) | Resources management in distributed computing environment | |
US9229778B2 (en) | Method and system for dynamic scaling in a cloud environment | |
US20180349178A1 (en) | A method and system for scalable job processing | |
GB2475897A (en) | Resource allocation using estimated time to complete jobs in a grid or cloud computing environment | |
WO2014194869A1 (zh) | 一种请求处理方法、装置及系统 | |
US7571088B2 (en) | Simulation of connected devices | |
US20190182138A1 (en) | Assessing performance of networked computing environments | |
Tang et al. | Dependent task offloading for multiple jobs in edge computing | |
US20120239831A1 (en) | Information processing program, method, and transfer processing device | |
US20100293268A1 (en) | Efficient message consumption in a point-to-point messaging environment | |
CN115421930A (zh) | 任务处理方法、系统、装置、设备及计算机可读存储介质 | |
US9769022B2 (en) | Timeout value adaptation | |
JP5479710B2 (ja) | データを処理するためのプロセッサ‐サーバ・ハイブリッド・システムおよび方法 | |
WO2020076394A1 (en) | Resource allocation using restore credits | |
CN109842665B (zh) | 用于任务分配服务器的任务处理方法和装置 | |
KR20140101553A (ko) | 가상 물리 시스템에서의 데이터 분배 서비스를 지원하기 위한 QoS 프로파일 생성 장치 및 방법 | |
CN102200928A (zh) | 计算资源控制设备和计算资源控制方法 | |
US20190196873A1 (en) | Management device and management method | |
CN112019630A (zh) | 一种负载均衡方法以及装置 | |
Gokulraj et al. | Integration of firefly optimization and Pearson service correlation for efficient cloud resource utilization |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090805 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090811 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091013 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091201 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091202 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121211 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4421637 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131211 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |