JP2018147301A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2018147301A5 JP2018147301A5 JP2017042896A JP2017042896A JP2018147301A5 JP 2018147301 A5 JP2018147301 A5 JP 2018147301A5 JP 2017042896 A JP2017042896 A JP 2017042896A JP 2017042896 A JP2017042896 A JP 2017042896A JP 2018147301 A5 JP2018147301 A5 JP 2018147301A5
- Authority
- JP
- Japan
- Prior art keywords
- task
- management
- information
- data
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 description 17
- 238000011030 bottleneck Methods 0.000 description 1
Description
タスク管理ノード100は、タスク処理ノード200に対するタスクの割当を管理する。より具体的には、タスク管理ノード100は、クライアント端末等からタスク処理の実行要求を受信した場合、各タスク処理ノード200に対して、タスクで使用するデータの有無を問い合わせるデータ問合せを行う。また、タスク管理ノード100は、データ問合せに対する応答に基づいて、タスクを割り当てるタスク処理ノード200を決定する。
索引管理モジュール131は、ターゲットタスク処理ノード200に索引情報222の生成/更新指示を送信する(ステップS102)。索引管理モジュール131は、ターゲットタスク処理ノード200からの応答を受信するまで待ち状態に移行する。
図1で説明したように、本実施例では、ローカリティを考慮して、各タスク処理ノード200は、自身の記憶領域に格納されるデータ221を検索するための索引情報222を作成する。これによって、ローカリティを考慮したタスクの割当を実現できる。また、索引情報222のサイズは小さいため、高速にデータを検索でき、また、記憶領域の有効活用が可能となる。
本実施例では、タスク割当モジュール132は、ノード管理情報112に基づいて、タスクを実行するタスク処理ノード200が偏らないように、タスク処理ノード200にタスクを割り当てる。これによって、一つのタスク処理ノード200にタスクが集中することによって発生するボトルネックを解消できる。
なお、選択されたタスク処理ノード200がタスクを実行できない場合も考えられる。そこで、タスク割当モジュール132は、ステップS207において選択されなかったタスク処理ノード200の識別情報を含むタスク転送情報を送信してもよい。タスクが割り当てられたタスク処理ノード200がタスクを実行できない場合、タスク転送情報に基づいて、他のタスク処理ノード200にタスクを割り当てる。これによって、タスク割当モジュール132は、再度、問合せ処理を実行する必要がない。
実施例2の索引管理モジュール131が実行する処理は、実施例1で示した処理と同一である。なお、各タスク処理ノード200の索引管理モジュール131が処理を実行できるため、検索エンジン211は、索引情報222の生成/更新指示を前回受信してから所定時間経過していない場合には、索引情報222を生成又は更新しなくてもよい。
特許請求の範囲に記載した以外の発明の観点の代表的なものとして、次のものがあげられる。
(1)データベースを構成する複数の計算機を管理する管理計算機が実行するプログラムであって、
前記管理計算機は、プロセッサ、前記プロセッサに接続される記憶装置、及び前記プロセッサに接続されるネットワークインタフェースを有し、
第1の処理の実行要求を受け付けた場合、前記第1の処理が使用するデータを特定する第1の手順と、
前記データベースを構成する複数の計算機の各々に、前記第1の処理が使用するデータの有無を問い合わせるデータ問合せを行う第2の手順と、
前記データ問合せに対する第1の応答に基づいて、前記第1の処理が使用するデータを保持する計算機を特定する第3の手順と、
前記特定された計算機に前記第1の処理を割り当てる第4の手順と、前記管理計算機に実行させることを特徴とするプログラム。
(2)(1)に記載のプログラムであって、
前記管理計算機は、前記データ問合せの対象の計算機を特定するための絞込み情報を保持し、
前記第1の手順では、前記絞込み情報に基づいて前記データ問合せの対象の計算機を特定することを特徴とするプログラム。
(3)(2)に記載のプログラムであって、
前記データベースを構成する複数の計算機に、前記データベースに割り当てられる記憶領域に格納されるデータを検索するための索引情報の生成を指示する手順と、
前記データベースを構成する複数の計算機から、前記データベースに割り当てられる記憶領域に格納されるデータに関する情報を含む第2の応答を受信する手順と、
前記第2の応答に基づいて、前記絞込み情報を生成する手順と、を前記管理計算機に実行させることを特徴とするプログラム。
(4)(3)に記載のプログラムであって、
前記管理計算機は、前記データベースを構成する複数の計算機の状態を管理する状態管理情報を保持し、
前記第4の手順は、
前記第1の処理が使用するデータを保持する計算機が複数存在する場合、前記状態管理情報を参照する手順と、
前記第1の処理が使用するデータを保持する複数の計算機の中から、前記第1の処理の負荷が小さい又は前記第1の処理の処理時間が短い計算機を選択する手順と、
前記選択された計算機に前記第1の処理を割り当てる手順と、を含むことを特徴とするプログラム。
(1)データベースを構成する複数の計算機を管理する管理計算機が実行するプログラムであって、
前記管理計算機は、プロセッサ、前記プロセッサに接続される記憶装置、及び前記プロセッサに接続されるネットワークインタフェースを有し、
第1の処理の実行要求を受け付けた場合、前記第1の処理が使用するデータを特定する第1の手順と、
前記データベースを構成する複数の計算機の各々に、前記第1の処理が使用するデータの有無を問い合わせるデータ問合せを行う第2の手順と、
前記データ問合せに対する第1の応答に基づいて、前記第1の処理が使用するデータを保持する計算機を特定する第3の手順と、
前記特定された計算機に前記第1の処理を割り当てる第4の手順と、前記管理計算機に実行させることを特徴とするプログラム。
(2)(1)に記載のプログラムであって、
前記管理計算機は、前記データ問合せの対象の計算機を特定するための絞込み情報を保持し、
前記第1の手順では、前記絞込み情報に基づいて前記データ問合せの対象の計算機を特定することを特徴とするプログラム。
(3)(2)に記載のプログラムであって、
前記データベースを構成する複数の計算機に、前記データベースに割り当てられる記憶領域に格納されるデータを検索するための索引情報の生成を指示する手順と、
前記データベースを構成する複数の計算機から、前記データベースに割り当てられる記憶領域に格納されるデータに関する情報を含む第2の応答を受信する手順と、
前記第2の応答に基づいて、前記絞込み情報を生成する手順と、を前記管理計算機に実行させることを特徴とするプログラム。
(4)(3)に記載のプログラムであって、
前記管理計算機は、前記データベースを構成する複数の計算機の状態を管理する状態管理情報を保持し、
前記第4の手順は、
前記第1の処理が使用するデータを保持する計算機が複数存在する場合、前記状態管理情報を参照する手順と、
前記第1の処理が使用するデータを保持する複数の計算機の中から、前記第1の処理の負荷が小さい又は前記第1の処理の処理時間が短い計算機を選択する手順と、
前記選択された計算機に前記第1の処理を割り当てる手順と、を含むことを特徴とするプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017042896A JP6951846B2 (ja) | 2017-03-07 | 2017-03-07 | 計算機システム及びタスクの割当方法 |
US15/870,896 US20180260463A1 (en) | 2017-03-07 | 2018-01-13 | Computer system and method of assigning processing |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017042896A JP6951846B2 (ja) | 2017-03-07 | 2017-03-07 | 計算機システム及びタスクの割当方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018147301A JP2018147301A (ja) | 2018-09-20 |
JP2018147301A5 true JP2018147301A5 (ja) | 2020-03-12 |
JP6951846B2 JP6951846B2 (ja) | 2021-10-20 |
Family
ID=63446419
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017042896A Active JP6951846B2 (ja) | 2017-03-07 | 2017-03-07 | 計算機システム及びタスクの割当方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20180260463A1 (ja) |
JP (1) | JP6951846B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110728363B (zh) * | 2018-06-29 | 2022-11-18 | 华为技术有限公司 | 任务处理方法和装置 |
JP7372221B2 (ja) * | 2020-09-30 | 2023-10-31 | Kddi株式会社 | Ai処理分散方法およびシステム |
CN113094391B (zh) * | 2021-04-22 | 2022-08-26 | 浪潮通用软件有限公司 | 一种支持缓存的数据汇总的计算方法、装置及设备 |
CN113535730A (zh) * | 2021-07-21 | 2021-10-22 | 挂号网(杭州)科技有限公司 | 搜索引擎的索引更新方法及系统、电子设备、存储介质 |
-
2017
- 2017-03-07 JP JP2017042896A patent/JP6951846B2/ja active Active
-
2018
- 2018-01-13 US US15/870,896 patent/US20180260463A1/en not_active Abandoned
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11675785B2 (en) | Dynamic asynchronous traversals for distributed graph queries | |
JP2018147301A5 (ja) | ||
CN108121511B (zh) | 一种分布式边缘存储系统中的数据处理方法、装置及设备 | |
CN111597148B (zh) | 用于分布式文件系统的分布式元数据管理方法 | |
US10904316B2 (en) | Data processing method and apparatus in service-oriented architecture system, and the service-oriented architecture system | |
US20140067452A1 (en) | Intelligent work management based on satellite navigation system data and network node data | |
CN106682215B (zh) | 一种数据处理方法和管理节点 | |
US20170228422A1 (en) | Flexible task scheduler for multiple parallel processing of database data | |
JP6951846B2 (ja) | 計算機システム及びタスクの割当方法 | |
CN110413845B (zh) | 基于物联网操作系统的资源存储方法及装置 | |
CN110427386B (zh) | 数据处理方法、装置及计算机存储介质 | |
US20110314157A1 (en) | Information processing system, management apparatus, processing requesting apparatus, information processing method, and computer readable medium storing program | |
KR102092921B1 (ko) | 시뮬레이션 장치 및 분산 시뮬레이션 시스템 | |
CN111930770A (zh) | 数据查询方法、装置及电子设备 | |
CN110851143B (zh) | 源码部署方法、装置、设备及存储介质 | |
CN105740405A (zh) | 存储数据的方法和装置 | |
US11269687B2 (en) | Map reduce using coordination namespace hardware acceleration | |
CN111694639A (zh) | 进程容器地址的更新方法、装置和电子设备 | |
CN113391875A (zh) | 容器部署方法与装置 | |
CN111158892A (zh) | 一种任务队列生成方法、装置及设备 | |
CN112368696A (zh) | 用于检索内容的方法和装置 | |
US8832176B1 (en) | Method and system for processing a large collection of documents | |
CN110955460A (zh) | 一种服务进程启动方法、装置、电子设备和存储介质 | |
JP2015153266A (ja) | ファームウェア管理システム、方法、及び、プログラム | |
KR101648401B1 (ko) | 데이터 관리 및 분석을 위한 데이터베이스 장치, 스토리지 유닛 및 그 방법 |