JP6130915B2 - 情報処理システム及び情報処理方法 - Google Patents
情報処理システム及び情報処理方法 Download PDFInfo
- Publication number
- JP6130915B2 JP6130915B2 JP2015526110A JP2015526110A JP6130915B2 JP 6130915 B2 JP6130915 B2 JP 6130915B2 JP 2015526110 A JP2015526110 A JP 2015526110A JP 2015526110 A JP2015526110 A JP 2015526110A JP 6130915 B2 JP6130915 B2 JP 6130915B2
- Authority
- JP
- Japan
- Prior art keywords
- community
- vertex
- vertices
- processing
- hard
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5083—Techniques for rebalancing the load in a distributed system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9024—Graphs; Linked lists
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/50—Indexing scheme relating to G06F9/50
- G06F2209/5017—Task decomposition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5061—Partitioning or combining of resources
- G06F9/5066—Algorithms for mapping a plurality of inter-dependent sub-tasks onto a plurality of physical CPUs
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Stored Programmes (AREA)
- Multi Processors (AREA)
Description
図1は、本発明第1の実施例の情報処理システムの機能ブロック図である。図1において、101は最適負荷配置手段、102は負荷の演算実行手段であり、最適負荷配置手段101は、プログラム情報103、負荷解析手段104、負荷分散手段105を備え、処理の対象とする負荷、例えばグラフ処理の負荷に応じて、ハード演算手段であるFPGAに処理させる範囲を決定する。負荷の演算実行手段102は、ソフト演算情報106、ハード演算情報107、中間結果情報1108、演算結果情報109、ソフト演算手段110、及び、ハード処理手段111を備えている。プログラム情報103は、被処理データの情報201、例えば頂点と辺から成り頂点間の接続関係を含むグラフの情報と、処理内容情報202、例えば最短経路探索の処理に関する情報と、リソース情報203、例えばFPGAに実装可能な回路規模の情報(頂点の数、辺の数、等)を含んでいる。ハード処理装置111は、HDL変換手段204、論理合成手段205、コンフィグレーション手段206、及び、ハード演算手段207を含んでいる。コンフィグレーション手段206、及び、ハード演算手段207は、FPGA装置で実現される。
図3は、情報処理システムの動作400を示すフローチャートである。図3において、S401は負荷解析、S402は負荷分散、S403はHDL変換、S404は論理合成、S405はコンフィグレーション、S406は専用のハードによって処理される論理演算、S408はソフト演算の、各処理のステップである。
図6において、処理S701はハブ頂点探索、処理S702はコミュニティ分析、処理S703はリソースに余裕が有るかの判定、処理S704はハブ頂点追加である。まず、ハブ頂点探索の処理S701では、図5で示した各頂点(ID1−ID62)間の距離リストを読み込み、次数の大きい順に頂点のIDを並び替えた次数リストを生成する。ここで、次数とは頂点に入出力している辺の数を意味し、図5における入力次数と出力次数を頂点ID毎に合算することで求めることが可能である。例えば、ID1の頂点の時数は、2+5=7である。なお、次数リストにおいて、辺数の許容値である100本よりも次数の大きい頂点がある場合はリストから除外し、100本以下で最も次数の大きい頂点をハブ頂点とする。次に、コミュニティ選定の処理S702では、ハブ頂点を中心に形成される頂点群(以下、ハードコミュニティと呼ぶ)の候補800を幾つか想定し、その中から最もコミュニティ率の高いものを選定する。ハードコミュニティの候補800は、例えばハブ頂点から何辺で接続されているかの辺数(以下パス数と呼ぶ)と、非ハブ頂点の最大次数をパラメータにすることで生成可能である。
このコミュニティ率が高い程、グラフ処理の負荷の密度が高いことを表している。
負荷分散402は負荷分散手段105により実行され、負荷解析401が出力する解析結果に応じて、グラフ情報201をハード処理用とソフト処理用に分ける。具体的には、グラフ処理の負荷が重い、ケース#10で示した2つ(第一、第二)のハブ頂点を持つハードコミュニティ、の処理をハード処理手段111によるハード処理用とする。ソフト処理用については、図9に示すように、ハード処理の対象であるソフトコミュニティとの境界となる頂点、ここでは黒丸で表示した点P7−P11の各々、を境界頂点とし、これらの境界頂点を含めたグラフ処理の負荷が軽いソフトコミュニティを、ソフト演算手段110によるソフト処理用とする。上記の考え方に基づき、図5で示したグラフ情報を分割する。
ソフト演算の処理S408は、ソフト演算手段110によって実行され、ハードコミュニティを含めた全ての頂点に対する最短経路探索を行う。ソフト処理による最短経路探索は、例えば前述のベルマン・フォード法の他、ワーシャル・フロイド法やダイクストラ法など、既知のアルゴリズムを実現するプログラム用意して実行すれば良い。
102 負荷の演算実行手段
103 プログラム情報
104 負荷解析手段
105 負荷分散手段
106 ソフト演算情報
107 ハード演算情報
108 中間結果情報
109 演算結果情報
110 ソフト演算手段
111 ハード処理手段
201 グラフ情報
202 処理内容手段
203 リソース情報
204 HDL変換手段
205 論理合成手段
206 コンフィグレーション手段
207 ハード演算手段
301 CPU
302 メモリ装置
303 FPGA装置
304〜306 通信インタフェース
S401 負荷解析処理
S402 負荷分散処理
S403 HDL変換処理
S404 論理合成処理
S405 コンフィグレーション処理
S406 ハード演算処理
S408 ソフト演算処理
S701 ハブ頂点探索処理
S702 コミュニティ選定処理
S703 リソースに余裕が有るかの判定処理
S704 ハブ頂点追加処理
800、900ハードコミュニティの候補
801、901 全頂点数
802、902 境界辺数
803、903 全辺数
804、904 コミュニティ率。
Claims (10)
- 最適負荷配置手段と、負荷の演算実行手段とを備え、
前記最適負荷配置手段は、
負荷解析手段と、負荷分散手段と、プログラム情報とを有し、
前記負荷の演算実行手段は、
ハード処理手段と、ソフト演算手段とを有し、
前記プログラム情報は、被処理データ、処理内容に関する情報、及びリソースに関する情報を含んでおり、
前記被処理データは、複数の頂点と複数の辺から成り各頂点間の接続関係を含むグラフ情報であり、
前記負荷解析手段は、
前記各頂点に対応する前記被処理データを、ハードコミュニティとソフトコミュニティの2種類のコミュニティとして選定するコミュニティ選定の機能を有し、
前記グラフ情報の前記各頂点おける入力次数と出力次数の和の大きい順に少なくとも1つの頂点をハブ頂点として抽出し、前記ハブ頂点を中心に形成される頂点群からなるハードコミュニティ候補の中で、全頂点数を外部の頂点と接続される辺の総数である境界辺数で割ったコミュニティ率が最も大きいハードコミュニティ候補から順に前記ハードコミュニティとして選定し、
前記ハードコミュニティの外部の頂点群からなる前記コミュニティを前記ソフトコミュニティとして選定し、
前記負荷分散手段は、選定された前記ハードコミュニティのデータを前記ハード処理手段、前記ソフトコミュニティのデータを前記ソフト演算手段で、各々処理するように前記被処理データを分配する機能を有する
ことを特徴とする情報処理システム。 - 請求項1において、
前記ハード処理手段は、FPGA装置を備えている
ことを特徴とする情報処理システム。 - 請求項1において、
前記ハードコミュニティ候補は、前記ハブ頂点からのパス数と非ハブ頂点の最大次数をパラメータとして選定される
ことを特徴とする情報処理システム。 - 請求項2において、
前記ハード処理手段の処理の対象である前記ハードコミュニティと前記ソフト演算手段の処理の対象である前記ソフトコミュニティとの境界となる頂点を境界頂点とし、
前記ハード処理手段及び前記ソフト演算手段において各々、該境界頂点を含めた処理を行う機能
を有する
ことを特徴とする情報処理システム。 - 請求項4において、
前記ハード処理手段は、複数の前記FPGA装置を備えており、
前記各FPGA装置に各々前記ハード処理手段が対応して設けられ、
前記各ハードコミュニティと前記各ソフトコミュニティとの境界となる前記境界頂点を第一の境界頂点とし、
隣り合う前記FPGA装置間の境界となる頂点を第二境界頂点とし、
前記各FPGA装置及び前記ソフト演算手段の処理において、各々前記第一の境界頂点を含めた処理を行い、
前記各FPGA装置において各々、前記第二境界頂点を含めた処理を行う
ことを特徴とする情報処理システム。 - 請求項2において、
前記負荷解析手段は、ハブ頂点探索機能と、コミュニティ分析機能と、ハブ頂点追加機能とを備えており、
前記ハブ頂点探索機能は、前記グラフ情報の前記各頂点おける前記入力次数と出力次数の和の最も大きい頂点を前記ハブ頂点として抽出し、
前記コミュニティ分析機能は、前記ハブ頂点を中心に形成される頂点群からなるハードコミュニティ候補の中で、全頂点数を外部の頂点と接続される辺の総数である境界辺数で割ったコミュニティ率が最も大きいハードコミュニティ候補から順に前記ハードコミュニティとして選定し、
前記ハブ頂点追加機能は、前記ハブ頂点を第一のハブ頂点として抽出した後に前記リソースに余裕が有る場合に、前記ハブ頂点の要件を満たす新たなハブ頂点を第二のハブ頂点として追加する
ことを特徴とする情報処理システム。 - 請求項1において、
前記処理内容は、最短経路探索若しくはページランク解析である
ことを特徴とする情報処理システム。 - CPU、メモリ装置、ソフト演算手段、ハード処理手段および通信手段を備え、
前記メモリ装置は、被処理データ、処理内容に関する情報、及びリソースに関する情報を有しており、
前記被処理データは、複数の頂点と複数の辺から成り各頂点間の接続関係を含むグラフ情報であり、
前記各頂点に対応する前記被処理データを、ハードコミュニティとソフトコミュニティの2種類のコミュニティとして選定するコミュニティ選定の機能と、
選定された前記ハードコミュニティのデータを前記ハード処理手段、前記ソフトコミュニティのデータを前記ソフト演算手段で、各々処理するように前記被処理データを分配する機能とを有し、
前記コミュニティ選定の機能は、
前記グラフ情報の前記各頂点おける入力次数と出力次数の和の大きい順に少なくとも1つの頂点をハブ頂点として抽出するハブ頂点抽出の機能と、
前記ハブ頂点を中心に形成される頂点群からなるハードコミュニティ候補の中で、全頂点数を外部の頂点と接続される辺の総数である境界辺数で割ったコミュニティ率が最も大きいハードコミュニティ候補から順に前記ハードコミュニティとして選定するハードコミュニティ選定の機能と、
前記ハードコミュニティの外部の頂点群からなる前記コミュニティを前記ソフトコミュニティとして選定するソフトコミュニティ選定の機能とを含む
ことを特徴とする情報処理システム。 - 請求項8において、
前記ハード処理手段は、FPGA装置を備えている
ことを特徴とする情報処理システム。 - FPGAを用いた情報処理システムにおけるデータ処理方法であって、
前記情報処理システムは、CPU、メモリ装置、ソフト演算手段、FPGA装置および通信手段を備えており、
前記メモリ装置は、被処理データ、処理内容に関する情報、及びリソースに関する情報を有しており、
前記被処理データは、複数の頂点と複数の辺から成り各頂点間の接続関係を含むグラフ情報であり、
前記各頂点に対応する前記被処理データは、ハードコミュニティとソフトコミュニティの2種類のコミュニティに分けて処理されるものであり、
前記グラフ情報の前記各頂点おける入力次数と出力次数の和の大きい順に少なくとも1つの頂点をハブ頂点として抽出し、
前記ハブ頂点を中心に形成される頂点群からなるハードコミュニティ候補の中で、全頂点数を外部の頂点と接続される辺の総数である境界辺数で割ったコミュニティ率が最も大きいハードコミュニティ候補から順に前記ハードコミュニティとして選定し、
前記ハードコミュニティの外部の頂点群からなる前記コミュニティを前記ソフトコミュニティとして選定し、
選定された前記ハードコミュニティのデータを前記FPGA装置、前記ソフトコミュニティのデータを前記ソフト演算手段で、各々処理するように前記被処理データを分配する
ことを特徴とする情報処理システムにおけるデータ処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2013/069063 WO2015004788A1 (ja) | 2013-07-11 | 2013-07-11 | 情報処理システム及び情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2015004788A1 JPWO2015004788A1 (ja) | 2017-02-23 |
JP6130915B2 true JP6130915B2 (ja) | 2017-05-17 |
Family
ID=52279510
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015526110A Active JP6130915B2 (ja) | 2013-07-11 | 2013-07-11 | 情報処理システム及び情報処理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9760403B2 (ja) |
JP (1) | JP6130915B2 (ja) |
WO (1) | WO2015004788A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106020984B (zh) * | 2016-05-20 | 2020-01-31 | 青岛海信移动通信技术股份有限公司 | 电子设备中进程的创建方法及装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6230303B1 (en) * | 1997-02-24 | 2001-05-08 | Lucent Technologies Inc. | Proximity-based cluster allocation for hardware-software co-synthesis of heterogeneous distributed embedded systems |
US20040243384A1 (en) * | 2002-10-10 | 2004-12-02 | Nang-Ping Chen | Complete graph interconnect structure for the hardware emulator |
US7146581B2 (en) * | 2002-11-15 | 2006-12-05 | Russell Alan Klein | Automated repartitioning of hardware and software components in an embedded system |
JP4470582B2 (ja) * | 2004-05-19 | 2010-06-02 | 日本電気株式会社 | ハードウェア/ソフトウェア協調シミュレーション方式及びその方法 |
US7644146B2 (en) * | 2004-06-02 | 2010-01-05 | Hewlett-Packard Development Company, L.P. | System and method for discovering communities in networks |
JP4725189B2 (ja) * | 2005-05-24 | 2011-07-13 | 富士ゼロックス株式会社 | 粒子挙動解析装置及び粒子挙動解析方法、並びにコンピュータ・プログラム |
US8230441B2 (en) * | 2008-04-29 | 2012-07-24 | International Business Machines Corporation | Virtual world subgroup determination and segmentation for performance scalability |
WO2010068840A1 (en) * | 2008-12-12 | 2010-06-17 | The Trustees Of Columbia University In The City Of New York | Machine optimization devices, methods, and systems |
US8577380B2 (en) * | 2011-05-02 | 2013-11-05 | Telefonica, S.A. | Method for an automatic identification of urban dense areas from cell phones records |
US8386286B2 (en) * | 2011-05-26 | 2013-02-26 | Xerox Corporation | System and method for the dynamic allocation of resources |
US8732302B2 (en) * | 2011-07-15 | 2014-05-20 | Inetco Systems Limited | Method and system for monitoring performance of an application system |
US8521782B2 (en) * | 2011-07-20 | 2013-08-27 | Salesforce.Com, Inc. | Methods and systems for processing large graphs using density-based processes using map-reduce |
JP5978613B2 (ja) * | 2011-12-14 | 2016-08-24 | 富士ゼロックス株式会社 | ハードウエア/ソフトウエア協調設計装置及びプログラム |
ES2538412T3 (es) * | 2011-12-22 | 2015-06-19 | Airbus Operations S.L. | Sistemas paralelos heterogéneos para acelerar simulaciones basadas en métodos numéricos para mallas discretas |
US10521473B2 (en) * | 2012-05-21 | 2019-12-31 | Kent State University | Shortest path computation in large networks |
KR101329350B1 (ko) * | 2012-06-15 | 2013-11-14 | 한국과학기술원 | 그래프의 매개 중심성 갱신 방법 |
US9215158B1 (en) * | 2012-08-16 | 2015-12-15 | Amazon Technologies, Inc. | Computing resource availability risk assessment using graph comparison |
US9208257B2 (en) * | 2013-03-15 | 2015-12-08 | Oracle International Corporation | Partitioning a graph by iteratively excluding edges |
-
2013
- 2013-07-11 JP JP2015526110A patent/JP6130915B2/ja active Active
- 2013-07-11 WO PCT/JP2013/069063 patent/WO2015004788A1/ja active Application Filing
- 2013-07-11 US US14/890,040 patent/US9760403B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPWO2015004788A1 (ja) | 2017-02-23 |
WO2015004788A1 (ja) | 2015-01-15 |
US9760403B2 (en) | 2017-09-12 |
US20160077877A1 (en) | 2016-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5218390B2 (ja) | 自律制御サーバ、仮想サーバの制御方法及びプログラム | |
Samiei et al. | Classification of skin cancer stages using a AHP fuzzy technique within the context of big data healthcare | |
CN107729935B (zh) | 相似图片的识别方法和装置、服务器、存储介质 | |
WO2017076296A1 (zh) | 处理图数据的方法和装置 | |
US20220229809A1 (en) | Method and system for flexible, high performance structured data processing | |
JP6610350B2 (ja) | 計算機、行列分解方法、及び行列分解プログラム | |
Dhar et al. | An effective timing-driven detailed placement algorithm for FPGAs | |
WO2021086475A1 (en) | A hierarchical processing technique for lesion detection, classification, and segmentation on microscopy images | |
CN116483319A (zh) | 用于软件定义芯片的算子处理方法、装置、设备及介质 | |
JP6130915B2 (ja) | 情報処理システム及び情報処理方法 | |
JP6733984B2 (ja) | 画像解析装置 | |
JP2011141703A (ja) | 資源配置システム、資源配置方法、及び資源配置用プログラム | |
JPWO2011096016A1 (ja) | コンパイラ装置 | |
CN109977985A (zh) | 快速激光雷达数据分类 | |
Amaris et al. | Evaluating execution time predictions on gpu kernels using an analytical model and machine learning techniques | |
Bytyn et al. | Dataflow aware mapping of convolutional neural networks onto many-core platforms with network-on-chip interconnect | |
Cong et al. | Accelerating vision and navigation applications on a customizable platform | |
Gomes et al. | Efficiently computing the drainage network on massive terrains using external memory flooding process | |
Yuuki et al. | Hardware acceleration of convolution neural network for ai-enabled realtime biomedical system | |
WO2018222064A1 (en) | Systems and methods of hierarchical community detection in graphs | |
Daoud et al. | High performance bitwise or based submesh allocation for 2d mesh-connected cmps | |
Wei et al. | Fpga design of real-time mdfd system using high level synthesis | |
JP6557504B2 (ja) | 画像適否判定装置、画像適否判定方法および画像適否判定プログラム | |
JP2017228223A (ja) | 信号処理装置 | |
TWI777481B (zh) | 數據控制方法、數據處理方法、電子設備及儲存介質 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161006 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170310 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170324 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170411 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170414 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6130915 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |