JP2012084098A - 表データのデータ処理方法、データ処理システムおよびそのコンピュータプログラム - Google Patents
表データのデータ処理方法、データ処理システムおよびそのコンピュータプログラム Download PDFInfo
- Publication number
- JP2012084098A JP2012084098A JP2010232069A JP2010232069A JP2012084098A JP 2012084098 A JP2012084098 A JP 2012084098A JP 2010232069 A JP2010232069 A JP 2010232069A JP 2010232069 A JP2010232069 A JP 2010232069A JP 2012084098 A JP2012084098 A JP 2012084098A
- Authority
- JP
- Japan
- Prior art keywords
- data
- nodes
- attribute
- query
- row
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】行データを複数のノードに配分するときに列に入力されている属性値を分割指示部110がデータ配分条件とする。データ配分条件に対応して複数のノードに配分される行データごとに列を意味する属性をキー生成部120が検索キーとする。生成された検索キーを行データに属性としてキー付与部130が付与する。検索キーが付与された行データを複数のノードの少なくとも一つにデータ登録部140が登録する。複数の属性に基づいて行データの分割を行うが、ノードに配分される各行データには分割に利用した属性が検索キーとして付与されるので、前記検索キーを利用した適切な選択演算を問合せに追加することで、結合演算を含む関係演算を複数のノードで並列に処理することができる。
【選択図】図1
Description
110 分割指示部
120 キー生成部
130 キー付与部
140 データ登録部
150 ディクショナリ
160 データ配分先決定部
170 問合加工部
180 問合処理部
190 データベースカタログ
Claims (6)
- 表形式の行データを少なくとも一つの属性値に基づいて複数のノードに配分し、それぞれの前記ノードで配分された前記行データの集まりを管理するデータ処理システムであって、
前記行データを複数の前記ノードに配分するときに列に入力されている属性値をデータ配分条件とする分割指示手段と、
前記データ配分条件とされた前記属性値の配分先ノードを決定するデータ配分先決定手段と、
前記データ配分条件に対応して複数の前記ノードに配分される前記行データごとに前記列を意味する属性を検索キーとするキー生成手段と、
生成された前記検索キーを前記行データに属性として付与するキー付与手段と、
前記検索キーが付与された前記行データを複数の前記ノードの少なくとも一つに登録するデータ登録手段と、
データ配分に利用した属性と前記検索キーとの対応関係が登録されるディクショナリと、
を有するデータ処理システム。 - 少なくとも一つの表に対するデータ問合を処理するにあたり、
データ問合内容に応じて前記データ問合に前記検索キーを利用した選択演算を付与する問合加工手段と、
前記加工されたデータ問合を利用して複数の前記ノードで並列に前記データ問合を処理する問合処理手段とを、
さらに有する請求項1に記載のデータ処理システム。 - 表形式の行データを少なくとも一つの属性値に基づいて複数のノードに配分し、それぞれの前記ノードで配分された前記行データの集まりを管理するデータ処理システムのコンピュータプログラムであって、
前記行データを複数の前記ノードに配分するときに列に入力されている属性値をデータ配分条件とする分割指示処理と、
データ配分条件とされた属性値の配分先ノードを決定するデータ配分先決定処理と、
前記データ配分条件に対応して複数の前記ノードに配分される前記行データごとに前記列を意味する属性を検索キーとするキー生成処理と、
生成された前記検索キーを前記行データに属性として付与するキー付与処理と、
前記検索キーが付与された前記行データを複数の前記ノードの少なくとも一つに登録するデータ登録処理と、
をデータ処理システムに実行させるコンピュータプログラム。 - 少なくとも一つの表に対するデータ問合を処理するにあたり、
データ問合内容に応じて前記データ問合に前記検索キーを利用した選択演算を付与する問合加工処理と、
前記加工されたデータ問合を利用して複数の前記ノードで並列に前記データ問合を処理する問合実行処理とを、
さらに有する請求項3に記載のコンピュータプログラム。 - 表形式の行データを少なくとも一つの属性値に基づいて複数のノードに配分し、それぞれの前記ノードで配分された前記行データの集まりを管理するデータ処理システムのデータ処理方法であって、
前記行データを複数の前記ノードに配分するときに列に入力されている属性値をデータ配分条件とする分割指示動作と、
データ配分条件とされた属性値の配分先ノードを決定するデータ配分先決定動作と、
前記データ配分条件に対応して複数の前記ノードに配分される前記行データごとに前記列を意味する属性を検索キーとするキー生成動作と、
生成された前記検索キーを前記行データに属性として付与するキー付与動作と、
前記検索キーが付与された前記行データを複数の前記ノードの少なくとも一つに登録するデータ登録動作と、
を有するデータ処理方法。 - 少なくとも一つの表に対するデータ問合を処理するにあたり、
データ問合内容に応じて前記データ問合に前記検索キーを利用した選択演算を付与する問合加工動作と、
前記加工されたデータ問合を利用して複数の前記ノードで並列に前記データ問合を処理する問合処理動作とを、
さらに有する請求項5に記載のデータ処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010232069A JP5500552B2 (ja) | 2010-10-15 | 2010-10-15 | 表データのデータ処理方法、データ処理システムおよびそのコンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010232069A JP5500552B2 (ja) | 2010-10-15 | 2010-10-15 | 表データのデータ処理方法、データ処理システムおよびそのコンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012084098A true JP2012084098A (ja) | 2012-04-26 |
JP5500552B2 JP5500552B2 (ja) | 2014-05-21 |
Family
ID=46242863
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010232069A Expired - Fee Related JP5500552B2 (ja) | 2010-10-15 | 2010-10-15 | 表データのデータ処理方法、データ処理システムおよびそのコンピュータプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5500552B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020524853A (ja) * | 2017-06-23 | 2020-08-20 | ザイリンクス インコーポレイテッドXilinx Incorporated | データベースアクセラレータに対する並列計算オフロード |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001117945A (ja) * | 1999-10-22 | 2001-04-27 | Hitachi Ltd | データベース管理方法およびシステム |
JP2001331509A (ja) * | 2000-05-22 | 2001-11-30 | Hitachi Ltd | リレーショナルデータベース処理装置、リレーショナルデータベースの処理方法及びリレーショナルデータベースの処理プログラムを記録したコンピュータ読み取り可能な記録媒体 |
-
2010
- 2010-10-15 JP JP2010232069A patent/JP5500552B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001117945A (ja) * | 1999-10-22 | 2001-04-27 | Hitachi Ltd | データベース管理方法およびシステム |
JP2001331509A (ja) * | 2000-05-22 | 2001-11-30 | Hitachi Ltd | リレーショナルデータベース処理装置、リレーショナルデータベースの処理方法及びリレーショナルデータベースの処理プログラムを記録したコンピュータ読み取り可能な記録媒体 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020524853A (ja) * | 2017-06-23 | 2020-08-20 | ザイリンクス インコーポレイテッドXilinx Incorporated | データベースアクセラレータに対する並列計算オフロード |
Also Published As
Publication number | Publication date |
---|---|
JP5500552B2 (ja) | 2014-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101137147B1 (ko) | 질의 강제 인덱싱 | |
US8214356B1 (en) | Apparatus for elastic database processing with heterogeneous data | |
US8271523B2 (en) | Coordination server, data allocating method, and computer program product | |
US8051422B2 (en) | Resource assignment method for query partioning based on processing cost of each partition | |
US9195701B2 (en) | System and method for flexible distributed massively parallel processing (MPP) database | |
EP3260995A1 (en) | Clustering layers in multi-node clusters | |
US20160342653A1 (en) | Parallelizing sql user defined transformation functions | |
Singh et al. | A MapReduce-based scalable discovery and indexing of structured big data | |
CN104871153B (zh) | 用于分布式大规模并行处理数据库的方法和系统 | |
US20150317345A1 (en) | Multiple fields parallel query method and corresponding storage organization | |
US11036709B2 (en) | Single-level, multi-dimension, hash-based table partitioning | |
Oliveira et al. | Performance evaluation of NoSQL multi-model data stores in polyglot persistence applications | |
Zhao et al. | ESQP: an efficient SQL query processing for cloud data management | |
US11599540B2 (en) | Query execution apparatus, method, and system for processing data, query containing a composite primitive | |
JP5500552B2 (ja) | 表データのデータ処理方法、データ処理システムおよびそのコンピュータプログラム | |
JP5464017B2 (ja) | 分散メモリデータベースシステム、データベースサーバ、データ処理方法およびそのプログラム | |
Sudhir et al. | Replicated layout for in-memory database systems | |
KR101872414B1 (ko) | 분산 rdf 그래프에 대한 부하 분산을 지원하는 동적 분할 방법 | |
Dai et al. | Managing rich metadata in high-performance computing systems using a graph model | |
WO2014158183A1 (en) | Batching tuples | |
CN109388638B (zh) | 用于分布式大规模并行处理数据库的方法及系统 | |
Jenifer et al. | A method of reducing the skew in reducer phase—Block chain algorithm | |
US11550793B1 (en) | Systems and methods for spilling data for hash joins | |
Arres et al. | Optimizing OLAP cubes construction by improving data placement on multi-nodes clusters | |
CN113297198B (zh) | 数据库索引优化方法、分布式数据库查询方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130628 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140304 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5500552 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |