JP6253725B1 - データベースシステム、データ結合方法、統合サーバ、データ結合プログラム、データベースシステム連携方法、および、データベースシステム連携プログラム - Google Patents
データベースシステム、データ結合方法、統合サーバ、データ結合プログラム、データベースシステム連携方法、および、データベースシステム連携プログラム Download PDFInfo
- Publication number
- JP6253725B1 JP6253725B1 JP2016137743A JP2016137743A JP6253725B1 JP 6253725 B1 JP6253725 B1 JP 6253725B1 JP 2016137743 A JP2016137743 A JP 2016137743A JP 2016137743 A JP2016137743 A JP 2016137743A JP 6253725 B1 JP6253725 B1 JP 6253725B1
- Authority
- JP
- Japan
- Prior art keywords
- database system
- received
- hash value
- database
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2255—Hash tables
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
ハッシュセミジョイン法では、クライアントからクエリを受信した場合、結合対象となる列データのハッシュ値を、第1のデータベースシステムから第2のデータベースシステムに送信する。第2のデータベースシステムは、受信したハッシュ値と自身の列データのハッシュ値とを照合し、一致したハッシュ値に対応する行の識別情報を含む結合結果、および行データを抽出するための列データを第1のデータベースシステムに返信する。第1のデータベースシステムは、結合結果に基づいて行データ同士を結合することで最終結果を生成して、最終結果をクライアントに送信する。しかしながら、第2のデータベースシステムから第1のデータベースシステムに送信する列データのサイズが大きい場合、データベースシステム間の通信量が増加する可能性があった。
実行計画は、クエリにより指定されたデータをデータベースシステムXおよびデータベースシステムYからそれぞれ抽出し、抽出したデータのハッシュ値同士を照合した結果に基づいてデータ同士を結合する手順を表す。
SELECT*FROM X, Y WHERE x1=y1
SELECT文におけるSELECT節以下の「*」は結合対象のデータを指定する情報であり、FROM節以下の「X,Y」は結合対象のデータを抽出するデータベースを指定する情報であり、WHERE節以下の「x1=y1」は結合対象のデータを結合する条件を指定する情報である。すなわち、このSELECT文は、テーブルXおよびテーブルYにおける列の値が等しいという条件を満たすデータ同士を結合することを要求するクエリである。
SELECT VALUE_X, VALUE_Y FROM X, Y WHERE X.dataID=Y.dataID
このSELECT文は、データベース500Xに含まれるテーブルXに格納されたデータIDと、データベース500Yに含まれるテーブルYに格納されたデータIDとが同じという条件を満たすバリューXとバリューYとを結合した結果を要求する情報である。例えば、データIDは氏名であり、バリューXは会社住所であり、バリューYは自宅住所である。
Claims (8)
- データベースを管理する複数のデータベースシステムと、
クライアントから複数のデータを結合する要求を受け付けた場合に、前記要求に基づいて、前記複数のデータベースシステムの一部または全部である二つのデータベースシステムに問い合わせを行う統合サーバと、を備え、
前記統合サーバから問い合わせを受け付けた二つのデータベースシステムのそれぞれは、前記受け付けた問い合わせに基づいて前記データベースからデータを抽出し、抽出したデータをハッシュ値に変換し、
前記統合サーバから問い合わせを受け付けた二つのデータベースシステムのそれぞれは、前記抽出したデータをハッシュ値に変換する処理が完了したタイミングで、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに変換完了通知を送信し、
前記変換完了通知を受信したデータベースシステムは、前記変換完了通知を受け付けたタイミングに基づいて、自身が第1のデータベースシステムとして動作するか、第2のデータベースシステムとして動作するかを決定し、決定した情報を、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信し、
前記第1のデータベースシステムは、前記変換したハッシュ値を、前記統合サーバから問い合わせを受け付けたデータベースシステムのうち第2のデータベースシステムに送信し、
前記第2のデータベースシステムは、前記第1のデータベースシステムから受信したハッシュ値と、自身が変換したハッシュ値とを照合し、照合結果、および一致したハッシュ値の元となったデータを前記統合サーバに送信すると共に、前記第1のデータベースシステムから受信したハッシュ値のうち、一致したハッシュ値に対応する情報を前記第1のデータベースシステムに送信し、
前記第1のデータベースシステムは、前記第2のデータベースシステムから受信した前記一致したハッシュ値に対応する情報に基づいて、一致したハッシュ値の元となったデータを前記統合サーバに送信し、
前記統合サーバは、前記照合結果に基づいて、前記前記第1のデータベースシステムおよび前記第2のデータベースシステムからそれぞれ受信したデータ同士を結合する、
データベースシステム。 - 前記第1および第2のデータベースシステムは、それぞれ、前記抽出したデータをハッシュ値に変換する処理を非同期で行う、
請求項1に記載のデータベースシステム。 - 前記統合サーバから問い合わせを受け付けたデータベースシステムのそれぞれは、前記抽出したデータをハッシュ値に変換する処理が完了した場合に、前記統合サーバから受け付けた問い合わせに基づいて抽出したデータのデータ量に基づく情報を、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信し、
前記統合サーバから問い合わせを受け付けた他のデータベースシステムは、更に、前記データ量に基づく情報と、自身で抽出したデータ量に基づく情報とを比較し、比較結果に基づいて、自身が前記第1のデータベースシステムとして動作するか、前記第2のデータベースシステムとして動作するかを決定する、
請求項1または2に記載のデータベースシステム。 - 前記統合サーバから問い合わせを受け付けたデータベースシステムのそれぞれは、前記抽出したデータをハッシュ値に変換する処理が完了した場合に、自装置の能力を表す情報を、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信し、
前記統合サーバから問い合わせを受け付けた他のデータベースシステムは、更に、受信した前記能力を表す情報と、自装置における能力とを比較し、比較結果に基づいて、自身が前記第1のデータベースシステムとして動作するか、前記第2のデータベースシステムとして動作するかを決定する、
請求項1または2に記載のデータベースシステム。 - 統合サーバが、クライアントから複数のデータを結合する要求を受け付け、
前記統合サーバが、前記要求に基づいて前記複数のデータベースシステムの一部または全部である二つのデータベースシステムに問い合わせを行い、
前記統合サーバから問い合わせを受け付けた二つのデータベースシステムのそれぞれが、受け付けた問い合わせに基づいてデータベースからデータを抽出し、抽出したデータをハッシュ値に変換し、
前記統合サーバから問い合わせを受け付けた二つのデータベースシステムのそれぞれが、前記抽出したデータをハッシュ値に変換する処理が完了したタイミングで、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに変換完了通知を送信し、
前記変換完了通知を受信したデータベースシステムが、前記変換完了通知を受け付けたタイミングに基づいて、自身が第1のデータベースシステムとして動作するか、第2のデータベースシステムとして動作するかを決定し、決定した情報を、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信し、
前記第1のデータベースシステムが、変換したハッシュ値を、前記統合サーバから問い合わせを受け付けたデータベースシステムのうち第2のデータベースシステムに送信し、
前記第2のデータベースシステムが、前記第1のデータベースシステムから受信したハッシュ値と、自身が変換したハッシュ値とを照合し、照合結果、および一致したハッシュ値の元となったデータを前記統合サーバに送信すると共に、前記第1のデータベースシステムから受信したハッシュ値のうち、一致したハッシュ値に対応する情報を前記第1のデータベースシステムに送信し、
前記第1のデータベースシステムが、前記第2のデータベースシステムから受信した前記一致したハッシュ値に対応する情報に基づいて、一致したハッシュ値の元となったデータを前記統合サーバに送信し、
前記統合サーバが、前記照合結果に基づいて、前記第1のデータベースシステムおよび前記第2のデータベースシステムからそれぞれ受信したデータ同士を結合する、
データ結合方法。 - データベースと、
データを結合する統合サーバ、および自装置とは異なる他のデータベースシステムと通信を行う通信部と、
前記通信部を用いて、前記統合サーバから、複数のデータを結合する要求に基づく問い合わせを受け付ける受付部と、
受け付けた問い合わせに基づいて前記データベースからデータを抽出する抽出部と、
前記抽出部により抽出されたデータをハッシュ値に変換し、前記抽出されたデータをハッシュ値に変換する処理が完了したタイミングで、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに変換完了通知を送信する変換部と、
前記通信部を用いて、前記統合サーバから問い合わせを受け付けた他のデータベースシステムから前記変換完了通知を受け付けたタイミングに基づいて、自装置が変換したハッシュ値を前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信する基点側装置と、前記統合サーバから問い合わせを受け付けた他のデータベースシステムが変換したハッシュ値と自装置が変換したハッシュ値とを照合する実施側装置との間で自装置を切り替える切替部と、
前記切替部により自装置が実施側装置に切り替えられた場合に、前記通信部を用いて基点側装置のデータベースシステムからハッシュ値を受信し、前記変換部により変換されたハッシュ値と受信したハッシュ値とを照合し、照合結果、および一致したハッシュ値の元となったデータを前記統合サーバに送信すると共に、受信したハッシュ値のうち、一致したハッシュ値に対応する情報を前記基点側装置のデータベースシステムに送信し、
前記切替部により自装置が基点側装置に切り替えられた場合に、前記変換部により変換されたハッシュ値を、前記通信部を用いて実施側装置のデータベースシステムに送信し、前記実施側装置のデータベースシステムから受信した、一致したハッシュ値に対応する情報に基づいて前記抽出部により抽出されたデータを、前記通信部を用いて前記統合サーバに送信する、実行部と、
を備える、データベースシステム。 - データベースシステムが、
データを結合する統合サーバから、複数のデータを結合する要求に基づく問い合わせを受け付け、
受け付けた問い合わせに基づいて、データベースからデータを抽出し、
抽出したデータをハッシュ値に変換し、前記抽出したデータをハッシュ値に変換する処理が完了したタイミングで、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに変換完了通知を送信し、
前記統合サーバから問い合わせを受け付けた他のデータベースシステムから前記変換完了通知を受け付けたタイミングに基づいて、自装置が変換したハッシュ値を、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信する基点側装置と、前記統合サーバから問い合わせを受け付けた他のデータベースシステムが変換したハッシュ値と自装置が変換したハッシュ値とを照合する実施側装置との間で自装置を切り替え、
自装置を実施側装置に切り替えた場合に、基点側装置のデータベースシステムからハッシュ値を受信し、自装置で変換したハッシュ値と受信したハッシュ値とを照合し、照合結果、および一致したハッシュ値の元となったデータを前記統合サーバに送信すると共に、受信したハッシュ値のうち、一致したハッシュ値に対応する情報を前記基点側装置のデータベースシステムに送信し、
自装置を基点側装置に切り替えた場合に、自装置で変換したハッシュ値を、実施側装置のデータベースシステムに送信し、前記実施側装置のデータベースシステムから受信した、一致したハッシュ値に対応する情報に基づいて抽出したデータを、前記統合サーバに送信する、
データベースシステム連携方法。 - コンピュータに、
データを結合する統合サーバから、複数のデータを結合する要求に基づく問い合わせを受け付けさせ、
受け付けた問い合わせに基づいて、データベースからデータを抽出させ、
抽出したデータをハッシュ値に変換させ、前記抽出したデータをハッシュ値に変換する処理が完了したタイミングで、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに変換完了通知を送信させ、
前記統合サーバから問い合わせを受け付けた他のデータベースシステムから前記変換完了通知を受け付けたタイミングに基づいて、自装置が変換したハッシュ値を、前記統合サーバから問い合わせを受け付けた他のデータベースシステムに送信する基点側装置と、前記統合サーバから問い合わせを受け付けた他のデータベースシステムが変換したハッシュ値と自装置が変換したハッシュ値とを照合する実施側装置との間で自装置を切り替えさせ、
自装置を実施側装置に切り替えさせた場合に、基点側装置のデータベースシステムからハッシュ値を受信させ、自装置で変換させたハッシュ値と受信させたハッシュ値とを照合させ、照合結果、および一致したハッシュ値の元となったデータを前記統合サーバに送信させると共に、受信させたハッシュ値のうち、一致したハッシュ値に対応する情報を前記基点側装置のデータベースシステムに送信させ、
自装置を基点側装置に切り替えさせた場合に、自装置で変換させたハッシュ値を、実施側装置のデータベースシステムに送信させ、実施側装置のデータベースシステムから受信させた、一致したハッシュ値に対応する情報に基づいて抽出させたデータを、前記統合サーバに送信させる、
データベースシステム連携プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016137743A JP6253725B1 (ja) | 2016-07-12 | 2016-07-12 | データベースシステム、データ結合方法、統合サーバ、データ結合プログラム、データベースシステム連携方法、および、データベースシステム連携プログラム |
US15/630,358 US20180018385A1 (en) | 2016-07-12 | 2017-06-22 | System, data combining method, integration server, data combining program, database system ,database system cooperation method, and database system cooperation program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016137743A JP6253725B1 (ja) | 2016-07-12 | 2016-07-12 | データベースシステム、データ結合方法、統合サーバ、データ結合プログラム、データベースシステム連携方法、および、データベースシステム連携プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6253725B1 true JP6253725B1 (ja) | 2017-12-27 |
JP2018010424A JP2018010424A (ja) | 2018-01-18 |
Family
ID=60860128
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016137743A Active JP6253725B1 (ja) | 2016-07-12 | 2016-07-12 | データベースシステム、データ結合方法、統合サーバ、データ結合プログラム、データベースシステム連携方法、および、データベースシステム連携プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US20180018385A1 (ja) |
JP (1) | JP6253725B1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7434088B2 (ja) | 2020-07-07 | 2024-02-20 | 株式会社東芝 | 分散処理システム、分散処理装置、データベース管理装置及び方法 |
KR20240003313A (ko) * | 2022-06-30 | 2024-01-08 | 쿠팡 주식회사 | 데이터 제공 방법 및 그 장치 |
JP7493087B1 (ja) | 2023-11-30 | 2024-05-30 | Kddi株式会社 | 情報処理装置及び情報処理方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62211727A (ja) * | 1986-03-13 | 1987-09-17 | Agency Of Ind Science & Technol | 分散デ−タベ−スの問合せ処理方式 |
JP3712791B2 (ja) * | 1996-06-14 | 2005-11-02 | 株式会社日立製作所 | データベース管理方法及びその情報処理装置 |
US7512625B2 (en) * | 2005-04-01 | 2009-03-31 | International Business Machines Corporation | Method, system and program for joining source table rows with target table rows |
JP5048417B2 (ja) * | 2007-08-07 | 2012-10-17 | 株式会社富士通ビー・エス・シー | データベース管理プログラム及びデータベース管理装置 |
US8260742B2 (en) * | 2009-04-03 | 2012-09-04 | International Business Machines Corporation | Data synchronization and consistency across distributed repositories |
JP5199949B2 (ja) * | 2009-05-22 | 2013-05-15 | 日本電信電話株式会社 | データベース管理方法、分散データベースシステム、およびプログラム |
JP5199948B2 (ja) * | 2009-05-22 | 2013-05-15 | 日本電信電話株式会社 | データベース管理方法、データベース装置、およびプログラム |
JP5727258B2 (ja) * | 2011-02-25 | 2015-06-03 | ウイングアーク1st株式会社 | 分散型データベースシステム |
JP6096576B2 (ja) * | 2013-04-17 | 2017-03-15 | 株式会社東芝 | データベースシステム |
US20150142727A1 (en) * | 2013-11-18 | 2015-05-21 | Salesforce.Com, Inc. | Analytic operations for data services |
JP6187251B2 (ja) * | 2013-12-27 | 2017-08-30 | 富士通株式会社 | データ通信方法、およびデータ通信装置 |
JP6299266B2 (ja) * | 2014-02-20 | 2018-03-28 | 富士通株式会社 | データ格納方法、ストレージシステム、プログラム及びストレージ装置 |
US10013443B2 (en) * | 2015-06-25 | 2018-07-03 | Bank Of America Corporation | Comparing data stores using hash sums on disparate parallel systems |
-
2016
- 2016-07-12 JP JP2016137743A patent/JP6253725B1/ja active Active
-
2017
- 2017-06-22 US US15/630,358 patent/US20180018385A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
JP2018010424A (ja) | 2018-01-18 |
US20180018385A1 (en) | 2018-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2016382908B2 (en) | Short link processing method, device and server | |
JP6253725B1 (ja) | データベースシステム、データ結合方法、統合サーバ、データ結合プログラム、データベースシステム連携方法、および、データベースシステム連携プログラム | |
JP6967615B2 (ja) | 分散型検索及びインデックスの更新方法、システム、サーバー並びにコンピューター機器 | |
JP5741150B2 (ja) | 中継装置、中継プログラム、及び中継方法 | |
US20170132280A1 (en) | Database access method and apparatus, and database system | |
CN107451208B (zh) | 一种数据搜索方法与装置 | |
US20190273772A1 (en) | Data processing method and apparatus in service-oriented architecture system, and the service-oriented architecture system | |
CN107636655B (zh) | 实时提供数据即服务(DaaS)的系统和方法 | |
JP2022539283A (ja) | ブロックチェーンとは異なる形式のストレージに格納されるブロックチェーンデータを検証する方法およびシステム | |
JP7127438B2 (ja) | データ処理装置、データ処理方法及びデータ処理プログラム | |
JP2011034323A (ja) | 情報端末装置、情報検索方法、および情報検索プログラム | |
US20130318244A1 (en) | System and method for assigning server to terminal and efficiently delivering messages to the terminal | |
WO2018001040A1 (zh) | 业务数据提供方法、装置和计算机存储介质 | |
WO2021109871A1 (zh) | 一种媒资属性推送方法及服务器 | |
CN115495489A (zh) | 跨境物流订单轨迹查询方法、装置、终端设备和存储介质 | |
JP5199949B2 (ja) | データベース管理方法、分散データベースシステム、およびプログラム | |
JP2013088923A (ja) | 重要クエリ抽出装置、重要クエリ抽出方法および重要クエリ抽出プログラム | |
CN112398893B (zh) | 一种机器人处理数据的方法及机器人 | |
CN105208068A (zh) | 一种推送黄页信息的方法及黄页服务器 | |
CN113242307B (zh) | 服务请求处理方法、装置、服务器及存储介质 | |
JP7127440B2 (ja) | データ処理装置、データ処理方法及びデータ処理プログラム | |
JP6556799B2 (ja) | 検索装置、プログラム、データベースシステム、および検索方法 | |
JP7212728B1 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
JP7127439B2 (ja) | データ処理装置、データ処理方法及びデータ処理プログラム | |
WO2015106420A1 (zh) | 一种多维度的网络信息的存储、查询的方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171003 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171016 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171031 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171128 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6253725 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |