JP6216423B2 - データクエリの管理 - Google Patents
データクエリの管理 Download PDFInfo
- Publication number
- JP6216423B2 JP6216423B2 JP2016167897A JP2016167897A JP6216423B2 JP 6216423 B2 JP6216423 B2 JP 6216423B2 JP 2016167897 A JP2016167897 A JP 2016167897A JP 2016167897 A JP2016167897 A JP 2016167897A JP 6216423 B2 JP6216423 B2 JP 6216423B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- query
- node
- flow graph
- data source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 38
- 230000006870 function Effects 0.000 claims description 27
- 230000008520 organization Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 6
- 230000014509 gene expression Effects 0.000 claims description 3
- 238000007726 management method Methods 0.000 description 20
- 238000013500 data storage Methods 0.000 description 18
- 238000013439 planning Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 7
- 238000013523 data management Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
- G06F16/24534—Query rewriting; Transformation
- G06F16/24542—Plan optimisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
- G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2425—Iterative querying; Query formulation based on the results of a preceding query
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
- G06F16/244—Grouping and aggregation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2452—Query translation
- G06F16/24522—Translation of natural language queries to structured queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2465—Query processing support for facilitating data mining operations in structured databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/332—Query formulation
- G06F16/3325—Reformulation based on results of preceding query
- G06F16/3326—Reformulation based on results of preceding query using relevance feedback from the user, e.g. relevance feedback on documents, documents sets, document terms or passages
- G06F16/3328—Reformulation based on results of preceding query using relevance feedback from the user, e.g. relevance feedback on documents, documents sets, document terms or passages using graphical result space presentation or visualisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/732—Query formulation
- G06F16/7343—Query language or query format
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Operations Research (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Fuzzy Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Artificial Intelligence (AREA)
- Multimedia (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
データ管理システムは、1つ又は複数のデータソースに記憶されたデータを取り扱う。このようなデータソースは、データベーステーブルなどの1つ又は複数の形態をとることができ、これらの形態は、行及び列といったデータ構造に編成されたデータの集まりであり得る。ある構成では、各行がデータの記録を表し、各列が各行内のフィールドを表している。
幾つかのデータベースシステムは、クエリプラン(エクスプレインプランと呼ばれることもある)に基づくSQLクエリのようなデータベースクエリを遂行する。クエリプランとは、データベースクエリが実行される場合に行われるデータベース操作を記述したものである。クエリプランは、これらデータベース操作の他の構成や異なる操作の集合が同じ結果を成し遂げる場合であったら、データベース操作のある一つの可能な構成を記述したものでも良い。
クエリプランジェネレータは、SQLクエリのような別の種類のデータベースクエリをエミュレートする、グラフベースデータベースクエリを作成する際に使用され得る。図3は、データベース管理コンピュータシステム304上で実行するためのデータベースクエリ302を用意するデータベースクエリ管理システム300を示している。図示されているデータベース管理コンピュータシステム304は、データフローグラフとして実装されたデータベース操作を取り扱うグラフ実行エンジン306を含む。データベースクエリ管理システム300はまた、データフローグラフにより行われるべき操作の記述からデータフローグラフ312を構築できるグラフ生成エンジン310を有するグラフ生成コンピュータシステム308を含む。例えば、操作の記述は、クエリプラン314であり得る。
図5は、データベーステーブル500及びデータベーステーブルの構造表現502(データベーステーブルからのデータを全く含まない)の一例を示している。データベーステーブル500は、類似した又は異なるタイプのデータを含み得る列504a〜504iを有している。データベーステーブル500はまた、それぞれ、各列に対応するフィールドを含む行508a〜508eも有している。行の各フィールドは、対応する列のデータ型(例えば、文字列、整数、浮動小数点数等)のデータ要素510a、510b、510cを含んでいる。さらに、各行508a〜508eは、固有のデータ記憶サイズ512a〜512eを有する。例えば、データ記憶サイズ512a〜512eは、行がメモリのようなデータストレージに存在している場合に、その行のデータ要素によって使用される記憶領域量であっても良い。
図6に示すように、幾つかの実装では、カスタムグラフ機能602は、データベースクエリ604に埋め込まれうる。例えば、カスタムグラフ機能602は、データフローグラフの実行中にデータフローグラフ606を行える操作を表すかも知れない。カスタムグラフ機能602は、データベースクエリ604のコンテキストの中で、任意の機能性を持たないかも知れないし、生成されたデータフローグラフ606に渡されるようにデータベースクエリに配置される。例えば、カスタムグラフ機能602は、データフローグラフへの変換のためであるが既存のデータベースクエリの一部を入れ替え又は増補(augment)のために用意するように、データベースクエリ604に追加されるかも知れない。さらに、クエリプランジェネレータは、カスタムグラフ機能602の機能性に関する情報を有しないかも知れない。カスタムグラフ機能602は、データベースクエリ604の言語において、等価機能を持たない機能であり得る。幾つかの実装では、クエリプランジェネレータは、カスタムグラフ機能602に対する入力データ型又は出力データ型を認識する。データフローグラフ606の生成608される場合、カスタムグラフ機能602は、データフローグラフのノード610として振る舞い得る。
図7は、(図3に示す)グラフ生成コンピュータシステム308の操作の例を示したフローチャート700である。ステップ702において、グラフ生成コンピュータシステムは、例えば、ユーザインタフェースから又はデータ記憶からデータベースクエリを、受信する。ステップ704では、グラフ生成コンピュータシステムは、データベースシステムのデータベースから、データベーステーブルに関する情報を受信する。例えば、グラフ生成コンピュータシステムは、データ記憶からデータベーステーブル自体を受信しても良く、グラフ生成コンピュータシステムは、データベーステーブルに関するメタデータを受信しても良く、又は、グラフ生成コンピュータシステムは、ユーザインタフェースのユーザによって入力されたようなデータベーステーブルに関する情報を受信しても良い。ステップ706では、グラフ生成コンピュータシステムは、データベーステーブルを反映したフォーマット済みデータ編成を含みデータベーステーブルのデータがない、データベーステーブルの構造表現を生成する。ステップ708では、グラフ生成コンピュータシステムは、データベーステーブルの構造表現及びデータベースクエリを、クエリプランジェネレータによる使用のためにクエリプランニングコンピュータシステムに提供する。ステップ710では、グラフ生成コンピュータシステムは、クエリプランジェネレータによって作成されたクエリプランを、クエリプランニングコンピュータシステムから受信する。ステップ712では、グラフ生成コンピュータシステムは、クエリプランに記述されている操作に基づくクエリプランからデータフローグラフを生成するために、グラフ生成エンジンを使用する。ステップ714では、グラフ生成コンピュータシステムは、(例えば、データ管理システムのグラフ実行エンジンによる)実行のためにデータフローグラフを提供する。
Claims (57)
- コンピュータによって実施される、データソースからのデータに対する動作方法であって、前記データは前記データソースの有形かつ非一過性のコンピュータ可読媒体に格納され、前記動作はリレーショナルデータベースに適用可能なクエリ言語に従って表現されたクエリに基づくものであり、前記動作は、
クエリを受信することと、
前記クエリに基づいてデータソースを識別することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の要求システムを識別することと、
前記要求システムによって、クエリプランナーに対するリクエストを前記クエリに基づいて生成することと、
前記要求システムによって、前記リクエストを前記クエリプランナーに提供することと、
前記リクエストに基づいて前記クエリプランナーによって生成されたクエリプランを受信することであって、前記クエリプランは、リレーショナルデータベースを管理するシステムによって行われるべき1つまたは複数のステップの記述を含むことと、
データフローグラフをインスタンス化するデータ構造を生成することであって、前記データフローグラフは、
実行すべき少なくとも1つの操作を表す第1のノードであって、
前記第1のノードは、実行可能なプログラムコードを呼び出して前記少なくとも1つの操作を行うために実行システムが使用することのできる情報と関連付けられ、
前記第1のノードは、データを前記プログラムコードに対して使用可能とするために実行システムが使用することのできる情報と関連付けられ、かつ
前記少なくとも1つの操作は、前記クエリプランによって記述されたステップに基づいて選択される、第1のノードと、
前記第1のノードの操作の出力データを表す少なくとも1つのリンクであって、前記第1のノードの操作の前記出力データは、前記データフローグラフの第2のノードの操作に対する入力データとして提供される、少なくとも1つのリンクと、を含むことと、
前記データソースからデータを受信することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の実行システムを識別することと、
前記識別された実行システム上で、前記データフローグラフに基づいてプログラムコードを実行することと、を含む、
方法。 - 前記データフローグラフは、前記クエリプランによって記述されたいずれかのステップに基づいて選択された操作以外の実行すべき操作を表す第3のノードを含む、請求項1に記載の方法。
- 前記データフローグラフに基づいて前記プログラムコードを実行することは、前記データフローグラフのノードと第2のデータフローグラフのノードとの間のリンクをインスタンス化することを含み、前記第2のデータフローグラフは、前記クエリプランによって記述されたいずれかのステップに基づいて選択された操作以外の実行すべき操作を表す少なくとも1つのノードを含む、請求項1に記載の方法。
- 前記データソースは、リレーショナルデータベーステーブルを含む、請求項1に記載の方法。
- 前記データソースは、リレーショナルデータベーステーブル以外のデータ部分を含む、請求項1に記載の方法。
- 前記データソースは、フラットファイルを含む、請求項1に記載の方法。
- 前記クエリは、SQLクエリを含む、請求項1に記載の方法。
- 前記データフローグラフに基づく前記プログラムコードから、前記クエリの結果を受信することを含む、請求項1に記載の方法。
- 前記クエリプランのジェネレータは、クエリオプティマイザを含む、請求項1に記載の方法。
- 前記クエリプランは、前記クエリにおけるパラメータのデータ型を含む、請求項1に記載の方法。
- 前記クエリは、実行可能な機能への参照を含み、前記データフローグラフは、前記実行可能な機能を表すノードを含む、請求項1に記載の方法。
- 前記クエリに基づいてクエリプランナーに対するリクエストを生成することは、
前記データソースを反映したフォーマットされたデータ編成を含み、かつ前記データソースのデータを含まない、前記データソースの構造表現を作成することと、
前記クエリプランナーに対する前記リクエストに、前記構造表現を含めることと、を含む、請求項1に記載の方法。 - 前記データ構造は、前記識別された実行システムによって生成される、請求項1に記載の方法。
- 前記データ構造は、前記識別された実行システム以外のシステムによって生成される、請求項1に記載の方法。
- 1つまたは複数のプロセッサを含む、データソースからのデータに対する動作システムであって、前記データは前記データソースの有形かつ非一過性のコンピュータ可読媒体に格納され、前記動作はリレーショナルデータベースに適用可能なクエリ言語に従って表現されたクエリに基づくものであり、前記システムは、
コンピュータシステムであって、
クエリを受信することと、
前記クエリに基づいてデータソースを識別することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の要求システムを識別することと、
前記要求システムによって、クエリプランナーに対するリクエストを前記クエリに基づいて生成することと、
前記要求システムによって、前記リクエストを前記クエリプランナーに提供することと、
前記リクエストに基づいて前記クエリプランナーによって生成されたクエリプランを受信することであって、前記クエリプランは、リレーショナルデータベースを管理するシステムによって行われるべき1つまたは複数のステップの記述を含むことと、
データフローグラフをインスタンス化するデータ構造を生成することであって、前記データフローグラフは、
実行すべき少なくとも1つの操作を表す第1のノードであって、
前記第1のノードは、実行可能なプログラムコードを呼び出して前記少なくとも1つの操作を行うために実行システムが使用することのできる情報と関連付けられ、
前記第1のノードは、データを前記プログラムコードに対して使用可能とするために実行システムが使用することのできる情報と関連付けられ、かつ
前記少なくとも1つの操作は、前記クエリプランによって記述されたステップに基づいて選択される、第1のノードと、
前記第1のノードの操作の出力データを表す少なくとも1つのリンクであって、前記第1のノードの操作の出力データは、前記データフローグラフの第2のノードの操作に対する入力データとして提供される、少なくとも1つのリンクと、を含むことと、
前記データソースからデータを受信することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の実行システムを識別することと、
前記識別された実行システムに対し、前記データフローグラフに基づく前記プログラムコードを提供することと、
を行うように構成されたコンピュータシステムと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の要求システムであって、前記リクエストを生成し、かつ前記リクエストを前記クエリプランナーに提供するように構成された要求システムと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の実行システムであって、前記プログラムコードを受信し、かつ前記プログラムコードを実行するように構成された実行システムと、を含む、
システム。 - データソースからのデータに対する動作をコンピュータに行わせるための命令を含むコンピュータプログラムを格納したコンピュータ可読記憶デバイスであって、前記データは前記データソースの有形かつ非一過性のコンピュータ可読媒体に格納され、前記動作はリレーショナルデータベースに適用可能なクエリ言語に従って表現されたクエリに基づくものであり、前記動作は、
クエリを受信することと、
前記クエリに基づいてデータソースを識別することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の要求システムを識別することと、
前記要求システムによって、クエリプランナーに対するリクエストを前記クエリに基づいて生成することと、
前記要求システムによって、前記リクエストを前記クエリプランナーに提供することと、
前記リクエストに基づいて前記クエリプランナーによって生成されたクエリプランを受信することであって、前記クエリプランは、リレーショナルデータベースを管理するシステムによって行われるべき1つまたは複数のステップの記述を含むことと、
データフローグラフをインスタンス化するデータ構造を生成することであって、前記データフローグラフは、
実行すべき少なくとも1つの操作を表す第1のノードであって、
前記第1のノードは、実行可能なプログラムコードを呼び出して前記少なくとも1つの操作を行うために実行システムが使用することのできる情報と関連付けられ、
前記第1のノードは、データを前記プログラムコードに対して使用可能とするために実行システムが使用することのできる情報と関連付けられ、かつ
前記少なくとも1つの操作は、前記クエリプランによって記述されたステップに基づいて選択される、第1のノードと、
前記第1のノードの操作の出力データを表す少なくとも1つのリンクであって、前記第1のノードの操作の出力データは、前記データフローグラフの第2のノードの操作に対する入力データとして提供される、少なくとも1つのリンクと、を含むことと、
前記データソースからデータを受信することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の実行システムを識別することと、
前記識別された実行システムに対し、前記データフローグラフに基づく前記プログラムコードを提供することと、を含む、
コンピュータ可読記憶デバイス。 - 1つまたは複数のプロセッサを含む、データソースからのデータに対する動作システムであって、前記データは前記データソースの有形かつ非一過性のコンピュータ可読媒体に格納され、前記動作はリレーショナルデータベースに適用可能なクエリ言語に従って表現されたクエリに基づくものであり、前記システムは、
クエリを受信することと、
前記クエリに基づいてデータソースを識別することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の要求システムを識別することと、
前記要求システムによって、クエリプランナーに対するリクエストを前記クエリに基づいて生成することと、
前記要求システムによって、前記リクエストを前記クエリプランナーに提供することと、
前記リクエストに基づいて前記クエリプランナーによって生成されたクエリプランを受信することであって、前記クエリプランは、リレーショナルデータベースを管理するシステムによって行われるべき1つまたは複数のステップの記述を含むことと、
データフローグラフをインスタンス化するデータ構造を生成することであって、前記データフローグラフは、
実行すべき少なくとも1つの操作を表す第1のノードであって、
前記第1のノードは、実行可能なプログラムコードを呼び出して前記少なくとも1つの操作を行うために実行システムが使用することのできる情報と関連付けられ、
前記第1のノードは、データを前記プログラムコードに対して使用可能とするために実行システムが使用することのできる情報と関連付けられ、かつ
前記少なくとも1つの操作は、前記クエリプランによって記述されたステップに基づいて選択される、第1のノードと、
前記第1のノードの操作の出力データを表す少なくとも1つのリンクであって、前記第1のノードの操作の出力データは、前記データフローグラフの第2のノードの操作に対する入力データとして提供される、少なくとも1つのリンクと、を含むことと、
前記データソースからデータを受信することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の実行システムを識別することと、
前記識別された実行システムに対し、前記データフローグラフに基づく前記プログラムコードを提供することと、
を行う手段と、
前記プログラムコードを受信し、かつ前記プログラムコードを実行する手段と、を含む、
システム。 - 前記データフローグラフは、前記クエリプランによって記述されたいずれかのステップに基づいて選択された操作以外の実行すべき操作を表す第3のノードを含む、請求項15に記載のシステム。
- 前記データフローグラフに基づいて前記プログラムコードを実行することは、前記データフローグラフのノードと第2のデータフローグラフのノードとの間のリンクをインスタンス化することを含み、前記第2のデータフローグラフは、前記クエリプランによって記述されたいずれかのステップに基づいて選択された操作以外の実行すべき操作を表す少なくとも1つのノードを含む、請求項15に記載のシステム。
- 前記データソースは、リレーショナルデータベーステーブルを含む、請求項15に記載のシステム。
- 前記データソースは、リレーショナルデータベーステーブル以外のデータ部分を含む、請求項15に記載のシステム。
- 前記データソースは、フラットファイルを含む、請求項15に記載のシステム。
- 前記クエリは、SQLクエリを含む、請求項15に記載のシステム。
- 前記コンピュータシステムは、前記データフローグラフに基づく前記プログラムコードから、前記クエリの結果を受信するように構成される、請求項15に記載のシステム。
- 前記クエリプランのジェネレータは、クエリオプティマイザを含む、請求項15に記載のシステム。
- 前記クエリプランは、前記クエリにおけるパラメータのデータ型を含む、請求項15に記載のシステム。
- 前記クエリは、実行可能な機能への参照を含み、前記データフローグラフは、前記実行可能な機能を表すノードを含む、請求項15に記載のシステム。
- 前記クエリに基づいてクエリプランナーに対するリクエストを生成することは、
前記データソースを反映したフォーマットされたデータ編成を含み、かつ前記データソースのデータを含まない、前記データソースの構造表現を作成することと、
前記クエリプランナーに対する前記リクエストに、前記構造表現を含めることと、を含む、請求項15に記載のシステム。 - 前記データ構造は、前記識別された実行システムによって生成される、請求項15に記載のシステム。
- 前記データ構造は、前記識別された実行システム以外のシステムによって生成される、請求項15に記載のシステム。
- 前記データフローグラフは、前記クエリプランによって記述されたいずれかのステップに基づいて選択された操作以外の実行すべき操作を表す第3のノードを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記データフローグラフに基づいて前記プログラムコードを実行することは、前記データフローグラフのノードと第2のデータフローグラフのノードとの間のリンクをインスタンス化することを含み、前記第2のデータフローグラフは、前記クエリプランによって記述されたいずれかのステップに基づいて選択された操作以外の実行すべき操作を表す少なくとも1つのノードを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記データソースは、リレーショナルデータベーステーブルを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記データソースは、リレーショナルデータベーステーブル以外のデータ部分を含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記データソースは、フラットファイルを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記クエリは、SQLクエリを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記実行することは、前記データフローグラフに基づく前記プログラムコードから、前記クエリの結果を受信することを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記クエリプランのジェネレータは、クエリオプティマイザを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記クエリプランは、前記クエリにおけるパラメータのデータ型を含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記クエリは、実行可能な機能への参照を含み、前記データフローグラフは、前記実行可能な機能を表すノードを含む、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記クエリに基づいてクエリプランナーに対するリクエストを生成することは、
前記データソースを反映したフォーマットされたデータ編成を含み、かつ前記データソースのデータを含まない、前記データソースの構造表現を作成することと、
前記クエリプランナーに対する前記リクエストに、前記構造表現を含めることと、を含む、請求項16に記載のコンピュータ可読記憶デバイス。 - 前記データ構造は、前記識別された実行システムによって生成される、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記データ構造は、前記識別された実行システム以外のシステムによって生成される、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記実行システムと前記要求システムとは同じシステムである、請求項1に記載の方法。
- 前記実行システムと前記要求システムとは異なるシステムである、請求項1に記載の方法。
- 前記実行システムと前記要求システムとは同じシステムである、請求項15に記載のシステム。
- 前記実行システムと前記要求システムとは異なるシステムである、請求項15に記載のシステム。
- 前記実行システムと前記要求システムとは同じシステムである、請求項16に記載のコンピュータ可読記憶デバイス。
- 前記実行システムと前記要求システムとは異なるシステムである、請求項16に記載のコンピュータ可読記憶デバイス。
- データソースからのデータに対する動作方法であって、前記データは前記データソースの有形かつ非一過性のコンピュータ可読媒体に格納され、前記動作はリレーショナルデータベースに適用可能なクエリ言語に従って表現されたクエリに基づくものであり、前記動作は、
クエリを受信することと、
前記クエリに基づいてデータソースを識別することと、
前記データソースのデータを格納したリレーショナルデータベースを管理するシステム以外の実行システムを識別することと、
前記データソースのデータの構造表現を作成することであって、前記構造表現は、前記データソースを反映したフォーマットされたデータ編成を含み、かつ前記データソースの前記データのうちの少なくともいくつかを含まないことと、
前記クエリに基づいてクエリプランナーに対するリクエストを生成することであって、前記リクエストは、前記クエリに基づいてクエリプランを生成するよう前記クエリプランナーに指示し、かつ前記クエリの作用を受けるデータとして前記構造表現を提供することと、
前記リクエストを前記クエリプランナーに提供することと、
前記リクエストに基づいて前記クエリプランナーによって生成されたクエリプランを受信することであって、前記クエリプランは、リレーショナルデータベースを管理するシステムによって行われるべき1つまたは複数のステップの記述を含むことと、
データフローグラフをインスタンス化するデータ構造を生成することであって、前記データフローグラフは、
実行すべき少なくとも1つの操作を表す第1のノードであって、
前記第1のノードは、実行可能なプログラムコードを呼び出して前記少なくとも1つの操作を行うために実行システムが使用することのできる情報と関連付けられ、
前記第1のノードは、データを前記プログラムコードに対して使用可能とするために実行システムが使用することのできる情報と関連付けられ、かつ
前記少なくとも1つの操作は、前記クエリプランによって記述されたステップに基づいて選択される、第1のノードと、
前記第1のノードの操作の出力データを表す少なくとも1つのリンクであって、前記第1のノードの操作の前記出力データは、前記データフローグラフの第2のノードの操作に対する入力データとして提供される、少なくとも1つのリンクと、を含むことと、
前記データソースからデータを受信することと、
前記識別された実行システム上で、前記データフローグラフに基づいてプログラムコードを実行することと、を含む、
方法。 - 前記データソースは、リレーショナルデータベーステーブルを含む、請求項50に記載の方法。
- 前記データソースは、リレーショナルデータベーステーブル以外のデータ部分を含む、請求項50に記載の方法。
- 前記データソースは、フラットファイルを含む、請求項50に記載の方法。
- 前記データ構造は、前記識別された実行システムによって生成される、請求項50に記載の方法。
- 前記データ構造は、前記識別された実行システム以外のシステムによって生成される、請求項50に記載の方法。
- 前記実行システムと前記要求システムとは同じシステムである、請求項50に記載の方法。
- 前記実行システムと前記要求システムとは異なるシステムである、請求項50に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/688,316 | 2010-01-15 | ||
US12/688,316 US9665620B2 (en) | 2010-01-15 | 2010-01-15 | Managing data queries |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015137280A Division JP6000415B2 (ja) | 2010-01-15 | 2015-07-08 | データクエリの管理 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017182015A Division JP6578333B2 (ja) | 2010-01-15 | 2017-09-22 | データクエリの管理 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017016677A JP2017016677A (ja) | 2017-01-19 |
JP6216423B2 true JP6216423B2 (ja) | 2017-10-18 |
Family
ID=43755268
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012549105A Pending JP2013517574A (ja) | 2010-01-15 | 2011-01-14 | データクエリの管理 |
JP2015137280A Active JP6000415B2 (ja) | 2010-01-15 | 2015-07-08 | データクエリの管理 |
JP2016167897A Active JP6216423B2 (ja) | 2010-01-15 | 2016-08-30 | データクエリの管理 |
JP2017182015A Active JP6578333B2 (ja) | 2010-01-15 | 2017-09-22 | データクエリの管理 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012549105A Pending JP2013517574A (ja) | 2010-01-15 | 2011-01-14 | データクエリの管理 |
JP2015137280A Active JP6000415B2 (ja) | 2010-01-15 | 2015-07-08 | データクエリの管理 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017182015A Active JP6578333B2 (ja) | 2010-01-15 | 2017-09-22 | データクエリの管理 |
Country Status (9)
Country | Link |
---|---|
US (2) | US9665620B2 (ja) |
EP (2) | EP3324311A1 (ja) |
JP (4) | JP2013517574A (ja) |
KR (2) | KR101877481B1 (ja) |
CN (2) | CN106055584B (ja) |
AU (3) | AU2011205787B2 (ja) |
CA (1) | CA2786042C (ja) |
HK (1) | HK1255489A1 (ja) |
WO (1) | WO2011088293A1 (ja) |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9665620B2 (en) | 2010-01-15 | 2017-05-30 | Ab Initio Technology Llc | Managing data queries |
JP6338579B2 (ja) * | 2012-07-24 | 2018-06-06 | アビニシオ テクノロジー エルエルシー | データモデルにおけるエンティティのマッピング |
US10180821B2 (en) | 2013-12-05 | 2019-01-15 | Ab Initio Technology Llc | Managing interfaces for sub-graphs |
CA2929716C (en) | 2013-12-06 | 2021-08-31 | Ab Initio Technology Llc | Source code translation |
CN103729471B (zh) * | 2014-01-21 | 2017-03-08 | 华为软件技术有限公司 | 数据库查询方法和装置 |
KR102371811B1 (ko) | 2014-03-14 | 2022-03-07 | 아브 이니티오 테크놀로지 엘엘시 | 키드 엔티티들의 속성 매핑 |
US10437819B2 (en) | 2014-11-14 | 2019-10-08 | Ab Initio Technology Llc | Processing queries containing a union-type operation |
US10417281B2 (en) * | 2015-02-18 | 2019-09-17 | Ab Initio Technology Llc | Querying a data source on a network |
CN106156162A (zh) * | 2015-04-15 | 2016-11-23 | 阿里巴巴集团控股有限公司 | 数据库查询量统计方法和设备 |
US10210236B2 (en) | 2015-11-23 | 2019-02-19 | Ab Initio Technology Llc | Storing and retrieving data of a data cube |
US10671669B2 (en) | 2015-12-21 | 2020-06-02 | Ab Initio Technology Llc | Sub-graph interface generation |
WO2017223464A1 (en) | 2016-06-23 | 2017-12-28 | Schneider Electric USA, Inc. | Contextual-characteristic data driven sequential federated query methods for distributed systems |
CN106446170A (zh) * | 2016-09-27 | 2017-02-22 | 努比亚技术有限公司 | 数据查询方法及装置 |
US11016973B2 (en) * | 2016-11-29 | 2021-05-25 | Sap Se | Query plan execution engine |
KR102549994B1 (ko) * | 2017-03-29 | 2023-06-29 | 아브 이니티오 테크놀로지 엘엘시 | 가변 레벨 병렬화를 사용하여 데이터 처리 동작을 수행하기 위한 시스템 및 방법 |
US11354348B2 (en) * | 2017-06-29 | 2022-06-07 | Microsoft Technology Licensing, Llc | Optimized record placement in graph database |
CN107480287A (zh) * | 2017-08-25 | 2017-12-15 | 成都优力德新能源有限公司 | 基于云计算的数据集成装置 |
CN110471888A (zh) * | 2018-05-09 | 2019-11-19 | 株式会社日立制作所 | 一种自动收集数据的方法、装置、介质、设备及系统 |
US12032631B2 (en) | 2018-05-30 | 2024-07-09 | Ab Initio Technology Llc | Systems and methods for dataflow graph optimization |
US12013856B2 (en) * | 2018-08-13 | 2024-06-18 | Amazon Technologies, Inc. | Burst performance of database queries according to query size |
CN109299094A (zh) * | 2018-09-18 | 2019-02-01 | 深圳壹账通智能科技有限公司 | 数据表处理方法、装置、计算机设备和存储介质 |
CN109614400A (zh) * | 2018-11-30 | 2019-04-12 | 深圳前海微众银行股份有限公司 | 失败任务的影响及溯源分析方法、装置、设备及存储介质 |
US11327970B1 (en) | 2019-03-25 | 2022-05-10 | Amazon Technologies, Inc. | Context dependent execution time prediction for redirecting queries |
US11308100B2 (en) | 2019-06-25 | 2022-04-19 | Amazon Technologies, Inc. | Dynamically assigning queries to secondary query processing resources |
US11093223B2 (en) | 2019-07-18 | 2021-08-17 | Ab Initio Technology Llc | Automatically converting a program written in a procedural programming language into a dataflow graph and related systems and methods |
CN110472068B (zh) * | 2019-08-20 | 2020-04-24 | 星环信息科技(上海)有限公司 | 基于异构分布式知识图谱的大数据处理方法、设备及介质 |
CN111143397B (zh) * | 2019-12-10 | 2021-04-13 | 跬云(上海)信息科技有限公司 | 混合数据查询方法及装置、存储介质 |
CN111209309B (zh) * | 2020-01-13 | 2023-03-10 | 腾讯科技(深圳)有限公司 | 数据流图处理结果确定方法、装置、设备及存储介质 |
Family Cites Families (183)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4586137A (en) | 1982-10-18 | 1986-04-29 | Dresser Industries, Inc. | Method for generating variable well logging data composites |
JPH01108638A (ja) | 1987-10-21 | 1989-04-25 | Hitachi Ltd | 並列化コンパイル方式 |
JP2738692B2 (ja) | 1988-01-29 | 1998-04-08 | 株式会社日立製作所 | 並列化コンパイル方法 |
JPH0267682A (ja) | 1988-09-02 | 1990-03-07 | Hitachi Ltd | データベースシステム |
US5072371A (en) | 1989-03-01 | 1991-12-10 | The United States Of America As Represented By The United States Department Of Energy | Method for simultaneous overlapped communications between neighboring processors in a multiple |
US5121494A (en) | 1989-10-05 | 1992-06-09 | Ibm Corporation | Joining two database relations on a common field in a parallel relational database field |
US5367619A (en) | 1990-04-27 | 1994-11-22 | Eaton Corporation | Electronic data entry system employing an expert system to facilitate generation of electronic data forms with complex interrelationships between fields and subforms |
US5347639A (en) | 1991-07-15 | 1994-09-13 | International Business Machines Corporation | Self-parallelizing computer system and method |
US5632022A (en) | 1991-11-13 | 1997-05-20 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Encyclopedia of software components |
US5313584A (en) | 1991-11-25 | 1994-05-17 | Unisys Corporation | Multiple I/O processor system |
FR2696853B1 (fr) | 1992-10-12 | 1994-12-23 | Bull Sa | Procédé d'aide à l'optimisation d'une requête d'un système de gestion, de base de données relationnel et procédé d'analyse syntaxique en résultant. |
JPH05257709A (ja) | 1992-03-16 | 1993-10-08 | Hitachi Ltd | 並列化判別方法およびそれを用いた並列化支援方法 |
US5412806A (en) | 1992-08-20 | 1995-05-02 | Hewlett-Packard Company | Calibration of logical cost formulae for queries in a heterogeneous DBMS using synthetic database |
US5432940A (en) | 1992-11-02 | 1995-07-11 | Borland International, Inc. | System and methods for improved computer-based training |
US5574898A (en) | 1993-01-08 | 1996-11-12 | Atria Software, Inc. | Dynamic software version auditor which monitors a process to provide a list of objects that are accessed |
US5446915A (en) | 1993-05-25 | 1995-08-29 | Intel Corporation | Parallel processing system virtual connection method and apparatus with protection and flow control |
US5475842A (en) | 1993-08-11 | 1995-12-12 | Xerox Corporation | Method of compilation optimization using an N-dimensional template for relocated and replicated alignment of arrays in data-parallel programs for reduced data communication during execution |
JPH0765032A (ja) | 1993-08-27 | 1995-03-10 | Toshiba Corp | データベース言語変換機能を持つ情報処理システム |
US5600833A (en) | 1993-09-17 | 1997-02-04 | Digital Equipment Corp. | Attribute portion based document retrieval system with system query language interface |
JP4050339B2 (ja) | 1994-04-28 | 2008-02-20 | 株式会社東芝 | 並行プログラム作成支援装置及び並行プログラム作成方法並びに並行プログラム実行装置 |
US5588150A (en) | 1994-09-29 | 1996-12-24 | International Business Machines Corporation | Push down optimization in a distributed, multi-database system |
US5768564A (en) | 1994-10-07 | 1998-06-16 | Tandem Computers Incorporated | Method and apparatus for translating source code from one high-level computer language to another |
FI98690C (fi) | 1994-10-18 | 1997-07-25 | Nokia Telecommunications Oy | Menetelmä alueryhmäpuhelun muodostamiseksi matkaviestinjärjestelmässä ja matkaviestinjärjestelmä |
US5734886A (en) | 1994-11-16 | 1998-03-31 | Lucent Technologies Inc. | Database dependency resolution method and system for identifying related data files |
FI98973C (fi) | 1994-11-22 | 1997-09-10 | Nokia Telecommunications Oy | Menetelmä ryhmätietojen ylläpitämiseksi matkaviestinjärjestelmässä ja matkaviestinjärjestelmä |
US5546576A (en) * | 1995-02-17 | 1996-08-13 | International Business Machines Corporation | Query optimizer system that detects and prevents mutating table violations of database integrity in a query before execution plan generation |
US5619692A (en) | 1995-02-17 | 1997-04-08 | International Business Machines Corporation | Semantic optimization of query order requirements using order detection by normalization in a query compiler system |
FI100215B (fi) | 1995-03-17 | 1997-10-15 | Nokia Telecommunications Oy | Matkaviestijärjestelmän tilaajatietojen päivittäminen |
US5706509A (en) | 1995-04-28 | 1998-01-06 | Intel Corporation | Application independent record level synchronization |
US5678044A (en) | 1995-06-02 | 1997-10-14 | Electronic Data Systems Corporation | System and method for improved rehosting of software systems |
US5682537A (en) | 1995-08-31 | 1997-10-28 | Unisys Corporation | Object lock management system with improved local lock management and global deadlock detection in a parallel data processing system |
US5712971A (en) | 1995-12-11 | 1998-01-27 | Ab Initio Software Corporation | Methods and systems for reconstructing the state of a computation |
US5819021A (en) | 1995-12-11 | 1998-10-06 | Ab Initio Software Corporation | Overpartitioning system and method for increasing checkpoints in component-based parallel applications |
US5909681A (en) | 1996-03-25 | 1999-06-01 | Torrent Systems, Inc. | Computer system and computerized method for partitioning data for parallel processing |
US6311265B1 (en) | 1996-03-25 | 2001-10-30 | Torrent Systems, Inc. | Apparatuses and methods for programming parallel computers |
JPH09319757A (ja) | 1996-05-29 | 1997-12-12 | N T T Data Tsushin Kk | 情報検索システム |
US5799149A (en) | 1996-06-17 | 1998-08-25 | International Business Machines Corporation | System partitioning for massively parallel processors |
US5870743A (en) | 1996-06-24 | 1999-02-09 | Oracle Corporation | Method and apparatus for parallelizing operations that create a table |
US5966072A (en) | 1996-07-02 | 1999-10-12 | Ab Initio Software Corporation | Executing computations expressed as graphs |
JP4533974B2 (ja) | 1996-08-01 | 2010-09-01 | 康 清木 | 異種データベース統合システム |
JPH1091494A (ja) | 1996-09-19 | 1998-04-10 | Hitachi Ltd | データベース操作プログラムの変換方法および変換装置 |
JPH10232875A (ja) | 1997-02-19 | 1998-09-02 | Hitachi Ltd | データベース管理方法および並列データベース管理システム |
US6330008B1 (en) | 1997-02-24 | 2001-12-11 | Torrent Systems, Inc. | Apparatuses and methods for monitoring performance of parallel computing |
US5999729A (en) | 1997-03-06 | 1999-12-07 | Continuum Software, Inc. | System and method for developing computer programs for execution on parallel processing systems |
US5956074A (en) | 1997-03-11 | 1999-09-21 | Sclafani; Peter J. | Cable television return display unit |
JP3155991B2 (ja) | 1997-04-09 | 2001-04-16 | 日本アイ・ビー・エム株式会社 | 集約演算実行方法及びコンピュータ・システム |
US5956704A (en) * | 1997-06-05 | 1999-09-21 | Oracle Corporation | Method and apparatus for parallelizing operations that insert data into an existing data container |
US6092062A (en) * | 1997-06-30 | 2000-07-18 | International Business Machines Corporation | Relational database query optimization to perform query evaluation plan, pruning based on the partition properties |
US6077313A (en) | 1997-10-22 | 2000-06-20 | Microsoft Corporation | Type partitioned dataflow analyses |
US6295518B1 (en) | 1997-12-09 | 2001-09-25 | Mci Communications Corporation | System and method for emulating telecommunications network devices |
US6266804B1 (en) | 1997-12-23 | 2001-07-24 | Ab Initio Software Corporation | Method for analyzing capacity of parallel processing systems |
US6625593B1 (en) * | 1998-06-29 | 2003-09-23 | International Business Machines Corporation | Parallel query optimization strategies for replicated and partitioned tables |
US6205465B1 (en) | 1998-07-22 | 2001-03-20 | Cisco Technology, Inc. | Component extensible parallel execution of multiple threads assembled from program components specified with partial inter-component sequence information |
US6453464B1 (en) | 1998-09-03 | 2002-09-17 | Legacyj. Corp., Inc. | Method and apparatus for converting COBOL to Java |
US6339769B1 (en) | 1998-09-14 | 2002-01-15 | International Business Machines Corporation | Query optimization by transparently altering properties of relational tables using materialized views |
US6378126B2 (en) | 1998-09-29 | 2002-04-23 | International Business Machines Corporation | Compilation of embedded language statements in a source code program |
IL140805A0 (en) * | 1998-10-02 | 2002-02-10 | Ibm | Structure skeletons for efficient voice navigation through generic hierarchical objects |
JP2000148699A (ja) | 1998-11-06 | 2000-05-30 | Nec Corp | ネットワークマネージメントシステム |
JP4406944B2 (ja) * | 1998-11-11 | 2010-02-03 | 株式会社日立製作所 | 計算機システム及び問合せに対する処理分散システム |
US7047232B1 (en) | 1999-01-13 | 2006-05-16 | Ab Initio Software Corporation | Parallelizing applications of script-driven tools |
JP4794709B2 (ja) * | 1999-03-01 | 2011-10-19 | 新日鉄ソリューションズ株式会社 | データ管理システム及びコンピュータ読み取り可能な記録媒体 |
US7080062B1 (en) * | 1999-05-18 | 2006-07-18 | International Business Machines Corporation | Optimizing database queries using query execution plans derived from automatic summary table determining cost based queries |
US6560593B1 (en) | 1999-07-20 | 2003-05-06 | Computer Associates Think, Inc. | Method and apparatus for viewing the effect of changes to an index for a database table on an optimization plan for a database query |
JP4552242B2 (ja) | 1999-10-06 | 2010-09-29 | 株式会社日立製作所 | 仮想表インタフェースと該インタフェースを用いた問合せ処理システム及び方法 |
US6615203B1 (en) | 1999-12-17 | 2003-09-02 | International Business Machines Corporation | Method, computer program product, and system for pushdown analysis during query plan generation |
JP3795289B2 (ja) | 2000-02-07 | 2006-07-12 | 日本電信電話株式会社 | データベースの実行制御装置 |
US6947934B1 (en) * | 2000-02-16 | 2005-09-20 | International Business Machines Corporation | Aggregate predicates and search in a database management system |
JP4483034B2 (ja) | 2000-06-06 | 2010-06-16 | 株式会社日立製作所 | 異種データソース統合アクセス方法 |
US7164422B1 (en) | 2000-07-28 | 2007-01-16 | Ab Initio Software Corporation | Parameterized graphs with conditional components |
US6785668B1 (en) | 2000-11-28 | 2004-08-31 | Sas Institute Inc. | System and method for data flow analysis of complex data filters |
JP4543563B2 (ja) * | 2001-02-28 | 2010-09-15 | 株式会社日立製作所 | 統合データベースシステムにおける問合せ最適化方法 |
US7418441B2 (en) | 2001-02-28 | 2008-08-26 | International Business Machines Corporation | Data loading from a remote data source record by record |
US8412746B2 (en) | 2001-05-25 | 2013-04-02 | International Business Machines Corporation | Method and system for federated querying of data sources |
US6877000B2 (en) | 2001-08-22 | 2005-04-05 | International Business Machines Corporation | Tool for converting SQL queries into portable ODBC |
US6725212B2 (en) * | 2001-08-31 | 2004-04-20 | International Business Machines Corporation | Platform-independent method and system for graphically presenting the evaluation of a query in a database management system |
JP2003099441A (ja) | 2001-09-21 | 2003-04-04 | Hitachi Ltd | データ検索手順探索方法 |
US6915290B2 (en) | 2001-12-11 | 2005-07-05 | International Business Machines Corporation | Database query optimization apparatus and method that represents queries as graphs |
US7409474B2 (en) | 2002-06-27 | 2008-08-05 | Broadcom Corporation | Method and system for rate adaptation |
US7167850B2 (en) | 2002-10-10 | 2007-01-23 | Ab Initio Software Corporation | Startup and control of graph-based computation |
US7953891B2 (en) * | 2003-03-18 | 2011-05-31 | Microsoft Corporation | Systems and methods for scheduling data flow execution based on an arbitrary graph describing the desired data flow |
CA2429910A1 (en) | 2003-05-27 | 2004-11-27 | Cognos Incorporated | System and method of query transformation |
US7249120B2 (en) * | 2003-06-27 | 2007-07-24 | Microsoft Corporation | Method and apparatus for selecting candidate statistics to estimate the selectivity value of the conditional selectivity expression in optimize queries based on a set of predicates that each reference a set of relational database tables |
US20050038788A1 (en) | 2003-08-14 | 2005-02-17 | International Business Machines Corporation | Annotation security to prevent the divulgence of sensitive information |
US20050177557A1 (en) * | 2003-09-06 | 2005-08-11 | Oracle International Corporation | Automatic prevention of run-away query execution |
WO2005028627A2 (en) * | 2003-09-19 | 2005-03-31 | Netezza Corporation | Performing sequence analysis as a relational join |
US7165063B2 (en) * | 2003-11-19 | 2007-01-16 | International Business Machines Corporation | Context quantifier transformation in XML query rewrite |
US7133861B2 (en) * | 2003-12-04 | 2006-11-07 | International Business Machines Corporation | Query access plan rebuilds |
US7310637B2 (en) | 2004-05-05 | 2007-12-18 | International Business Machines Corporation | Dynamic database access via standard query language and abstraction technology |
US7930432B2 (en) * | 2004-05-24 | 2011-04-19 | Microsoft Corporation | Systems and methods for distributing a workplan for data flow execution based on an arbitrary graph describing the desired data flow |
US20060047696A1 (en) | 2004-08-24 | 2006-03-02 | Microsoft Corporation | Partially materialized views |
CN100518079C (zh) | 2004-09-30 | 2009-07-22 | 北京航空航天大学 | 分布式性能数据采集方法 |
US7899833B2 (en) | 2004-11-02 | 2011-03-01 | Ab Initio Technology Llc | Managing related data objects |
US7461052B2 (en) | 2004-12-06 | 2008-12-02 | International Business Machines Corporation | Abstract query plan |
US7890532B2 (en) | 2004-12-15 | 2011-02-15 | Microsoft Corporation | Complex data access |
US7359922B2 (en) * | 2004-12-22 | 2008-04-15 | Ianywhere Solutions, Inc. | Database system and methodology for generalized order optimization |
US20060265362A1 (en) | 2005-05-18 | 2006-11-23 | Content Analyst Company, Llc | Federated queries and combined text and relational data |
US7856523B2 (en) | 2005-06-01 | 2010-12-21 | Microsoft Corporation | Random Access Memory (RAM) based Content Addressable Memory (CAM) management |
US8935273B2 (en) | 2005-06-23 | 2015-01-13 | International Business Machines Corporation | Method of processing and decomposing a multidimensional query against a relational data source |
CA2519604C (en) | 2005-06-23 | 2011-07-12 | Cognos Incorporated | Master-detail provider and method of providing master-detail functionality |
US7716630B2 (en) | 2005-06-27 | 2010-05-11 | Ab Initio Technology Llc | Managing parameters for graph-based computations |
US7584205B2 (en) * | 2005-06-27 | 2009-09-01 | Ab Initio Technology Llc | Aggregating data with complex operations |
US7877350B2 (en) | 2005-06-27 | 2011-01-25 | Ab Initio Technology Llc | Managing metadata for graph-based computations |
WO2007006143A1 (en) | 2005-07-13 | 2007-01-18 | The Hospital For Sick Children | Compositions and methods for detecting transformed cells |
CA2519001A1 (en) | 2005-09-13 | 2007-03-13 | Cognos Incorporated | System and method of data agnostic business intelligence query |
CA2519010A1 (en) | 2005-09-13 | 2007-03-13 | Cognos Incorporated | Query framework system and method |
US20070067274A1 (en) | 2005-09-16 | 2007-03-22 | International Business Machines Corporation | Hybrid push-down/pull-up of unions with expensive operations in a federated query processor |
US7464084B2 (en) | 2006-01-30 | 2008-12-09 | International Business Machines Corporation | Method for performing an inexact query transformation in a heterogeneous environment |
US7945562B2 (en) | 2006-03-15 | 2011-05-17 | Oracle International Corporation | Join predicate push-down optimizations |
US7870556B2 (en) | 2006-05-16 | 2011-01-11 | Ab Initio Technology Llc | Managing computing resources in graph-based computations |
US8341112B2 (en) * | 2006-05-19 | 2012-12-25 | Microsoft Corporation | Annotation by search |
DE502006007802D1 (de) * | 2006-06-01 | 2010-10-14 | Mediareif Moestl & Reif Kommun | Verfahren zum steuern eines relationalen datenbanksystems |
AU2007286155B2 (en) | 2006-08-10 | 2013-12-12 | Ab Initio Technology Llc. | Distributing services in graph-based computations |
JP4872529B2 (ja) | 2006-08-22 | 2012-02-08 | 株式会社日立製作所 | リバースエンジニアリング支援方法 |
US7979453B2 (en) | 2006-08-23 | 2011-07-12 | Innovative Solutions, Inc. | Efficient search result update mechanism |
TWI348139B (en) | 2006-08-24 | 2011-09-01 | Wintek Corp | A lcd scan lines driving method |
JP2008084028A (ja) | 2006-09-27 | 2008-04-10 | Toshiba Corp | データベース検索システムおよびデータベース検索方法 |
JP2008158664A (ja) | 2006-12-21 | 2008-07-10 | Sony Corp | 通信システム、サーバ、通信端末及び通信方法 |
US8069129B2 (en) | 2007-04-10 | 2011-11-29 | Ab Initio Technology Llc | Editing and compiling business rules |
US8122088B2 (en) | 2007-06-28 | 2012-02-21 | International Business Machines Corporation | Adding personal note capabilities to text exchange clients |
EP2026479A1 (de) | 2007-08-17 | 2009-02-18 | Leica Geosystems AG | Transimpedanzverstärkerschaltung für einen Photodetektor |
US9424315B2 (en) | 2007-08-27 | 2016-08-23 | Teradata Us, Inc. | Methods and systems for run-time scheduling database operations that are executed in hardware |
US20100005077A1 (en) * | 2008-07-07 | 2010-01-07 | Kickfire, Inc. | Methods and systems for generating query plans that are compatible for execution in hardware |
JP5453273B2 (ja) | 2007-09-20 | 2014-03-26 | アビニシオ テクノロジー エルエルシー | グラフベース計算におけるデータフロー管理 |
US7673065B2 (en) | 2007-10-20 | 2010-03-02 | Oracle International Corporation | Support for sharing computation between aggregations in a data stream management system |
US8527976B2 (en) | 2007-11-14 | 2013-09-03 | Nec Laboratories America, Inc. | System and method for generating error traces for concurrency bugs |
CN101436192B (zh) | 2007-11-16 | 2011-03-16 | 国际商业机器公司 | 用于优化针对垂直存储式数据库的查询的方法和设备 |
US9165032B2 (en) | 2007-11-21 | 2015-10-20 | Hewlett-Packard Development Company, L.P. | Allocation of resources for concurrent query execution via adaptive segmentation |
US8429601B2 (en) * | 2007-11-29 | 2013-04-23 | Red Hat, Inc. | Code completion for object relational mapping query language (OQL) queries |
US20090198703A1 (en) | 2008-01-31 | 2009-08-06 | Hewlett-Packard Development Company, L.P. | Intelligent data storage system |
KR101517460B1 (ko) | 2008-02-26 | 2015-05-15 | 아브 이니티오 테크놀로지 엘엘시 | 데이터 관계의 그래픽 표현 |
US7933916B2 (en) * | 2008-02-28 | 2011-04-26 | Microsoft Corporation | Querying nonSQL data stores with a SQL-style language |
US8537160B2 (en) * | 2008-03-05 | 2013-09-17 | Microsoft Corporation | Generating distributed dataflow graphs |
JP2009217405A (ja) | 2008-03-07 | 2009-09-24 | Nec Corp | ジョブネットワーク自動生成方式及びプログラム |
US8538985B2 (en) | 2008-03-11 | 2013-09-17 | International Business Machines Corporation | Efficient processing of queries in federated database systems |
US20100295833A1 (en) | 2008-04-11 | 2010-11-25 | Masaaki Nishio | Display device and method of driving display device |
US7974967B2 (en) | 2008-04-15 | 2011-07-05 | Sap Ag | Hybrid database system using runtime reconfigurable hardware |
JP5349581B2 (ja) | 2008-04-16 | 2013-11-20 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 照会処理視覚化システム、照会処理を視覚化する方法及びコンピュータ・プログラム |
US20100057695A1 (en) * | 2008-08-28 | 2010-03-04 | Microsoft Corporation | Post-processing search results on a client computer |
US7917463B2 (en) | 2008-10-10 | 2011-03-29 | Business.Com, Inc. | System and method for data warehousing and analytics on a distributed file system |
US7962500B2 (en) * | 2008-10-24 | 2011-06-14 | Yahoo! Inc. | Digital image retrieval by aggregating search results based on visual annotations |
US20100121868A1 (en) | 2008-11-07 | 2010-05-13 | Yann Le Biannic | Converting a database query to a multi-dimensional expression query |
US8489622B2 (en) * | 2008-12-12 | 2013-07-16 | Sas Institute Inc. | Computer-implemented systems and methods for providing paginated search results from a database |
US9218209B2 (en) | 2008-12-31 | 2015-12-22 | Pivotal Software, Inc. | Apparatus and method for parallel processing of a query |
US8666966B2 (en) | 2009-01-30 | 2014-03-04 | Hewlett-Packard Development Company, L.P. | Providing parallel result streams for database queries |
JP4659888B2 (ja) | 2009-02-13 | 2011-03-30 | 株式会社日立製作所 | データベース処理システム、計算機及びデータベース処理方法 |
CN105843684B (zh) | 2009-02-13 | 2020-03-03 | 起元技术有限责任公司 | 管理任务执行 |
US20100241893A1 (en) | 2009-03-18 | 2010-09-23 | Eric Friedman | Interpretation and execution of a customizable database request using an extensible computer process and an available computing environment |
US8392398B2 (en) * | 2009-07-29 | 2013-03-05 | International Business Machines Corporation | Query optimization over graph data streams |
US9477778B2 (en) | 2009-08-21 | 2016-10-25 | Oracle International Corporation | XML query optimization with order analysis of XML schema |
US9064047B2 (en) | 2009-09-24 | 2015-06-23 | International Business Machines Corporation | Parallel processing of ETL jobs involving extensible markup language documents |
US8620903B2 (en) | 2009-11-04 | 2013-12-31 | Nec Laboratories America, Inc. | Database distribution system and methods for scale-out applications |
US8326797B2 (en) | 2009-11-11 | 2012-12-04 | International Business Machines Corporation | Supporting set-level slice and dice in data warehouses |
US8688683B2 (en) | 2009-11-30 | 2014-04-01 | Business Objects Software Ltd. | Query plan reformulation |
KR101302563B1 (ko) * | 2009-12-15 | 2013-09-02 | 한국전자통신연구원 | 개체명 사전 구축 시스템 및 구축 방법 |
US9665620B2 (en) | 2010-01-15 | 2017-05-30 | Ab Initio Technology Llc | Managing data queries |
US8204903B2 (en) | 2010-02-16 | 2012-06-19 | Microsoft Corporation | Expressing and executing semantic queries within a relational database |
US9286370B2 (en) | 2010-02-24 | 2016-03-15 | International Business Machines Corporation | Viewing a dimensional cube as a virtual data source |
US8555265B2 (en) | 2010-05-04 | 2013-10-08 | Google Inc. | Parallel processing of data |
US9495427B2 (en) | 2010-06-04 | 2016-11-15 | Yale University | Processing of data using a database system in communication with a data processing framework |
CN107066241B (zh) | 2010-06-15 | 2021-03-09 | 起元技术有限责任公司 | 用于动态加载基于图的计算的系统和方法 |
KR101009924B1 (ko) * | 2010-06-25 | 2011-01-20 | 한국과학기술정보연구원 | 온톨로지 스키마와 결합된 개체명 사전 및 마이닝 규칙을 이용한 개체명 사전 또는 마이닝 규칙 데이터베이스 갱신 장치 및 방법 |
JP5536568B2 (ja) | 2010-07-01 | 2014-07-02 | インターナショナル・ビジネス・マシーンズ・コーポレーション | トランザクションを集約して処理する方法、システム、およびプログラム |
JP5199317B2 (ja) | 2010-08-25 | 2013-05-15 | 株式会社日立製作所 | データベース処理方法、データベース処理システム及びデータベースサーバ |
US8326821B2 (en) | 2010-08-25 | 2012-12-04 | International Business Machines Corporation | Transforming relational queries into stream processing |
US9128983B2 (en) | 2010-10-13 | 2015-09-08 | Aol Inc. | Systems and methods for query optimization |
US8850574B1 (en) | 2011-02-28 | 2014-09-30 | Google Inc. | Safe self-modifying code |
US20120246158A1 (en) | 2011-03-25 | 2012-09-27 | Microsoft Corporation | Co-range partition for query plan optimization and data-parallel programming model |
US9116955B2 (en) | 2011-05-02 | 2015-08-25 | Ab Initio Technology Llc | Managing data queries |
US8782081B2 (en) | 2011-05-11 | 2014-07-15 | Google Inc. | Query template definition and transformation |
US8898145B2 (en) | 2011-06-15 | 2014-11-25 | Microsoft Corporation | Query optimization techniques for business intelligence systems |
US8635206B2 (en) | 2011-06-30 | 2014-01-21 | International Business Machines Corporation | Database query optimization |
US9449030B2 (en) | 2011-06-30 | 2016-09-20 | International Business Machines Corporation | Method for native program to inherit same transaction content when invoked by primary program running in separate environment |
JP5357286B2 (ja) | 2011-09-21 | 2013-12-04 | 前田建設工業株式会社 | 情報処理装置、情報処理方法、およびプログラム |
US9177022B2 (en) | 2011-11-02 | 2015-11-03 | Microsoft Technology Licensing, Llc | User pipeline configuration for rule-based query transformation, generation and result display |
KR101255957B1 (ko) * | 2011-12-09 | 2013-04-24 | 포항공과대학교 산학협력단 | 개체명 태깅 방법 및 장치 |
US9317551B1 (en) | 2012-03-23 | 2016-04-19 | The Mathworks, Inc. | Transforming a search query into a format understood by a technical computing environment (TCE)-based search engine |
JP5835084B2 (ja) | 2012-05-02 | 2015-12-24 | 富士通株式会社 | クエリ統合方法、クエリ統合プログラム、および統合コンポーネント生成装置 |
US9182957B2 (en) | 2012-07-10 | 2015-11-10 | Loring Craymer | Method and system for automated improvement of parallelism in program compilation |
JP6338579B2 (ja) | 2012-07-24 | 2018-06-06 | アビニシオ テクノロジー エルエルシー | データモデルにおけるエンティティのマッピング |
US9342557B2 (en) | 2013-03-13 | 2016-05-17 | Cloudera, Inc. | Low latency query engine for Apache Hadoop |
US9135301B2 (en) | 2013-03-14 | 2015-09-15 | Oracle International Corporation | Pushdown of sorting and set operations (union, intersection, minus) to a large number of low-power cores in a heterogeneous system |
US9633104B2 (en) | 2013-05-03 | 2017-04-25 | Sas Institute Inc. | Methods and systems to operate on group-by sets with high cardinality |
US10417281B2 (en) | 2015-02-18 | 2019-09-17 | Ab Initio Technology Llc | Querying a data source on a network |
-
2010
- 2010-01-15 US US12/688,316 patent/US9665620B2/en active Active
-
2011
- 2011-01-14 WO PCT/US2011/021260 patent/WO2011088293A1/en active Application Filing
- 2011-01-14 EP EP17202770.8A patent/EP3324311A1/en not_active Ceased
- 2011-01-14 AU AU2011205787A patent/AU2011205787B2/en active Active
- 2011-01-14 KR KR1020177027578A patent/KR101877481B1/ko active IP Right Grant
- 2011-01-14 JP JP2012549105A patent/JP2013517574A/ja active Pending
- 2011-01-14 CA CA2786042A patent/CA2786042C/en active Active
- 2011-01-14 CN CN201610342187.2A patent/CN106055584B/zh active Active
- 2011-01-14 KR KR1020127018891A patent/KR101784785B1/ko active IP Right Grant
- 2011-01-14 EP EP11702533A patent/EP2524328A1/en not_active Ceased
- 2011-01-14 CN CN201180014176.7A patent/CN102822819B/zh active Active
-
2015
- 2015-07-08 JP JP2015137280A patent/JP6000415B2/ja active Active
-
2016
- 2016-04-04 AU AU2016202098A patent/AU2016202098B2/en active Active
- 2016-08-30 JP JP2016167897A patent/JP6216423B2/ja active Active
-
2017
- 2017-04-18 AU AU2017202501A patent/AU2017202501B2/en active Active
- 2017-04-25 US US15/496,891 patent/US11593369B2/en active Active
- 2017-09-22 JP JP2017182015A patent/JP6578333B2/ja active Active
-
2018
- 2018-11-16 HK HK18114672.6A patent/HK1255489A1/zh unknown
Also Published As
Publication number | Publication date |
---|---|
KR20170121272A (ko) | 2017-11-01 |
JP2017016677A (ja) | 2017-01-19 |
AU2016202098B2 (en) | 2017-02-23 |
AU2016202098A1 (en) | 2016-04-28 |
EP3324311A1 (en) | 2018-05-23 |
US20110179014A1 (en) | 2011-07-21 |
JP2017220268A (ja) | 2017-12-14 |
KR101877481B1 (ko) | 2018-07-11 |
US20170228426A1 (en) | 2017-08-10 |
CA2786042A1 (en) | 2011-07-21 |
AU2011205787B2 (en) | 2016-02-18 |
CA2786042C (en) | 2019-03-19 |
JP2015212968A (ja) | 2015-11-26 |
CN106055584B (zh) | 2019-07-16 |
JP6000415B2 (ja) | 2016-09-28 |
CN102822819B (zh) | 2016-05-11 |
AU2017202501B2 (en) | 2018-11-22 |
KR101784785B1 (ko) | 2017-10-12 |
JP2013517574A (ja) | 2013-05-16 |
EP2524328A1 (en) | 2012-11-21 |
WO2011088293A1 (en) | 2011-07-21 |
US11593369B2 (en) | 2023-02-28 |
CN102822819A (zh) | 2012-12-12 |
AU2017202501A1 (en) | 2017-05-04 |
CN106055584A (zh) | 2016-10-26 |
KR20120106827A (ko) | 2012-09-26 |
JP6578333B2 (ja) | 2019-09-18 |
US9665620B2 (en) | 2017-05-30 |
AU2011205787A1 (en) | 2012-07-12 |
HK1255489A1 (zh) | 2019-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6578333B2 (ja) | データクエリの管理 | |
JP6364107B2 (ja) | データクエリの管理 | |
AU2017202899B2 (en) | Managing data queries |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170616 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170803 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170823 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170922 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6216423 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |