JP6306599B2 - 関連情報伝播システム - Google Patents

関連情報伝播システム Download PDF

Info

Publication number
JP6306599B2
JP6306599B2 JP2015537697A JP2015537697A JP6306599B2 JP 6306599 B2 JP6306599 B2 JP 6306599B2 JP 2015537697 A JP2015537697 A JP 2015537697A JP 2015537697 A JP2015537697 A JP 2015537697A JP 6306599 B2 JP6306599 B2 JP 6306599B2
Authority
JP
Japan
Prior art keywords
data
source
data element
column
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015537697A
Other languages
English (en)
Other versions
JP2015537294A (ja
JP2015537294A5 (ja
Inventor
コジナ,ルドミラ
リース,ジョン・ケイ
Original Assignee
オラクル・インターナショナル・コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オラクル・インターナショナル・コーポレイション filed Critical オラクル・インターナショナル・コーポレイション
Publication of JP2015537294A publication Critical patent/JP2015537294A/ja
Publication of JP2015537294A5 publication Critical patent/JP2015537294A5/ja
Application granted granted Critical
Publication of JP6306599B2 publication Critical patent/JP6306599B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/219Managing data history or versioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/254Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/283Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Document Processing Apparatus (AREA)

Description

関連出願への相互参照
この出願は、2012年10月18日に出願された米国仮特許出願連続番号第61/715,428号の優先権を主張し、その主題がここに引用により援用される。
分野
1つの実施形態はコンピュータシステムに向けられ、より特定的にはデータを管理するコンピュータシステムに向けられる。
背景
報告および分析に用いられるデータを格納するのにデータウェアハウスを用いることができる。コンピュータシステムは、複数の分散されたソースからデータを集め、データモデル中の集積データをデータウェアハウス内に格納することができる。ユーザは、格納されたデータに基づくデータ検討、データ分析、およびデータマイニングの準備のために変換をデータに適用することができる。さらに、データを、コメント、エラー報告、タグ、およびフラグ/状態情報などの関連情報としばしば関連付けることができる。
要約
1つの実施形態は、関連情報の可視性を伝播させるシステムである。システムは、1つ以上のデータテーブルを含むデータウェアハウスのデータ系統を追跡する。システムは、データ系統の一次データ要素と関連オブジェクトとの間の関連付けを表わす関連オブジェクトマッピングシステムテーブル内に第1の関連オブジェクトマッピングシステム記録をさらに格納し、一次データ要素と関連オブジェクトとの間の関連付けは一次リンクとして同定される。システムは、データ系統を用いて、二次データ要素と関連オブジェクトとの間の関連付けをさらに同定し、二次データ要素はデータ系統内の一次データ要素に関する。システムは、データ系統の二次データ要素と関連オブジェクトとの間の関連付けを表わし、かつ一次データ要素と二次データ要素との間の関連付けを表わす関連オブジェクトマッピングシステムテーブル内に第2の関連オブジェクトマッピングシステム記録をさらに格納し、二次データ要素と関連オブジェクトとの間の関連付けは二次リンクとして同定される。
添付の図面と関連して捉えられるべき好ましい実施形態の以下の詳細な説明から、一層の実施形態、詳細、利点、および修正例が明らかになるであろう。
発明の実施形態を実現することができるシステムのブロック図である。 発明の実施形態に従う、システムのための論理データモデルのブロック図である。 発明の実施形態に従う、例示的なデータ系統のブロック図である。 発明の実施形態に従う、データ系統を表示する例示的なユーザインターフェイスの図である。 発明の実施形態に従う、システムについての物理的モデルのブロック図である。 発明の実施形態に従う、データ系統マッピングテーブルのブロック図である。 発明の実施形態に従う、シャドウテーブルのブロック図である。 発明の実施形態に従う、データ系統サブシステムの物理的モデルのブロック図である。 発明の実施形態に従う、関連オブジェクトマッピングテーブルのブロック図である。 発明の実施形態に従う、関連情報サブシステムの物理的モデルのブロック図である。 発明の実施形態に従う、統合(union)変換の例示的なデータ系統追跡の図である。 発明の実施形態に従う、ピボット変換の例示的なソースデータ系統追跡の図である。 発明の実施形態に従う、ピボット変換の例示的な目標データ系統追跡の図である。 発明の実施形態に従う、アンピボット変換の例示的なソースデータ系統追跡の図である。 発明の実施形態に従う、アンピボット変換の例示的な目標データ系統追跡の図である。 発明の実施形態に従う、合体(join)変換の例示的なデータ系統追跡の図である。 発明の実施形態に従う、ケース変換の例示的なデータ系統追跡の図である。 発明の実施形態に従う、データ系統モジュールの機能性のフロー図である。 発明の実施形態に従う、関連情報伝播モジュールの機能性のフロー図である。
詳細な説明
1つの実施形態では、データウェアハウス内に格納することができる1組のデータに対して施される1つ以上の変換の道筋を通したータ系統追跡を提供することができるシステムが提供され、1組のデータは1つ以上のテーブル内に格納され、各々のテーブルは1つ以上のデータ記録を含む。「変換」または「データ変換」は、第1の形式の1つ以上のデータ記録を第2の形式の1つ以上のデータ記録に転換することであり、データ記録は1つ以上のデータ値を含むことができる。所与の目標データ要素について、システムは、目標データ要素を発生した1組のソースデータ要素および1組のソースデータ要素から目標データ要素への経路を同定することができ、「データ要素」は、データ記録の列の中に格納されるデータ値を含む。同様に、所与のソースデータ要素について、システムは、ソースデータ要素から導出される正確な組の目標データ要素およびソースデータ要素から目標データ要素の各々への経路を同定することができる。このように、システムは、データウェアハウス内の格納されたデータに加えて、データ系統追跡情報を与えて、格納されたデータの徹底的な分析をさらに容易にすることができる。ある実施形態では、データウェアハウス内の格納されたデータを1つ以上の「データ記録」内に格納することができ、データ系統追跡情報を1つ以上の「システム記録」内に格納することができる。ここで定義されるように、「データ記録」は、データウェアハウスのデータを格納する任意の種類の記録であることができ、「システム記録」は、データ系統追跡情報を格納する任意の種類の記録であることができる。
当該実施形態に従うと、ソースデータ要素から目標データ要素へおよびその逆にデータ系統を追跡するために、システムは、各々の変換毎に以下のデータ系統追跡情報を格納することができる:すなわち、(a)1つ以上のソーステーブル定義中の1つ以上の列から、変換によって行なわれるデータ再編成に関するメタデータ情報である「列マッピングデータ」として同定される変換の目標テーブル中の各々の列への1つ以上のメタデータマッピング;(b)1つ以上のソーステーブル中の1つ以上の実際のデータ記録から、「記録マッピングデータ」と同定される変換の実行によってポピュレートされる目標テーブル中の各々の実際のデータ記録への1つ以上のマッピング;および(c)変換の種類などの、変換に特定的な付加的なデータ系統追跡情報、である。変換が定義されるか、または既存の変換プログラムの挙動を記述するように変換を格納することができる場合に、列マッピングデータを格納することができる。そのような変換列マッピングデータは、(a)ソーステーブルおよびソース列、(b)目標テーブルおよび目標列、(c)変換の種類、ならびに(d)特定的な変換に必要な付加的な情報を含むことができる。変換によって処理されるデータ記録と関連付けられる記録マッピングデータは、変換が実行されるときに格納することができる。記録マッピングデータは、a)ソースデータ記録のアイデンティティ、b)目標データ記録のアイデンティティ、およびc)特定的な変換のための付加的な情報を含むことができる。データ記録のアイデンティティは、単一の列であることができるか、または、主キーもしくは固有キーとしても公知である、データテーブル内のデータ記録をその値が一意に同定する複数の列を含むことができる。当該実施形態に従うと、変換の目標テーブル中の各々のデータ記録は、その目標データ記録のための変換で1つ以上の列についてデータを与えたソースデータ記録のアイデンティティを格納することができ、このアイデンティティは「ソースキー」として同定される。ある実施形態では、これらの同定値を、データ記録を同定するのに用いることができる単一の値または「サロゲートソースキー」に組合せることができる。ある実施形態では、サロゲートキーは、ソースデータ記録を目標データ記録に変換するのに用いられる変換に関する付加的な情報を含むことができる。目標データ記録が複数のソースデータ記録からのデータを含有する状況では、目標テーブルを適切な数の列で拡張することができるため、目標データ記録は適切な数のソースサロゲートキーを格納することができる。次にシステムは、列マッピングデータとして格納される対応のソーステーブルと関連付けられる記録マッピングデータおよび目標列を保持する、目標テーブル中の1つ以上のソースサロゲートキー列同士の間の関係を格納することができる。この組合せられたデータをシステムが用いて、データ要素についてのソースまたは目標データ系統追跡を提供することができる。
別の実施形態では、データ要素にリンクされる「関連情報」または「関連オブジェクト」の可視性をサポートし、かつ表示およびアクセスのために関連情報(すなわち関連オブジェクト)を関係するソースデータ要素および目標データ要素に伝播するようにデータ系統追跡情報を強化することができるシステムが提供される。システムは、データについての外部ソースへのデータ系統内の変換の経路を通した外部システムへの関連情報(すなわち関連オブジェクト)のエクスポートもサポートすることができる。
当該実施形態に従うと、「関連オブジェクト」は、データウェアハウス内に格納されるデータ要素と関連付けられる任意の関連情報(すなわち、関連オブジェクトが関連付けられているデータ要素、または既にデータ系統によって関連付けられているデータウェアハウス中の任意の他のデータ要素以外の任意の情報)であることができる。関連オブジェクトの一種が演算オブジェクトである。1つ以上の関連オブジェクトを「関連情報」としても同定することができる。関連オブジェクトの例が「不一致」である。「不一致」は、データ要素の1つ以上の特性が予測される特性から乖離していることの指標である。そのような乖離は、1つ以上のデータ駆動規則に基づいて人が検出するかまたは機械が検出することができる。さらに、システムのユーザが手動で不一致を作成することができるか、または、データの確認の結果、たとえば、システムが自動的に作成することができる。不一致の例はエラー報告である。関連オブジェクトの他の例は、「コメント」、「ステータスフラグ」、「状態インジケータ」、「タグ」、「画像」、「録音録画」、「ファイル」、「リンク」、および「文書」を含むことができるが、これらに限定されない。「コメント」は、データ要素に属するユーザによって入力されるテキストの集まりである。「ステータスフラグ」は、データ要素のステータスの指標である。「状態インジケータ」は、データ要素の状態の指標である。「タグ」は、データ要素に属する語または句である。「画像」は、データ要素に属する画像である。「録音録画」は、データ要素に属する任意の音声または映像の録音録画である。「ファイル」は、データ要素に属するコンピュータファイルである。「リンク」は、データ要素に属するハイパーテキストマークアップ言語(「HTML」)である。「文書」は、データ要素に属する外部文書である。関連オブジェクトは、データ要素またはデータ記録全体のいずれかにリンクされてもよい。
当該実施形態に従うと、システムは、関連オブジェクトと、関連オブジェクトに関連付けられるデータ要素またはデータ記録との間のリンクを格納することができる。関連オブジェクトが最初に作成されたまたは元から関連付けられていた(というのも、関連オブジェクトは先存する関連オブジェクトであることができるので)データ要素またはデータ記録を一次リンクとしてマークすることができる。システムによって生成されて、データ要素またはデータ記録の上流およびデータ要素またはデータ記録の下流の両者を含むデータ系統内の関連オブジェクトの可視性を提供するリンクを二次リンクとしてマークすることができる。このように、当該実施形態に従うと、不一致などの関連オブジェクトは、データ系統内のデータ要素またはデータ記録の上流およびデータ要素またはデータ記録の下流の両方で可視であることができる。この可視性を提供するため、システムは、(a)関連オブジェクトとデータ要素(またはデータ記録)との間の一次リンクを格納し、(b)データ要素(またはデータ記録)のソースおよび目標系統を追跡し、(c)一次データ要素からの、ソースおよび目標追跡中の関連オブジェクトと各データ要素との間の1つ以上の二次リンクを格納し、かつ(d)関連オブジェクト可視性の表示のためのユーザインターフェイスに一次および二次リンク情報の両方を与えることができる。さらに、関連オブジェクトの存在を検出するためにデータ系統を横断することに対して、上流または下流のデータ要素から関連オブジェクトへの直接アクセスを得るために、システムが生成するリンクを用いることができる。
図1は、発明の1つの実施形態を実現することができるシステム10のブロック図を示す。システム10は、バス12またはシステム10の構成要素同士の間で情報を通信するための他の通信機構を含む。システム10は、情報を処理しかつ命令または動作を実行するためにバス12に動作するように結合されるプロセッサ22も含む。プロセッサ22は、任意の種類の汎用または特定用途プロセッサであってもよい。システム10はさらに、プロセッサ22によって実行すべき命令および情報を格納するためのメモリ14を含む。メモリ14は、ランダムアクセスメモリ(「RAM」)、読出専用メモリ(「ROM」)、磁気もしくは光学ディスクなどの静的記憶装置、または任意の他の種類の機械もしくはコンピュータ読出可能媒体の任意の組合せを備えることができる。システム10はさらに、ネットワークへのアクセスを与えるように、ネットワークインターフェイスカードまたは他の通信インターフェイスなどの通信装置20を含む。その結果、ユーザは、直接にまたはネットワークもしくは任意の他の方法によって遠隔に、システム10とインターフェイスし得る。
コンピュータ読出可能媒体は、プロセッサ22によってアクセス可能な任意の利用可能な媒体であってもよい。コンピュータ読出可能媒体は、揮発性および不揮発性媒体の両方、取外し可能なおよび取外し不可能な媒体、通信媒体、ならびに記憶媒体を含んでもよい。通信媒体は、コンピュータ読出可能命令、データ構造、プログラムモジュール、または搬送波もしくは他の伝送機構などの変調データ信号中の他のデータを含んでもよく、当該技術分野で公知の任意の他の形態の情報送達媒体を含んでもよい。記憶媒体は、RAM、フラッシュメモリ、ROM、消去可能プログラマブル読出専用メモリ(「EPROM」)、電気的消去可能プログラマブル読出専用メモリ(「EEPROM」)、レジスタ、ハードディスク、取外し可能ディスク、コンパクトディスク読出専用メモリ(「CD−ROM」)、または当該技術分野で公知の任意の他の形態の記憶媒体を含んでもよい。
プロセッサ22は、バス12を介して液晶ディスプレイ(「LCD」)などのディスプレイ24に動作するように結合されることもできる。ディスプレイ24はユーザに対して情報を表示することができる。キーボード26およびコンピュータマウスなどのカーソル制御装置28もバス12に動作するように結合されて、ユーザがシステム10とインターフェイスできるようにすることができる。
1つの実施形態に従うと、メモリ14は、プロセッサ22によって実行されると機能性を提供し得るソフトウェアモジュールを格納することができる。モジュールは、オペレーティングシステム15、関連情報伝播モジュール16、および他の機能モジュール18を含むことができる。オペレーティングシステム15は、システム10のためのオペレーティングシステム機能性を提供することができる。関連情報伝播モジュール16は、以下により詳細に記載するように、関連情報の可視性を伝播させるための機能性を提供することができる。ある実施形態では、関連情報伝播モジュール16は複数のモジュールを備えることができ、各々のモジュールは関連情報の可視性を伝播させるための特定的な個々の機能性を提供する。システム10はより大きなシステムの一部であることもできる。このように、システム10は、付加的な機能性を含むように1つ以上の付加的な機能モジュール18を含むことができる。たとえば、機能モジュール18は、オラクルコーポレイションからの「Oracle Life Sciences Data Hub」製品のモジュールなどの付加的な機能性を提供するモジュールを含んでもよい。1つの実施形態では、機能モジュール18は、以下により詳細に記載するように、データ系統を追跡するための機能性を提供することができるデータ系統モジュールを含んでもよい。
プロセッサ22は、バス12を介してデータベース34に動作するように結合されることもできる。データベース34は論理的に関連したデータ記録、システム記録、またはデータファイルの集積された集合の中のデータを格納することができる。データベース34は、演算データベース、分析データベース、データウェアハウス、分散データベース、エンドユーザデータベース、外部データベース、ナビゲーションデータベース、メモリ内データベース、ドキュメント指向データベース、リアルタイムデータベース、リレーショナルデータベース、オブジェクト指向データベース、データ管理ワークベンチ、または当該技術分野で公知の任意の他のデータベースであることができる。
図2は、発明の実施形態に従う、システムのための論理データモデルのブロック図を示す。論理データモデルは、データ系統伝播モジュール200を含むことができる。データ系統伝播モジュール200は、以下により詳細に記載するように、データ系統を追跡するための機能性および関連情報の可視性を伝播するための機能性を提供することができるモジュールである。ある実施形態では、データ系統伝播モジュール200は、データ系統を追跡するための機能性を提供する別個のデータ系統モジュールと、関連情報の可視性を伝播するための機能性を提供する別個の関連情報伝播モジュールとを含むことができる。
当該実施形態に従うと、データ系統伝播モジュール200は、記録マッピングデータ205、列マッピングデータ210、および関連オブジェクトマッピングデータ215を発生することができる。先に記載したように、記録マッピングデータ205は、変換の目標テーブル中のデータ記録中に格納されるソースサロゲートキー(すなわち、ソースデータ記録のアイデンティティ)を含む。これも先に記載したように、列マッピングデータ210は、変換のソーステーブルおよび列、変換の目標テーブルおよび列、変換の種類、ならびに変換に必要な任意の付加的な情報を含む。さらに、列マッピングデータ210を変換定義から導出することができる。最後に、これも先に記載したように、関連オブジェクトマッピングデータ215は、関連オブジェクトと(一次リンクとして同定された)関連オブジェクトと関連付けられるデータ要素またはデータ記録との間のリンクを含む。関連オブジェクトマッピングデータ215は、データ系統伝播モジュール200によって生成されて(二次リンクとして同定される)上流および下流データモデル中の関連オブジェクトの可視性を提供するリンクも含む。そのような可視性は、データ表示において関連オブジェクトと関連付けられるデータ要素またはデータ記録を特に視覚的に同定するための関連オブジェクトの効率的なアクセスを含むことができる。データ系統伝播モジュール200はさらに、公開アプリケーションプログラミングインターフェイス(「API」)220を含むことができる。公開API220は、システムのユーザが列マッピングデータをデータ系統伝播モジュール200に入力することができるように設けることができるAPIである。これによりユーザは、カスタム手続型言語/構造化問合せ言語(「PL/SQL」)プログラムまたはカスタム統計分析システム(「SAS」)プログラムなどのカスタムコンピュータプログラムを用いてデータについてのマッピングを格納できるようになる。
当該実施形態に従うと、論理データモデルはさらに、変換モジュール225、確認モジュール230、およびクエリービルダ235を含むことができる。変換モジュール225は、マッピングされたデータの一意なソースを同定し、ソースサロゲートキーを1つ以上の目標データテーブルの定義に追加することができる。さらに、1つ以上の変換定義に基づいて、変換モジュール225は、1つ以上の変換についての列マッピングデータ210を格納することができる。変換モジュール225はさらに、同定されるカスタム変換についてのカスタム列マッピングデータをユーザが変換モジュール225に与えられるようにすることができる。変換モジュール225は確認モジュール230およびクエリービルダ235を実現することができ、確認モジュール230は、1つ以上のデータ記録を読出し、1つ以上のデータ記録のデータ値をテストし、かつデータ値についての1つ以上の不一致を作成することができ、クエリービルダ235は、変換と同じ目標列マッピングへのメタデータソース列を維持しながら、1つ以上のデータテーブルから入来するデータのクエリーまたはデータベースビューを構築することができる。ある実施形態では、変換マッピングデータは「好ましいソース経路」も含むことができる。変換の目標列が複数の直近のソース列を有する場合、1つの列を好ましいソース列として同定することができる。この情報を列マッピングデータ210の一部として追跡することができる。このように、「好ましいソース経路」は、好ましいソース列の変換を通る経路である。換言すると、好ましいソース経路は、複数の可能なソース経路から、他の可能なソース経路よりも好ましいとして同定される単一のソース経路である。これは、クエリーを添付するための単一のソースデータ要素またはソースデータを与えたソースシステムに送られ得る他の関連オブジェクトに一意な経路を与えるように行なうことができる。
(変換実行処理240として図2に図示される)変換の実行の間、記録マッピングデータ205を1つ以上のソースサロゲートキーの中に格納することができ、1つ以上のサロゲートキーを、(図2にデータテーブル245として図示される)変換の1つ以上の目標テーブルの1つ以上の補助列の中に格納することができる。当該実施形態に従うと、記録マッピングデータ205および列マッピングデータ215と他のデータ系統追跡情報との組合せを用いて、以下にさらに詳細に記載するように、(図2に系統追跡250として図示される)ソースまたは目標データ要素のデータ系統の追跡を表示することができる。
当該実施形態に従うと、論理データモデルはさらに、関連オブジェクトモジュール255およびアダプタ260を含むことができる。関連オブジェクトモジュール255は、各関連オブジェクト毎に関連オブジェクトマッピングデータ215内にデータを入力することができる。関連オブジェクトマッピングデータ215からのデータを用いて、(図2にはハイライト関連オブジェクト250として図示される)データ要素に関連付けられる関連オブジェクトを有する1つ以上のデータ要素の表示を視覚的にハイライトすることができる。ある実施形態に従うと、関連オブジェクトモジュール255は、関連オブジェクトに関連付けられる各データ要素毎に好ましいソース経路を要求することができる。さらに、アダプタ260を用いて、1つ以上の関連オブジェクトをシステム内に作成することができる。アダプタ260は、関連オブジェクトモジュール255を用いてシステム内の1つ以上の関連オブジェクトを作成することができ、次に関連オブジェクトモジュール255は、データ系統伝播モジュール200を用いて、ソースまたは目標データ要素のデータ系統の追跡内で関連オブジェクトの可視性を伝播することができる。ある実施形態では、論理データモジュールはさらに、1つ以上のデータテーブルからの1つ以上のデータ要素を表示しかつ1つ以上のデータ要素と関連付けられる1つ以上の関連オブジェクトの存在をハイライトする(図2には図示しない)付加的なモジュールを含むことができる。
図3は、発明の実施形態に従う、例示的なデータ系統のブロック図を示す。ある実施形態に従うと、システムは、データウェアハウス内に格納されるデータのデータ系統の追跡を生成することができる。このデータ系統追跡内で、システムのユーザは、目標テーブル中のデータ要素を選択し、選択されたデータ要素の導出元である1つ以上のソースデータ要素への1つ以上の変換ステップを通した上流への追跡を要求することができる。さらに、ユーザは、ソーステーブル中のデータ要素を選択して、選択されたデータ要素から導出される1つ以上の目標データ要素への1つ以上の変換ステップを通した下流への追跡を要求することができる。変換に関して、当該実施形態に従うと、異なる種類の変換が存在することができる。そのような変換の種類は、(a)(おそらくはフィルタおよび/または導出を含む)直接マッピング変換、(b)統合変換、(c)(おそらく単一のおよび/または繰返しデータを含む)合体変換、(d)横縦アンピボット変換、および(e)縦横ピボット変換を含むことができる。異なる変換の種類を以下により詳細に記載する。ある実施形態では、複数段階変換のためにデータを格納するように作成される1つ以上の段階実施テーブルを通してデータ系統を含むようにデータ系統追跡を生成することができる。当該実施形態に従うと、段階実施テーブルは、必要に応じて1つ以上の変換のために利用することができるデータウェアハウスのテーブルであり、複数段階変換シナリオのための中間格納構造として働く目的を果たすことができる。
直接マッピング変換は、ソーステーブル中のソースデータ記録の1つ以上の列を目標テーブルの目標データ記録中で名称変更するおよび/または並べ替える変換である。ある実施形態では、ソーステーブル中のソースデータ記録の1つ以上の列を直接マッピング変換内で変更せずに伝播させることができる。統合変換は、目標テーブルが2つ以上のソーステーブルからの1つ以上のソースデータ記録の一部またはすべてを含むように、2つ以上のソーステーブルからの1つ以上のソースデータ記録を単一の目標テーブルの2つ以上の目標データ記録に組合せる変換である。合体変換は、目標テーブルの目標データ記録が2つ以上のソーステーブルからの1つ以上のソースデータ記録のすべての列を含むように、2つ以上のソーステーブルからの1つ以上のソースデータ記録を単一の目標テーブルの単一の目標データ記録に組合せる変換である。
さらに、横縦アンピボット変換は、ソーステーブルからの1つ以上のソースデータ記録を目標テーブルの1つ以上の目標データ記録に転換し、各々のソースデータ記録の1つ以上の列の各組を目標テーブルの別個の目標データ記録に変換する変換である。たとえば、ソーステーブルが列A、B、Cを含む単一のソースデータ記録を有する場合、アンピボット変換は、ソースデータ記録を、3つの目標データ記録、すなわち、列Aを含む第1の目標データ記録、列Bを含む第2の目標データ記録、および列Cを含む第3の目標データ記録、に変換する。縦横ピボット変換は、ソーステーブルからの1つ以上のソースデータ記録を目標テーブルの目標データ記録に転換し、1つ以上のソースデータ記録を単一の目標データ記録に組合せる変換である。たとえば、ソーステーブルが、3つのソースデータ記録、すなわちデータ記録1、データ記録2、およびデータ記録3を含む場合、ピボット変換は、3つのソースデータ記録を、データ記録1、2、および3の列のうち1つ以上を含む単一の目標データ記録に変換する。ケース変換は、目標データ記録のデータ値が、条件に基づいて異なるソーステーブルからであり得る1つ以上のソース列からポピュレートされる変換である。
ある実施形態に従うと、システムのユーザインターフェイス内での表示のためにデータ系統追跡情報を利用可能にすることができる。例示的な実施形態に従ってユーザインターフェイスに与えることができる情報をここでより詳細に記載する。選択されたデータ要素のソース系統については、選択されたデータ要素を発生したデータ要素の階層を与えることができる。これは、すべての関連変換を通してデータウェアハウス中の生のソースデータへ遡って横断するデータ要素の経路である。経路はデータを通るいくつかの経路分岐を含むことができる。同様に、選択されたデータ要素の目標系統については、選択されたデータ要素から導出されるデータ要素の階層を与えることができる。
当該実施形態に従うと、以下の属性のうち1つ以上を経路中の各データ要素毎に与えることができる:すなわち、(a)階層内のデータ要素の配置(たとえば、データ要素のアイデンティティおよび階層内のその親データ要素のアイデンティティ);(b)データモデル名;(c)テーブル名;(d)列名;(e)データ要素のデータ種類;(f)データ要素の値;(g)好ましいソースルート(はいまたはいいえ);(h)主キー;(i)データがマスクされたデータである(あり得る)か否かのインジケータ;(j)データが内部段階実施テーブルからのものであるか否かのインジケータ;(k)1つ以上の関連オブジェクト(不一致など)がデータ要素に主にリンクされていることのインジケータ;または(l)基礎となるデータ(たとえば、テーブルオブジェクトアイデンティティ、列オブジェクトアイデンティティ、サロゲートキー値、および任意の他の関係のデータ)、である。「データモデル」は、データウェアハウスの1つ以上のデータテーブルと関連付けられるデータスキーマである。
図3は、発明の実施形態に従う、一連の医学的研究に関する患者データのデータ系統を図示する。しかしながら、他の実施形態では、データは、任意の種類の生命科学または医療データであることができる。さらに、他の実施形態では、データは任意の種類のデータであることができる。図3に示される実施形態に従うと、データウェアハウスは、ソースデータモデル310、全現場データモデル320、検討データモデル330、および分析データモデル340の4つのデータモデルを含むことができる。ソースデータモデル310は、人口統計テーブル311、現場A訪問テーブル312、および現場B訪問テーブル313の3つのテーブルを含む。人口統計テーブル311は、研究におけるすべての被験者の人口統計データを含み、人口統計データは各々の被験者の身長および身長の単位を含む。現場A訪問テーブル312は、研究現場Aにおける各被験者毎の訪問当たりの1つのデータ記録(すなわち訪問データ)を含み、訪問データは被験者の体重および体重の単位を含む。現場B訪問テーブル313は、研究現場Bにおける各被験者毎の訪問当たりの1つのデータ記録(すなわち訪問データ)を含み、訪問データは被験者の体重および体重の単位を含む。全現場データモデル320は、訪問テーブル321という1つのテーブルを含む。訪問テーブル321は、現場A訪問テーブル312内に含まれる訪問データと現場B訪問テーブル313内に含まれる訪問データとの統合変換によって作成される現場A訪問テーブル312と現場B訪問テーブル313との統合である。検討データモデル330はマイルストーン訪問テーブル331という1つのテーブルを含む。マイルストーン訪問テーブル331は、ソースフィルタ変換を用いて、訪問テーブル321内に含む訪問データから導出される各患者毎の重要な訪問のサブセットである(たとえば、各被験者毎の訪問1、4、7、および10)。分析データモデル340はBMIテーブル341という1つのテーブルを含む。BMIテーブル341は、人口統計テーブル311内に含まれる人口統計データとマイルストーン訪問テーブル331内に含まれる訪問データとの合体変換によって作成される人口統計テーブル311とマイルストーン訪問テーブル331との合体であり、体格指数(「BMI」)値は、被験者の体重、体重の単位、身長、および身長の単位を用いた導出である。
図4は、発明の実施形態に従う、データ系統400を表示する例示的なユーザインターフェイスを示す。例示的な実施形態に従うと、図3のBMIテーブル341は以下のデータを含むことができる。
Figure 0006306599
当該実施形態に従うと、システムは、システムのユーザインターフェイス内に上記データを表示することができる。システムのユーザは、女性、年齢42歳、BMI値33.3である被験者1007についてソースデータを調査したいかもしれない。ユーザは、ユーザインターフェイス内で被験者1007についてのデータ値33.3を選択し、ユーザがデータ値のソースデータ系統を検討することを望んでいると示すことができる。応答して、システムは、ユーザインターフェイス内に図4のデータ系統400を表示することができ、これをさらにより詳細に説明する。
図示される実施形態に従うと、データ系統400は、複数の行(すなわち、行401、402、403、404、405、406、407、408、および409)を含み、各行はソースデータ要素のうち1つについての情報を含む。行は、図3に示される変換の組を通る経路を横断する。このように、直近の上位データ要素は、データ系統400内で選択されたデータ要素よりも下の階層レベルに存在し、それらの上位が同様の態様に従う。このように、階層経路は、選択されたデータ要素に最も近いデータ要素から上流へ、生のソースデータ要素へと横断される。したがって、図4に示される実施形態では、行401が選択されたデータ要素(すなわち、被験者1007についてのデータ値33.3)を表わす。行402、403、404、および407は、行401によって表わされるデータ要素についての直近の上位データ要素を表わす。このように、行401によって表わされる選択されたデータ要素の直近の上位テーブルは、図3の人口統計テーブル311およびマイルストーン訪問テーブル331である。行405は、行404によって表わされるデータ要素についての直近の上位データ要素を表わす。行406は、行405によって表わされるデータ要素についての直近の上位データ要素を表わす。行408は、行407によって表わされるデータ要素についての直近の上位データ要素を表わす。行409は、行408によって表わされるデータ要素についての直近の上位データ要素を表わす。このように、行404によって表わされるデータ要素および行407によって表わされるデータ要素の直近の上位テーブルは訪問テーブル321である。さらに、405によって表わされるデータ要素および行408によって表わされるデータ要素の直近の上位テーブルは現場B訪問テーブル313である。データ系統400はソースデータ系統の例であるが、代替的な実施形態では目標データ系統をユーザインターフェイス内に表示することができ、選択されたデータ要素についての1つ以上の下位データ要素を表示することができ、目標データ系統は複数の行を含み、各行は目標データ要素のうち1つについての情報を含む。
データ系統400はさらに複数の列(すなわち列410、420、430、440、および450)を含む。列410は、データ要素のデータモデル名、テーブル名、および列名を表わす。列420はデータ要素のデータ値を表わす。列430はデータ要素のデータ種類およびサイズを表わす。列440はデータ要素が好ましいソース経路の一部であるか否か(すなわち「はい」または「いいえ」)の指標を表わす。列450はデータ要素についての主キー値を表わす。
このように、データ系統400はデータ要素の階層を表示するツリーテーブルであることができ、列の見出しは静的であり、ユーザはツリーテーブル構成要素を用いて階層の部分を開くまたは閉じることができる。さらに、1つの実施形態では、(図4にデータ要素460として図示される)関連オブジェクトにリンクされるデータ要素を背景色でハイライトすることができる。ハイライトされた背景色はデータ要素と関連オブジェクトとの間の一次リンクを表わすことができる。一次リンクのインスタンスでは、ユーザはハイライトされたデータ要素を選択し、データ要素にリンクされた関連オブジェクトの詳細を表示するよう要求することができる。
1つ以上の実施形態では、データ系統400が内部段階実施テーブルを通る経路を含めば、対応するデータ値を(図4には図示しない)星印などの記号でマークすることができる。さらに、データ系統400の下に脚注を表示して記号の意味を説明することができる。加えて、1つの実施形態では、データ要素が、セキュリティがテーブルまたは列に適用されているテーブルまたは列からのものであり、かつマスクされたデータが実際のデータの代わりに表示されているのであれば、データ要素を(図4には記号470として図示される)記号「§」などの記号でマークすることができる。さらに、データ系統400の下に脚注を表示して記号の意味を説明することができる。さらに、1つの実施形態では、データに適用されているセキュリティのために(上流または下流のいずれかの)追跡の経路中のデータのうちの一部へのアクセスをユーザが有していないために、またはデータ記録がテーブルから削除されて削除が下流のテーブルにまだ伝播されていないために、完全なデータ系統追跡を完了することができないことがある。いずれの場合も、当該実施形態に従うと、ユーザインターフェイスは、(図4には図示しない)データ追跡が終了されたことを示すメッセージを表示することができる。
このように、1つの実施形態では、システムのユーザは、データブラウザを通してデータ一覧ページへ移動してユーザインターフェイス内に表示されるデータグリッド上のデータ要素を選択することができる。「データグリッド」は、データテーブルの行および列またはデータのビューを提示する表示である。データ要素を選択する際、ユーザは、選択されたデータ要素の導出元であるソースデータをユーザが見たいと示すことができる。応答して、システムは、ソースデータ要素の集合を入手して、各ソースデータ要素毎にデータモデル、テーブル、および列についての対応の情報とともにソースデータ要素値の集合を表示することができる。選択されたデータ要素についてのソースデータを構成する経路のツリーとして集合をユーザインターフェイス中に表示することができるように集合が編成されかつ集合が情報を含むことができる。好ましいソース経路を表示できるように情報を含むこともできる。
別の実施形態では、ユーザは、データブラウザを通してデータ一覧ページへ移動してユーザインターフェイス内に表示されるデータグリッド上のデータ要素を選択することができる。データ要素を選択する際、ユーザは、選択されたデータ要素から導出される目標データをユーザが見たいと示すことができる。応答して、システムは、目標データ要素の集合を入手して、各目標データ要素毎のデータモデル、テーブル、および列についての対応の情報とともに目標データ要素値の集合を表示することができる。選択されたデータ要素についての目標データを構成する経路のツリーとして集合をユーザインターフェイス中に表示できるように、集合が編成されかつ集合が情報を含むことができる。
さらに、関連オブジェクトに関して、1つの実施形態では、データウェアハウス内に作成されるかまたはそうでない場合はデータウェアハウスのデータ要素と関連付けられる関連オブジェクトを、これらのオブジェクトが異なる関連モデルに伝播されたかのように上流または下流データモデルで閲覧することができる。システムは、1つのデータモデル中に作成された関連オブジェクトを他のデータモデル中のその対応のソースおよび目標データ要素と自動的に関連付けることができる。ソースおよび目標データモデル中の関連オブジェクトとデータ要素との間の関連付けをシステムのユーザインターフェイス内に表示することができ、関連オブジェクトの存在を関連データ要素および関連オブジェクトカテゴリとともに表示することができる。さらに、目標データ要素を導出するのに複数のソースデータ要素を用いる場合、変換定義の間にソースデータ要素のうちの1つを好ましいソースデータ要素として選択することができる。好ましいソースデータ要素は、ソースデータを通して上流にデータ系統経路を形成することができる。最も上流のソースデータ要素を用いて関連オブジェクトを外部システムにエクスポートすることができる。さらに、関連オブジェクトと関連付けられたデータが更新されると、データが更新されたことを示すように関連オブジェクトの1つ以上のフラグを設定可能である。
先に説明したように、データ系統400を表示するユーザインターフェイス内での表示のために、データ要素と関連オブジェクトとの間のリンクを利用可能にすることができる。データ要素またはデータ記録と関連付けられる関連オブジェクトを有するデータ要素またはデータ記録を同定するためのシステムがユーザインターフェイスに与える情報をさらにより詳細にここで説明する。システムは情報をユーザインターフェイスに与えることができ、これによりデータ要素と関連付けられた関連オブジェクトを有する各々のデータ要素を表示においてハイライトする。これは、関連オブジェクトが元々作成されるかまたはそれ以外のやり方で関連付けられる(すなわち一次リンク)テーブルの中のデータ要素を含むことができる。
1つの実施形態では、システムは、(a)(関連オブジェクトおよびそのプロパティにアクセスするのに用いることができる)関連オブジェクトアイデンティティ、(b)(テーブルオブジェクトアイデンティティ、列オブジェクトアイデンティティ、およびサロゲートキーなどの)データ要素参照、(c)データ要素と関連付けられる関連オブジェクトが一次リンクであるかまたは二次リンクであるかの指標、(d)リンクが(二次リンクのための)一次データ要素のソース経路または目標経路の中にあるか否かの指標、および(e)関連オブジェクトの状態を与えることができる。当該実施形態に従うと、データ要素460によって図4に示されるように、システムは、背景色でデータ要素をハイライトして、データ要素が関連オブジェクトにリンクされていることを示すことができる。システムは、第1の背景色を用いてデータ要素をハイライトして一次リンクを示すことができる。これに代えて、システムは、第2の背景色を用いてデータ要素をハイライトして二次リンクを示すことができる。先に説明したように、ユーザは、関連オブジェクトがリンクされているデータ要素のソースまたは目標系統を要求することができる。ユーザが関連オブジェクトへの一次リンクを含むデータ要素に到達すると、ユーザは、関連オブジェクトの1つ以上の特性を含む関連オブジェクトを閲覧することができる。ユーザは、関連オブジェクトを外部ソースにエクスポートすることもできる。代替的な実施形態では、データ要素を色でハイライトしてデータ要素が関連オブジェクトに関連付けられていることを示すよりもむしろ、システムは代替的な指標を用いることができる。代替的な指標のいくつかの例は、アイコン、色付けされた境界、または音声指標を含むが、これらに限定されない。
このように、1つの実施形態では、システムのユーザは、データ一覧へ移動し、ユーザインターフェイス内に表示されるデータグリッド上のデータ要素を選択し、関連オブジェクトを作成し、選択されたデータ要素と関連オブジェクトとを関連付けることができる。次にシステムは、関連オブジェクトを、選択されたデータ要素に関するデータ要素と関連付けることができる。システムは新たに作成された関連オブジェクトを選択されたデータ要素にリンクさせ、リンクを一次リンクとして指定することができる。システムはさらに、データウェアハウス内の既存の変換と関連付けられる列マッピングデータおよび記録マッピングデータを用いることにより、選択されたデータ要素についてのすべてのソースおよび目標データ要素を帰納的に見つけることができる。システムはその後、同じ関連オブジェクトを関係のソースおよび目標データ要素にリンクさせてこれらのリンクを二次リンクとして指定することができる。このように、各々の関係のソースまたは目標データモデルにおいて、関連オブジェクトへの二次リンクを有するデータ要素をシステムのユーザインターフェイス内でハイライトすることができる。
別の実施形態では、システムのユーザはデータ一覧へ移動することができ、システムは関連オブジェクトと一次ソースデータとの間の一次リンクおよび二次リンクを与えることができる。システムはさらに、各々の関連オブジェクトの状態などの関連オブジェクトからのプロパティを入手して表示をフィルタすることができる。また別の実施形態では、ユーザは、1つ以上の関連オブジェクトへのリンクを含むデータ要素を削除することができる。システムは、削除されたデータに関連付けられている関連オブジェクトへの一次および/または二次リンクを外すことができる。一次リンクについてのデータが削除されると、システムは、データ要素と関連付けられている関連オブジェクトへの一次および二次リンクを外すことができ、システムは関連オブジェクトを削除することができる。二次リンクについてのデータが削除されると、システムは二次リンクを外し、それ以上のリンクを外す(および必要に応じて任意のそれ以上のリンクを外す)べきか否かを判断することができる。より一層の実施形態では、システムは、ユーザが、列マッピングデータおよび関連オブジェクトの可視性をサポートするリンク済関連オブジェクトにアクセスできるクエリーを作成できるようにする。
(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールについての制御の流れにおいて、1つの実施形態に従うと、1つ以上のデータモデルをデータウェアハウス内に定義することができる。各データモデル毎のメタデータが作成されるかまたはロードされる。(図2の変換モジュール225などの)変換モジュールを用いて1つ以上の目標テーブルについて1つ以上の変換が定義される。必要に応じて、特定の変換のために、各目標テーブルに1つ以上の補助列が追加される。これらの補助列を以下により詳細にさらに説明する。その後、データ系統マッピングテーブルは、データウェアハウスの1つ以上のデータテーブル内に格納されるデータとは区別される列マッピングに関するデータ系統追跡情報(すなわちメタデータ情報)でポピュレートされる。なお、データ系統マッピングテーブルを以下により詳細にさらに説明する。補助列アイデンティティは列マッピングメタデータの一部であり、これにより、マッピングされた目標列を、マッピングされたソース列についてのソーステーブル記録のアイデンティティを保持する補助列とリンクさせることができる。1つ以上のデータモデルに1つ以上のテーブルがインストールされる。1つ以上のソーステーブルがデータでロードされる。変換が実行され、1つ以上の目標テーブルをポピュレートする。1つ以上の目標テーブルがデータでロードされた後に、データウェアハウスの1つ以上のデータテーブル内に格納されるデータからこれも区別されるデータ系統追跡情報(すなわち記録マッピング情報)でシャドウテーブルがポピュレートされるかまたは更新される。なお、シャドウテーブルを以下により詳細にさらに説明する。最終的に、関連オブジェクトについての1つ以上の二次リンクがデータ内で伝播される。関連オブジェクトの存在を検出するためにデータ系統マッピングテーブルおよびシャドウテーブルのデータ系統追跡情報を横断することなく、二次リンクを用いて関連オブジェクトとの上流または下流データ要素の関連付けを入手することができる。
このように、ある実施形態に従うと、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、1つ以上の関連付けを維持することができ、2種類のオブジェクト、すなわち、(a)テーブル中のデータ記録のデータ要素、および(b)テーブル中の完全なデータ記録、同士の間を追跡することができる。(a)に関して、データ要素を一意に同定するため、およびデータ要素を入手するのに必要な場合にインストールされたオブジェクトの名前を追跡するためにも、(1)データウェアハウスのデータモデルを同定するモデルオブジェクトアイデンティティ、(2)データウェアハウスのテーブルを同定するテーブルインスタンスオブジェクトアイデンティティ、(3)サロゲートキーを同定したサロゲートキー値、および(4)テーブルの列を同定する列オブジェクトアイデンティティを用いることができる。(b)に関して、データ記録内の特定的なデータ要素よりもむしろ、いくつかの関連オブジェクトをデータ記録にリンクさせることができる。このシナリオでは、データ記録内に特定的な列が存在しないので、テーブルの列を同定する列オブジェクトアイデンティティよりもむしろ、サロゲートキーについての列オブジェクトアイデンティティを用いる。このように、(1)データウェアハウスのデータモデルを同定するモデルオブジェクトアイデンティティ、(2)データウェアハウスのテーブルを同定するテーブルインスタンスオブジェクトアイデンティティ、(3)サロゲートキーを同定したサロゲートキー値、および(4)サロゲートキーについての列オブジェクトアイデンティティを用いてデータ記録を一意に同定することができる。代替的な実施形態では、(データウェアハウスのすべてのデータモデルにわたって)データウェアハウスのテーブルを一意に同定する一意なテーブル識別子を用いてデータ記録を一意に同定することができる。
さらに、当該実施形態に従うと、データ系統伝播モジュールは、関連オブジェクトとの関連付けを維持しかつこれを伝播する。データ系統伝播モジュールはさらに、(a)1つ以上のソースまたは目標データ要素への特定的なデータ要素のマッピング(すなわち、データ系統追跡可能性)、および(b)関連オブジェクトとデータ要素またはデータ記録との間のマッピング(すなわち、関連オブジェクト可視性)という2種類の関係マッピングをさらに与える。
当該実施形態に従うと、データ系統追跡可能性を与えるため、データ系統伝播モジュールは、1つ以上のテーブルがデータウェアハウスを用いて定義された後に、データ系統追跡情報でデータ系統マッピングテーブルをポピュレートする。なお、データ系統マッピングテーブルをさらに以下により詳細に説明する。1つ以上の変換がデータウェアハウス内で実行されると、1つ以上の補助列がポピュレートされ、シャドウテーブルが1つ以上のデータ要素のデータ系統を追跡するためのデータ系統追跡情報でロードされる。なお、補助列およびシャドウテーブルをさらに以下により詳細に説明する。関連オブジェクトが作成されるおよび/またはデータ要素と関連付けられると、データ系統伝播モジュールは、他のプロセスによる効率的な視覚化のためにソースおよび目標データ要素と関連付けられる関連オブジェクトをインデックス付けすることができる。このように、データ系統マッピングテーブルおよびシャドウテーブルのデータ系統追跡情報を横断せずに、関連オブジェクトとの上流または下流データ要素の関連付けを直接に入手することができる。
データモデルおよび変換定義フェーズの間、変換の目標テーブルを同定することができ、1つ以上のメタデータ定義として同定されたテーブルに1つ以上の補助列を追加することができる。補助列の数は変換の種類に依存することができる。1つ以上の補助列の主な用途は、変換のソーステーブルからのソースサロゲートキー値を格納することである。先に説明したようなサロゲートキーはデータ記録のアイデンティティであり、ソースサロゲートキーはソースデータ記録のアイデンティティである。1つ以上の補助列を、1つ以上のソースサロゲートキー値または変換に適切な他のデータ値でポピュレートすることができる。データ系統伝播モジュールは、補助列内に格納されたサロゲートキー値(または他の適切なデータ値)を用いて、目標データに寄与するソースデータ要素の経路を通って遡って追跡することができる。
先に説明したように、必要に応じて、特定的な変換のために1つ以上の目標テーブルに1つ以上の補助列を追加することができる。異なる種類の変換のために追加することができる補助列の例は以下のとおりである。
Figure 0006306599
当該実施形態に従うと、データ要素のデータ系統を追跡することは1つ以上のサロゲートキーに依存する。各々のテーブルは、テーブルについてのインデックス付けされた一意なキーとして働くことができるサロゲートキー列を含むことができる。変換の目標テーブルからソーステーブルへ遡って追跡するために、ソーステーブルからのサロゲートキーを目標テーブルの中に格納する。単純な変換の例では、目標テーブル中の選択されたデータ要素についてのソースデータ要素を追跡するため、(以下により詳細に記載する)データ系統マッピングテーブルの中で目標テーブルをルックアップして、ソーステーブル、ソース列、およびソースサロゲートキーが格納される補助列を入手する。補助列を用いてソースサロゲートキーの値が入手され、選択されたデータ要素を含有する目標テーブル記録の中に格納される。ソーステーブル、ソース列、およびソースサロゲートキー値を用いて、選択された目標データ要素についてのソースデータ値を見出す。より複雑な変換のためのデータ系統追跡を以下により詳細に説明する。
選択されたソースデータ要素についての目標データ要素を追跡するため、(以下により詳細に記載する)シャドウテーブルとして同定されるデータ系統追跡情報の別個のテーブルを維持する。シャドウテーブルは、目標データ記録へのソースデータ記録の1つ以上のマッピングを含む。より具体的には、シャドウテーブルは、列とソースキーとの間のメタデータ関係を同定する文脈マップとともに特定のソースキーを用いて、非正規化ソース記録−目標記録マッピングを含むことができる。このように、当該実施形態に従うと、変換の実行の終わりに、シャドウテーブルは、データ系統マッピングテーブルを用いて、目標データ要素をソースデータ要素から追跡できるようにするマッピングデータのインデックス付け版を与える1つ以上のシステム記録を含むことができる。
図5は、発明の実施形態に従う、システムについての物理的モデルのブロック図を示す。図5はシステムについての代表的な物理的モデルを示す。ある実施形態では、システムは、図5に示される物理的モデルの構成要素をすべて含むわけではないことがある。他の実施形態では、システムは、図5に示されていない付加的な構成要素を含むことがある。(図2のデータ系統伝播モジュールなどの)データ系統伝播モジュールは、1つ以上の構成要素を含む物理的モデルを含むことができ、各々の構成要素は1つ以上のテーブルを含む。図5に示される実施形態では、物理的モデルは、目標データ要素からソースデータ要素を追跡するためのデータ系統追跡情報(すなわちメタデータ情報)を含むデータ系統マッピング構成要素510を含む。データ系統マッピング構成要素510は、図6と関連して以下により詳細にさらに記載されるデータ系統マッピングテーブルを含む。さらに、物理的モデルは、目標データ要素をソースデータ要素から追跡するためのインデックス付けデータ系統追跡情報を含むシャドウテーブル構成要素520を含む。シャドウテーブル構成要素520は、図7と関連して以下により詳細にさらに記載されるシャドウテーブルを含む。加えて、物理的モデルは、1つ以上の変換についてのデータを含む変換構成要素530を含む。さらに、物理的モデルは、関連オブジェクトとデータ要素またはデータ記録との間のリンクに関するデータを含む関連オブジェクトマッピング構成要素540を含む。関連オブジェクトマッピング構成要素540は、図9と関連して以下により詳細にさらに記載される関連オブジェクトマッピングテーブルを含む。加えて、物理的モデルは、1つ以上のソーステーブルおよび1つ以上の目標テーブルについてのアプリケーションテーブル定義を含むテーブル定義構成要素550を含む。1つの実施形態では、テーブル定義構成要素550は、データモデルレベルでの1つ以上のアプリケーションテーブル定義(たとえば図5のテーブル「CDR_MODEL」)、テーブルレベルでの1つ以上のアプリケーションテーブル定義(たとえば、図5のテーブル「CDR_TABLE」、「CDR_TABLE_CONS」、および「CDR_TABLES_CONS_COLS」)、および列レベルでの1つ以上のアプリケーションテーブル定義(図5のテーブル「CDR_COLUMN」および「CDR_TABLES_CONS_COLS」)を含むことができる。さらに、物理的モデルは、1つ以上の関連オブジェクトについてのテーブル定義を含む関連オブジェクト構成要素560を含む。1つの実施形態では、関連オブジェクト構成要素560は、1つ以上の不一致についての1つ以上のテーブル定義(たとえば図5のテーブル「DME_DISCREPANCY」)および1つ以上のフラグについての1つ以上のテーブル定義(たとえば図5のテーブル「DME_FLAG」)を含むことができる。加えて、物理的モデルは、物理的モデル中の他のオブジェクトのすべてをグループ分けする親オブジェクトを含むである研究構成要素570を含む。
ともに、テーブル定義構成要素550とともに、データ系統マッピング構成要素510、シャドウテーブル構成要素520、および変換構成要素530は、図8と関連して以下により詳細にさらに記載されるデータ系統サブシステムを提供する。さらに、テーブル定義構成要素550および関連オブジェクト構成要素560とともに関連オブジェクトマッピング構成要素540は、図10と関連して以下により詳細にさらに記載される関連情報サブシステムを提供する。
図6は、発明の実施形態に従うデータ系統マッピングテーブル600のブロック図を示す。データ系統マッピングテーブル600は、目標データ要素からソースデータ要素を追跡するための情報を含む。目標データ要素からソースデータ要素を追跡するための情報は、データウェアハウスの1つ以上のデータテーブル内に格納されるデータとは区別されるデータ系統追跡情報(すなわちメタデータ情報)である。データモデル公開フェーズの間にデータ系統マッピングテーブル600をポピュレートすることができ、データ系統マッピングテーブル600は、各データ変換毎にソースデータ要素と目標データ要素との間を追跡するための情報を含む。データ系統マッピングテーブル600は、オブジェクトアイデンティティにより、列レベルマップオブジェクト、目標テーブルおよび列、ソーステーブルおよび列、ソースサロゲートキーを保持する補助列、ならびに特定的な変換に必要な任意の付加的な情報に対する参照を格納する。
ある実施形態に従うと、データ系統マッピングテーブル600内に格納される情報は、データ系統を追跡するのに用いられるデータ系統追跡情報の第1の主要な部分を構成する。データ系統を追跡するのに用いられるデータ系統追跡情報の第2の主要な部分は、ソースデータ記録へ遡って追跡する変換の目標テーブルのテーブル定義に加えられる1つ以上の補助列である。補助列は、目標テーブルの中のデータ記録に寄与する各々のソーステーブルからのサロゲートキーを含有することができる。必要な場合、補助列は、ソーステーブルのテーブルアイデンティティを保持する、および/または特定的な変換についての「フィルタ」値を同定することができる。データ系統マッピングテーブル600および1つ以上の補助列は、目標データ要素からソースデータ要素へ遡って追跡する(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールが用いるデータを含む。データ系統を追跡するのに用いられるデータ系統追跡情報の第3の主要な部分は、図7と関連してより詳細にさらに記載されるシャドウテーブルである。
図6に示される実施形態では、(列マッピングデータを含む)データ系統マッピングテーブル600は、変換テーブルレベルマップアイデンティティに対応する(すなわち変換を同定する)「TMAP_ID」列を含む。データ系統マッピングテーブル600は、ソース列がどのように目標列に関するかを規定する(すなわち変換種類を同定する)「TMAP_TYPE_RC」列をさらに含む。データ系統マッピングテーブル600はさらに、ソースデータモデルアイデンティティに対応する「SRC_DM_OBJ_ID」列、ソーステーブルアイデンティティに対応する「SRC_TAB_OBJ_ID」列、およびソース列アイデンティティに対応する「SRC_COL_OBJ_ID」列を含む。データ系統マッピングテーブル600はさらに、目標データモデルアイデンティティに対応する「TRG_DM_OBJ_ID」列、目標テーブルアイデンティティに対応する「TRG_TAB_OBJ_ID」列、および目標列アイデンティティに対応する「TRG_COL_OBJ_ID」列を含む。データ系統マッピングテーブル600はさらに、データ記録についての「SRC_TAB_OBJ_ID」列内に格納されるソーステーブルアイデンティティによって同定されるソーステーブルについてのソーステーブルデータ記録サロゲートキーを格納する目標テーブル中の補助列についてのオブジェクトアイデンティティに対応する「SRC_SKEY_COL_OBJ_ID」列を含む。図示される実施形態に従うと、データ系統マッピングテーブル600はさらに、ある変換種類についてのソーステーブルまたは目標テーブルのいずれかの中のフィルタ列アイデンティティについての情報をオプションで与える「FILTER_COL_OBJ_ID」列およびある変換種類についてのテーブルフィルタ列中のフィルタ値についての情報をオプションで与える「FILTER_VALUE」列を含む。
図7は、発明の実施形態に従う、シャドウテーブル700のブロック図を示す。シャドウテーブル700は、ソースデータ要素から目標データ要素へ追跡する際に、データ系統追跡情報の効率的なルックアップを提供することができる最適化された中央インデックスである。シャドウテーブル700は、データウェアハウス内の各データテーブル毎の別個のクエリーを作成する必要なく、データ系統処理が単一のテーブル中で直接にソース記録−目標記録関係を解決できるようにすることができる。そのようなデータ系統処理は、数桁より効率的であることができる。さらに、シャドウテーブル700は、データウェアハウスの1つ以上のデータテーブルからソース記録−目標記録関係を抽出することができ、データテーブル自身にクエリーすることなく、1つ以上のデータテーブルの系統を横断するためのインデックスとして働くことができる。
図7に示される実施形態では、シャドウテーブル700は、目標テーブルインスタンスアイデンティティに対応する「TRG_TAB_OBJ_ID」列を含む。シャドウテーブル700はさらに、ソーステーブルインスタンスアイデンティティに対応する「SRC_TAB_OBJ_ID」列を含む。シャドウテーブル700は、ソーステーブルデータ記録サロゲートキーを格納する目標テーブル中の補助列についてのオブジェクトアイデンティティに対応する「SRC_SKEY_COL_OBJ_ID」列をさらに含む。シャドウテーブル700はさらに、目標テーブルデータ記録のサロゲートキー値に対応する「TRG_SKEY_VALUE」および前述の目標テーブルデータ記録の補助列についての値でもあるソーステーブルデータ記録のサロゲートキー値に対応する「SRC_SKEY_VALUE」を含む。図示される実施形態に従うと、シャドウテーブル700はさらに、ある変換種類についてのテーブルフィルタ列中のフィルタ値についての情報をオプションで与える「FILTER_VALUE」列を含む。
図8は、発明の実施形態に従う、データ系統サブシステムの物理的モデルのブロック図を示す。図8に示される実施形態では、物理的モデルは、図6のデータ系統マッピングテーブル600および図7のシャドウテーブル700を含む。物理的モデルはさらに、1つ以上の変換種類を表わすデータを含む変換種類テーブル800を含む。加えて、物理的モデルは、1つ以上のソーステーブルおよび1つ以上の目標テーブルについてのテーブル定義を含むテーブル定義構成要素810を含み、ソーステーブルおよび目標テーブルはデータテーブルの例である。図示される実施形態では、テーブル定義構成要素810は、データモデルレベルでの1つ以上のテーブル定義(たとえば、図8中の「CDR_MODEL」テーブル)、テーブルレベルでの1つ以上のテーブル定義(たとえば、図8中の「CDR_TABLE」、「CDR_TABLE_CONS」、および「CDR_TABLES_CONS_COLS」)、および列レベルでの1つ以上のテーブル定義(たとえば、図8中の「CDR_COLUMN」および「CDR_TABLES_CONS_COLS」)を含むことができる。
当該実施形態に従うと、データがデータウェアハウス内で生成されるかまたはその中にロードされ、かつ1つ以上の変換がデータウェアハウスについて定義されると、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、データ系統サブシステムの物理的モデル内にデータ系統追跡情報を生成することができる。より具体的には、1つ以上の変換のうちの各変換毎に、データ系統伝播モジュールは、データ系統マッピングテーブル600内に各々の目標−ソースマッピングを格納することができる。データ系統伝播モジュールは、1つ以上の目標テーブルの1つ以上の目標データ値を1つ以上のソーステーブルの1つ以上のソースデータ値にさらにマッピングすることができる。データ系統伝播モジュールは、テーブル定義構成要素810の1つ以上のテーブル定義を修正することによって、1つ以上の補助列を1つ以上の目標テーブルにさらに追加することができ、各々の補助列はソーステーブルを同定するソースサロゲートキーを格納することができる。さらに、1つ以上の変換のうちの各変換毎に、データ系統伝播モジュールはシャドウテーブル700内に各々のソース−目標マッピングを格納することができる。データ系統伝播モジュールは、1つ以上のソーステーブルの1つ以上のソースデータ値を1つ以上の目標テーブルの1つ以上の目標データ値にさらにマッピングすることができる。
データ系統マッピングテーブル600内に格納される1つ以上の目標−ソースマッピングについて、データ系統伝播モジュールは、データ系統マッピングテーブル600中の各目標列データ値毎に以下の情報を格納することができる:すなわち、(a)ソーステーブルインスタンスオブジェクトアイデンティティおよびソース列オブジェクトアイデンティティ;(b)目標テーブルインスタンスオブジェクトアイデンティティおよび目標列オブジェクトアイデンティティ;(c)目標データ値を発生するのに用いられるソースデータ記録についてのソースサロゲートキー値を各々の補助列が格納する目標テーブルに加えられた各々の補助列のオブジェクトアイデンティティ;ならびに(d)マッピングが好ましいソースルートであることのインジケータ(たとえばフラグ)などの、マッピングに必要な任意の付加的なデータ、である。1つよりも多くの目標列の中に値をポピュレートするのに同じソースデータ記録を用いる場合、データ系統マッピングテーブル600内の複数のマッピングシステム記録において、ソースサロゲートキー列アイデンティティを格納する同じ補助列を繰返すことができる。
データ系統追跡情報はデータウェアハウスの変換についてのサポートを与えることができ、例示的な変換種類は、直接マップ変換、転換変換、導出変換、統合変換、縦横ピボット変換、横縦ピボット変換、ケース変換、およびカスタム種類の変換を含む。ある実施形態では、データ系統マッピング技術を用いてデータ系統追跡情報を発生させることができる。データ系統マッピング技術は、1つ以上のソース列を目標列にマッピングすることおよび1つ以上の補助列を追加して1つ以上のソースサロゲートキーを保持することに係り、各々のソースサロゲートキーは目標列の値に寄与するソーステーブルに対応する。
直接マップ変換、転換変換、および導出変換は、データ系統マッピング技術を用いてデータ系統マッピングテーブル600中に単純明快なエントリを発生させることができ、1つ以上のソース列が各々の目標列にマッピングする。これらの変換はしばしば、単一のソーステーブルから単一の目標テーブルにマッピングするので、ソースサロゲートキー値を格納する補助列が1つしかないことがしばしばである。
データ系統マッピング技術を用いて統合変換およびケース変換をサポートするのにもデータ系統追跡情報を用いることができる。しかしながら、データ系統マッピング技術は、変換当たり1つよりも多くの補助列がソースデータ要素への追跡を正すことを確実にするのを要件とすることができる。たとえば、1つの目標テーブルへの5つのソーステーブルの統合において、目標テーブル中の任意のデータ記録は、5つのソーステーブルのうち任意のものからであり得る。特定のデータ記録の出処を同定する際の曖昧さを回避するため、(ソーステーブル当たり1つの)5つの補助列を含むように目標テーブルを拡張することができる。統合変換を実行する場合、正しいソーステーブルにマッピングされる補助列の中にソースデータ記録サロゲートキーが挿入される。このように、目標テーブル中の各データ記録毎に、5つの補助列のうちの1つのみがソースサロゲートキー値を含有するであろう、また他の4つの補助列は空のままであろう。
ケース変換に同じシナリオを適用可能である。ケース変換では、異なるソーステーブルからのものであり得る異なるソース列から、目標テーブルの1列中の異なるデータ記録からのデータがポピュレートされ得る。たとえば、第1のデータ記録では、目標ケース列はソースTab1.ColXからポピュレートされ得る。第2のデータ記録では、目標ケース列はソースTab1.ColYからポピュレートされ得る。第3のデータ記録では、目標ケース列はソースTab2.ColXからポピュレートされ得る。各々の割当てはケース変換の条件によって制御される。このように、ソースデータ要素と目標データ要素との間を追跡するためには、目標列をポピュレートするのに用い得るソーステーブルと列との各組合せを同定しなければならない。可能なソーステーブルと列との各組合せ毎に1つの補助列が追加されるであろう。統合変換と同様に、どのケース条件がそのデータ記録について真であるかに依存して、補助列のうち1つのみが各データ記録中の値でポピュレートされる。さらに、目標列への列データマッピングが存在し、各々のマッピングソース記録は異なるソースキー列アイデンティティを含む。
縦横ピボット変換および横縦ピボット変換をサポートするようにデータ系統マッピング技術を修正することができる。修正は、たとえば、ピボット列についての情報および変換のために用いられるフィルタ値の一覧などの、データ系統マップテーブル600内の付加的な情報を格納することに係ることができる。たとえば、縦横ピボット変換は、各々が「ピボット」列中の異なる「フィルタ」値を有する複数のデータ記録を入力として取ることができ、目標テーブル中に「フィルタ」値の各々毎の1つ以上の列である複数の列を作成することができる。結果は、複数のソースデータ記録が単一のデータ記録に寄与した目標テーブルであり得る。したがって、目標データ記録に寄与するソースデータ記録の各々毎の1つ以上の列である複数の補助列を目標テーブルに追加することができる。
ある実施形態では、データ系統マッピングデータを格納するのに高度な技術を用いることができる。1つの高度な技術では、統合変換のため、データ系統マッピングデータを格納するための高度な技術は、補助列内に格納されるソースサロゲートキー内にソーステーブルインスタンスオブジェクトアイデンティティを含むことに係ることができる。目標データ記録からソースデータ記録へ遡って追跡するアルゴリズムは、目標データ記録の補助列内に格納されるソースサロゲートキー値を用いて、特定されたソーステーブル中のソースデータ記録をルックアップすることができ、ソーステーブルをソースサロゲートキー値から抽出することができる。統合変換とケース変換との両方について、データ系統追跡情報を格納するための別の高度な技術は、「フィルタ値」を格納する「フィルタ」補助列およびソースサロゲートキーを格納する別の補助列を含むことに係ることができる。統合変換については、「フィルタ値」を格納する「フィルタ」補助列がソーステーブルインスタンスオブジェクトアイデンティティを格納する。このように、目標データ記録からソースデータ記録へ遡って追跡するアルゴリズムは、目標データ記録の補助列内に格納されるソースサロゲートキー値を用いてソーステーブル中のソースデータ記録をルックアップすることができ、ソーステーブルが「フィルタ」補助列中に同定される。ケース変換については、ユーザは、テキスト文字列である「フィルタ」値を与えて、ケース目標列をポピュレートし得るソーステーブルと列とのあらゆる組合せを同定することができる。これらの「フィルタ」値は、適切なソーステーブル/列の組合せおよびケース変換目標テーブル/列の組合せとともにデータ系統マッピングテーブル600中に格納される。目標テーブルの各データ記録において、対応の「フィルタ値」を「フィルタ」補助列の中に入力することができる。このように、目標データ記録からソースデータ記録へ遡って追跡するアルゴリズムは、「フィルタ値」およびデータ系統マッピングテーブル600内に格納される情報とともに、目標データ記録からのソースサロゲートキー値を用いることができる。
複数の補助列という要件を回避するため、データ系統追跡情報を格納するのに他の高度な技術を用いることができる。1つの高度な技術は「スマートサロゲートキー」に係り、「スマートサロゲートキー」は、その前にソーステーブルアイデンティティがついた1つ以上のソースサロゲートキー値の縦続である。その結果、スマートサロゲートキーを用いてソーステーブルアイデンティティを入手することができ、したがって、ソーステーブルアイデンティティを格納する別個の補助列は必要ない。さらに、スマートサロゲートキーを格納するには単一の補助列しか必要なく、これにより、統合変換、縦横ピボット変換、および横縦ピボット変換の場合の複数の補助列の要件を取除くであろう。別の高度な技術は、縦横ピボット変換および横縦ピボット変換についてのスマートサロゲートキー内にピボット列値を「フィルタ値」として含むことに係る。
ある実施形態に従うと、データ要素またはデータ記録のいずれかにリンクされる関連オブジェクトの可視性をサポートし、かつ関連オブジェクトを関係のソースデータ要素および目標データ要素に伝播させるように、前述のデータ系統追跡情報または他のデータ系統追跡情報を強化することができる。さらに、データの外部ソースへの、データ系統内の変換の経路を通した関連オブジェクトのエクスポートをサポートするように、前述のデータ系統追跡情報または他のデータ系統追跡情報を強化することもできる。ある実施形態に従うと、関連オブジェクトマッピングテーブルは、関連オブジェクトとデータ要素またはデータ記録との間の1つ以上のリンクについてのデータを格納することができる。(図2のデータ系統伝播モジュールなどの)データ系統伝播モジュールは、関連オブジェクトおよびデータ要素(またはデータ記録)との関連付けを同定することができ、関連オブジェクトを一次リンクとして作成し、関連オブジェクトマッピングテーブル内に一次リンクをさらに格納することができる。データ系統伝播モジュールは、一次データ要素(またはデータ記録)のソースおよび目標データ要素/データ記録への二次リンクをさらに作成しかつ格納することができる。これは、システムのユーザがソースまたは目標データを閲覧している場合およびユーザが一次データ要素(またはデータ記録)を閲覧している場合に関連オブジェクトの効率的な視覚化を提供することができる。このように、当該実施形態に従うと、各々の関連オブジェクトが1つの一次リンクを有することができ、1つ以上の二次リンクを有することができる。
図9は、発明の実施形態に従う、関連オブジェクトマッピングテーブル900のブロック図を示す。関連オブジェクトマッピングテーブル900は、関連オブジェクトとデータ要素またはデータ記録との間の1つ以上のリンクに関するデータを格納することができる。関連オブジェクトマッピングテーブル900は、関連オブジェクトとデータ要素(またはデータ記録)との間の一次リンクに関するデータを格納することができ、一次リンクは、関連オブジェクトがデータ要素(またはデータ記録)のために作成された(すなわち元々関連付けられた)ことを同定する。さらに、関連オブジェクトマッピングテーブル900は、関連オブジェクトとデータ要素(またはデータ記録)との間の二次リンクに関するデータを格納することができ、二次リンクは、データ要素(またはデータ記録)が関連オブジェクトに関連付けられる一次データ要素(またはデータ記録)のソースまたは目標データ要素(またはデータ記録)のいずれかであることを同定する。関連オブジェクトとの上流または下流データ要素の関連付けを入手するのに、関連オブジェクトとデータ要素との間の一次リンクに関するデータおよび関連オブジェクトと1つ以上のデータ要素との間の1つ以上の二次リンクに関するデータを用いることができる。さらに、データ系統を横断して関連オブジェクトの存在を検出することなく、関連付けを入手することができる。
図9に示される実施形態では、関連オブジェクトマッピングテーブル900は、関連オブジェクトアイデンティティに対応する(すなわち、関連オブジェクトを同定する)「OPOOBJ_ID」列を含む。関連オブジェクトマッピングテーブル900はさらに、関連オブジェクト種類アイデンティティに対応する(すなわち、関連オブジェクトの種類を同定する)「OPOOBJ_TYPE_ID」列を含む。代替的な実施形態では、関連オブジェクトのアイデンティティは、アイデンティティ値および少なくとも1つの値を含む複合アイデンティティであることができる。
図示される実施形態に従うと、関連オブジェクトマッピングテーブル900はさらに、データ要素モデルアイデンティティに対応する(すなわち、関連オブジェクトが関連付けられているデータ要素のデータテーブルのデータモデルを同定する)「DM_OBJ_ID」列を含む。関連オブジェクトマッピングテーブル900は、データ要素テーブルアイデンティティに対応する(すなわち、関連オブジェクトが関連付けられているデータ要素のデータテーブルを同定する)「TAB_OBJ_ID」列も含む。関連オブジェクトマッピングテーブル900はさらに、データ要素列アイデンティティに対応する(すなわち、関連オブジェクトが関連付けられているデータ要素の列を同定する)「COL_OBJ_ID」列を含む。関連オブジェクトマッピングテーブル900は、データ要素データ記録アイデンティティに対応する(すなわち、関連オブジェクトが関連付けられているデータ要素のデータ記録を同定する)「SKEY_VALUE」列も含む。データ要素データ記録アイデンティティはサロゲートキーでもある。
図示される実施形態に従うと、関連オブジェクトマッピングテーブル900は、関連オブジェクトとデータ要素との間の関連付けが一次リンクであるかまたは二次リンクであるかを同定する「IS_PRIMARY_RC」列も含む。関連オブジェクトマッピングテーブル900は、関連オブジェクトがデータ要素またはデータ記録と関連付けられているか否かを同定する「IS_RECORD_LEVEL_RC」列をさらに含む。関連オブジェクトマッピングテーブル900は、データ要素が関連オブジェクトについての好ましいソースデータ要素であるか否か、およびどの値がデータ系統マッピングテーブル600から受け継がれているかを同定する「PREFERRED_ROUTE_RC」列も含む。関連オブジェクトマッピングテーブル900はさらに、関連オブジェクトとデータ要素との間のリンクが一次リンクであるか、上流二次リンクであるか、または下流一次リンクであるかを同定した「TRACE_TO_RC」列を含む。
図10は、発明の実施形態に従う関連情報サブシステムの物理的モデルのブロック図を示す。図10に示される実施形態では、物理的モデルは図9の関連オブジェクトマッピングテーブル900を含む。物理的モデルはさらに、1つ以上の関連オブジェクトを表わすデータを含む関連オブジェクト構成要素1000を含む。1つの実施形態では、関連オブジェクト構成要素1000は、1つ以上の関連オブジェクト種類を表わすデータを含むテーブル(たとえば図10中の「DME_OPERATIONAL_OBJECT_TYPE」テーブル)を含むことができる。当該実施形態に従うと、関連オブジェクト構成要素1000はさらに、特定された関連オブジェクト種類の1つ以上の関連オブジェクトを表わすデータを含む1つ以上のテーブルを含むことができる。図示される実施形態では、「CDR_DISCREPANCY」テーブルは、不一致である1つ以上の関連オブジェクトを表わすデータを含み、「CDR_FLAG」テーブルは、ステータスフラグである1つ以上の関連オブジェクトを表わすデータを含み、「CDR_COMMENT」テーブルは、コメントである1つ以上の関連オブジェクトを表わすデータを含む。加えて、物理的モデルは、1つ以上のソーステーブルおよび1つ以上の目標テーブルについてのテーブル定義を含むテーブル定義構成要素1010を含む。図示される実施形態では、テーブル定義構成要素1010は、データモデルレベルでの1つ以上のテーブル定義(たとえば、図10中の「CDR_MODEL」テーブル)、テーブルレベルでの1つ以上のテーブル定義(たとえば、図10中の「CDR_TABLE」テーブル)、および列レベルでの1つ以上のテーブル定義(たとえば図10中の「CDR_COLUMN」テーブル)を含むことができる。
ある実施形態に従うと、システムのユーザまたはシステム内で実行される自動プログラムは、データ要素を選択し、選択されたデータ要素に関する不一致などの関連オブジェクトを作成することができる。システムは、(図2のデータ系統伝播モジュールなどの)データ系統伝播モジュールを呼出すことができ、データ系統伝播モジュールは、新たな関連オブジェクトと(一次リンクと同定される)選択されたデータ要素との間の一次関連付けを作成することができる。データ系統伝播モジュールはさらに、関連オブジェクトマッピングテーブル900内に一次関連付け(すなわち、一次リンク)を格納することができる。データ系統伝播モジュールは、選択されたデータ要素から1つ以上のソースデータ要素および/または目標データ要素への完全なデータ系統経路を追跡することにより、新たな関連オブジェクトと1つ以上のソースデータ要素および/または目標データ要素との間の1つ以上の二次関連付けをさらに作成することができる。データ系統伝播モジュールは、関連オブジェクトマッピングテーブル900内に1つ以上の二次関連付け(すなわち、1つ以上の二次リンク)をさらに格納することができる。あるシナリオでは、ソースデータ要素へと上流に追跡する場合、複数のソースデータ要素が単一の目標データ要素にマッピングされてもよい。関連オブジェクトマッピングテーブル900中で、関連オブジェクトについての好ましいソースデータ要素であるソースデータ要素をそのようなものとして同定することができる。好ましいソースデータ要素を好ましい経路として同定することができ、好ましい経路データ系統追跡情報を(図6および図8のデータ系統マッピングテープ600などの)データ系統マッピングテーブルの中に格納することができる。
ある実施形態に従うと、システムは、関連オブジェクトマッピングテーブル900内に格納される一次リンクを用いて関連オブジェクトが作成された(またはそれ以外のやり方で関連付けられた)データテーブルのデータモデルの表示において関連オブジェクトの存在を表示することができる。システムは、関連オブジェクトマッピングテーブル900内に格納される1つ以上の二次リンクを用いて上流および/または下流データモデル中の関連オブジェクトをさらに表示することができる。特定の目標データ要素について複数のソースデータ要素が存在する場合、システムは、1つ以上の好ましいソースデータ要素を好ましい経路としてマークすることができる。システムがデータモデルを表示する場合、システムは、関連オブジェクトが一次リンクまたは二次リンクによってデータ要素に関連付けられていてもいなくても、データモデルのデータテーブルの各々のデータ要素と関連付けられる1つ以上の関連オブジェクトも表示することができる。
1つの実施形態では、関連オブジェクトへの一次リンクを有するデータ要素を含有するデータ記録が削除されると、関連オブジェクトの状態を閉じた状態に修正することができる。関連オブジェクトについてのデータを関連オブジェクトマッピングテーブル900から取除くことができる。これに代えて、関連オブジェクトについてのデータを関連オブジェクトマッピングテーブル900内に保持することができるが、(「削除済み」フラグまたはデータでのタイムスタンプを関連付けるなどして)データが「事実上削除」されたと示すようにこれを修正することができる。関連オブジェクトを削除するよりもむしろ保持して、監査目的のために保存することができる。一次リンクを介して関連オブジェクトと関連付けられたデータ要素が削除されると、関連オブジェクトへの一次およびすべての二次リンクを削除できるようになり、関連オブジェクトの状態を閉じた状態に修正することができる。二次リンクを介して関連オブジェクトと関連付けられているデータ要素が削除されると、二次リンクを削除することができる。
データ系統を追跡し、関連情報(すなわち関連オブジェクト)の可視性を伝播する付加的な局面をある実施形態に従ってここでより詳細に説明する。ある実施形態では、データ系統が外部システム(すなわちソースシステム)中で発生したソースデータ記録/フィールドに到達するまで、システムは、任意のデータ記録上の任意のデータフィールドからソース側データ系統中のソースデータフィールド/記録を通って遡るユーザまたはシステムナビゲーションをサポートすることができる。システムは次に、それに対して行為をなすべきソースデータ記録(またはデータフィールド)をユーザが選べるようにすることができる。行為の例は、データ記録(またはデータフィールド)値についてソースシステムへクエリーまたはメッセージを送ること、文書を送ること、ソースシステムに対して直接または間接に行為を行なうことができるAPIを呼出すこと、およびソースデータ記録/フィールドを有するソースシステムのアプリケーションウインドウまたは文脈中でのソースシステム中での明示(manifestation)を開くことである。
上記機能性への拡張は、各々のテーブル(または列)から直前のソーステーブル(または列)への「好ましいソース経路」を定義する変換定義メタデータに係る。この好ましい経路は、ユーザが明示的にソースデータ系統を移動する必要なく、外部システムで発生したデータ記録(またはデータフィールド)中のソース系統の単一の分岐をシステムが選択できるようにする。次にシステムは、外部システム中のそのデータ記録(またはデータフィールド)に対して上述の行為を行なうことができる。
他のある実施形態では、表表示または表示されるフィールドを含むフォーマット済形態などのユーザインターフェイス中にデータ記録およびそれらのデータフィールドを表示する際に、関連オブジェクトマッピングテーブルなどの関連情報(すなわち、1つ以上の関連オブジェクト)の最適化されたインデックスを用いて、関連情報と関連付けられるデータ記録および/またはデータフィールドについて関連情報が存在するという、ハイライトまたはアイコンなどの視覚的指標を与えることができる。
システムはまた、ユーザが、表示される情報をその情報の何らかの属性によって関連情報のサブセット(すなわち1つ以上の関連オブジェクト)に制限できるようにすることもできる。例は、(不一致、エラー報告、文書、コメントなどの)関連オブジェクトの種類と、(文書の種類、エラー報告のステータス、またはタグもしくはステータスフラグのカテゴリなどの)特定の種類の関連オブジェクトの亜種とを含む。この機能性は、システムがテーブル自体の先を見て制限を行なう必要がないように、データ記録(またはデータフィールド)をすべての他の関係のデータ記録(またはフィールド)への関連オブジェクトと関連付ける関連オブジェクトテーブル内に関連オブジェクトの種類または亜種についての情報を含むことによって最適化することができる。
システムは、ユーザが、関連オブジェクトと関連付けられるデータ記録(またはデータフィールド)の関係に基づいて表示される関連情報(すなわち関連オブジェクト)を現在表示されている関連オブジェクトに制限できるようにもすることができる。例は、データ系統中の表示されるデータ要素の上流のデータ記録(またはデータフィールド)と関連付けられる関連オブジェクトのみを表示すること、表示されたデータ要素の下流のデータ記録(またはデータフィールド)と関連付けられる関連オブジェクトのみを表示すること、(一次リンクを介して)表示されたデータ要素と直接に関連付けられる関連オブジェクトのみを表示すること、または特定的なソースもしくは目標テーブルもしくは特定的な組のソーステーブルもしくは目標テーブルからの関連オブジェクトのみを表示することを含む。これは、システムがテーブル自体の先を見て制限を行なわなくてもよいように、すべての他の関係のデータ記録(またはデータフィールド)に関連オブジェクトと関連付けられるデータ記録(またはデータフィールド)を関連付ける関連オブジェクトテーブルの中に各々の関連オブジェクトの相対的な位置についての情報を含めることによって、最適化されることができる。
ある実施形態に従うと、関連情報(すなわち関連オブジェクト)の視覚的指標を表示するために、特定的な表示されるデータフィールド(またはデータ記録)に各々の関連オブジェクトを効率的に関連付ける必要がある可能性がある。1つの実施形態では、システムは、各々の関連オブジェクトが表形式になるように関連データ記録についてのアイデンティティに対してまずピボットを行なう構造化問合せ言語(SQL)の能力を用いることによって関連付けを行なうことができ、各列の名前またはアイデンティティは、表示されている情報と同じ表構造を有し、ピボットされたテーブル中のデータ要素は、関連オブジェクトが存在する場合にのみデータ値を有する。次にシステムは、表示されている実際のデータとピボットされたテーブルとの間の所与のデータ記録アイデンティティについての名前または列アイデンティティの一致を用いて、関連オブジェクトの存在の指標を効率的にオンすることができる。別の実施形態では、システムは、特定のデータ記録アイデンティティまたは特定の列アイデンティティについての情報を取出す効率的なアクセス方法を有するローカルデータ構造中に関連オブジェクトを別個に取出すことによって、関連付けを行なうことができる。次にシステムは、データ記録アイデンティティまたは列アイデンティティを用いてこのローカルデータ構造にアクセスすることにより、表示されたデータ系統中のデータ記録およびデータフィールドを効率的に同定することができる。1つの実施形態では、データ要素のデータ系統について、システムは、データ系統中の各データ記録(またはデータフィールド)毎に、1つ以上の関連オブジェクトの存在も表示することができる。
ある実施形態では、システムのユーザインターフェイスが1つ以上の関連オブジェクトの存在の指標を表示する場合、システムは、たとえば、マウスクリック、マウス右クリックおよびメニュー選択、または目標データ記録(もしくはデータフィールド)へのカーソルナビゲーションおよびキーボード行為を用いてユーザが特定のデータ記録(またはデータフィールド)に対する行為を惹起できるようにする。惹起された行為は、関連オブジェクトの一覧を表示することと、関連オブジェクトについての詳細へのナビゲーションとを含むことができる。たとえば、システムは、コメントが付与されている各々のデータテーブル(またはデータフィールド)毎の指標を用いて関連コメントのポップアップテーブルを表示することができる。別の例は、不一致についての詳細な情報を選択しかつ表示するのに用いることができる関連不一致の一覧を表示することであり得る。さらに、代わりに、システムは、コメントに応答するまたは不一致のステータスを変更するなど、ユーザが関連オブジェクトに対して行為を行なうことができてもできなくても、ユーザをインターフェイス中に置くことができる。
ある実施形態では、システムは、異なる種類の関連オブジェクトにアクセスするのに必要なユーザの権利および特権もしくはユーザインターフェイス中の関連オブジェクトの可視性を制限する特定の上流もしくは下流データテーブルに付けられる関連オブジェクトにアクセスするのに必要な特権、ユーザが利用可能な関連オブジェクトについての詳細のレベル、または関連オブジェクトに対してユーザが行為を行なうことができることについてのセキュリティ情報を用いることができる。
ある実施形態に従うと、システムは、上流または下流データ記録およびデータ記録と関連付けられる(不一致またはコメントなどの)関連オブジェクトと関連付けられる追跡タイムスタンプ情報を用いて、ユーザが現在閲覧しているデータの前または後のデータが上流または下流データと整合するか否かをユーザが理解できるようにすることができる。たとえば、ユーザがデータ要素を閲覧していて現在のデータ要素のデータ系統中のデータに付けられた関連コメントを示す機能を呼出す場合、システムは、ソースデータ系統中のソースデータおよび関連コメントがデータ要素よりも最近のものであるか否かを示すことができ、したがって、現在のデータテーブルにまだ伝播していない変更を反映し得る。同様に、目標データ系統において、ユーザは現在のデータよりもデータおよび関連コメントがより古いか否かを把握することができ、したがって、まだ更新されていないデータを反映させて、現在のデータ要素に既になされた変更を反映し得る。同じ能力の別の明示は、ユーザが現在のデータと関連付けられる好ましいソースデータ要素に対するクエリーを提起する行為を開始して、ソースデータ要素が現在のデータ要素よりも最近修正されていることをシステムが検出してユーザに警告することである。この機能性は、ユーザが、既に修正されたかもしれないデータに対する系統設備を通して行為を行なうのを防止することができる。
先に説明したように、システムは、サロゲートキーの使用によってデータ格納を最小限にすることができ、最適化されたルックアップのための単一のテーブルの中にソースサロゲートキーを抽出するシャドウテーブルの使用によりルックアップ性能を最適化することができる。1つの実施形態に従うと、この設計に対する代替策はサロゲートキーの生成および使用を要件としない。この実施形態では、ソーステーブルの完全な主キーが1つ以上の目標テーブル内にソースキーとして格納され、目標テーブル上の付加的なデータフィールドが追加されて、ソース主キーフィールドと関連付けられるピボット値またはテーブルセレクタなどの、サロゲートキー中で捕捉される任意の補助情報を保持する。この実施形態では、システムメタデータは、ソースキーを構成するデータフィールドの完全な組を用いて動作し、かつサロゲートキーを用いて動作する各々のそのようなソースキーおよび任意の機能を記述する。さらに、各々の個別のテーブルをクエリーする必要なく、必要に応じて各々のソースキーの構成要素についての値を保持するのに用いられる、各ソースまたは目標キー毎に取っておかれる多数の列を有する同様のシャドウテーブルを用いることによって、最適化されたクエリー性能のためにシャドウテーブルへサロゲートキーを抽出する最適化を達成することができる。各テーブル毎のキー構造についてのシステムメタデータは次に、システムが、完全なソースキー情報を保持するように特定のテーブルが用いる列に対する適切な合体によってこの単一のシャドウテーブルに対してクエリーを構築できるようにするであろう。ソースキーの組に対する適切な縦続されたインデックスと、目標キーの組に対する別の縦続インデックスとは、単一のシャドウテーブルを用いて性能を最適化するであろう。
ある実施形態では、システムは、1つ以上のアプリケーションのメタデータ記述を用いてデータ系統のランタイム要素を生成するアプリケーション生成器として働くことができる。たとえば、ユーザが1つ以上のソーステーブルと目標テーブルとの間のマッピングを定義するユーザインターフェイスが存在することができる。マッピングは、変換の種類(たとえば、合体、ピボット、またはアンピボット)に依存して異なる可能性がある。定義のプロセスは、1つ以上のソースデータ要素と1つ以上の目標データ要素との間の列レベルでのマッピングを記録することができる。次に、変換を配備する一部として、システムは、(a)目標テーブルがデータベースにインストールされる前に1つ以上のソースキーを格納する1つ以上の補助列を目標テーブルに追加する、(b)1つ以上のソースデータ要素と目標データ要素との間の関係についてのメタデータマッピング情報を記録する、かつ(c)変換を行なうように実行可能なコンピュータコードを生成する、ことができる。コンピュータコードは、1つ以上のソースデータ要素と目標データ要素との間の関係を記録するために、目標テーブル中の1つ以上のソースキーをポピュレートする論理を含むことができる。ある実施形態に従うと、生成されたコンピュータコードは、ユーザの介入なしに、同一のまたは同様の構造の新しいアプリケーションの配備において再利用することができる。
図11は、発明の実施形態に従う、統合変換の例示的なデータ系統追跡を図示する。例示的な実施形態では、ソーステーブル「LAB1」、「LAB2」、および「LAB3」(すなわち、ソーステーブル1110、1120、および1130)が統合変換を介して目標テーブル「LAB_SUM」(すなわち目標テーブル1140)に組合される。さらに、例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、目標テーブル1140中の以下の目標データ要素についてのソースデータ要素を見出すことができる:列「RBC」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[LAB_SUM]〜103〜1」。データ系統伝播モジュールはデータ系統マッピングテーブル1100をルックアップして、システム記録9、25、および35という3つのシステム記録の中に、目標テーブルとして目標テーブル「LAB_SUM」(すなわち目標テーブル1130)を、および目標列として列「RBC」を見出すことができる。これらの3つのシステム記録は、「UNION」の変換マップ種類(すなわち列「TMAP_TYPE」)を有し、それらは、データ系統マッピングテーブル1100の「SRC_SKEY_COLNAME」列中に示される列「LAB_SUM.UNION_SRC_KEY」中にそれらのソースサロゲートキーを格納する。目標テーブル1140において、データ系統伝播モジュールは、目標データ記録について列「UNION_SRC_KEY」の中を見ることができる。この列は、「[LAB1]〜103〜1〜LAB1」を含有し、これはスマートサロゲートキーであるので、この値の中の第1の構成要素(すなわち、「[LAB1]」)がソーステーブルアイデンティティである。このように、データ系統伝播モジュールは、ソーステーブルがソーステーブル「LAB1」(すなわちソーステーブル1110)であると判断することができる。データ系統伝播モジュールは次に、データ系統マッピングテーブル1100中に見出される3つのシステム記録に戻ることができ、ソーステーブルがソーステーブル1110であるという知識を備えて、データ系統伝播モジュールは、データ系統マッピングテーブル1100内に、正しいシステム記録、すなわちシステム記録9を同定することができる。このように、データ系統伝播モジュールは、サロゲートキー値「[LAB1]〜103〜1〜LAB1」を用いて、ソースデータ要素が、ソーステーブル1110中、列「RBC」中にあると同定することができる。データ系統伝播モジュールは、ソースデータ値が「5.3」であるとさらに同定することができる。
さらに、例示的な実施形態では、データ系統伝播モジュールは、ソーステーブル1110中の以下のソースデータ要素についての目標データ要素を見出すことができる:列「RBC」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[LAB1]〜103〜1〜LAB1」。データ系統伝播モジュールはデータ系統マッピングテーブル1100の中を見て、システム記録9の中に、ソーステーブルとしてソーステーブル「LAB1」(すなわちソーステーブル1110)を見出し、ソース列として列「RBC」を見出すことができる。この情報から、データ系統伝播モジュールは、これが目標テーブル1140の「RBC」列中に目標データ要素を探す必要があると判断することができる。データ系統伝播モジュールは次に、目標テーブル「LAB_SUM」、ソーステーブル「LAB1」、SRC_SKEY_COLNAME「UNION_SRC_SKEY」、およびソーステーブルサロゲートキー「[LAB1]〜103〜1〜LAB1」の組合せを用いて、シャドウテーブル1150を探索して、目標テーブル1140中の所望のデータ記録のサロゲートキーが「[LAB_SUM]〜103〜1」であると判断することができる。このように、データ系統伝播モジュールは、サロゲートキー値「[LAB_SUM]〜103〜1」を用いて、目標データ要素が、目標テーブル1110の中、データ記録の列「RBC」中にあると同定することができる。データ系統伝播モジュールはさらに、目標データ値が「5.3」であると同定することができる。
図12は、発明の実施形態に従う、ピボット変換の例示的なソースデータ系統追跡を示す。これは、縦方向ソーステーブル「VS」(すなわちソーステーブル1210)から横方向目標テーブル「VITALS」(すなわち目標テーブル1220)への変換である。ソーステーブル1210は、生命兆候を同定するピボット列、列「VSTSTCD」を有し、生命兆候値は列「VSORES」に格納される。「VSTSTCD」列の中には、「SYSBP」、「DIASBP」、「PULSE」、「HEIGHT」、および「WEIGHT」の5つの異なる生命兆候値が存在する。それらはデータ系統マッピングテーブル1200の中にフィルタ値(すなわち、列「FILTER_VALUE」中の値)として格納され、各々は目標テーブル1220中にその対応の列を有する。さらに、ソーステーブル1210で、各々のスマートサロゲートキー値(すなわち、列「SK」中の値)は、サロゲートキー値の最後の構成要素として、その「VSTSTCD」列からのフィルタ値を含有する。目標テーブル1220は、列「SYSBP」、「DIASBP」、「PULSE」、「HT」、および「WT」である集められた5つの生命兆候の各々毎に1つの列を含む。生命兆候の値は各々の被験者毎に適切な列の中に格納される。目標テーブル1220中の各々のデータ記録は、ソーステーブル1210中の5つのデータ記録を消費する。すなわち、ソーステーブル1210中のソース列「VSTSTCD」からのフィルタ値(すなわち「SYSBP」、「DIASBP」、「PULSE」、「HEIGHT」、および「WEIGHT」)は、目標テーブル1220中の列(すなわち、列「SYSBP」、「DIASBP」、「PULSE」、「HT」、および「WT」)に変換される。
例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、目標テーブル1220中の以下の目標データ要素についてのソースデータ要素を見出すことができる:すなわち、列「PULSE」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[VITALS]〜101〜2」である。データ系統伝播モジュールは、データ系統マッピングテーブル1200をルックアップして、目標テーブル「VITALS」(すなわち目標テーブル1220)および目標列「PULSE」について、システム記録をただ1つ、すなわち、(図12ではフィルタ済みデータ系統マッピングテーブル1230として同定される)システム記録3、のみを見出すことができる。このシステム記録は、ピボット列「VSTSTCD」を有するTALL_SKINNY SOURCEテーブル「VS」についての「PIVOT」の変換マップ種類と、ソースデータ項目列「VSORES」とを有する。同じシステム記録である、(図12ではフィルタ済みデータ系統マッピングテーブル1230として同定される)システム記録3は、目標記録補助列を定義して、「VS_SK1」としてソース記録サロゲートキー値を得る。アルゴリズムに従うと、この列からの値([VS]〜101〜2」)を、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールによってフィルタ値「PULSE」と組合せて(すなわち「[VS]〜101〜2〜PULSE」)、ソーステーブル中の正しい記録を見出すことができる。このように、データ系統伝播モジュールはソースデータ値が「68」であるとさらに同定することができる。
図13は、発明の実施形態に従う、ピボット変換の例示的な目標データ系統追跡を示す。先に説明したように、これは、縦方向のソーステーブル「VS」(すなわち図12のソーステーブル1210)から横方向の目標テーブル「VITALS」(すなわち図12の目標テーブル1220)への変換である。例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、ソーステーブル1210中に以下のソースデータ要素についての目標データ要素を見出すことができる:すなわち、列「VSORES」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[VS]〜101〜2〜PULSE」である。データ系統伝播モジュールは、図12のデータ系統マッピングテーブル1200の中を見て、5つのシステム記録であるシステム記録1、2、3、4、および5中にソース列として列「VSORES」を見出すことができる。データ系統伝播モジュールは次に、列「VSTSTCD」(すなわち「PULSE」)中のソースデータ記録データ値を用いてデータ系統マッピングテーブル1200中のシステム記録をフィルタして、データ系統マッピングテーブル1200中の正しいシステム記録を判断することができる。このように、データ系統伝播モジュールは、システム記録3を(図13でフィルタ済みデータ系統マッピングテーブル1300として同定される)データ系統マッピングテーブル1200中の正しいシステム記録として同定することができる。この情報から、データ系統伝播モジュールは、これが目標テーブル1220の「PULSE」列中に目標データ要素を探す必要があると判断することができる。ピボット変換についてのアルゴリズムに従うと、データ系統伝播モジュールはソースサロゲートキー値からフィルタ値を取除くことができ、次に、サロゲートキー「[VS〜101〜2]」を用いてシャドウテーブル1310を探索して、目標テーブル1220中の所望のデータ記録のサロゲートキーが「[VITALS]〜101〜2」であると判断することができる。このように、データ系統伝播モジュールは、サロゲートキー値「[VITALS]〜101〜2」を用いて、目標データ要素が、目標テーブル1220の中、列「PULSE」中にあると同定することができる。データ系統伝播モジュールは目標データ値が「68」であるとさらに同定することができる。
図14は、発明の実施形態に従う、アンピボット変換の例示的なソースデータ系統追跡を示す。これは、横方向ソーステーブル「VITALS」(すなわちソーステーブル1410)から縦方向の目標テーブル「VS」(すなわち目標テーブル1420)への変換である。ソーステーブル1410は、集められた5つの生命信号、すなわち、列「SYSBP」、「DIASBP」、「PULSE」、「HT」、および「WT」、の各々毎に1つの列を有する。生命兆候の値は各被験者毎に適切な列の中に格納される。目標テーブル1420は、生命兆候を同定するピボット列である列「VSTSTCD」を有し、生命兆候の値は列「VSORES」に格納される。「VSTSTCD」列には、5つの異なる生命兆候の値、すなわち「SYSBP」、「DIASBP」、「PULSE」、「HEIGHT」、および「WEIGHT」が存在する。これらはデータ系統マッピングテーブル1400中のフィルタ値(すなわち列「FILTER_VALUE」中の値)として格納され、各々はソーステーブル1410中にその対応の列を有する。加えて、データ系統マッピングテーブル1400において、目標テーブル「VS」は、「tall skinny」テーブルとしてマークされる。目標テーブル1420において、各々のスマートサロゲートキー値(すなわち列「SK」の値)は、サロゲートキー値の最後の構成要素としてその「VSTSTCD」列からのフィルタ値を含有する。ソーステーブル1410中の各々のデータ記録は目標テーブル1420中の5つのデータ記録に変換される。ソーステーブル1410中の5つの生命兆候列(すなわち、列「SYSBP」、「DIASBP」、「PULSE」、「HT」、および「WT」)の各々は、目標テーブル1420の列「VSTSTCD」中のフィルタ値になる(すなわち、「SYSBP」、「DIASBP」、「PULSE」、「HEIGHT」、および「WEIGHT」)。
例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、目標テーブル1420中の以下の目標データ要素についてのソースデータ要素を見出すことができる:すなわち、列「VSORES」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[VS]〜101〜2〜PULSE」である。データ系統伝播モジュールはデータ系統マッピングテーブル1400の中を見て、5つのシステム記録であるシステム記録1、2、3、4、および5の中に、目標テーブルとして目標テーブル「VS」(すなわち目標テーブル1420)を見出し、目標列として列「VSORES」を見出すことができる。目標列「VSTSTCD」は目標テーブル「VS」ピボット列としてマークされる。データ系統伝播モジュールは次に、列「VSTSTCD」(すなわち「PULSE」)中の目標データ記録データ値を用いてデータ系統マッピングテーブル1400中のシステム記録をフィルタして、データ系統マッピングテーブル1400中の正しいシステム記録を判断することができる。このように、データ系統伝播モジュールは、(図14ではフィルタ済みデータ系統マッピングテーブル1430として同定される)データ系統マッピングテーブル1400中の正しいシステム記録としてシステム記録3を同定することができる。このシステム記録は、「UNPIVOT」の変換マップ種類(すなわち、列「TMAP_TYPE」)、「VSTSTCD」のピボット列(すなわち列「PIVOT_COL」、「VITALS」のソーステーブル(すなわち、列「SRC_TAB」)、および「PULSE」のソース列(すなわち列「SRC_COL」)を有する。目標テーブル1420のソースサロゲートキー値(すなわち列「VITALS_SK1」)から、データ系統伝播モジュールは、ソースデータ記録のサロゲートキーが「[VITALS]〜101〜2」であると判断することができる。このように、データ系統伝播モジュールは、サロゲートキー値「[VITALS]〜101〜2」を用いて、ソースデータ要素が、ソーステーブル1410中、列「PULSE」中にあると同定することができる。データ系統伝播モジュールはソースデータ値が「68」であるとさらに同定することができる。
図15は、発明の実施形態に従う、アンピボット変換の例示的な目標データ系統追跡を示す。先に説明したように、これは、横方向のソーステーブル「VITALS」(すなわち、図14のソーステーブル1410)から縦方向の目標テーブル「VS」(すなわち図14の目標テーブル1420)への変換である。例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、ソーステーブル1410中の以下のソースデータ要素についての目標データ要素を見出すことができる:すなわち、列「PULSE」およびデータ記録アイデンティティ(すなわちサロゲートキー「[VITALS]〜101〜2」である。データ系統伝播モジュールは、図14のデータ系統マッピングテーブル1400をルックアップして、(図15ではフィルタ済みデータ系統マッピングテーブル1500と同定される)システム記録3中に、ソーステーブルとしてソーステーブル「VITALS」(すなわちソーステーブル1410)を見出し、ソース列として列「PULSE」を見出すことができる。このシステム記録は、「UNPIVOT」の変換マップ種類(すなわち列「TMAP_TYPE」)、「VSTSTCD」のピボット列(すなわち列「PIVOT_COL」)、「VS」の目標テーブル(すなわち列「TRG_TAB」)、および「VSORES」の目標列(すなわち列「TRG_COL」)を有する。この情報から、データ系統伝播モジュールは、それが目標テーブル1420の「VSORES」列中に目標データ要素を探す必要があると判断することができる。データ系統伝播モジュールは次に、ソーステーブル1410のサロゲートキー「[VITALS]〜101〜2」を用いてシャドウテーブル1510を探索して、目標テーブル1420中の所望のデータ記録のサロゲートキーが「[VS]〜101〜2〜PULSE」であると判断することができる。シャドウテーブル中の記録の数を減らすために、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、アンピボット変換のために、列「TRG_SKEY_VALUE」中に、省略された値を、すなわちフィルタ値なしに、格納する。次にデータ系統伝播モジュールは、フィルタ値を、これを目標記録識別子として用いる前にシャドウテーブルから取出した列「TRG_SKEY_VALUE」中の値に付ける。このように、データ系統伝播モジュールは、サロゲートキー値「[VS]〜101〜2〜PULSE」を用いて、目標データ要素が、目標テーブル1420中、列「VSORES」中にあると同定することができる。データ系統伝播モジュールは目標データ値が「68」であるとさらに同定することができる。
図16は、発明の実施形態に従う、合体変換の例示的なデータ系統追跡を図示する。例示的な実施形態では、ソーステーブル「DM」と「LAB1」と(すなわちソーステーブル1610と1620と)が合体されて目標テーブル「LAB1_SUM」)(すなわち目標テーブル1630)を形成する。データ系統マッピングテーブル1600は、目標テーブル1630の各列毎にシステム記録を含む。各々のシステム記録は、ソーステーブルアイデンティティ(すなわち列「SRC_TAB」)、ソース列アイデンティティ(すなわち列「SRC_COL」)、およびソースサロゲートキー列アイデンティティ(すなわち列「SRC_SKEY_COLNAME」)を含む。ソースサロゲートキー列は、目標テーブル1620中のデータ記録に寄与したソーステーブル1610(すなわち列「DM_SKEY」)またはソーステーブル1620(すなわち列「LAB1_SKEY」)のいずれかの中のデータ記録についてのソースサロゲートキーを格納するように目標テーブル1630に追加される補助列である。合体変換については、この例では2つのテーブル(すなわちソーステーブル1610および1620)である合体に寄与する各テーブル毎にソースサロゲートキー補助列が存在する。ソーステーブル1610は、列「AGE」、「AGE_U」、および「GENDER」の中の各研究被験者毎の人口統計データを表わすデータ記録を含む。ソーステーブル1620は、列「RBC」、「HEMOGLOBIN」、および「HEMATOCRIT」中の異なる被験者についての実験室テストの結果を表わすデータ記録を含む。これらの2つのテーブルは合体されて目標テーブル1630を作成する。目標テーブル1630の各々のデータ記録は、ソーステーブル1610および1620の各々のソーステーブルからの値を含む。したがって、目標テーブル1630の各々のデータ記録は、2つのソースサロゲートキー値(すなわち、各々の寄与するソーステーブルからの1つのソースサロゲートキー値)を格納する。これらのソースサロゲートキー値は、列「DM_SKEY」および列「LAB1_SKEY」に格納される。
例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、目標テーブル1630中の以下の目標データ要素についてのソースデータ要素を見出すことができる:すなわち、列「HEMOGLOBIN」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[LAB1_SUM]〜105〜1〜LAB1」である。データ系統伝播モジュールはデータ系統マッピングテーブル1600をルックアップして、システム記録10中に、目標テーブルとして目標テーブル「LAB1_SUM」(すなわち目標テーブル1630)を見出し、目標列として列「HEMOGLOBIN」を見出すことができる。これから、データ系統伝播モジュールは、ソースデータ要素がソーステーブル「LAB1」(すなわちソーステーブル1620)およびソース列「HEMOGLOBIN」の中にあると知る。データ系統伝播モジュールは、ソースサロゲートキー値が目標テーブル1630の列「LAB1_SKEY」中に見出されるということも知る。目標テーブル1630において、データ系統伝播モジュールは、目標データ記録について列「LAB1_SKEY」の中を見ることができる。この列はサロゲートキー値「[LAB1]〜105〜1〜LAB1」を含有し、データ系統伝播モジュールは、ソーステーブル、ソース列、およびサロゲートキー値を知る。このように、データ系統伝播モジュールは、サロゲートキー値「[LAB1]〜105〜1〜LAB1」を用いて、ソースデータ要素が、ソーステーブル1620中、列「HEMOGLOBIN」中にあると同定することができる。データ系統伝播モジュールはソースデータ値が「111」であるとさらに同定することができる。
さらに、例示的な実施形態では、データ系統伝播モジュールはソーステーブル1620の中に以下のソースデータ要素についての目標データ要素を見出すことができる:すなわち、列「HEMOGLOBIN」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[LAB1]〜105〜1〜LAB1」である。データ系統伝播モジュールはデータ系統マッピングテーブル1600をルックアップして、システム記録10中に、ソーステーブルとしてソーステーブル「LAB1」(すなわちソーステーブル1620)を見出し、ソース列として列「HEMOGLOBIN」を見出すことができる。この情報から、データ系統伝播モジュールは、それが目標テーブル「LAB1_SUM」(すなわち目標テーブル1630)の「HEMOGLOBIN」列中に目標データ要素を探す必要があると判断することができる。データ系統伝播モジュールは次に、ソーステーブル1620のサロゲートキー「[LAB1]〜105〜1〜LAB1」を用いてシャドウテーブル1640を探索して、目標テーブル1630中の所望のデータ記録のサロゲートキーが「[LAB1_SUM]〜105〜1〜LAB1」であると判断することができる。このように、データ系統伝播モジュールは、サロゲートキー値「[LAB1_SUM]〜105〜1〜LAB1」を用いて、目標データ要素が、目標テーブル1630中、列「HEMOGLOBIN」中にあると同定することができる。データ系統伝播モジュールは目標データ値が「111」であるとさらに同定することができる。
図17は発明の実施形態に従うケース変換の例示的なデータ系統追跡を示す。例示的な実施形態では、ソーステーブル「NRANGE」(すなわちソーステーブル1710)は、各人口統計群毎に異なる血液検査についての正常範囲の値を含む。ソーステーブル「LAB」(すなわちソーステーブル1720)は一群の被験者についての実験室テスト結果を含む。目標テーブル「LAB_SUM」(すなわち目標テーブル1730)は、ソーステーブル1720からの列プラスソーステーブル1710からの対応の正常範囲および正常範囲単位を含有する列を含む。目標テーブル1730は、補助列、すなわち1つのフィルタ列(すなわち列「CASE_FVAL」と2つのソースサロゲートキー列(すなわち、列「LAB_SKEY」および「NRANGE_SKEY」と)をさらに含む。
例示的な実施形態では、(図2のデータ系統伝播モジュール200などの)データ系統伝播モジュールは、目標テーブル1730中に以下の目標データ要素についてのソースデータ要素を見出すことができる:すなわち、列「RBC_NR」およびデータ記録アイデンティティ(すなわちサロゲートキー「[LAB_SUM]〜103〜1」である。データ系統伝播モジュールはデータ系統マッピングテーブル1700をルックアップして、4つのシステム記録であるシステム記録11、12、13、および14の中に目標テーブルとして目標テーブル「LAB_SUM」(すなわち目標テーブル1730)を見出し、目標列として列「RBC_NR」を見出すことができる。これらの4つのシステム記録は「CASE」の変換マップ種類(すなわち、列「TMAP_TYPE」)を有する。データ系統伝播モジュールは、目標テーブル1730中の2つの補助列を用いて、データ系統マッピングテーブル1700中の正しいシステム記録を判断する:すなわち、列「NRANGE_SKEY」および列「CASE_FVAL」である)。列「NRANGE_SKEY」はソーステーブルサロゲートキーを格納し、データ系統マッピングテーブル1700中に対応のアイデンティティ(すなわち列「SRC_SKEY_COLNAME」)を有する。列「CASE_FVAL」はケース条件節タグを格納し、データ系統マッピングテーブル1700中に対応のアイデンティティ(すなわち列「FILTER_COL」)を有する。データ系統伝播モジュールは、目標テーブル1730中のデータ記録がフィルタ列(すなわちCOLUMN「CASE_FVAL」)中に値「MALE」を含むと判断することができる。データ系統伝播モジュールは、データ系統マッピングテーブル1700中の正しいシステム記録が「FILTER_VAL」列中の一致するアイデンティティを有するシステム記録であるとさらに判断することができる。このように、4つのシステム記録から、データ系統伝播モジュールは、「FILTER_VAL」列中に「MALE」を含むシステム記録がシステム記録11であると判断することができる。このように、ソースデータ要素は、ソーステーブル「NRANGE」(すなわち、ソーステーブル1710)からのものであり、列「MALE」を有する。データ系統伝播モジュールは、ソースサロゲートキー値が目標テーブル1730の「NRANGE_SKEY」列中に位置し、ソースサロゲートキー値が「[NRANGE]〜LAB1〜RBC」であるとさらに判断することができる。データ系統伝播モジュールはソースデータ値が「4.7−6.1」であるとさらに判断することができる。
さらに、例示的な実施形態では、データ系統伝播モジュールは、ソーステーブル1710中に以下のソースデータ要素についての目標データ要素を見出すことができる:すなわち、列「MALE」およびデータ記録アイデンティティ(すなわちサロゲートキー)「[NRANGE]〜LAB1〜RBC」である。データ系統伝播モジュールはデータ系統マッピングテーブル1700をルックアップして、システム記録11中に、ソーステーブルとしてソーステーブル「NRANGE」)(すなわちソーステーブル1710)を見出し、ソース列として列「MALE」を見出すことができる。この情報から、データ系統伝播モジュールは、それが目標テーブル「LAB_SUM」(すなわち目標テーブル1730)の「RBC_NR」列中に目標データ要素を探す必要があると判断することができる。データ系統伝播モジュールは次に、ソーステーブル1710のサロゲートキー「[NRANGE]〜LAB1〜RBC」を用いてシャドウテーブル1740を探索して、目標テーブル1730中の所望のデータ記録のサロゲートキーが「[LAB_SUM]〜103〜1」および「[LAB_SUM]〜104〜1」であると判断することができる。このように、データ系統伝播モジュールは、サロゲートキー値「[LAB_SUM]〜103〜1」および「[LAB_SUM]〜104〜1」を用いて、2つの目標データ要素が、目標テーブル1730中、列「RBC_NR」中にあると同定することができる。データ系統伝播モジュールはこれらの目標データ要素の両者についての目標データ値が「4.7−6.1」であるとさらに同定することができる。
図18は、発明の実施形態に従う、(図1の機能モジュール18の一部であるデータ系統モジュールなどの)データ系統モジュールの機能性のフロー図を示す。1つの実施形態では、(以下に記載される)図18のフロー図の機能性および(これも以下に記載される)図19のフロー図の機能性は、各々がメモリまたは何らかの他のコンピュータ読出可能なもしくは有形の媒体の中に格納されかつプロセッサによって実行されるソフトウェアによって実現される。他の実施形態では、各々の機能性は、(たとえば特定用途向け集積回路(ASIC)、プログラマブルゲートアレイ(PGA)、フィールドプログラマブルゲートアレイ(FPGA)などの使用を通して)ハードウェアによってまたはハードウェアとソフトウェアとの任意の組合せによって行なわれ得る。
フローが開始し、1805に進む。1805で、目標データ要素が1つ以上のデータテーブルを含むデータウェアハウスのデータ系統の一部として1つ以上のソースデータ要素にマッピングされ、各々のデータテーブルは1つ以上のデータ記録を含む。目標データ要素は目標データ記録の列を含む。各々のソースデータ要素はソースデータ記録の列を含む。データ変換を用いて、1つ以上のソースデータ要素から、目標データ要素を導出する。1つの実施形態では、データウェアハウスは1つ以上の順序付けされたデータモデルを含む。各々の順序付けされたデータモデルは1つ以上のデータテーブルを含む。さらに、データ変換を用いて、先のデータモデルの少なくとも1つのテーブルから、後続のデータモデルの1つ以上のデータテーブルを形成する。1つの実施形態では、データ変換は、直接マッピング変換、統合変換、合体変換、横縦アンピボット変換、縦横ピボット変換、またはケース変換のうちの1つである。フローは1810に進む。
1810で、目標データ記録の1つ以上の補助列内に1つ以上のソースサロゲートキーが格納される。各々のソースサロゲートキーは、対応のソースデータ要素を含むソースデータ記録のアイデンティティを含む。1つの実施形態では、1つ以上のサロゲートキーのうちの各々のサロゲートキーは、ソースデータ記録を備えるソースデータテーブルのアイデンティティを含む。1つの実施形態では、1つ以上のソースデータ要素への目標データ要素のマッピングに基づいて、1つ以上の補助列が目標データ記録に自動的に追加される。フローは1815に進む。
1815で、各ソースデータ要素毎に、データ系統マッピングシステム記録が目標データ要素および対応のソースデータ要素のマッピングを表わすデータ系統マッピングシステムテーブル内に格納される。データ系統マッピングシステム記録は、対応のソースデータ要素、目標データ要素、および1つ以上の補助列を含む。当該実施形態に従うと、データ系統マッピングシステム記録はデータ変換の種類も含む。フローは1820に進む。
1820で、ソースデータ要素は、データ系統の一部として1つ以上の目標データ要素にマッピングされる。1つ以上の目標データ要素は、データ変換を用いてソースデータ要素から導出される。フローは1825に進む。
1825で、各目標データ要素毎に、ソースデータ要素および対応の目標データ要素のマッピングを表わすシャドウシステムテーブル内にシャドウシステム記録が格納される。シャドウシステム記録は、ソースデータ要素を同定するソースサロゲートキー、対応の目標データ要素を同定する目標サロゲートキー、および1つ以上の補助列を含む。このように、当該実施形態に従うと、データ系統は、1つ以上のデータ系統マッピングシステム記録、1つ以上のシャドウシステム記録、および1つ以上のソースサロゲートキーを含む。フローは1830に進む。
1830で、データ系統を用いてマッピングされる1つ以上のデータ要素からデータ要素が選択される。フローは1835に進む。
1835で、選択されたデータ要素にマッピングされる1つ以上のデータ要素がデータ系統を用いてユーザインターフェイス内に表示される。1つの実施形態では、選択されたデータ要素にマッピングされる1つ以上のデータ要素の表示はさらに、各データ要素毎に、データ系統内のデータ要素の位置を表示することを含む。フローは1840に進む。
1840で、各目標データ要素毎に、1つ以上のソースデータ要素のうちの1つのソースデータ要素が好ましいソースデータ要素として選択される。フローは1845に進む。
1845で、選択された1つ以上の好ましいソースデータ要素に基づいて、データ系統の好ましいソース経路が作成される。フローは1850に進む。
1850で、目標データ記録の補助列内にピボット列アイデンティティが格納される。ピボット列アイデンティティはソースデータ記録のピボット列を同定する。フローは1855に進む。
1855で、目標データ記録の第1の補助列内にフィルタ列アイデンティティが格納される。フィルタ列アイデンティティはソースデータ記録のフィルタ列を同定する。フローは1860に進む。
1860で、目標データ記録の第2の補助列内にフィルタ値が格納され、フィルタ値はソースデータ記録のフィルタ値である。そしてフローが終了する。
図19は、発明の実施形態に従う、(図1の関連情報伝播モジュール16などの)関連情報伝播モジュールの機能性のフロー図を示す。フローは1905で始まる。1905で、データウェアハウスのデータ系統追跡が追跡される。データウェアハウスは1つ以上のデータテーブルを含む。各々のデータテーブルは1つ以上のデータ記録を含む。1つの実施形態では、データウェアハウスは1つ以上の順序付けされたデータモデルを含む。各々の順序付けされたデータモデルは1つ以上のデータテーブルを含む。さらに、データ変換を用いて、先のデータモデルの少なくともテーブルから、後続のデータモデルの1つ以上のデータテーブルが形成される。1つの実施形態では、データ変換は、直接マッピング変換、統合変換、合体変換、横縦アンピボット変換、縦横ピボット変換、またはケース変換のうちの1つである。フローは1910に進む。
1910で、一次データ要素と関連オブジェクトとの間の関連付けが同定される。一次データ要素は一次データ記録の列を含む。関連オブジェクトは関連情報を備える。一次データ要素と関連オブジェクトとの間の関連付けは一次リンクとして同定される。1つの実施形態では、関連オブジェクトは、不一致、コメント、ステータスフラグ、状態インジケータ、タグ、画像、録音録画、ファイル、リンク、または文書の1つである。また、1つの実施形態では、一次データ要素は、一次データ記録の列を含む一次データ要素の代わりに一次データ記録を含む。
1915で、一次リンクを表わす関連オブジェクトマッピングシステムテーブル内に第1の関連オブジェクトマッピングシステム記録が格納される。第1の関連オブジェクトマッピングシステム記録は、一次データ要素のアイデンティティ、関連オブジェクトのアイデンティティ、および一次リンクインジケータを含む。1つの実施形態では、第1の関連オブジェクトマッピングシステム記録は、一次データ要素のデータモデルを同定するデータ要素モデルアイデンティティ、一次データ要素のデータテーブルを同定するデータ要素テーブルアイデンティティ、および一次データ要素の列を同定するデータ要素列アイデンティティを含む。フローは1920に進む。
1920で、データ系統を用いて、二次データ要素と関連オブジェクトとの間の関連付けが同定される。二次データ要素は二次データ記録の列を含む。二次データ要素はデータ系統内の一次データ要素に関する。二次データ要素と関連オブジェクトとの間の関連付けは二次リンクとして同定される。1つの実施形態では、二次データ要素は一次データ要素のソースデータ要素である。また、1つの実施形態では、一次データ要素のアイデンティティおよび二次データ要素のアイデンティティは各々サロゲートキーである。さらに、1つの実施形態では、二次データ要素は、二次データ記録の列を含む二次データ要素の代わりに二次データ記録を含む。1つの実施形態では、二次データ要素と関連オブジェクトとの間の関連付けは、データ系統を用いて一次データ要素に基づいて二次データ要素を同定することによって同定される。ある実施形態では、付加的な二次データ要素と関連オブジェクトとの間の付加的な関連付けもデータ系統を用いて同定される。フローは1925に進む。
1925で、二次リンクを表わし、かつ一次データ要素と二次データ要素との間の関連付けを表わす関連オブジェクトマッピングシステムテーブル内に第2の関連オブジェクトマッピングシステム記録が格納される。第2の関連オブジェクトマッピングシステム記録は、二次データ要素のアイデンティティ、関連オブジェクトのアイデンティティ、および二次リンクインジケータを含む。1つの実施形態では、第2の関連オブジェクトマッピングシステム記録は、二次データ要素のデータモデルを同定するデータ要素モデルアイデンティティ、二次データ要素のデータテーブルを同定するデータ要素テーブルアイデンティティ、および二次データ要素の列を同定するデータ要素列アイデンティティを含む。さらに、1つの実施形態では、第2の関連オブジェクトマッピングシステム記録は、二次データ要素が好ましいソースデータ要素であるという指標を含む。データ系統を用いて付加的な二次データ要素と関連オブジェクトとの間の付加的な関連付けも同定される実施形態では、関連オブジェクトマッピングシステムテーブル内に付加的な関連オブジェクトマッピングシステム記録が格納される。フローは1930に進む。
1930で、一次データ要素または二次データ要素がユーザインターフェイス内に表示される。1つの実施形態では、一次データ要素と二次データ要素との両方がユーザインターフェイス内に表示される。次にフローは1935に進む。
1935で、一次データ要素または二次データ要素のいずれかが選択される。次にフローは1940に進む。
1940で、第1の関連オブジェクトマッピングシステム記録または第2の関連オブジェクトマッピングシステム記録のいずれかを用いてユーザインターフェイス内に関連オブジェクトが表示される。より具体的には、一次データ要素が選択されると、第1の関連オブジェクトマッピングシステム記録を用いてユーザインターフェイス内に関連オブジェクトが表示される。二次データ要素が選択されると、第2の関連オブジェクトマッピングシステム記録を用いてユーザインターフェイス内に関連オブジェクトが表示される。1つの実施形態では、関連オブジェクトの表示は関連オブジェクトの種類によってフィルタされる。フローは1945に進む。
1945で、一次データ要素が削除される。フローは1950に進む。
1950で、第1の関連オブジェクトマッピングシステム記録が削除される。フローは1955に進む。
1955で、第2の関連オブジェクトマッピングシステム記録が削除される。フローは1960に進む。
1960で、関連オブジェクトの状態が閉じた状態に修正される。フローは終了する。
このように、1つの実施形態では、データウェアハウス内に格納することができる1組のデータのデータ系統追跡を与えることができるシステムを提供することができ、1組のデータは1つ以上のテーブル内に格納され、各々のテーブルは1つ以上のデータ記録を含む。所与の目標データ要素については、システムは、目標データ要素を発生した1組のソースデータ要素を同定することができ、「データ要素」はデータ記録の列を含む。同様に、所与のソースデータ要素については、システムは、ソースデータ要素から導出される1組の目標データ要素およびソースデータ要素から1組の目標データ要素への経路を同定することができる。システムによって与えられるデータ経路追跡は格納されたデータの徹底的な分析をさらに容易にすることができる。
さらに、別の実施形態では、データ要素にリンクされる「関連情報」または「関連オブジェクト」の可視性をサポートし、関係のソースデータ要素および目標データ要素に関連情報(すなわち関連オブジェクト)を伝播するようにデータ系統追跡を強化することができるシステムを提供することができる。実施形態に従うと、システムは、関連オブジェクトと、関連オブジェクトに関連付けられるデータ要素またはデータ記録との間の一次リンクおよび二次リンクの両者を格納することができる。このように、当該実施形態に従うと、データ系統のデータ要素の上流およびデータ要素の下流の両方で、不一致などの関連オブジェクトが可視となることができる。この関連オブジェクトの可視性は、格納されたデータの徹底的な分析をさらに容易にすることができる。
この明細書を通じて記載した発明の特徴、構造、または特性を、1つ以上の実施形態において任意の好適な態様で組合せてもよい。たとえば、この明細書を通じての「1つの実施形態」、「いくつかの実施形態」、「ある実施形態」、「ある複数の実施形態」、または他の同様の文言の使用は、実施形態と関連して記載した特定の特徴、構造、または特性が本発明の少なくとも1つの実施形態に含まれてもよいことを指すものである。このように、この明細書を通じての句「1つの実施形態」、「いくつかの実施形態」、「ある実施形態」、「ある複数の実施形態」、または他の同様の文言の出現は同じ群の実施形態を必ずしもすべて指すものではなく、記載の特徴、構造、または特性を1つ以上の実施形態で任意の好適な態様で組合せてもよい。
当業者は、以上で論じたような発明が、開示されるのとは異なる順序のステップで、および/または異なる構成中の要素を用いて実践されてもよいことを容易に理解するであろう。したがって、発明はこれらの好ましい実施形態に基づいて記載されたが、当業者には、発明の意味および精神内に留まりながら、ある修正例、変形例、および代替的な構築が明らかになるであろうことが明らかであろう。したがって、発明の境界を判断するには、添付の請求項を参照すべきである。

Claims (13)

  1. データ要素の関連情報を表示するためにコンピュータで実行される方法であって、
    1つ以上のデータテーブルを備えるデータウェアハウスのデータ系統をたどることを備え、前記データ系統は、複数のデータ要素を含み
    前記複数のデータ要素のうちの一次データ要素と、前記一次データ要素に関連付けられている関連オブジェクトとの間の関連付けを表わす関連オブジェクトマッピングシステムテーブル内に第1の関連オブジェクトマッピングシステムレコードを格納することを備え、前記一次データ要素と前記関連オブジェクトとの間の前記関連付けは一次リンクとして同定され、
    前記データ系統を用いて、前記複数のデータ要素のうちの二次データ要素と前記関連オブジェクトとの間の関連付けを同定することを備え、前記二次データ要素は前記データ系統内の前記一次データ要素に関連付けられており
    前記データ系統の前記二次データ要素と前記関連オブジェクトとの間の前記関連付けを表わし、かつ前記一次データ要素と前記二次データ要素との間の関連付けを表わす前記関連オブジェクトマッピングシステムテーブル内に第2の関連オブジェクトマッピングシステムレコードを格納することを備え、前記二次データ要素と前記関連オブジェクトとの間の前記関連付けは二次リンクとして同定される、方法。
  2. 各々のデータテーブルは1つ以上のデータレコード含み
    前記一次データ要素は一次データレコードの列を含み
    前記関連オブジェクトは、データ要素以外の情報として当該データ要素に関連付けられる関連情報を含み
    前記第1の関連オブジェクトマッピングシステムレコードは、前記一次データ要素のアイデンティティ、前記関連オブジェクトのアイデンティティ、および一次リンクインジケータを含み
    前記二次データ要素は二次データレコードの列を含み
    前記第2の関連オブジェクトマッピングシステムレコードは、前記二次データ要素のアイデンティティ、前記関連オブジェクトのアイデンティティ、および二次リンクインジケータを含む、請求項1に記載のコンピュータで実行される方法。
  3. ユーザインターフェイス内に前記一次データ要素または前記二次データ要素を表示することと、
    前記一次データ要素または前記二次データ要素のいずれかを選択することと、
    前記第1の関連オブジェクトマッピングシステムレコードまたは前記第2の関連オブジェクトマッピングシステムレコードのいずれかを用いて前記ユーザインターフェイス内に前記関連オブジェクトを表示することとをさらに備える、請求項1または2に記載のコンピュータで実行される方法。
  4. 前記関連オブジェクトの前記表示は関連オブジェクト種類によってフィルタされる、請求項3に記載のコンピュータで実行される方法。
  5. 前記第1の関連オブジェクトマッピングシステムレコードは、前記一次データ要素のデータモデルを同定するデータ要素モデルアイデンティティ、前記一次データ要素のデータテーブルを同定するデータ要素テーブルアイデンティティ、および前記一次データ要素の列を同定するデータ要素列アイデンティティを含み
    前記第2の関連オブジェクトマッピングシステムレコードは、前記二次データ要素のデータモデルを同定するデータ要素モデルアイデンティティ、前記二次データ要素のデータテーブルを同定するデータ要素テーブルアイデンティティ、および前記二次データ要素の列を同定するデータ要素列アイデンティティを含む、請求項1〜のいずれかに記載のコンピュータで実行される方法。
  6. 前記関連オブジェクトは、不一致、コメント、ステータスフラグ、状態インジケータ、タグ、画像、録音録画、ファイル、リンク、または文書のうち1つである、請求項1〜5のいずれかに記載のコンピュータで実行される方法。
  7. 前記二次データ要素は前記一次データ要素のソースデータ要素である、請求項1〜6のいずれかに記載のコンピュータで実行される方法。
  8. 前記第2の関連オブジェクトマッピングシステムレコードは前記二次データ要素が好ましいソースデータ要素であるという指標を含む、請求項7に記載のコンピュータで実行される方法。
  9. 前記一次データ要素の前記アイデンティティおよび前記二次データ要素の前記アイデンティティは各々サロゲートキーである、請求項1〜8のいずれかに記載のコンピュータで実行される方法。
  10. 前記一次データ要素は前記一次データレコード含み
    前記二次データ要素は前記二次データレコード含む、請求項2に記載のコンピュータで実行される方法。
  11. 前記一次データ要素を削除することと、
    前記第1の関連オブジェクトマッピングシステムレコードを削除することと、
    前記第2の関連オブジェクトマッピングシステムレコードを削除することと、
    前記関連オブジェクトの状態を閉じた状態に修正することとをさらに備え、前記閉じた状態は、前記関連オブジェクトへのリンクを有さない、請求項1〜10のいずれかに記載のコンピュータで実行される方法。
  12. 請求項1〜11のいずれかに記載の方法をコンピュータに実行させる、プログラム。
  13. 請求項12に記載のプログラムを格納したメモリと、
    前記メモリに結合され、前記プログラムを実行するためのプロセッサとを備える、システム。
JP2015537697A 2012-10-18 2013-08-02 関連情報伝播システム Active JP6306599B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261715428P 2012-10-18 2012-10-18
US61/715,428 2012-10-18
US13/804,049 2013-03-14
US13/804,049 US9063998B2 (en) 2012-10-18 2013-03-14 Associated information propagation system
PCT/US2013/053373 WO2014062278A1 (en) 2012-10-18 2013-08-02 Associated information propagation system

Publications (3)

Publication Number Publication Date
JP2015537294A JP2015537294A (ja) 2015-12-24
JP2015537294A5 JP2015537294A5 (ja) 2016-09-23
JP6306599B2 true JP6306599B2 (ja) 2018-04-04

Family

ID=50486269

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015537696A Active JP6238993B2 (ja) 2012-10-18 2013-08-02 データ系統システム
JP2015537697A Active JP6306599B2 (ja) 2012-10-18 2013-08-02 関連情報伝播システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015537696A Active JP6238993B2 (ja) 2012-10-18 2013-08-02 データ系統システム

Country Status (5)

Country Link
US (2) US9063998B2 (ja)
EP (1) EP2909748B1 (ja)
JP (2) JP6238993B2 (ja)
CN (2) CN104737154B (ja)
WO (2) WO2014062278A1 (ja)

Families Citing this family (88)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5883648B2 (ja) 2008-12-02 2016-03-15 アビニシオ テクノロジー エルエルシー データ要素間の関係性の視覚化
WO2013136718A1 (ja) * 2012-03-16 2013-09-19 日本電気株式会社 時系列データ処理装置、時系列データ処理方法及び時系列データ処理プログラム記憶媒体
US9659042B2 (en) * 2012-06-12 2017-05-23 Accenture Global Services Limited Data lineage tracking
CN102857949B (zh) * 2012-09-14 2018-11-20 中兴通讯股份有限公司 一种规划数据一致性保证的方法和装置
JP6036835B2 (ja) * 2012-09-18 2016-11-30 日本電気株式会社 時系列データ処理装置、時系列データ処理方法及び時系列データ処理プログラム
US9852153B2 (en) 2012-09-28 2017-12-26 Ab Initio Technology Llc Graphically representing programming attributes
US20140214753A1 (en) * 2012-12-28 2014-07-31 Joseph Guerra Systems and methods for multi-source data-warehousing
CN105144080B (zh) * 2013-03-15 2021-05-18 起元技术有限责任公司 用于元数据管理的系统
US9928283B2 (en) * 2013-04-15 2018-03-27 Validus Solutions, Inc. Tracing data through a transformation process using tracer codes
US9734223B2 (en) * 2013-06-14 2017-08-15 International Business Machines Corporation Difference determination in a database environment
US20150012477A1 (en) * 2013-07-02 2015-01-08 Bank Of America Corporation Data lineage notification tools
US10142378B2 (en) * 2014-01-30 2018-11-27 Symantec Corporation Virtual identity of a user based on disparate identity services
AU2015289442B2 (en) 2014-07-18 2019-07-11 Ab Initio Technology Llc Managing lineage information
JP6594950B2 (ja) * 2014-07-24 2019-10-23 アビニシオ テクノロジー エルエルシー データ系統の要約
US11892913B2 (en) * 2015-01-05 2024-02-06 Rubrik, Inc. Data lineage based multi-data store recovery
KR102054568B1 (ko) 2015-02-11 2020-01-22 아브 이니티오 테크놀로지 엘엘시 필터링 데이터 계통 다이어그램
CA2975530C (en) * 2015-02-11 2020-01-28 Ab Initio Technology Llc Filtering data lineage diagrams
US10409802B2 (en) 2015-06-12 2019-09-10 Ab Initio Technology Llc Data quality analysis
US11308053B2 (en) * 2015-10-27 2022-04-19 Teradata Us, Inc. Buffered data-loading in column-partitioned database tables
JP6455466B2 (ja) * 2016-03-02 2019-01-23 京セラドキュメントソリューションズ株式会社 表示操作装置およびプログラム
US11847040B2 (en) 2016-03-16 2023-12-19 Asg Technologies Group, Inc. Systems and methods for detecting data alteration from source to target
US11086751B2 (en) * 2016-03-16 2021-08-10 Asg Technologies Group, Inc. Intelligent metadata management and data lineage tracing
US10007674B2 (en) * 2016-06-13 2018-06-26 Palantir Technologies Inc. Data revision control in large-scale data analytic systems
US10452625B2 (en) * 2016-06-30 2019-10-22 Global Ids, Inc. Data lineage analysis
WO2018061070A1 (ja) * 2016-09-27 2018-04-05 株式会社日立製作所 計算機システム及び分析ソースデータ管理方法
US10915545B2 (en) 2016-09-29 2021-02-09 Microsoft Technology Licensing, Llc Systems and methods for dynamically rendering data lineage
JP7132918B2 (ja) * 2016-11-09 2022-09-07 アビニシオ テクノロジー エルエルシー データ要素間の関係を決定するためのシステム及び方法
WO2018102691A1 (en) 2016-12-01 2018-06-07 Ab Initio Technology Llc Generating, accessing, and displaying lineage metadata
US10379825B2 (en) 2017-05-22 2019-08-13 Ab Initio Technology Llc Automated dependency analyzer for heterogeneously programmed data processing system
US11328000B1 (en) * 2017-07-05 2022-05-10 Liberty Mutual Insurance Company Method, apparatus and computer program product for transforming structured hierarchical data into flattened lineage and attribute tables
US10481880B2 (en) 2017-07-11 2019-11-19 Bank Of America Corporation Code lineage tool
US10474443B2 (en) 2017-07-11 2019-11-12 Bank Of America Corporation Code lineage tool
CN107357904B (zh) * 2017-07-14 2020-12-18 上海瀚银信息技术有限公司 一种领域模型数据管理系统
US10698884B2 (en) 2017-11-06 2020-06-30 Bank Of America Corporation Dynamic lineage validation system
US11057500B2 (en) 2017-11-20 2021-07-06 Asg Technologies Group, Inc. Publication of applications using server-side virtual screen change capture
US10769165B2 (en) * 2017-12-20 2020-09-08 Sap Se Computing data lineage across a network of heterogeneous systems
US10331660B1 (en) * 2017-12-22 2019-06-25 Capital One Services, Llc Generating a data lineage record to facilitate source system and destination system mapping
US10812611B2 (en) 2017-12-29 2020-10-20 Asg Technologies Group, Inc. Platform-independent application publishing to a personalized front-end interface by encapsulating published content into a container
US10877740B2 (en) 2017-12-29 2020-12-29 Asg Technologies Group, Inc. Dynamically deploying a component in an application
US11611633B2 (en) 2017-12-29 2023-03-21 Asg Technologies Group, Inc. Systems and methods for platform-independent application publishing to a front-end interface
US11030248B2 (en) 2018-04-18 2021-06-08 Palantir Technologies Inc. Resource dependency system and graphical user interface
CN108763308A (zh) * 2018-04-24 2018-11-06 北京首都机场动力能源有限公司 一种供电站资料查询管理方法以及系统
EP3850559A4 (en) * 2018-09-20 2021-11-10 Huawei Technologies Co., Ltd. SYSTEMS AND METHODS FOR GRAPH-BASED QUERY ANALYSIS
US10621033B1 (en) 2018-10-10 2020-04-14 Bank Of America Corporation System for generating dataflow lineage information in a data network
US10601712B1 (en) 2018-10-10 2020-03-24 Bank Of America Corporation System for performing a variation control in a data network
US10812357B2 (en) 2018-10-10 2020-10-20 Bank Of America Corporation System for performing a timeless control in a data network
US10803051B2 (en) 2018-10-10 2020-10-13 Bank Of America Corporation System for performing a lineage control in a data network
US10623298B1 (en) 2018-10-10 2020-04-14 Bank Of America Corporation System for performing an integrated data quality control in a data network
US11256701B2 (en) 2019-01-02 2022-02-22 Bank Of America Corporation Interactive lineage mapping system
CN110008231B (zh) * 2019-03-19 2021-04-27 福建省天奕网络科技有限公司 MySQL数据回溯方法、存储介质
US11093483B2 (en) 2019-03-22 2021-08-17 Microsoft Technology Licensing, Llc Multilevel data lineage view
US10481961B1 (en) 2019-04-02 2019-11-19 Capital One Services, Llc API and streaming solution for documenting data lineage
US11194845B2 (en) * 2019-04-19 2021-12-07 Tableau Software, LLC Interactive lineage analyzer for data assets
US11934457B2 (en) * 2019-05-22 2024-03-19 People.ai, Inc. Systems and methods for maintaining confidence scores of entity associations derived from systems of record
US11762634B2 (en) 2019-06-28 2023-09-19 Asg Technologies Group, Inc. Systems and methods for seamlessly integrating multiple products by using a common visual modeler
US11334591B2 (en) * 2019-08-14 2022-05-17 Palantir Technologies Inc. Multi-language object cache
US11003645B1 (en) * 2019-10-04 2021-05-11 Palantir Technologies Inc. Column lineage for resource dependency system and graphical user interface
US11055067B2 (en) 2019-10-18 2021-07-06 Asg Technologies Group, Inc. Unified digital automation platform
US11755760B2 (en) 2019-10-18 2023-09-12 Asg Technologies Group, Inc. Systems and methods for secure policies-based information governance
US11886397B2 (en) 2019-10-18 2024-01-30 Asg Technologies Group, Inc. Multi-faceted trust system
US11941137B2 (en) 2019-10-18 2024-03-26 Asg Technologies Group, Inc. Use of multi-faceted trust scores for decision making, action triggering, and data analysis and interpretation
US11269660B2 (en) 2019-10-18 2022-03-08 Asg Technologies Group, Inc. Methods and systems for integrated development environment editor support with a single code base
US11829421B2 (en) 2019-11-08 2023-11-28 Tableau Software, LLC Dynamic graph generation for interactive data analysis
US11334268B2 (en) 2020-01-10 2022-05-17 International Business Machines Corporation Data lineage and data provenance enhancement
US11182359B2 (en) 2020-01-10 2021-11-23 International Business Machines Corporation Data deduplication in data platforms
US11714826B2 (en) 2020-02-27 2023-08-01 Intuitive Data Analytics, LLC Generation and adaptation of visualizations from one or more data sets stored using a single-branch approach
US11531687B2 (en) * 2020-04-02 2022-12-20 Jpmorgan Chase Bank, N.A. Method and apparatus for application of an N-dimensional hypercube datatype
US11681721B2 (en) * 2020-05-08 2023-06-20 Jpmorgan Chase Bank, N.A. Systems and methods for spark lineage data capture
US11449362B2 (en) 2020-05-20 2022-09-20 Zeotap Gmbh Resource distribution
US11436204B2 (en) 2020-06-04 2022-09-06 Bank Of America Corporation Enterprise data flow lineage from enterprise data testing metadata
CN111767267B (zh) * 2020-06-18 2024-05-10 杭州数梦工场科技有限公司 元数据处理方法、装置、电子设备
US11436134B2 (en) * 2020-07-09 2022-09-06 Jpmorgan Chase Bank, N.A. Method and apparatus for data integration framework
US20220116201A1 (en) * 2020-10-09 2022-04-14 Sap Se Automated development, deployment and integration service for distributed ledger-enabled applications
EP4229534A1 (en) 2020-10-13 2023-08-23 ASG Technologies Group, Inc. DBA ASG Technologies Geolocation-based policy rules
US11520801B2 (en) 2020-11-10 2022-12-06 Bank Of America Corporation System and method for automatically obtaining data lineage in real time
US11429578B2 (en) * 2020-11-19 2022-08-30 International Business Machines Corporation Custom tag definition and translation in a database
CN112434071B (zh) * 2020-12-15 2021-07-20 北京三维天地科技股份有限公司 一种基于数据图谱的元数据血缘关系与影响分析平台
CN113268547B (zh) * 2021-01-03 2022-10-11 复旦大学 面向业务协同流程的多事件业务世系数据融合方法
CN112328608B (zh) * 2021-01-06 2021-04-13 北京云真信科技有限公司 一种基于bitmap的多维数据查询系统
WO2022160335A1 (en) * 2021-02-01 2022-08-04 Paypal, Inc. Graphical user interface to depict data lineage information in levels
CN112966036B (zh) * 2021-03-10 2023-02-21 浪潮云信息技术股份公司 一种基于逻辑模型构建主数据服务的方法
US11681503B2 (en) * 2021-04-27 2023-06-20 International Business Machines Corporation Machine learning visual code and action generation
US11734238B2 (en) 2021-05-07 2023-08-22 Bank Of America Corporation Correcting data errors for data processing fault recovery
US11789967B2 (en) 2021-05-07 2023-10-17 Bank Of America Corporation Recovering from data processing errors by data error detection and correction
US20220404935A1 (en) * 2021-06-17 2022-12-22 Adp, Llc Dual panel mapping modal
US11853304B2 (en) 2021-08-27 2023-12-26 Striveworks Inc. System and method for automated data and workflow lineage gathering
US11714790B2 (en) 2021-09-30 2023-08-01 Microsoft Technology Licensing, Llc Data unification
US11907241B2 (en) * 2022-06-17 2024-02-20 Hewlett Packard Enterprise Development Lp Data recommender using lineage to propagate value indicators

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5625816A (en) 1994-04-05 1997-04-29 Advanced Micro Devices, Inc. Method and system for generating product performance history
US6434558B1 (en) 1998-12-16 2002-08-13 Microsoft Corporation Data lineage data type
US6343295B1 (en) * 1998-12-16 2002-01-29 Microsoft Corporation Data lineage
US6389429B1 (en) 1999-07-30 2002-05-14 Aprimo, Inc. System and method for generating a target database from one or more source databases
US7117219B1 (en) 2000-05-05 2006-10-03 Group 1 Software, Inc. Method and apparatus for creating a lineage of a data field in a data flow system
US7168014B2 (en) 2003-04-01 2007-01-23 Fujitsu Limited Propagating an error through a network
US7493570B2 (en) * 2005-09-12 2009-02-17 International Business Machines Corporation User interface options of a data lineage tool
JP4496153B2 (ja) * 2005-10-21 2010-07-07 オムロン株式会社 データ収集システム、分岐装置、データ収集装置、分岐方法、データ収集方法およびプログラム
US8560498B2 (en) 2005-11-22 2013-10-15 International Business Machines Corporation Propagate delta information from an enterprise information system
US7933890B2 (en) 2006-03-31 2011-04-26 Google Inc. Propagating useful information among related web pages, such as web pages of a website
US20070255741A1 (en) 2006-04-28 2007-11-01 Business Objects, S.A. Apparatus and method for merging metadata within a repository
US8205189B2 (en) 2006-07-13 2012-06-19 Oracle International Corporation Method and system for definition control in a data repository application
US7707183B2 (en) * 2006-07-21 2010-04-27 Netiq Corporation Methods, systems and computer program products for monitoring changes to objects on a computer system using information models and baselines
CN1952936A (zh) * 2006-11-15 2007-04-25 高晓松 一种信息关联系统及方法
CA2593233A1 (en) 2007-07-06 2009-01-06 Cognos Incorporated System and method for federated member-based data integration and reporting
JP5643654B2 (ja) * 2008-02-26 2014-12-17 アビニシオ テクノロジー エルエルシー データ関連性のグラフ表現
JP5883648B2 (ja) * 2008-12-02 2016-03-15 アビニシオ テクノロジー エルエルシー データ要素間の関係性の視覚化
US8165990B2 (en) 2009-06-15 2012-04-24 Microsoft Corporation Conversion of an application database to minimize time in single-user access mode
US20110060718A1 (en) * 2009-09-04 2011-03-10 Song You Method and Apparatus for Organizing Hierarchical Data in a Relational Database
WO2011035039A1 (en) * 2009-09-16 2011-03-24 Ab Initio Technology Llc Mapping dataset elements
US9535965B2 (en) 2010-05-28 2017-01-03 Oracle International Corporation System and method for specifying metadata extension input for extending data warehouse
US20110313969A1 (en) 2010-06-17 2011-12-22 Gowda Timma Ramu Updating historic data and real-time data in reports
US8819010B2 (en) 2010-06-28 2014-08-26 International Business Machines Corporation Efficient representation of data lineage information
US8380493B2 (en) 2010-10-01 2013-02-19 Microsoft Corporation Association of semantic meaning with data elements using data definition tags
CN102446187B (zh) * 2010-10-13 2016-06-15 上海众恒信息产业股份有限公司 业务信息关联方法及关联装置
US8688625B1 (en) 2010-12-31 2014-04-01 United Services Automobile Association (Usaa) Extract, transform, and load application complexity management framework
US20120310875A1 (en) 2011-06-03 2012-12-06 Prashanth Prahlad Method and system of generating a data lineage repository with lineage visibility, snapshot comparison and version control in a cloud-computing platform
US8577938B2 (en) 2011-08-23 2013-11-05 Accenture Global Services Limited Data mapping acceleration
US8930303B2 (en) * 2012-03-30 2015-01-06 International Business Machines Corporation Discovering pivot type relationships between database objects
US9659042B2 (en) 2012-06-12 2017-05-23 Accenture Global Services Limited Data lineage tracking

Also Published As

Publication number Publication date
CN104737166A (zh) 2015-06-24
WO2014062278A1 (en) 2014-04-24
WO2014062277A1 (en) 2014-04-24
EP2909748B1 (en) 2020-07-29
CN104737154B (zh) 2017-12-05
JP2015537294A (ja) 2015-12-24
JP6238993B2 (ja) 2017-11-29
US20140114907A1 (en) 2014-04-24
US9075860B2 (en) 2015-07-07
US20140114905A1 (en) 2014-04-24
US9063998B2 (en) 2015-06-23
CN104737166B (zh) 2018-09-18
CN104737154A (zh) 2015-06-24
EP2909748A1 (en) 2015-08-26
JP2015537293A (ja) 2015-12-24

Similar Documents

Publication Publication Date Title
JP6306599B2 (ja) 関連情報伝播システム
US11562025B2 (en) Resource dependency system and graphical user interface
US11321346B2 (en) Minimized and collapsed resource dependency path
AU2020260374B2 (en) Building reports
US11132359B2 (en) Systems and methods for grouping and enriching data items accessed from one or more databases for presentation in a user interface
US11775898B1 (en) Resource grouping for resource dependency system and graphical user interface
US11238961B2 (en) Automatic knowledge-based feature extraction from electronic medical records
CA2701046C (en) Analysis of a system for matching data records
US11636162B2 (en) Multi-database document search system architecture
US20180349401A1 (en) Validation of search query in data analysis system
US11495337B1 (en) Computing system for full textual search of a patient record

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160801

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160801

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180131

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180213

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180308

R150 Certificate of patent or registration of utility model

Ref document number: 6306599

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250