JP7051108B2 - データソースシステムに不可知のファクトカテゴリパーティション化情報リポジトリ及び情報リポジトリを用いてデータを挿入及び検索するための方法 - Google Patents
データソースシステムに不可知のファクトカテゴリパーティション化情報リポジトリ及び情報リポジトリを用いてデータを挿入及び検索するための方法 Download PDFInfo
- Publication number
- JP7051108B2 JP7051108B2 JP2018544361A JP2018544361A JP7051108B2 JP 7051108 B2 JP7051108 B2 JP 7051108B2 JP 2018544361 A JP2018544361 A JP 2018544361A JP 2018544361 A JP2018544361 A JP 2018544361A JP 7051108 B2 JP7051108 B2 JP 7051108B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- fact
- partition
- storing
- dimensions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 67
- 238000000638 solvent extraction Methods 0.000 title claims description 20
- 238000005192 partition Methods 0.000 claims description 193
- 238000013506 data mapping Methods 0.000 claims description 17
- 238000003860 storage Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 23
- 238000011161 development Methods 0.000 description 16
- 238000013507 mapping Methods 0.000 description 13
- 238000004458 analytical method Methods 0.000 description 12
- 238000010606 normalization Methods 0.000 description 10
- 230000008520 organization Effects 0.000 description 9
- 238000013499 data model Methods 0.000 description 7
- 238000013459 approach Methods 0.000 description 5
- 230000003068 static effect Effects 0.000 description 5
- 239000008186 active pharmaceutical agent Substances 0.000 description 4
- 230000008901 benefit Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000007667 floating Methods 0.000 description 4
- 238000005065 mining Methods 0.000 description 4
- 238000012384 transportation and delivery Methods 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 241000196324 Embryophyta Species 0.000 description 1
- 244000141359 Malus pumila Species 0.000 description 1
- 235000021016 apples Nutrition 0.000 description 1
- 230000035606 childbirth Effects 0.000 description 1
- 230000002301 combined effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013479 data entry Methods 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 229910052742 iron Inorganic materials 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000013439 planning Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24553—Query execution of query operations
- G06F16/24554—Unary operations; Data partitioning operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Strategic Management (AREA)
- General Engineering & Computer Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Game Theory and Decision Science (AREA)
- Tourism & Hospitality (AREA)
- Computational Linguistics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Small-Scale Networks (AREA)
Description
プラグイン19は、種々のソースデータシステム21からデータをフェッチするように構成されたデータレシーバモジュール18を含んでよい。例えば、プラグイン19は、SAPプラントメンテナンス(SAP PM)ソースERPモジュールへのプラグインであり得る。
プラグイン19は、受信したデータを固有のデータソースシステム21に従って種々のファクトパーティション16(及びいくつかの実施形態では共有ディメンション9)へマップするように構成された、データマッピングモジュール24をさらに含んでよい。
上記で言及したように、リポジトリ8は、固有のパーティション化データカテゴリによってパーティション化されるファクトパーティション16を使用する。
共有ディメンション9は、ファクトパーティション16に関するコンテキストを提供するためにリポジトリ8によって使用される。
ここで、一実施形態では、種々のデータが、一意のタイムスタンプを用いてファクトパーティション16において関係付けられる。
ここで、ビジネス固有のカスタマイゼーションのために追加のサブジェクト固有のテーブルが追加される従来技術の正規化されたデータベース手法とは対照的に、該当する共有ディメンション9のデータベーステーブルにカラム/属性を追加することにより追加のコンテキスト情報がリポジトリ8内に格納されてよい。
ここで図4に移ると、製品購入イベントトランザクションを格納するためのリポジトリ8の例示的な用途が示されている。
ここで図5に移ると、配達トラック移動イベントを格納するためのリポジトリ8のまたさらに例示的な用途が示されている。
図6に移ると、リポジトリ8の例示的なエンティティの関係性のダイヤグラムが示されており、表されるエンティティの関係性に関して、1は、単一のレコードを表し、0..1は、ゼロ又は1つのレコードを表し、1..1は、1対1の関係性を表し、1..*は、一対多の関係性を表す。
特定の実施形態に係るデータソースシステムに不可知のデータリポジトリの特徴及び機能をさらに例示するための例示的な技術的シナリオがここで提供される。
最初に、ビジネスユーザ「X」は、ポイント・オブ・セールデータをビジネス分析フレキシブルリポジトリに包含することを望む。技術的には、ポイント・オブ・セールソリューションは、価格、製品、数量、及びいくつかの場合には報酬に基づく顧客の顧客情報への固有のトランザクション参照を有するOracleベースのトランザクションソリューションである。SQLデータベーステーブルは、ディメンション9を表すように設計及び構築される。
製品は、製品ディメンションテーブルに合わせた明示的に設計されたXML構造からのProduct load.Netプログラムを介してロードされる。製品マスターソースは、スプレッドシートにおけるクライアントに関する製品の完全なリストを提供し、これは、開始される製品XML構造及び製品ディメンションロードへパースされる。
ソースデータベースは、オペレーショナルデータベースにおける300を超えるテーブルを有する第3正規形に正規化されたデータベースである。データベーストリガは、カスタムビルトの格納された手順を開始するべく一次トランザクションテーブル上でOracleデータベースへ構築される。カスタムの格納された手順19は、以下のようにユーザの文書化された要件に基づいて複数のXMLレコードを作成する:
a.製品(製品ディメンション3)、販売トランザクション顧客(エンティティ・ディメンション5)、トランザクションの日時(タイムスタンプ)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「販売」イベント・パーティション・ファクト、
b.製品(製品ディメンション3)、販売トランザクションにおける製品の数量(数量ファクト11)、トランザクションの日時(タイムスタンプ)、販売トランザクション顧客(製品ディメンション3)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「販売」数量パーティションファクト、
c.製品(製品ディメンション3)、販売トランザクションにおける製品(すなわち、ラインアイテム)を表すトランザクションのマネー値(マネーファクト12)、トランザクションの日時(タイムスタンプ)、販売トランザクション顧客(エンティティ・ディメンション5)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「販売」マネーパーティションファクト。
ビジネスユーザ「X」は、次いで、フレキシブルリポジトリに「製品のコスト」を作製するべく会計ソースシステムからのデータを追加することに決定する。レコードの金融システムは、レコードのシステムからの金融トランザクション及び他の詳細の抽出のためのWebサービスAPIインターフェースを有するクラウドベースのMYOBソリューションである。
a.製品(製品ディメンション3)、購入トランザクション供給者(エンティティ・ディメンション5)、トランザクションの日時、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「購入」イベント・パーティション・ファクト-注:このXML構造は、上記の開発努力1で開発された「販売」イベントパーティションと同じであり、
b.製品(製品ディメンション3)、購入トランザクションにおける製品の数量(数量ファクト11)、トランザクションの日時(タイムスタンプ)、購入トランザクション供給者(ディメンション5)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「購入」数量パーティションファクト-注:このXML構造は、上記の開発努力1で開発された「販売」数量パーティションと同じであり、
c.製品(製品ディメンション3)、製品を表す購入トランザクションのマネー値(マネーファクト12)、及び購入トランザクション供給者(エンティティ・ディメンション5)、トランザクションの日時(タイムスタンプ)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「購入」マネーパーティションファクト-注:このXML構造は、上記の開発努力1で開発された「販売」マネーパーティションと同じである。
ビジネスユーザ「X」は、次いで、フレキシブルリポジトリで入手可能な職員の詳細を作製するべく人的資源(「HR」)ソースシステムからのデータを追加することに決定する。レコードのHRシステムは、Windows(登録商標)Formsアプリケーションフロントエンドの背後にあるSQLサーバデータベース技術を用いるオンプレミスのインストールされたソリューションである。ソースシステムにおける最後に更新されたタイムスタンプに基づいてシステムからの各人に関する出力レコードを作成するべくカスタムHRソースシステムの格納された手順が構築される。プログラムは、人的資源データを抽出し、これを既存の組織エンティティ・ディメンションXML構造へマップするSQLのスケジュールされたタスクとして毎時に実行する。所与の名前、姓、及び生年月日上の.Netマッチングプログラムが、重複が不注意で作成されないことを保証するべく既存のEntity dimension load.Netプログラムに追加される。修正されたエンティティXML構造(最初のフレームワーク定義に従業員IDが追加された)における抽出されたデータがXML構造へマップされ、「挿入」SQL命令上の重複をチェックした後で、追加された更新チェックに従ってレコードが「作成」、「更新」又は「削除」される(論理レコードは無効化のみ)。
a.該当する「販売」パーティションファクトが、1つ1つのファクトタイプパーティションに関するエンティティへの第2の接続を可能にするべく「販売員」識別子をもつように強化される。
ビジネスユーザ「X」は、次いで、フレキシブルリポジトリに分析のために利用可能な「職員の生産性」を作製するべく人的資源ソースシステムからの出勤データを追加することに決定する。カスタムHRソースシステムの格納された手順が、パラメータが提供されるときに日々の各従業員からの各タイムシートエントリに関する出力レコードを作成するべくタイムシートインジケータパラメータをもつように強化される。プログラムは、人的資源タイムシートデータを抽出し、これを指定されたファイル位置における各シフトの開始及びシフトの終了に関する既存の組織エンティティ・ディメンションXML構造へマップするSQLのスケジュールされたタスクとして日々実行する。ファイルリスナは、この例では出力ファイルの到着によりトリガされる(他で見つかる何らかのレコードが存在する場合は日曜日に何もトリガされない)、これは次に、以下のように「タイムシート」情報を複数のレコードへマップする「タイムシートマッピング」.Netプログラムを開始する:
a.従業員エンティティ(エンティティ・ディメンション5)、トランザクションの日時(タイムスタンプ)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「ShiftStart」イベント・パーティション・ファクト-注:同じく、このXML構造は、上記の開発努力1で開発されたイベントパーティションと同じであり、
b.従業員エンティティ(エンティティ・ディメンション5)、トランザクションの日時(タイムスタンプ)、及び小売店を表す位置レコード(位置ディメンション23)へのフルキー値ペア参照を有するXMLフォーマットの「ShiftEnd」イベント・パーティション・ファクト-注:同じく、このXML構造は、上記の開発努力1で開発されたイベントパーティションと同じである。
実施形態:
本明細書の全体を通して、「1つの実施形態」又は「一実施形態」への言及は、実施形態に関連して説明される特定の特徴、構造体、又は特色が本発明の少なくとも1つの実施形態に含まれることを意味する。したがって、本明細書の全体にわたる種々の場所での「一実施形態では「1つの実施形態では」又は「一実施形態では」という文言の出現は、必ずしも同じ実施形態に言及するものではないが、同じ実施形態に言及する場合もある。さらに、特定の特徴、構造体、又は特色は、本開示から当業者には分かるように任意の適切な方法で1つ以上の実施形態において組み合わされてもよい。
本明細書で用いられる場合の、他に規定されない限り、共通の対象を説明するための序数詞「第1の」、「第2の」、「第3の」などの使用は、同様の対象の異なる事例に言及することを単に表しており、そのように説明される対象が、一時的、空間的、格付け、又は任意の他の様態のいずれかの所与の順序でなければならないことを表すことは意図されない。
本明細書で提供される説明では、多くの具体的な詳細が記載される。しかしながら、本発明の実施形態はこれらの具体的な詳細なしに実施されてもよいことが理解される。他の場合には、周知の方法、構造体、及び技術は、この説明の理解を妨げないようにするために詳細に示されていない。
図面に例示される本発明の好ましい実施形態を説明するにあたり、明瞭にするために具体的な用語が使用されることになる。しかしながら、本発明は、そのように選択された特定の用語に限定されることを意図されず、それぞれの具体的な用語は、同様の技術的目的を達成するために同様の様態で動作するすべての技術的均等物を含むことが理解される。「前方」、「後方」、「半径方向に」、「周方向に」、「上方に」、「下方に」などの用語は、基準点を提供するのに便利な言葉として用いられ、限定する用語として解釈されるべきではない。
以下の請求項では、及び本発明の上記の説明では、表現言語又は必要な含意に起因して文脈が他を必要とする場合を除いて、「備え」という用語、若しくは「備えて」又は「備える」などの変形は、包括的な意味で、すなわち提示される特徴の存在を明記するが本発明の種々の実施形態でのさらなる特徴の存在又は追加を除外しないように用いられる。
したがって、本発明の好ましい実施形態と考えられるものが説明されているが、本発明の精神から逸脱することなく他の及びさらなる修正がなされてもよく、本発明の範囲内に入るすべてのこうした変化及び修正を特許請求することが意図されることを当業者は認識するであろう。例えば、上記で与えられるどのような方式も、用いられ得る手順の単なる代表である。機能は、ブロック図から追加又は削除されてもよく、動作は、機能ブロック間で置き換えられてもよい。ステップは、本発明の範囲内で説明される方法に追加又は削除されてもよい。
Claims (20)
- ファクトパーティション化データ情報リポジトリシステムであって、
データリポジトリであって、
複数のファクトパーティションと、
前記ファクトパーティションに関連して格納された複数のディメンションであって、前記複数のディメンションは、前記ファクトパーティションのうちの1つ以上によって共有される、複数のディメンションと、
を備える、データリポジトリと、
複数のデータソースシステム固有のデータマッピングと、
前記複数のデータソースシステムからデータを受信するためのデータレシーバと、
前記複数のデータソースシステム固有のデータマッピングを用いてデータをデータカテゴリ又はタイプに従って複数のファクトパーティションへパーティション化するためのデータマッパーと、
を備える、システム。 - 前記複数のファクトパーティションが、イベント発生を格納するためのイベント・ファクトパーティションを含む、請求項1に記載のシステム。
- 前記複数のファクトパーティションが、数量を格納するための数量ファクトパーティションを含む、請求項1又は2に記載のシステム。
- 前記複数のファクトパーティションが、マネー量を格納するためのマネー・ファクトパーティションを含む、請求項1乃至3のいずれか一項に記載のシステム。
- 前記複数のファクトパーティションが、GIS位置を格納するためのGISファクトパーティションを含む、請求項1乃至4のいずれか一項に記載のシステム。
- 前記複数のファクトパーティションが、パーセンタイル値を格納するためのパーセンタイル・ファクトパーティションを含む、請求項1乃至5のいずれか一項に記載のシステム。
- 前記複数のファクトパーティションが、参照値を格納するための参照ファクトパーティションを含む、請求項1乃至6のいずれか一項に記載のシステム。
- 前記複数のファクトパーティションが、データウェアハウス内か又は異なる位置のいずれかに格納された構造化されていないデータへのリンクを格納するための構造化されていないファクトパーティションを含む、請求項1乃至7のいずれか一項に記載のシステム。
- 前記複数のファクトパーティションの少なくとも1つのファクトパーティション・データタイプが、少なくとも2つのファクトパーティション・データタイプであり、前記少なくとも2つのファクトパーティション・データタイプを格納することが、前記少なくとも2つのファクトパーティション・データタイプを、それぞれタイムスタンプ値を含む状態で前記ファクトパーティションのうちの少なくとも2つに格納することを含み、前記データをリポジトリから検索することが、ソーストランザクションを再構築するためにタイムスタンプ値を用いることにより前記少なくとも2つのファクトパーティション・データタイプを結合することを含む、請求項1乃至8のいずれか一項に記載のシステム。
- 前記複数のディメンションが、製品に関係するデータを格納することができる製品ディメンションを含む、請求項1乃至9のいずれか一項に記載のシステム。
- 前記複数のディメンションが、資産に関係するデータを格納することができる資産ディメンションを含む、請求項1乃至10のいずれか一項に記載のシステム。
- 前記複数のディメンションが、位置に関係するデータを格納することができる位置ディメンションを含む、請求項1乃至11のいずれか一項に記載のシステム。
- 前記位置に関係するデータが、物理位置か又は論理位置のいずれかに関係するデータのうちの少なくとも1つを含む、請求項12に記載のシステム。
- 前記複数のディメンションが、エンティティに関係するデータを格納することができるエンティティ・ディメンションを含む、請求項1乃至13のいずれか一項に記載のシステム。
- ファクトカテゴリパーティション化データ情報リポジトリシステムであって、
データリポジトリであって、
複数のファクトパーティションであって、
イベントを格納するためのイベント・ファクトパーティションと、
数量を格納するための数量ファクトパーティションと、
マネー量を格納するためのマネー・ファクトパーティションと、
GIS位置を格納するためのGISファクトパーティションと、
パーセンタイル値を格納するためのパーセンタイル・ファクトパーティションと、
参照値を格納するための参照ファクトパーティションと、
を含む、複数のファクトパーティションと、
前記ファクトパーティションに関連して格納された複数のディメンションであって、前記複数のディメンションは、前記ファクトパーティションのそれぞれによって共有され、前記複数のディメンションは、
製品に関係するデータを格納することができる製品ディメンションと、
資産に関係するデータを格納することができる資産ディメンションと、
位置に関係するデータを格納することができる位置ディメンションと、
エンティティに関係するデータを格納することができるエンティティ・ディメンションと、
を含む、複数のディメンションと、
複数のデータソースシステム固有のデータマッピングと、
複数のデータソースシステムからデータを受信するためのデータレシーバと、
複数のデータソースシステム固有のデータマッピングを用いてデータをデータカテゴリ又はタイプに従って複数のファクトパーティションへパーティション化するためのデータマッパーと、
を備える、データリポジトリ
を備える、システム。 - 前記ファクトパーティションが、構造化されていないデータ要素位置へのリンクを格納するための構造化されていないファクトパーティションをさらに含む、請求項15に記載のシステム。
- データをファクトパーティション化データ情報リポジトリシステム内に格納するための方法であって、前記システムが、コンピュータソフトウェアによって指令され、前記方法が、前記システムによって自動的に行われ、
前記システムが、
ファクトパーティション・データカテゴリによってパーティション化される、複数のファクトパーティションと、
前記ファクトパーティションに関連して格納された複数のディメンションであって、前記複数のディメンションは、前記ファクトパーティションのそれぞれによって共有される、複数のディメンションと、
を備えるデータリポジトリを備え、
前記方法が、
データを受信することと、
前記データをデータカテゴリ又はタイプに従って少なくとも1つのファクトパーティション・データカテゴリへパーティション化することと、
前記少なくとも1つのファクトパーティション・データカテゴリを前記複数のファクトパーティションのうちの少なくとも1つに格納することと、
ディメンションデータを生成することと、
前記ディメンションデータを前記複数のファクトパーティションのうちの少なくとも1つに関連して前記複数のディメンションのうちの少なくとも1つに格納することと、
を含む、方法。 - 前記データが、少なくとも2つのデータソースから受信され、前記パーティション化することが、前記データをデータカテゴリ又はタイプに従ってデータソースによってパーティション化することを含む、請求項17に記載の方法。
- 前記複数のファクトパーティションが、
イベントを格納するためのイベント・ファクトパーティションと、
数量を格納するための数量ファクトパーティションと、
マネー量を格納するためのマネー・ファクトパーティションと、
GIS位置を格納するためのGISファクトパーティションと、
パーセンタイル値を格納するためのパーセンタイル・ファクトパーティションと、
参照値を格納するための参照ファクトパーティションと、
構造化されていないデータ要素位置へのリンクを格納するための構造化されていないファクトパーティションと、
のうちの少なくとも2つを含む、請求項17に記載の方法。 - 前記複数のディメンションが、
製品に関係するデータを格納することができる製品ディメンションと、
資産に関係するデータを格納することができる資産ディメンションと、
位置に関係するデータを格納することができる位置ディメンションと、
エンティティに関係するデータを格納することができるエンティティ・ディメンションと、
のうちの少なくとも1つを含む、請求項17に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
AU2016900704A AU2016900704A0 (en) | 2016-02-26 | A subject agnostic fact data type partitioned data warehouse structure and methods for the insertion and retrieval of data using the data warehouse structure | |
AU2016900704 | 2016-02-26 | ||
PCT/AU2017/050166 WO2017143405A1 (en) | 2016-02-26 | 2017-02-24 | A data source system agnostic fact category partitioned information repository and methods for the insertion and retrieval of data using the information repository |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019506685A JP2019506685A (ja) | 2019-03-07 |
JP7051108B2 true JP7051108B2 (ja) | 2022-04-11 |
Family
ID=59684681
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018544361A Active JP7051108B2 (ja) | 2016-02-26 | 2017-02-24 | データソースシステムに不可知のファクトカテゴリパーティション化情報リポジトリ及び情報リポジトリを用いてデータを挿入及び検索するための方法 |
Country Status (8)
Country | Link |
---|---|
US (1) | US11372880B2 (ja) |
EP (1) | EP3403200A4 (ja) |
JP (1) | JP7051108B2 (ja) |
CN (1) | CN108701154B (ja) |
AU (1) | AU2017224831B2 (ja) |
HK (1) | HK1255050A1 (ja) |
SG (1) | SG11201806825RA (ja) |
WO (1) | WO2017143405A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11163742B2 (en) * | 2019-01-10 | 2021-11-02 | Microsoft Technology Licensing, Llc | System and method for generating in-memory tabular model databases |
CN110674130A (zh) * | 2019-08-30 | 2020-01-10 | 深圳鸿智云创科技有限公司 | 数据传输方法 |
CN111241121A (zh) * | 2019-12-30 | 2020-06-05 | 航天信息(山东)科技有限公司 | 一种基于elasticsearch父子关系的海量发票数据查询方法及系统 |
CN111680506A (zh) * | 2020-04-28 | 2020-09-18 | 北京三快在线科技有限公司 | 数据库表的外键映射方法、装置、电子设备和存储介质 |
CN112256745A (zh) * | 2020-10-27 | 2021-01-22 | 武汉市钱鲸科技有限公司 | 一种零售数据分析方法 |
CN112328551A (zh) * | 2020-11-09 | 2021-02-05 | 医渡云(北京)技术有限公司 | 医疗数据解析方法、装置、介质及电子设备 |
CN113297333A (zh) * | 2021-03-17 | 2021-08-24 | 无锡极数宝大数据科技有限公司 | 数据处理方法、装置、服务器及存储介质 |
CN113350884B (zh) * | 2021-06-04 | 2022-04-15 | 浙江斯普智能科技股份有限公司 | 二次精密过滤器 |
US12056143B2 (en) | 2022-03-31 | 2024-08-06 | Insight Direct Usa, Inc. | Data processing with integrated metadata generation and storage |
US12056159B2 (en) | 2022-03-31 | 2024-08-06 | Insight Direct Usa, Inc. | Dimension and fact table creation using templates |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090271345A1 (en) | 2008-04-25 | 2009-10-29 | Lawrence Scott Rich | Method and Apparatus for Declarative Data Warehouse Definition for Object-Relational Mapped Objects |
US20130117217A1 (en) | 2011-11-09 | 2013-05-09 | International Business Machines Corporation | Star and snowflake schemas in extract, transform, load processes |
US20130151491A1 (en) | 2011-12-09 | 2013-06-13 | Telduraogevin Sp/f | Systems and methods for improving database performance |
WO2014186058A1 (en) | 2013-05-17 | 2014-11-20 | Oracle International Corporation | Use of projector and selector component types for etl map design |
WO2016022019A1 (en) | 2014-08-05 | 2016-02-11 | Mimos Berhad | Method for data input into a database |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001016850A2 (en) | 1999-08-31 | 2001-03-08 | Accenture Llp | A system, method and article of manufacture for organizing and managing transaction-related tax information |
US20020099563A1 (en) | 2001-01-19 | 2002-07-25 | Michael Adendorff | Data warehouse system |
CA2355959A1 (en) * | 2001-06-27 | 2002-12-27 | Mapfusion Corp. | Spatial business intelligence system |
US20050033726A1 (en) * | 2003-05-19 | 2005-02-10 | Ju Wu | Apparatus and method for accessing diverse native data sources through a metadata interface |
US7809678B2 (en) * | 2004-07-09 | 2010-10-05 | Microsoft Corporation | Fact dimensions in multidimensional databases |
US7720803B2 (en) | 2006-03-28 | 2010-05-18 | Sap Ag | Mapping of a transactional data model to a reporting data model |
US8924269B2 (en) | 2006-05-13 | 2014-12-30 | Sap Ag | Consistent set of interfaces derived from a business object model |
CA2551199A1 (en) | 2006-06-23 | 2007-12-23 | Cognos Incorporated | System and method of member unique names |
EP2041676A4 (en) * | 2006-06-26 | 2012-05-16 | Nielsen Co Us Llc | METHOD AND DEVICES FOR IMPROVING THE DATA WAREHOUSE EFFICIENCY |
US8296336B2 (en) * | 2008-05-02 | 2012-10-23 | Oracle International Corp. | Techniques for efficient dataloads into partitioned tables using swap tables |
US7970728B2 (en) | 2008-10-23 | 2011-06-28 | International Business Machines Corporation | Dynamically building and populating data marts with data stored in repositories |
US8904381B2 (en) * | 2009-01-23 | 2014-12-02 | Hewlett-Packard Development Company, L.P. | User defined data partitioning (UDP)—grouping of data based on computation model |
US20110295795A1 (en) * | 2010-05-28 | 2011-12-01 | Oracle International Corporation | System and method for enabling extract transform and load processes in a business intelligence server |
US9081875B2 (en) * | 2011-12-30 | 2015-07-14 | General Electric Company | Systems and methods for organizing clinical data using models and frames |
US9026562B2 (en) * | 2012-10-05 | 2015-05-05 | Hazeltree Fund Services, Inc. | Methods and systems for agnostic data storage |
US20140279658A1 (en) * | 2013-03-12 | 2014-09-18 | United Parcel Service Of America, Inc. | Systems and methods of suggesting attended delivery/pickup locations |
US20140278834A1 (en) * | 2013-03-14 | 2014-09-18 | Armchair Sports Productions Inc. | Voting on actions for an event |
WO2014144889A2 (en) * | 2013-03-15 | 2014-09-18 | Amazon Technologies, Inc. | Scalable analysis platform for semi-structured data |
US9519695B2 (en) * | 2013-04-16 | 2016-12-13 | Cognizant Technology Solutions India Pvt. Ltd. | System and method for automating data warehousing processes |
US9244978B2 (en) * | 2014-06-11 | 2016-01-26 | Oracle International Corporation | Custom partitioning of a data stream |
US10877995B2 (en) * | 2014-08-14 | 2020-12-29 | Intellicus Technologies Pvt. Ltd. | Building a distributed dwarf cube using mapreduce technique |
CN104462430B (zh) * | 2014-12-12 | 2017-12-22 | 北京国双科技有限公司 | 关系型数据库的数据处理方法及装置 |
US9965514B2 (en) * | 2014-12-19 | 2018-05-08 | Software Ag Usa, Inc. | Techniques for real-time generation of temporal comparative and superlative analytics in natural language for real-time dynamic data analytics |
US10360231B2 (en) * | 2015-07-06 | 2019-07-23 | Oracle International Corporation | Dynamically switching between data sources |
US20170017683A1 (en) * | 2015-07-13 | 2017-01-19 | 28msec | Systems And Methods For Storing And Interacting With Data From Heterogeneous Data Sources |
US10354188B2 (en) * | 2016-08-02 | 2019-07-16 | Microsoft Technology Licensing, Llc | Extracting facts from unstructured information |
-
2017
- 2017-02-24 AU AU2017224831A patent/AU2017224831B2/en active Active
- 2017-02-24 EP EP17755658.6A patent/EP3403200A4/en not_active Ceased
- 2017-02-24 US US16/078,603 patent/US11372880B2/en active Active
- 2017-02-24 CN CN201780013415.4A patent/CN108701154B/zh active Active
- 2017-02-24 WO PCT/AU2017/050166 patent/WO2017143405A1/en active Application Filing
- 2017-02-24 SG SG11201806825RA patent/SG11201806825RA/en unknown
- 2017-02-24 JP JP2018544361A patent/JP7051108B2/ja active Active
-
2018
- 2018-11-07 HK HK18114174.9A patent/HK1255050A1/zh unknown
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090271345A1 (en) | 2008-04-25 | 2009-10-29 | Lawrence Scott Rich | Method and Apparatus for Declarative Data Warehouse Definition for Object-Relational Mapped Objects |
US20130117217A1 (en) | 2011-11-09 | 2013-05-09 | International Business Machines Corporation | Star and snowflake schemas in extract, transform, load processes |
US20130151491A1 (en) | 2011-12-09 | 2013-06-13 | Telduraogevin Sp/f | Systems and methods for improving database performance |
WO2014186058A1 (en) | 2013-05-17 | 2014-11-20 | Oracle International Corporation | Use of projector and selector component types for etl map design |
WO2016022019A1 (en) | 2014-08-05 | 2016-02-11 | Mimos Berhad | Method for data input into a database |
Also Published As
Publication number | Publication date |
---|---|
HK1255050A1 (zh) | 2019-08-02 |
CN108701154A (zh) | 2018-10-23 |
US11372880B2 (en) | 2022-06-28 |
SG11201806825RA (en) | 2018-09-27 |
AU2017224831B2 (en) | 2023-01-05 |
WO2017143405A1 (en) | 2017-08-31 |
CN108701154B (zh) | 2022-05-03 |
EP3403200A1 (en) | 2018-11-21 |
EP3403200A4 (en) | 2019-12-25 |
JP2019506685A (ja) | 2019-03-07 |
US20190050464A1 (en) | 2019-02-14 |
AU2017224831A1 (en) | 2018-08-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7051108B2 (ja) | データソースシステムに不可知のファクトカテゴリパーティション化情報リポジトリ及び情報リポジトリを用いてデータを挿入及び検索するための方法 | |
US8041760B2 (en) | Service oriented architecture for a loading function in a data integration platform | |
US7814470B2 (en) | Multiple service bindings for a real time data integration service | |
US7814142B2 (en) | User interface service for a services oriented architecture in a data integration platform | |
US8060553B2 (en) | Service oriented architecture for a transformation function in a data integration platform | |
US20050232046A1 (en) | Location-based real time data integration services | |
US20050228808A1 (en) | Real time data integration services for health care information data integration | |
US20060069717A1 (en) | Security service for a services oriented architecture in a data integration platform | |
US20050262189A1 (en) | Server-side application programming interface for a real time data integration service | |
US20050234969A1 (en) | Services oriented architecture for handling metadata in a data integration platform | |
US20050262190A1 (en) | Client side interface for real time data integration jobs | |
US20050240354A1 (en) | Service oriented architecture for an extract function in a data integration platform | |
US20050235274A1 (en) | Real time data integration for inventory management | |
US20050240592A1 (en) | Real time data integration for supply chain management | |
US20050222931A1 (en) | Real time data integration services for financial information data integration | |
US20050223109A1 (en) | Data integration through a services oriented architecture | |
US20050262193A1 (en) | Logging service for a services oriented architecture in a data integration platform | |
US20060010195A1 (en) | Service oriented architecture for a message broker in a data integration platform | |
WO2006026673A2 (en) | Architecture for enterprise data integration systems | |
US11886395B2 (en) | Processes and systems for onboarding data for a digital duplicate | |
JP2008511928A (ja) | メタデータの管理 | |
US20160259831A1 (en) | Methodology supported business intelligence (BI) software and system | |
US20230385248A1 (en) | System, Method, and Computer Program Products for Modeling Complex Hierarchical Metadata with Multi-Generational Terms | |
Marques | PRESENTING BUSINESS INSIGHTS ON ADVANCED PRICING AGREEMENTS USING A BUSINESS INTELLIGENCE FRAMEWORK | |
Dombrovskaya et al. | Design Matters |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200124 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210316 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210614 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210816 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210915 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220222 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220323 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7051108 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |