JP2016525734A - Etlマップ設計のためのプロジェクタおよびセレクタコンポーネントタイプの使用 - Google Patents
Etlマップ設計のためのプロジェクタおよびセレクタコンポーネントタイプの使用 Download PDFInfo
- Publication number
- JP2016525734A JP2016525734A JP2016513953A JP2016513953A JP2016525734A JP 2016525734 A JP2016525734 A JP 2016525734A JP 2016513953 A JP2016513953 A JP 2016513953A JP 2016513953 A JP2016513953 A JP 2016513953A JP 2016525734 A JP2016525734 A JP 2016525734A
- Authority
- JP
- Japan
- Prior art keywords
- components
- data
- logical design
- attributes
- code
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/211—Schema design and management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Stored Programmes (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
ペースが一層速くなっている今日のビジネス環境において、組織はより特殊化されたソフトウェアアプリケーションを使用する必要がある。さらに、組織は、異種混合のハードウェアプラットフォームおよびシステム上でこれらのアプリケーションの共存を保証する必要があるとともに、アプリケーションとシステムとの間でデータを共有する能力を保証する必要がある。
この開示の以下の部分は、少なくとも主題の基本的な理解を提供する目的のために、この開示において発見される1つ以上のイノベーション、実施形態および/または例の簡素化された概要を提供する。この概要は、如何なる特定の実施形態または例の広範囲な概要も提供することを試みてはいない。さらに、この概要は、実施形態または例の主な/決定的な要素を識別するようには意図されておらず、または、この開示の主題の範囲を定めるようには意図されていない。したがって、この概要の1つの目的は、この開示において発見されるいくつかのイノベーション、実施形態および/または例を簡素化された形で、後述されるさらなる詳細な説明の前置きとして提供することであり得る。
イントロダクション
さまざまな実施形態において、ユーザはデータ統合システムによって、プラットホームおよび技術に依存しない論理設計を作成し得る。ユーザは、ユーザがデータをソースとターゲットとの間でどのように流したいかをハイレベルで規定する論理設計を作成し得る。ユーザのインフラストラクチャを考慮して、ツールが論理設計を分析し、物理的設計を作成し得る。論理設計は、設計における各ソースおよびターゲットならびにジョインまたはフィルタのようなオペレーションおよびアクセスポイントに対応する複数のコンポーネントを含み得る。物理的設計に転送された際の各コンポーネントは、データに対してオペレーションを行なうようコードを生成する。存在する技術(たとえばSQLサーバ、オラクル、Hadoopなど)およびに使用される言語(SQL、pigなど)に依存して、各コンポーネントによって生成されるコードは異なり得る。
図2は、本発明のある実施形態に従ったデータ統合システム200の簡略ブロック図である。図2は、この開示において示される1つ以上の発明のさまざまな実施形態または実現例を組み込み得るデータ統合システム200の簡略図である。図2は、本願明細書において開示される発明の実施形態または実現例を単に例示しているだけであり、請求の範囲に記載されるような任意の発明の範囲を限定するべきでない。当業者は、この開示および本願明細書において示される教示を通じて、図において示される実施形態または実現例に対する他の変形例、修正例および/または代替例を認識し得る。
図3は、本発明の実施形態に従ったデータ統合システム200を実現するために使用され得るハードウェア/ソフトウェアスタックの簡略ブロック図である。図3は、本願明細書において開示される発明の実施形態または実現例を単に例示しているだけであり、請求の範囲に記載されるような任意の発明の範囲を限定するべきでない。当業者は、この開示および本願明細書において示される教示を通じて、図において示される実施形態または実現例に対する他の変形例、修正例および/または代替例を認識し得る。この実施形態に従ったデータ統合システム200において発見されるコンポーネントの一例は、カリフォルニア州レッドウッドショアズのオラクル社によって提供される製品のオラクルフュージョンミドルウェア(ORACLE FUSION Middleware)ファミリーのメンバーであるオラクルデータインテグレータ(ORACLE DATA INTEGRATOR)を含んでもよい。オラクルデータインテグレータは、セットベースのデータ統合タスクを実行するために1つ以上のデータベースを使用するJavaベースのアプリケーションである。さらにオラクルデータインテグレータは、データを抽出し、変換されたデータをウェブサービスおよびメッセージを通じて提供し、サービス指向のアーキテクチャにおいてイベントに応答および作成する統合プロセスを作成し得る。オラクルデータインテグレータは、従来のETL[抽出−変換−ロード(extract-transform-load)]アーキテクチャではなく、ELT[抽出−ロードおよび変換(extract-Load and Transform)]アーキテクチャに基づく。オラクルデータインテグレータのためのユーザマニュアルのコピーが、この開示に添付されており、本願明細書においてすべての目的のために参照により援用される。
上で論じたように、シナリオは、ソースコンポーネント(マッピング、パッケージ、プロシージャ、変数)をプロダクションに配置するよう設計される。このコンポーネントについて、シナリオがコード(SQL、シェルなど)の発生から得られる。シナリオは、エクスポートされ、その後、異なるプロダクション環境へインポートされ得る。
上で論じたように、パッケージにおいて異なるステップ(マッピングおよびプロシージャなど)の実行をシーケンス処理するとともに、これらのステップの各々について既存のコードを含んでいるプロダクションシナリオを作り出すことによって、データ統合システム200においてデータ統合フローの自動化が達成され得る。パッケージは、実行ダイヤグラムへ組織されるステップのシーケンスから構成される。パッケージは、プロダクションのためのシナリオを生成するよう使用されるメインオブジェクトである。シナリオは、ソースコンポーネント(マッピング、パッケージ、プロシージャ、変数)をプロダクションに配置するよう設計される。このコンポーネントについて、シナリオがコード(SQL、シェルなど)の発生から得られる。シナリオは、エクスポートされ、その後、異なるプロダクション環境へインポートされ得る。
ほとんどのデータ統合システムにおいて、マッピングは、マップの部分を形成するすべての入力および出力属性の明示的な定義を必要とする。典型的なフローベースのETLツールにおいて、コネクタが属性レベルに形成される。これにより、非常に簡潔なマッピングモデルが得られる。しかしながら、これによりさらに、巨大な数のオブジェクトが生成されるとともに、属性レベルコネクタの数によりマップを構築および維持することが煩雑になる。
図21は、本発明の実施形態を実施するために使用され得るコンピュータシステム2100の簡略ブロック図である。図21に示されるように、コンピュータシステム2100は、バスサブシステム2120を介して多くの周辺機器と通信するプロセッサ2110を含む。これらの周辺機器は、メモリサブシステム2140およびファイルストレージサブシステム2150を含むストレージサブシステム2130と、入力デバイス2160と、出力デバイス2170と、ネットワークインターフェイスサブシステム2180とを含み得る。
Claims (21)
- データマッピングの生成を促進するための方法であって、
論理設計の1つ以上のコンポーネントを特定する情報を1つ以上のコンピュータシステムにて受け取ることを含み、前記1つ以上のコンポーネントのうちの少なくとも1つは第1のタイプであり、前記方法はさらに、
前記1つ以上のコンピュータシステムに関連付けられる1つ以上のプロセッサにより、前記論理設計における上流のコンポーネントに基づいて、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における下流のコンポーネントに可視であるデータ属性のセットを判定することと、
前記1つ以上のコンピュータシステムに関連付けられる前記1つ以上のプロセッサにより、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視である属性の前記セットを示す情報を生成することとを含む、方法。 - 前記1つ以上のコンピュータシステムに関連付けられる前記1つ以上のプロセッサにより、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視であるデータ属性の前記セットを判定することは、上流のコンポーネントから可視である1つ以上の属性を導き出すことと、下流のコンポーネントに前記1つ以上の属性をエクスポーズすることとを含む、請求項1に記載の方法。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取ることは、前記論理設計を通って流れる情報の形を変更するオペレーションを示す情報を受け取ることを含む、請求項1または2に記載の方法。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取ることは、前記論理設計を通って流れる情報のフローを制御するが前記論理設計を通って流れる前記情報の形を変更しないオペレーションを示す情報を受け取ることを含む、請求項1〜3のいずれか1項に記載の方法。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取ることは、ソースデータストアに格納されるデータの1つ以上の属性を有するソースコンポーネントを示す情報を受け取ることを含む、請求項1〜4のいずれか1項に記載の方法。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取ることは、ターゲットデータストアに格納されるデータの1つ以上の属性を有するターゲットコンポーネントを示す情報を受け取ることを含む、請求項1〜5のいずれか1項に記載の方法。
- 前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視である属性の前記セットを示す前記情報を生成することは、下流のコンポーネントに属性のリストをエクスポートすることを含む、請求項1〜6のいずれか1項に記載の方法。
- 前記論理設計へのコンポーネントまたは属性の導入または除去による前記論理設計における変更を前記1つ以上のコンピュータシステムにて受け取ることと、
前記1つ以上のコンピュータシステムに関連付けられる前記1つ以上のプロセッサにより、前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するかどうかを判定することと、
前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントの少なくとも1つに影響するという判定に基づいて、前記1つ以上のコンピュータシステムに関連付けられる前記1つ以上のプロセッサにより、下流のコンポーネントに可視であるデータ属性の更新されたセットを判定することとをさらに含む、請求項1〜7のいずれか1項に記載の方法。 - 前記論理設計へのコンポーネントまたは属性の導入による前記論理設計における変更を前記1つ以上のコンピュータシステムにて受け取ることと、
前記1つ以上のコンピュータシステムに関連付けられる前記1つ以上のプロセッサにより、前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するかどうかを判定することと、
前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するという判定に基づいて、下流のコンポーネントに可視であるデータ属性の前記セットを保存することとをさらに含む、請求項1〜8のいずれか1項に記載の方法。 - コンポーネントまたは属性をリネームする前記論理設計における変更を、前記1つ以上のコンピュータシステムにて受け取ることと、
前記1つ以上のコンピュータシステムに関連付けられる前記1つ以上のプロセッサにより、前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するかどうかを判定することと、
前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するという判定に基づいて、下流のコンポーネントに可視であるデータ属性の前記セットをリネームすることとをさらに含む、請求項1〜9のいずれか1項に記載の方法。 - データマッピングの生成を促進するためのコンピュータ実行可能コードを格納する一時的でないコンピュータ読取可能媒体であって、
論理設計の1つ以上のコンポーネントを特定する情報を受け取るためのコードを含み、前記1つ以上のコンポーネントのうちの少なくとも1つは第1のタイプであり、
前記論理設計における上流のコンポーネントに基づいて、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における下流のコンポーネントに可視であるデータ属性のセットを判定するためのコードと、
前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視である属性の前記セットを示す情報を生成するためのコードとを含む、一時的でないコンピュータ読取可能媒体。 - 前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視であるデータ属性の前記セットを判定するための前記コードは、上流のコンポーネントから可視である1つ以上の属性を導き出すとともに、下流のコンポーネントに前記1つ以上の属性をエクスポーズするためのコードを含む、請求項11に記載の一時的でないコンピュータ読取可能媒体。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取るための前記コードは、前記論理設計を通って流れる情報の形を変更するオペレーションを示す情報を受け取るためのコードを含む、請求項11または12のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取るための前記コードは、前記論理設計を通って流れる情報のフローを制御するが前記論理設計を通って流れる前記情報の形を変更しないオペレーションを示す情報を受け取るためのコードを含む、請求項11〜13のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取るための前記コードは、ソースデータストアに格納されるデータの1つ以上の属性を有するソースコンポーネントを示す情報を受け取るためのコードを含む、請求項11〜14のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。
- 前記論理設計の前記1つ以上のコンポーネントを特定する前記情報を受け取るための前記コードは、ターゲットデータストアに格納されるデータの1つ以上の属性を有するターゲットコンポーネントを示す情報を受け取るためのコードを含む、請求項11〜15のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。
- 前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視である属性の前記セットを示す前記情報を生成するための前記コードは、下流のコンポーネントに属性のリストをエクスポートするためのコードを含む、請求項11〜16のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。
- 前記論理設計へのコンポーネントまたは属性の導入または除去による前記論理設計における変更を受け取るためのコードと、
前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するかどうかを判定するためのコードと、
前記論理設計における前記変更が、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するという判定に基づいて、下流のコンポーネントに可視であるデータ属性の更新されたセットを判定するためのコードとをさらに含む、請求項11〜17のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。 - 前記論理設計へのコンポーネントまたは属性の導入または除去による前記論理設計における変更を受け取るためのコードと、
前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するかどうかを判定するためのコードと、
前記論理設計における前記変更が、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するという判定に基づいて、下流のコンポーネントに可視であるデータ属性の前記セットを保存するためのコードとをさらに含む、請求項11〜18のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。 - コンポーネントまたは属性をリネームする前記論理設計における変更を受け取るためのコードと、
前記論理設計における前記変更が前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するかどうかを判定するためのコードと、
前記論理設計における前記変更が、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つに影響するという判定に基づいて、下流のコンポーネントに可視であるデータ属性の前記セットをリネームするためのコードとをさらに含む、請求項11〜19のいずれか1項に記載の一時的でないコンピュータ読取可能媒体。 - データマッピングの生成を促進するためのシステムであって、
プロセッサと、
前記プロセッサと通信し、かつ、命令のセットを格納するように構成されるメモリとを含み、前記命令のセットは、前記プロセッサによって実行されると、
論理設計の1つ以上のコンポーネントを特定する情報を受け取るように前記プロセッサを構成し、前記1つ以上のコンポーネントのうちの少なくとも1つは第1のタイプであり、前記命令のセットはさらに、
前記論理設計における上流のコンポーネントに基づいて、前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における下流のコンポーネントに可視であるデータ属性のセットを判定し、
前記第1のタイプである前記1つ以上のコンポーネントのうちの少なくとも1つの前記論理設計における前記下流のコンポーネントに可視である属性の前記セットを示す情報を生成するように前記プロセッサを構成する、システム。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361824544P | 2013-05-17 | 2013-05-17 | |
US61/824,544 | 2013-05-17 | ||
US14/044,417 | 2013-10-02 | ||
US14/044,417 US9507838B2 (en) | 2013-05-17 | 2013-10-02 | Use of projector and selector component types for ETL map design |
PCT/US2014/031921 WO2014186058A1 (en) | 2013-05-17 | 2014-03-26 | Use of projector and selector component types for etl map design |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016525734A true JP2016525734A (ja) | 2016-08-25 |
JP2016525734A5 JP2016525734A5 (ja) | 2017-04-13 |
JP6412924B2 JP6412924B2 (ja) | 2018-10-24 |
Family
ID=51896600
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016513953A Active JP6412924B2 (ja) | 2013-05-17 | 2014-03-26 | Etlマップ設計のためのプロジェクタおよびセレクタコンポーネントタイプの使用 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9507838B2 (ja) |
EP (1) | EP2997512A4 (ja) |
JP (1) | JP6412924B2 (ja) |
CN (1) | CN105339941B (ja) |
WO (1) | WO2014186058A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10216814B2 (en) | 2013-05-17 | 2019-02-26 | Oracle International Corporation | Supporting combination of flow based ETL and entity relationship based ETL |
US9922104B1 (en) * | 2014-08-13 | 2018-03-20 | Numerify, Inc. | Metadata driven code-generated external data feeds |
IN2015CH02357A (ja) * | 2015-05-08 | 2015-05-22 | Wipro Ltd | |
US11372880B2 (en) * | 2016-02-26 | 2022-06-28 | Crysp Intelligence Pty Ltd | Data source system agnostic fact category partitioned information repository and methods for the insertion and retrieval of data using the information repository |
EP3475888A1 (en) | 2016-08-22 | 2019-05-01 | Oracle International Corporation | System and method for ontology induction through statistical profiling and reference schema matching |
US11055310B2 (en) * | 2017-12-04 | 2021-07-06 | Bank Of America Corporation | SQL server integration services (SSIS) package analyzer |
AU2020100309B4 (en) * | 2019-03-20 | 2020-09-24 | Parametric Systems Pty Ltd | Techniques for Controlling Interaction with an Application Database |
CN110780946B (zh) * | 2019-10-30 | 2021-05-25 | 京东数字科技控股有限公司 | 用于处理信息的方法和装置 |
US11824837B2 (en) * | 2020-07-15 | 2023-11-21 | Sap Se | End user creation of trusted integration pathways between different enterprise systems |
CN112035468B (zh) * | 2020-08-24 | 2024-06-14 | 杭州览众数据科技有限公司 | 基于内存计算、web可视化配置的多数据源ETL工具 |
US11561803B1 (en) * | 2021-07-08 | 2023-01-24 | SambaNova Systems, Inc. | Systems and methods for editing topology of a reconfigurable data processor |
US11750488B1 (en) * | 2022-04-12 | 2023-09-05 | International Business Machines Corporation | Minimizing latency of round trip network communication in a computing infrastructure |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005327232A (ja) * | 2003-08-29 | 2005-11-24 | Microsoft Corp | 任意のデータモデル用のマッピングアーキテクチャ |
WO2007083371A1 (ja) * | 2006-01-18 | 2007-07-26 | Fujitsu Limited | データ統合装置、方法、プログラムを記録した記録媒体 |
JP2011034246A (ja) * | 2009-07-30 | 2011-02-17 | Fujitsu Ltd | データ変換装置、データ変換方法、およびデータ変換プログラム |
JP2012027690A (ja) * | 2010-07-23 | 2012-02-09 | Fujitsu Ltd | 情報統合プログラム、装置及び方法 |
US20130103705A1 (en) * | 2006-02-28 | 2013-04-25 | Sap Ag | Schema mapping and data transformation on the basis of a conceptual model |
US20130111375A1 (en) * | 2011-11-01 | 2013-05-02 | Matthew Scott Frohliger | Software user interface allowing logical expression to be expressed as a flowchart |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5659723A (en) | 1991-12-20 | 1997-08-19 | International Business Machines Corporation | Entity/relationship to object oriented logical model conversion method |
US7185016B1 (en) | 2000-09-01 | 2007-02-27 | Cognos Incorporated | Methods and transformations for transforming metadata model |
US7343585B1 (en) * | 2002-01-30 | 2008-03-11 | Oracle International Corporation | Operator approach for generic dataflow designs |
US7350191B1 (en) * | 2003-04-22 | 2008-03-25 | Noetix, Inc. | Computer implemented system and method for the generation of data access applications |
US7849438B1 (en) * | 2004-05-27 | 2010-12-07 | Sprint Communications Company L.P. | Enterprise software development process for outsourced developers |
US7430498B2 (en) * | 2004-09-07 | 2008-09-30 | The Boeing Company | System, method and computer program product for developing a system-of-systems architecture model |
TWI311705B (en) * | 2005-05-23 | 2009-07-01 | Via Tech Inc | Peripheral component interconnect express and changing method of link power states thereof |
US7581189B2 (en) * | 2005-09-09 | 2009-08-25 | Microsoft Corporation | Dynamically generating a database report during a report building process |
US7610299B2 (en) * | 2006-11-30 | 2009-10-27 | International Business Machines Corporation | Method of processing data |
US7860905B2 (en) | 2007-04-24 | 2010-12-28 | Microsoft Corporation | Systems and methods for modularizing data flows |
US8245105B2 (en) * | 2008-07-01 | 2012-08-14 | International Business Machines Corporation | Cascade interconnect memory system with enhanced reliability |
US9557889B2 (en) * | 2009-01-28 | 2017-01-31 | Headwater Partners I Llc | Service plan design, user interfaces, application programming interfaces, and device management |
US8719769B2 (en) | 2009-08-18 | 2014-05-06 | Hewlett-Packard Development Company, L.P. | Quality-driven ETL design optimization |
US9218408B2 (en) | 2010-05-27 | 2015-12-22 | Oracle International Corporation | Method for automatically creating a data mart by aggregated data extracted from a business intelligence server |
US20120054147A1 (en) | 2010-08-25 | 2012-03-01 | Christophe Goetz | System and method for extract, transform, and load workflow generation |
WO2012050579A1 (en) | 2010-10-14 | 2012-04-19 | Hewlett-Packard Development Company, L.P. | Providing operational business intelligence |
US8762934B2 (en) | 2010-10-15 | 2014-06-24 | Serghei Sarafudinov | Method of extensible business object modeling and generation of system artifacts from the models |
US8676772B2 (en) * | 2011-12-09 | 2014-03-18 | Telduráðgevin Sp/f | Systems and methods for improving database performance |
US9396037B2 (en) | 2012-02-27 | 2016-07-19 | Microsoft Technology Licensing, Llc | Model-based data pipeline system optimization |
US9020945B1 (en) * | 2013-01-25 | 2015-04-28 | Humana Inc. | User categorization system and method |
-
2013
- 2013-10-02 US US14/044,417 patent/US9507838B2/en active Active
-
2014
- 2014-03-26 CN CN201480036876.XA patent/CN105339941B/zh active Active
- 2014-03-26 JP JP2016513953A patent/JP6412924B2/ja active Active
- 2014-03-26 EP EP14797084.2A patent/EP2997512A4/en not_active Ceased
- 2014-03-26 WO PCT/US2014/031921 patent/WO2014186058A1/en active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005327232A (ja) * | 2003-08-29 | 2005-11-24 | Microsoft Corp | 任意のデータモデル用のマッピングアーキテクチャ |
WO2007083371A1 (ja) * | 2006-01-18 | 2007-07-26 | Fujitsu Limited | データ統合装置、方法、プログラムを記録した記録媒体 |
US20130103705A1 (en) * | 2006-02-28 | 2013-04-25 | Sap Ag | Schema mapping and data transformation on the basis of a conceptual model |
JP2011034246A (ja) * | 2009-07-30 | 2011-02-17 | Fujitsu Ltd | データ変換装置、データ変換方法、およびデータ変換プログラム |
JP2012027690A (ja) * | 2010-07-23 | 2012-02-09 | Fujitsu Ltd | 情報統合プログラム、装置及び方法 |
US20130111375A1 (en) * | 2011-11-01 | 2013-05-02 | Matthew Scott Frohliger | Software user interface allowing logical expression to be expressed as a flowchart |
Non-Patent Citations (1)
Title |
---|
データベース技術を最大限に活用できるデータ連係基盤 〜ORACLE DATA INTEGRATORのご紹介〜, JPN6018006501, 31 December 2010 (2010-12-31), pages p.1−54 * |
Also Published As
Publication number | Publication date |
---|---|
EP2997512A4 (en) | 2017-01-18 |
EP2997512A1 (en) | 2016-03-23 |
US9507838B2 (en) | 2016-11-29 |
US20140344210A1 (en) | 2014-11-20 |
WO2014186058A1 (en) | 2014-11-20 |
CN105339941A (zh) | 2016-02-17 |
JP6412924B2 (ja) | 2018-10-24 |
CN105339941B (zh) | 2019-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6434960B2 (ja) | フローベースのetlおよびエンティティリレーションシップベースのetlの組合せのサポート | |
US11847131B2 (en) | Optimizing incremental loading of warehouse data | |
US11789964B2 (en) | Load plan generation | |
JP6412924B2 (ja) | Etlマップ設計のためのプロジェクタおよびセレクタコンポーネントタイプの使用 | |
US10073867B2 (en) | System and method for code generation from a directed acyclic graph using knowledge modules | |
US9659012B2 (en) | Debugging framework for distributed ETL process with multi-language support | |
US10678632B2 (en) | Extract-transform-load diagnostics | |
US9483506B2 (en) | History preserving data pipeline | |
US8954375B2 (en) | Method and system for developing data integration applications with reusable semantic types to represent and process application data | |
US20240061855A1 (en) | Optimizing incremental loading of warehouse data | |
Tok et al. | Microsoft SQL Server 2012 Integration Services | |
Aytas | Designing Big Data Platforms: How to Use, Deploy, and Maintain Big Data Systems | |
Eisa | Parallel Processing for Data Retrieval in Odoo Enterprise Resource Planning Reporting System | |
Virolainen | Migrating Microservices to Graph Database | |
CN116457771A (zh) | 用于提供与数据分析环境一起使用的查询执行调试器的系统和方法 | |
CN117980892A (zh) | 与数据分析环境一起使用的用于查询加速的系统和方法 | |
Garcia | MDSAA |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170310 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170310 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180313 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180612 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180619 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181001 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6412924 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |