JP7259973B2 - データ分析処理装置、データ分析処理方法及びデータ分析処理プログラム - Google Patents
データ分析処理装置、データ分析処理方法及びデータ分析処理プログラム Download PDFInfo
- Publication number
- JP7259973B2 JP7259973B2 JP2021543822A JP2021543822A JP7259973B2 JP 7259973 B2 JP7259973 B2 JP 7259973B2 JP 2021543822 A JP2021543822 A JP 2021543822A JP 2021543822 A JP2021543822 A JP 2021543822A JP 7259973 B2 JP7259973 B2 JP 7259973B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- olap
- event
- operator
- operators
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/283—Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
(1)データを、データの種別、特性、用途に応じて区別することなく、モノリシックな多次元データベースに蓄積し、管理する。
(2)時間次元のデータとして、事象共通の時間系を基準とする事象の存在期間を保有する。
(3)空間次元のデータとして、事象共通の座標系を基準とする事象の位置と形状を保有する。
(4)非演算子としての時点あるいは期間と、演算子と、を引数として、事象共通の時間系を基準とし、多次元キューブからそれら非演算子及び演算子に該当する時間次元のデータを選択する。
(5)非演算子としての位置と形状と、演算子と、を引数として、事象共通の座標系を基準とし、多次元キューブからそれら非演算子及び演算子に該当する空間次元のデータを選択する。
(構成)
図1は、この発明の第1実施形態に係るデータ分析処理装置の構成の一例を示すブロック図である。
時間次元の情報 = 外観時間 *内実時間
外観時間 = 外観時間ID 開始時刻 終了時刻
内実時間 = 内実時間ID 開始時刻 終了時刻
開始時刻 = 時刻
終了時刻 = 時刻 / ”継続”。
外観時間ATは、事象Pの生成消滅による時間的変化を表現したものであり、事象Pの生成から消滅までの存続期間を表している。この外観時間ATは、全ての事象Pに共通の時点t0を原点とする絶対的な時間系を基準としている。
空間次元の情報 = [幾何形状]((地理学的空間 工学的空間) / 地理学的空間 / 工学的空間)
幾何形状 = 点 / 線 / 面 / ポリゴン / 住所構造
地理学的空間 = 幾何形状の重心位置
工学的空間 = [幾何形状の重心] 構造
構造 = 事象間の関係 事象の識別子。
地理学的空間GS(図3では簡略化のため事象P1の地理学的空間GSのみを示している)は、事象Pの生成消滅による空間的変化を表現したものであり、事象Pの形状と位置を表している。この地理学的空間GSは、全ての事象Pに共通の単一の位置を原点Oとするグローバルな座標系(x,y,z)を基準とする絶対空間である。
次に、以上のように構成されたデータ分析処理装置10の処理動作を説明する。
第1実施形態に係るデータ分析処理装置10は、生成消滅及び/または状態遷移による時間的及び空間的変化を体現する時間次元及び空間次元のデータを蓄積及び管理するとともに、時間次元、空間次元のデータを含む事象を体現するデータを、それらデータの情報源である事象を識別するための識別子と対応付けて蓄積及び管理し、多次元キューブに対してOLAP操作を実行するようにしている。このように、時間次元及び空間次元のデータを、データの情報源である事象を識別するための識別子と対応付けて蓄積及び管理することで、データの情報源である事象に基づいてデータを選択することができる。よって、データの情報源である事象やその事象の状態遷移に着目してデータを分析することが可能となる。
(構成)
図12は、本発明の第2実施形態に係るデータ分析処理装置の構成の一例を示すブロック図である。第1実施形態と対応する構成については、第1実施形態と同様の符号を付すことで、その説明を省略する。
図13A及び図13Bは、それぞれ、第2実施形態に係るデータ分析処理装置10の動作の一例を説明するためのシーケンス図である。図13Aは、引継データ16をOLAP操作の引数に使用しない場合を示し、図13Bは、引継データ16をOLAP操作の引数に使用する場合を示している。なお、これらの図において、簡略化のため、データカタログ13及び要素データベース14は省略している。
第2実施形態に係るデータ分析処理装置10は、第1実施形態の効果に加えて、以下の効果を有する。
(構成)
図15は、本発明の第3実施形態に係るデータ分析処理装置の構成の一例を示すブロック図である。第2実施形態と対応する構成については、第2実施形態と同様の符号を付すことで、その説明を省略する。
図16A及び図16Bは、それぞれ、第3実施形態に係るデータ分析処理装置10の動作の一例を説明するためのシーケンス図である。図16Aは、履歴データ18を利用したOLAP操作の再実行を行わない場合を示し、図16Bは、履歴データ18を利用したOLAP操作の再実行を行う場合を示している。なお、これらの図において、簡略化のため、クライアント20、データカタログ13及び要素データベース14は省略している。
第3実施形態に係るデータ分析処理装置10は、第1及び第2実施形態の効果に加えて、以下の効果を有する。
例えば、OLAP操作実行部11は、例えば図5に示すように、全てのOLAP操作に対する操作結果を纏めてクライアント20に返却するものとしているが、各OLAP操作が終了する度に、その操作結果をクライアント20に返却するようにしても良い。
11…OLAP操作実行部
12…多次元データベース管理部
13…データカタログ
14…要素データベース
15…OLAP操作連携部
16…引継データ
17…OLAP操作管理部
18…履歴データ
20…クライアント
101…ハードウェアプロセッサ
102…プログラムメモリ
103…データメモリ
104…通信インタフェース
105…バス
141…第1要素データベース
142…第2要素データベース
143…第3要素データベース
AT…外観時間
ESf,ESs…工学的空間
GS…地理学的空間
NET…ネットワーク
P,P1,P2…事象
PG…事象集合
TT…内実時間
Claims (13)
- 生成消滅及び状態遷移の少なくとも一方により時間的及び空間的の少なくとも一方に変化する実世界の事象について、前記事象を体現するデータを多次元キューブに写像してオンライン分析処理(OLAP)操作により分析するデータ分析処理装置であって、
前記事象を体現するデータとしての、前記生成消滅及び状態遷移の少なくとも一方による時間的、空間的変化を体現する時間次元、空間次元及び主題に依存する複数種別の固有次元のデータと、前記時間次元、空間次元及び固有次元の前記データにより識別される前記主題に依存する前記複数種別の特性を表すデータとを、それらデータの情報源である前記事象を識別するための事象の識別子と対応付けて、前記主題ごとに構築した多次元キューブに蓄積及び管理する多次元データベース管理部と、
前記多次元キューブに対して前記OLAP操作を実行するOLAP操作実行部と、
を備える、データ分析処理装置。 - 前記多次元データベース管理部は、
データの種別、特性及び用途に応じて、前記事象を体現するデータを複数の異種データベースに分散して蓄積し、
前記複数の異種データベースをデータカタログを用いて管理する、
ことにより、前記多次元キューブをモノリシックな多次元データベースとして機能させる、請求項1に記載のデータ分析処理装置。 - 前記多次元データベース管理部は、開始時点から終了時点までの存続期間を有するとともに前記存続期間中に少なくとも1つの状態を取る前記事象を体現する前記時間次元のデータとして、
前記事象を含む全ての事象に共通の単一の時点を原点とする絶対的な時間系を基準として前記事象の前記存続期間を表す外観時間と、
前記外観時間の開始時点を原点とする相対的な時間系を基準として前記事象がある状態から別の状態へ遷移するまでの状態維持期間をそれぞれ表す少なくとも1つの内実時間と、
を保有する、請求項1に記載のデータ分析処理装置。 - 前記OLAP操作実行部は、非演算子として時点あるいは期間を用いるとき、
演算子が前記絶対的な時間系を基準とする演算子である場合は、前記外観時間あるいは前記絶対的な時間系に変換した前記内実時間に対して、前記非演算子と前記演算子を適用して、前記非演算子と前記演算子に該当するデータを選択し、
前記演算子が前記相対的な時間系を基準とする演算子である場合は、前記内実時間に対して、前記非演算子と前記演算子を適用して、前記非演算子と前記演算子に該当するデータを選択する、請求項3に記載のデータ分析処理装置。 - 前記多次元データベース管理部は、前記空間次元のデータのそれぞれとして、
全ての事象に共通の単一の位置を原点とするグローバルな座標系を基準として前記事象の位置と形状を表す絶対空間と、
前記事象が属する事象集合に共通の単一の位置を原点とするローカルな座標系を基準として、前記事象集合における前記事象の位置と形状を表す相対空間と、
を保有する、請求項1に記載のデータ分析処理装置。 - 前記OLAP操作実行部は、非演算子として位置と形状を用いるとき、
演算子が前記グローバルな座標系を基準とする演算子である場合は、前記絶対空間あるいは前記グローバルな座標系に変換した前記相対空間に対して、前記非演算子と前記演算子を適用して、前記非演算子と前記演算子に該当するデータを選択し、
前記演算子が前記ローカルな座標系を基準とする演算子である場合は、前記相対空間に対して、前記非演算子と前記演算子を適用して、前記非演算子と前記演算子に該当するデータを選択する、請求項5に記載のデータ分析処理装置。 - 前記OLAP操作実行部は、非演算子としての前記事象の識別子の集合と演算子とを引数として用いて、前記多次元キューブから前記非演算子と前記演算子に該当するデータを選択するOLAP操作を実行するとき、前記事象の識別子に対して、前記非演算子と前記演算子を適用して、前記非演算子と前記演算子に該当するデータを選択する、請求項1に記載のデータ分析処理装置。
- 前記OLAP操作実行部は、複数組の非演算子及び演算子と、演算方法と、を引数として用いて、前記多次元キューブから各組の前記非演算子と前記演算子に該当するデータを選択することで前記データを分類するOLAP操作を実行するとき、
前記演算方法が個別の場合は、前記事象の識別子と対応付けられた前記データに対して、前記事象ごとに前記データをグループ分けしてから、前記グループごとに前記データを分類することで、前記事象ごとに前記データを分類し、
前記演算方法が全体の場合は、前記事象の識別子に対応付けられた前記データに対して、前記事象ごとに前記データをグループ分けせずに分類することで、前記データ全体を分類する、請求項1、4、6または7に記載のデータ分析処理装置。 - ある主題の多次元キューブに対して実行した前記OLAP操作の引数を記録し、この記録した前記引数を、他の主題に対して実行するOLAP操作の引数として利用するOLAP操作連携部をさらに備え、
前記OLAP操作連携部は、
ある主題の多次元キューブに対する前記OLAP操作の引数として指定した非演算子、演算子及び演算方法を記録し、
それらを、他の主題の多次元キューブに対するOLAP操作の引数である前記非演算子、演算子及び演算方法として選択的に利用する、請求項1、4、6、7または8に記載のデータ分析処理装置。 - ある主題の多次元キューブに対して実行した前記OLAP操作の結果を記録し、この記録した前記結果を、他の主題に対して実行するOLAP操作の引数として利用するOLAP操作連携部をさらに備え、
前記OLAP操作連携部は、
ある主題の多次元キューブに対する前記OLAP操作の結果として得られた次元のデータと、そのデータに対応付けられた前記事象の識別子とを記録し、
それらを、他の主題の多次元キューブに対するOLAP操作の引数である非演算子として選択的に利用する、請求項1、4、6、7または8に記載のデータ分析処理装置。 - ある主題の多次元キューブに対して実行した前記OLAP操作を記録し、前記OLAP操作実行部に、前記記録したOLAP操作を部品として任意に再実行させるOLAP操作管理部をさらに備える、請求項1、4、6、7、8、9または10に記載のデータ分析処理装置。
- 生成消滅及び状態遷移の少なくとも一方により時間的及び空間的の少なくとも一方に変化する実世界の事象について、前記事象を体現するデータを多次元キューブに写像してオンライン分析処理(OLAP)操作により分析するデータ分析処理装置が実行するデータ分析処理方法であって、
前記データ分析処理装置が実行することによって、
前記データ分析処理装置が、前記事象を体現するデータとしての、前記生成消滅及び状態遷移の少なくとも一方による時間的、空間的変化を体現する時間次元、空間次元及び主題に依存する複数種別の固有次元のデータと、前記時間次元、空間次元及び固有次元の前記データにより識別される前記主題に依存する前記複数種別の特性を表すデータとを、それらデータの情報源である前記事象を識別するための事象の識別子と対応付けて、記憶装置に前記主題ごとに構築した多次元キューブに蓄積及び管理し、
前記データ分析処理装置が、前記多次元キューブに対して前記OLAP操作を実行する、
データ分析処理方法。
- コンピュータのプロセッサを、請求項1乃至11の何れかに記載のデータ分析処理装置として機能させる、データ分析処理プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/034475 WO2021044497A1 (ja) | 2019-09-02 | 2019-09-02 | データ分析処理装置、データ分析処理方法及びデータ分析処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021044497A1 JPWO2021044497A1 (ja) | 2021-03-11 |
JP7259973B2 true JP7259973B2 (ja) | 2023-04-18 |
Family
ID=74852344
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021543822A Active JP7259973B2 (ja) | 2019-09-02 | 2019-09-02 | データ分析処理装置、データ分析処理方法及びデータ分析処理プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11899690B2 (ja) |
JP (1) | JP7259973B2 (ja) |
WO (1) | WO2021044497A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2023281699A1 (ja) * | 2021-07-08 | 2023-01-12 | ||
WO2023073806A1 (ja) * | 2021-10-26 | 2023-05-04 | 日本電信電話株式会社 | データ分析処理装置、データ分析処理方法、およびプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009129031A (ja) | 2007-11-20 | 2009-06-11 | Osaka Univ | 多次元データ分析方法、多次元データ分析装置、及びプログラム |
JP2011054156A (ja) | 2009-08-31 | 2011-03-17 | Accenture Global Services Gmbh | 適応分析多次元処理システム |
JP2018136963A (ja) | 2014-11-19 | 2018-08-30 | 株式会社インフォメックス | データ検索装置、データ検索方法、データ検索プログラム、及び記録媒体 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2519021A1 (en) * | 2005-09-13 | 2007-03-13 | Cognos Incorporated | System and method of providing date, arithmetic, and other functions for olap sources |
US8838623B2 (en) * | 2006-06-22 | 2014-09-16 | International Business Machines Corporation | System and method for locking context of sets of members in crosstabs |
US9411874B2 (en) * | 2012-06-14 | 2016-08-09 | Melaleuca, Inc. | Simplified interaction with complex database |
-
2019
- 2019-09-02 JP JP2021543822A patent/JP7259973B2/ja active Active
- 2019-09-02 US US17/637,748 patent/US11899690B2/en active Active
- 2019-09-02 WO PCT/JP2019/034475 patent/WO2021044497A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009129031A (ja) | 2007-11-20 | 2009-06-11 | Osaka Univ | 多次元データ分析方法、多次元データ分析装置、及びプログラム |
JP2011054156A (ja) | 2009-08-31 | 2011-03-17 | Accenture Global Services Gmbh | 適応分析多次元処理システム |
JP2018136963A (ja) | 2014-11-19 | 2018-08-30 | 株式会社インフォメックス | データ検索装置、データ検索方法、データ検索プログラム、及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
WO2021044497A1 (ja) | 2021-03-11 |
US11899690B2 (en) | 2024-02-13 |
JPWO2021044497A1 (ja) | 2021-03-11 |
US20220284043A1 (en) | 2022-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107239335B (zh) | 分布式系统的作业调度系统及方法 | |
US9740706B2 (en) | Management of intermediate data spills during the shuffle phase of a map-reduce job | |
US20170255673A1 (en) | Batch Data Query Method and Apparatus | |
KR20220062228A (ko) | 시퀀스 추출을 사용한 로봇 프로세스 자동화(rpa)를 위한 프로세스 이해 | |
CN113767388A (zh) | 用于工作流分析和设计任务优化的技术 | |
JP7259973B2 (ja) | データ分析処理装置、データ分析処理方法及びデータ分析処理プログラム | |
TW201512864A (zh) | 平行樹狀型預測 | |
US20070250517A1 (en) | Method and Apparatus for Autonomically Maintaining Latent Auxiliary Database Structures for Use in Executing Database Queries | |
CN108133059A (zh) | 含大规模低功率集群的异构数据库系统中联接的有效下推 | |
US8938443B2 (en) | Runtime optimization of spatiotemporal events processing | |
JPWO2002046921A1 (ja) | シーケンス解析方法およびシーケンス解析装置 | |
US9292405B2 (en) | HANA based multiple scenario simulation enabling automated decision making for complex business processes | |
CN113641651A (zh) | 一种业务数据管理方法、系统及计算机存储介质 | |
CN112860736A (zh) | 大数据查询优化方法、设备及可读存储介质 | |
JP2008225686A (ja) | 分散型データ処理プラットフォームにおけるデータ配置管理装置と方法、システム及びプログラム | |
JP2016014944A (ja) | 相関ルール分析装置および相関ルール分析方法 | |
JP5206268B2 (ja) | ルール作成プログラム、ルール作成方法及びルール作成装置 | |
KR20100022171A (ko) | 스레드 지향 로깅 시스템에서 로그 저장 방법 및 장치 | |
CN114116503A (zh) | 一种测试方法、装置、电子设备及存储介质 | |
US20200210406A1 (en) | Method and device for restoring missing operational data | |
KR101722643B1 (ko) | Rdd 관리 방법, rdd 관리 장치 및 rdd 관리 프로그램을 저장하는 저장매체 | |
KR20160047239A (ko) | 혼합 워크로드 처리 환경에서 효율적인 데이터 저장을 위한 컬럼 그룹 선택방법 및 장치 | |
US20130325365A1 (en) | Buildable part pairs in an unconfigured product structure | |
KR102682558B1 (ko) | 포인트 클라우드에서 인스턴스를 생성하는 방법 및 장치 | |
CN105868110A (zh) | 一种基于内存数据网格的流式数据处理程序错误的数据溯源定位方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220105 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221109 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230104 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20230208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230307 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230320 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7259973 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |