JP6669571B2 - リレーショナルデータベースのチューニング装置及び方法 - Google Patents
リレーショナルデータベースのチューニング装置及び方法 Download PDFInfo
- Publication number
- JP6669571B2 JP6669571B2 JP2016083544A JP2016083544A JP6669571B2 JP 6669571 B2 JP6669571 B2 JP 6669571B2 JP 2016083544 A JP2016083544 A JP 2016083544A JP 2016083544 A JP2016083544 A JP 2016083544A JP 6669571 B2 JP6669571 B2 JP 6669571B2
- Authority
- JP
- Japan
- Prior art keywords
- tuning
- information
- data
- search
- relational database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/217—Database tuning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
前記リレーショナルデータベースに対して所定の照会言語を介して発行されたすべてのコマンドが、データベースマネージメントシステムで実行されたときの所定の実行情報を収集する収集手段と、
前記各コマンドの実行によってデータの検索結果を取得するための検索条件情報及び検索方法情報を一対の取得パターンとして抽出する抽出手段と、
前記抽出された各取得パターンを前記リレーショナルデータベースのオブジェクト単位に組分けした取得パターン群として一覧可能にグルーピングするとともに、各取得パターンと各取得パターンに対応する前記収集された実行情報とを一連のチューニング情報として構成したチューニング用テーブルを生成する生成手段と、を有することを特徴とする。
前記リレーショナルデータベースに対して所定の照会言語を介して発行されたすべてのコマンドが、データベースマネージメントシステムで実行されたときの所定の実行情報を収集するステップと、
前記各コマンドの実行によってデータの検索結果を取得するために、検索対象を絞り込むためのカラムデータと該カラムデータに対する検索条件を前記照会言語で表記した演算子データによって特定された検索条件情報及び前記検索対象を絞り込むためのカラムデータに対して設定されたインデックスデータと前記オブジェクトに対して設定された検索経路を示す走査方式データによって特定された検索方法情報を一対の取得パターンとして抽出するステップと、
前記抽出された各取得パターンを前記リレーショナルデータベースのオブジェクト単位に組分けした取得パターン群として一覧可能にグルーピングするとともに、各取得パターンと各取得パターンに対応する前記収集された実行情報とを一連のチューニング情報として構成したチューニング用テーブルを生成するステップとを有し、
前記収集は、前記リレーショナルデータベースが稼働中に、該リレーショナルデータベースに実際に格納されているオブジェクトとは別に、継続的に更新される仮想のテーブルから前記実行情報を定期的に収集し、専用のリポジトリに格納するとともに、時系列に管理することによって行われることを特徴とする。
filter((“TB01”.“YM”='201007' AND “TB01”.“YMD”=TO_CHAR(LAST_DAY(TO_DATE(“TB01”.“YM”||‘01’、‘yyyymmdd’))、‘yyyymmdd’)))
access(“TB01”.“TEMPO_CODE”=‘0000001939’)
11 収集部
12 抽出部
13 算出部
14 生成部
111 算定部
141 選出部
142 選定部
A ユーザ端末
D リレーショナルデータベースシステム
D1 データベース本体
D2 データベース管理システム
T1 チューニング用テーブル
T2 インデックス情報テーブル
Claims (17)
- リレーショナルデータベースのパフォーマンスを分析及び改善するチューニング装置であって、
前記リレーショナルデータベースに対して所定の照会言語を介して発行されたすべてのコマンドが、データベースマネージメントシステムで実行されたときの所定の実行情報を収集する収集手段と、
前記各コマンドの実行によってデータの検索結果を取得するための検索条件情報及び検索方法情報を一対の取得パターンとして抽出する抽出手段と、
前記抽出された各取得パターンを前記リレーショナルデータベースのオブジェクト単位に組分けした取得パターン群として一覧可能にグルーピングするとともに、各取得パターンと各取得パターンに対応する前記収集された実行情報とを一連のチューニング情報として構成したチューニング用テーブルを生成する生成手段と、を有することを特徴とするチューニング装置。
- 前記抽出手段は、少なくとも、前記データベースマネージメントシステムによって作成された実行計画情報から前記各取得パターンを抽出することを特徴とする請求項1記載のチューニング装置。
- 前記検索条件情報は、検索対象を絞り込むためのカラムデータと該カラムデータに対する検索条件を前記照会言語で表記した演算子データによって特定し、前記検索方法情報は、前記検索対象を絞り込むためのカラムデータに対して設定されたインデックスデータと前記オブジェクトに対して設定された検索経路を示す走査方式データによって特定することを特徴とする請求項1又は請求項2記載のチューニング装置。
- 前記収集手段が収集する実行情報は、前記実行計画情報のほか、少なくとも、前記各取得パターンの対象となるオブジェクトを参照するための前記照会言語のコマンド数、実行回数、処理の経過時間、CPUの使用時間、待機時間からなる実行実績情報を含むことを特徴とする請求項2又は請求項3記載のチューニング装置。
- 前記収集手段は、前記リレーショナルデータベースが稼働中に、該リレーショナルデータベースに実際に格納されているオブジェクトとは別に、継続的に更新される仮想のテーブルから前記実行情報を定期的に収集し、時系列に管理することを特徴とする請求項1から請求項4までのいずれか1項に記載のチューニング装置。
- 前記収集手段は、前記実行実績情報を、前記リレーショナルデータベース稼働時からの累計データの収集と、前記収集された累計データから所定の算定手段によって得られた前記リレーショナルデータベース稼働後の特定の期間内のデータの収集との2種類のデータを収集可能とすることを特徴とする請求項4又は請求項5記載のチューニング装置。
- 前記各取得パターンの検索条件情報に対する検索方法情報のアクセス効率を所定の演算式によって評点として算出する算出手段を備え、前記生成手段は、算出された前記各評点情報を前記実行情報に含めることを特徴とする請求項2から請求項6までのいずれか1項に記載のチューニング装置。
- 前記生成手段は、前記各オブジェクトの取得パターン群から、前記実行情報に基づいて、チューニングの対象となる取得パターンを特定する選出手段と、選出された取得パターンから、インデックスデータとして選定されていないカラムデータを読み出し、所定の条件に従って当該カラムデータからインデックスデータを選定する選定手段とを有し、前記チューニング用テーブルに選定したインデックスデータを含めることを特徴とする請求項3から請求項7までのいずれか1項に記載のチューニング装置。
- 前記選定手段は、少なくとも、前記実行実績情報から、前記選定されていないカラムデータの使用回数を優先的選定基準とする第1の基準と、実行回数を優先的選定基準とする第2の基準との2種の選定基準を備え、前記生成手段は、前記チューニング用テーブルから、前記2種の選定基準によって選定されたインデックスデータを選択可能としたものであることを特徴とする請求項8記載のチューニング装置。
- 前記生成手段は、前記選出手段によって特定された取得パターンのインデックスデータと同一のインデックスデータが、前記取得パターン群のいずれかで設定されている数を前記特定された取得パターンに対応させて表示することを特徴とする請求項8又は請求項9記載のチューニング装置。
- 所定の目的で発行される1以上のコマンド群に付されたクエリオプティマイザに対する指示又はコマンドの説明であって前記コマンドの実行後でも自動的に変更されないテキストに対して、前記ファイルを特定するIDを付与するID付与手段を有し、前記生成手段は、前記付与されたIDによって特定される前記ファイルにおける前記取得パターンを閲覧可能とすることを特徴とする請求項1から請求項10までのいずれか1項に記載のチューニング装置。
- リレーショナルデータベースのパフォーマンスを分析及び改善するチューニング方法であって、
前記リレーショナルデータベースに対して所定の照会言語を介して発行されたすべてのコマンドが、データベースマネージメントシステムで実行されたときの所定の実行情報を収集するステップと、
前記各コマンドの実行によってデータの検索結果を取得するために、検索対象を絞り込むためのカラムデータと該カラムデータに対する検索条件を前記照会言語で表記した演算子データによって特定された検索条件情報及び前記検索対象を絞り込むためのカラムデータに対して設定されたインデックスデータと前記オブジェクトに対して設定された検索経路を示す走査方式データによって特定された検索方法情報を一対の取得パターンとして抽出するステップと、
前記抽出された各取得パターンを前記リレーショナルデータベースのオブジェクト単位に組分けした取得パターン群として一覧可能にグルーピングするとともに、各取得パターンと各取得パターンに対応する前記収集された実行情報とを一連のチューニング情報として構成したチューニング用テーブルを生成するステップとを有し、
前記収集は、前記リレーショナルデータベースが稼働中に、該リレーショナルデータベースに実際に格納されているオブジェクトとは別に、継続的に更新される仮想のテーブルから前記実行情報を定期的に収集し、専用のリポジトリに格納するとともに、時系列に管理することによって行われることを特徴とするチューニング方法。
- 前記各取得パターンの検索条件情報に対する検索方法情報のアクセス効率を所定の演算式によって評点として算出するステップを有し、算出された前記各評点情報を前記実行情報に含めることを特徴とする請求項12記載のチューニング方法。
- 前記各オブジェクトの取得パターン群から、前記実行情報に基づいて、チューニングの対象となる取得パターンを特定して選出するステップと、選出された取得パターンから、インデックスデータとして選定されていないカラムデータを読み出し、所定の条件に従って当該カラムデータからインデックスデータを選定するステップとを有し、前記チューニング用テーブルに前記選定したインデックスデータを含めることを特徴とする請求項12又は請求項13記載のチューニング方法。
- 前記オブジェクトの設計時に行われる複数の段階のテストにおいて、前記実行情報の収集と前記取得パターンの抽出を順次実行するとともに、前記チューニング用テーブルに加えて、前記抽出された取得パターンの検索条件情報から、前記カラムデータごとに分解し、検索時の使用回数が多い順に前記カラムデータをソートしたテーブルを生成することを特徴とする請求項12から請求項14までのいずれか1項に記載のチューニング方法。
- 前記リレーショナルデータベースの本番環境での稼働時において、新たなデータの登録、削除、定義の変更が発生したときに、当該発生の前後におけるチューニング用テーブルの差分から新たに発生した取得パターンを特定することを特徴とする請求項12から請求項14までのいずれか1項に記載のチューニング方法。
- 前記実行情報は、前記仮想のテーブルからの定期的な収集に代えて、前記リレーショナルデータベースから直接収集するものとし、前記選定したインデックスデータを介して前記リレーショナルデータベースで検索のシミュレーションを行うと、前記選定されたインデックスを適用する前後の前記実行情報に基づくデータ分布を閲覧可能とすることを特徴とする請求項12から請求項14までのいずれか1項に記載のチューニング方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016083544A JP6669571B2 (ja) | 2016-04-19 | 2016-04-19 | リレーショナルデータベースのチューニング装置及び方法 |
US15/317,815 US10216773B2 (en) | 2016-04-19 | 2016-05-19 | Apparatus and method for tuning relational database |
CN201680002045.XA CN108027763B (zh) | 2016-04-19 | 2016-05-19 | 关系型数据库的调整装置和方法 |
EP16805264.5A EP3456360B1 (en) | 2016-04-19 | 2016-05-19 | Device and method for tuning relational database |
PCT/JP2016/002458 WO2017183065A1 (ja) | 2016-04-19 | 2016-05-19 | リレーショナルデータベースのチューニング装置及び方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016083544A JP6669571B2 (ja) | 2016-04-19 | 2016-04-19 | リレーショナルデータベースのチューニング装置及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017194778A JP2017194778A (ja) | 2017-10-26 |
JP6669571B2 true JP6669571B2 (ja) | 2020-03-18 |
Family
ID=60116619
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016083544A Active JP6669571B2 (ja) | 2016-04-19 | 2016-04-19 | リレーショナルデータベースのチューニング装置及び方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10216773B2 (ja) |
EP (1) | EP3456360B1 (ja) |
JP (1) | JP6669571B2 (ja) |
CN (1) | CN108027763B (ja) |
WO (1) | WO2017183065A1 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190050436A1 (en) * | 2017-08-14 | 2019-02-14 | International Business Machines Corporation | Content-based predictive organization of column families |
US11003693B2 (en) * | 2018-04-05 | 2021-05-11 | Sap Se | Grouping tables with existing tables in a distributed database |
US11010363B2 (en) | 2018-04-05 | 2021-05-18 | Sap Se | Complementing existing tables while grouping tables in a distributed database |
CN108763536B (zh) * | 2018-05-31 | 2020-04-14 | 阿里巴巴集团控股有限公司 | 数据库访问方法及装置 |
CN110019374B (zh) * | 2019-03-26 | 2021-03-12 | 杭州数梦工场科技有限公司 | 基于特征的数据项处理方法、装置、存储介质及计算机设备 |
US11500755B1 (en) * | 2019-05-01 | 2022-11-15 | Amazon Technologies, Inc. | Database performance degradation detection and prevention |
CN110245137B (zh) * | 2019-05-07 | 2023-06-27 | 创新先进技术有限公司 | 一种索引的处理方法、装置及设备 |
CN111782659B (zh) * | 2020-07-10 | 2023-10-17 | 东北大学 | 数据库索引创建方法、装置、计算机设备和存储介质 |
US11544294B2 (en) | 2020-12-10 | 2023-01-03 | Sap Se | Distributing tables in a distributed database using consolidated grouping sources |
CN113010596B (zh) * | 2021-03-19 | 2024-02-23 | 上海达梦数据库有限公司 | 一种动态性能视图的构建方法、装置、设备及存储介质 |
CN115640274A (zh) * | 2021-07-19 | 2023-01-24 | 中兴通讯股份有限公司 | 数据库模型动态调整的方法、设备及存储介质 |
CN113961637B (zh) * | 2021-12-23 | 2022-03-18 | 北京力控元通科技有限公司 | 一种基于数据库的数据融合方法、系统和电子设备 |
US20230315702A1 (en) * | 2022-03-30 | 2023-10-05 | Microsoft Technology Licensing, Llc | Constraint-based index tuning in database management systems utilizing reinforcement learning |
CN115062011A (zh) | 2022-05-23 | 2022-09-16 | 浙江工商大学 | 一种面向关系数据库的智能索引调优方法及系统 |
US20240193215A1 (en) * | 2022-12-07 | 2024-06-13 | Servicenow, Inc. | Computationally Efficient Traversal of Virtual Tables |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0934759A (ja) * | 1995-07-21 | 1997-02-07 | Omron Corp | チューニング情報作成装置およびチューニング情報作成方法 |
JPH10111819A (ja) | 1996-10-04 | 1998-04-28 | Hitachi Ltd | リレーショナルデータベースのインデックス自動付加システム |
US6560593B1 (en) * | 1999-07-20 | 2003-05-06 | Computer Associates Think, Inc. | Method and apparatus for viewing the effect of changes to an index for a database table on an optimization plan for a database query |
JP2001175678A (ja) | 1999-12-20 | 2001-06-29 | Toshiba Corp | データベース・チューニング装置、データベース・チューニング方法、および記録媒体 |
US7747606B2 (en) * | 2003-09-06 | 2010-06-29 | Oracle International Corporation | Automatic SQL tuning advisor |
US20060212429A1 (en) * | 2005-03-17 | 2006-09-21 | Microsoft Corporation | Answering top-K selection queries in a relational engine |
US20080052271A1 (en) * | 2006-08-26 | 2008-02-28 | Eric Lam | Method To Converge A Plurality Of SQL Statements Into SQL Skeletons For Enhanced Database Performance Analysis And Tuning |
JP2008204141A (ja) * | 2007-02-20 | 2008-09-04 | Nec Corp | インデックス構成提案システムおよび方法ならびにデータ解析装置およびプログラム |
CN101154241A (zh) * | 2007-10-11 | 2008-04-02 | 北京金山软件有限公司 | 一种数据检索方法及一种数据检索系统 |
US9213740B2 (en) * | 2007-10-11 | 2015-12-15 | Sybase, Inc. | System and methodology for automatic tuning of database query optimizer |
KR101083563B1 (ko) * | 2009-04-24 | 2011-11-14 | 엔에이치엔비즈니스플랫폼 주식회사 | 데이터베이스 관리 방법 및 시스템 |
US9009135B2 (en) * | 2010-01-29 | 2015-04-14 | Oracle International Corporation | Method and apparatus for satisfying a search request using multiple search engines |
JP5713652B2 (ja) * | 2010-12-13 | 2015-05-07 | キヤノン株式会社 | データ検索装置、方法、及びプログラム |
CN103390066B (zh) * | 2013-08-08 | 2016-02-17 | 上海新炬网络信息技术有限公司 | 一种数据库全局性自动化优化预警装置及其处理方法 |
-
2016
- 2016-04-19 JP JP2016083544A patent/JP6669571B2/ja active Active
- 2016-05-19 WO PCT/JP2016/002458 patent/WO2017183065A1/ja active Application Filing
- 2016-05-19 CN CN201680002045.XA patent/CN108027763B/zh active Active
- 2016-05-19 EP EP16805264.5A patent/EP3456360B1/en active Active
- 2016-05-19 US US15/317,815 patent/US10216773B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3456360A1 (en) | 2019-03-20 |
WO2017183065A1 (ja) | 2017-10-26 |
CN108027763A (zh) | 2018-05-11 |
US20190034463A1 (en) | 2019-01-31 |
CN108027763B (zh) | 2022-09-16 |
US10216773B2 (en) | 2019-02-26 |
EP3456360B1 (en) | 2020-09-30 |
JP2017194778A (ja) | 2017-10-26 |
EP3456360A4 (en) | 2019-10-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6669571B2 (ja) | リレーショナルデータベースのチューニング装置及び方法 | |
US11461319B2 (en) | Dynamic database query efficiency improvement | |
US11429584B2 (en) | Automatic determination of table distribution for multinode, distributed database systems | |
US7664778B2 (en) | SQL tuning sets | |
US10769123B2 (en) | Workload-driven recommendations for Columnstore and Rowstore indexes in relational databases | |
Zhang et al. | Towards high-throughput Gibbs sampling at scale: A study across storage managers | |
US20110078135A1 (en) | Database index monitoring system | |
Rabl et al. | Just can't get enough: Synthesizing Big Data | |
Li et al. | Rios: Runtime integrated optimizer for spark | |
CN111489135A (zh) | 一种稽核数据的分析管理系统及方法 | |
Li et al. | S/C: Speeding up Data Materialization with Bounded Memory | |
Wang et al. | QMapper for smart grid: Migrating SQL-based application to Hive | |
CN112380256B (zh) | 能源系统数据存取的方法、数据库、计算机可读存储介质 | |
Taipalus | Database management system performance comparisons: A systematic survey | |
Azadvar et al. | Quick generation of ssd performance models using machine learning | |
Chakkappen et al. | Efficient and scalable statistics gathering for large databases in Oracle 11g | |
JP4088164B2 (ja) | ドキュメントスコア計算方法及び装置並びにプログラム | |
CN113553320B (zh) | 数据质量监控方法及装置 | |
Khatiwada | Architectural issues in real-time business intelligence | |
JP2008204141A (ja) | インデックス構成提案システムおよび方法ならびにデータ解析装置およびプログラム | |
Chen et al. | An Offline Profile-Guided Optimization Strategy for Function Reordering on Relational Databases | |
Zhao et al. | Analysis and Practice of Automatic Indexing in Big Data | |
GATIMU | Enhancing data staging as a mechanism for fast data access | |
JP2013125429A (ja) | 分析対象決定装置 | |
Buda et al. | Towards realistic sampling: generating dependencies in a relational database |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200127 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6669571 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |