JP2021533495A - データリカバリー方法、装置、サーバ及びコンピュータ・プログラム - Google Patents

データリカバリー方法、装置、サーバ及びコンピュータ・プログラム Download PDF

Info

Publication number
JP2021533495A
JP2021533495A JP2021506468A JP2021506468A JP2021533495A JP 2021533495 A JP2021533495 A JP 2021533495A JP 2021506468 A JP2021506468 A JP 2021506468A JP 2021506468 A JP2021506468 A JP 2021506468A JP 2021533495 A JP2021533495 A JP 2021533495A
Authority
JP
Japan
Prior art keywords
backup
data
recovery
data packet
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021506468A
Other languages
English (en)
Other versions
JP7108782B2 (ja
Inventor
リ,ハイシアン
Original Assignee
テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド filed Critical テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド
Publication of JP2021533495A publication Critical patent/JP2021533495A/ja
Application granted granted Critical
Publication of JP7108782B2 publication Critical patent/JP7108782B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1469Backup restoration techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1474Saving, restoring, recovering or retrying in transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/219Managing data history or versioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/273Asynchronous replication or reconciliation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/80Database-specific techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Retry When Errors Occur (AREA)

Abstract

本開示は、データリカバリー方法、装置、サーバ及び記憶媒体を提供し、データベース技術の分野に属する。前記方法は、バックアップデータパケットのバックアップタイプを認識するステップと、認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップと、前記物理バックアップのデータに基づいてデータリカバリーを完了した後に、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップとを含み、前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指す。

Description

本出願は2018年11月30日に中国専利局に提出した、出願番号が2018114571961であり、発明の名称が「データリカバリー方法、装置、サーバ及び記憶媒体」である中国特許出願の優先権を主張し、その全ての内容は援用により本出願に結合される。
本出願は、データベース技術の分野に関し、特に、データリカバリー方法、装置、サーバ及びコンピュータ読み取り可能な記憶媒体に関する。
データ処理システムにおいて、特に、OLAP(Online Analytical Processing、オンライン分析処理)システム、データウェアハウス、ビッグデータ分析などのシナリオにおいて、データベースに大量のデータを保存することに係る。サービスは常に更新される可能性があるため、一つのデータ項目には複数の状態に対応するバージョンデータを論理的に含む。このように、一つのデータ項目の全状態(現在状態、遷移状態及び履歴状態)のデータが保存されることで、システムが履歴データを追跡し、データの価値(いずれのデータも価値があるため、履歴状態のデータが紛失不可)を十分に発掘することに寄与する。ただし、データベースは、バックアップデータに基づくリカバリープロセスにも係る可能性があり、前記複数の状態データを含むバックアップデータ間の関係が複雑であるため、全状態データをリカバリーすることは大きな挑戦である。
本出願の各実施例によれば、データリカバリー方法、装置、サーバ及び記憶媒体を提供する。
データリカバリー方法であって、サーバによって実行され、
バックアップデータパケットのバックアップタイプを認識するステップと、
認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップと、
前記物理バックアップのデータに基づいてデータリカバリーを完了した後に、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップとを含み、
前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指す。
好ましく、前記バックアップデータパケットのバックアップタイプを認識するステップは、
前記バックアップデータパケットにおけるファイル名に基づいて、前記ファイル名に対応するバックアップタイプを取得するサブステップと、又は、
前記バックアップデータパケットに担持されているタイプ識別子に基づいて、前記タイプ識別子に対応するバックアップタイプを取得するサブステップとを含む。
データリカバリー装置であって、
バックアップデータパケットのバックアップタイプを認識するための認識モジュールと、
認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うデータリカバリーモジュールとを含み、
前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指し、
前記データリカバリーモジュールは、さらに、前記物理バックアップのデータに基づいてデータリカバリーを完了した後に、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うために用いられる。
サーバであって、プロセッサー及びメモリを含み、当該メモリに少なくとも一つのコマンドが記憶され、前記したようなデータリカバリー方法による操作が実現されるように当該少なくとも一つのコマンドが当該プロセッサーによってロードされて実行される。
コンピュータ読み取り可能な記憶媒体であって、当該記憶媒体に少なくとも一つのコマンドが記憶され、前記したようなデータリカバリー方法による操作が実現されるように当該少なくとも一つのコマンドが当該プロセッサーによってロードされて実行される。
本出願の一つ又は複数の実施例の詳細は、以下の添付の図面及び説明において提供される。本出願の他の特徴、目的、及び利点は、明細書、添付図面、及び特許請求の範囲の記載により明瞭にする。
本出願の実施例に係るデータリカバリー方法の応用環境の模式図である。 本出願の実施例に係るデータリカバリー方法のフローチャートである。 本出願の実施例に係るページ比較図である。 本出願の実施例に係るデータリカバリー装置の構成模式図である。 本出願の実施例に係るサーバの構成模式図である。
本出願の目的、技術案及び利点をより明確にするために、以下は、添付の図面に基づいて、本出願の実施形態をより詳細に説明する。
本出願の実施例に係るデータベースには、データ項目を記憶するための複数のデータテーブルが記憶され、データ項目は1つ又は複数のバージョンを有してもよい。なお、当該データベースは、MVCC(Multi-Version Concurrency Control、マルチバージョン同時並行性制御)に基づく任意のタイプのデータベースであってもよい。本出願の実施例において、当該データベースのタイプは具体的に限定していない。なお、前記のデータベースにおけるデータは、状態属性に応じて、現在状態、遷移状態及び履歴状態の3つの状態を含み、当該3つの状態をまとめて「データの全状態」と称し、全状態データと略称し、全状態データにおける異なる状態属性のそれぞれはデータのライフサイクルの軌跡における状態を表記することに使用できる。
現在状態(Current State)は、データ項目の最新バージョンのデータであって、現段階にあるデータである。現段階にあるデータの状態は、現在状態と呼ばれる。
遷移状態(Transitional State)は、データ項目の最新バージョンでもなければ、履歴状態バージョンでもなく、現在状態から履歴状態への遷移過程にあり、遷移状態にあるデータは、半減データと呼ばれる。
履歴状態(Historical state)は、履歴におけるデータ項目の1つの状態であり、その値は現在値ではなく、古い値である。履歴段階にあるデータの状態は、履歴状態と呼ばれる。1つのデータ項目の履歴状態は複数を有してもよく、データの状態の遷移過程が反映される。履歴状態にあるデータは、読み取りのみが可能であり、変更又は削除は許容されない。
なお、データは、MVCCメカニズムにおいて、前記3つの状態が存在し、非MVCCメカニズムにおいて、履歴状態及び現在状態のみ存在してもよい。MVCC又はロック同時アクセス制御メカニズムにおいて、トランザクションが提出されたデータの新値は現在状態にある。MVCCメカニズムを例として、現在アクティブなトランザクションリストにおける最小のトランザクションの前のトランザクションによって生成されたデータは、その状態が履歴状態にある。ロック同時アクセス制御メカニズムにおいては、トランザクションが提出されると、その提出前のデータの値が履歴状態の値になり、即ち、データ項目の古い値が履歴状態にある。読み取られたバージョンにおいてまだアクティブなトランザクション(最新の関連トランザクションではない)が使用されるが、最新の関連トランザクションはデータ項目の値が変更され、その最新の値が既に現在状態にあり、読み取られた値が現在状態に対して履歴状態にある。よって、そのデータ状態は現在状態と履歴状態との間にあるため、遷移状態と称される。
例えば、MVCCメカニズムにおいて、UserテーブルのAアカウントの残高は、10元から20元にチャージされ、そして、15元が消費されて5元になる。この場合、金融機関Bは、データを読み取ってトランザクションをチェックすることを常に行っている。その後、Aはさらに20元をチャージして25元になる。この25元は、現在状態データであり、Bにより読み取られた5元は遷移状態にあり、残りの2つの値である20、10のそれぞれは、過去に存在していた状態であり、履歴状態データである。
好ましくは、本実施例において、前記データリカバリー方法は、図1に示される複数のサーバ101を含むハードウェア環境に適用され得る。図1に示すように、複数のサーバ101はネットワークを介して接続したり、データが分離されたりすることができる。前記ネットワークは、広域ネットワーク、メトロポリタンエリアネットワーク又はローカルエリアネットワークを含むが、これらに限定されない。本出願の実施例に係るデータリカバリー方法は、いずれかのサーバ101又は複数のサーバ101によって実行され得る。サーバ101においては、データベースシステムが動作することができる。これにより、例えば、データ記憶、データ照合などのデータサービスを提供することができる。当該データベースシステムは、サーバにおいて動作させられるデータベースエンジンにより作動することができる。
本出願の実施例にかかるデータリカバリー方法のフローチャートは、図2に示すように、当該実施例は、具体的に以下のステップを含む。
201において、バックアップデータパケットにおけるファイル名に応じて、バックアップタイプを認識する。
バックアップタイプによって、生成されたバックアップデータパケットにおけるファイルのファイル名が異なるため、バックアップデータパケットにおけるファイル名に基づいて当該バックアップデータパケットのバックアップタイプを認識することができ、その後、当該バックアップタイプに基づいて、異なったバックアップタイプにより、対応するデータリカバリーフローを行うことができる。他の実施形態においては、バックアップタイプの認識は、バックアップデータパケットに含まれるタイプ識別子を認識することにより行われる。即ち、当該バックアップデータパケットに担持されているタイプ識別子により、対応するバックアップタイプを取得する。当該タイプ識別子は、バックアップデータパケットにおける1つの指定ファイルに含まれてもよく、バックアップデータパケットのパケット名に担持されてもよい。本出願の実施例において、それを具体的に限定しない。なお、前記のタイプ識別子は、例えば、番号、文字列などのバックアップタイプを示すためのフィールドであってもよい。
ファイル名に基づくタイプ認識の例として、異なったバックアップタイプのバックアッププロセスによってそれぞれ得られたバックアップデータパケットに含まれるデータやファイル名が異なった。その例示、以下通りである。
物理バックアップにより得られたバックアップデータパケットには、現在状態データのみがあり、履歴状態データ又は遷移状態データがない。物理的にバックアップにより得られたバックアップデータパケットにおけるファイルのファイル名は、物理的バックアップにより得られたバックアップデータパケットにおけるファイルのファイル名には、物理的バックアップを示すためのフィールドが担持され得る。例えば、ファイル名は、PhMeta_00000001、PhData_00000001、Log_00000001などであってもよい。
論理バックアップにより得られたバックアップデータパケットは、現在状態データ、履歴状態データ及び遷移状態データを含む全状態データを含んでも良い。論理バックアップにより得られたバックアップデータパケットにおけるファイルのファイル名には、論理バックアップを示すためのフィールドが担持され得る。例えば、ファイル名は、LoMeta_00000001、LoData_00000001、HMeta_00000001、HData_00000001などであってもよい。
ハイブリッドバックアップは、論理バックアップ及び物理バックアップの混合によって得られたバックアップデータパケットであり、全状態データ(即ち、現在の状態データ、履歴状態データ及び遷移状態データを含む)であっても良い。ハイブリッドバックアップによって得られたバックアップデータパケットにおけるファイルのファイル名には、ハイブリッドバックアップを示すためのフィールドが担持され得、例えば、ファイル名は、Meta_00000001、Data_00000001、Log_00000001、HMeta_00000001、HData_00000001などであってもよい。
202において、認識されたバックアップタイプが論理バックアップである場合には、当該バックアップデータパケットのメタ情報ファイルに基づいて、ターゲットライブラリにおいてテーブルを作成するようにデータリカバリーを行う。
論理バックアップの場合には、バックアップデータパケットにおけるデータは、現在状態時点の値、履歴状態時点の値及び全状態時間帯の値であってもよく、これらの値のそれぞれは、異なったスナップショットのバックアッププロセスにより得られたものである。
第1のリカバリープロセスでは、バックアップデータパケットはノーマルトランザクションスナップショットに基づいて論理バックアップを行うことで得られたものであり、このようなタイプのバックアップのリカバリーについては、そのリカバリープロセスは以下のことを含む。即ち、バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、当該テーブルファイルのメタ情報に基づいてターゲットライブラリにテーブルを作成し、ターゲットライブラリに同名のテーブルが存在する場合、リカバリーに失敗し、その後、挿入操作(例えば、INSERT操作)を実行してデータリカバリーを行う。なお、このようなデータリカバリーは、「運行状態論理リカバリー」のみをサポートする。
第2のリカバリープロセスでは、バックアップデータパケットは、履歴トランザクションスナップショットに基づいて論理バックアップを行うことで得られたものであり、バックアップデータパケットに履歴状態及び遷移状態のバックアップデータを含む。このようなバックアップのリカバリーについては、リカバリーのプロセスは以下のことを含む。即ち、バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、ターゲットライブラリに同名のテーブルが存在しない場合、当該テーブルファイルのメタ情報に基づいてターゲットライブラリにおいてテーブルを作成し、その後、挿入操作(例えば、INSERT操作)を実行してデータリカバリーを行う。一方、ターゲットライブラリに同名のテーブルが存在する場合、テーブルの作成を行わず、データリカバリーのみを行う。好ましい実施形態において、当該ターゲットライブラリにおいて当該同名のテーブルにリカバリーすべきデータと同じデータが存在する場合、リカバリーに失敗し、当該ターゲットライブラリにおいて当該同名のテーブルにリカバリーすべきデータと同じデータが存在しない場合、当該リカバリーすべきデータに基づいてリカバリーする(例えば、リカバリーを強制的に実行する)。なお、主キーインデックスにより当該ターゲットライブラリにおいて同名のテーブルにリカバリーすべきデータと同じデータが存在するか否かをチェックし、リカバリーすべきデータの主キーインデックスと同じ主キーインデックスが存在する場合、リカバリーすべきデータと同じデータが存在していることを意味し、リカバリーに失敗した。一方、ターゲットライブラリにおいて同名のテーブルに当該主キーインデックスが存在しない場合、当該リカバリーすべきデータに基づいてリカバリーする。なお、このようなデータリカバリーは、「運行状態論理リカバリー」のみをサポートする。さらに、権限を区分するデータベースシステムにおいて、当該データリカバリーは、スーパーユーザー(Super User、最も権限のあるローカルユーザー)に限って行われる。
第3のリカバリープロセスであって、バックアップデータパケットは、履歴トランザクションスナップショット及びノーマルトランザクションスナップショットに基づいて論理バックアップを行うことで得られたものであり、バックアップデータパケットには現在状態、履歴状態及び遷移状態のバックアップデータを含む。このようなバックアップのリカバリーは、そのリカバリープロセスに前記の第1のリカバリープロセスと第2のリカバリープロセスを含むことができ、即ち、当該ノーマルトランザクションスナップショット及び当該履歴トランザクションスナップショットに対応するデータリカバリー方式を組み合わせてデータリカバリーを行い、データリカバリーを行う場合、リカバリー効率を向上するために、同名のテーブルのチェックを繰り返す必要がなく、同名のテーブルを1回チェックするだけで済む。
前記の当該ノーマルトランザクションスナップショット及び当該履歴トランザクションスナップショットに対応するデータリカバリー方式を組み合わせてデータリカバリーを行うことは、
バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、テーブルファイルのメタ情報に基づいてターゲットライブラリにおいてテーブルを作成し、テーブルに対して挿入操作を実行して、バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うこと、又は、
バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、ターゲットライブラリに同名のテーブルが存在しない場合、テーブルファイルのメタ情報に基づいてターゲットライブラリにおいてテーブルを作成し、挿入操作を実行してデータリカバリーを行い、ターゲットライブラリに同名のテーブルが存在する場合、同名のテーブル挿入操作を実行してデータリカバリーを行うことを含む。
なお、前記プロセスにおいて、テーブルの作成はオプションのステップであり、リカバリーコマンドにおいてパラメータにてテーブルの作成ステップを行うか否かを指定可能、例えば、RECOVERYコマンドにおいて、パラメータ「CREATE TABLE=Y/N」により指定し、Yは、作成を示し、Nは、非作成を示す。
単に論理バックアップによって得られたバックアップデータパケットは、前記の技術的プロセスを利用してリカバリーを個別に行うことができる。ただし、ハイブリッドバックアップのバックアップデータパケットには、論理バックアップを利用してバックアップしたデータも含み、このようなデータのリカバリーは、潜んでいる論理データリカバリーであり、そのリカバリー原理は同様である。
好ましく、データリカバリーの効率を向上するために、複数のテーブルに対してデータリカバリーを行う場合に、マルチスレッドで並行して行ってもよく、具体的に、バックアップデータパケットにおけるファイルを複数のスレッドで並行して読み取り、読み取られたリカバリーコマンドを並行して実行する。例えば、データファイルLoData_00000001、LoData_00000002などを並行して読み取り、各データファイル内のSQLコマンドを並行して実行してもよい。
好ましく、データリカバリーの効率を向上するために、履歴状態データについて、リカバリーを行う過程において、サーバはトランザクションに係る様々の一致性チェック操作を禁止する一方、直接にデータを履歴テーブルのデータページに格納する。
一例では、論理バックアップのリカバリーコマンドは1つのSQLステートメントであってもよく、1つのCLIフォーマットのコマンドであってもよい。例えば、‘/usr/bak/my_first_backup_02’バックアップデータパケットから‘/data/my_data_02’にデータをリカバリーする場合に、以下のコマンドを利用することができる。
即ち、RECOVERY FROM‘/usr/bak/my_first_backup_02’TO‘/data/my_data_02’;//物理バックアップのリカバリーは、CLIのRECOVERYコマンドを使用して空きディレクトリへリカバリーする。
RECOVERY FROM‘/usr/bak/my_first_backup_02’INCLUDE my_table01,my_table02;//論理バックアップのリカバリーは、1つの運行中のシステムからリカバリーする。
203において、サーバはCHECKPOINT操作を実行して、リカバリーされたデータをメモリからフラッシュし、データリカバリー操作を完了する。
なお、バックアップデータパケットが単に論理方式により得られたものであれば、データベースエンジンの運行中にリカバリーを行うことを許可することができ、「運行状態論理リカバリー」と称され、即ち、データベースエンジンの運行中に前記論理バックアップのリカバリーを行うことができ、リカバリーが完了した後に、データベースエンジンを起動する必要がないが、運行速度を向上するためにデータベースエンジンを再起動してもよいことが言うまでもない。つまり、サーバは、論理バックアップに対してリカバリー操作を行うことで得られたターゲットライブラリに基づいて、データベースシステムを再起動してデータサービスを提供することができ、本出願の実施例では、それを限定しない。一方、物理バックアップ方式のバックアップは、通常、データベースエンジンが非運行状態にある場合にのみ実行され、「非運行状態物理リカバリー」と称される。また、ハイブリッド方式に基づくバックアップデータは、運行状態においてリカバリーされたり、セミオフラインの場合にリカバリーされたりしてもよく。セミオフラインの場合とは、物理バックアップのデータがオフライン状態においてリカバリーされ済み、その後、サーバが起動して、ログ、及び論理バックアップにより得られたデータを引き続きリカバリーすることを指す。
204において、認識したバックアップタイプが物理バックアップである場合に、当該バックアップデータパケットを新しいデータディレクトリにリカバリーする。
一例において、物理バックアップのリカバリーコマンドは、1つのCLI(command-line interface、コマンドラインインターフェース)フォーマットのコマンドであってもよい。
205において、データがリカバリーされると、サーバは、バックアップデータパケットにおけるログファイルを実行する。
バックアップされた現在状態データは、データの一致性を保証するために、さらに、ログファイルをバックアップする必要があり、即ち、データをリカバリーする場合に、ログファイルに基づいてリカバリーする必要がある。一つの好ましい実施形態において、当該ログファイルを実行するプロセスは、バックアップ時点のデータの一致性を実現するように、ARIESアルゴリズム原理を使用して、ログファイル(例えばREDOログ)に基づくリカバリー作業を行ってもよい。
206において、サーバはログファイルの実行を完了した後に、CHECKPOINT操作を実行して、リカバリーされたデータをメモリからフラッシュし、データリカバリー操作を完了する。
207において、サーバは、新しいデータディレクトリに基づいてデータベースエンジンを起動して、データサービスの提供を開始し、終了する。
前記のステップ204ないし207までのリカバリープロセスは、バックアップデータパケットを空きデータディレクトリにリカバリーし、サーバは、物理バックアップをリカバリー操作を行うことで得られた新しいデータディレクトリに基づいてデータベースエンジンを起動し、データサービスの提供を開始することができる。
208において、認識したバックアップタイプがハイブリッドバックアップである場合に、サーバは当該バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行う。
データリカバリーを開始する前に、サーバは、ターゲットディレクトリが空きであるか否かをチェックし、空きではない場合、エラーを報告して終了する。好ましく、幾つかのデータベースシステムは、さらに、バックアップするときの環境にリカバリーするように、先にバックアップデータパケットにおける制御ファイルに基づいてデータリカバリーを行う必要がある。例えば、ARIESアルゴリズム原理を使用して、制御ファイルなどの必要なデータのリカバリーを行ってもよい。
物理バックアップのデータは、ファイルコピー方式が利用される。このような物理バックアップのデータは、バックアップの際にブロックコピー方式で行われたため、バックアップされると、独立したデータファイルが形成されている。従って、リカバリーを行う場合、ファイルコピー方式を直接利用することにより実現される。具体的に、当該ファイルコピーに基づくデータリカバリープロセスは、ファイルコピー方式により、当該バックアップデータパケットにおける物理バックアップのデータを、ファイル名及びテーブル名に従ってターゲットディレクトリにおける対応する位置にコピーすることを含む。例えば、1つのデータファイルが、元のシステムにおけるサブディレクトリmydataにある場合、ターゲットディレクトリにおいて対応するサブディレクトリmydataを作成し、そして、対応するデータファイルをこのサブディレクトリにコピーする必要があり、ファイル名はMeta系、即ち、バックアップするとき元のシステムにおける名称で命名されるため、リカバリーするときにデータの一致性が保証される。
データリカバリーの効率を向上するために、バックアップデータパケットにおける物理バックアップのデータに対して、並行方式により、複数のデータファイルを同時に指定のリカバリーターゲットディレクトリにおける対応する位置にコピーする。このような物理バックアップのデータは、バックアップされると、それぞれ独立したデータファイルが形成されるため、リカバリーするときに、直接に並行コピーの方式によりデータリカバリーを行うことができる。
209において、データがリカバリーされると、サーバはバックアップデータパケットにおけるログファイルを実行する。
210において、サーバはログファイルの実行を完了した後に、CHECKPOINT操作を実行し、リカバリーされたデータをメモリからフラッシュし、データリカバリー操作を完了する。
211において、サーバは、物理バックアップに対してリカバリー操作を行うことで得られたターゲットディレクトリに基づいてデータベースエンジンを起動し、データサービスの提供を開始する。
なお、サーバがデータベースエンジンを起動している過程に、「システム故障のリカバリー」プロセスの実行を禁止することができる。
前記ステップ208〜211における物理バックアップのリカバリープロセスは、さらに、前記の実施例に係る物理バックアップのリカバリーに関して記載された技術内容を参考することができ、ここで、重複な説明を省略する。
212において、サーバは、ターゲットディレクトリにおいてデータベースエンジンを起動すると、当該バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行う。
当該物理バックアップのデータに基づいてデータリカバリーを完了した後に、論理リカバリーコマンドを作成し、当該論理リカバリーコマンドを実行し、当該バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うことをトリガーする。例えば、潜んでいる論理リカバリーSQLステートメントRECOVERYを作成してもよく、前記論理バックアップのリカバリーと同様な原理を利用しているため、ここで重複な説明を省略する。
バックアップデータパケットは、複数のtarパケットからなる1つのバックアップデータパケットであってもよく、この場合、先に当該複数のtarパケットを同一の一時ディレクトリに展開し、そして、一時ディレクトリに基づいてデータリカバリーを行う。一実施形態において、一時ディレクトリを、リカバリーコマンドにおけるリカバリーデータソースサブステートメントのコンテンツ、例えば、一時ディレクトリをRECOVERYコマンドにおけるFROMサブステートメントのコンテンツとして、当該RECOVERYコマンドを実行してデータリカバリーを行う。
213において、サーバは、論理バックアップのデータに対してデータリカバリーを完了した後に、CHECKPOINT操作を再実行する。
なお、データベースシステムにおけるトータルデータのリカバリーは、一般的に、オフラインリカバリーによって行われることができる。従って、CLIのBACKUPコマンドのみを利用してリカバリーを実行することができる一方、非トータルデータのリカバリーは、オフライン場合におけるリカバリー及びオンライン場合におけるリカバリーの両方をサポートすることができる。
また、幾つかの可能な実施形態において、幾つかのデータベースエンジンのオペレーティングシステムは、ユーザーによって権限の違いがあるため、リカバリー操作を行うユーザー権限を制限してもよい。例えば、リカバリーコマンドを実行させるユーザーはデータベースエンジンのオペレーティングシステム起動権限を有しなければならい。一方、幾つかの好ましい実施形態において、データベース内部に権限の違いがあり、リカバリーデータの網羅性ために、論理データをリカバリーする場合、ユーザー権限のチェックを行わず、リカバリー操作を行うことを許可する。
好ましく、データの一致性を保証するために、データリカバリーを行った後に、さらに、データの可視性を判断することにより、読み取られてユーザーに表示可能なデータを特定する。例えば、ブロック方式によりバックアップされたデータの場合、1つのページには、一部のデータが有効データ(バックアップするときに指定されたバックアップ条件、例えば、WHERE条件を満たす)であり、残りの無効データ(バックアップするときに指定されたバックアップ条件を満たさないが、ブロックバックアップ方式によって冗長にバックアップされる)は、読み取られるべきではない。
前記の要素に基づいて、データリカバリーを行う場合に、相応的にデータファイルのコピープロセスは、簡単にブロックコピーを行うことではなく、幾つかの場合に分けて処理する。
1、バックアップするときにバックアップ条件が無い(例えば、バックアップするときにWHERE条件なし)場合、バックアップデータパケットのバックアップオブジェクトは、全テーブル空間であり、追加の操作が無く、直接にファイルコピー及び/又はデータブロックコピーを行うことができる。
2、バックアップするときにバックアップ条件付き(例えば、バックアップするときにWHERE条件付き)、且つバックアップ条件が全てのデータファイルをカバーすることができる場合、追加の操作がなく、直接にファイルコピー及び/又はデータブロックコピーを行うことができる。
3、バックアップするときにバックアップ条件付き(例えば、バックアップするときにWHERE条件付き)、且つバックアップ条件が全てのデータファイルをカバーすることができず、バックアップするときにファイルコピー又はブロックコピー方式によりバックアップが行われたとともに、図3に示すようにクロスページ識別ビットが設置されている。この場合、データリカバリーを行う場合に、バックアップ条件に応じて(ハイブリッドバックアップを例として、WHERE条件はメタ情報ファイル、HMeta_00000001ファイルに記憶されてもよい)、データブロック毎に認識及びフィルタリングし、バックアップ条件を満たさない場合、バージョンのそれぞれは、「データ有効ビット」において対応する1つのビットが1である。データリカバリーが完了した後に、データ読み取り操作により読み取られたバージョンのそれぞれは、そのデータ有効ビットが当該バージョンが視認不可であることを示す場合、当該バージョンを返さず、データ有効ビットが当該バージョンが視認可能であることを示す場合、当該バージョンを返し、例えば、それに対応する「データ有効ビット」のビットの値が1である場合、当該バージョンを上へ返さず、それに対応する「データ有効ビット」のビットの値が1ではない場合、当該バージョンを上へ返して、当該バージョンがユーザーに視認される。データブロックの間に直接関連関係がないため、データをリカバリーする場合に、リカバリー効率を向上するために、ブロックを単位として、データ識別ビットを並行して設置してもよい。通常、データバックアップは、バックアップテーブルの全体をメインにして、リカバリーするときに認識及びフィルタリングプロセスによって引き起こされ易い効率課題を回避することができる。
データリカバリーが完了した後に、前記のデータを読み取る過程において、図3に示すように、データ有効ビットは2つの部分に分けられる。一実施形態において、当該データ有効ビットは、2つのビットで示してもよく、そのうちの一方の部分はデータ識別ビットであり、当該バージョンの表示可否を示すために用いられ、1つのビットで示すことができる。他方の部分はクロスページ識別ビットであり、本ベージデータがクロスページであるか否かを示し、残りの一つのビットであり、1でクロスページを示し、0がクロスページではないことを示す。クロスページ識別ビットが存在する場合、データ捜索する時に停止することができず、次のページを継続して読み込んでページ解析を行う。
本出願の実施例は、時制データベースを基に、時制データバックアップに基づくリカバリー方法を提案し、全状態データにおける任意の状態のデータをバックアップした後に、例えば、論理方式又は物理方式及びハイブリッドでバックアップした後に、データリカバリーを実現し、時制データの有効記憶及び安全信頼性を保証し、有効な保障を提供することができる。
図2のフローチャートにおける各ステップは、矢印の指示に従って順に表示されているが、これらのステップは必ずしも矢印で指示した順に実行されるわけではない。本明細書に明確な記載があることを除外、これらのステップの実行は、厳格に順に行われるものではなく、これらのステップは他の順に従って実行されてもよい。そして、図2における少なくとも一部のステップは複数のサブステップ又は複数の段階を含んでもよく、これらのサブステップ又は段階は、必ずしも同じタイミングで実行されて完了するわけではなく、異なったタイミングで実行されてもよく、これらのサブステップ又は段階の実行順序も必ず順に行われるわけではなく、他のステップ又は他のステップのサブステップ又は段階における少なくとも一部に対して、順番にまたは交替に実行されてもよい。
図4は、本出願の実施例にかかるデータリカバリー装置の構成模式図である。図4を参照して、当該装置は、
バックアップデータパケットのバックアップタイプを認識するための認識モジュール401と、
認識したバックアップタイプがハイブリッドバックアップである場合に、当該バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うためのデータリカバリーモジュール402と、を含み、
当該ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指し、
当該データリカバリーモジュール402は、当該物理バックアップのデータに基づいてデータリカバリーを完了した後に、当該バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うために用いられる。
一つの好ましい実施形態において、データリカバリーモジュール402は、ファイルコピー方式により、当該バックアップデータパケットにおける物理バックアップのデータを、ファイル名及びテーブル名に従ってターゲットディレクトリにおける対応する位置にコピーするために用いられる。
一つの好ましい実施形態において、当該バックアップデータパケットにおける物理バックアップのデータをコピーする場合、並行の方式により行う。
一つの好ましい実施形態において、当該装置は、
当該物理バックアップのデータに基づいてデータリカバリーを完了した後に、論理リカバリーコマンドを作成し、当該論理リカバリーコマンドを実行し、当該バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うことをトリガーするトリガーモジュールをさらに含む。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、認識したバックアップタイプが論理バックアップである場合に、当該バックアップデータパケットのメタ情報ファイルに基づいて、ターゲットライブラリにおいてテーブルを作成し、データリカバリーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、当該バックアップデータパケットがノーマルトランザクションスナップショットに基づいて得られたものである場合、当該バックアップデータパケットのメタ情報ファイルからテーブルファイルのメタ情報を読み取り、当該テーブルファイルのメタ情報に基づいてターゲットライブラリにおいてテーブルを作成し、挿入操作を実行してデータリカバリーを行い、当該ターゲットライブラリに同名のテーブルが存在する場合、リカバリーに失敗した。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、当該バックアップデータパケットが履歴トランザクションスナップショットに基づいて得られたものである場合、当該バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、前記ターゲットライブラリに同名のテーブルが存在しない場合、当該テーブルファイルのメタ情報に基づいてターゲットライブラリにテーブルを作成し、挿入操作を実行してデータリカバリーを行い、当該ターゲットライブラリに同名のテーブルが存在する場合、テーブルの作成を行わず、データリカバリーのみを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、当該バックアップデータパケットがノーマルトランザクションスナップショット及び履歴トランザクションスナップショットに基づいて得られたものである場合、当該ノーマルトランザクションスナップショット及び当該履歴トランザクションスナップショットに対応するデータリカバリー方式を組み合わせてデータリカバリーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、当該ターゲットライブラリにおいて当該同名のテーブルにリカバリーすべきデータと同じデータが存在する場合、リカバリーに失敗し、当該ターゲットライブラリにおいて当該同名のテーブルにリカバリーすべきデータと同じデータが存在しない場合、当該リカバリーすべきデータに基づいてリカバリーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、主キーインデックスにより当該ターゲットライブラリにおいて当該同名のテーブルに当該リカバリーすべきデータと同じデータが存在するか否かをチェックする。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、認識したバックアップタイプが物理バックアップである場合、当該バックアップデータパケット及び新しく作成されたデータディレクトリに基づいて、データリカバリーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、マルチスレッド並行の方式により、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、マルチスレッド並行の方式により、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、データリカバリーを行う過程において、バックアップするときにバックアップ条件がない場合、ファイルコピー又はブロックコピーを行い、
バックアップするときにバックアップ条件付き、且つ当該バックアップ条件が全てのデータファイルをカバーすることができる場合、ファイルコピー又はブロックコピーを行う。
一つの好ましい実施形態において、当該データリカバリーモジュール402は、さらに以下のことに用いる。即ち、データリカバリーを行う過程において、バックアップするときにファイルコピー又はブロックコピー方式により行い、且つバックアップするときにバックアップ条件付き、当該バックアップ条件が全てのデータファイルをカバーすることができない場合、バックアップデータパケットのメタ情報ファイルにマークされている無効データに基づいてデータリカバリーを行う。
一つの好ましい実施形態において、当該認識モジュール401は、さらに以下のことに用いる。即ち、当該バックアップデータパケットにおけるファイル名に基づいて、当該ファイル名に対応するバックアップタイプを取得し、又は、当該バックアップデータパケットに担持されているタイプ識別子に基づいて、当該タイプ識別子に対応するバックアップタイプを取得する。
一つの好ましい実施形態において、当該装置は、
データリカバリーが完了した後に、データ読み取り操作によりいずれかのバージョンを読み取った場合に、当該バージョンのデータ有効ビットが当該バージョンが視認不可であることを示す場合、当該バージョンを返さず、当該バージョンのデータ有効ビットが当該バージョンが視認可能であることを示す場合、当該バージョンを返すための読み取りモジュールをさらに含む。
なお、前記の実施例にかかるデータリカバリー装置は、データをリカバリーする場合に、前記各機能モジュールに対する区分を例にして説明したが、実際の適用において、必要に応じて、前記機能を異なった機能モジュールに割り当てて完了させることができる。即ち、装置の内部構成を異なった機能モジュールに分割して、上記した全て又は一部の機能を完了させる。また、前記の実施例にかかるデータリカバリー装置は、データリカバリー方法実施例と同一技術思想に属し、具体的な実現プロセスの詳細は、方法実施例を参照することができ、ここで重複な説明を省略する。
図5は、本出願の実施例にかかるサーバの構成模式図であり、当該サーバ500は、配置又は性能によっては大きい相違が生じる可能性があり、1つ又は1つ以上のプロセッサー(central processing units、CPU)501及び1つ又は1つ以上のメモリ502を含み、その中、前記メモリ502に少なくとも一つのコマンドが記憶され、前記少なくとも一つのコマンドが前記プロセッサー501によってロードされて実行されると、前記の各方法実施例にかかる方法が実現される。勿論、当該サーバは、入出力を行うように、有線又は無線ネットワークインターフェース、キーボード及び入出力インターフェースなどの部品をさらに有してもよく、当該サーバは、他の機器機能を実現するための構成要素をさらに含んでもよく、ここで重複な説明を省略する。
本出願の実施例において、さらに、コンピュータ読み取り可能な記憶媒体を提供し、当該コンピュータ読み取り可能な記憶媒体はサーバに適用され、当該コンピュータ読み取り可能な記憶媒体に少なくとも一つのコマンド、少なくとも一つのプログラム、コードセット又はコマンドセットが記憶され、当該コマンド、当該プログラム、当該コードセット又は当該コマンドセットはプロセッサーによってロードされて実行されると、前記の実施例に係るデータリカバリー方法においてサーバにより実行される操作が実現される。
なお、本出願の実施例に係るバージョンの表示可否とは、バックアップタスクにおける当該バージョンに対応するトランザクションスナップショットのタイミングがトランザクションにより読み取られ得るか否かを指す。データテーブル内の任意のタプルのいずれかのバージョンについて、トランザクションスナップショット及び前記バージョンの作成タイミング、削除タイミング及び前記バージョンの提出タイミングに基づいて、前記バージョンの表示可否を特定する。サーバは、データテーブルから一つのタプルを読み取る度に、当該タプルのライフサイクル情報、即ち、当該バージョンの作成タイミング、削除タイミング及び前記バージョンの提出タイミングなどの情報を読み取ることができ、履歴時間帯の可視性に基づいて判断することを例とする。即ち
(一):当該バージョンが挿入操作生成である場合、且つ当該作成タイミングが当該履歴時間帯の開始タイミングの前にあり、当該提出タイミングが当該履歴時間帯の間にある場合、当該バージョンが視認可能であると特定し、又は、当該作成タイミング及び当該提出タイミングの両方が当該履歴時間帯の間にある場合、当該バージョンが視認可能であると特定する。
(二):当該バージョンが削除操作生成である場合、当該削除タイミングが当該履歴時間帯の開始時点の前にあり、当該提出タイミングが当該履歴時間帯の間にある場合、当該バージョンが視認可能であると特定し、又は、当該削除タイミング及び当該提出タイミングの両方が当該履歴時間帯の間にある場合、当該バージョンが視認可能であると特定する。
(三):当該バージョンが更新操作生成である場合、当該作成タイミングが当該履歴時間帯の開始タイミングの前にあり、当該提出タイミングが当該履歴時間帯の間にある場合、当該バージョンが視認可能であると特定し、又は、当該作成タイミングが当該履歴時間帯の開始時点の後にあり、当該提出タイミングが当該履歴時間帯の間にある場合、当該バージョンが視認可能であると特定する。
当業者が理解できるように、前記実施例の全てまたは一部のステップを実現することは、ハードウェアにより完成されてもよく、プログラムにより、関するハードウェアに命令するように完成されてもよく、前記プログラムはコンピュータ可読記憶媒体に記憶され、前記言及された記憶媒体は、読み取り専用メモリ、磁気ディスクまたは光ディスクなどであってもよい。
以上の実施例の各技術特徴に対して、任意の組み合わせを行ってもよく、記載を簡潔にするために、前記実施例の各技術特徴の全ての可能な組み合わせを記載していないが、これらの技術特徴の組み合わせはいずれも、矛盾が存在しない限り、本明細書の記載範囲であると認められる。
以上の実施例は、本出願のいくつかの実施形態のみを表現し、その記載は具体的且つ詳しいが、そのため、発明の特許範囲に対する限定と理解されることができない。指摘すべきこととして、当業者にとって、本出願の構想から逸脱しない前提で、さらに、若干の変形及び改良を行ってもよく、これらはいずれも本出願の保護範囲に当該当すべきである。従って、本出願特許の保護範囲は、添付の請求項を基準とする。

Claims (20)

  1. サーバによって実行されるデータリカバリー方法であって、
    バックアップデータパケットのバックアップタイプを認識するステップと、
    認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップと、
    前記物理バックアップのデータに基づいてデータリカバリーを行うステップを完了した後に、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップとを含み、
    前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むこと指す
    ことを特徴とする方法。
  2. 前記認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップは、
    ファイルコピー方式により、前記バックアップデータパケットにおける物理バックアップのデータを、ファイル名及びテーブル名に従ってターゲットディレクトリにおける対応する位置にコピーすることを含むことを特徴とする請求項1に記載の方法。
  3. 並行方式により、前記バックアップデータパケットにおける物理バックアップのデータをターゲットディレクトリにおける対応する位置にコピーするステップをさらに含むことを特徴とする請求項1に記載の方法。
  4. 前記の物理バックアップのデータに基づいてデータリカバリーを行うステップを完了した後、
    論理リカバリーコマンドを作成するステップと、
    前記論理リカバリーコマンドを実行して、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップをトリガーするステップとをさらに含むことを特徴とする請求項1〜3の何れか1項に記載の方法。
  5. 認識したバックアップタイプが論理バックアップである場合に、前記バックアップデータパケットのメタ情報ファイルに基づいて、ターゲットライブラリにおいてテーブルを作成し、データリカバリーを行うステップをさらに含むことを特徴とする請求項1に記載の方法。
  6. 前記バックアップデータパケットのメタ情報ファイルに基づいて、ターゲットライブラリにおいてテーブルを作成し、データリカバリーを行うステップは、
    前記バックアップデータパケットがノーマルトランザクションスナップショットに基づいて得られたものである場合に、前記バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取るサブステップと、
    前記テーブルファイルのメタ情報に基づいて前記ターゲットライブラリにおいて前記テーブルを作成するサブステップと、
    前記テーブルに対して挿入操作を実行して、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うサブステップとを含むことを特徴とする請求項5に記載の方法。
  7. 前記バックアップデータパケットのメタ情報ファイルに基づいて、ターゲットライブラリにおいてテーブルを作成し、データリカバリーを行うステップは、
    前記バックアップデータパケットが履歴トランザクションスナップショットに基づいて得られたものである場合に、前記バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取るサブステップと、
    前記ターゲットライブラリに同名のテーブルが存在しない場合、前記テーブルファイルのメタ情報に基づいてターゲットライブラリにおいてテーブルを作成し、挿入操作を実行してデータリカバリーを行うサブステップと、
    前記ターゲットライブラリに同名のテーブルが存在する場合、前記同名のテーブルに対して挿入操作を実行してデータリカバリーを行うサブステップとを含むことを特徴とする請求項5に記載の方法。
  8. 前記バックアップデータパケットのメタ情報ファイルに基づいて、ターゲットライブラリにおいてテーブルを作成し、データリカバリーを行うステップは、
    前記バックアップデータパケットがノーマルトランザクションスナップショット及び履歴トランザクションスナップショットに基づいて得られたものである場合は、
    前記バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、前記テーブルファイルのメタ情報に基づいて前記ターゲットライブラリにおいて前記テーブルを作成し、前記テーブルに対して挿入操作を実行して、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うサブステップ、又は
    前記バックアップデータパケットのメタ情報ファイルから、テーブルファイルのメタ情報を読み取り、前記ターゲットライブラリに同名のテーブルが存在しない場合、前記テーブルファイルのメタ情報に基づいてターゲットライブラリにおいてテーブルを作成し、挿入操作を実行してデータリカバリーを行い、前記ターゲットライブラリに同名のテーブルが存在する場合、前記同名のテーブルに対して挿入操作を実行してデータリカバリーを行うサブステップを含むことを特徴とする請求項5に記載の方法。
  9. 前記ターゲットライブラリに同名のテーブルが存在する場合、前記同名のテーブルに対して挿入操作を実行してデータリカバリーを行うサブステップは、
    前記ターゲットライブラリにおいて前記同名のテーブルにリカバリーすべきデータと同じデータが存在しない場合、前記リカバリーすべきデータに基づいてリカバリーすることを含むことを特徴とする請求項7に記載の方法。
  10. 認識したバックアップタイプが物理バックアップである場合に、前記バックアップデータパケット及び新しく作成されたデータディレクトリに基づいて、データリカバリーを行うステップをさらに含むことを特徴とする請求項1に記載の方法。
  11. 前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップは、
    マルチスレッド並行の方式により、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うサブステップを含むことを特徴とする請求項1に記載の方法。
  12. 前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップは、
    マルチスレッド並行の方式により、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うサブステップを含むことを特徴とする請求項1に記載の方法。
  13. データリカバリーを行う過程において、バックアップする場合にバックアップ条件がない場合、ファイルコピー又はブロックコピーを行うステップと、
    バックアップする場合にバックアップ条件があり、且つ前記バックアップ条件が全てのデータファイルをカバーすることができる場合、ファイルコピー又はブロックコピーを行うステップとをさらに含むことを特徴とする請求項1に記載の方法。
  14. データリカバリーを行う過程において、バックアップする場合にファイルコピー又はブロックコピー方式により行われ、且つ、バックアップする場合にバックアップ条件があり、前記バックアップ条件が全てのデータファイルをカバーすることができない場合、バックアップデータパケットにおけるメタ情報ファイル中にマークされた無効データに基づいて、データリカバリーを行うステップをさらに含むことを特徴とする請求項1に記載の方法。
  15. データリカバリーを行った後、データ読み取り操作によりいずれかのバージョンが読み取られる場合は、
    前記バージョンのデータ有効ビットが前記バージョンが視認不可であることを示すと、前記バージョンを返さず、
    前記バージョンのデータ有効ビットが前記バージョンが視認可能であることを示すと、前記バージョンを返すステップをさらに含むことを特徴とする請求項1に記載の方法。
  16. データリカバリー装置であって、
    バックアップデータパケットのバックアップタイプを認識するための認識モジュールと、
    認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うデータリカバリーモジュールとを含み、
    前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指し、
    前記データリカバリーモジュールは、さらに、前記物理バックアップのデータに基づいてデータリカバリーを完了した後に、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うために用いられることを特徴とする装置。
  17. サーバであって、プロセッサー及びメモリを含み、
    前記メモリに少なくとも一つのコマンドが記憶され、前記少なくとも一つのコマンドが当該プロセッサーによってロードされて実行されると、前記サーバに以下のステップを実行させ、即ち、
    バックアップデータパケットのバックアップタイプを認識するステップと、
    認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップと、
    前記物理バックアップのデータに基づいてデータリカバリーを完了した後に、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップとを含み、
    前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指すことを特徴とするサーバ。
  18. 前記少なくとも一つのコマンドが当該プロセッサーによってロードされて実行されると、前記サーバに以下のステップをさらに、実行させ、即ち、
    ファイルコピー方式により、前記バックアップデータパケットにおける物理バックアップのデータをファイル名及びテーブル名に従ってターゲットディレクトリにおける対応する位置にコピーするステップを含むことを特徴とする請求項17に記載のサーバ。
  19. コンピュータ・プログラムであって、
    少なくとも一つのコマンドが含まれ、前記少なくとも一つのコマンドがプロセッサーによってロードされて実行されると、前記プロセッサーに以下のステップを実行させ、即ち、
    バックアップデータパケットのバックアップタイプを認識するステップと、
    認識したバックアップタイプがハイブリッドバックアップである場合に、前記バックアップデータパケットにおける物理バックアップのデータに基づいてデータリカバリーを行うステップと、
    前記物理バックアップのデータに基づいてデータリカバリーを完了した後、前記バックアップデータパケットにおける論理バックアップのデータに対してデータリカバリーを行うステップとを含み、
    前記ハイブリッドバックアップとは、バックアッププロセスに物理バックアップと論理バックアップとを含むことを指すことを特徴とするコンピュータ・プログラム。
  20. 前記少なくとも一つのコマンドが当該プロセッサーによってロードされて実行されると、前記プロセッサーに以下のステップをさらに、実行させ、即ち、
    ファイルコピー方式により、前記バックアップデータパケットにおける物理バックアップのデータをファイル名及びテーブル名に従ってターゲットディレクトリにおける対応する位置にコピーするステップを含むことを特徴とする請求項19に記載のコンピュータ・プログラム。
JP2021506468A 2018-11-30 2019-11-29 データリカバリー方法、装置、サーバ及びコンピュータ・プログラム Active JP7108782B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201811457196.1 2018-11-30
CN201811457196.1A CN110209527B (zh) 2018-11-30 2018-11-30 数据恢复方法、装置、服务器以及存储介质
PCT/CN2019/121916 WO2020108604A1 (zh) 2018-11-30 2019-11-29 数据恢复方法、装置、服务器以及计算机可读存储介质

Publications (2)

Publication Number Publication Date
JP2021533495A true JP2021533495A (ja) 2021-12-02
JP7108782B2 JP7108782B2 (ja) 2022-07-28

Family

ID=67779952

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021506468A Active JP7108782B2 (ja) 2018-11-30 2019-11-29 データリカバリー方法、装置、サーバ及びコンピュータ・プログラム

Country Status (5)

Country Link
US (1) US11531594B2 (ja)
EP (1) EP3822793A4 (ja)
JP (1) JP7108782B2 (ja)
CN (1) CN110209527B (ja)
WO (1) WO2020108604A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110209527B (zh) * 2018-11-30 2023-05-05 腾讯科技(深圳)有限公司 数据恢复方法、装置、服务器以及存储介质
CN111125060B (zh) * 2019-12-17 2023-10-31 中国联合网络通信集团有限公司 一种数据库管理方法、系统、设备及存储介质
CN112882861B (zh) * 2021-02-18 2023-11-07 北京思特奇信息技术股份有限公司 一种业务配置数据装载与恢复系统及方法
CN113821382B (zh) * 2021-11-24 2022-03-01 西安热工研究院有限公司 一种实时数据库数据处理方法、系统和设备
CN114896102B (zh) * 2022-05-23 2022-11-25 北京智博万维科技有限公司 一种数据保护的时间点恢复方法与系统
CN116467037B (zh) * 2023-06-09 2023-09-22 成都融见软件科技有限公司 一种图形用户界面工作状态的恢复方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004139217A (ja) * 2002-10-16 2004-05-13 Hewlett Packard Co <Hp> データベースの移行方法
JP2006092553A (ja) * 2004-09-22 2006-04-06 Microsoft Corp 合成バックアップおよびリストアの方法およびシステム
JP2006106868A (ja) * 2004-09-30 2006-04-20 Toshiba Corp ファイル管理機能を備えたファイルシステム及びファイル管理方法
JP2011053780A (ja) * 2009-08-31 2011-03-17 Oki Networks Co Ltd 復旧システム、復旧方法及びバックアップ制御システム
JP2014137711A (ja) * 2013-01-17 2014-07-28 Fujitsu Ltd ストレージ装置、バックアッププログラム、およびバックアップ方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6938180B1 (en) * 2001-12-31 2005-08-30 Emc Corporation Logical restores of physically backed up data
US7389314B2 (en) * 2004-08-30 2008-06-17 Corio, Inc. Database backup, refresh and cloning system and method
US8990161B1 (en) * 2008-09-30 2015-03-24 Emc Corporation System and method for single segment backup
US8099572B1 (en) * 2008-09-30 2012-01-17 Emc Corporation Efficient backup and restore of storage objects in a version set
US8639665B2 (en) * 2012-04-04 2014-01-28 International Business Machines Corporation Hybrid backup and restore of very large file system using metadata image backup and traditional backup
US9183205B1 (en) * 2012-10-05 2015-11-10 Symantec Corporation User-based backup
CN103942117B (zh) * 2013-01-21 2018-03-23 中国移动通信集团河南有限公司 一种数据备份方法、装置及系统
US9424265B1 (en) * 2013-05-30 2016-08-23 Emc Corporation Method and system for backing up and restoring a multi-user relational database management system
CN104657382B (zh) 2013-11-21 2018-09-14 阿里巴巴集团控股有限公司 用于MySQL主从服务器数据一致性检测的方法和装置
CN104850598B (zh) * 2015-04-28 2017-11-14 江苏瑞中数据股份有限公司 一种实时数据库备份恢复方法
CN106354583B (zh) * 2016-08-30 2019-09-17 广州鼎甲计算机科技有限公司 一种MySQL数据库的热备份方法与系统
CN106658753B (zh) * 2016-09-14 2020-01-17 Oppo广东移动通信有限公司 一种数据迁移方法及终端设备
CN108319623B (zh) * 2017-01-18 2021-10-22 华为技术有限公司 一种数据重分布方法、装置及数据库集群
CN107145403B (zh) * 2017-04-20 2020-06-30 浙江工业大学 面向Web开发环境的关系型数据库数据回溯方法
CN107179965B (zh) * 2017-04-25 2020-05-19 北京潘达互娱科技有限公司 数据库恢复方法及装置
CN110309122B (zh) 2018-03-28 2022-12-30 腾讯科技(深圳)有限公司 获取增量数据的方法、装置、服务器和存储介质
CN110309233B (zh) 2018-03-28 2022-11-15 腾讯科技(深圳)有限公司 数据存储的方法、装置、服务器和存储介质
CN110196758A (zh) 2018-05-10 2019-09-03 腾讯科技(深圳)有限公司 数据处理方法和装置、存储介质及电子装置
CN110209527B (zh) * 2018-11-30 2023-05-05 腾讯科技(深圳)有限公司 数据恢复方法、装置、服务器以及存储介质
CN110209528B (zh) 2018-11-30 2022-10-28 腾讯科技(深圳)有限公司 数据备份方法、装置、服务器以及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004139217A (ja) * 2002-10-16 2004-05-13 Hewlett Packard Co <Hp> データベースの移行方法
JP2006092553A (ja) * 2004-09-22 2006-04-06 Microsoft Corp 合成バックアップおよびリストアの方法およびシステム
JP2006106868A (ja) * 2004-09-30 2006-04-20 Toshiba Corp ファイル管理機能を備えたファイルシステム及びファイル管理方法
JP2011053780A (ja) * 2009-08-31 2011-03-17 Oki Networks Co Ltd 復旧システム、復旧方法及びバックアップ制御システム
JP2014137711A (ja) * 2013-01-17 2014-07-28 Fujitsu Ltd ストレージ装置、バックアッププログラム、およびバックアップ方法

Also Published As

Publication number Publication date
WO2020108604A1 (zh) 2020-06-04
EP3822793A4 (en) 2022-04-20
US20210165716A1 (en) 2021-06-03
US11531594B2 (en) 2022-12-20
CN110209527A (zh) 2019-09-06
CN110209527B (zh) 2023-05-05
JP7108782B2 (ja) 2022-07-28
EP3822793A1 (en) 2021-05-19

Similar Documents

Publication Publication Date Title
JP7108782B2 (ja) データリカバリー方法、装置、サーバ及びコンピュータ・プログラム
US9183236B2 (en) Low level object version tracking using non-volatile memory write generations
US7117229B2 (en) Method and system for online reorganization of databases
EP1744246B1 (en) File system having deferred verification of data integrity
US7873683B2 (en) File system having transaction record coalescing
CA2818472C (en) Optimized startup verification of file system integrity
EP2356560B1 (en) Atomic multiple modification of data in a distributed storage system
EP1739535B1 (en) File system storing transaction records in flash-like media
US9218377B2 (en) Failure recovery and error correction techniques for data loading in information warehouses
US7133884B1 (en) Unobtrusive point-in-time consistent copies
US9223805B2 (en) Durability implementation plan in an in-memory database system
Pillai et al. Crash consistency
US7765247B2 (en) System and method for removing rows from directory tables

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210208

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220323

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220329

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220527

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220715

R150 Certificate of patent or registration of utility model

Ref document number: 7108782

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150