JP2016509734A - データ処理デバイス及びデータ処理方法 - Google Patents
データ処理デバイス及びデータ処理方法 Download PDFInfo
- Publication number
- JP2016509734A JP2016509734A JP2015556373A JP2015556373A JP2016509734A JP 2016509734 A JP2016509734 A JP 2016509734A JP 2015556373 A JP2015556373 A JP 2015556373A JP 2015556373 A JP2015556373 A JP 2015556373A JP 2016509734 A JP2016509734 A JP 2016509734A
- Authority
- JP
- Japan
- Prior art keywords
- data
- storage unit
- memory
- log file
- nonvolatile storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 56
- 230000002688 persistence Effects 0.000 claims description 56
- 238000011084 recovery Methods 0.000 claims description 52
- 238000006243 chemical reaction Methods 0.000 claims description 23
- 230000001568 sexual effect Effects 0.000 claims 2
- 230000002159 abnormal effect Effects 0.000 abstract description 5
- 238000000034 method Methods 0.000 description 75
- 230000002085 persistent effect Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 238000013500 data storage Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000005201 scrubbing Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 101100182136 Neurospora crassa (strain ATCC 24698 / 74-OR23-1A / CBS 708.71 / DSM 1257 / FGSC 987) loc-1 gene Proteins 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 1
- 230000035755 proliferation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1471—Saving, restoring, recovering or retrying involving logging of persistent data for recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
- G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1456—Hardware arrangements for backup
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1608—Error detection by comparing the output signals of redundant hardware
- G06F11/1612—Error detection by comparing the output signals of redundant hardware where the redundant component is persistent storage
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
- G06F3/0611—Improving I/O performance in relation to response time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0643—Management of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/065—Replication mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/82—Solving problems relating to consistency
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/85—Active fault masking without idle spares
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Computer Security & Cryptography (AREA)
- Techniques For Improving Reliability Of Storages (AREA)
Abstract
Description
DRAM_offset(LBA)=DRAM_start+LBA
メモリがセグメントにより先取りされ、物理メモリのN個のセグメントの占有が事前に適用され、物理メモリの各セグメントのサイズがDRAM_SEG_sizeであり、物理メモリの各セグメントがそれ自体連続しており、セグメントが不連続でもよい場合、全てのセグメントの開始アドレスは配列DRAM_base[N]に保存され、計算方法は以下のようになる。
DRAM_offset(LBA)=DRAM_base[LBA/DRAM_SEG_size]+LBA%DRAM_SEG_size
A13:メモリ読み取り/書き込み制御ユニット105は、メモリオフセットに従ってメモリ101からサービスデータを要求する。
Claims (50)
- 制御ユニットと、メモリと、第1の不揮発性記憶ユニットと、第2の不揮発性記憶ユニットとを有するデータ処理デバイスであり、前記第1の不揮発性記憶ユニットのデータ書き込み速度は、前記第2の不揮発性記憶ユニットのデータ書き込み速度より高いデータ処理デバイスであって、
前記制御ユニットは、第1のデータを前記メモリに書き込み、前記第1のデータを前記第1の不揮発性記憶ユニットにログファイル形式で書き込み、前記第1の不揮発性記憶ユニットに書き込まれた前記第1のデータのログファイルを前記第2の不揮発性記憶ユニットに書き込むように構成されるデータ処理デバイス。 - 前記制御ユニットは、メモリ読み取り/書き込み制御ユニットと、永続性制御ユニットとを有し、
前記メモリ読み取り/書き込み制御ユニットは、前記第1のデータを前記メモリに書き込み、前記第1のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むように構成され、
前記永続性制御ユニットは、前記第1の不揮発性記憶ユニットに書き込まれた前記第1のデータの前記ログファイルを前記第2の不揮発性記憶ユニットに書き込むように構成される、請求項1に記載のデータ処理デバイス。 - 前記メモリ読み取り/書き込み制御ユニットは、第2のデータを前記メモリに書き込み、前記第2のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むように更に構成される、請求項2に記載のデータ処理デバイス。
- 前記永続性制御ユニットは、前記メモリから前記第1のデータを取得し、前記第1のデータを前記第2の不揮発性記憶ユニットに書き込むように更に構成される、請求項2又は3に記載のデータ処理デバイス。
- 前記制御ユニットは、データスクラブユニットを更に有し、
前記データスクラブユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを前記第1のデータに変換するように構成される、請求項1ないし3のうちいずれか1項に記載のデータ処理デバイス。 - 前記制御ユニットは、データ回復ユニットを更に有し、
前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復するように構成される、請求項4又は5に記載のデータ処理デバイス。 - 前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを使用することにより、前記メモリから失われた前記第1のデータを回復し、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復するように更に構成される、請求項3に記載のデータ処理デバイス。
- 前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復し、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復するように更に構成される、請求項4又は5に記載のデータ処理デバイス。
- 前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータ及び前記第1のデータのログファイルを使用することにより、前記メモリから失われた前記第1のデータを回復し、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復するように更に構成される、請求項5に記載のデータ処理デバイス。
- 前記永続性制御ユニットは、前記第1の不揮発性記憶ユニットの前記第1のデータの前記ログファイルが前記第2の不揮発性記憶ユニットに書き込まれた後に、前記第1の不揮発性記憶ユニットに対して前記第1のデータの前記ログファイルにより占有された空間を解放することを命令するように更に構成される、請求項2に記載のデータ処理デバイス。
- 前記永続性制御ユニットは、前記メモリ読み取り/書き込み制御ユニットが前記第2のデータを前記第1の不揮発性記憶ユニットに書き込んだ場合、前記第1の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを前記第2の不揮発性記憶ユニットに書き込むことを保留するように更に構成される、請求項3に記載のデータ処理デバイス。
- 前記第1の不揮発性記憶ユニットの前記データ書き込み速度は、前記メモリのデータ書き込み速度と同じである、請求項1ないし11のうちいずれか1項に記載のデータ処理デバイス。
- 制御ユニットと、メモリと、第1の不揮発性記憶ユニットと、第2の不揮発性記憶ユニットとを有するデータ処理デバイスであり、前記第1の不揮発性記憶ユニットのデータ書き込み速度は、前記第2の不揮発性記憶ユニットのデータ書き込み速度より高いデータ処理デバイスであって、
前記制御ユニットは、第1のデータを前記メモリに書き込み、前記第1のデータを前記第1の不揮発性記憶ユニットにログファイル形式で書き込むように構成され、
前記制御ユニットは、前記メモリから前記第1のデータを取得し、前記取得された第1のデータをログファイルに変換し、前記変換されたログファイルを前記第2の不揮発性記憶ユニットに書き込むように更に構成されるデータ処理デバイス。 - 前記制御ユニットは、メモリ読み取り/書き込み制御ユニットと、永続性制御ユニットとを有し、
前記メモリ読み取り/書き込み制御ユニットは、前記第1のデータを前記メモリに書き込み、前記第1のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むように構成され、
前記永続性制御ユニットは、前記メモリから前記第1のデータを取得し、前記取得された第1のデータをログファイルに変換し、前記変換されたログファイルを前記第2の不揮発性記憶ユニットに書き込むように構成される、請求項13に記載のデータ処理デバイス。 - 前記メモリ読み取り/書き込み制御ユニットは、第2のデータを前記メモリに書き込み、前記第2のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むように更に構成される、請求項13又は14に記載のデータ処理デバイス。
- 前記永続性制御ユニットは、前記メモリから前記第1のデータを取得し、前記第1のデータを前記第2の不揮発性記憶ユニットに書き込むように更に構成される、請求項14又は15に記載のデータ処理デバイス。
- 前記制御ユニットは、データスクラブユニットを更に有し、
前記データスクラブユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを前記第1のデータに変換するように構成される、請求項13ないし15のうちいずれか1項に記載のデータ処理デバイス。 - 前記制御ユニットは、データ回復ユニットを更に有し、
前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復するように構成される、請求項17に記載のデータ処理デバイス。 - 前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを使用することにより、前記メモリから失われた前記第1のデータを回復し、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復するように更に構成される、請求項13ないし15のうちいずれか1項に記載のデータ処理デバイス。
- 前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復し、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復するように更に構成される、請求項16に記載のデータ処理デバイス。
- 前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータ及び前記第1のデータの前記ログファイルを使用することにより、前記メモリから失われた前記第1のデータを回復し、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復するように更に構成される、請求項17に記載のデータ処理デバイス。
- 前記第1の不揮発性記憶ユニットの前記データ書き込み速度は、前記メモリのデータ書き込み速度と同じである、請求項13ないし21のうちいずれか1項に記載のデータ処理デバイス。
- 制御ユニットと、メモリと、第1の不揮発性記憶ユニットと、第2の不揮発性記憶ユニットとを有するデータ処理デバイスであり、前記第1の不揮発性記憶ユニットのデータ書き込み速度は、前記第2の不揮発性記憶ユニットのデータ書き込み速度より高いデータ処理デバイスであって、
前記制御ユニットは、第1のデータを前記メモリに書き込み、前記第1のデータを前記第1の不揮発性記憶ユニットにログファイル形式で書き込み、前記メモリの前記第1のデータを前記第2の不揮発性記憶ユニットに書き込むように構成されるデータ処理デバイス。 - 前記制御ユニットは、メモリ読み取り/書き込み制御ユニットと、永続性制御ユニットとを有し、
前記メモリ読み取り/書き込み制御ユニットは、前記第1のデータを前記メモリに書き込み、前記第1のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むように構成され、
前記永続性制御ユニットは、前記メモリの前記第1のデータを前記第2の不揮発性記憶ユニットに書き込むように構成される、請求項23に記載のデータ処理デバイス。 - 前記メモリ読み取り/書き込み制御ユニットは、第2のデータを前記メモリに書き込み、前記第2のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むように更に構成される、請求項23又は24に記載のデータ処理デバイス。
- 前記制御ユニットは、データ回復ユニットを更に有し、
前記データ回復ユニットは、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復するように構成される、請求項23ないし25のうちいずれか1項に記載のデータ処理デバイス。 - 前記第1の不揮発性記憶ユニットの前記データ書き込み速度は、前記メモリのデータ書き込み速度と同じである、請求項23ないし26のうちいずれか1項に記載のデータ処理デバイス。
- データ処理デバイスにおいて適用されるデータ処理方法であって、
前記データ処理デバイスのメモリに書き込まれるべき第1のデータを受信するステップと、
前記第1のデータを前記メモリに書き込み、前記第1のデータを第1の不揮発性記憶ユニットにログファイル形式で書き込むステップと、
前記第1の不揮発性記憶ユニットに書き込まれた前記第1のデータのログファイルを第2の不揮発性記憶ユニットに書き込むステップであり、前記第1の不揮発性記憶ユニットのデータ書き込み速度は、前記第2の不揮発性記憶ユニットのデータ書き込み速度より高いステップと
を有するデータ処理方法。 - 第2のデータを前記メモリに書き込み、前記第2のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むステップを更に有する、請求項28に記載のデータ処理方法。
- 前記メモリから前記第1のデータを取得し、前記第1のデータを前記第2の不揮発性記憶ユニットに書き込むステップを更に有する、請求項28又は29に記載のデータ処理方法。
- 前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを前記第1のデータに変換するステップを更に有する、請求項28又は29に記載のデータ処理方法。
- 前記メモリの前記第1のデータが失われた場合、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記第1のデータを回復する、請求項31に記載のデータ処理方法。
- 前記メモリの前記第1のデータが失われた場合、前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを使用することにより、前記メモリから失われた前記第1のデータを回復し、
前記メモリの前記第2のデータが失われた場合、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復する、請求項29に記載のデータ処理方法。 - 前記メモリの前記第1のデータが失われた場合、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復し、
前記メモリの前記第2のデータが失われた場合、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復する、請求項31に記載のデータ処理方法。 - 前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復するステップは、
前記第1のデータの前記ログファイルから前記第1のデータへの変換が完了したか否かを決定するステップと、
前記変換が完了していない場合、変換された第1のデータ及び変換されていない前記第1のデータの前記ログファイルを使用することにより、前記メモリの前記第1のデータを回復するステップと、
前記変換が完了した場合、変換された第1のデータを使用することにより、前記メモリの前記第1のデータを回復するステップと
を有する、請求項34に記載のデータ処理方法。 - 前記第1の不揮発性記憶ユニットの前記第1のデータのログファイルを第2の不揮発性記憶ユニットに書き込んだ後に、前記第1の不揮発性記憶ユニットに対して前記第1のデータの前記ログファイルにより占有された空間を解放することを命令する、請求項28に記載のデータ処理方法。
- 前記第2のデータが前記第1の不揮発性記憶ユニットにログファイル形式で書き込まれた後に、前記第1の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを前記第2の不揮発性記憶ユニットに書き込むことを保留する、請求項29に記載のデータ処理方法。
- 前記第1の不揮発性記憶ユニットの前記データ書き込み速度は、前記メモリのデータ書き込み速度と同じである、請求項28ないし37のうちいずれか1項に記載のデータ処理方法。
- データ処理デバイスにおいて適用されるデータ処理方法であって、
前記データ処理デバイスのメモリに書き込まれるべき第1のデータを受信するステップと、
前記第1のデータを前記メモリに書き込み、前記第1のデータを第1の不揮発性記憶ユニットにログファイル形式で書き込むステップと、
前記メモリの前記第1のデータをログファイルに変換し、前記変換されたログファイルを第2の不揮発性記憶ユニットに書き込むステップであり、前記第1の不揮発性記憶ユニットのデータ書き込み速度は、前記第2の不揮発性記憶ユニットのデータ書き込み速度より高いステップと
を有するデータ処理方法。 - 第2のデータを前記メモリに書き込み、前記第2のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むステップを更に有する、請求項39に記載のデータ処理方法。
- 前記メモリの前記第1のデータを前記第2の不揮発性記憶ユニットに書き込むステップを更に有する、請求項39又は40に記載のデータ処理方法。
- 前記第2の不揮発性記憶ユニットの前記第1のデータの前記ログファイルを前記第1のデータに変換するステップを更に有する、請求項39又は40に記載のデータ処理方法。
- 前記メモリの前記第1のデータが失われた場合、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復し、
前記メモリの前記第2のデータが失われた場合、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復する、請求項41又は42に記載のデータ処理方法。 - 前記メモリの前記第1のデータが失われた場合、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復し、
前記メモリの第2のデータが失われた場合、前記第1の不揮発性記憶ユニットの前記第2のデータのログファイルを使用することにより、前記メモリから失われた前記第2のデータを回復する、請求項40に記載のデータ処理方法。 - 前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記メモリから失われた前記第1のデータを回復するステップは、
前記第1のデータの前記ログファイルから前記第1のデータへの変換が完了したか否かを決定するステップと、
前記変換が完了していない場合、変換された第1のデータ及び変換されていない前記第1のデータの前記ログファイルを使用することにより、前記メモリの前記第1のデータを回復するステップと、
前記変換が完了した場合、変換された第1のデータを使用することにより、前記メモリの前記第1のデータを回復するステップと
を有する、請求項42に記載のデータ処理方法。 - 前記第1の不揮発性記憶ユニットの前記データ書き込み速度は、前記メモリのデータ書き込み速度と同じである、請求項39ないし45のうちいずれか1項に記載のデータ処理方法。
- データ処理デバイスにおいて適用されるデータ処理方法であって、
前記データ処理デバイスのメモリに書き込まれるべき第1のデータを受信するステップと、
前記第1のデータを前記メモリに書き込み、前記第1のデータを第1の不揮発性記憶ユニットにログファイル形式で書き込むステップと、
前記メモリの前記第1のデータを第2の不揮発性記憶ユニットに書き込むステップであり、前記第1の不揮発性記憶ユニットのデータ書き込み速度は、前記第2の不揮発性記憶ユニットのデータ書き込み速度より高いステップと
を有するデータ処理方法。 - 前記第2のデータを前記メモリに書き込み、前記第2のデータを前記第1の不揮発性記憶ユニットに前記ログファイル形式で書き込むステップを更に有する、請求項47に記載のデータ処理方法。
- 前記メモリの第1のデータが失われた場合、前記第2の不揮発性記憶ユニットの前記第1のデータを使用することにより、前記第1のデータを回復する、請求項47又は48に記載のデータ処理方法。
- 前記第1の不揮発性記憶ユニットの前記データ書き込み速度は、前記メモリのデータ書き込み速度と同じである、請求項47ないし49のうちいずれか1項に記載のデータ処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2013/088324 WO2015081470A1 (zh) | 2013-12-02 | 2013-12-02 | 数据处理设备和数据处理的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016509734A true JP2016509734A (ja) | 2016-03-31 |
JP6166796B2 JP6166796B2 (ja) | 2017-07-19 |
Family
ID=53265424
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015556373A Active JP6166796B2 (ja) | 2013-12-02 | 2013-12-02 | データ処理デバイス及びデータ処理方法 |
Country Status (7)
Country | Link |
---|---|
US (3) | US9354985B2 (ja) |
EP (2) | EP2905706B1 (ja) |
JP (1) | JP6166796B2 (ja) |
CN (2) | CN104919426A (ja) |
CA (1) | CA2896809C (ja) |
ES (1) | ES2627084T3 (ja) |
WO (1) | WO2015081470A1 (ja) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11829333B2 (en) * | 2015-05-08 | 2023-11-28 | Chicago Mercantile Exchange Inc. | Thread safe lock-free concurrent write operations for use with multi-threaded in-line logging |
CN106469123A (zh) * | 2015-08-10 | 2017-03-01 | 北京忆恒创源科技有限公司 | 一种基于nvdimm的写缓存分配、释放方法及其装置 |
CN106445405B (zh) * | 2015-08-13 | 2020-02-07 | 北京忆恒创源科技有限公司 | 一种面向闪存存储的数据访问方法及其装置 |
CN106919474A (zh) * | 2015-12-28 | 2017-07-04 | 中移(苏州)软件技术有限公司 | 一种缓存数据保护方法和装置 |
US10210056B2 (en) * | 2016-03-31 | 2019-02-19 | Netapp, Inc. | Methods for filesystem metadata caching to improve failover performance and devices thereof |
CN107562567A (zh) * | 2016-06-30 | 2018-01-09 | 华为技术有限公司 | 一种数据处理方法以及数据处理设备 |
US10698732B2 (en) | 2016-07-19 | 2020-06-30 | Sap Se | Page ranking in operating system virtual pages in hybrid memory systems |
US11977484B2 (en) | 2016-07-19 | 2024-05-07 | Sap Se | Adapting in-memory database in hybrid memory systems and operating system interface |
US10783146B2 (en) * | 2016-07-19 | 2020-09-22 | Sap Se | Join operations in hybrid main memory systems |
CN110832473B (zh) * | 2017-06-21 | 2023-01-13 | 华为技术有限公司 | 日志结构管理系统及方法 |
US11010379B2 (en) | 2017-08-15 | 2021-05-18 | Sap Se | Increasing performance of in-memory databases using re-ordered query execution plans |
CN109992448B (zh) * | 2017-12-31 | 2021-08-06 | 中国移动通信集团山西有限公司 | 文件变化增量备份方法、装置、设备及介质 |
CN108494481B (zh) * | 2018-03-30 | 2020-06-09 | 青岛海信宽带多媒体技术有限公司 | 光模块的监控数据处理方法、装置及光模块 |
CN108521551A (zh) * | 2018-05-14 | 2018-09-11 | 河北远东通信系统工程有限公司 | 一种网络实时视频录制存储方法和系统以及文件恢复方法 |
CN108763572B (zh) * | 2018-06-06 | 2021-06-22 | 湖南蚁坊软件股份有限公司 | 一种实现Apache Solr读写分离的方法和装置 |
CN109165117B (zh) * | 2018-06-29 | 2022-05-31 | 华为技术有限公司 | 数据处理的方法和系统 |
US11947839B2 (en) | 2021-05-10 | 2024-04-02 | Samsung Electronics Co., Ltd. | Storage device, system, and method for customizable metadata |
CN113722158B (zh) * | 2021-10-08 | 2022-08-30 | 亿次网联(杭州)科技有限公司 | 电子设备及其掉电保护方法、装置、存储介质 |
CN114780356B (zh) * | 2022-06-22 | 2022-09-23 | 北京得瑞领新科技有限公司 | Ssd系统日志数据的存储方法及装置、介质、设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06337810A (ja) * | 1993-03-30 | 1994-12-06 | Fujitsu Ltd | ログデータの分類取得システム |
JPH11338781A (ja) * | 1998-05-27 | 1999-12-10 | Chuo Electronics Co Ltd | 半導体メモリによるデータの記録方法 |
JP2003131955A (ja) * | 2001-10-19 | 2003-05-09 | Kyocera Corp | データバックアップ回路 |
CN1783025A (zh) * | 2004-12-03 | 2006-06-07 | 华为技术有限公司 | 嵌入式系统数据备份装置及方法 |
JP2009009213A (ja) * | 2007-06-26 | 2009-01-15 | Ricoh Co Ltd | データ記憶装置、プログラムおよびデータ記憶方法 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5544359A (en) * | 1993-03-30 | 1996-08-06 | Fujitsu Limited | Apparatus and method for classifying and acquiring log data by updating and storing log data |
US5721918A (en) * | 1996-02-06 | 1998-02-24 | Telefonaktiebolaget Lm Ericsson | Method and system for fast recovery of a primary store database using selective recovery by data type |
US7203796B1 (en) * | 2003-10-24 | 2007-04-10 | Network Appliance, Inc. | Method and apparatus for synchronous data mirroring |
US7596672B1 (en) | 2003-10-24 | 2009-09-29 | Network Appliance, Inc. | Synchronous mirroring including writing image updates to a file |
US7197520B1 (en) * | 2004-04-14 | 2007-03-27 | Veritas Operating Corporation | Two-tier backup mechanism |
CN100399288C (zh) * | 2005-09-30 | 2008-07-02 | 联想(北京)有限公司 | 一种内存备份装置和方法 |
CN101216772B (zh) * | 2008-01-15 | 2011-05-11 | 中兴通讯股份有限公司 | 一种嵌入式设备的启动方法及软件升级方法 |
JP4919983B2 (ja) * | 2008-02-21 | 2012-04-18 | ヒタチグローバルストレージテクノロジーズネザーランドビーブイ | データ記憶装置及びデータ記憶装置におけるデータ管理方法 |
US8041679B1 (en) * | 2008-06-04 | 2011-10-18 | Symantec Operating Corporation | Synthetic differential backups creation for a database using binary log conversion |
CN101620460A (zh) * | 2008-07-02 | 2010-01-06 | 联想(北京)有限公司 | 一种计算机系统休眠方法和一种计算机系统 |
JP2010152514A (ja) * | 2008-12-24 | 2010-07-08 | Toshiba Corp | メモリシステム |
KR20100133710A (ko) * | 2009-06-12 | 2010-12-22 | 삼성전자주식회사 | 메모리 시스템 및 그것의 코드 데이터 로딩 방법 |
CN101996677B (zh) * | 2009-08-26 | 2013-12-11 | 联华电子股份有限公司 | 非易失性静态随机存取存储器元件 |
US8327069B2 (en) * | 2009-12-08 | 2012-12-04 | Hitachi, Ltd. | Storage system and storage control apparatus provided with cache memory group including volatile memory and nonvolatile memory |
US8677203B1 (en) * | 2010-01-11 | 2014-03-18 | Apple Inc. | Redundant data storage schemes for multi-die memory systems |
CN102014152A (zh) * | 2010-10-18 | 2011-04-13 | 浪潮(北京)电子信息产业有限公司 | 一种远程复制系统及其方法 |
US10817502B2 (en) * | 2010-12-13 | 2020-10-27 | Sandisk Technologies Llc | Persistent memory management |
US20140081911A1 (en) * | 2011-01-10 | 2014-03-20 | Netapp, Inc. | Optimizing automatic deletion of backup files |
CN102693170A (zh) * | 2011-03-21 | 2012-09-26 | 北京千橡网景科技发展有限公司 | 用于内存管理的方法和设备 |
CN102467404A (zh) * | 2011-10-14 | 2012-05-23 | 海尔集团技术研发中心 | 一种基于物理内存实现软件快速切换的方法及装置 |
CN102779072B (zh) * | 2012-06-18 | 2014-06-25 | 中国科学院上海微系统与信息技术研究所 | 一种嵌入式系统及其应用进程的休眠与唤醒方法 |
JP5631938B2 (ja) * | 2012-07-19 | 2014-11-26 | 株式会社東芝 | 半導体記憶装置 |
GB2508659A (en) * | 2012-12-10 | 2014-06-11 | Ibm | Backing up an in-memory database |
US11687292B2 (en) * | 2013-02-26 | 2023-06-27 | Seagate Technology Llc | Data update management in a cloud computing environment |
US9164856B2 (en) * | 2013-11-11 | 2015-10-20 | International Business Machines Corporation | Persistent messaging mechanism |
-
2013
- 2013-12-02 EP EP13878532.4A patent/EP2905706B1/en active Active
- 2013-12-02 JP JP2015556373A patent/JP6166796B2/ja active Active
- 2013-12-02 CN CN201380002636.3A patent/CN104919426A/zh active Pending
- 2013-12-02 CA CA2896809A patent/CA2896809C/en active Active
- 2013-12-02 EP EP17151712.1A patent/EP3229140B1/en active Active
- 2013-12-02 CN CN201710448821.5A patent/CN107357680A/zh active Pending
- 2013-12-02 ES ES13878532.4T patent/ES2627084T3/es active Active
- 2013-12-02 WO PCT/CN2013/088324 patent/WO2015081470A1/zh active Application Filing
-
2014
- 2014-09-11 US US14/483,970 patent/US9354985B2/en active Active
-
2015
- 2015-05-05 US US14/704,720 patent/US9557927B2/en active Active
-
2016
- 2016-12-20 US US15/385,661 patent/US20170103001A1/en not_active Abandoned
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06337810A (ja) * | 1993-03-30 | 1994-12-06 | Fujitsu Ltd | ログデータの分類取得システム |
JPH11338781A (ja) * | 1998-05-27 | 1999-12-10 | Chuo Electronics Co Ltd | 半導体メモリによるデータの記録方法 |
JP2003131955A (ja) * | 2001-10-19 | 2003-05-09 | Kyocera Corp | データバックアップ回路 |
CN1783025A (zh) * | 2004-12-03 | 2006-06-07 | 华为技术有限公司 | 嵌入式系统数据备份装置及方法 |
JP2009009213A (ja) * | 2007-06-26 | 2009-01-15 | Ricoh Co Ltd | データ記憶装置、プログラムおよびデータ記憶方法 |
Also Published As
Publication number | Publication date |
---|---|
CA2896809C (en) | 2020-06-02 |
EP3229140A1 (en) | 2017-10-11 |
WO2015081470A1 (zh) | 2015-06-11 |
US9354985B2 (en) | 2016-05-31 |
US20170103001A1 (en) | 2017-04-13 |
EP2905706A4 (en) | 2016-05-04 |
ES2627084T3 (es) | 2017-07-26 |
CN107357680A (zh) | 2017-11-17 |
JP6166796B2 (ja) | 2017-07-19 |
US9557927B2 (en) | 2017-01-31 |
EP2905706A1 (en) | 2015-08-12 |
CA2896809A1 (en) | 2015-06-11 |
US20150234615A1 (en) | 2015-08-20 |
CN104919426A (zh) | 2015-09-16 |
EP2905706B1 (en) | 2017-04-05 |
EP3229140B1 (en) | 2019-02-20 |
US20150154087A1 (en) | 2015-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6166796B2 (ja) | データ処理デバイス及びデータ処理方法 | |
US9823877B2 (en) | Virtual machine backup from storage snapshot | |
EP3208714B1 (en) | Data reconstruction method, apparatus and system in distributed storage system | |
CN107807794B (zh) | 一种数据存储方法和装置 | |
US8370591B2 (en) | Method and apparatus for automatic snapshot | |
US9311002B1 (en) | Systems, methods, and computer readable media for compressing data at a virtually provisioned storage entity | |
US20100058007A1 (en) | Information processing apparatus and memory management method | |
US9098404B2 (en) | Storage array, storage system, and data access method | |
US10552089B2 (en) | Data processing for managing local and distributed storage systems by scheduling information corresponding to data write requests | |
KR20190054448A (ko) | 호스트 메모리 버퍼를 사용하기 위해 호스트 장치와 속성 정보를 공유하는 스토리지 장치 및 그것을 포함하는 전자 장치 | |
CN104407933A (zh) | 一种数据的备份方法及装置 | |
WO2017143537A1 (zh) | 一种光线路终端及其主、从设备升级的方法 | |
US20140059314A1 (en) | Preventing data loss during reboot and logical storage resource management device | |
US20220129346A1 (en) | Data processing method and apparatus in storage system, and storage system | |
US20210318826A1 (en) | Data Storage Method and Apparatus in Distributed Storage System, and Computer Program Product | |
US9619336B2 (en) | Managing production data | |
US20210223957A1 (en) | Storage apparatus and storage control method | |
US10740189B2 (en) | Distributed storage system | |
US9063669B2 (en) | Self-detecting storage bottleneck while handling sequential I/O operations | |
US10860668B1 (en) | Querying system and method | |
US11733917B2 (en) | High bandwidth controller memory buffer (CMB) for peer to peer data transfer | |
US9785667B2 (en) | Fast creation of a master GFS2 file system | |
US9817585B1 (en) | Data retrieval system and method | |
US20130332658A1 (en) | Data storage system and method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160831 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160906 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161206 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170427 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170530 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170623 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6166796 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |