CN107229423A - 数据处理方法、装置以及系统 - Google Patents

数据处理方法、装置以及系统 Download PDF

Info

Publication number
CN107229423A
CN107229423A CN201710398965.4A CN201710398965A CN107229423A CN 107229423 A CN107229423 A CN 107229423A CN 201710398965 A CN201710398965 A CN 201710398965A CN 107229423 A CN107229423 A CN 107229423A
Authority
CN
China
Prior art keywords
array
raid
storage
target data
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710398965.4A
Other languages
English (en)
Inventor
伊泽众
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710398965.4A priority Critical patent/CN107229423A/zh
Publication of CN107229423A publication Critical patent/CN107229423A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/062—Securing storage systems
    • G06F3/0622—Securing storage systems in relation to access
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/1608—Error detection by comparing the output signals of redundant hardware
    • G06F11/1612—Error detection by comparing the output signals of redundant hardware where the redundant component is persistent storage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2094—Redundant storage or storage space
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/065—Replication mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种数据处理方法、装置以及系统，在本申请的方案中，第一存储系统的第一存储服务器在获取待存储的目标数据之后，按照第一存储系统中第一独立冗余磁盘阵列对应的第一数据存储方式，将目标数据存储到第一独立冗余磁盘阵列；并按照第一存储系统中第二独立冗余磁盘阵列对应的第二数据存储方式，将目标数据存储至所述第二独立冗余磁盘阵列。本申请的方案可以减少由于磁盘阵列中磁盘故障而导致数据丢失的情况，提高存储系统中数据存储的安全性。

Description

数据处理方法、装置以及系统
技术领域
本发明涉及数据处理技术领域，具体涉及一种数据处理方法、装置以及系统。
背景技术
在存储系统中，磁盘发生故障的概率很高。一旦磁盘出现故障，就可能会导致磁盘中的数据丢失，从而影响存储系统中数据的安全性。
为了提高数据的安全性，存储系统中可以采用磁盘阵列来进行数据存储。由于磁盘阵列中存储的数据具有冗余性，即使磁盘阵列中有部分磁盘出现故障，利用未出现故障的磁盘中的数据，仍可以恢复出存在故障的磁盘中的数据。但是当磁盘阵列中出现故障的磁盘数量超过磁盘阵列所能容忍的最大故障个数时，利用磁盘阵列中未出现故障的磁盘所存储数据，也无法恢复出出现故障的磁盘中所存储的数据，从而导致数据丢失，使得数据安全性差。
发明内容
有鉴于此，本发明实施例提供一种数据处理方法、装置以及系统，以减少由于磁盘阵列中磁盘故障而导致数据丢失的情况，提高存储系统中数据存储的安全性。
为实现上述目的，本发明实施例提供如下技术方案：
一种数据处理方法，应用于第一存储系统的第一存储服务器，所述第一存储服务器至少具有第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列，所述包括：
所述第一存储服务器获取待存储的目标数据；
所述第一存储服务器按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；
所述第一存储服务器按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
优选的，所述第一存储服务器按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列之后，还包括：
所述第一存储服务器将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据，以便所述第二存储服务器将所述目标数据存储到所述第二存储服务器控制的第三独立冗余磁盘阵列的同时，将所述目标数据存储到所述第二存储服务器控制的第四独立冗余磁盘阵列。
优选的，在所述第一存储服务器按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列之后，还包括：
接收对所述目标数据的读取请求；
当从所述第一独立冗余磁盘阵列中读取所述目标数据失败时，从所述第二独立冗余磁盘阵列中读取所述目标数据。
优选的，在所述第一存储服务器将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据之后，还包括：
接收对所述目标数据的读取请求；
当从所述第一独立冗余磁盘阵列以及所述第二独立冗余磁盘阵列中读取所述目标数据失败时，将所述读取请求转发给所述第二存储服务器，以便所述第二存储服务器从所述第三存储阵列或者第四存储阵列中读取出所述目标数据；
获取所述第二存储服务器返回的所述目标数据。
另一方面，本申请还提供了一种数据处理装置，应用于第一存储系统的第一存储服务器，所述第一存储服务器至少具有第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列，所述包括：
数据获取单元，用于获取待存储的目标数据；
第一存储单元，用于按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；
第二存储单元，用于在将所述目标数据存储到所述第一独立冗余磁盘阵列的同时，按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
优选的，还包括：
目标数据转发单元，用于在所述第一存储单元将所述目标数据存储到所述第一独立冗余磁盘阵列之后，将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据，以便所述第二存储服务器将所述目标数据存储到所述第二存储服务器控制的第三独立冗余磁盘阵列的同时，将所述目标数据存储到所述第二存储服务器控制的第四独立冗余磁盘阵列。
优选的，还包括：
读取接收单元，用于在所述第二存储单元将所述目标数据存储至所述第二独立冗余磁盘阵列之后，接收对所述目标数据的读取请求；
第一数据读取单元，用于当从所述第一独立冗余磁盘阵列中读取所述目标数据失败时，从所述第二独立冗余磁盘阵列中读取所述目标数据。
优选的，还包括：
读取接收单元，用于接收对所述目标数据的读取请求；
第二数据读取单元，用于当从所述第一独立冗余磁盘阵列以及所述第二独立冗余磁盘阵列中读取所述目标数据失败时，将所述读取请求转发给所述第二存储服务器，以便所述第二存储服务器从所述第三存储阵列或者第四存储阵列中读取出所述目标数据；
读取数据接收单元，用于获取所述第二存储服务器返回的所述目标数据。
另一方面，本申请还提供了一种数据处理系统，包括：
第一存储系统，所述第一存储系统至少包括第一存储服务器，且所述第一存储服务器至少具有第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列；
所述第一存储服务器用于，获取待存储的目标数据；按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；并按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
优选的，还包括：
第二存储系统，所述第二存储系统至少包括第二存储服务器，且所述第二存储服务器至少具有第三独立冗余磁盘阵列以及第四独立冗余磁盘阵列；
且，所述第二存储服务器与所述第一存储服务器通过网络连接；
所述第一存储服务器还用于，在将所述目标数据存储至所述第二独立冗余磁盘阵列之后，将所述目标数据发送给所述第二存储服务器，并指示所述第二存储服务器存储所述目标数据；
所述第二存储服务器，用于按照所述第三独立冗余磁盘阵列对应的第三数据存储方式，将所述目标数据存储到所述第三独立冗余磁盘阵列；并按照所述第四独立冗余磁盘阵列对应的第四数据存储方式，将所述目标数据存储至所述第四独立冗余磁盘阵列。
基于上述技术方案，在本申请实施例中，存储服务器在获取到待存储的目标数据之后，将目标数据存储到第一独立冗余磁盘阵列的同时，还会将该目标数据存储到第二独立冗余磁盘阵列，这样，即使第一独立冗余磁盘阵列中出现故障的磁盘过多，而无法从第一独立冗余磁盘阵列中读取出该目标数据，仍可以从第二独立冗余磁盘阵列中读取目标数据，从而降低了数据丢失的风险，提高了数据安全性；而且，由于第二独立冗余磁盘阵列中的数据具有冗余性，即使第二独立冗余磁盘阵列中存在少量磁盘故障，仍可以通过未出现故障的磁盘中的数据，恢复出该目标数据，从而进一步提高了数据安全性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1示出了本申请实施例一种数据处理系统一个实施例的组成架构示意图；
图2示出了本申请实施例一种数据处理方法一个实施例的流程示意图；
图3示出了本申请实施例一种数据处理方法又一个实施例的流程示意图；
图4示出了本申请实施例的一种数据处理装置一个实施例的组成结构示意图。
具体实施方式
本申请实施例提供了一种数据处理方法和装置，以通过对存储系统中的数据进行多级备份，以降低由于磁盘阵列中磁盘故障，而导致数据丢失的情况，提高存储系统中数据存储的安全性。
为了便于理解，先对本申请实施例所适用的场景进行介绍，如参见图1，其示出了本申请一种数据处理系统的组成架构示意图。
由图1可知，该数据处理系统至少包括第一存储系统10，在该第一存储系统包括至少一个第一存储服务器101，所述第一存储服务器101至少具有第一独立冗余磁盘阵列(Redundant Array of Independent Disk，RAID)102以及第二独立冗余磁盘阵列103。
其中，第一存储服务器所具有的第一RAID以及第二RAID，可以是通过线路与第一存储服务器连接的RAID，也可以是设置在第一存储服务器中的RAID。
可以理解的是，在本申请实施例中，第一RAID与第二RAID仅仅是为了区分两个RAID，其中，该第一RAID以及第二RAID的RAID类型可以相同，也可以不同，其中，RAID类型可以包括RAID1、RAID5、RAID6等等，RAID类型还可以具体的以RAIDn+m的形式表示，其中，n表示数据块的数量，m表示校验块的数量。如图1中，是以第一RAID的类型可以为RAID1，第二RAID的类型可以为RAID5为例进行介绍，但是当第一RAID以及第二RAID为其他RAID类型时，也同样适用于本申请实施例。
其中，第二RAID用于对第一RAID镜像，即对第一RAID内数据的备份。其中，第一存储服务器获取到待存储的目标数据之后，在向第一RAID存储该目标数据的同时，会将目标数据同时存储到第二RAID中。如图1所示，在RAID1中存储了数据date1、date2以及date3，当然该RAID1存储的数据具有冗余性，如图1中RAID1中每种数据均具有备份，这样，如果RAID1中存储同一个数据两个磁盘中的一个损坏，仍可以从另一个读取出相应的数据。
另外，第二RAID中存储有第一RAID中所存储的所有数据，如图1所示，第一存储系统中，RAID5中同样存储了数据date1、date2以及date3。
可见，由于第一RAID中存储的数据具有冗余性，因此，当第一RAID内存在少量磁盘故障的情况下，可以利用第一RAID中未出现故障的磁盘内所存储的数据，恢复出现故障的磁盘中的数据，从而使得在较少磁盘出现故障的情况下，仍可以从第一RAID中读取目标数据；而即使第一RAID中出现故障的磁盘数量较多，而导致第一RAID中出现数据丢失时，也可以从第二RAID中读取出该目标数据，从而降低了由于磁盘故障而出现数据丢失的风险；而且第二RAID中的数据也具有冗余性，可以进一步降低由于第二RAID中磁盘故障而导致数据丢失的风险。
需要说明的是，第一存储服务器所具有的RAID可以包括多个，但是对于任意一个RAID，均存在与该RIAD互为镜像的RAID，因此，对于任意数据而言，均可以将数据存储到互为镜像的两个RAID中。
为了能够进一步提高数据安全性，在该数据处理系统中，还可以包括第二存储系统20，该第二存储系统包括至少一个第二存储服务器201。与第二存储系统相似，该第二存储服务器同样具有至少两个互为镜像的RAID，为了便于区分，将第二存储服务器所具有的两个RAID分别成为第三RAID以及第四RAID。如图1中，以第三RAID的类型可以为RAID1，第四RAID的类型可以为RAID5为例。
其中，该第一存储服务器与第二存储服务器之间通过网络连接。
相应的，在第一存储服务器还用于，在将获取到的目标数据存储到第一RAID以及第二RAID之后，将该目标数据发送给第二存储服务器，并指示第二存储服务器存储该目标数据。
所述第二存储服务器，用于按照所述第三RAID对应的第三数据存储方式，将所述目标数据存储到所述第三RAID；并按照第四RAID对应的第四数据存储方式，将目标数据存储至所述第四独立冗余磁盘阵列。
其中，第三RAID以及第四RAID中存储的相同的数据，具体可以参见前面关于第一RAID以及第二RAID中存储数据的相关介绍。
结合以上共性，对本申请实施例的一种数据处理方法进行介绍。
参见图2，其示出了本申请一种数据处理方法一个实施例的流程示意图，本实施例的方法可以包括：
S201，第一存储服务器获取待存储的目标数据；
其中，本申请将需要在第一存储系统存储的数据称为目标数据。
其中，该第一存储服务器获取待存储的目标数据的方式可以有多种，如，可以是第一存储系统之外的其他设备发送给第一存储服务器，或者是第一存储系统中的其他存储服务器转发给该第一存储服务器等等，本申请对于第一存储服务器获取该目标数据的具体方式不加以限制。
S202，第一存储服务器按照第一独立冗余磁盘阵列对应的第一数据存储方式，将目标数据存储到第一独立冗余磁盘阵列；
其中，第一独立冗余磁盘阵列对应的数据存储方式与该第一独立冗余磁盘阵列的RAID类型有关，如，以第一独立冗余磁盘阵列的RAID类型为RAID1为例，则该第一存储服务器可以按照设定的RAID1算法，将目标数据进行处理之后，将处理后的目标数据存储到该RAID1中。又如，第一独立冗余磁盘阵列为RAID5时，则该第一存储服务器可以按照设定的RAID算法，计算该目标数据对应的校验块以及数据块，并将该目标数据对应的校验块以及数据块存储到该独立冗余磁盘阵列中。
可以理解的是，独立冗余磁盘阵列的RAID类型不同时，该独立冗余磁盘阵列对应的数据存储方式不同，对待存储的数据进行处理的方式也会有所不同。但是，在该独立冗余磁盘阵列的RAID类型确定时，数据存储方式也就相应确定，相应的，在第一存储服务器向独立冗余磁盘阵列中存储该目标数据之前，对待存储的目标数据所需的处理也会相应确定。
为了便于区分，将第一独立冗余磁盘阵列对应的数据存储方式成为第一数据存储方式，相应的，将后续第二独立冗余磁盘阵列对应的数据存储方式称为第二数据存储方式；其中，当第一独立冗余磁盘阵列与第二独立冗余磁盘阵列的类型不同时，该第一数据存储方式与第二数据存储方式不同；当然，如果第一独立冗余磁盘阵列与第二独立冗余磁盘阵列的类型相同时，该第一数据存储方式与第二数据存储方式相同。
S203，第一存储服务器按照第二独立冗余磁盘阵列对应的第二数据存储方式，将目标数据存储至第二独立冗余磁盘阵列；
将目标数据存储到第二独立冗余磁盘阵列的过程与向第一独立冗余磁盘阵列中存储目标数据的过程相似，具体可以参见前面相关介绍，在此不再赘述。
需要说明的是，步骤S202和步骤S203的顺序并不限于图2所示，在实际应用中，为了减少存储耗时，可以同时执行该步骤S202和步骤S203。
可见，第一存储服务器在将目标数据存储到第一独立冗余磁盘阵列的同时，将目标数据存储到该第一存储系统中第二独立冗余磁盘阵列，从而实现了对目标数据的备份，使得重要数据在不同的磁盘冗余阵列中备份，有效应对单个独立冗余磁盘阵列出现批量磁盘故障，而导致数据丢失的风险。
S204，第一存储服务器将目标数据发送给第二存储系统中的第二存储服务器，并指示第二存储服务器存储目标数据；
为了进一步提高数据安全性，本申请实施例还可以将目标数据发送该第二存储系统的第二存储服务器，以实现将目标数据存储到第一存储系统的同时，还可以将数据远程备份。这样，当第一存储系统中的磁盘阵列故障，导致第一存储系统中目标数据丢失时，可以将对目标数据的访问切换到该第二存储系统，以通过第二存储系统的第二存储服务器获取该目标数据。
S205，第二存储服务器按照第三独立冗余磁盘阵列对应的第三数据存储方式，将目标数据存储到第三独立冗余磁盘阵列；
S206，第二存储服务器按照第四独立冗余磁盘阵列对应的第四数据存储方式，将目标数据存储到第四独立冗余磁盘阵列。
为了进一步提高第二存储系统中数据的安全性，在该第二存储系统中，该第二存储服务器连接或者设置有两个独立冗余磁盘阵列，第二存储服务器在将目标数据存储到第三独立冗余磁盘阵列的同时，将目标数据备份到第四独立冗余磁盘阵列中，这样，如果第二存储系统中存在一个独立冗余磁盘阵列故障，仍可以从该第二存储系统中的另一个独立冗余磁盘阵列中读取出该目标数据，从而进一步提高了数据安全性。
需要说明的是，步骤S204至步骤S206为可选步骤，其目的仅仅是为了在第一存储系统中目标数据丢失的情况下，第一存储服务器仍可以从远程的第二存储服务器中获取该目标数据，以进一步提高数据安全性。
可见，在本申请实施例中，将待存储的目标数据从第一存储系统的第一磁盘冗余阵列开始进行数据备份，并利用镜像技术将目标数据在第一存储系统的独立冗余磁盘阵列之间进行备份，最后，通过远程数据备份，将目标数据备份到第二存储系统中，从而实现了多个层次上的数据冗余备份，有效地降低数据丢失风险，保证存储系统的稳定性。
为了便于理解本申请实施例的好处，下面结合对目标数据读取过程，对本申请实施例的数据处理方法进行介绍。
如图3，其示出了本申请一种数据处理方法又一个实施例的流程示意图，本实施例的方法可以包括：
S301，第一存储服务器获取待存储的目标数据；
S302，第一存储服务器按照第一独立冗余磁盘阵列对应的第一数据存储方式，将目标数据存储到第一独立冗余磁盘阵列；
S303，第一存储服务器按照第二独立冗余磁盘阵列对应的第二数据存储方式，将目标数据存储至第二独立冗余磁盘阵列；
S304，第一存储服务器将目标数据发送给第二存储系统中的第二存储服务器，并指示第二存储服务器存储目标数据；
S305，第二存储服务器按照第三独立冗余磁盘阵列对应的第三数据存储方式，将目标数据存储到第三独立冗余磁盘阵列；
S306，第二存储服务器按照第四独立冗余磁盘阵列对应的第四数据存储方式，将目标数据存储到第四独立冗余磁盘阵列。
以上步骤可以参见前面实施例的相关介绍，在此不再赘述。
S307，第一存储服务器接收对目标数据的读取请求；
其中，该读取请求可以由其他设备发送给第一存储服务器，也可以是用户向该第一存储服务器中输入的读取请求，或者是第一存储服务器根据数据处理需要生成的读取请求。
S308，第一存储服务器响应于该读取请求，从第一独立冗余磁盘阵列中读取该目标数据；
S309，当从第一独立冗余磁盘阵列中读取目标数据失败时，第一存储服务器从第二独立冗余磁盘阵列中读取该目标数据；
第一存储服务器首先从第一独立冗余磁盘阵列中读取该目标数据，如果读取到该目标数据，则返回该目标数据；如果第一独立冗余磁盘阵列中存在大批量磁盘故障或者由于其他故障，导致从第一独立冗余磁盘阵列中丢失该目标数据，导致目标数据读取失败，第一存储服务器还可以从第二独立冗余磁盘阵列中读取该目标数据，以保证正常的数据访问。
S310，当从第二独立冗余磁盘阵列中读取目标数据失败时，第一存储服务器将该读取请求转发给第二存储服务器；
作为一种可选方式，在第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列均出现故障，导致第一存储系统中出现该目标数据丢失的情况下，第一存储系统的第一存储服务器还可以向第二存储服务器请求该目标数据。
S311，第二存储服务器响应于该读取请求，从第三独立冗余磁盘阵列中读取该目标数据；
S312，如果第二存储服务器从第三独立冗余磁盘阵列中读取出该目标数据，则读取出的目标数据发送给第一存储服务器；
S313，如果第二存储服务器从第三独立冗余磁盘阵列中读取该目标数据失败，则从第四独立冗余磁盘阵列中读取该目标数据；
S314，第二存储服务器将从第四独立冗余磁盘阵列中读取出的该目标数据发送给第一存储服务器。
第二存储服务器先从第三独立冗余磁盘阵列中读取目标数据，如果读取失败，则从第四独立冗余磁盘阵列读取该目标数据，并将最终读取到的目标数据转发给第一存储服务器，从而使得第一存储服务器在第一存储系统丢失目标数据的情况下，仍可以获取到该目标数据。
下面对本发明实施例提供的数据处理装置进行介绍。
如，参见图4，其示出了本申请一种数据处理装置一个实施例的组成结构示意图，本实施例的数据处理装置可以应用于第一存储服务器。该装置可以包括：
数据获取单元401，用于获取待存储的目标数据；
第一存储单元402，用于按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；
第二存储单元403，用于在将所述目标数据存储到所述第一独立冗余磁盘阵列的同时，按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
可选的，所述装置还可以包括：
读取接收单元，用于在所述第二存储单元将所述目标数据存储至所述第二独立冗余磁盘阵列之后，接收对所述目标数据的读取请求；
第一数据读取单元，用于当从所述第一独立冗余磁盘阵列中读取所述目标数据失败时，从所述第二独立冗余磁盘阵列中读取所述目标数据。
可选的，所述装置还可以包括：
目标数据转发单元404，用于在所述第一存储单元将所述目标数据存储到所述第一独立冗余磁盘阵列之后，将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据，以便所述第二存储服务器将所述目标数据存储到所述第二存储服务器控制的第三独立冗余磁盘阵列的同时，将所述目标数据存储到所述第二存储服务器控制的第四独立冗余磁盘阵列。
进一步的，所述装置还可以包括：
读取接收单元，用于接收对所述目标数据的读取请求；
第二数据读取单元，用于当从所述第一独立冗余磁盘阵列以及所述第二独立冗余磁盘阵列中读取所述目标数据失败时，将所述读取请求转发给所述第二存储服务器，以便所述第二存储服务器从所述第三存储阵列或者第四存储阵列中读取出所述目标数据；
读取数据接收单元，用于获取所述第二存储服务器返回的所述目标数据。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的核心思想或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据处理方法，其特征在于，应用于第一存储系统的第一存储服务器，所述第一存储服务器至少具有第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列，所述包括：
所述第一存储服务器获取待存储的目标数据；
所述第一存储服务器按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；
所述第一存储服务器按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
2.根据权利要求1所述的数据处理方法，其特征在于，所述第一存储服务器按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列之后，还包括：
所述第一存储服务器将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据，以便所述第二存储服务器将所述目标数据存储到所述第二存储服务器控制的第三独立冗余磁盘阵列的同时，将所述目标数据存储到所述第二存储服务器控制的第四独立冗余磁盘阵列。
3.根据权利要求1所述的数据处理方法，其特征在于，在所述第一存储服务器按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列之后，还包括：
接收对所述目标数据的读取请求；
当从所述第一独立冗余磁盘阵列中读取所述目标数据失败时，从所述第二独立冗余磁盘阵列中读取所述目标数据。
4.根据权利要求2所述的数据处理方法，其特征在于，在所述第一存储服务器将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据之后，还包括：
接收对所述目标数据的读取请求；
当从所述第一独立冗余磁盘阵列以及所述第二独立冗余磁盘阵列中读取所述目标数据失败时，将所述读取请求转发给所述第二存储服务器，以便所述第二存储服务器从所述第三存储阵列或者第四存储阵列中读取出所述目标数据；
获取所述第二存储服务器返回的所述目标数据。
5.一种数据处理装置，其特征在于，应用于第一存储系统的第一存储服务器，所述第一存储服务器至少具有第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列，所述包括：
数据获取单元，用于获取待存储的目标数据；
第一存储单元，用于按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；
第二存储单元，用于在将所述目标数据存储到所述第一独立冗余磁盘阵列的同时，按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
6.根据权利要求5所述的数据处理装置，其特征在于，还包括：
目标数据转发单元，用于在所述第一存储单元将所述目标数据存储到所述第一独立冗余磁盘阵列之后，将所述目标数据发送给第二存储系统的第二存储服务器，并指示所述第二存储服务器存储所述目标数据，以便所述第二存储服务器将所述目标数据存储到所述第二存储服务器控制的第三独立冗余磁盘阵列的同时，将所述目标数据存储到所述第二存储服务器控制的第四独立冗余磁盘阵列。
7.根据权利要求5所述的数据处理装置，其特征在于，还包括：
读取接收单元，用于在所述第二存储单元将所述目标数据存储至所述第二独立冗余磁盘阵列之后，接收对所述目标数据的读取请求；
第一数据读取单元，用于当从所述第一独立冗余磁盘阵列中读取所述目标数据失败时，从所述第二独立冗余磁盘阵列中读取所述目标数据。
8.根据权利要求6所述的数据处理装置，其特征在于，还包括：
读取接收单元，用于接收对所述目标数据的读取请求；
第二数据读取单元，用于当从所述第一独立冗余磁盘阵列以及所述第二独立冗余磁盘阵列中读取所述目标数据失败时，将所述读取请求转发给所述第二存储服务器，以便所述第二存储服务器从所述第三存储阵列或者第四存储阵列中读取出所述目标数据；
读取数据接收单元，用于获取所述第二存储服务器返回的所述目标数据。
9.一种数据处理系统，其特征在于，包括：
第一存储系统，所述第一存储系统至少包括第一存储服务器，且所述第一存储服务器至少具有第一独立冗余磁盘阵列以及第二独立冗余磁盘阵列；
所述第一存储服务器用于，获取待存储的目标数据；按照所述第一独立冗余磁盘阵列对应的第一数据存储方式，将所述目标数据存储到所述第一独立冗余磁盘阵列；并按照所述第二独立冗余磁盘阵列对应的第二数据存储方式，将所述目标数据存储至所述第二独立冗余磁盘阵列。
10.根据权利要求9所述的数据处理系统，其特征在于，还包括：
第二存储系统，所述第二存储系统至少包括第二存储服务器，且所述第二存储服务器至少具有第三独立冗余磁盘阵列以及第四独立冗余磁盘阵列；
且，所述第二存储服务器与所述第一存储服务器通过网络连接；
所述第一存储服务器还用于，在将所述目标数据存储至所述第二独立冗余磁盘阵列之后，将所述目标数据发送给所述第二存储服务器，并指示所述第二存储服务器存储所述目标数据；
所述第二存储服务器，用于按照所述第三独立冗余磁盘阵列对应的第三数据存储方式，将所述目标数据存储到所述第三独立冗余磁盘阵列；并按照所述第四独立冗余磁盘阵列对应的第四数据存储方式，将所述目标数据存储至所述第四独立冗余磁盘阵列。
CN201710398965.4A 2017-05-31 2017-05-31 数据处理方法、装置以及系统 Pending CN107229423A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710398965.4A CN107229423A (zh) 2017-05-31 2017-05-31 数据处理方法、装置以及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710398965.4A CN107229423A (zh) 2017-05-31 2017-05-31 数据处理方法、装置以及系统

Publications (1)

Publication Number Publication Date
CN107229423A true CN107229423A (zh) 2017-10-03

Family

ID=59934393

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710398965.4A Pending CN107229423A (zh) 2017-05-31 2017-05-31 数据处理方法、装置以及系统

Country Status (1)

Country Link
CN (1) CN107229423A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110597453A (zh) * 2018-06-13 2019-12-20 杭州海康威视系统技术有限公司 一种云存储系统中的视频数据存储方法及装置
CN112905394A (zh) * 2021-03-05 2021-06-04 上海上讯信息技术股份有限公司 基于共享存储的防止单点故障的方法及设备
CN114063892A (zh) * 2020-08-07 2022-02-18 华为技术有限公司 独立磁盘冗余阵列卡，处理命令的方法，存储装置和系统
CN114415979A (zh) * 2022-03-29 2022-04-29 浙江大华技术股份有限公司 存储装置的处理方法、计算机设备及存储装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101256471A (zh) * 2007-02-26 2008-09-03 国际商业机器公司 数据阵列选择的方法和系统
US20090210742A1 (en) * 2008-02-18 2009-08-20 Dell Products L.P. Methods, systems and media for data recovery using global parity for multiple independent RAID levels
US20130013857A1 (en) * 2011-07-05 2013-01-10 Dell Products, Lp System and Method for Providing a RAID Plus Copy Model for a Storage Network
CN102981927A (zh) * 2011-09-06 2013-03-20 阿里巴巴集团控股有限公司 分布式独立冗余磁盘阵列存储方法及分布式集群存储系统
CN106648450A (zh) * 2015-11-04 2017-05-10 南京壹进制信息技术股份有限公司 一种数据安全存储的实现方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101256471A (zh) * 2007-02-26 2008-09-03 国际商业机器公司 数据阵列选择的方法和系统
US20090210742A1 (en) * 2008-02-18 2009-08-20 Dell Products L.P. Methods, systems and media for data recovery using global parity for multiple independent RAID levels
US20130013857A1 (en) * 2011-07-05 2013-01-10 Dell Products, Lp System and Method for Providing a RAID Plus Copy Model for a Storage Network
CN102981927A (zh) * 2011-09-06 2013-03-20 阿里巴巴集团控股有限公司 分布式独立冗余磁盘阵列存储方法及分布式集群存储系统
CN106648450A (zh) * 2015-11-04 2017-05-10 南京壹进制信息技术股份有限公司 一种数据安全存储的实现方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110597453A (zh) * 2018-06-13 2019-12-20 杭州海康威视系统技术有限公司 一种云存储系统中的视频数据存储方法及装置
US11316925B2 (en) 2018-06-13 2022-04-26 Hangzhou Hikvision System Technology Co., Ltd. Video data storage method and device in cloud storage system
CN114063892A (zh) * 2020-08-07 2022-02-18 华为技术有限公司 独立磁盘冗余阵列卡，处理命令的方法，存储装置和系统
CN114063892B (zh) * 2020-08-07 2024-03-26 华为技术有限公司 独立磁盘冗余阵列卡，处理命令的方法，存储装置和系统
CN112905394A (zh) * 2021-03-05 2021-06-04 上海上讯信息技术股份有限公司 基于共享存储的防止单点故障的方法及设备
CN114415979A (zh) * 2022-03-29 2022-04-29 浙江大华技术股份有限公司 存储装置的处理方法、计算机设备及存储装置
CN114415979B (zh) * 2022-03-29 2022-07-15 浙江大华技术股份有限公司 存储装置的处理方法、计算机设备及存储装置

Similar Documents

Publication Publication Date Title
CN107229423A (zh) 数据处理方法、装置以及系统
CN102981927B (zh) 分布式独立冗余磁盘阵列存储方法及分布式集群存储系统
US7240235B2 (en) Journaling technique for write transactions to mass storage
CN104965768B (zh) 用于存储系统中的服务感知数据放置的方法和系统
CN102024044B (zh) 分布式文件系统
US20100306466A1 (en) Method for improving disk availability and disk array controller
US20020194428A1 (en) Method and apparatus for distributing raid processing over a network link
CN106126374B (zh) 数据写入方法、数据读取方法及装置
US10365845B1 (en) Mapped raid restripe for improved drive utilization
US8365043B2 (en) Efficient redundant memory unit array
CN107729536A (zh) 一种数据存储方法和装置
US8892676B2 (en) Thin import for a data storage system
CN107450852A (zh) 一种存储空间处理方法、装置和设备
CN103229243A (zh) 用于在非易失性存储设备中以冗余方式存储数据块的存储控制器和系统
CN109582245A (zh) 数据处理方法、装置及设备
US6954825B2 (en) Disk subsystem
US6249849B1 (en) “Fail-Safe” updating of redundant data in multiple data storage libraries
US11803222B2 (en) Systems and methods for managing reduced power failure energy requirements on a solid state drive
CN105528180B (zh) 一种数据存储方法、装置及设备
CN101794246B (zh) 备份存储系统、备份系统及数据备份方法和恢复方法
CN109672544A (zh) 一种数据处理方法、装置及分布式存储系统
CN103902232B (zh) 一种写入的数据的方法及装置
CN115981926B (zh) 一种提高磁盘阵列性能的方法、装置及设备
US20170115905A1 (en) Data storage system and method
US9153347B2 (en) Method and system for reliable big capacity storage system protected by triple protection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171003

RJ01 Rejection of invention patent application after publication