CN105224891A - 磁盘光盘融合数据安全存储方法、系统及装置 - Google Patents
磁盘光盘融合数据安全存储方法、系统及装置 Download PDFInfo
- Publication number
- CN105224891A CN105224891A CN201510607612.1A CN201510607612A CN105224891A CN 105224891 A CN105224891 A CN 105224891A CN 201510607612 A CN201510607612 A CN 201510607612A CN 105224891 A CN105224891 A CN 105224891A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- hard disk
- stored
- disc
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
- G06F21/78—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer to assure secure storage of data
- G06F21/80—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer to assure secure storage of data in storage media based on magnetic or optical technology, e.g. disks with sectors
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明公开了一种磁盘光盘融合数据安全存储方法，包括：将数据存储到硬盘模块中；将硬盘中存储的数据存储至光盘模块中的光盘中；存储数据的属性信息以及数据在光盘模块中对应的位置信息；根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；更新数据的属性信息和数据在光盘模块中对应的位置信息。本发明还提供了一种磁盘光盘融合数据安全存储系统和装置。本发明将数据同时存入硬盘与光盘中，并在磁盘数据无法读取时，自动化地从光盘读取数据并进行数据重建，有效地提高了数据存储的安全性、稳定性和数据读写效率。
Description
技术领域
本发明涉及数据存储领域，尤其涉及一种磁盘光盘融合数据安全存储方法、系统及装置。
背景技术
在信息化社会的发展进程中，人类需要存储的数据量正在持续迅速增长。在现有相对应的存储技术中，磁盘仍然是应用主流，在需要高速度数据存储的应用中，半导体固态硬盘正在被更加广泛地应用。
磁盘伴随着信息系统的发展进步至今，已经达到了很高的技术水平，磁盘的主要优点是随机存储速度快，单位体积存储容量大；磁盘的主要缺点是寿命有限且不可预测，一般3-5年需要更换一次，由于磁盘的机械旋转，所以会消耗较多的电能并发热，为此需要设置散热装置，通常用风扇，将热排出到设备外，空调装置用于抵消设备所发出的热能，这样同样会消耗大量的电能。
磁盘主要指硬盘，硬盘有固态硬盘(SSD盘，新式硬盘)、机械硬盘(HDD传统硬盘)、混合硬盘(HHD一块基于传统机械硬盘诞生出来的新硬盘)。SSD采用闪存颗粒来存储，HDD采用磁性碟片来存储，混合硬盘(HHD:HybridHardDisk)是把磁性硬盘和闪存集成到一起的一种硬盘。绝大多数硬盘都是固定硬盘，被永久性地密封固定在硬盘驱动器中。
为了能相对高效可靠的使用大量磁盘来存储数据，现有的技术是以冗余的方法将数据组织到多块磁盘中组成一个磁盘阵列。如此，根据冗余度的大小，在多块磁盘中有一块或几块磁盘出现坏损时，存储在磁盘阵列中的数据不会丢失。
这样组成磁盘阵列仍然不能确保数据的安全，为了不丢失数据，通常的做法是对磁盘阵列添加一个备份系统，备份系统的功能是在磁盘阵列出现故障时，能够将数据恢复到新建的磁盘阵列中去，数据备份所用的设备通常为磁带库，虚拟带库，镜像磁盘阵列等。备份系统无论是设备成本，管理成本，还是日常运维管理开销都是十分昂贵的备份市场也是一个十分庞大的市场。
当磁盘阵列用于归档存储时，存在一个不符合法规的问题：即存在磁盘阵列上的数据理论上是可以删除和更改的。符合法规的做法是将数据归档存储在一次可写的介质上，也即通常所述的WORM(WriteOnceReadMany)介质。光盘是可以满足WORM特性的存储介质，而且数据保存的寿命很长，通常大于50年，因此非常适合于数据的长期存储和归档存储。
随着数据中心的存储规模日益增大，一个新的问题也逐渐显现出来，而且正在变得日益严重，当冗余磁盘阵列中的某地磁盘坏损时，需要及时进行更换，对于更换后的硬盘，还要将原先的数据再恢复上去，这个过程被称为重建。问题在于这个重建的过程非常耗时，根据应用场景和磁盘容量的不同，重建的过程往往会持续数小时到数十天，在此期间，如果再次出现磁盘坏损情况，则会导致数据丢失，在规模较大的数据中心，这种重建工作会频繁发生，除了耗费大量管理开销外，数据丢失的系统风险也在增加。
光盘的主要优点是保存寿命长，用于数据归档的专业光盘，其上数据可以保存200年以上。
采用磁盘与光盘结合的方法已存在多年，通常的办法是采用分层存储的方法。此时系统将经常使用的数据放在高速度的存储器中，如固态硬盘和SAS磁盘，对于不经常使用的数据。则逐步将其存入光盘，这种存储架构的问题是系统复杂度高，对于处于高速存储层的数据，还要额外实施备份保护。此外，磁盘存储设备的寿命一般在3-5年，因此升级换代的开销很大，在光盘存储方面，光盘库处于分级存储的最底层，如何融入现有的存储架构，须视应用的具体要求，如此形成众多的系统解决方案，这样的应用方式比较费时费力，应用的效果也很大程度上受应用解决方案的影响。
发明内容
针对以上的问题，本发明将磁盘与光盘的优点结合起来，并由此提出了一种磁盘与光盘相融合的数据安全存储方法、系统和装置。
本发明的核心是将光盘数据存储的元素，融合到现有的磁盘阵列存储中去，与传统的分层存储的构架不同，本发明中使用的光盘库技术，不作为独立的存储层，而是完全隐去，对整个系统而言是透明的，这样一来，本发明的磁光混合存储系统对外呈现的是一组磁盘，最典型的组织方式是一个网路附加存储(NAS,NetworkAttachedStorage)，网路附件存储以标准文件系统的方式提供网路数据服务，它可以很方便地被应用到各种不同操作系统平台上的信息系统中去，对内，本发明所述的磁光融合存储系统使用光盘对前端磁盘中的数据进行相对应的存储。
本发明是这样实现的：磁盘光盘融合数据安全存储方法，包括以下步骤：
S1、将数据存储到硬盘模块中；
S2、将所述硬盘中存储的数据存储至光盘模块中的光盘中；
S3、存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
S4、根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；
S5、更新数据的属性信息和数据在光盘模块中对应的位置信息。
进一步地，还包括以下步骤：
S6、将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中；
S7、更新数据的属性信息和数据在光盘模块中对应的位置信息。
进一步地，所述步骤S1还包括：在硬盘模块中的待写硬盘无法被存储时，将数据存储到硬盘模块中的其他硬盘，并对所述待写硬盘进行标识。
所述步骤S1还包括：将同一数据存储到硬盘模块中的至少两块硬盘中；
所述步骤S2还包括：在同一数据存储到硬盘模块中的至少两块硬盘时，将其中一块硬盘中存储的数据存储至光盘模块中的光盘中。
进一步地，步骤S1中，还包括将数据存储到硬盘模块中时，生成所述数据的第一校验码；步骤S4中，还包括在读取目标硬盘的数据前，生成目标硬盘中的数据的第二校验码，将所述数据的第二校验码与第一校验码进行比对，根据比对结果判断目标硬盘中数据的正确性，在目标硬盘中数据不正确时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区。
进一步地，步骤S2中，还包括将所述硬盘中存储的数据存储至光盘模块中的光盘中时，生成所述数据的第三校验码；步骤S6还包括将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中时，生成所述数据的第四校验码，将所述数据的第三校验码与所述第四校验码进行比对，根据比对结果判断目标硬盘中数据的正确性，在目标硬盘中数据不正确时，再次将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中。
所述第一校验码、第二校验码第三校验码和第四校验码为hash编码或CRC编码。
进一步地，所述硬盘模块包括多个硬盘，所述硬盘为固态硬盘、机械硬盘、混合硬盘或硬磁盘。
本发明还提供了一种磁盘光盘融合数据安全存储方法，包括以下步骤：
S101、将数据存储到硬盘模块中；
S102、将所述硬盘中存储的数据存储至光盘模块中的光盘中；
S103、存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
S104、根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘；
S105、将扫描的过程中检测到的数据异常的硬盘更换为新硬盘，并根据所述数据在光盘模块中对应的位置信息，将对应存储有所述数据异常的目标硬盘数据的光盘中的数据读入更换后的新硬盘中；
S106、更新数据的属性信息和数据在光盘模块中对应的位置信息。
本发明还提供了一种磁盘光盘融合数据安全存储系统，包括：
硬盘存储模块，用于将数据存储到硬盘模块中；
光盘存储模块，用于将所述硬盘中存储的数据存储至光盘模块中的光盘中；
磁光映射模块，用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
数据读取模块，用于根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；
更新模块，用于更新数据的属性信息和数据在光盘模块中对应的位置信息。
还包括数据重建模块，所述数据重建模块用于将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中。
本发明还提供了一种磁盘光盘融合数据安全存储系统，包括：
硬盘存储模块，用于将数据存储到硬盘模块中；
光盘存储模块，用于将所述硬盘中存储的数据存储至光盘模块中的光盘中；
磁光映射模块，用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
硬盘扫描模块，用于根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘；
数据恢复模块，用于将扫描的过程中检测到的数据异常的硬盘更换为新硬盘，并根据所述数据在光盘模块中对应的位置信息，将对应存储有所述数据异常的目标硬盘数据的光盘中的数据读入更换后的新硬盘中；
更新模块，用于更新数据的属性信息和数据在光盘模块中对应的位置信息。
本发明还提供了一种磁盘光盘融合数据安全存储装置，包括服务器、硬盘模块、光盘模块和映射数据库，
所述硬盘模块包括多张用于存储数据的硬盘；
所述光盘模块包括光盘库，所述光盘库包括多张光盘，所述光盘用于存储所述硬盘模块中存储的数据；
所述映射数据库用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
所述服务器用于根据所述映射数据库中数据的属性信息，从硬盘模块中的目标硬盘中读取数据；以及在目标硬盘无法被读取时，根据映射数据库中所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区，并更新所述映射数据库中所述数据的属性信息以及所述数据在光盘模块中对应的位置信息。
本发明还提供了一种所述光盘库还包括光盘匣、机械手组件、光驱和控制器，所述光盘匣用于容纳所述光盘，所述光驱和控制器均与所述服务器连接；所述机械手组件用于在所述控制器的控制下实现光盘在光盘匣与光驱之间的移动。
实施本发明，具有如下有益效果：
(1)本发明设置有硬盘模块和光盘模块，在将数据存储到硬盘模块的同时，将数据写入光盘中备份，从而借助光盘存储的稳定性，增强数据存储的安全性。
(2)本发明在写入数据的过程中，如果有硬盘发生故障无法写入，则先将数据写入预设的数据缓冲区，同时，将数据写入光盘模块，并保存数据在硬盘模块与光盘模块的映射关系，也就是数据在硬盘模块与光盘模块中对应的位置信息。当硬盘模块中放入用于替换的新硬盘后，将未写入故障硬盘的数据由相应的光盘模块读出并写入新硬盘，从而实现在不影响数据使用的前提下实现硬盘的修复。
(3)本发明在读取数据的过程中，首先从硬盘模块读取，如果有硬盘发生故障无法读出，则从光盘模块将数据读入预设的数据缓冲区，并由此向外提供所要读取的数据；当硬盘模块中放入用于替换的新硬盘后，从光盘模块中读取存有故障硬盘数据的数据并存入新硬盘，从而实现在不影响数据读取的前提下实现硬盘的修复。
(4)本发明还具有硬盘检测功能，定时扫描硬盘，若检测到硬盘发生异常，则在硬盘模块中放入用于替换的新硬盘，并从光盘模块中读取存有故障硬盘数据的数据并存入新硬盘，实现硬盘数据的重建和修复，从而有效地提高数据存储的安全性和稳定性。
(5)本发明在将数据存储到硬盘的过程中，同一数据同时存入至少两块独立的硬盘中，对数据进行冗余保护，从而有效地避免被写入的硬盘出现坏损时造成的数据丢失，提高数据存储的安全性。
(6)本发明的光盘模块能够实现光盘自动化地调用，从而有效地提高数据存储的效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。
图1是本发明实施例一提供的磁盘光盘融合数据安全存储方法的框图；
图2是本发明实施例二提供的磁盘光盘融合数据安全存储方法的框图；
图3是本发明实施例五提供的磁盘光盘融合数据安全存储装置的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一：
请参见图1，本发明实施例提供了一种磁盘光盘融合数据安全存储方法，包括以下步骤：
S1、将数据存储到硬盘模块中；
其中，硬盘模块包括由多个硬盘，比如磁盘阵列，所述硬盘为固态硬盘、机械硬盘、混合硬盘或硬磁盘。将数据存储到硬盘模块中也称作将数据写入硬盘模块。为了保证数据在存储过程中的安全性，将数据存储到硬盘模块时，同一数据被同时存储在硬盘模块中的至少两块硬盘上，也就是说，对于同一数据，至少有两块硬盘对其进行存储；同一数据在硬盘中至少有一份单独的备份硬盘；将数据存储到硬盘时，另外复制至少一份数据存储到另外一块或几块硬盘中。
S2、将所述硬盘中存储的数据存储至光盘模块中的光盘中；
在将数据写入硬盘模块中的硬盘的同时，将写入硬盘的数据以尽量小的时间延迟从硬盘刻录到光盘模块中的光盘上，这样能够保证写入光盘中的数据的准确性。
在同一数据被存储到硬盘模块中的至少两块硬盘时，只将所述至少两块硬盘中的其中一块硬盘中的数据写入光盘模块中的光盘中，对至少两块硬盘中剩下的硬盘标识为备份硬盘。
S3、存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
数据的属性信息为数据的完备属性信息，存储所述数据的属性信息能够方便快速访问数据；存储数据在磁盘中的位置信息以及该数据在光盘模块中对应的位置信息；所述数据在光盘模块中对应的位置信息将存储在硬盘中的数据和对应备份在光盘中的数据关联起来。
在将数据存储到硬盘模块的过程中，若待写的目标硬盘无法被存储(如目标硬盘损坏或线路故障)，则将数据存储到硬盘模块中的其他硬盘，并对所述待写的目标硬盘进行标识。
将同一数据存储到硬盘模块中的至少两块硬盘，这样一来，从数据被写入硬盘模块起直至数据被写入光盘的过渡过程中加入冗余保护，在数据被写入光盘时，能够在被写入的硬盘出现坏损的情况下保护这部分数据不丢失。
当步骤S2，S3执行完毕后，将标识为备份硬盘的硬盘中的数据标识为可放弃数据，该数据在需要释放存储空间时，优先被删除。
S4、根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；
当要读取数据时，首先根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，此时光盘模块不发生任何动作。在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；这里的数据缓冲区可以是硬盘模块中的数据缓冲区，也可以是用于访问硬盘模块的服务器的数据缓冲区。
S5、更新数据的属性信息和数据在光盘模块中对应的位置信息。
S6、将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中；
这里的目标硬盘为无法被读取的目标硬盘，当硬盘模块中新放入用于替换的硬盘后，将存有无法被读取的目标硬盘的数据的光盘中的数据存入更换后的新硬盘中，实现硬盘数据的重建。
S7、更新数据的属性信息和数据在光盘模块中对应的位置信息。
数据重建后，由于存放路径和硬盘光盘对应关系发生改变，需要更新数据的属性信息和数据在光盘模块中对应的位置信息。
为了保证数据读写的正确性，需要对数据进行校验。
具体来说，步骤S1中，将数据存储到硬盘模块中时，生成所述数据的第一校验码；步骤S2中，还包括将所述硬盘中存储的数据存储至光盘模块中的光盘中时，在光盘模块中生成所述数据的第三校验码；步骤S4中，在读取目标硬盘的数据前，生成目标硬盘中的数据的第二校验码，将所述数据的第二校验码与第一校验码进行比对，根据比对结果判断目标硬盘中数据的正确性，在目标硬盘中数据不正确时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区，然后从所述数据缓冲区读取数据。
步骤S6中，将存储有目标硬盘数据的光盘中的数据和所述数据对应的所述第三校验码一同存储到硬盘模块中更换后的新硬盘中，生成所述数据的第四校验码，将所述数据的第四校验码与第三校验码进行比对，根据比对结果判断存储到新硬盘中数据的正确性，在新硬盘中的数据不正确时，再次将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中。
所述第一校验码、第二校验码第三校验码和第四校验码为hash编码或CRC编码。
本实施例中，第一校验码、第二校验码第三校验码和第四校验码采用MD5校验码，作为HASH校验码的一种MD5具有以下特点：
1、压缩性：任意长度的数据，算出的MD5值长度都是固定的。
2、容易计算：从原数据计算出MD5值很容易。
3、抗修改性：对原数据进行任何改动，哪怕只修改1个字节，所得到的MD5值都有很大区别。
4、弱抗碰撞：已知原数据和其MD5值，想找到一个具有相同MD5值的数据(即伪造数据)是非常困难的。
5、强抗碰撞：想找到两个不同的数据，使它们具有相同的MD5值，是非常困难的。
实施例二：
请参见图2，本实施例提供了一种磁盘光盘融合数据安全存储方法，包括以下步骤：
S101、将数据存储到硬盘模块中；
S102、将所述硬盘中存储的数据存储至光盘模块中的光盘中；
S103、存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
本实施例的步骤S101、S102、S103与实施例一相同，在此不再赘述。
S104、根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘；
为了检测硬盘模块的状态，定期对硬盘进行扫描，扫描时，根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘。
S105、将扫描的过程中检测到的数据异常的硬盘更换为新硬盘，并根据所述数据在光盘模块中对应的位置信息，将对应存储有所述数据异常的目标硬盘数据的光盘中的数据读入更换后的新硬盘中；
S106、更新数据的属性信息和数据在光盘模块中对应的位置信息。
当硬盘模块中新放入用于替换的硬盘后，将存有异常的目标硬盘的数据的光盘中的数据存入更换后的新硬盘中，实现硬盘数据的修复和重建。数据重建后，由于存放路径和硬盘光盘对应关系发生改变，需要更新数据的属性信息和数据在光盘模块中对应的位置信息。
在扫描硬盘的数据前，也可以校验存储在硬盘模块中的数据与对应存储在所述光盘模块中的数据是否一致。检验方法与实施例一相同，在此不再赘述。
本方法能够定时检测硬盘模块中的硬盘状态，在检测到硬盘出现异常后，用新硬盘更换异常硬盘，查找到对应备份有该异常硬盘数据的光盘，将所述光盘中的数据存入更换后的新硬盘中，实现硬盘数据的恢复，从而使数据存储更加安全可靠。
实施例三：
本发施例提供了一种磁盘光盘融合数据安全存储系统，本实施例中的模块与实施例二中的方法相对应；系统包括：
硬盘存储模块，用于将数据存储到硬盘模块中；
光盘存储模块，用于将所述硬盘中存储的数据存储至光盘模块中的光盘中；
磁光映射模块，用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
数据读取模块，用于根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；
更新模块，用于更新数据的属性信息和数据在光盘模块中对应的位置信息。
进一步地，所述系统还包括数据重建模块，所述数据重建模块用于将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中。
实施例四：
本发明还提供了一种磁盘光盘融合数据安全存储系统，本实施例中的模块与实施例二中的方法相对应；系统包括：
硬盘存储模块，用于将数据存储到硬盘模块中；
光盘存储模块，用于将所述硬盘中存储的数据存储至光盘模块中的光盘中；
磁光映射模块，用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
硬盘扫描模块，用于根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘；
数据恢复模块，用于将扫描的过程中检测到的数据异常的硬盘更换为新硬盘，并根据所述数据在光盘模块中对应的位置信息，将对应存储有所述数据异常的目标硬盘数据的光盘中的数据读入更换后的新硬盘中；
更新模块，用于更新数据的属性信息和数据在光盘模块中对应的位置信息。
实施例五：
请参见图3，本实施例提供了一种磁盘光盘融合数据安全存储装置，包括服务器、硬盘模块、光盘模块和映射数据库，
所述硬盘模块包括多张用于存储数据的硬盘；
所述光盘模块包括光盘库，所述光盘库包括多张光盘，所述光盘用于存储所述硬盘模块中存储的数据；
所述映射数据库用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
所述服务器用于根据所述映射数据库中数据的属性信息，从硬盘模块中的目标硬盘中读取数据；以及在目标硬盘无法被读取时，根据映射数据库中所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区，并更新所述映射数据库中所述数据的属性信息以及所述数据在光盘模块中对应的位置信息。
进一步地，所述光盘库还包括光盘匣、机械手组件、光驱和控制器，所述光盘匣用于容纳所述光盘，所述光驱和控制器均与所述服务器连接；所述机械手组件用于在所述控制器的控制下实现光盘在光盘匣与光驱之间的移动。具体来说，机械手组件用于在所述控制器的控制下将光盘从光盘匣中抓取并放入光驱，以及用于在所述控制器的控制下将光盘从光驱放回光盘匣中。
所述服务器还用于将数据写入硬盘模块，在将数据存储到硬盘模块的过程中，若目标硬盘无法被存储(如目标硬盘损坏)，则将数据先存储到硬盘模块中预设的数据缓冲区，然后将预设的数据缓冲区内的数据存入光盘中，并存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息。当有更换后的新硬盘替换无法被存储的硬盘后，再将存储有预设的数据缓冲区数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中，并更新数据的属性信息和数据在光盘模块中对应的位置信息。
本发明的软件包括硬盘管理软件和光盘库管理软件。
硬盘存储管理软件用来管理硬盘模块，硬盘经过硬盘存储管理软件管理形成所需的对外接口，接口的形式可以是网络附加存储(NAS)SAN的iscsiTarget,或分布式存储的某种特定形式。
硬盘存储管理软件具有硬件健康检测功能，可以及时给出某块硬盘需要更换的信息。
光盘库管理软件负责管理光盘的机械装载与卸载，光盘的刻录，读写以及加密，健康检测等功能，与通用的传统光盘库管理软件不同，本发明中的光盘库管理软件不对外提供任何服务，即通过网络无法与光盘库管理软件通讯，因此从外部也无法直接控制光盘库的任何操作。本发明中的光盘库管理软件只与硬盘存储管理软件通信。并实时监测硬盘存储管理软件的操作状态与动作。光盘库管理软件负责将硬盘模块中的数据刻录到相应的光盘中去，相应的硬盘文件与光盘上的数据的对应关系信息，由光盘库管理软件控制并记录到数据库中。
通常情况下，硬盘模块中的所有硬件都处于正常工作状态。发生硬盘数据写入动作时，光盘库管理软件将调用相关的光盘到光驱组，数据也被写入光盘，硬盘与光盘之间的映射关系被硬盘存储管理软件记录到数据库中。发生硬盘数据读出动作时，首先从硬盘读取数据，在硬盘无法读取时，光盘库管理软件将调用相关的光盘到光驱组，数据从光盘读出并写入预设的数据缓冲区。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。
Claims (12)
1.磁盘光盘融合数据安全存储方法，其特征在于，包括以下步骤：
S1、将数据存储到硬盘模块中；
S2、将所述硬盘中存储的数据存储至光盘模块中的光盘中；
S3、存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
S4、根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；
S5、更新数据的属性信息和数据在光盘模块中对应的位置信息。
2.根据权利要求1所述的磁盘光盘融合数据安全存储方法，其特征在于，还包括以下步骤：
S6、将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中；
S7、更新数据的属性信息和数据在光盘模块中对应的位置信息。
3.根据权利要求1或2所述的磁盘光盘融合数据安全存储方法，其特征在于，所述步骤S1还包括：在硬盘模块中的待写硬盘无法被存储时，将数据存储到硬盘模块中的其他硬盘，并对所述待写硬盘进行标识；
所述步骤S1还包括：将同一数据存储到硬盘模块中的至少两块硬盘中；
所述步骤S2还包括：在同一数据存储到硬盘模块中的至少两块硬盘时，将其中一块硬盘中存储的数据存储至光盘模块中的光盘中。
4.根据权利要求3所述的磁盘光盘融合数据安全存储方法，其特征在于，步骤S1中，还包括将数据存储到硬盘模块中时，生成所述数据的第一校验码；步骤S4中，还包括在读取目标硬盘的数据前，生成目标硬盘中的数据的第二校验码，将所述数据的第二校验码与第一校验码进行比对，根据比对结果判断目标硬盘中数据的正确性，在目标硬盘中数据不正确时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区。
5.根据权利要求2或4所述的磁盘光盘融合数据安全存储方法，其特征在于，步骤S2中，还包括将所述硬盘中存储的数据存储至光盘模块中的光盘中时，生成所述数据的第三校验码；步骤S6还包括将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中时，生成所述数据的第四校验码，将所述数据的第三校验码与所述第四校验码进行比对，根据比对结果判断目标硬盘中数据的正确性，在目标硬盘中数据不正确时，再次将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中。
6.根据权利要求5所述的磁盘光盘融合数据安全存储方法，其特征在于，所述硬盘模块包括多个硬盘，所述硬盘为固态硬盘、机械硬盘、混合硬盘或硬磁盘。
7.磁盘光盘融合数据安全存储方法，其特征在于，包括以下步骤：
S101、将数据存储到硬盘模块中；
S102、将所述硬盘中存储的数据存储至光盘模块中的光盘中；
S103、存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
S104、根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘；
S105、将扫描的过程中检测到的数据异常的硬盘更换为新硬盘，并根据所述数据在光盘模块中对应的位置信息，将对应存储有所述数据异常的目标硬盘数据的光盘中的数据读入更换后的新硬盘中；
S106、更新数据的属性信息和数据在光盘模块中对应的位置信息。
8.磁盘光盘融合数据安全存储系统，其特征在于，包括：
硬盘存储模块，用于将数据存储到硬盘模块中；
光盘存储模块，用于将所述硬盘中存储的数据存储至光盘模块中的光盘中；
磁光映射模块，用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
数据读取模块，用于根据数据的属性信息从硬盘模块中的目标硬盘中读取数据，在目标硬盘无法被读取时，根据所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区；
更新模块，用于更新数据的属性信息和数据在光盘模块中对应的位置信息。
9.根据权利要求8所述的磁盘光盘融合数据安全存储系统，其特征在于，还包括数据重建模块，所述数据重建模块用于将存储有目标硬盘数据的光盘中的数据存储到硬盘模块中更换后的新硬盘中。
10.磁盘光盘融合数据安全存储系统，其特征在于，包括：
硬盘存储模块，用于将数据存储到硬盘模块中；
光盘存储模块，用于将所述硬盘中存储的数据存储至光盘模块中的光盘中；
磁光映射模块，用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
硬盘扫描模块，用于根据所述数据的属性信息，按照预定的时间周期定时扫描硬盘；
数据恢复模块，用于将扫描的过程中检测到的数据异常的硬盘更换为新硬盘，并根据所述数据在光盘模块中对应的位置信息，将对应存储有所述数据异常的目标硬盘数据的光盘中的数据读入更换后的新硬盘中；
更新模块，用于更新数据的属性信息和数据在光盘模块中对应的位置信息。
11.磁盘光盘融合数据安全存储装置，其特征在于，包括服务器、硬盘模块、光盘模块和映射数据库，
所述硬盘模块包括多张用于存储数据的硬盘；
所述光盘模块包括光盘库，所述光盘库包括多张光盘，所述光盘用于存储所述硬盘模块中存储的数据；
所述映射数据库用于存储所述数据的属性信息以及所述数据在光盘模块中对应的位置信息；
所述服务器用于根据所述映射数据库中数据的属性信息，从硬盘模块中的目标硬盘中读取数据；以及在目标硬盘无法被读取时，根据映射数据库中所述数据在光盘模块中对应的位置信息，将存储有目标硬盘数据的光盘中的数据读入预设的数据缓冲区，并更新所述映射数据库中所述数据的属性信息以及所述数据在光盘模块中对应的位置信息。
12.根据权利要求11所述的磁盘光盘融合数据安全存储装置，其特征在于，所述光盘库还包括光盘匣、机械手组件、光驱和控制器，所述光盘匣用于容纳所述光盘，所述光驱和控制器均与所述服务器连接；所述机械手组件用于在所述控制器的控制下实现光盘在光盘匣与光驱之间的移动。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510607612.1A CN105224891A (zh) | 2015-09-22 | 2015-09-22 | 磁盘光盘融合数据安全存储方法、系统及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510607612.1A CN105224891A (zh) | 2015-09-22 | 2015-09-22 | 磁盘光盘融合数据安全存储方法、系统及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN105224891A true CN105224891A (zh) | 2016-01-06 |
Family
ID=54993853
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510607612.1A Pending CN105224891A (zh) | 2015-09-22 | 2015-09-22 | 磁盘光盘融合数据安全存储方法、系统及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105224891A (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106992018A (zh) * | 2016-01-21 | 2017-07-28 | 苏州互盟信息存储技术有限公司 | 一种新型数据存储系统及数据存储方法 |
| CN107315662A (zh) * | 2017-07-05 | 2017-11-03 | 郑州云海信息技术有限公司 | 一种防止硬盘数据丢失的方法及系统 |
| CN107450859A (zh) * | 2017-08-14 | 2017-12-08 | 北京盛和大地数据科技有限公司 | 一种读取文件数据的方法和装置 |
| CN107704211A (zh) * | 2017-10-31 | 2018-02-16 | 武汉光忆科技有限公司 | 一种磁光电混合光盘库及其管理方法和管理系统 |
| CN107766178A (zh) * | 2017-10-24 | 2018-03-06 | 上海金档信息技术有限公司 | 电子档案存储系统、存储方法及修复方法 |
| CN110825314A (zh) * | 2018-08-10 | 2020-02-21 | 浙江宇视科技有限公司 | 一种数据调度方法及装置 |
| CN111062066A (zh) * | 2019-11-04 | 2020-04-24 | 湖南源科创新科技有限公司 | 防固态硬盘数据丢失的方法和数据存储系统 |
| CN112463019A (zh) * | 2019-09-06 | 2021-03-09 | 华为技术有限公司 | 数据读取方法及装置 |
| CN113271343A (zh) * | 2021-04-28 | 2021-08-17 | 华录光存储研究院（大连）有限公司 | 一种数据下载、上传的方法及电子设备 |
| CN113312004A (zh) * | 2021-06-15 | 2021-08-27 | 华录光存储研究院（大连）有限公司 | 一种多层级分布式存储系统及存储方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101714063A (zh) * | 2009-12-02 | 2010-05-26 | 苏州互盟信息存储技术有限公司 | 数据存储装置和方法 |
| CN102549550A (zh) * | 2011-12-06 | 2012-07-04 | 华为技术有限公司 | 一种数据访问方法及系统 |
| CN103793666A (zh) * | 2014-01-24 | 2014-05-14 | 中经云数据存储科技（北京）有限公司 | 一种数据文件的保护方法及系统 |
| CN103902232A (zh) * | 2012-12-28 | 2014-07-02 | 联想(北京)有限公司 | 一种写入的数据的方法及装置 |
| CN104268483A (zh) * | 2014-09-19 | 2015-01-07 | 福州瑞芯微电子有限公司 | 一种数据保护系统、装置及其方法 |
-
2015
- 2015-09-22 CN CN201510607612.1A patent/CN105224891A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101714063A (zh) * | 2009-12-02 | 2010-05-26 | 苏州互盟信息存储技术有限公司 | 数据存储装置和方法 |
| CN102549550A (zh) * | 2011-12-06 | 2012-07-04 | 华为技术有限公司 | 一种数据访问方法及系统 |
| CN103902232A (zh) * | 2012-12-28 | 2014-07-02 | 联想(北京)有限公司 | 一种写入的数据的方法及装置 |
| CN103793666A (zh) * | 2014-01-24 | 2014-05-14 | 中经云数据存储科技（北京）有限公司 | 一种数据文件的保护方法及系统 |
| CN104268483A (zh) * | 2014-09-19 | 2015-01-07 | 福州瑞芯微电子有限公司 | 一种数据保护系统、装置及其方法 |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106992018B (zh) * | 2016-01-21 | 2019-04-23 | 苏州互盟信息存储技术有限公司 | 一种新型数据存储系统及数据存储方法 |
| CN106992018A (zh) * | 2016-01-21 | 2017-07-28 | 苏州互盟信息存储技术有限公司 | 一种新型数据存储系统及数据存储方法 |
| CN107315662A (zh) * | 2017-07-05 | 2017-11-03 | 郑州云海信息技术有限公司 | 一种防止硬盘数据丢失的方法及系统 |
| CN107450859A (zh) * | 2017-08-14 | 2017-12-08 | 北京盛和大地数据科技有限公司 | 一种读取文件数据的方法和装置 |
| CN107450859B (zh) * | 2017-08-14 | 2024-01-16 | 北京盛和大地数据科技有限公司 | 一种读取文件数据的方法和装置 |
| CN107766178A (zh) * | 2017-10-24 | 2018-03-06 | 上海金档信息技术有限公司 | 电子档案存储系统、存储方法及修复方法 |
| CN107704211B (zh) * | 2017-10-31 | 2020-12-04 | 武汉光忆科技有限公司 | 一种磁光电混合光盘库及其管理方法和管理系统 |
| CN107704211A (zh) * | 2017-10-31 | 2018-02-16 | 武汉光忆科技有限公司 | 一种磁光电混合光盘库及其管理方法和管理系统 |
| CN110825314A (zh) * | 2018-08-10 | 2020-02-21 | 浙江宇视科技有限公司 | 一种数据调度方法及装置 |
| CN110825314B (zh) * | 2018-08-10 | 2024-02-02 | 浙江宇视科技有限公司 | 一种数据调度方法及装置 |
| CN112463019A (zh) * | 2019-09-06 | 2021-03-09 | 华为技术有限公司 | 数据读取方法及装置 |
| WO2021043246A1 (zh) * | 2019-09-06 | 2021-03-11 | 华为技术有限公司 | 数据读取方法及装置 |
| CN111062066A (zh) * | 2019-11-04 | 2020-04-24 | 湖南源科创新科技有限公司 | 防固态硬盘数据丢失的方法和数据存储系统 |
| CN113271343A (zh) * | 2021-04-28 | 2021-08-17 | 华录光存储研究院（大连）有限公司 | 一种数据下载、上传的方法及电子设备 |
| CN113312004A (zh) * | 2021-06-15 | 2021-08-27 | 华录光存储研究院（大连）有限公司 | 一种多层级分布式存储系统及存储方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105224891A (zh) | 磁盘光盘融合数据安全存储方法、系统及装置 | |
| US9836369B2 (en) | Storage system to recover and rewrite overwritten data | |
| US9189309B1 (en) | System and method for predicting single-disk failures | |
| US9229796B1 (en) | System and method for determining disk failure indicator to predict future disk failures | |
| US7774643B2 (en) | Method and apparatus for preventing permanent data loss due to single failure of a fault tolerant array | |
| US9141457B1 (en) | System and method for predicting multiple-disk failures | |
| CN104050056A (zh) | 多存储介质设备的文件系统备份 | |
| US20090313617A1 (en) | Method for Updating Control Program of Physical Storage Device in Storage Virtualization System and Storage Virtualization Controller and System Thereof | |
| CN103246478B (zh) | 一种基于软raid支持无分组式全局热备盘的磁盘阵列系统 | |
| US9377969B2 (en) | Information processing device, information processing method, and information storage medium, including storage of information indicating which medium among plural media has a recording failure area and a position in the medium of the recording failure area | |
| CN103019894B (zh) | 一种独立冗余磁盘阵列的重建方法 | |
| CN104811645A (zh) | 一种嵌入式录像数据存储方法 | |
| TW202024893A (zh) | 池級儲存管理 | |
| WO2020103512A1 (zh) | 一种存储系统中的数据重构方法和装置 | |
| CN105354099A (zh) | 一种西数硬盘修复方法 | |
| CN106339276A (zh) | 一种基于数据备份状态的数据恢复方法及系统 | |
| US10642508B2 (en) | Method to limit impact of partial media failure of disk drive and detect/report the loss of data for objects due to partial failure of media | |
| WO2017143843A1 (zh) | 元数据修复方法及装置 | |
| US20050033933A1 (en) | Systems and methods for modifying disk drive firmware in a raid storage system | |
| US20150339066A1 (en) | Non-volatile complement data cache | |
| US8938641B2 (en) | Method and apparatus for synchronizing storage volumes | |
| CN107766178A (zh) | 电子档案存储系统、存储方法及修复方法 | |
| US20070043968A1 (en) | Disk array rebuild disruption resumption handling method and system | |
| CN104572374B (zh) | 存储的处理方法、装置和存储设备 | |
| CN106933707B (zh) | 基于raid技术的数据存储设备数据恢复方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160106 |
|
| RJ01 | Rejection of invention patent application after publication |