CN109240853A - 一种新型的统一接口的混合备份系统 - Google Patents

一种新型的统一接口的混合备份系统 Download PDF

Info

Publication number
CN109240853A
CN109240853A CN201810998555.8A CN201810998555A CN109240853A CN 109240853 A CN109240853 A CN 109240853A CN 201810998555 A CN201810998555 A CN 201810998555A CN 109240853 A CN109240853 A CN 109240853A
Authority
CN
China
Prior art keywords
data
cold
storage subsystem
online storage
online
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810998555.8A
Other languages
English (en)
Inventor
刘凯
刘毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Virtual Clusters Information Technology Co Ltd
Original Assignee
Shenzhen Virtual Clusters Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Virtual Clusters Information Technology Co Ltd filed Critical Shenzhen Virtual Clusters Information Technology Co Ltd
Priority to CN201810998555.8A priority Critical patent/CN109240853A/zh
Publication of CN109240853A publication Critical patent/CN109240853A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种新型的统一接口的混合备份系统,包括:冷数据存储系统、在线存储系统;所述在线存储系统对外提供统一的访问接口,供不同系统的客户端访问;所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统。本发明统一接口的混合备份系统,将冷存储系统与在线存储系统相结合,并提供统一的访问接口,进行智能化的数据迁移和回迁以加快数据的访问,可以提高数据的备份及时性和效率,简化冷、热数据的访问。

Description

一种新型的统一接口的混合备份系统
技术领域
本发明涉及存储信息技术,特别涉及一种新型的统一接口的混合备份系统。
背景技术
当前社会生产生活中生成的数据量越来越多,但有80%以上都是冷数据,这些数据在刚开始时需要经常读取,但经过一段时间后访问次数逐渐减少,只有在需要的场合才会调出来进行访问,如各类档案、历史文献、老照片、老视频等等。这些数据适合存储在冷存储系统上(磁带系统或光盘刻录系统),以便长期进行保存。
冷数据刚开始是在线存储系统上产生的,占用的是在线生产系统的存储空间,这类存储系统往往价格较高,拥有高带宽、高并发,但存储空间有限,当数据逐渐变冷时,需要将数据从在线存储系统中迁移到冷存储系统上,后续如果要进行这些数据的访问时,则需要在冷存储系统上进行。
目前,冷数据存储系统和生产在线存储系统是分开的,是两个独立的系统,生产系统上的数据定期备份到冷数据存储中,当需要查看冷数据时,需要登录冷数据系统进行查看,速度较慢,同时两套数据也是隔离开来的,不同系统上的数据需要分别不同接口来访问。
发明内容
针对现有技术存在的问题,本发明提供一种新型的统一接口的混合备份系统。
为实现上述目的,本发明的具体技术方案如下:
一种新型的统一接口的混合备份系统,包括:冷数据存储系统、在线存储系统;所述在线存储系统对外提供统一的访问接口,供不同系统的客户端访问;所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统。
作为本发明一优选实施方案,所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统的存储策略如下:
(1)、当数据刚产生时,还不是冷数据时,数据还存在在线存储系统上;
(2)、随着时间推移,对于不再被用户访问的数据,这时将根据数据的冷热程度,将冷数据迁移到冷数据存储系统上;
(3)、当客户端要访问已经迁移出去的数据时,为了加快文件访问,这些文件的副本被再次迁移到在线存储系统上,加快文件的访问效率。
作为本发明一优选实施方案,所述存储策略中的将根据数据的冷热程度将冷数据迁移到冷数据存储系统上的冷数据迁移方法如下:
根据用户设定的策略,包括多长时间无人访问、文件的创建时间、文件的大小、文件的所属个人或项目组,智能的将冷文件迁移到后端的光盘、磁带系统,为在线存储系统腾出使用空间。
作为本发明一优选实施方案,所述在线存储系统存储于HDD上。
作为本发明一优选实施方案,所述冷数据存储系统存储于光盘、磁带系统上。
作为本发明一优选实施方案,所述不同系统的客户端包括一Windows客户端、一Linux客户端。
采用本发明的技术方案,具有以下有益效果:
本发明统一接口的混合备份系统,将冷存储系统与在线存储系统相结合,并提供统一的访问接口,进行智能化的数据迁移和回迁以加快数据的访问,可以提高数据的备份及时性和效率,简化冷、热数据的访问。
附图说明
图1为本发明实施例结构示意图。
具体实施方式
以下结合附图和具体实施例,对本发明进一步说明。
参照图1所示,本发明提供一种新型的统一接口的混合备份系统,包括:冷数据存储系统、在线存储系统;所述在线存储系统对外提供统一的访问接口,供不同系统的客户端访问;所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统。
其中,所述在线存储系统存储于HDD上;所述冷数据存储系统存储于光盘、磁带系统上。所述不同系统的客户端包括一Windows客户端、一Linux客户端。
作为本发明一优选实施方案,所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统的存储策略如下:
(1)、当数据刚产生时,还不是冷数据时,数据还存在在线存储系统上;
(2)、随着时间推移,对于不再被用户访问的数据,这时将根据数据的冷热程度,将冷数据迁移到冷数据存储系统上;
其中,冷数据迁移方法如下:
根据用户设定的策略,包括多长时间无人访问、文件的创建时间、文件的大小、文件的所属个人或项目组,智能的将冷文件迁移到后端的光盘、磁带库系统,为在线存储系统腾出使用空间。
(3)、当客户端要访问已经迁移出去的数据时,为了加快文件访问,这些文件的副本被再次迁移到在线存储系统上,加快文件的访问效率。
本发明中,客户端还是可以看到所有的文件数据,包括已经迁移到光盘系统或磁带系统的文件,这些文件会有特殊的标记,用来指示当前自己的位置。
本发明中提供统一的访问接口。对客户端来说,不再区分两套系统,而是通过统一的接口进行访问,保持接口访问简单。当对冷数据进行访问时,可根据策略将冷数据提升到在线存储系统中,这样加快对数据的访问。之后还可再根据策略将数据从在线存储系统中去除。在线存储系统与备份系统(可以多套)组成一个统一的命令空间,同时可以在客户端上看到哪些文件在在线存储系统,哪些数据在备份文件系统,方便用户的统一管理。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是在本发明的发明构思下,利用本发明说明书及附图内容所作的等效结构变换,或直接/间接运用在其他相关的技术领域均包括在本发明的专利保护范围内。

Claims (6)

1.一种新型的统一接口的混合备份系统,其特征在于,包括:冷数据存储系统、在线存储系统;所述在线存储系统对外提供统一的访问接口,供不同系统的客户端访问;所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统。
2.根据权利要求1所述的统一接口的混合备份系统,其特征在于,所述在线存储系统依据数据的冷热程度将该数据存储于该在线存储系统或冷数据存储系统的存储策略如下:
(1)、当数据刚产生时,还不是冷数据时,数据还存在在线存储系统上;
(2)、随着时间推移,对于不再被用户访问的数据,这时将根据数据的冷热程度,将冷数据迁移到冷数据存储系统上;
(3)、当客户端要访问已经迁移出去的数据时,为了加快文件访问,这些文件的副本被再次迁移到在线存储系统上,加快文件的访问效率。
3.根据权利要求2所述的统一接口的混合备份系统,其特征在于,所述存储策略中的将根据数据的冷热程度将冷数据迁移到冷数据存储系统上的冷数据迁移方法如下:
根据用户设定的策略,包括多长时间无人访问、文件的创建时间、文件的大小、文件的所属个人或项目组,智能的将冷数据迁移到后端的冷数据存储系统,为在线存储系统腾出使用空间。
4.根据权利要求1所述的统一接口的混合备份系统,其特征在于,所述在线存储系统存储于HDD上。
5.根据权利要求1所述的统一接口的混合备份系统,其特征在于,所述冷数据存储系统存储于光盘、磁带系统上。
6.根据权利要求2所述的统一接口的混合备份系统,其特征在于,所述不同系统的客户端包括一Windows客户端、一Linux客户端。
CN201810998555.8A 2018-08-29 2018-08-29 一种新型的统一接口的混合备份系统 Pending CN109240853A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810998555.8A CN109240853A (zh) 2018-08-29 2018-08-29 一种新型的统一接口的混合备份系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810998555.8A CN109240853A (zh) 2018-08-29 2018-08-29 一种新型的统一接口的混合备份系统

Publications (1)

Publication Number Publication Date
CN109240853A true CN109240853A (zh) 2019-01-18

Family

ID=65069475

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810998555.8A Pending CN109240853A (zh) 2018-08-29 2018-08-29 一种新型的统一接口的混合备份系统

Country Status (1)

Country Link
CN (1) CN109240853A (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103530388A (zh) * 2013-10-22 2014-01-22 浪潮电子信息产业股份有限公司 一种云存储系统中提升性能的数据处理方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103530388A (zh) * 2013-10-22 2014-01-22 浪潮电子信息产业股份有限公司 一种云存储系统中提升性能的数据处理方法

Similar Documents

Publication Publication Date Title
JP6495568B2 (ja) 増分sqlサーバデータベースバックアップを実行する方法、コンピュータ可読記憶媒体およびシステム
CN105677742B (zh) 一种存储文件的方法及装置
US9996557B2 (en) Database storage system based on optical disk and method using the system
CN101908073B (zh) 一种文件系统中实时删除重复数据的方法
CN103999058B (zh) 带驱动器系统服务器
CN102713878A (zh) 在分布式存储系统中管理文件的装置及方法
CN103080896A (zh) 对访问重新排序以减少对磁带介质的总查找时间
CN109598156A (zh) 一种写时重定向引擎快照流方法
CN107704211A (zh) 一种磁光电混合光盘库及其管理方法和管理系统
CN104267912A (zh) 一种nas加速方法及系统
CN106951375A (zh) 在存储系统中删除快照卷的方法及装置
CN103076993A (zh) 一种密集型系统中的存储系统及方法
CN109189772A (zh) 用于无文件系统存储介质的文件管理方法及系统
CN104217734A (zh) 一种光盘库文件系统及其设备
CN102541691A (zh) 面向内存数据库oltp应用的日志检查点恢复方法
CN105005517B (zh) 呼叫中心录音文件的存储备份系统及方法
CN103473258A (zh) 云存储文件系统
US20140101158A1 (en) File Handling in a Hierarchical Storage System
CN107092685A (zh) 一种联合使用文件系统和rdbms存储事务数据的方法
CN111741107A (zh) 基于文件存储系统的分层方法及装置、电子设备
CN107506466A (zh) 一种小文件存储方法及系统
CN104391947B (zh) 海量gis数据实时处理方法及系统
CN207133828U (zh) 非结构化数据归档装置
CN109189724A (zh) 提高视频监控系统音视频数据存储效率的方法及装置
JP2014071487A (ja) ファイル記録装置、フィルシステム管理方法およびチェンジャドライブ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190118

RJ01 Rejection of invention patent application after publication