CN104794073A - 一种基于存储整合的技术 - Google Patents
一种基于存储整合的技术 Download PDFInfo
- Publication number
- CN104794073A CN104794073A CN201410366976.0A CN201410366976A CN104794073A CN 104794073 A CN104794073 A CN 104794073A CN 201410366976 A CN201410366976 A CN 201410366976A CN 104794073 A CN104794073 A CN 104794073A
- Authority
- CN
- China
- Prior art keywords
- data
- access
- storage
- file
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及计算机数据存储领域，实现了数据存储整合的功能，通过对数据进行相应的存储整合，使两个存储阵列所存储的数据完全一致，当其中一台存储阵列宕机后，另外一个存储阵列可以实时地进行访问所存储的数据，完成了数据安全的最后一道防线备份存储。
Description
技术领域
本发明涉及一种基于存储的整合技术，属于计算机数据安全处理领域。
背景技术
随着互联网技术的不断发展、云时代的来临，大数据引起越来越多的关注。人们对海量数据的挖掘和运用预示着大数据时代已经到来，也越来越深入到我们的生活之中，其运用领域越广泛，技术越强大，我们的生活越美好。但是，数据越集中，安全风险越大，且数据量的不断增加使得对存储的依赖性也越来越强，所以数据的存储是一个很重要的环节。
存储系统已经成为IT系统中一个完全独立的层次，就像网络和服务器一样，存储整合技术在IT系统的地位也越来越重要。虚拟存储整合技术实现了存储系统集中，统一而又方便的系统，存储整合技术是保存和组织数据的一种方法，存储整合技术都是创建在一个或多个磁盘上，这些磁盘可能是服务器内部的物理磁盘，也可能是来自FC SAN或IP SAN的LUN。通常对于本地的文件来讲，在一个时刻只能由一台服务器挂载并访问。
上述的使用方法尽管可以满足服务器进行快速读写数据的要求，但是无法满足存储资源共享和统一的管理方法，以及当一台服务器宕掉了之后另一台服务器无法实时的接替其正在进行的任务等需求。在这种情况下，传统的做法是让环境中的一台服务器使用网络文件系统协议，例如：NFS(Linux/UNIX)或CIFS(Windows)，把自己的文件系统共享给其他的服务器、用户或应用程序访问。郑重方法解决了存储整合的问题，但是对于存储容量巨大，需要低延时、高IO吞吐量的应用场合时，上述使用方案难以满足需求。
此外，对于当前的应用环境，异构多操作系统平台支持和系统容量、性能的可扩展能力方面的需要也日益突出，特别是在媒体、政府、科研和大型工程、数据中心等环境中，Windows和Linux混合使用，以及存储容量和IO性能逐年增长已经成为必然需求。
存储整合是简化存储基础设施的一种方法，任何关于存储整合的工作都必须对磁盘的子系统以及这些子系统所包含的特定的磁盘类型进行严肃认真的考虑，例如：一个企业内部可能分布上百台(以至于上千台)文件服务器。服务器的快速增长会给存储管理员对其进行利用和维护的工作带来很大的困难，从而导致空间的浪费。存储整合的目的通常是存储更多的信息，使用更少的磁盘或者系统。因此用于存储整合的系统必然能够支持更多的磁盘。而且每一个磁盘的挑选都会综合考虑存储容量、性能以及可靠性。例如：SATA驱动则代表着另一个极端，它能够提供最大的容量和最便宜的价格，但是，性能也是最低的，SAS驱动介于两者之间，但是还没有被广泛认可，对于用户而言，选择能够维持或是改进现有的存储服务器水平协议(SLA)的磁盘和存储系统是非常重要的。
发明内容
本发明的目的是为了实现数据存储的整合功能，通过对数据进行一系列的处理，对数据进行存储，从而使得两个存储间达到数据、功能完全一致，当一个存储宕机后，另一个存储可以实时的、自动的访问数据并执行损坏存储所执行的所有任务，这样可以实现了安全的最后一道防线备份且防止了用户数据的丢失带来的损失。
本发明的技术方案实现基于存储的整合技术，所述的方法包括下述步骤：
首先：用户的应用程序运行在应用服务器AS上，它们通过文件访问接口访问存储设备上的数据。
其次：应用服务器AS访问存储设备以获取高性能的数据输入输出访问，处理用户数据读取、写入的请求，其数据访问不必通过元数据服务器。在整个文件访问过程中，应用服务器AS(客户端)首先访问元数据服务器获取文件逻辑位置，然后访问元数据服务器获取文件布局，最后访问存储物理位置以获取数据。
附图说明
附图为实现数据存储整合流程图。
具体实施方式
本发明提出了一种对备份过程中实现存储整合的一种技术。
如图，实现了两个存储阵列的备份存储整合，当一台存储阵列宕机后，另一台存储阵列实时接替其执行的任务。
首先：用户的应用程序运行在应用服务器AS上，它们通过文件访问接口访问存储设备上的数据。
其次：应用服务器AS访问存储设备以获取高性能的数据输入输出访问，处理用户数据读取、写入的请求，其数据访问不必通过元数据服务器。在整个文件访问过程中，应用服务器AS(客户端)首先访问元数据服务器获取文件逻辑位置，然后访问元数据服务器获取文件布局，最后访问存储物理位置以获取数据。
Claims (5)
1.一种基于存储整合的技术，其方法步骤如下所述：
(1)用户的应用程序运行在应用服务器AS上。
(2)应用服务器AS访问元数据服务器获取文件逻辑位置。
(3)应用服务器访问元数据服务器获取文件布局。
(4)应用服务器访问存储物理位置以获取数据。
(5)应用程序通过文件访问接口直接访问存储设备上的数据。
2.如权利要求1中所述的基于存储整合技术的目的是对数据存储做好安全的最后一道防线存储备份。
3.如权利要求1中步骤(2)中所述的访问元数据服务器的目的是：元数据和数据的存储分离可以避免元数据随机访问和数据访问对存储设备的相互干扰，从而提高存储设备效率。
4.如权利要求1中步骤(5)中所述通过文件访问包括：访问文件逻辑位置、访问文件布局、访问存储物理位置。
5.如权利要求1中步骤(5)中所述直接访问存储设备的目的是：获取高输入输出性能、降低访问延迟、实现数据共享。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410366976.0A CN104794073A (zh) | 2014-07-30 | 2014-07-30 | 一种基于存储整合的技术 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410366976.0A CN104794073A (zh) | 2014-07-30 | 2014-07-30 | 一种基于存储整合的技术 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104794073A true CN104794073A (zh) | 2015-07-22 |
Family
ID=53558879
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410366976.0A Pending CN104794073A (zh) | 2014-07-30 | 2014-07-30 | 一种基于存储整合的技术 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104794073A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112379826A (zh) * | 2020-10-22 | 2021-02-19 | 中科热备(北京)云计算技术有限公司 | 一种存储整合技术的应用方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090019098A1 (en) * | 2007-07-10 | 2009-01-15 | International Business Machines Corporation | File system mounting in a clustered file system |
| CN102170396A (zh) * | 2011-05-06 | 2011-08-31 | 浙江大学 | 一种基于区分服务的云存储系统QoS控制方法 |
| CN102164161B (zh) * | 2011-01-10 | 2013-12-04 | 清华大学 | 一种对并行文件系统进行文件布局提取的方法和装置 |
| CN104144150A (zh) * | 2013-05-10 | 2014-11-12 | 中国电信股份有限公司 | 利用元数据访问信息的方法、装置和系统 |
-
2014
- 2014-07-30 CN CN201410366976.0A patent/CN104794073A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090019098A1 (en) * | 2007-07-10 | 2009-01-15 | International Business Machines Corporation | File system mounting in a clustered file system |
| CN102164161B (zh) * | 2011-01-10 | 2013-12-04 | 清华大学 | 一种对并行文件系统进行文件布局提取的方法和装置 |
| CN102170396A (zh) * | 2011-05-06 | 2011-08-31 | 浙江大学 | 一种基于区分服务的云存储系统QoS控制方法 |
| CN104144150A (zh) * | 2013-05-10 | 2014-11-12 | 中国电信股份有限公司 | 利用元数据访问信息的方法、装置和系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112379826A (zh) * | 2020-10-22 | 2021-02-19 | 中科热备(北京)云计算技术有限公司 | 一种存储整合技术的应用方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11954002B1 (en) | Automatically provisioning mediation services for a storage system | |
| US10733053B1 (en) | Disaster recovery for high-bandwidth distributed archives | |
| US10853339B2 (en) | Peer to peer ownership negotiation | |
| US9087010B2 (en) | Data selection for movement from a source to a target | |
| US10915813B2 (en) | Search acceleration for artificial intelligence | |
| US10701134B2 (en) | Transferring data between block and file storage systems | |
| US20220217049A1 (en) | Path Management For Container Clusters That Access Persistent Storage | |
| US20210064484A1 (en) | Live browse cache enhacements for live browsing block-level backup copies of virtual machines and/or file systems | |
| US20210064486A1 (en) | Access arbitration to a shared cache storage area in a data storage management system for live browse, file indexing, backup and/or restore operations | |
| US20200401320A1 (en) | Efficient Non-Uniform Object Processing | |
| US10521151B1 (en) | Determining effective space utilization in a storage system | |
| Manogar et al. | A study on data deduplication techniques for optimized storage | |
| US8983899B1 (en) | Systems and methods for archiving files in distributed replication environments | |
| US20210109663A1 (en) | Point-in-time backups via a storage controller to an object storage cloud | |
| CN104158863A (zh) | 基于事务级别全程高速缓冲的云存储机制 | |
| US20210109822A1 (en) | Systems and methods for backup and restore of container-based persistent volumes | |
| CN104794073A (zh) | 一种基于存储整合的技术 | |
| Yan | Cloud Storage Services | |
| KR101589122B1 (ko) | 네트워크 분산 파일 시스템 기반 iSCSI 스토리지 시스템에서의 장애 복구 방법 및 시스템 | |
| Chen et al. | Performance comparison on the heterogeneous file system in cloud storage systems | |
| Arora et al. | Opportunities, Concerns and Challenges in the Adoption of Cloud Storage | |
| Seshadri et al. | Trillion operations key-value storage engine: Revisiting the mission critical analytics storage software stack | |
| Qu et al. | The study of mixed storage scheme of private cloud platform based on Ceph | |
| Uehara | Split file model for big data in low throughput storage | |
| Schwerdtfeger | High-End Storage |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| EXSB | Decision made by sipo to initiate substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C53 | Correction of patent of invention or patent application | ||
| CB02 | Change of applicant information |
Address after: Taiyue business center 100086 Beijing Haidian District City, Zhichun Road Tai Yue Park Building No. 1 4 floor Applicant after: HEATSONE TECHNOLOGY INC. Address before: 100080 Beijing City, Haidian District Cheng Fu Road No. 268 KYKY No. 1 building 505 Applicant before: HEATSONE TECHNOLOGY INC. |
|
| COR | Change of bibliographic data |
Free format text: CORRECT: ADDRESS; FROM: 100080 HAIDIAN, BEIJING TO: 100086 HAIDIAN, BEIJING |
|
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150722 |