CN103036952B - 一种企业级异构融合存储管理系统 - Google Patents

一种企业级异构融合存储管理系统 Download PDF

Info

Publication number
CN103036952B
CN103036952B CN201210505139.2A CN201210505139A CN103036952B CN 103036952 B CN103036952 B CN 103036952B CN 201210505139 A CN201210505139 A CN 201210505139A CN 103036952 B CN103036952 B CN 103036952B
Authority
CN
China
Prior art keywords
storage
user
administration module
management module
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210505139.2A
Other languages
English (en)
Other versions
CN103036952A (zh
Inventor
张大华
罗志明
钱声攀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yinchuan Power Supply Company State Grid Ningxia Electric Power Co Ltd
State Grid Corp of China SGCC
China Electric Power Research Institute Co Ltd CEPRI
State Grid Sichuan Electric Power Co Ltd
Original Assignee
Yinchuan Power Supply Company State Grid Ningxia Electric Power Co Ltd
State Grid Corp of China SGCC
China Electric Power Research Institute Co Ltd CEPRI
State Grid Sichuan Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yinchuan Power Supply Company State Grid Ningxia Electric Power Co Ltd, State Grid Corp of China SGCC, China Electric Power Research Institute Co Ltd CEPRI, State Grid Sichuan Electric Power Co Ltd filed Critical Yinchuan Power Supply Company State Grid Ningxia Electric Power Co Ltd
Priority to CN201210505139.2A priority Critical patent/CN103036952B/zh
Publication of CN103036952A publication Critical patent/CN103036952A/zh
Application granted granted Critical
Publication of CN103036952B publication Critical patent/CN103036952B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明提供一种企业级异构融合存储管理系统,包括存储设备管理模块、存储池管理模块、ATCA管理模块和用户管理模块;存储设备管理模块收集基础信息,并将收集的基础信息同时传送到存储池管理模块、ATCA管理模块和用户管理模块,存储池管理模块对信息进行分类管理和展示,并将其传送到ATCA管理模块和用户管理模块,ATCA管理模块对接收的信息进行综合分析处理,并将综合分析处理后的信息传送到用户管理模块。采用两层结构的融合架构,可兼容网络存储,实现了多种协议的融合,将对底层存储设备进行虚拟化后向应用提供透明的存储服务,能方便的进行存储管理维护。整个存储网络分为多个区域,每个区域都自成系统,底层存储资源能够满足本地存储应用需求。

Description

一种企业级异构融合存储管理系统
技术领域
本发明属于计算机科学技术领域,具体涉及一种企业级异构融合存储管理系统。
背景技术
根据研究表明,在目前近500艾字节(5000亿字节)的“数字宇宙”中,如果将全部数据转换成文字页面并装订成书,其长度可以从地球到冥王星走10个来回,而且这个数字宇宙的规模还在以每18个月翻倍的速度增长。在过去,企业都是通过不断在数据中心增加设备的方式来满足不断增长的业务需求,而造成的结果是数据中心的规模不断膨胀,复杂性不断提高。“数字内容爆炸和新数据存储需求,推动了许多组织的数据快速增长。然而简单地购买更多的磁盘容量已经不再是一个IT专业人士可接受的解决方案。迫切需要采取一种全面的数据管理方式以最大限度地提高效率,并要认识到不同的数据集具有不同的重要性。
存储需求随着数据的爆炸性增长正在迅速增加,在要求更多的存储空间的同时,关键业务系统对存储的响应能力提出了更高的要求。然而现有的单一存储系统已经不堪重负,不能广泛地连接多元化的数据传输系统,IT技术日新月异,现有的存储系统无法满足多样化数据传输及存储的要求,缺乏灵活性,难以应对日益增长的系统扩展和业务需求;现有的存储系统所提供的数据读写性能无法保证业务系统的高效运行;没有充足的预算购置那么多新存储系统来获得所需的性能、存储空间及功能。由此可见,选择一种传输速度快、能共享并且具有可管理性的多功能存储系统来代替现有的系统就成了信息基础架构改造的关键。企业对存储系统提出了以下要求,提供快速的数据读写能力来满足关键业务的要求;需要更多的空间来存放日益膨胀的历史和归档数据,并满足法规遵从性数据存储的需求;需要智能、多元化的数据存储连接和管理功能,以便通过有限的资源来应对企业的多元化系统融合和业务增长;部署存储和数据管理系统以满足业务需求时,又必须同时降低采购和管理成本。
随着存储技术发展的脚步,早期存储规模不大时,存储管理较为简单,直到出现了存储区域网,设备的多样化,链路的多样化使得存储管理变得越来越复杂。在网络环境下的存储管理,目前常见的实现方案一般有以下两种:一是利用服务器的机制来实现管理;二是利用存储产品的接口来实现管理。后者则是当今大部分存储管理采用的方法。从存储发展的阶段来看,各个阶段的存储管理都有各自的特点和局限性管理服务器从服务上分三个层次。首先是核心框架提供基本的服务,包括管理日志、框架配置、任务调度、SNMP协议适配器、公共信息模型协议适配器,光纤通信协议适配器、Web服务和数据库接口。第二层提供用于存储管理的构件。它完成整个存储管理网络环境的设备发现,然后将返回的结果保存入Aperi信息库。监测服务监听外部的通知并将监听的结果写入日志。第三层提供应用级存储管理功能。包括报告存储设备容量,划分存储空间,创建存储卷等统一存储是一个用于整合多种环境和应用程序的集成平台,该平台可以简化数据管理,提供内置分层功能和跨多个数据类型(如数据块或文件以及各种存储协议)的重复数据删除功能。具有出色的性能、包括虚拟化在内的众多功能、强大的安全可用性,在应用软件包的配合下,能方便地帮助企业构建虚拟存储资源池,实现存储资源的动态智能分配、分层存储和管理,简化存储复杂度,最大化提高存储利用率。
同时当前新的软件体系在软件和硬件之间架起了沟通的桥梁,它介于上层应用和底层硬件之间,实现了跨服务器,存储器和应用的一致性操作。它的特点是将应用和解决方案以模块的形式进行分解和组合。但它并不是一个单一的应用软件,适用性存储软件架构中的每个软件产品都具有支持对平台的特性,它们彼此之间的关系也同样是模块组合的方式,在统一的环境下容纳了多种厂商的解决方案,是一套更具开放性的系统管理解决方案。用户甚至可以根据自身的需要,对不同的软硬件进行自由组合定制,而不必购买全套的解决方案[适用性存储软件架构只是在一定程度上统一和简化了存储管理。但是由于没有统一的存储管理标准化方案的提出,各个厂商的硬件设备和软件产品没有遵循该架构来设计开发,仍然是处于各自为政的状态。
发明内容
为了克服上述现有技术的不足,本发明提供一种企业级异构融合存储管理系统,两层结构的融合架构,可兼容网络存储,实现了多种协议的融合,将对底层存储设备进行虚拟化后向应用提供透明的存储服务,能方便的进行存储管理维护。整个存储网络分为多个区域,每个区域都自成系统,底层存储资源能够满足本地存储应用需求。
为了实现上述发明目的,本发明采取如下技术方案:
提供一种企业级异构融合存储管理系统,所述系统包括存储设备管理模块、存储池管理模块、ATCA管理模块和用户管理模块;所述存储设备管理模块收集本融合存储中设备基础信息,并将收集的基础信息同时传送到存储池管理模块、ATCA管理模块和用户管理模块,所述存储池管理模块接收基础信息,对信息进行分类管理和展示,并将经分类管理和展示的信息同时传送到ATCA管理模块和用户管理模块,所述ATCA管理模块对接收的信息进行综合分析处理,并将综合分析处理后的信息传送到用户管理模块,所述用户管理模块按照用户要求对信息进行处理。
所述存储设备包括底层存储设备和可用存储设备,所述底层存储设备包括存储区域网SAN、NAS设备和磁带库。
所述系统的系统状态包括网络拓扑节点状态、底层存储设备状态、可用存储设备状态和存储池状态。
所述设备基础信息包括型号、类型、容量、对外接口、主机通道、RAID支持和传输率。
所述存储设备管理模块管理SCST连接/断开存储设备,所述存储设备包括手动添加和自动搜索两种识别方法,并分为文件和数据块进行两种分类管理,以便为存储池提供可用存储设备,存储虚拟化后RAID的划分将根据用户需要和设备支持度分为0、1、3、5和6五档基准。
所述存储池管理模块根据业务需求程度和数据传输速度按照紧急、重要和普通三种调配机制,通过条块分割和镜像分割两种方式标识用户卷属性,所述用户卷属性采用初次初始化配置载入和后期动态修改实现设置;用户卷属性包括名称、登录域、访问形式、访问时间和使用期限。
所述ATCA管理模块对管理系统自身硬件平台运行状态利用单个宿主一体化、两个宿主拆分模式进行实时检测和控制,所述运行状态包括数据通道连通情况、数据访问频率、存储容量使用情况和访问用户信息。
所述用户管理模块主要创建/删除用户,并根据SCST设置用户卷属性和相应访问权限;所述访问权限包括超级管理员、超级用户组和普通用户三种可授予用户的基本安全级别权限级别,超级管理员为系统装载导入时分配设定,并且具有唯一性和排他性,不能进行重复,通过超级管理员创建和添加配置超级用户组,并且自身不能自动升级为超级管理员,普通用户组通过超级用户和客户端访问默认指定两种方式进行配置,普通用户还通过超级管理员进行升级移动到超级用户组。
与现有技术相比,本发明的有益效果在于:
1、简化其整个数据中心的存储;能方便地帮助企业构建虚拟存储资源池,实现存储资源的动态智能分配、分层存储和管理,简化存储复杂度,最大化提高存储利用率。对非结构化数据的迅猛增长而推出的能够以经济、无缝、零停机的方式扩展的新存储解决方案,目标针对设计新一代数据中心。
2、提高数据存储管理效率;加强了存储产管理软件方面的表现,能够快速应对数据的爆炸性增长,按照实际业务需求同步扩展性能和容量,并通过存储的分层、整合和数据迁移,实现存储设备的合理利用。它主要包含了三个特点:互操作性,适应多种操作系统;容灾性,适用于各种意外故障;高效性,适应业务优先级。
3、使用存储最终推动业务创新;存储策略是从最佳实践角度出发,通过采用的方式,帮助将用户不同类型的存储系统整合到单一的存储中,使存储设备更加易于管理,回收受限容量,实现存储分层、整合和数据迁移,降低运营成本的同时大幅提高存储利用率,加速企业业务创新。
附图说明
图1是企业级异构融合存储管理系统结构示意图。
具体实施方式
下面结合附图对本发明作进一步详细说明。
如图1,提供一种企业级异构融合存储管理系统,所述系统包括存储设备管理模块、存储池管理模块、ATCA管理模块和用户管理模块;所述存储设备管理模块收集本融合存储中设备基础信息,并将收集的基础信息同时传送到存储池管理模块、ATCA管理模块和用户管理模块,所述存储池管理模块接收基础信息,对信息进行分类管理和展示,并将经分类管理和展示的信息同时传送到ATCA管理模块和用户管理模块,所述ATCA管理模块对接收的信息进行综合分析处理,并将综合分析处理后的信息传送到用户管理模块,所述用户管理模块按照用户要求对信息进行处理。ATCA管理模块,即先进的电信计算平台ATCA(AdvancedTelecomComputingArchitecture)。
所述存储设备包括底层存储设备和可用存储设备,所述底层存储设备包括存储区域网SAN(StorageAreaNetwork)、NAS设备和磁带库。
所述系统的系统状态包括网络拓扑节点状态、底层存储设备状态、可用存储设备状态和存储池状态。
所述设备基础信息包括型号、类型、容量、对外接口、主机通道、独立磁盘冗余阵列RAID(RedundantArrayofIndependentDisks)支持和传输率。
所述存储设备管理模块管理SCST(GenericSCSITargetSubsystemforLinux,一种Linux环境下存储协议目标子系统软件)连接/断开存储设备,所述存储设备包括手动添加和自动搜索两种识别方法,并分为文件和数据块进行两种分类管理,以便为存储池提供可用存储设备,存储虚拟化后RAID的划分将根据用户需要和设备支持度分为0、1、3、5和6五档基准。
所述存储池管理模块根据业务需求程度和数据传输速度按照紧急、重要和普通三种调配机制,通过条块分割和镜像分割两种方式标识用户卷属性,所述用户卷属性采用初次初始化配置载入和后期动态修改实现设置;用户卷属性包括名称、登录域、访问形式、访问时间和使用期限。
所述ATCA管理模块对管理系统自身硬件平台运行状态利用单个宿主一体化、两个宿主拆分模式进行实时检测和控制,所述运行状态包括数据通道连通情况、数据访问频率、存储容量使用情况和访问用户信息。
所述用户管理模块主要创建/删除用户,并根据SCST设置用户卷属性和相应访问权限;所述访问权限包括超级管理员、超级用户组和普通用户三种可授予用户的基本安全级别权限级别,超级管理员为系统装载导入时分配设定,并且具有唯一性和排他性,不能进行重复,通过超级管理员创建和添加配置超级用户组,并且自身不能自动升级为超级管理员,普通用户组通过超级用户和客户端访问默认指定两种方式进行配置,普通用户还通过超级管理员进行升级移动到超级用户组。
本发明适用性存储系统是一种更具有开放性和容错性的软件管理服务模式。这种系统在软件和硬件之间架起了沟通的桥梁,它介于上层应用和底层硬件之间,实现了跨服务器,存储器和应用的一致性操作。将应用和解决方案以模块的形式进行分解和组合。但它并不是一个单一的应用软件,适用性存储系统中的每个软件产品都具有支持对平台的特性,它们彼此之间的关系也同样是模块组合的方式,在统一的环境下容纳了多种厂商的解决方案,是一套更具开放性的系统管理解决方案。
存储架构也采用了模块化的设计方式,对于新的管理功能上的实现,可以根据具体需求自行扩展。从管理服务器的第一个层次上可以看出,核心框架提供了公共信息模型等协议的适配器,该存储架构支持多种管理协议。在一定程度上统一和简化了存储管理。
采用面向存储网络管理领域的功能完备的开放接口,该管理计划提供了开放存储网络管理接口技术规范。把存储网络所需要管理的资源对象和用来管理对象的工具统一了起来。存储管理计划促进了存储行业普遍采用SMI-S,最终让所有的存储网络部件都可以利用本地的接口加以部署。理想情况是,所有的资源对象都采用一种通用的接口,管理功能的实现就更方便,成本也更低,系统也更稳定。此外,稳定的管理接口有助于文件系统和数据库管理程序等应用系统直接管理网络存储资源。
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本发明的权利要求范围当中。

Claims (4)

1.一种企业级异构融合存储管理系统,其特征在于:所述系统包括存储设备管理模块、存储池管理模块、先进的电信计算平台ATCA管理模块和用户管理模块;所述存储设备管理模块收集本融合存储中存储设备的基础信息,并将收集的基础信息同时传送到存储池管理模块、ATCA管理模块和用户管理模块,所述存储池管理模块接收基础信息,对基础信息进行分类管理和展示,并将经分类管理和展示的基础信息同时传送到ATCA管理模块和用户管理模块,所述ATCA管理模块对接收的基础信息进行综合分析处理,并将综合分析处理后的基础信息传送到用户管理模块,所述用户管理模块按照用户要求对基础信息进行处理;
所述存储设备管理模块管理SCST连接/断开存储设备,所述SCST是指Linux环境下存储协议目标子系统软件,所述存储设备包括手动添加和自动搜索两种识别方法,并分为文件和数据块进行两种分类管理,以便为存储池提供可用存储设备,存储虚拟化后RAID的划分将根据用户需要和设备支持度分为0、1、3、5和6五档基准;
所述存储池管理模块根据业务需求程度和数据传输速度按照紧急、重要和普通三种调配机制,通过条块分割和镜像分割两种方式标识用户卷属性,所述用户卷属性采用初次初始化配置载入和后期动态修改实现设置;用户卷属性包括名称、登录域、访问形式、访问时间和使用期限;
所述ATCA管理模块对管理系统自身硬件平台运行状态利用单个宿主一体化、两个宿主拆分模式进行实时检测和控制,所述运行状态包括数据通道连通情况、数据访问频率、存储容量使用情况和访问用户信息;
所述用户管理模块主要创建/删除用户,并根据SCST设置用户卷属性和相应访问权限;所述访问权限包括超级管理员、超级用户组和普通用户组三种可授予用户的基本安全级别权限级别,超级管理员为系统装载导入时分配设定,并且具有唯一性和排他性,不能进行重复,通过超级管理员创建和添加配置超级用户组,并且超级用户组的超级用户自身不能自动升级为超级管理员,普通用户组通过客户端访问默认指定进行配置,普通用户组还通过超级管理员进行升级移动到超级用户组。
2.根据权利要求1所述的企业级异构融合存储管理系统,其特征在于:存储设备包括底层存储设备和可用存储设备,所述底层存储设备包括存储区域网SAN、NAS设备和磁带库。
3.根据权利要求1所述的企业级异构融合存储管理系统,其特征在于:所述系统的系统状态包括网络拓扑节点状态、底层存储设备状态、可用存储设备状态和存储池状态。
4.根据权利要求1所述的企业级异构融合存储管理系统,其特征在于:所述基础信息包括型号、类型、容量、对外接口、主机通道、RAID支持和传输率。
CN201210505139.2A 2012-11-30 2012-11-30 一种企业级异构融合存储管理系统 Active CN103036952B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210505139.2A CN103036952B (zh) 2012-11-30 2012-11-30 一种企业级异构融合存储管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210505139.2A CN103036952B (zh) 2012-11-30 2012-11-30 一种企业级异构融合存储管理系统

Publications (2)

Publication Number Publication Date
CN103036952A CN103036952A (zh) 2013-04-10
CN103036952B true CN103036952B (zh) 2016-04-20

Family

ID=48023424

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210505139.2A Active CN103036952B (zh) 2012-11-30 2012-11-30 一种企业级异构融合存储管理系统

Country Status (1)

Country Link
CN (1) CN103036952B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108156124B (zh) * 2016-12-02 2019-03-15 中科星图股份有限公司 一种分层的安全数据管理系统
CN106940725B (zh) * 2017-03-21 2019-12-27 深圳微众税银信息服务有限公司 一种征信数据存储调度方法及系统
CN106961440B (zh) * 2017-04-01 2019-09-27 国网福建省电力有限公司 基于企业级资源运行监控管理的云平台
CN107908372B (zh) * 2017-12-14 2021-09-10 南京云创大数据科技股份有限公司 一种异地异构的多融合存储方法
CN111178664B (zh) * 2019-11-19 2024-02-02 江苏盛安信息科技有限公司 一种面向企业管理维度的控制方法、系统、服务器及介质
CN117076413B (zh) * 2023-10-16 2024-01-26 创云融达信息技术(天津)股份有限公司 一种支持多协议互通的对象多版本存储系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101232422A (zh) * 2008-01-18 2008-07-30 北京交通大学 一种基于网格技术的网络存储系统
CN101997918A (zh) * 2010-11-11 2011-03-30 清华大学 异构san环境中的海量存储资源按需分配的实现方法
CN102123171A (zh) * 2011-01-24 2011-07-13 华中科技大学 一种面向海量存储管理的存储虚拟化方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100347692C (zh) * 2005-05-31 2007-11-07 清华大学 San系统中虚拟化智能控制器的实现方法
JP2008016137A (ja) * 2006-07-07 2008-01-24 Hitachi Ltd ディスクアレイ装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101232422A (zh) * 2008-01-18 2008-07-30 北京交通大学 一种基于网格技术的网络存储系统
CN101997918A (zh) * 2010-11-11 2011-03-30 清华大学 异构san环境中的海量存储资源按需分配的实现方法
CN102123171A (zh) * 2011-01-24 2011-07-13 华中科技大学 一种面向海量存储管理的存储虚拟化方法

Also Published As

Publication number Publication date
CN103036952A (zh) 2013-04-10

Similar Documents

Publication Publication Date Title
AU2019295818B2 (en) Block chain-based data processing method and device
CN103036952B (zh) 一种企业级异构融合存储管理系统
CN105978704B (zh) 用于创建新的云资源指令集体系结构的系统和方法
CN103226539B (zh) 针对云托管应用的服务水平目标
CN110198231A (zh) 用于多租户的容器网络管理方法和系统以及中间件
CN107895253A (zh) 一种电力交易功能进行微服务改造的方法
CN104391930A (zh) 分布式文件存储装置和方法
CN102377827A (zh) 多级云存储系统及其存储方法
CN102708158B (zh) 一种PostgreSQL云存储归档调度系统
CN105190623A (zh) 日志记录管理
CN104391989A (zh) 一种分布式etl一体机系统
CN105190533A (zh) 原位快照
CN102012789A (zh) 集中管理式备份容灾系统
CN101370027A (zh) 网络存储系统、方法及应用服务器
CN102521114A (zh) 一种虚拟化环境下的文件系统日志存储系统
CN102638566A (zh) 一种基于云存储的blog系统运行方法
CN104462185A (zh) 一种基于混合结构的数字图书馆云存储系统
CN103067488A (zh) 一种统一存储的实现方法
CN110083306A (zh) 一种分布式对象存储系统及存储方法
CN106960011A (zh) 分布式文件系统元数据管理系统及方法
CN105577423A (zh) 一种实时数据中心群集管理系统
CN202565318U (zh) 分布式虚拟化存储系统
CN102820998A (zh) 实现面向办公应用的双机容错服务系统及其数据存储方法
CN105354757A (zh) 电力数据集成处理系统
CN103679309A (zh) 一种电力数据仓库业务智能统计分析方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: STATE GRID CORPORATION OF CHINA

Free format text: FORMER OWNER: CHINA ELECTRIC POWER RESEARCH INSTITUTE

Effective date: 20140208

Owner name: CHINA ELECTRIC POWER RESEARCH INSTITUTE STATE GRID

Free format text: FORMER OWNER: STATE GRID CORPORATION OF CHINA

Effective date: 20140208

COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 100192 HAIDIAN, BEIJING TO: 100031 XICHENG, BEIJING

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20140208

Address after: 100031 Xicheng District West Chang'an Avenue, No. 86, Beijing

Applicant after: State Grid Corporation of China

Applicant after: China Electric Power Research Institute

Applicant after: State Grid Sichuan Electric Power Corporation

Applicant after: Yinchuan Power Supply Company, State Grid Ningxia Electric Power Co., Ltd.

Address before: 100192 Beijing city Haidian District Qinghe small Camp Road No. 15

Applicant before: China Electric Power Research Institute

Applicant before: State Grid Corporation of China

C14 Grant of patent or utility model
GR01 Patent grant