CN106933498A - 一种jbod的管理方法、大容量存储系统、及中间件 - Google Patents

一种jbod的管理方法、大容量存储系统、及中间件 Download PDF

Info

Publication number
CN106933498A
CN106933498A CN201511032195.9A CN201511032195A CN106933498A CN 106933498 A CN106933498 A CN 106933498A CN 201511032195 A CN201511032195 A CN 201511032195A CN 106933498 A CN106933498 A CN 106933498A
Authority
CN
China
Prior art keywords
jbod
middleware
server
information
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201511032195.9A
Other languages
English (en)
Inventor
罗文斌
张敏珠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201511032195.9A priority Critical patent/CN106933498A/zh
Publication of CN106933498A publication Critical patent/CN106933498A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种JBOD的管理方法,通过中间件管理JBOD设备,获取第一JBOD信息,根据预先配置的映射关系表对所述第一JBOD信息进行转换;将转换得到的能为服务器识别的第二JBOD信息提供给服务器,为服务器提供存储服务。本申请还公开了一种大容量存储系统及中间件。通过中间件对JBOD进行管理,有助于解决JBOD管理的问题,提升JBOD设备的效率。

Description

一种JBOD的管理方法、大容量存储系统、及中间件
技术领域
本发明涉及数据存储技术领域,尤其涉及一种JBOD的管理方法、大容量存储系统、及中间件。
背景技术
随着大数据时代的来临,服务器需要的存储数据越来越大。随着这种需求,JBOD(Just a Bunch Of Disks,磁盘簇)存储设备在被大量采用。但JBOD的管理是一个复杂的问题。
发明内容
本发明实施例提供的方案有助于解决JBOD管理的问题。
根据本发明的一个方面,提供了一种JBOD的管理方法,包括:中间件根据管理指令对JBOD进行管理,为服务器提供存储服务。
进一步的,所述中间件根据管理指令对JBOD进行管理,包括:中间件获取第一JBOD信息,根据预先配置的映射关系表对所述第一JBOD信息进行转换,转换成服务器识别的第二JBOD信息提供给服务器。
进一步的,上述方法还包括:所述中间件对多个JBOD进行编号,集成为JBOD集群为服务器提供存储服务。
进一步的,当增加或减少JBOD时,所述中间件更新所述JBOD集群,为服务器提供存储服务。
进一步的,所述中间件将一个JBOD分解为多个相同和/或不同容量的JBOD,分别提供给多个服务器提供存储服务。
较佳的,所述中间件为所述分解出的多个相同和/或不同容量的JBOD设置第一JBOD信息,并按照所述预先配置的映射关系表转换成所述服务器识别的第二JBOD信息。
进一步的,上面的方法还可以包括:所述中间件根据所述JBOD设备的磁盘槽位使用情况对所述JBOD设备的磁盘槽位号进行动态修改。
根据本发明的另一个方面,提供了一种大容量存储系统,包括中间件、JBOD,其中,所述中间件用于根据管理指令对JBOD进行管理。
进一步的,所述中间件用于根据管理指令将所述第一JBOD信息按照预先配置的映射关系表转换为服务器识别的第二JBOD信息提供给服务器。
所述中间件还可以用于对多个JBOD进行编号,集成为JBOD集群为服务器提供存储服务。以及还可以用于当增加或减少JBOD时,更新所述JBOD集群,为服务器提供存储服务。
进一步的,所述中间件用于将一个JBOD分解为多个相同和/或不同容量的JBOD,分别提供给多个服务器提供存储服务。所述中间件用于为所述分解出的多个相同和/或不同容量的JBOD设置第一JBOD信息,并按照所述预先配置的映射关系表转换成所述服务器识别的第二JBOD信息。
较佳地,所述中间件还用于根据所述JBOD的磁盘槽位使用情况对所述JBOD的磁盘槽位号进行动态修改。
根据本发明的另一个方面,提供了一种管理JBOD的中间件,所述中间件被配置为管理JBOD为服务器提供存储资源。
随着大数据时代的来临,服务器需要的存储数据越来越大。伴随着这种需求,JBOD(Just a Bunch Of Disks,磁盘簇)存储设备被大量采用。本发明提供的方案有助于解决JBOD存储设备管理的问题,提升管理效率。
附图说明
附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。其中:
图1是本申请JBOD管理方法流程图;
图2是本申请通过中间件管理JBOD的示意图;
图3是本申请JBOD虚拟化管理组网图;
图4是本申请JBOD的虚拟化管理实现示意图;
图5是本申请大容量存储系统结构图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
JBOD与服务器直接连接向服务器提供存储服务。JBOD的厂家及型号多种多样,在接入服务端时的程序需要做适配才能正常接入服务并使用JBOD的存储功能。对于视频服务器,提供视频服务需要很大的数据存储空间,单一的JBOD已经无法满足大数据的存储需求了,此时往往需要多个JBOD集联。多个JBOD集联时,每个JBOD都是单独的。服务端应用在每次扩容时,每个JBOD都需要有相应的修改适配。而对那些数据存储空间需求较小的服务器集群来说,如果为每个服务器都配置一个小容量的JBOD,则又会导致硬件成本过高。
本发明通过提供一种JBOD智能管理组件(本申请称中间件或JBOD智能管理组件)对服务端应用提供一个标准接口调用,然后通过修改中间件的配置来实现JBOD的智能管理。该中间件可以根据应用的复杂度需求和用户的成本要求,用软件或者硬件加软件的组合来实现中间件的功能,该中间件也可以有主备配置。
图1是根据本发明实施例的一种JBOD的管理方法的流程图,如图1所示,该流程包括如下步骤:
S102中间件获取第一JBOD信息,根据预先配置的映射关系表对所述第一JBOD信息进行转换。
S104将转换得到的能为服务器识别的第二JBOD信息提供给服务器,为服务器提供存储服务。
如图2的组网结构中,由于各个厂家的JBOD框ID号可能不一致,也可能重复。当服务器通过中间件和JBOD框相连,中间件根据预先设置的映射关系表,将各厂家的信息转换为服务器需要的统一管理信息。这样,当和新的JBOD厂家进行组网时,服务器不需要改动,只需要将新厂家的JBOD信息的映射关系加入到中间件的配置表中,服务器就能立刻使用新厂家的JBOD开始提供服务了。
上述方法中,还包括S1022:所述中间件对多个JBOD进行编号,集成为JBOD集群为服务器提供存储服务。当增加或减少JBOD时,所述中间件更新所述JBOD集群。
如图3所示,当服务器应用于多媒体服务时,往往需要多个JBOD组合才能满足庞大的数据存储需求。为了降低服务端应用的复杂度,可以通过中间件将多个JBOD集合在一起,并通过中间件的配置和算法,将所有的JBOD库资源进行有序的整合,再将整合后的JBOD集群资源提供给服务端使用。在这种应用场景下,可以根据数据量的大小,实时的增加或者减少JBOD集群的数量而不影响服务端提供的实时服务。
上述方法还包括S1024:所述中间件将一个JBOD分解为多个相同和/或不同容量的JBOD,分别提供给多个服务器提供存储服务。其中,所述中间件为所述分解出的多个相同和/或不同容量的JBOD设置第一JBOD信息,并按照所述预先配置的映射关系表转换成所述服务器识别的第二JBOD信息。
如图4所示,通过中间件配置或者动态算法,将一个JBOD虚拟成多个独立的JBOD,每个虚拟出来的JBOD容根据服务器对存储的需要进行合理分配,然后让服务器和虚拟出来的JBOD一一连接,组成一个服务器对应一个JBOD的通用模型。这样既节省了硬件成本,也实现了存储空间的最大化动态利用。
上述方法还包括S1026:中间件根据JBOD的磁盘槽位使用情况对所述JBOD的磁盘槽位号进行动态修改。
比如当JBOD库中的磁盘槽2槽出现磁盘故障时,为了快速恢复备份的功能,可以将预留的40槽的磁盘槽位号修改为2槽,这样就能在不更换磁盘的情况下,快速修复系统。待方便时对2槽进行更换,并将40槽修改为备用盘。这样这样服务端就不会因为磁盘损坏而影响提供的服务,通过动态修改磁盘所在槽位号,提高设备的可靠性。
图5是根据本发明实施例的大容量存储系统的结构框图,如图5所示,包括中间件、JBOD,服务器。其中,所述中间件用于根据管理指令对JBOD进行管理,为服务器提供存储服务。
可选的,所述中间件用于根据管理指令将所述第一JBOD信息按照预先配置的映射关系表转换为服务器识别的第二JBOD信息提供给服务器。
可选的,所述中间件还可以用于对多个JBOD进行编号,集成为JBOD集群为服务器提供存储服务。以及还可以用于当增加或减少JBOD时,更新所述JBOD集群,为服务器提供存储服务。
可选的,所述中间件用于将一个JBOD分解为多个相同和/或不同容量的JBOD,分别提供给多个服务器提供存储服务。所述中间件用于为所述分解出的多个相同和/或不同容量的JBOD设置第一JBOD信息,并按照所述预先配置的映射关系表转换成所述服务器识别的第二JBOD信息。
可选的,所述中间件还用于根据所述JBOD的磁盘槽位使用情况对所述JBOD的磁盘槽位号进行动态修改。
本发明还提供了一种管理JBOD的中间件,所述中间件被配置为管理JBOD为服务器提供存储资源。
通过本发明的实施方式,提供了利用中间件管理JBOD的方案,能够有助于实现JBOD的信息管理、集群管理以及虚拟化管理,从而达到对JBOD进行智能管理的目的。具有以下优点:通过对JBOD的智能管理,能大大降低服务端程序的复杂度;同时也能给服务端提供更多的存储能力;而通过提供虚拟化的JBOD管理,可以大大降低组网的硬件成本;通过磁盘槽位信息的动态管理,我们还能提供更加可靠的服务,保证业务的不间断运行。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (15)

1.一种JBOD的管理方法,应用于大容量存储系统,其特征在于,中间件根据管理指令对JBOD进行管理,为服务器提供存储服务。
2.如权利要求1所述的方法,其特征在于,所述中间件根据管理指令对JBOD进行管理,包括:
中间件获取第一JBOD信息,根据预先配置的映射关系表对所述第一JBOD信息进行转换,转换成服务器识别的第二JBOD信息提供给服务。
3.如权利要求1或2所述的方法,其特征在于,还包括:所述中间件对多个JBOD进行编号,集成为JBOD集群为服务器提供存储服务。
4.如权利要求3所述的方法,其特征在于,当增加或减少JBOD时,所述中间件更新所述JBOD集群,为服务器提供存储服务。
5.如权利要求1或2所述的方法,其特征在于,还包括:所述中间件将一个JBOD分解为多个相同和/或不同容量的JBOD,分别提供给多个服务器提供存储服务。
6.如权利要求5所述的方法,其特征在于,所述中间件为所述分解出的多个相同和/或不同容量的JBOD设置第一JBOD信息,并按照所述预先配置的映射关系表转换成所述服务器识别的第二JBOD信息。
7.根据权利要求1至6任一项所述的方法,其特征在于,还包括:所述中间件根据所述JBOD的磁盘槽位使用情况对所述JBOD设备的磁盘槽位号进行动态修改。
8.一种大容量存储系统,包括服务器、JBOD,其特征在于,配置有中间件,所述中间件用于根据管理指令对所述JBOD进行管理。
9.根据权利要求8所述的系统,其特征在于,所述中间件用于根据管理 指令将第一JBOD信息按照预先配置的映射关系表转换为所述服务器识别的第二JBOD信息提供给所述服务器。
10.根据权利要求8或9所述的系统,其特征在于,所述中间件用于对多个JBOD进行编号,集成为JBOD集群为所述服务器提供存储服务。
11.如权利要求10所述的系统,其特征在于,所述中间件用于当增加或减少JBOD时,更新所述JBOD集群,为所述服务器提供存储服务。
12.如权利要求8或9所述的系统,其特征在于,所述中间件用于将一个JBOD设备分解为多个相同和/或不同容量的JBOD,分别提供给多个服务器提供存储服务。
13.如权利要求12所述的系统,其特征在于,所述中间件用于为所述分解出的多个相同和/或不同容量的JBOD设置第一JBOD信息,并按照所述预先配置的映射关系表转换成所述服务器识别的第二JBOD信息。
14.根据权利要求8至13任一项所述的系统,其特征在于,还包括:所述中间件用于根据所述JBOD的磁盘槽位使用情况对所述JBOD的磁盘槽位号进行动态修改。
15.一种中间件,应用于包含JBOD设备的大容量存储系统,其特征在于,所述中间件被配置为管理所述JBOD为服务器提供存储资源。
CN201511032195.9A 2015-12-31 2015-12-31 一种jbod的管理方法、大容量存储系统、及中间件 Pending CN106933498A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201511032195.9A CN106933498A (zh) 2015-12-31 2015-12-31 一种jbod的管理方法、大容量存储系统、及中间件

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511032195.9A CN106933498A (zh) 2015-12-31 2015-12-31 一种jbod的管理方法、大容量存储系统、及中间件

Publications (1)

Publication Number Publication Date
CN106933498A true CN106933498A (zh) 2017-07-07

Family

ID=59443660

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511032195.9A Pending CN106933498A (zh) 2015-12-31 2015-12-31 一种jbod的管理方法、大容量存储系统、及中间件

Country Status (1)

Country Link
CN (1) CN106933498A (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020178243A1 (en) * 2001-05-15 2002-11-28 Kevin Collins Apparatus and method for centrally managing network devices
CN101776984A (zh) * 2010-02-20 2010-07-14 浪潮(北京)电子信息产业有限公司 在存储系统中处理磁盘漫游的方法和装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020178243A1 (en) * 2001-05-15 2002-11-28 Kevin Collins Apparatus and method for centrally managing network devices
CN101776984A (zh) * 2010-02-20 2010-07-14 浪潮(北京)电子信息产业有限公司 在存储系统中处理磁盘漫游的方法和装置

Similar Documents

Publication Publication Date Title
CN107066319B (zh) 一种面向异构资源的多维调度系统
US9246780B2 (en) System and method for supporting port multiplexing in a server environment
CN104539685B (zh) 一种OpenStack云桌面的U盘识别系统及方法
CN109325076A (zh) 物联网中的数据管理方法、设备、计算机设备及可读介质
CN107426274B (zh) 基于时序的业务应用及监控分析调度的方法和系统
CN104639654A (zh) 海量用电信息采集终端一体化接入系统及方法
CN111767144B (zh) 交易数据的交易路由确定方法、装置、设备及系统
CN102981973B (zh) 在存储系统中执行请求的方法
CN102983996A (zh) 一种高可用集群资源管理的动态配置方法与系统
CN112398936B (zh) 一种基于Kubernetes的多网卡容器实现方法及系统
CN112685148B (zh) 海量终端的异步通信方法、装置、计算机设备和存储介质
US20130247038A1 (en) Device-integration method, terminal-apparatus, and distributed multi-terminal-apparatus system
CN104144202B (zh) Hadoop分布式文件系统的访问方法、系统和装置
CN104468274A (zh) 一种集群监控管理方法及系统
CN104731907A (zh) 基于nosql的数据存储方法
CN105577423A (zh) 一种实时数据中心群集管理系统
CN103064964B (zh) 一种支持分布式事务的数据库的连接方法
CN105847339A (zh) 智慧医疗服务平台
CN109617941A (zh) 数据推送方法、装置、计算机设备及计算机可读存储介质
CN113342827A (zh) 一种基于多租户技术的电网数据存储方法、存储介质及系统
CN107844711A (zh) 数据操作权限隔离方法、应用服务器及计算机可读存储介质
CN110519354A (zh) 一种分布式对象存储系统及其业务处理方法和存储介质
CN101841574A (zh) 网络视频监控系统中ip地址自动分配及管理方法
CN115080533A (zh) 基于大数据用于数据交换与共享的中台系统
CN107479827A (zh) 一种基于io和元数据分离的混合存储系统实现方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170707