CN107153515B - 一种多控集群存储信息处理系统及方法 - Google Patents

一种多控集群存储信息处理系统及方法 Download PDF

Info

Publication number
CN107153515B
CN107153515B CN201710326408.1A CN201710326408A CN107153515B CN 107153515 B CN107153515 B CN 107153515B CN 201710326408 A CN201710326408 A CN 201710326408A CN 107153515 B CN107153515 B CN 107153515B
Authority
CN
China
Prior art keywords
data information
module
csm
server console
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710326408.1A
Other languages
English (en)
Other versions
CN107153515A (zh
Inventor
刘斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710326408.1A priority Critical patent/CN107153515B/zh
Publication of CN107153515A publication Critical patent/CN107153515A/zh
Application granted granted Critical
Publication of CN107153515B publication Critical patent/CN107153515B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种多控集群存储信息处理系统及方法，客户端与服务器控制台通信连接，服务器控制台与CSM模块通信连接，访问控制器与CSM模块通信连接；服务器控制台用于分别接收每个客户端传输的数据信息，对客户端传输的数据信息进行排队处理，并按队列次序逐条传递到CSM模块；CSM模块用于接收服务器控制台逐条传输的数据信息，并按照一条数据信息对应分配给一个访问控制器的方式进行分配，当CSM模块将当前接收的所有数据信息都分配至访问控制器后，每个访问控制器将数据信息对应分发至一个LUN单元中，同时访问控制器储存分配的数据信息；LUN单元对分发的数据信息进行处理，LUN单元对数据信息处理完成后，恢复空闲状态。

Description

一种多控集群存储信息处理系统及方法
技术领域
本发明涉及服务器SCSI领域，尤其涉及一种多控集群存储信息处理系统及方法。
背景技术
在单控制器存储中，可能存在一种问题就是多个客户端同时访问一个后端LUN的情形，这种情况下，如果多个客户端同时对LUN下发读写操作，且如果不采取一种保护机制的话，很可能会导致后端的LUN中数据读写混乱，这时为了保护数据一致性，采用SCSI的RESERVE/ RELEASE机制。
RESERVE和RELEASE命令提供了在多个客户端系统中解决LUN权限分配的基础方案，如果一个客户端需要访问后端的LUN，那么所述客户端先对LUN发送一个RESERVE命令，实现对该LUN的预留，该命令请求整个LUN只被该客户端单独使用，其他客户端在这个时候不能访问该LUN。直到该客户端发送RELEASE命令来释放预留，或任一客户端执行TARGETRESET功能，或一个硬重置，或掉电，其他客户端访问该LUN（访问之前也是先发送RESERVE命令）。当LUN被其他的客户端预留时，预留请求是不被允许的。在LUN被一个客户端预留时，该客户端重复预留LUN是被允许的。这样预留操作基于相同路径，预留和释放必须由相同的客户端完成，一个客户端不能释放另外一个客户端的预留。
发明内容
为了克服上述现有技术中的不足，本发明提供一种多控集群存储信息处理系统，包括：至少两个客户端，服务器控制台，CSM模块，至少两个访问控制器，至少两个LUN单元；
每个客户端分别与服务器控制台通信连接，服务器控制台与CSM模块通信连接，每个访问控制器分别与CSM模块通信连接；
服务器控制台用于分别接收每个客户端传输的数据信息，对客户端传输的数据信息进行排队处理，并按队列次序逐条传递到CSM模块；
CSM模块用于接收服务器控制台逐条传输的数据信息，并按照一条数据信息对应分配给一个访问控制器的方式进行分配，当CSM模块将当前接收的所有数据信息都分配至访问控制器后，每个访问控制器将数据信息对应分发至一个LUN单元中，同时访问控制器储存分配的数据信息；LUN单元对分发的数据信息进行处理，LUN单元对数据信息处理完成后，恢复空闲状态。
优选地，访问控制器包括：AGENT模块；
AGENT模块用于保存CSM模块分配的数据信息。
优选地，CSM模块包括：存储模块；
存储模块储存服务器控制台传递的数据信息，以及储存每个数据信息对应分配的访问控制器，当系统断电，CSM模块将存储模块的内部信息全部导入到SSD中；当系统上电后，存储模块的内部信息从SSD导回到CSM模块的存储模块中。
优选地，服务器控制台按照接收数据信息的时间顺序，对客户端传输的数据信息进行排队处理；
或按照接收数据信息的大小，对客户端传输的数据信息进行排队处理；
或按照客户端的访问级别，对客户端传输的数据信息进行排队处理。
优选地，数据信息采用PR数据信息。
优选地，服务器控制台采用EM服务器控制台；
访问控制器的数量小于或等于LUN单元的数量。
一种多控集群存储信息处理方法，处理方法包括：
服务器控制台分别接收每个客户端传输的数据信息，对客户端传输的数据信息进行排队处理，并按队列次序逐条将数据信息传递到CSM模块；
当CSM模块接收的数据信息条数与访问控制器的设置数量相同时，CSM模块停止接收服务器控制台传递的数据信息；
CSM模块接收服务器控制台逐条传输的数据信息，并按照一条数据信息分配给一个访问控制器的方式进行分配；
当CSM模块将当前接收的所有数据信息都分配至访问控制器后，每个访问控制器将数据信息对应分发至一个LUN单元中，同时访问控制器储存分配的数据信息；
LUN单元对分发的数据信息进行处理，LUN单元对数据信息处理完成后，恢复空闲状态。
优选地，存储模块储存服务器控制台传递的数据信息，以及储存每个数据信息对应分配的访问控制器，当系统断电，CSM模块将存储模块的内部信息全部导入到SSD中；当系统上电后，存储模块的内部信息从SSD导回到CSM模块的存储模块中。
优选地，当新的访问控制器加入集群时，所述访问控制器在CSM模块注册地址信息，并等待接收分配的数据信息。
从以上技术方案可以看出，本发明具有以下优点：
多控集群存储信息处理系统实现了多控集群之间数据信息的同步，解决了预留操作基于相同路径，预留和释放必须由相同的客户端完成，一个客户端不能释放另外一个客户端的预留的问题。
附图说明
为了更清楚地说明本发明的技术方案，下面将对描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为多控集群存储信息处理系统示意图；
图2为多控集群存储信息处理系统实施例示意图；
图3为多控集群存储信息处理方法流程图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将运用具体的实施例及附图，对本发明保护的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本专利中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本专利保护的范围。
本实施例提供一种多控集群存储信息处理系统，如图1所示，包括：至少两个客户端1，服务器控制台2，CSM模块3，至少两个访问控制器4，至少两个LUN单元5；
每个客户端1分别与服务器控制台2通信连接，服务器控制台2与CSM模块3通信连接，每个访问控制器4分别与CSM模块3通信连接；
服务器控制台2用于分别接收每个客户端1传输的数据信息，对客户端1传输的数据信息进行排队处理，并按队列次序逐条传递到CSM模块3；
CSM模块3用于接收服务器控制台逐条传输的数据信息，并按照一条数据信息对应分配给一个访问控制器4的方式进行分配，当CSM模块3将当前接收的所有数据信息都分配至访问控制器4后，每个访问控制器4将数据信息对应分发至一个LUN单元5中，同时访问控制器4储存分配的数据信息；LUN单元5对分发的数据信息进行处理，LUN单元5对数据信息处理完成后，恢复空闲状态。
本实施例中，如图2所示，访问控制器4包括：AGENT模块6； AGENT模块6用于保存CSM模块分配的数据信息。
CSM模块3包括：存储模块；存储模块储存服务器控制台传递的数据信息，以及储存每个数据信息对应分配的访问控制器，当系统断电，CSM模块将存储模块的内部信息全部导入到SSD中；当系统上电后，存储模块的内部信息从SSD导回到CSM模块的存储模块中。
本实施例中，服务器控制台2按照接收数据信息的时间顺序，对客户端传输的数据信息进行排队处理；或按照接收数据信息的大小，对客户端传输的数据信息进行排队处理；或按照客户端的访问级别，对客户端传输的数据信息进行排队处理。
数据信息采用PR数据信息。服务器控制台2采用EM服务器控制台；访问控制器4的数量小于或等于LUN单元5的数量，可以保证访问控制器4均能向LUN单元5分发数据信息。EM服务器控制台包括服务器监控功能。
LUN 为逻辑单元编号，其主要作用是为了给相连的服务器分配逻辑单元号。磁盘阵列上的硬盘组成RAID组后，通常连接磁盘阵列的服务器并不能直接访问RAID组，而是要再划分为逻辑单元才能分配给服务器。
本发明还提供一种多控集群存储信息处理方法，如图3所示，处理方法包括：
S1：服务器控制台分别接收每个客户端传输的数据信息，对客户端传输的数据信息进行排队处理，并按队列次序逐条将数据信息传递到CSM模块；
S2：当CSM模块接收的数据信息条数与访问控制器的设置数量相同时，CSM模块停止接收服务器控制台传递的数据信息；
S3：CSM模块接收服务器控制台逐条传输的数据信息，并按照一条数据信息分配给一个访问控制器的方式进行分配；
S4：当CSM模块将当前接收的所有数据信息都分配至访问控制器后，每个访问控制器将数据信息对应分发至一个LUN单元中，同时访问控制器储存分配的数据信息；
S5：LUN单元对分发的数据信息进行处理，LUN单元对数据信息处理完成后，恢复空闲状态。
本处理方法中，存储模块储存服务器控制台传递的数据信息，以及储存每个数据信息对应分配的访问控制器，当系统断电，CSM模块将存储模块的内部信息全部导入到SSD中；当系统上电后，存储模块的内部信息从SSD导回到CSM模块的存储模块中。
当新的访问控制器加入集群时，所述访问控制器在CSM模块注册地址信息，并等待接收分配的数据信息。
在多控制器集群中，数据信息分为两个部分储存，CSM模块储存部分和访问控制器的AGENT模块储存部分。其中CSM模块存储着整个集群的共同状态，访问控制器的AGENT模块存储的内容与CSM模块存储的内容一致。当然CSM模块给访问控制器分配数据信息时，是按照预设的分配方式进行分配。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (4)

1.一种多控集群存储信息处理方法，其特征在于，采用多控集群存储信息处理系统，包括：至少两个客户端，服务器控制台，CSM模块，至少两个访问控制器，至少两个LUN单元；
每个客户端分别与服务器控制台通信连接，服务器控制台与CSM模块通信连接，每个访问控制器分别与CSM模块通信连接；
服务器控制台用于分别接收每个客户端传输的数据信息，对客户端传输的数据信息进行排队处理，并按队列次序逐条传递到CSM模块；
CSM模块用于接收服务器控制台逐条传输的数据信息，并按照一条数据信息对应分配给一个访问控制器的方式进行分配，当CSM模块将当前接收的所有数据信息都分配至访问控制器后，每个访问控制器将数据信息对应分发至一个LUN单元中，同时访问控制器储存分配的数据信息；LUN单元对分发的数据信息进行处理，LUN单元对数据信息处理完成后，恢复空闲状态；
CSM模块包括：存储模块；存储模块储存服务器控制台传递的数据信息，以及储存每个数据信息对应分配的访问控制器，当系统断电，CSM模块将存储模块的内部信息全部导入到SSD中；当系统上电后，存储模块的内部信息从SSD导回到CSM模块的存储模块中；
访问控制器包括：AGENT模块；
AGENT模块用于保存CSM模块分配的数据信息；
服务器控制台按照接收数据信息的时间顺序，对客户端传输的数据信息进行排队处理；
或按照接收数据信息的大小，对客户端传输的数据信息进行排队处理；
或按照客户端的访问级别，对客户端传输的数据信息进行排队处理；
处理方法包括：
服务器控制台分别接收每个客户端传输的数据信息，对客户端传输的数据信息进行排队处理，并按队列次序逐条将数据信息传递到CSM模块；
当CSM模块接收的数据信息条数与访问控制器的设置数量相同时，CSM模块停止接收服务器控制台传递的数据信息；
CSM模块接收服务器控制台逐条传输的数据信息，并按照一条数据信息分配给一个访问控制器的方式进行分配；
当CSM模块将当前接收的所有数据信息都分配至访问控制器后，每个访问控制器将数据信息对应分发至一个LUN单元中，同时访问控制器储存分配的数据信息；LUN单元对分发的数据信息进行处理，LUN单元对数据信息处理完成后，恢复空闲状态；
存储模块储存服务器控制台传递的数据信息，以及储存每个数据信息对应分配的访问控制器，当系统断电，CSM模块将存储模块的内部信息全部导入到SSD中；
当系统上电后，存储模块的内部信息从SSD导回到CSM模块的存储模块中。
2.根据权利要求1所述的多控集群存储信息处理方法，其特征在于，
当新的访问控制器加入集群时，所述访问控制器在CSM模块注册地址信息，并等待接收分配的数据信息。
3.根据权利要求1所述的多控集群存储信息处理方法 ，其特征在于，
数据信息采用PR数据信息。
4.根据权利要求1所述的多控集群存储信息处理方法 ，其特征在于，
服务器控制台采用EM服务器控制台；
访问控制器的数量小于或等于LUN单元的数量。
CN201710326408.1A 2017-05-10 2017-05-10 一种多控集群存储信息处理系统及方法 Active CN107153515B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710326408.1A CN107153515B (zh) 2017-05-10 2017-05-10 一种多控集群存储信息处理系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710326408.1A CN107153515B (zh) 2017-05-10 2017-05-10 一种多控集群存储信息处理系统及方法

Publications (2)

Publication Number Publication Date
CN107153515A CN107153515A (zh) 2017-09-12
CN107153515B true CN107153515B (zh) 2020-04-03

Family

ID=59793403

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710326408.1A Active CN107153515B (zh) 2017-05-10 2017-05-10 一种多控集群存储信息处理系统及方法

Country Status (1)

Country Link
CN (1) CN107153515B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109194642B (zh) * 2018-08-28 2022-05-03 深圳创维数字技术有限公司 白板远程同步处理方法、系统及存储介质
CN109344573B (zh) * 2018-10-15 2021-10-15 郑州云海信息技术有限公司 一种激活方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102170396A (zh) * 2011-05-06 2011-08-31 浙江大学 一种基于区分服务的云存储系统QoS控制方法
CN103838515A (zh) * 2012-11-23 2014-06-04 中国科学院声学研究所 一种服务器集群访问调度多控制器磁盘阵列的方法及系统
CN103888499A (zh) * 2012-12-21 2014-06-25 中国科学院深圳先进技术研究院 一种分布式对象处理的方法及系统
CN105791371A (zh) * 2014-12-22 2016-07-20 中国科学院上海高等研究院 一种云存储服务系统及方法
CN106201357A (zh) * 2016-07-18 2016-12-07 浪潮(北京)电子信息产业有限公司 一种存储池的构建方法及系统
CN106527985A (zh) * 2016-11-02 2017-03-22 郑州云海信息技术有限公司 一种基于ceph的存储交互装置及存储系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8380852B2 (en) * 2009-12-23 2013-02-19 International Business Machines Corporation Clearing SCSI reservations for non-detectable initiators for extended duration
US8683258B2 (en) * 2011-09-30 2014-03-25 Symantec Corporation Fast I/O failure detection and cluster wide failover

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102170396A (zh) * 2011-05-06 2011-08-31 浙江大学 一种基于区分服务的云存储系统QoS控制方法
CN103838515A (zh) * 2012-11-23 2014-06-04 中国科学院声学研究所 一种服务器集群访问调度多控制器磁盘阵列的方法及系统
CN103888499A (zh) * 2012-12-21 2014-06-25 中国科学院深圳先进技术研究院 一种分布式对象处理的方法及系统
CN105791371A (zh) * 2014-12-22 2016-07-20 中国科学院上海高等研究院 一种云存储服务系统及方法
CN106201357A (zh) * 2016-07-18 2016-12-07 浪潮(北京)电子信息产业有限公司 一种存储池的构建方法及系统
CN106527985A (zh) * 2016-11-02 2017-03-22 郑州云海信息技术有限公司 一种基于ceph的存储交互装置及存储系统

Also Published As

Publication number Publication date
CN107153515A (zh) 2017-09-12

Similar Documents

Publication Publication Date Title
US10884799B2 (en) Multi-core processor in storage system executing dynamic thread for increased core availability
CN108776576B (zh) 用于聚合的网上NVMe装置的聚合存储方法
US7685342B2 (en) Storage control apparatus and method for controlling number of commands executed in storage control apparatus
US11016956B2 (en) Database management system with database hibernation and bursting
US9329910B2 (en) Distributed power delivery
US11797188B2 (en) Solid state drive with multiplexed internal channel access during program data transfers
CN102207830A (zh) 一种缓存动态分配管理方法及装置
US10387051B2 (en) Acquisition of IOPS and MBPS limits independently at a scheduler in a scheduler hierarchy
CN107153515B (zh) 一种多控集群存储信息处理系统及方法
US11232010B2 (en) Performance monitoring for storage system with core thread comprising internal and external schedulers
CN112506431B (zh) 基于磁盘设备属性的i/o指令调度方法及装置
US20110191551A1 (en) Storage apparatus and storage management method
US7853757B2 (en) Avoiding failure of an initial program load in a logical partition of a data storage system
US20160019145A1 (en) Storage system and cache control method
CN112114744A (zh) 一种多通道全互联架构的ssd固态盘及其控制方法
US11080192B2 (en) Storage system and storage control method
US20170123657A1 (en) Systems and methods for back up in scale-out storage area network
US11971771B2 (en) Peer storage device messaging for power management
US8156296B2 (en) System and method for managing resets in a system using shared storage
US11481291B2 (en) Alternative storage node communication channel using storage devices group in a distributed storage system
US11327812B1 (en) Distributed storage system with per-core rebalancing of thread queues
US11144242B2 (en) Distributed storage system
US8312185B2 (en) Storage apparatus and method of updating control information in storage apparatus
US10536565B2 (en) Efficient centralized stream initiation and retry control
US11886911B2 (en) End-to-end quality of service mechanism for storage system using prioritized thread queues

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant