CN101408834A - 一种对实体储存设备进行数据读写的系统及方法 - Google Patents
一种对实体储存设备进行数据读写的系统及方法 Download PDFInfo
- Publication number
- CN101408834A CN101408834A CNA2007101631580A CN200710163158A CN101408834A CN 101408834 A CN101408834 A CN 101408834A CN A2007101631580 A CNA2007101631580 A CN A2007101631580A CN 200710163158 A CN200710163158 A CN 200710163158A CN 101408834 A CN101408834 A CN 101408834A
- Authority
- CN
- China
- Prior art keywords
- controller
- data
- storage device
- reading
- entity storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种对实体储存设备进行数据读写的系统及方法,由在共享储存环境下的多个控制器以实现客户端从远程对实体储存设备进行数据读、写操作。首先,客户端于一指定时刻从数个控制器中指定一控制器作为执行数据读、写操作的控制器,且各控制器之间通过内网连接(Interlink)进行管理数据及待写入实体储存设备的数据的快取数据(Cache Data)的传输;然后,由指定控制器通过其相应的逻辑储存设备从实体储存设备中读取数据或向实体储存设备中写入数据。
Description
技术领域
本发明涉及一种对实体储存设备进行数据读写的系统及方法,尤其涉及一种由在共享储存环境下的多个控制器对实体储存设备直接进行数据读、写操作的系统及方法。
背景技术
目前,为了提高系统的可用性和并行处理能力,通常采用多个控制器共享实际的实体储存设备的方式,客户端通过控制器对实体储存设备进行数据读写的过程通常有两种实现方式:
其一,如图1所示,对于实体储存设备60,在任一时刻有且只有一个控制器可以对实体储存设备60进行数据读写操作,例如:控制器20通过逻辑储存设备40来对实体储存设备60进行读写操作时,对实体储存设备60而言,最终的数据读写总是通过控制器20来进行,有些系统中在客户端10看来可以通过控制器30对另一控制器20的实体储存设备60进行数据读写操作,其实现的机制是控制器30与控制器20之间由内网连接,当通过控制器30读写控制器20上的实体储存设备60时,所有的数据传输110在内网中进行,而最终的实际读写操作还是在逻辑储存设备40所属的控制器20上完成。
其二,如图2所示,采用的是一种类似于负载均衡集群的架构,控制器20与控制器30分别具有一相应的逻辑储存设备40及逻辑储存设备50,当客户端10欲对实体储存设备60进行数据读写操作时需要由控制器20与控制器30前端的一个均衡器70来决定通过哪一个控制器来执行数据传输110及读写操作,但在任一指定时刻只能通过一个控制器上的逻辑储存设备对实体储存设备60进行数据的读写操作。
上述现有技术的两种做法虽然可行,但仍然存有一定的缺陷,对于第一种方式而言,实现这一功能的代价是当数据流量较大时内网上将可能会有巨大的压力,如果系统的维护对内网依赖性很大(例如控制器20与控制器30之间通过内网传输心跳信号决定对方的状态),将可能导致出现读写操作异常;对于第二种方式,很显然,需要一个专门负责均衡负载及调度控制器工作的前端均衡器70,这在硬件和软件上都带来额外的开销。
发明内容
为了解决上述现有技术中的问题与缺陷,本发明的目的在于提供一种对实体储存设备进行数据读写的系统及方法,由在共享储存环境下的多个控制器以实现客户端从远程对实体储存设备直接进行数据读、写操作。
本发明所提供的一种对实体储存设备进行数据读写的系统,包含:数个控制器及一实体储存设备,其中:各控制器,分别具有一个逻辑储存设备,各控制器之间通过内网连接(Interlink)进行管理数据及待写入实体储存设备的数据的快取数据(Cache Data)的传输,并且各控制器通过外部网络与一客户端相连,客户端在一指定时刻可从远程通过上述各控制器中一指定的控制器对实体储存设备进行数据读取或写入操作;以及实体储存设备,与各控制器的逻辑储存设备相连接,并通过逻辑储存设备从上述实体储存设备中读取数据或向实体储存设备中写入数据。
其中上述管理数据包含:执行读、写操作的指定控制器向其它控制器发出的读、写操作类型信息,和所要读、写的数据块信息,以及其它控制器向其指定控制器所反馈的其它控制器中是否存在所要读取的数据块的快取数据的信息。
其中当其它控制器或指定控制器中存在指定控制器所要读取的数据块的快取数据时,则指定控制器读取其它控制器或指定控制器中的数据块的快取数据及实体储存设备中已存在的数据块的数据,并传送给客户端;当其它控制器或指定控制器中存在指定控制器所要写入的数据块的快取数据时,则清除其它控制器或指定控制器中的数据块的快取数据,并由指定控制器向上述实体储存设备中写入上述数据块的新数据。
本发明所提供的一种对实体储存设备进行数据读写的方法,包含以下步骤:
客户端于一指定时刻从数个控制器中指定一个控制器作为执行数据读、写操作的控制器;指定控制器在执行数据读、写操作前,向其它控制器发送包含读、写操作类型信息与所要读、写的数据块信息的管理数据;其它控制器接收到上述管理数据后,如果其它控制器中存在所要读取的数据块的快取数据,则向指定控制器反馈其它控制器中存在所要读取的数据块的快取数据的信息;当其它控制器或指定控制器中存在指定控制器所要读取的数据块的快取数据时,则指定控制器读取其它控制器或指定控制器中的数据块的快取数据及实体储存设备中已存在的数据块的数据,并传送给客户端;以及当上述其它控制器或指定控制器中存在指定控制器所要写入的数据块的快取数据时,则清除其它控制器或指定控制器中的数据块的快取数据,并由指定控制器向上述实体储存设备中写入上述数据块的新数据。
其中上述各控制器之间通过内网连接(Interlink)进行数据、信息的传输;并且各控制器还通过外部网络与远程的客户端相连。
综上所述,本发明的优点在于:
本发明所提供的一种对实体储存设备进行数据读写的系统及方法,由以内网相连的多个控制器共享实体储存设备的方式,在控制器前端不必引入负载均衡器的情况下,来实现多个控制器相互协调、配合对实体储存设备直接进行数据读、写的操作,且由于各控制器之间通过内网连接所传输的仅为管理数据及待写入实体储存设备的数据的快取数据,其传输的数据量较小,因而有效地降低了上述现有技术中在控制器之间通过内网传输数据的压力,大大提高了现有技术中客户端从远程通过控制器对实体储存设备进行数据读、写的工作效率及可应用的范围。
以下结合附图和具体实施例对本发明进行详细描述,但不作为对本发明的限定。
附图说明
图1为现有技术的一种对实体储存设备进行数据读写的系统的系统方块图;
图2为现有技术的另一种对实体储存设备进行数据读写的系统的系统方块图;
图3为本发明的一种对实体储存设备进行数据读写的系统的系统方块图;以及
图4为本发明的一种对实体储存设备进行数据读写的方法的方法流程图。
其中,附图标记
10 客户端
20 控制器
30 控制器
40、50 逻辑储存设备
60 实体储存设备
70 均衡器
110 数据传输
120 管理数据的传输
130 快取数据的传输
步骤100 客户端在一指定时刻从数个控制器中指定一个控制器作为执行一数据读、写操作的控制器
步骤101 指定控制器在执行读、写操作前,发送包含读、写操作类型信息与所要读、写的数据块信息的管理数据给其它控制器
步骤102 其它控制器接收到上述管理数据后,如果其中存在所要读取的数据块的快取数据,则向指定控制器反馈一信息
步骤103 判断其它控制器及指定控制器中是否存在所要读、写的数据块的快取数据
步骤104 直接从实体储存设备读取数据或向实体储存设备写入数据
步骤105 判断所存在的快取数据是指定控制器所要读取还是写入的数据块的快取数据
步骤106 指定控制器读取其它控制器或指定控制器中数据块的快取数据及实体储存设备中已存在的数据块的数据,并传送给客户端
步骤107 清除其它控制器或指定控制器中的数据块的快取数据,并由指定控制器向实体储存设备中写入数据块的新数据
具体实施方式
以下,将结合附图部份对本发明的较佳实施方式作详细说明。
请参考图3,图中表示了本发明的一种对实体储存设备进行数据读写的系统的系统方块图,如图所示,此系统由在共享储存环境下的多个控制器于客户端10与实体储存设备60之间执行数据传输110以及对实体储存设备60进行数据读、写操作,其中,将以两个控制器:控制器20与控制器30为例来具体说明本实施方案。
如图所示,控制器20与控制器30分别具有一相应的逻辑储存设备40及逻辑储存设备50,且控制器20与控制器30之间通过内网连接(Interlink)进行管理数据的传输120及待写入实体储存设备60的数据的快取数据(CacheData)的传输130,其中内网连接为以太网络(Ethernet)或串行连接串行计算机系统接口(Serial Attached SCSI,简称SAS)的连接方式,且上述管理数据包含:执行读、写操作的控制器20(假设客户端10于一指定时刻指定控制器20作为对实体储存设备60进行数据读取或数据写入操作的控制器)向控制器30发出的读、写操作类型信息(即操作是″读取数据″还是″写入数据″)与所要读、写的数据块信息(即具体要对实体储存设备60中的哪一数据块进行读、写操作)以及控制器30向控制器20所反馈的控制器30中是否存在所要读取的数据块的快取数据的信息。并且控制器20与控制器30的相应的逻辑储存设备40及逻辑储存设备50都连接于实体储存设备60,且控制器20可通过逻辑储存设备40,而控制器30可通过逻辑储存设备50从实体储存设备60中读取数据或向实体储存设备60中写入数据。
例如:在某一时刻t1,客户端10想通过控制器20上的逻辑储存设备40读取实体储存设备60上的某一段数据S1,于是控制器20通过内网向控制器30发送管理数据,此时控制器30中没有所要读取的数据S1的快取数据,所以控制器30不向控制器20反馈信息,则控制器20在等待一段时间后确认没有控制器上存在所要读取的数据S1的快取数据,于是通过逻辑储存设备40直接从实体储存设备60上读取数据S1,而后通过外部网络(可为以太网络〔Ethernet〕或光纤信道〔Fiber Channel〕等网络连接方式)传输给远程的客户端10。
在t1之后的某一时刻t2,客户端10想通过控制器20上的逻辑储存设备40向实体储存设备60上写入一段数据S2,于是控制器20通过内网向控制器30发送管理数据,此时控制器30中没有所要写入的数据S2的快取数据,所以控制器30没有采取行动向控制器20反馈信息,则控制器20在等待一段时间后通过逻辑储存设备40开始向实体储存设备60写入数据S2。
在t2之后的某一时刻t3,客户端10想通过控制器30上的逻辑储存设备50读取实体储存设备60上的某一段数据S2,于是控制器30通过内网向控制器20发送管理数据,假如此时控制器20中还有未来得及写入实体储存设备60的数据S2的快取数据(即数据S2的部分数据),那么控制器20将通过内网将此快取数据传输给控制器30,控制器30将这部分数据传输给客户端10,同时控制器30还将通过其逻辑储存设备50从实体储存设备60中读取控制器20已经写入实体储存设备60中的数据S2的部分数据,并传输给客户端10。
在t2之后的某一时刻t4,客户端10想通过控制器30上的逻辑储存设备50向实体储存设备60中写入一段新的数据S2’,这段数据S2’在实体储存设备60上将覆盖数据S2的内容,于是控制器30通过内网向控制器20发送管理数据,假如此时控制器20中仍还有未来得及写入实体储存设备60的数据S2的快取数据,那么控制器20中的这部分数据S2的快取数据已经成为过期的旧数据,则控制器20将会把此部分快取数据清除,而控制器30在等待一段时间后将通过其逻辑储存设备50开始向实体储存设备60中写入新的数据S2’。
在t4之后的某一时刻t5,客户端10想通过控制器30上的逻辑储存设备50从实体储存设备60中读取数据S2’,假如此时控制器30上还有未来得及写入实体储存设备60中的数据S2’的快取数据,那么控制器30先会通过内网发送管理数据以确定其它控制器上不存在此数据S2’的快取数据,然后控制器30将通过其逻辑储存设备50读取实体储存设备60中已经存在的数据S2’的部分数据,并且与控制器30自身的这部分数据S2’的快取数据一同传输给客户端10。
在t4之后的某一时刻t6,客户端10想通过控制器30上的逻辑储存设备50向实体储存设备60中写入数据S2”,这段数据S2”在实体储存设备60上将覆盖数据S2’的内容,假如此时控制器30上还有未来得及写入实体储存设备60的数据S2’的快取数据,而这部分数据S2’的快取数据相对于要写入的新数据S2”已经成为过期的旧数据,于是控制器30先通过内网向控制器20发送管理数据以确定其它控制器上不存在相关的快取数据,并且控制器30会将其自身的这部分数据S2’的快取数据清除,然后在等待一段时间之后通过逻辑储存设备50向实体储存设备60中写入新的数据S2”。
现在请参考图4,此图为本发明的一种对实体储存设备进行数据读写的方法的方法流程图,如图所示,本发明的一种对实体储存设备进行数据读写的方法包含以下步骤:
首先,客户端在一指定时刻从数个控制器中指定一个控制器作为执行一数据读、写操作的控制器(步骤100);指定控制器在执行数据读、写操作前,发送包含读、写操作类型信息与所要读、写的数据块信息的管理数据给其它控制器(步骤101);其它控制器接收到上述管理数据后,如果其它控制器中存在所要读取的数据块的快取数据,则向指定控制器反馈其存在所要读取的数据块的快取数据的信息(步骤102),其中反馈的信息也可以视为一种管理数据;判断其它控制器及指定控制器中是否存在所要读、写的数据块的快取数据(步骤103);如果不存在,则指定控制器直接从实体储存设备读取数据或向实体储存设备写入数据(步骤104);如果存在,则判断所存在的快取数据是指定控制器所要读取还是写入的数据块的快取数据(步骤105);当其它控制器或指定控制器中存在指定控制器所要读取的数据块的快取数据时,则指定控制器读取其它控制器或指定控制器中的数据块的快取数据及实体储存设备中已存在的数据块的数据,并传送给客户端(步骤106);当其它控制器或指定控制器中存在指定控制器所要写入的数据块的快取数据时,则清除其它控制器或指定控制器中的数据块的快取数据,并由指定控制器向实体储存设备中写入数据块的新数据(步骤107)。
其中,还需特别说明的是,本发明的一种对实体储存设备进行数据读写的方法中,各控制器之间通过内网连接(Interlink)进行上述有关数据、信息的传输,此内网连接为以太网络(Ethernet)或串行连接串行计算机系统接口(Serial Attached SCSI,简称SAS)的连接方式。而客户端与各控制器通过外部网络,例如:以太网络(Ethernet)或光纤信道(Fiber Channel)等网络连接方式相连。此外,各控制器从实体储存设备中读取数据或者向实体储存设备中写入数据通过各控制器中的逻辑储存设备完成。
当然,本发明还可有其它多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (10)
1、一种对实体储存设备进行数据读写的系统,在共享储存环境下的多个控制器实现客户端从远程对实体储存设备进行数据读、写操作,其特征在于,该系统包含:数个控制器及一实体储存设备,其中:
所述各控制器,分别具有一逻辑储存设备,所述各控制器之间通过内网连接进行管理数据及待写入该实体储存设备的数据的快取数据的传输,并且所述各控制器通过外部网络与一客户端相连,可供客户端在一指定时刻通过所述各控制器中一指定的控制器对该实体储存设备进行数据读取或写入操作;以及
该实体储存设备,与所述各控制器的逻辑储存设备相连接,并通过该逻辑储存设备从该实体储存设备中读取数据或向该实体储存设备中写入数据。
2、根据权利要求1所述的对实体储存设备进行数据读写的系统,其特征在于,该管理数据包含:该执行读、写操作的指定控制器向其它控制器发出的读、写操作类型信息与所要读、写的数据块信息以及其它控制器向该指定控制器所反馈的所述其它控制器中是否存在所要读取的数据块的快取数据的信息。
3、根据权利要求2所述的对实体储存设备进行数据读写的系统,其特征在于,当所述其它控制器或该指定控制器中存在该指定控制器所要读取的数据块的快取数据时,该指定控制器读取所述其它控制器或该指定控制器中该数据块的快取数据及该实体储存设备中已存在的该数据块的数据,并传送给该客户端。
4、根据权利要求2所述的对实体储存设备进行数据读写的系统,其特征在于,当所述其它控制器或该指定控制器中存在该指定控制器所要写入的数据块的快取数据时,则清除所述其它控制器或该指定控制器中该数据块的快取数据,并由该指定控制器向该实体储存设备中写入该数据块的新数据。
5、根据权利要求1所述的对实体储存设备进行数据读写的系统,其特征在于,该内网连接为以太网络或串行连接串行计算机系统接口的连接方式。
6、根据权利要求1所述的对实体储存设备进行数据读写的系统,其特征在于,所述各控制器与该客户端通过以太网络或光纤信道的外部网络连接方式相连。
7、一种对实体储存设备进行数据读写的方法,由在共享储存环境下的多个控制器实现客户端从远程对实体储存设备进行数据读、写操作,其特征在于,该方法包含以下步骤:
客户端于一指定时刻从数个控制器中指定一控制器作为执行一数据读、写操作的控制器;
该指定控制器在执行该数据读、写操作前,向其它控制器发送包含读、写操作类型信息与所要读、写的数据块信息的管理数据;
所述其它控制器接收到该管理数据后,如果所述其它控制器中存在所要读取的数据块的快取数据,则向该指定控制器反馈所述其它控制器中存在所要读取的数据块的快取数据的信息;
当所述其它控制器或该指定控制器中存在该指定控制器所要读取的数据块的快取数据时,该指定控制器读取所述其它控制器或该指定控制器中该数据块的快取数据及该实体储存设备中已存在的该数据块的数据,并传送给该客户端;以及
当所述其它控制器或该指定控制器中存在该指定控制器所要写入的数据块的快取数据时,则清除所述其它控制器或该指定控制器中该数据块的快取数据,并由该指定控制器向该实体储存设备中写入该数据块的新数据。
8、根据权利要求7所述的对实体储存设备进行数据读写的方法,其特征在于,所述各控制器之间通过内网连接进行数据、信息的传输。
9、根据权利要求8所述的对实体储存设备进行数据读写的方法,其特征在于,该内网连接为以太网络或串行连接串行计算机系统接口的连接方式。
10、根据权利要求7所述的对实体储存设备进行数据读写的方法,其特征在于,所述各控制器与该客户端通过以太网络或光纤信道的外部网络连接方式相连。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2007101631580A CN101408834B (zh) | 2007-10-10 | 2007-10-10 | 一种对实体储存设备进行数据读写的系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2007101631580A CN101408834B (zh) | 2007-10-10 | 2007-10-10 | 一种对实体储存设备进行数据读写的系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101408834A true CN101408834A (zh) | 2009-04-15 |
CN101408834B CN101408834B (zh) | 2010-11-10 |
Family
ID=40571855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2007101631580A Active CN101408834B (zh) | 2007-10-10 | 2007-10-10 | 一种对实体储存设备进行数据读写的系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101408834B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105391745A (zh) * | 2014-08-22 | 2016-03-09 | 阿瓦亚公司 | 应用间资源级共享用企业系统内数据资源服务方法、系统 |
CN108111560A (zh) * | 2016-11-24 | 2018-06-01 | 中国科学院声学研究所 | 一种线速存储网络分组的系统及方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6668246B1 (en) * | 1999-03-24 | 2003-12-23 | Intel Corporation | Multimedia data delivery and playback system with multi-level content and privacy protection |
JP4349301B2 (ja) * | 2004-11-12 | 2009-10-21 | 日本電気株式会社 | ストレージ管理システムと方法並びにプログラム |
-
2007
- 2007-10-10 CN CN2007101631580A patent/CN101408834B/zh active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105391745A (zh) * | 2014-08-22 | 2016-03-09 | 阿瓦亚公司 | 应用间资源级共享用企业系统内数据资源服务方法、系统 |
CN108111560A (zh) * | 2016-11-24 | 2018-06-01 | 中国科学院声学研究所 | 一种线速存储网络分组的系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN101408834B (zh) | 2010-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103793258B (zh) | 基于管理程序的服务器复制系统及其方法 | |
US8626936B2 (en) | Protocol independent server replacement and replication in a storage area network | |
CN107526534B (zh) | 管理存储设备的输入输出(i/o)的方法和设备 | |
US9836516B2 (en) | Parallel scanners for log based replication | |
CN105468784A (zh) | 处理高并发流量的方法及其装置 | |
CN104216865A (zh) | 映射和化简运算加速系统及方法 | |
CN109739435B (zh) | 文件存储和更新方法及装置 | |
CN111600957A (zh) | 文件传输方法、装置、系统和电子设备 | |
CN110119304A (zh) | 一种中断处理方法、装置及服务器 | |
US20110131288A1 (en) | Load-Balancing In Replication Engine of Directory Server | |
CN105446794A (zh) | 一种基于虚拟机的磁盘操作方法、装置及系统 | |
CN107391285A (zh) | 内存共享方法和系统 | |
CN103986585A (zh) | 报文预处理方法及其装置 | |
CN115525417A (zh) | 数据通信方法、通信系统及计算机可读存储介质 | |
CN113836184A (zh) | 一种业务持久化方法及装置 | |
CN101408834B (zh) | 一种对实体储存设备进行数据读写的系统及方法 | |
EP3499378A1 (en) | Method and system of sharing product data in a collaborative environment | |
CN103064749A (zh) | 一种进程间通信方法 | |
CN103136139A (zh) | 现场可更换单元信息的读取方法及写入方法 | |
CN106791932A (zh) | 分布式转码系统、方法及其装置 | |
US20200007463A1 (en) | Managing multiple cartridges that are electrically coupled together | |
CN116257187A (zh) | 一种数据传输方法、装置、设备、存储阵列及存储介质 | |
US20090204665A1 (en) | System and methods for communicating between serial communications protocol enabled devices | |
CN112087430B (zh) | 一种通过smash接口访问mctp设备的系统及方法 | |
CN104580328A (zh) | 虚拟机迁移方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
ASS | Succession or assignment of patent right |
Owner name: I VALLEY HOLDINGS CO., LTD. Free format text: FORMER OWNER: YINGYEDA CO., LTD., TAIWAN Effective date: 20150730 |
|
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20150730 Address after: Cayman Islands, George Town Patentee after: IValley Holding Co., Ltd. Address before: Taipei City, Taiwan, China Patentee before: Inventec Corporation |