CN103617024A - 一种并发数据处理方法、装置和系统 - Google Patents
一种并发数据处理方法、装置和系统 Download PDFInfo
- Publication number
- CN103617024A CN103617024A CN201310552578.3A CN201310552578A CN103617024A CN 103617024 A CN103617024 A CN 103617024A CN 201310552578 A CN201310552578 A CN 201310552578A CN 103617024 A CN103617024 A CN 103617024A
- Authority
- CN
- China
- Prior art keywords
- access means
- concurrent number
- number resource
- request
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及信息技术领域,特别是涉及一种并发数据处理方法、装置和系统,所述方法包括:当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;接收所述第二访问设备发送的反馈消息;当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
Description
技术领域
本发明涉及信息技术领域,特别是涉及一种并发数据处理方法、装置和系统。
背景技术
在数据存储领域,使用例如硬盘、存储阵列等存储设备存储数据。存储设备可以接收并响应访问设备发送的数据请求,其中,访问设备为发起数据访问的一端,又可以称为主机端。访问设备向存储设备发起的一个数据请求称为一个并发。通常,访问设备可以向存储设备同时发起多个数据请求,访问设备发起数据请求的数量称为访问设备的请求并发数。相应地,存储设备也可以响应一个或多个访问设备发起的数据请求,存储设备能够同时处理的数据请求的数量是有限的,存储设备能够同时处理的最大数据请求的数量称为最大响应并发数。例如,SATA(Serial ATA,一种使用串行信号方式实现ATA协议的技术,其中,ATA(Advanced Technology Attachment)为一种存储协议)硬盘的最大响应并发数为32,SAS(Serial Attached SCSI,一种使用串行信号实现SCSI协议的技术,SCSI(Small computer System Interface)w为一种存储协议)硬盘的最大响应并发数为64,存储阵列的最大响应并发数则可以达到数千。
现有技术中,当有多个访问设备连接到存储设备时,每个访问设备均认为自己可以使用存储设备的最大并发数,即每个访问设备的最大请求并发数等于存储设备的最大并发数。
发明人在实现本发明的过程中发现,现有技术存在的数据处理方法,由于每个访问设备的最大请求并发数等于存储设备的最大并发数,将会导致访问设备发送的数据请求过多,远超过存储设备的数据处理能力。而当存储设备收到的数据请求超过自身的最大响应并发数时,只能向访问设备返回错误信息,访问设备需要等待或者重新发起数据请求。这种方式会浪费连接带宽,并降低了访问设备和存储设备的数据处理能力和效率。
发明内容
为解决上述技术问题,本发明实施例提供了一种并发数据处理方法、装置和系统,可以通过并发数资源动态分配和调整,提高访问设备和存储设备的数据处理效率,降低带宽资源浪费。
根据本发明实施例的第一方面,公开了一种并发数据处理方法,应用于第一访问设备,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括所述第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;则所述方法包括:
当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;
接收所述第二访问设备发送的反馈消息;
当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;
利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
结合本发明的第一方面,本发明还具有第一种可能,其中,所述方法还包括:
接收所述第二访问设备发送的并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量;
向所述第二访问设备发送同意回收消息,以使得所述第二访问设备在接收到所述同意回收消息后,利用回收的并发数资源向所述存储设备发送数据请求;
为所述第一访问设备重新分配并发数资源。
结合本发明的第一方面,本发明还具有第二种可能,其中,所述方法还包括:
向所述第二访问设备发送并发数资源归还请求,以使得所述第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源;
为所述第一访问设备重新分配并发数资源。
结合本发明的第一方面,本发明还具有第三种可能,其中,所述方法还包括:
接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量;
当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息;
当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送拒绝所述并发数资源转让请求的反馈消息。
结合本发明的第一方面和本发明的第三种可能,本发明还具有第四种可能,其中,在向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息之后,所述方法还包括:
向所述第二访问设备发送并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第一访问设备同意转让的并发数资源的数量;
接收所述第二访问设备发送的同意回收消息;
根据所述同意回收消息为以所述第一访问设备重新分配并发数资源,利用回收的并发数资源向所述存储设备发送数据请求。
结合本发明的第一方面和本发明的第三种可能,本发明还具有第五种可能,其中,在向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息之后,所述方法还包括:
接收所述第二访问设备发送的并发数资源归还请求;
重新分配所述第一访问设备具有的并发数资源,利用第二访问设备归还的并发数资源向所述存储设备发送数据请求。
结合本发明的第一方面,本发明还具有第六种可能,其中,所述至少两个访问设备还包括第三访问设备,所述第三访问设备分别与所述第一访问设备、所述存储设备数据连接,所述第三访问设备配置有第四数量的并发数资源,其中,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数,则所述方法还包括:
当第一访问设备需要发送的数据请求的数量大于第一数量时,分别向所述第二访问设备、第三访问设备发送并发数资源转让请求;
接收所述第二访问设备发送的反馈消息以及第三访问设备发送的反馈消息;
当所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源,其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值。
根据本发明实施例的第二方面,公开了一种并发数据处理装置,应用于第一访问设备,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括所述第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;则所述装置包括:
第一发送单元,用于当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;
第一接收单元,用于接收所述第二访问设备发送的反馈消息;
第一分配单元,用于当第一接收单元接收的所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;
第二发送单元,用于利用所述第一分配单元重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
根据本发明实施例的第二方面,本发明还具有第七种可能,其中,所述装置还包括:
第二接收单元,用于接收所述第二访问设备发送的并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量;
第三发送单元,用于向所述第二访问设备发送同意回收消息,以使得所述第二访问设备在接收到所述同意回收消息后,利用回收的并发数资源向所述存储设备发送数据请求;
第二分配单元,用于在第三发送单元发送所述同意回收消息后,为所述第一访问设备重新分配并发数资源。
结合本发明的第二方面,本发明还具有第八种可能,其中,所述装置还包括:
第四发送单元,用于向所述第二访问设备发送并发数资源归还请求,以使得所述第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源;
第三分配单元,用于在所述第四发送单元向所述第二访问设备发送并发数资源归还请求后,为所述第一访问设备重新分配并发数资源。
结合本发明的第二方面,本发明还具有第九种可能,其中,所述装置还包括:
第三接收单元,用于接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量;
第五发送单元,用于当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息;
第六发送单元,用于当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送拒绝所述并发数资源转让请求的反馈消息。
结合本发明的第二方面以及本发明的第九种可能,本发明还具有第十种可能,其中,所述装置还包括:
第七发送单元,用于向所述第二访问设备发送并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第一访问设备同意转让的并发数资源的数量;
第四接收单元,用于接收所述第二访问设备发送的同意回收消息;
第四分配单元,用于根据所述同意回收消息为以所述第一访问设备重新分配并发数资源,利用回收的并发数资源向所述存储设备发送数据请求。
结合本发明的第二方面以及本发明的第九种可能,本发明还具有第十一种可能,其中,所述装置还包括:
所述装置还包括:
第五接收单元,用于接收所述第二访问设备发送的并发数资源归还请求;
第五分配单元,用于重新分配所述第一访问设备具有的并发数资源,利用第二访问设备归还的并发数资源向所述存储设备发送数据请求。
结合本发明的第二方面,本发明还具有第十二种可能,其中,所述至少两个访问设备还包括第三访问设备,所述第三访问设备分别与所述第一访问设备、所述存储设备数据连接,所述第三访问设备配置有第四数量的并发数资源,其中,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数,则所述装置还包括:
第八发送单元,用于当第一访问设备需要发送的数据请求的数量大于第一数量时,分别向所述第二访问设备、第三访问设备发送并发数资源转让请求;
第六接收单元,用于接收所述第二访问设备发送的反馈消息以及第三访问设备发送的反馈消息;
第六分配单元,用于当所述第三接收单元接收的所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源,其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值。
根据本发明实施例的第三方面,公开了一种并发数据处理系统,所述系统包括至少两个访问设备和至少一个存储设备,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;其中,
所述第一访问设备用于当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;以及,接收所述第二访问设备发送的反馈消息;当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量;
所述第二访问设备用于在接收到所述第一访问设备发送的并发数资源转让请求后,向所述第一访问设备发送反馈消息,所述反馈消息用于表明所述第二访问设备是否同意所述并发数资源转让请求;
所述存储设备用于接收所述至少两个访问设备发送的数据请求,并响应所述数据请求。
本发明实施例的一个方面能够达到的有益效果为:在本发明实施例中,当多个访问设备与同一存储设备数据连接时,各个访问设备之间可以通过并发数资源转让请求协商并发数资源的分配,从而实现了访问设备间并发数资源的动态分配和调整,避免访问设备向存储设备发送的数据请求过多导致的带宽资源浪费和设备处理能力下降的问题,有效提高了访问设备和存储设备的数据处理效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的并发数据处理方法第一实施例示意图;
图2为本发明实施例提供的并发数据处理方法第二实施例示意图;
图3为本发明实施例提供的并发数据处理方法第三实施例示意图;
图4为本发明实施例提供的并发数据处理方法第四实施例示意图;
图5为本发明实施例提供的并发数据处理方法第五实施例示意图;
图6为本发明实施例一种应用场景示意图;
图7为本发明实施例另外一种应用场景示意图;
图8为本发明实施例提供的并发数据处理装置第一实施例示意图;
图9为本发明实施例提供的并发数据处理装置第二实施例示意图;
图10为本发明实施例提供的并发数据处理系统第一实施例示意图;
图11为本发明实施例提供的并发数据处理系统第二实施例示意图。
具体实施方式
本发明实施例提供了一种并发数据处理方法、装置和系统,可以通过并发数资源动态分配和调整,提高访问设备和存储设备的数据处理效率,降低带宽资源浪费。
下面首先对本发明的思想进行阐述。发明人在实现本发明的过程中发现,由于存储设备能够同时处理的数据请求的数量是有限的,当存储设备收到的数据请求超过自身的最大响应并发数时,只能向访问设备返回错误信息,访问设备需要等待或者重新发起数据请求。这种方式会浪费连接带宽,并降低了访问设备和存储设备的数据处理能力和效率。为了提高数据在访问设备和存储设备间的处理速度,一种可能的实现方式为,可以预先为与存储设备连接的多个访问设备分配并发数资源。例如如图6所示的系统,可以将各硬盘的并发数资源平均分配给每个控制器使用。例如,对于最大响应并发数为32的SATA硬盘,则为每个存储器分配的并发数资源为16。在这种分配方式下,并发数资源一旦分配完成,则不会进行变更。发明人经过研究发现,在同一时刻,对于同一硬盘而言,访问设备例如控制器对其的访问强度可能并不相同。在某些应用情况下,甚至只有一个控制器会访问该硬盘,而另一个控制器仅作为冗余备份使用。发明人发现,每个控制器对硬盘的访问需求是不一样的,对于并发数资源的使用需求也是不一样的,而且可能随着时间的推移发生变化。因此,在这一种实现方式中,容易出现一个控制器的并发数资源不足,另一控制器的并发数资源闲置的情况,使得硬盘收到的数据请求不足,未能充分利用硬盘的资源和处理能力。
为了解决在处理并发数据时,可能出现的存储设备接收到数据请求过多货不足导致的降低设备处理能力和效率的问题,本发明提供了一种并发数据处理方法、装置和系统,可以动态分配和调整并发数资源,提高访问设备和存储设备的数据处理效率,降低带宽资源浪费。
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
实施例一
参见图1,为本发明实施例提供的并发数据处理方法第一实施例示意图图。其中,图1所示的方法应用于第一访问设备,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量为第一数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量为第二数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数。需要说明的是,所述存储设备可以是任意一种形态的存储设备,包括但不限于硬盘、存储阵列等。所述存储设备与至少两个访问设备相连,所述访问设备包括但不限于服务器、控制器、主机等用于向存储设备发送数据请求的电子设备或装置。其中,各设备之间数据连接的含义为各设备之间可以实现通信连接,并通过通信连接交互数据。特别地,各访问设备之间可以实现通信连接,连接方式不限于有线或者无线的方式。
S101,当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求。
在本发明具体实现时,为与存储设备连接的每一访问设备预先分配了预定数量的并发数资源。其中,并发数资源用于表明访问设备能够向存储设备发送的数据请求的最大数量。现以与存储设备连接的访问设备包括第一访问设备和第二访问设备为例进行说明。其中,第一访问设备配置具有第一数量的并发数资源,即第一访问设备最多可以向存储设备发送第一数量的数据请求。第二访问设备配置具有第二数量的并发数资源,即第二访问设备最多可以向存储设备发送第二数量的数据请求。第一数量和第二数量可以预先设置,可以相同,也可以不同。例如对于存储设备仅与两个访问设备相连的情形,存储设备的最大响应并发数为Ci,那么为第一访问设备分配的并发数资源的数量为C1,为第二访问设备分配的并发数资源的数量为C2,其中,C1=C2=Ci/2。当然,本领域技术人员可以理解的是,也可以根据经验为其中一个访问设备分配较多的并发数资源,或者根据访问设备的访问频率,按照每一访问设备的访问频率占总访问频率的比例为各访问设备分配预定比例的并发数资源。只要与存储设备相连的两个或两个以上的存储设备拥有的并发数资源的总和不大于存储设备能够响应的最大数据请求的数量即最大响应并发数即可。本领域技术人员可以理解的是,上述实现原理和方法也可以扩展到多个访问设备与存储设备相连的应用场景,本领域技术人员可以根据需要进行设置以实现上述技术方案。
当第一访问设备确定其需要发送的数据请求的数量大于为其分配的并发数资源的数量时,则可以向第二访问设备发送并发数资源转让请求,用于请求第二访问设备转让一定数量的并发数资源。其中,并发数资源转让请求中包含第一访问设备请求转让的并发数资源的数量。其中,第一访问设备请求转让的并发数资源的数量应当不大于第二访问设备被配置拥有的并发数资源的数量。这时,第一访问设备可以保存第二访问设备与其拥有的并发数资源之间的对应关系。当然,第一访问设备也可以不保存上述对应关系,直接向第二访问设备发送并发数资源转让请求,由第二访问设备根据自身资源分配的情况判断是否同意第一访问设备的请求。
对应存储设备与两个访问设备相连的情形,第二访问设备为除第一访问设备之外与存储设备相连的另一访问设备。对应存储设备与两个以上访问设备相连的情形,第二访问设备可以为除第一访问设备之外的任意一个访问设备。当然,第一访问设备也可以向多个访问设备同时发送并发数资源转让请求。
S102,接收所述第二访问设备发送的反馈消息。
当第二访问设备接收到第一访问设备发送的并发数资源转让请求后,即根据所述并发数源转让请包含请求转让的并发数资源的数量以及自身分配的并发数资源的数量,确定是否同意所述并发数资源转让请求。具体实现时,当第二访问设备判断向所述存储设备发送的数据请求的数量小于第二数量且向所述存储设备发送的数据请求的数量与第二数量之间的差值不小于所述第一访问设备请求转让的并发数资源的数量时,则发送同意所述并发数资源转让请求的反馈消息;当第二访问设备判断向所述存储设备发送的数据请求的数量等于所述第二数量或者向所述存储设备发送的数据请求的数量与第二数量之间的差值小于所述第一访问设备请求转让的并发数资源的数量时,则发送拒绝所述并发数资源转让请求的反馈消息。其中,第二访问设备向存储设备发送的数据请求的数量可以是已经发送的数据请求的数量,或者已经发送的数据请求的数量与将要发送的数据请求的数量的和值。
第一访问设备接收第二访问设备发送的反馈消息,所述反馈消息用于表明所述第二访问设备是否同意所述并发数资源转让请求。当第二访问设备同意所述并发数资源转让请求时,可以在反馈消息中携带同意转让的并发数资源的数量,同意转让的并发数资源的数量可以小于或者等于第一访问设备请求转让的并发数资源的数量。如果第二访问设备同意转让并发数资源的数量与第一访问设备请求的数量相同,则可以在反馈消息中省略同意转让的数量,由第一访问设备根据其请求的数量确定第二访问设备同意转让的并发数资源的数量。
S103,当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值。
其中,当第二访问设备的反馈消息中携带了同意转让的并发数资源的数量时,根据所述反馈消息确定第二访问设备同意转让的并发数资源的数量。当第二访问设备的反馈消息未携带同意转让的并发数资源的数量时,根据第一访问设备发送的并发数资源转让请求确定第二访问设备同意转让的并发数资源的数量。然后,为第一访问设备重新分配第三数量的并发数资源。这时,第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值。所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数。当第一访问设备的并发数资源调整为第三数量时,其能够向存储设备发送的数据请求的最大数量为第三数量。
S104,利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
当访问设备有数据读写请求时,则利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求,以与存储设备进行数据交互。
在本发明第一实施例中,当两个或两个以上的访问设备与同一存储设备数据连接时,各个访问设备之间可以通过并发数资源转让请求协商并发数资源的分配,从而实现了访问设备间并发数资源的动态分配和调整,避免访问设备向存储设备发送的数据请求过多导致的带宽资源浪费和设备处理能力下降的问题,有效提高了访问设备和存储设备的数据处理效率。
实施例二
参见图2,为本发明实施例提供的并发数据处理方法第二实施例示意图。
在本发明第二实施例中,在第一实施例的基础上,访问设备之间还可以发送并发数资源回收请求,用于根据访问设备对并发数资源的使用情况,动态调整访问设备间拥有的并发数资源。下面进行说明。
S201,第一访问设备接收第二访问设备发送的并发数资源回收请求。
其中,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量。当第二访问设备确定当前拥有的并发数资源不足时,则可以向第一访问设备发送并发数资源回收请求。需要说明的是,转让并发数资源的设备,例如第二访问设备,可以在发送同意并发数资源转让请求的反馈消息后,存储其转让的并发数资源与转让对象(请求转让的访问设备)的对应关系,当需要回收并发数资源时,则根据保存的对应关系,向相应的访问设备发送并发数资源回收请求。其中,并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量。
S202,向所述第二访问设备发送同意回收消息。
在第一访问设备接收到第二访问设备发送的并发数资源回收请求后,即尽快停止使用相应数量的并发数资源,并向第二访问设备发送同意回收信息。第二访问设备在接收到同意回收消息后,即可以重新使用回收的并发数资源,并利用回收的并发数资源向所述存储设备发送数据请求。
S203,为所述第一访问设备重新分配并发数资源。
在向第二访问设备发送同意回收信息后,为第一访问设备重新分配并发数资源。这时,第一访问设备拥有的并发数资源的数量为第三数量与第二访问设备回收的并发数资源的数量之间的差值。
在本发明第二实施例中,当同意转让并发数资源的访问设备当前使用的并发数资源不足时,则可以请求受让并发数资源的访问设备归还并发数资源,从而使得并发数资源可以随着访问设备对资源使用的情况进行动态分配和调整,避免访问设备向存储设备发送的数据请求过多或不足导致的带宽资源浪费和设备处理能力下降的问题,有效提高了访问设备和存储设备的数据处理效率。
实施例三
在本发明第三实施例中,在第一实施例的基础上,访问设备之间还可以发送并发数资源归还请求,用于根据访问设备对并发数资源的使用情况,动态调整访问设备间拥有的并发数资源。下面结合图3进行说明。参见图3,为本发明实施例提供的并发数据处理方法第三实施例示意图。
S301,第一访问设备向所述第二访问设备发送并发数资源归还请求。
当第一访问设备确定当前拥有的并发数资源富余时,即第一访问设备向存储设备发送的数据请求数量小于第三数量时,且保持一定时间时,则可以向第二访问设备发送并发数资源归还请求。其中,并发数资源回收请求中包含了归还的并发数资源的数量。需要说明的是,请求转让并发数资源的设备,例如第一访问设备,可以在接收到第二访问设备同意并发数资源转让请求的反馈消息后,存储其请求转让的并发数资源与转让设备之间的对应关系,当需要归还并发数资源时,则根据保存的对应关系,向相应的访问设备发送并发数资源归还请求。其中,并发数资源归还请求包含归还的并发数资源的数量,所述归还的并发数资源的数量等于所述第二访问设备同意转让的并发数资源的数量。当第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源,第二访问设备即可以利用重新分配的并发数资源向存储设备发起数据请求。
S302,为所述第一访问设备重新分配并发数资源。
在向第二访问设备发送并发数资源归还请求后,为第一访问设备重新分配并发数资源。这时,第一访问设备拥有的并发数资源的数量为第三数量与向第二访问设备归还的并发数资源的数量之间的差值。
在本发明第三实施例中,当请求转让并发数资源的访问设备当前使用的并发数资源富余时,则可以主动归还请求转让的并发数资源至转让资源的访问设备,从而使得并发数资源可以随着访问设备对资源使用的情况进行动态分配和调整,避免访问设备向存储设备发送的数据请求过多或不足导致的带宽资源浪费和设备处理能力下降的问题,有效提高了访问设备和存储设备的数据处理效率。
实施例四
在本发明第四实施例中,与第一实施例对应,访问设备还可以接受其他访问设备发送的并发数资源转让请求,以将富余的并发数资源转让给并发数资源不足的其他访问设备,从而使得并发数资源可以随着访问设备对资源使用的情况进行动态分配和调整,避免访问设备向存储设备发送的数据请求过多或不足导致的带宽资源浪费和设备处理能力下降的问题,有效提高了访问设备和存储设备的数据处理效率。
下面结合图4进行说明。参见图4,为本发明实施例提供的并发数据处理方法第四实施例示意图。
S401,第一访问设备接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量。
当第二访问设备确定其拥有的并发数资源不足时,即当第二访问设备确定其需要发送的数据请求的数量大于第二数量时,则向第一访问设备发送并发数资源转让请求,用于请求第一访问设备转让一定数量的并发数资源。其中,并发数资源转让请求中包含第二访问设备请求转让的并发数资源的数量。其中,第二访问设备请求转让的并发数资源的数量应当不大于第一访问设备被配置拥有的并发数资源的数量。
S402,当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,第一访问设备向第二访问设备发送同意所述并发数资源转让请求的反馈消息。
S403,当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,第一访问设备向第二访问设备发送拒绝所述并发数资源转让请求的反馈消息。
进一步的,在第一访问设备向第二访问设备发送同意所述并发数资源转让请求的反馈消息之后,所述方法还可以包括:
S404,当第一访问设备确定其拥有的并发数资源不足时,则向所述第二访问设备发送并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第一访问设备同意转让的并发数资源的数量。
S405,接收所述第二访问设备发送的同意回收消息。
S406,根据所述同意回收消息为以所述第一访问设备重新分配并发数资源,利用回收的并发数资源向所述存储设备发送数据请求。
进一步的,在第一访问设备向第二访问设备发送同意所述并发数资源转让请求的反馈消息之后,所述方法还可以包括:
S407,接收所述第二访问设备发送的并发数资源归还请求;
S408,重新分配所述第一访问设备具有的并发数资源,利用第二访问设备归还的并发数资源向所述存储设备发送数据请求。
其中,步骤S404-S408(图4未示出)的具体实现可以参照前几个实施例的方式,在此不再赘述。
实施例五
在本发明第五实施例中,当存储设备与两个以上的访问设备相连时,访问设备可以向一个或多个其他访问设备发送并发数资源转让请求,以向其他访问设备请求并发数资源,从而使得并发数资源可以随着访问设备对资源使用的情况进行动态分配和调整,避免访问设备向存储设备发送的数据请求过多或不足导致的带宽资源浪费和设备处理能力下降的问题,有效提高了访问设备和存储设备的数据处理效率。
图5为本发明实施例提供的并发数据处理方法第五实施例示意图。其中,图5所示的实施例可以应用到图7所示的应用场景中。其中,存储设备与第一访问设备、第二访问设备、第三访问设备分别连接,第一访问设备、第二访问设备、第三访问设备之间通信连接,第三访问设备被配置具有第四数量的并发数资源,其中,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数。本领域技术人员可以理解的是,这一实施例以3个访问设备为例进行说明,下述实施方式可以扩展到3个以上个访问设备之间的并发数资源分配与调整的处理。
S501,当第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求。
S502,向第三访问设备发送并发数资源转让请求。
S503,接收所述第二访问设备发送的反馈消息
S504,接收第三访问设备发送的反馈消息。
S505,当所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源。
其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值。
需要说明的是,当存储设备与两个以上访问设备数据连接时,其中一个访问设备可以向一个或多个访问设备发送并发数资源转让请求,类似地,也可以向一个或多个访问设备转让并发数资源。两个访问设备间的交互过程可以参见实施例一至实施例四的实现方式。在这一实施例中,当第一访问设备接收到第二访问设备和第三访问设备的反馈消息时,则根据所述反馈消息分别确定第二访问设备和第三访问设备同意转让的并发数资源的数量,并为第一访问设备重新分配并发数资源。当然,第二访问设备或第三访问设备的反馈消息如果表明拒绝所述转让请求时,则第一访问设备还可以向其他访问设备发送并发数资源转让请求,以请求到足够的并发数资源。
需要说明的是,以上实施例可以通过组合或者变形的方式获取到其他实施例,均属于本发明的保护范围。
参见图6为本发明实施例一种应用场景示意图。在这一应用场景中,存储设备为存储阵列,包括若干硬盘硬盘1、硬盘2......硬盘n,其中,存储设备分别与两个控制器(对应访问设备,分别为控制器A、控制器B)相连。每个控制器到硬盘各有一条物理连接(一般为SAS线缆)来访问其上的数据。控制器之间也会有一条物理连接(一般为以太网线缆)用于控制器间的数据通信。两个控制器之间可以应用如实施例一至实施例四介绍的方法实现并发数资源的分配与调整。
参见图7为本发明实施例另外一种应用场景示意图。在这一应用场景中,存储设备为存储阵列,存储阵列与多个服务器(包括服务器A、服务器B......服务器n)相连,每个服务器到存储阵列各有一条物理连接(一般为FC或以太网线缆)来访问其上的数据。服务器之间也会有网络连接(一般为以太网)用于服务器间的通信。多个服务器之间可以应用如实施例一至实施例五介绍的方法实现并发数资源的分配与调整。
图8为本发明实施例提供的并发数据处理装置第一实施例示意图。
一种并发数据处理装置,应用于第一访问设备,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量为第一数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量为第二数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;则所述装置包括:
第一发送单元801,用于当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;
第一接收单元802,用于接收所述第二访问设备发送的反馈消息;
第一分配单元803,用于当第一接收单元接收的所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;
第二发送单元804,用于利用所述第一分配单元重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
进一步地,所述装置还包括:
第二接收单元,用于接收所述第二访问设备发送的并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量;
第三发送单元,用于向所述第二访问设备发送同意回收消息,以使得所述第二访问设备在接收到所述同意回收消息后,利用回收的并发数资源向所述存储设备发送数据请求;
第二分配单元,用于在第三发送单元发送所述同意回收消息后,为所述第一访问设备重新分配并发数资源。
进一步地,所述装置还包括:
第四发送单元,用于向所述第二访问设备发送并发数资源归还请求,以使得所述第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源;
第三分配单元,用于在所述第四发送单元向所述第二访问设备发送并发数资源归还请求后,为所述第一访问设备重新分配并发数资源。
进一步地,所述装置还包括:
第三接收单元,用于接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量;
第五发送单元,用于当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,发送同意所述并发数资源转让请求的反馈消息;
第六发送单元,用于当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,发送拒绝所述并发数资源转让请求的反馈消息。
进一步地,所述装置还包括:
第七发送单元,用于向所述第二访问设备发送并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第一访问设备同意转让的并发数资源的数量;
第四接收单元,用于接收所述第二访问设备发送的同意回收消息;
第四分配单元,用于根据所述同意回收消息为以所述第一访问设备重新分配并发数资源,利用回收的并发数资源向所述存储设备发送数据请求。
所述装置还包括:
第五接收单元,用于接收所述第二访问设备发送的并发数资源归还请求;
第五分配单元,用于重新分配所述第一访问设备具有的并发数资源,利用第二访问设备归还的并发数资源向所述存储设备发送数据请求。
进一步地,所述至少两个访问设备还包括第三访问设备,所述第三访问设备分别与所述第一访问设备、所述存储设备数据连接,所述第三访问设备被配置具有第四数量的并发数资源,其中,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数,则所述装置还包括:
第八发送单元,用于当第一访问设备需要发送的数据请求的数量大于第一数量时,分别向所述第二访问设备、第三访问设备发送并发数资源转让请求;
第六接收单元,用于接收所述第二访问设备发送的反馈消息以及第三访问设备发送的反馈消息;
第六分配单元,用于当所述第三接收单元接收的所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源,其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值。
参见图9,为本发明实施例提供的并发数据处理装置第二实施例示意图。
图9描述了本发明另一个实施例提供的并发数据处理装置的结构,包括至少一个处理器901(例如CPU),存储器902,和至少一个通信总线903,用于实现这些装置之间的连接通信。处理器901用于执行存储器902中存储的可执行模块,例如计算机程序。存储器902可能包含高速随机存取存储器(RAM:Random Access Memory),也可能还包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。
在一些实施方式中,存储器902存储了程序9021,程序9021可以被处理器901执行,这个程序包括:当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;
接收所述第二访问设备发送的反馈消息;
当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量;其中,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量sei所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置具有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数。
其中,所述程序9021还可以包括:接收所述第二访问设备发送的并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量;向所述第二访问设备发送同意回收消息,以使得所述第二访问设备在接收到所述同意回收消息后,利用回收的并发数资源向所述存储设备发送数据请求;为所述第一访问设备重新分配并发数资源。
其中,所述程序9021还可以包括:向所述第二访问设备发送并发数资源归还请求,以使得所述第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源;为所述第一访问设备重新分配并发数资源。
其中,所述程序9021还可以包括:
接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量;
当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,发送同意所述并发数资源转让请求的反馈消息;
当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,发送拒绝所述并发数资源转让请求的反馈消息。
其中,所述程序9021还可以包括:
当第一访问设备需要发送的数据请求的数量大于第一数量时,分别向所述第二访问设备、第三访问设备发送并发数资源转让请求;
接收所述第二访问设备发送的反馈消息以及第三访问设备发送的反馈消息;
当所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源,其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值;其中,所述第三访问设备被配置具有第四数量的并发数资源,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数。
图10为本发明实施例提供的并发数据处理系统第一实施例示意图。
一种并发数据处理系统,所述系统包括至少两个访问设备和至少一个存储设备,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量为第一数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;其中,
所述第一访问设备1001用于当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;以及,接收所述第二访问设备发送的反馈消息;当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量;
所述第二访问设备1002用于在接收到所述第一访问设备发送的并发数资源转让请求后,向所述第一访问设备发送反馈消息,所述反馈消息用于表明所述第二访问设备是否同意所述并发数资源转让请求;
所述存储设备1000用于接收所述至少两个访问设备发送的数据请求,并响应所述数据请求。
图11为本发明实施例提供的并发数据处理系统第二实施例示意图。如图11所示,并发数据处理系统包括存储设备1000,第一访问设备1001,第二访问设备1002,第三访问设备1003......第N访问设备100N。其各访问设备之间的交互可以参见实施例一至五的描述。
需要说明的是,由于对方法实施例进行详细的阐述,对装置实施例的描述较为简单,本领域技术人员可以理解的是,可以参照方法实施例构造本发明的装置实施例。本领域技术人员在不付出创造性劳动下获取的其他实现方式均属于本发明的保护范围。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个......”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本发明,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述仅是本发明的具体实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (15)
1.一种并发数据处理方法,其特征在于,应用于第一访问设备,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括所述第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;则所述方法包括:
当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;
接收所述第二访问设备发送的反馈消息;
当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与所述第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;
利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收所述第二访问设备发送的并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量;
向所述第二访问设备发送同意回收消息,以使得所述第二访问设备在接收到所述同意回收消息后,利用回收的并发数资源向所述存储设备发送数据请求;
为所述第一访问设备重新分配并发数资源。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
向所述第二访问设备发送并发数资源归还请求,以使得所述第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源;
为所述第一访问设备重新分配并发数资源。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量;
当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息;
当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送拒绝所述并发数资源转让请求的反馈消息。
5.根据权利要求4所述的方法,其特征在于,在向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息之后,所述方法还包括:
向所述第二访问设备发送并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第一访问设备同意转让的并发数资源的数量;
接收所述第二访问设备发送的同意回收消息;
根据所述同意回收消息为以所述第一访问设备重新分配并发数资源,利用回收的并发数资源向所述存储设备发送数据请求。
6.根据权利要求4所述的方法,其特征在于,在向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息之后,所述方法还包括:
接收所述第二访问设备发送的并发数资源归还请求;
重新分配所述第一访问设备具有的并发数资源,利用第二访问设备归还的并发数资源向所述存储设备发送数据请求。
7.根据权利要求1所述的方法,其特征在于,所述至少两个访问设备还包括第三访问设备,所述第三访问设备分别与所述第一访问设备、所述存储设备数据连接,所述第三访问设备配置有第四数量的并发数资源,其中,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数,则所述方法还包括:
当第一访问设备需要发送的数据请求的数量大于第一数量时,分别向所述第二访问设备、第三访问设备发送并发数资源转让请求;
接收所述第二访问设备发送的反馈消息以及第三访问设备发送的反馈消息;
当所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源,其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值。
8.一种并发数据处理装置,其特征在于,应用于第一访问设备,所述第一访问设备与存储设备数据连接,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括所述第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;则所述装置包括:
第一发送单元,用于当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;
第一接收单元,用于接收所述第二访问设备发送的反馈消息;
第一分配单元,用于当第一接收单元接收的所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与所述第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;
第二发送单元,用于利用所述第一分配单元重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第二接收单元,用于接收所述第二访问设备发送的并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第二访问设备同意转让的并发数资源的数量;
第三发送单元,用于向所述第二访问设备发送同意回收消息,以使得所述第二访问设备在接收到所述同意回收消息后,利用回收的并发数资源向所述存储设备发送数据请求;
第二分配单元,用于在第三发送单元发送所述同意回收消息后,为所述第一访问设备重新分配并发数资源。
10.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第四发送单元,用于向所述第二访问设备发送并发数资源归还请求,以使得所述第二访问设备在接收到所述并发数资源归还请求后重新分配所述第二访问设备具有的并发数资源;
第三分配单元,用于在所述第四发送单元向所述第二访问设备发送并发数资源归还请求后,为所述第一访问设备重新分配并发数资源。
11.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第三接收单元,用于接收所述第二访问设备发送的并发数资源转让请求,所述并发数资源转让请包含请求转让的并发数资源的数量;
第五发送单元,用于当判断向所述存储设备发送的数据请求的数量小于所述第一数量且向所述存储设备发送的数据请求的数量与第一数量之间的差值不小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送同意所述并发数资源转让请求的反馈消息;
第六发送单元,用于当判断向所述存储设备发送的数据请求的数量等于所述第一数量或者向所述存储设备发送的数据请求的数量与第一数量之间的差值小于所述第二访问设备请求转让的并发数资源的数量时,向所述第二访问设备发送拒绝所述并发数资源转让请求的反馈消息。
12.根据权利要求10所述的装置,其特征在于,所述装置还包括:
第七发送单元,用于向所述第二访问设备发送并发数资源回收请求,所述并发数资源回收请求包含回收的并发数资源的数量,所述回收的并发数资源的数量不大于所述第一访问设备同意转让的并发数资源的数量;
第四接收单元,用于接收所述第二访问设备发送的同意回收消息;
第四分配单元,用于根据所述同意回收消息为以所述第一访问设备重新分配并发数资源,利用回收的并发数资源向所述存储设备发送数据请求。
13.根据权利要求10所述的装置,其特征在于,所述装置还包括:
第五接收单元,用于接收所述第二访问设备发送的并发数资源归还请求;
第五分配单元,用于重新分配所述第一访问设备具有的并发数资源,利用第二访问设备归还的并发数资源向所述存储设备发送数据请求。
14.根据权利要求8所述的装置,其特征在于,所述至少两个访问设备还包括第三访问设备,所述第三访问设备分别与所述第一访问设备、所述存储设备数据连接,所述第三访问设备配置有第四数量的并发数资源,其中,所述第一数量、所述第二数量与第四数量的和值不大于所述最大响应并发数,则所述装置还包括:
第八发送单元,用于当第一访问设备需要发送的数据请求的数量大于第一数量时,分别向所述第二访问设备、第三访问设备发送并发数资源转让请求;
第六接收单元,用于接收所述第二访问设备发送的反馈消息以及第三访问设备发送的反馈消息;
第六分配单元,用于当所述第三接收单元接收的所述反馈消息表明所述第二访问设备和/或所述第三访问设备同意所述并发数资源转让请求时,确定第二访问设备和/或所述第三访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第五数量的并发数资源,其中,所述第五数量为所述第一数量与所述第二访问设备和/或第三访问设备同意转让的并发数资源数量的和值。
15.一种并发数据处理系统,其特征在于,所述系统包括至少两个访问设备和至少一个存储设备,所述存储设备与至少两个访问设备数据连接,所述至少两个访问设备包括第一访问设备和第二访问设备,所述第一访问设备与所述第二访问设备数据连接,所述第一访问设备配置有第一数量的并发数资源,所述第一数量为所述第一访问设备可向所述存储设备发送的数据请求的最大数量;所述第二访问设备配置有第二数量的并发数资源,所述第二数量为所述第二访问设备可向所述存储设备发送的数据请求的最大数量为;其中,所述第一数量与所述第二数量的和值不大于所述存储设备对应的最大响应并发数;其中,
所述第一访问设备用于当确定第一访问设备需要发送的数据请求的数量大于第一数量时,向第二访问设备发送并发数资源转让请求;以及,接收所述第二访问设备发送的反馈消息;当所述反馈消息表明所述第二访问设备同意所述并发数资源转让请求时,确定所述第二访问设备同意转让的并发数资源的数量,为所述第一访问设备重新分配第三数量的并发数资源,其中,所述第三数量为所述第一数量与所述第二访问设备同意转让的并发数资源数量的和值,所述第三数量与第二访问设备并发数资源剩余数量之间的和值不大于所述存储设备对应的最大响应并发数;利用重新分配的并发数资源向所述存储设备发起一个或多个数据请求;其中,向所述存储设备发送的数据请求的数量不大于所述第三数量;
所述第二访问设备用于在接收到所述第一访问设备发送的并发数资源转让请求后,向所述第一访问设备发送反馈消息,所述反馈消息用于表明所述第二访问设备是否同意所述并发数资源转让请求;
所述存储设备用于接收所述至少两个访问设备发送的数据请求,并响应所述数据请求。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310552578.3A CN103617024B (zh) | 2013-11-07 | 2013-11-07 | 一种并发数据处理方法、装置和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310552578.3A CN103617024B (zh) | 2013-11-07 | 2013-11-07 | 一种并发数据处理方法、装置和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103617024A true CN103617024A (zh) | 2014-03-05 |
CN103617024B CN103617024B (zh) | 2016-01-13 |
Family
ID=50167727
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310552578.3A Active CN103617024B (zh) | 2013-11-07 | 2013-11-07 | 一种并发数据处理方法、装置和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103617024B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106101270A (zh) * | 2016-08-05 | 2016-11-09 | 成都佳荣科技有限公司 | 数据分布式存储系统 |
CN108256589A (zh) * | 2018-02-14 | 2018-07-06 | 北京火花日志科技有限公司 | 一种工业设备数据应用读写方法及装置 |
CN108733310A (zh) * | 2017-04-17 | 2018-11-02 | 伊姆西Ip控股有限责任公司 | 用于管理存储系统的方法、设备和计算机可读存储介质 |
CN110832819A (zh) * | 2017-07-12 | 2020-02-21 | 高通股份有限公司 | 用于针对毫米波下行链路单载波波形的复用方案的技术和装置 |
CN111083063A (zh) * | 2019-11-22 | 2020-04-28 | 北京美鲜科技有限公司 | 一种动态调整下发压力的方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070016732A1 (en) * | 2005-05-12 | 2007-01-18 | Sony Computer Entertainment Inc. | Data transfer arbitration apparatus and data transfer arbitration method |
CN1302387C (zh) * | 2002-06-20 | 2007-02-28 | 诺基亚有限公司 | 执行电子装置中应用程序对话的方法和系统以及电子装置 |
US20100306416A1 (en) * | 2009-05-26 | 2010-12-02 | Watkins John E | System and method for discovering and protecting shared allocated resources in a shared virtualized i/o device |
-
2013
- 2013-11-07 CN CN201310552578.3A patent/CN103617024B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1302387C (zh) * | 2002-06-20 | 2007-02-28 | 诺基亚有限公司 | 执行电子装置中应用程序对话的方法和系统以及电子装置 |
US20070016732A1 (en) * | 2005-05-12 | 2007-01-18 | Sony Computer Entertainment Inc. | Data transfer arbitration apparatus and data transfer arbitration method |
US20100306416A1 (en) * | 2009-05-26 | 2010-12-02 | Watkins John E | System and method for discovering and protecting shared allocated resources in a shared virtualized i/o device |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106101270A (zh) * | 2016-08-05 | 2016-11-09 | 成都佳荣科技有限公司 | 数据分布式存储系统 |
CN108733310A (zh) * | 2017-04-17 | 2018-11-02 | 伊姆西Ip控股有限责任公司 | 用于管理存储系统的方法、设备和计算机可读存储介质 |
CN108733310B (zh) * | 2017-04-17 | 2021-05-28 | 伊姆西Ip控股有限责任公司 | 用于管理存储系统的方法、设备和计算机可读存储介质 |
US11099992B2 (en) | 2017-04-17 | 2021-08-24 | EMC IP Holding Company LLC | Method, device and computer readable storage media for managing storage system |
CN110832819A (zh) * | 2017-07-12 | 2020-02-21 | 高通股份有限公司 | 用于针对毫米波下行链路单载波波形的复用方案的技术和装置 |
CN110832819B (zh) * | 2017-07-12 | 2022-05-13 | 高通股份有限公司 | 用于针对毫米波下行链路单载波波形的复用方案的技术和装置 |
CN108256589A (zh) * | 2018-02-14 | 2018-07-06 | 北京火花日志科技有限公司 | 一种工业设备数据应用读写方法及装置 |
CN108256589B (zh) * | 2018-02-14 | 2022-01-28 | 北京火花日志科技有限公司 | 一种工业设备数据应用读写方法及装置 |
CN111083063A (zh) * | 2019-11-22 | 2020-04-28 | 北京美鲜科技有限公司 | 一种动态调整下发压力的方法及装置 |
CN111083063B (zh) * | 2019-11-22 | 2023-04-18 | 北京云杉信息技术有限公司 | 一种动态调整下发压力的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN103617024B (zh) | 2016-01-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11144415B2 (en) | Storage system and control software deployment method | |
US10394611B2 (en) | Scaling computing clusters in a distributed computing system | |
US10996887B2 (en) | Clustered storage system with dynamic space assignments across processing modules to counter unbalanced conditions | |
US8639898B2 (en) | Storage apparatus and data copy method | |
CN101158935B (zh) | 南桥系统和方法 | |
CN108023967B (zh) | 一种数据平衡方法、装置及分布式存储系统中的管理设备 | |
CN103617024B (zh) | 一种并发数据处理方法、装置和系统 | |
CN104102693A (zh) | 对象处理方法和装置 | |
CN103078965B (zh) | 虚拟机的ip地址管理方法 | |
CN111381936A (zh) | 一种分布式云系统-云簇架构下的服务容器资源的分配方法与系统 | |
CN108519917A (zh) | 一种资源池分配方法和装置 | |
US20120233313A1 (en) | Shared scaling server system | |
KR101719116B1 (ko) | 데이터 센터들에서의 효율적인 자원 이용 | |
CN102868727A (zh) | 一种实现逻辑卷高可用性的方法 | |
CN107948229B (zh) | 分布式存储的方法、装置及系统 | |
CN103561098A (zh) | 一种选择存储资源方法、装置及系统 | |
CN111225003B (zh) | 一种nfs节点配置方法和装置 | |
CN102725746A (zh) | 对分布式计算机系统中内存的管理方法和装置 | |
CN105607872A (zh) | 一种存储装置 | |
CN105446913A (zh) | 一种数据访问方法及装置 | |
CN112099728B (zh) | 一种执行写操作、读操作的方法及装置 | |
CN104238955B (zh) | 一种存储资源虚拟化按需分配的装置和方法 | |
CN103634344A (zh) | 一种单机运行多MySQL数据库实例的方法和设备 | |
CN104580328A (zh) | 虚拟机迁移方法、装置及系统 | |
CN111416860A (zh) | 基于区块链的事务处理方法、装置、电子设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |