CN107491265A - 分配网际协议ip磁盘的方法及装置 - Google Patents

分配网际协议ip磁盘的方法及装置 Download PDF

Info

Publication number
CN107491265A
CN107491265A CN201610411513.0A CN201610411513A CN107491265A CN 107491265 A CN107491265 A CN 107491265A CN 201610411513 A CN201610411513 A CN 201610411513A CN 107491265 A CN107491265 A CN 107491265A
Authority
CN
China
Prior art keywords
disks
judging
time
read
reading
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610411513.0A
Other languages
English (en)
Other versions
CN107491265B (zh
Inventor
陈伟
汪渭春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201610411513.0A priority Critical patent/CN107491265B/zh
Priority to PCT/CN2016/113682 priority patent/WO2017215249A1/zh
Publication of CN107491265A publication Critical patent/CN107491265A/zh
Application granted granted Critical
Publication of CN107491265B publication Critical patent/CN107491265B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种分配网际协议IP磁盘的方法及装置。其中，该方法包括：接收客户端发送的数据读写请求；计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；判断平均时间是否小于基准时间，其中，基准时间为预设磁盘执行数据读写操作所消耗的时间；在判断出平均时间小于基准时间的情况下，将数据读写请求分配给当前选中的IP磁盘。本发明解决了相关技术中IP磁盘由于处理能力有限，无法给管理服务器提供实时信息，因而无法制定出合理的负载均衡策略，最终导致管理服务器的负载均衡效果不佳的技术问题。

Description

分配网际协议IP磁盘的方法及装置
技术领域
本发明涉及负载均衡领域，具体而言，涉及一种分配网际协议IP磁盘的方法及装置。
背景技术
IP(Internet Protocol，互联网协议，又称网际协议)硬盘，即采用IP协议接口的硬盘，与传统硬盘需要借助小型计算机系统接口与主机进行通信以完成数据读写操作不同，它是一种自包含硬盘，可以在不与主机通信、不受主机控制的情况下，自发地以key-value的读写方式完成数据读写操作。
如图1所示，每个IP硬盘相当于一台服务器，多个IP硬盘可以以对称方式组成一个服务器集合。其中，该集合中每台服务器都具有等价的地位，都可以单独对外提供服务而无须其他服务器辅助。实施时，为了避免大量请求并发访问服务器集合中的同一台服务器，管理服务器会充当负载均衡器，通过特定负载均衡策略，将客户端发送的请求均匀地分配到服务器集合中的服务器上，进而由接到请求的服务器独立响应客户端。为了制定出较为合理的负载均衡策略，管理服务器需要获取IP磁盘的实时数据，包括CPU(CentralProcessing Unit，中央处理器)处理能力、磁盘容量、I/O(Input/Output，输入/输出)压力及处理能力、网络带宽等。然而，与传统磁盘可以实时上报信息不同，IP硬盘由于处理能力有限，无法给管理服务器提供实时数据，因而无法制定出合理的负载均衡策略，最终导致管理服务器的负载均衡失去了实际意义。
针对上述问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种分配网际协议IP磁盘的方法及装置，以至少解决相关技术中IP磁盘由于处理能力有限，无法给管理服务器提供实时信息，因而无法制定出合理的负载均衡策略，最终导致管理服务器的负载均衡效果不佳的技术问题。
根据本发明实施例的一个方面，提供了一种分配网际协议IP磁盘的方法，包括：接收客户端发送的数据读写请求；计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；判断上述平均时间是否小于基准时间，其中，上述基准时间为预设磁盘执行数据读写操作所消耗的时间；在判断出上述平均时间小于上述基准时间的情况下，将上述数据读写请求分配给当前选中的上述IP磁盘。
进一步地，在判断出上述平均时间不小于上述基准时间的情况下，上述方法还包括：判断上述IP磁盘的读写状态是否为空闲状态；在判断出上述IP磁盘的读写状态为空闲状态的情况下，将上述数据读写请求分配给当前选中的上述IP磁盘。
进一步地，在判断出上述IP磁盘的读写状态为空闲状态的情况下，且将上述数据读写请求分配给当前选中的上述IP磁盘之前，上述方法还包括：清除上述IP磁盘执行最近N次数据读写操作所消耗的上述平均时间的相关记录。
进一步地，在判断出上述IP磁盘的读写状态不为空闲状态的情况下，上述方法还包括：选中下一个IP磁盘；计算选中的上述下一个IP磁盘执行最近N次数据读写操作所消耗的平均时间；判断该平均时间是否小于上述基准时间；在判断出该平均时间小于上述基准时间的情况下，将上述数据读写请求分配给选中的上述下一个IP磁盘。
进一步地，在计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间之前，上述方法还包括：确定上述IP磁盘是第M次被分配数据读写请求；判断M是否大于N，其中，M为正整数，在判断出M大于N的情况下，执行计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间的步骤。
进一步地，在判断出M不大于N的情况下，上述方法还包括：直接将上述数据读写请求分配给当前选中的上述IP磁盘。
根据本发明实施例的另一方面，还提供了一种分配网际协议IP磁盘的装置，包括：接收单元，用于接收客户端发送的数据读写请求；第一计算单元，用于计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；第一判断单元，用于判断上述平均时间是否小于基准时间，其中，上述基准时间为预设磁盘执行数据读写操作所消耗的时间；第一分配单元，用于在判断出上述平均时间小于上述基准时间的情况下，将上述数据读写请求分配给当前选中的上述IP磁盘。
进一步地，上述装置还包括：第二判断单元，用于在判断出上述平均时间不小于上述基准时间的情况下，判断上述IP磁盘的读写状态是否为空闲状态；第二分配单元，用于在判断出上述IP磁盘的读写状态为空闲状态的情况下，将上述数据读写请求分配给当前选中的上述IP磁盘。
进一步地，上述装置还包括：清除单元，用于在判断出上述IP磁盘的读写状态为空闲状态的情况下，且将上述数据读写请求分配给当前选中的上述IP磁盘之前，清除上述IP磁盘执行最近N次数据读写操作所消耗的上述平均时间的相关记录。
进一步地，上述装置还包括：选择单元，在判断出上述IP磁盘的读写状态不为空闲状态的情况下，选中下一个IP磁盘；第二计算单元，用于计算选中的上述下一个IP磁盘执行最近N次数据读写操作所消耗的平均时间；第三判断单元，用于判断该平均时间是否小于上述基准时间；第三分配单元，用于在判断出该平均时间小于上述基准时间的情况下，将上述数据读写请求分配给选中的上述下一个IP磁盘。
进一步地，上述装置还包括：确定单元，用于在计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间之前，确定上述IP磁盘是第M次被分配数据读写请求；第四判断单元，用于判断M是否大于N，M为正整数，其中，上述第一计算单元还用于在判断出M大于N的情况下，执行计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间的步骤。
进一步地，上述装置还包括：第四分配单元，用于在判断出M不大于N的情况下，直接将上述数据读写请求分配给当前选中的上述IP磁盘。
在本发明实施例中，采用比较IP磁盘执行最近N次数据读写操作所消耗的平均时间与基准时间的大小的方式，通过接收客户端发送的数据读写请求；计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；判断平均时间是否小于基准时间，其中，基准时间为预设磁盘执行数据读写操作所消耗的时间；在判断出平均时间小于基准时间的情况下，将数据读写请求分配给当前选中的IP磁盘，达到了在IP磁盘无法给管理服务器提供实时信息的情况下，由管理服务器主动计算IP磁盘执行最近N次数据读写操作所消耗的平均时间，在确定IP磁盘的处理速度足够快时，才将数据读写请求分配给该IP磁盘的目的，从而实现了改善导致管理服务器的负载均衡效果的技术效果，进而解决了相关技术中IP磁盘由于处理能力有限，无法给管理服务器提供实时信息，因而无法制定出合理的负载均衡策略，最终导致管理服务器的负载均衡效果不佳的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据相关技术的一种用于IP磁盘的负载均衡系统的示意图；
图2是根据本发明实施例的一种可选的分配IP磁盘的方法的流程图；
图3是根据本发明实施例的一种可选的轮转分配IP磁盘的示意图；
图4是根据本发明实施例的一种可选的分配IP磁盘的装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
以下对本申请涉及到的相关术语简单解释如下：
IP硬盘，顾名思义，它是指采用IP协议(网络之间的互连协议)接口代替传统的SCSI(Small Computer System Interface，小型计算机系统接口)标准协议接口的硬盘，与传统硬盘需要借助小型计算机系统接口与主机进行通信以完成数据读写操作不同，它是一种自包含硬盘，可以在不与主机通信、不受主机控制的情况下，采用更简单通用的IP协议以及以太网技术，与主机之间传递数据，从而自发地以key-value的读写方式完成数据读写操作。与传统SAS(Serial Attached SCSI，串行连接SCSI接口)/SATA(Serial AdvancedTechnology Attachment，串行高级技术附件)接口容易产生的性能瓶颈相比，IP硬盘由于采用IP接口，因而与主机之间的互联更加简单，几乎不受距离限制，因此不会产生性能瓶颈，并且其存储系统的扩展性也大大增强了。同时，使用IP硬盘，用户无需再维护单独的存储连接网络，只需要维护一张IP网络，这无疑降低了用户的成本投入。
管理服务器,又称为元数据服务器，主要用于组织和管理空间信息。
对象服务器，又称为对象存储服务器，主要用于管理IP磁盘的上下线任务及部分计算任务。
负载均衡器，是由多台服务器以对称的方式组成一个服务器集合，每台服务器都具有等价的地位，都可以单独对外提供服务而无须其他服务器的辅助。负载均衡器通过某种负载分担技术，将外部发送来的请求均匀分配到对称结构中的某一台服务器上，而接收到请求的服务器能够独立相应客户端的请求。均衡负载器能够平均分配请求到服务器集合中，因而能够提供快速获取重要数据的服务，解决了请求大量并发访问同一服务器的问题。
实施例1
根据本发明实施例，提供了一种分配网际协议IP磁盘的方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
图2是根据本发明实施例的一种可选的分配网际协议IP磁盘的方法的流程图。该方法可以但不限于应用于管理服务器。如图2所示，该方法包括如下步骤：
步骤S202，接收客户端发送的数据读写请求；
步骤S204，计算当前选中的(包括但不限于使用磁盘挑选指针来选择)IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；
步骤S206，判断平均时间是否小于基准时间，其中，基准时间为预设磁盘执行数据读写操作所消耗的时间；
步骤S208，在判断出平均时间小于基准时间的情况下，将数据读写请求分配给当前选中的(包括但不限于磁盘挑选指针当前所指的)IP磁盘。
为了解决IP硬盘无法提供实时信息的问题，本发明实施例提出了一种获取IP硬盘的压力的方法。具体地，实施步骤S202之前，可以预先设定1次数据读写操作中I/O数据的固定大小，多次反复测试预设磁盘每次执行上述固定大小的I/O数据的读写操作所消耗的时间，基于这些时间计算该预设磁盘执行1次固定大小的I/O数据的操作所消耗的平均时间，并将计算结果作为基准时间。例如，预先设定1次数据读写操作中I/O数据大小为1MB，通过大量测试，得出处理1MB大小的I/O数据时IP硬盘所消耗的平均时间，并将此时间作为基准时间。另外，针对每个IP硬盘，管理服务器每次都会记录IP硬盘执行I/O数据处理时的起始时间和结束时间，并计算执行每次I/O数据处理所消耗的时间。为了避免偶然性对估算IP磁盘压力情况造成影响，管理服务器会进一步计算IP磁盘执行最近N次(如5次，该次数可以根据实际需要调整)数据读写操作所消耗的平均时间。
例如，当客户端发出数据读写请求，管理服务器会为该数据读写请求分配对应的IP磁盘，具体地，在接收到客户端发送的数据读写请求后，管理服务器首先会查看磁盘挑选指针当前所指的IP磁盘，计算其执行最近N次数据读写操作所消耗的平均时间，比如，对该IP磁盘而言，如果此次是第6次分配请求，则可以计算最近5次所消耗的平均时间，并将该平均时间与基准时间比较，如果平均时间小于基准时间，则表明该IP磁盘当前的处理能力较强，因而可以将数据读写请求分配给这个IP磁盘处理。
在本发明的一个实施例中，为了便于分配IP磁盘，需要按照磁盘容量由大到小的顺序，将负载均衡系统中的所有IP磁盘进行排序，得到一个关于IP磁盘的循环排序链表，如图3所示。基于该循环排序链表，可以实现轮转分配IP磁盘的目的。例如，起始时，可以使磁盘挑选指针指向链表头，后续每挑选一次IP硬盘，指针都会按照IP磁盘的循环排序链表依次顺序后移，直到又回到链表头开启下一轮分配为止，如此循环往复，实现轮转分配IP磁盘的目的。
通过本发明实施例，采用比较IP磁盘执行最近N次数据读写操作所消耗的平均时间与基准时间的大小的方式，达到了在IP磁盘无法给管理服务器提供实时信息的情况下，由管理服务器主动计算IP磁盘执行最近N次数据读写操作所消耗的平均时间以确定是否将数据读写请求分配给该IP磁盘的目的，从而实现了改善导致管理服务器的负载均衡效果的技术效果，进而解决了相关技术中IP磁盘由于处理能力有限，无法给管理服务器提供实时信息，因而无法制定出合理的负载均衡策略，最终导致管理服务器的负载均衡效果不佳的技术问题。
可选地，在判断出平均时间不小于基准时间的情况下，上述方法还包括：
S2，判断IP磁盘的读写状态是否为空闲状态。
可选地，通过下述过程实现S2，判断数据读写请求分配次数是否为0，其中，当IP磁盘的数据读写请求分配次数为0时，IP磁盘为空闲状态，当IP磁盘的数据读写请求分配次数不为0时，IP磁盘的读写状态不为空闲状态，即为忙碌状态。
S4，在判断出IP磁盘的读写状态为空闲状态(如，数据读写请求分配次数为0)的情况下，将数据读写请求分配给当前选中(包括但不限于磁盘挑选指针当前所指的)的IP磁盘。
也即，如果平均时间不小于基准时间，则表明该IP磁盘当前的处理能力不是很强，此时该IP磁盘可能有能力响应数据读写请求，也可能没能力响应数据读写请求。为了确认其是否有能力响应数据读写请求，以制定更加合理的负载均衡策略，此时还需要进一步判断磁盘挑选指针当前所指的IP磁盘的数据读写请求分配次数，如判断该次数是否为0，若为0，则表明该IP磁盘当前空闲，可以响应数据读写请求，此时可以将数据读写请求分配给该IP磁盘。
需要说明的是，管理服务器为了监控各IP磁盘的状态，每次分配IP磁盘都会将该IP磁盘对应的分配计数加1，而IP磁盘每完成一次数据读写操作都会使管理服务器将该IP磁盘对应的分配计数减1，因而当某IP磁盘对应的分配计数为0时，该IP磁盘的数据读写请求分配次数就会为0；否则，IP磁盘的数据读写请求分配次数就会不为0。
在本发明的其它实施例中，管理服务器也可以用通过读写接口的数据流量等其它方式确定IP磁盘的当前状态是否是空闲或者可用。
可选地，在判断出IP磁盘的数据读写请求分配次数为0的情况下，且将数据读写请求分配给当前选中的(包括但不限于磁盘挑选指针当前所指的)IP磁盘之前，上述方法还包括：
S6，清除IP磁盘执行最近N次数据读写操作所消耗的平均时间的相关记录。
基于上述实施方式可知，对于数据读写请求分配次数为0的IP磁盘而言，其数据读写处理能力实际上可以满足当前的数据读写请求，在这种情况下，分配IP磁盘的依据实际上是IP磁盘的数据读写请求分配次数，而不是其执行最近N次数据读写操作所消耗的平均时间。也即，此时依据前者分配IP磁盘可以获得更好的负载均衡效果，因而将数据读写请求分配给磁盘挑选指针当前所指的IP磁盘之前，清除IP磁盘执行最近N次(如5次)数据读写操作所消耗的平均时间，可以防止管理服务器在后续负载均衡过程中再此使用该平均时间，从而影响负载均衡效果。
可选地，在判断出IP磁盘的读写状态不为空闲状态(如，数据读写请求分配次数不为0)的情况下，上述方法还包括：
S8，选中(包括但不限于使磁盘挑选指针指向下一个IP磁盘来选择)下一个IP磁盘；
S10，计算选中的(包括但不限于磁盘挑选指针指向的)下一个IP磁盘执行最近N次数据读写操作所消耗的平均时间；
S12，判断该平均时间是否小于基准时间；
S14，在判断出该平均时间小于基准时间的情况下，将数据读写请求分配给选中的(包括但不限于磁盘挑选指针指向的)下一个IP磁盘。
由于IP磁盘的数据读写请求分配次数不为0时，表明其处于忙碌的工作状态，其当前的数据处理能力难以响应客户端发送的数据读写请求，因而不能将该数据读写请求分配给磁盘挑选指针当前所指的IP磁盘。在这种情况下，需要使磁盘挑选指针指向下一IP磁盘，并执行S10、S12、S14。其中，S10、S12、S14分别同步骤S204、步骤S206、步骤S208，在此不再赘述。
上述步骤中的下一个IP磁盘，可以是数据库中存储的IP磁盘顺序表中的下一个IP磁盘，其排序可以是预先排列的，也可以是在S8步骤中按照预设的规则或者算法计算选择的。
可选地，在计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间之前，上述方法还包括：
S16，确定IP磁盘是第M次被分配数据读写请求；
S18，判断M是否大于N，其中，M为正整数，在判断出M大于N的情况下，执行计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间的步骤。
可选地，在判断出M不大于N的情况下，上述方法还包括：
S20，直接将所述数据读写请求分配给当前选中的所述IP磁盘。
为了提高工作效率，防止计算平均时间时出错，在计算平均时间之前，可以先确定IP磁盘当前是第几次被分配数据读写请求，例如，若负载均衡策略要求计算最近5次的平均时间，而IP磁盘当前是第,1-4次中的任意一次被分配数据读写请求，则可以直接将数据读写请求分配给该IP磁盘，否则，需要上述实施例中的磁盘挑选策略分配对应的磁盘，在此不再赘述。
实施例2
根据本发明实施例，提供了一种分配网际协议IP磁盘的装置的实施例。
图4是根据本发明实施例的一种可选的分配网际协议IP磁盘的装置的示意图，如图4所示，该装置包括：接收单元402，用于接收客户端发送的数据读写请求；第一计算单元404，用于计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；第一判断单元406，用于判断平均时间是否小于基准时间，其中，基准时间为预设磁盘执行数据读写操作所消耗的时间；第一分配单元408，用于在判断出平均时间小于基准时间的情况下，将数据读写请求分配给当前选中的IP磁盘。
为了解决IP硬盘无法提供实时信息的问题，本发明实施例提出了一种获取IP硬盘的压力的方法。具体地，实施步骤S202之前，可以预先设定1次数据读写操作中I/O数据的固定大小，多次反复测试预设磁盘每次执行上述固定大小的I/O数据的读写操作所消耗的时间，基于这些时间计算该预设磁盘执行1次固定大小的I/O数据的操作所消耗的平均时间，并将计算结果作为基准时间。例如，预先设定1次数据读写操作中I/O数据大小为1MB，通过大量测试，得出处理1MB大小的I/O数据时IP硬盘所消耗的平均时间，并将此时间作为基准时间。另外，针对每个IP硬盘，管理服务器每次都会记录IP硬盘执行I/O数据处理时的起始时间和结束时间，并计算执行每次I/O数据处理所消耗的时间。为了避免偶然性对估算IP磁盘压力情况造成影响，管理服务器会进一步计算IP磁盘执行最近N次(如5次，该次数可以根据实际需要调整)数据读写操作所消耗的平均时间。
例如，当客户端发出数据读写请求，管理服务器会为该数据读写请求分配对应的IP磁盘，具体地，在接收到客户端发送的数据读写请求后，管理服务器首先会查看磁盘挑选指针当前所指的IP磁盘，计算其执行最近N次数据读写操作所消耗的平均时间，比如，对该IP磁盘而言，如果此次是第6次分配请求，则可以计算最近5次所消耗的平均时间，并将该平均时间与基准时间比较，如果平均时间小于基准时间，则表明该IP磁盘当前的处理能力较强，因而可以将数据读写请求分配给这个IP磁盘处理。
通过本发明实施例，采用比较IP磁盘执行最近N次数据读写操作所消耗的平均时间与基准时间的大小的方式，达到了在IP磁盘无法给管理服务器提供实时信息的情况下，由管理服务器主动计算IP磁盘执行最近N次数据读写操作所消耗的平均时间以确定是否将数据读写请求分配给该IP磁盘的目的，从而实现了改善导致管理服务器的负载均衡效果的技术效果，进而解决了相关技术中IP磁盘由于处理能力有限，无法给管理服务器提供实时信息，因而无法制定出合理的负载均衡策略，最终导致管理服务器的负载均衡效果不佳的技术问题。
可选地，上述装置还包括：第二判断单元，用于在判断出平均时间不小于基准时间的情况下，判断IP磁盘的读写状态是否为空闲状态。
可选地，第二判断单元，用于在判断出平均时间不小于基准时间的情况下，判断数据读写请求分配次数是否为0，其中，当IP磁盘的数据读写请求分配次数为0时，IP磁盘为空闲状态，当IP磁盘的数据读写请求分配次数不为0时，IP磁盘为忙碌状态；第二分配单元，用于在判断出IP磁盘的读写状态是空闲状态(如，数据读写请求分配次数为0)的情况下，将数据读写请求分配给当前选中的IP磁盘。
可选地，上述装置还包括：清除单元，用于在判断出IP磁盘的读写状态是空闲状态(如，数据读写请求分配次数为0)的情况下，且将数据读写请求分配给当前选中的IP磁盘之前，清除IP磁盘执行最近N次数据读写操作所消耗的平均时间的相关记录。
可选地，上述装置还包括：选择单元，在判断出IP磁盘的读写状态不是空闲状态(如，数据读写请求分配次数不为0)的情况下，选中下一个IP磁盘；第二计算单元，用于计算选中的下一个IP磁盘执行最近N次数据读写操作所消耗的平均时间；第三判断单元，用于判断该平均时间是否小于基准时间；第三分配单元，用于在判断出该平均时间小于基准时间的情况下，将数据读写请求分配给选中的下一个IP磁盘。
可选地，上述装置还包括：确定单元，用于在计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间之前，确定IP磁盘是第M次被分配数据读写请求；第四判断单元，用于判断M是否大于N，M为正整数，其中，第一计算单元还用于在判断出M大于N的情况下，执行计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间的步骤。
可选地，上述装置还包括：第四分配单元，用于在判断出M不大于N的情况下，直接将数据读写请求分配给当前选中的IP磁盘。
需要说明的是，装置部分各实施方式中的单元/模块所实现的功能分别与方法部分对应实施方式中的对应步骤相同或类似；装置部分各实施方式达到的技术效果也分别与方法部分各对应实施方式达到的技术效果相同或类似，在此不再赘述。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (12)

1.一种分配网际协议IP磁盘的方法，其特征在于，包括：
接收客户端发送的数据读写请求；
计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；
判断所述平均时间是否小于基准时间，其中，所述基准时间为预设磁盘执行数据读写操作所消耗的时间；
在判断出所述平均时间小于所述基准时间的情况下，将所述数据读写请求分配给当前选中的所述IP磁盘。
2.根据权利要求1所述的方法，其特征在于，在判断出所述平均时间不小于所述基准时间的情况下，所述方法还包括：
判断所述IP磁盘的读写状态是否为空闲状态；以及
在判断出所述IP磁盘的读写状态为空闲状态的情况下，将所述数据读写请求分配给当前选中的所述IP磁盘。
3.根据权利要求2所述的方法，其特征在于，在判断出所述IP磁盘的读写状态为空闲状态的情况下，且将所述数据读写请求分配给当前选中的所述IP磁盘之前，所述方法还包括：
清除所述IP磁盘执行最近N次数据读写操作所消耗的所述平均时间的相关记录。
4.根据权利要求2所述的方法，其特征在于，在判断出所述IP磁盘的读写状态不为空闲状态的情况下，所述方法还包括：
选中下一个IP磁盘；
计算选中的所述下一个IP磁盘执行最近N次数据读写操作所消耗的平均时间，并判断该平均时间是否小于所述基准时间；
在判断出该平均时间小于所述基准时间的情况下，将所述数据读写请求分配给选中的所述下一个IP磁盘。
5.根据权利要求1所述的方法，其特征在于，在计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间之前，所述方法还包括：
确定所述IP磁盘是第M次被分配数据读写请求；
判断M是否大于N，
其中，M为正整数，在判断出M大于N的情况下，执行计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间的步骤。
6.根据权利要求5所述的方法，其特征在于，在判断出M不大于N的情况下，所述方法还包括：
直接将所述数据读写请求分配给当前选中的所述IP磁盘。
7.一种分配网际协议IP磁盘的装置，其特征在于，包括：
接收单元，用于接收客户端发送的数据读写请求；
第一计算单元，用于计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间，其中，N为正整数；
第一判断单元，用于判断所述平均时间是否小于基准时间，其中，所述基准时间为预设磁盘执行数据读写操作所消耗的时间；
第一分配单元，用于在判断出所述平均时间小于所述基准时间的情况下，将所述数据读写请求分配给当前选中的所述IP磁盘。
8.根据权利要求7所述的装置，其特征在于，所述装置还包括：
第二判断单元，用于在判断出所述平均时间不小于所述基准时间的情况下，判断所述IP磁盘的读写状态是否为空闲状态；
第二分配单元，用于在判断出所述IP磁盘的读写状态为空闲状态的情况下，将所述数据读写请求分配给当前选中的所述IP磁盘。
9.根据权利要求8所述的装置，其特征在于，所述装置还包括：
清除单元，用于在判断出所述IP磁盘的读写状态为空闲状态的情况下，且将所述数据读写请求分配给当前选中的所述IP磁盘之前，清除所述IP磁盘执行最近N次数据读写操作所消耗的所述平均时间的相关记录。
10.根据权利要求8所述的装置，其特征在于，所述装置还包括：
选择单元，在判断出所述IP磁盘的读写状态不为空闲状态的情况下，选中下一个IP磁盘；
第二计算单元，用于计算选中的所述下一个IP磁盘执行最近N次数据读写操作所消耗的平均时间；
第三判断单元，用于判断该平均时间是否小于所述基准时间；
第三分配单元，用于在判断出该平均时间小于所述基准时间的情况下，将所述数据读写请求分配给选中的所述下一个IP磁盘。
11.根据权利要求7所述的装置，其特征在于，所述装置还包括：
确定单元，用于在计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间之前，确定所述IP磁盘是第M次被分配数据读写请求；
第四判断单元，用于判断M是否大于N，M为正整数，
其中，所述第一计算单元还用于在判断出M大于N的情况下，执行计算当前选中的IP磁盘执行最近N次数据读写操作所消耗的平均时间的步骤。
12.根据权利要求11所述的装置，其特征在于，所述装置还包括：
第四分配单元，用于在判断出M不大于N的情况下，直接将所述数据读写请求分配给当前选中的所述IP磁盘。
CN201610411513.0A 2016-06-12 2016-06-12 分配网际协议ip磁盘的方法及装置 Active CN107491265B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610411513.0A CN107491265B (zh) 2016-06-12 2016-06-12 分配网际协议ip磁盘的方法及装置
PCT/CN2016/113682 WO2017215249A1 (zh) 2016-06-12 2016-12-30 分配网际协议ip磁盘的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610411513.0A CN107491265B (zh) 2016-06-12 2016-06-12 分配网际协议ip磁盘的方法及装置

Publications (2)

Publication Number Publication Date
CN107491265A true CN107491265A (zh) 2017-12-19
CN107491265B CN107491265B (zh) 2021-05-25

Family

ID=60643276

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610411513.0A Active CN107491265B (zh) 2016-06-12 2016-06-12 分配网际协议ip磁盘的方法及装置

Country Status (2)

Country Link
CN (1) CN107491265B (zh)
WO (1) WO2017215249A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111061431B (zh) * 2019-11-28 2023-06-23 曙光信息产业股份有限公司 一种分布式存储方法、服务器及客户端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073546A (zh) * 2010-12-13 2011-05-25 北京航空航天大学 一种云计算环境中分布式计算模式下的任务动态调度方法
CN103370685A (zh) * 2010-09-15 2013-10-23 净睿存储股份有限公司 存储环境中的i/o写入的调度
CN103414761A (zh) * 2013-07-23 2013-11-27 北京工业大学 一种基于Hadoop架构的移动终端云资源调度方法
CN104049916A (zh) * 2014-06-24 2014-09-17 东南大学 一种基于节点角色切换机制的自组织分布式存储系统及其方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103995745B (zh) * 2014-05-22 2017-09-05 华为技术有限公司 一种ip硬盘任务执行方法以及ip硬盘
CN104023081B (zh) * 2014-06-19 2018-03-13 华为技术有限公司 网协ip硬盘的数据处理方法及ip硬盘
CN105471955B (zh) * 2014-09-11 2019-01-18 北京金山云网络技术有限公司 分布式文件系统的写方法、客户端设备及分布式文件系统
CN104461378B (zh) * 2014-10-30 2017-09-26 华为技术有限公司 将数据对象写入ip硬盘的方法、装置及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103370685A (zh) * 2010-09-15 2013-10-23 净睿存储股份有限公司 存储环境中的i/o写入的调度
CN102073546A (zh) * 2010-12-13 2011-05-25 北京航空航天大学 一种云计算环境中分布式计算模式下的任务动态调度方法
CN103414761A (zh) * 2013-07-23 2013-11-27 北京工业大学 一种基于Hadoop架构的移动终端云资源调度方法
CN104049916A (zh) * 2014-06-24 2014-09-17 东南大学 一种基于节点角色切换机制的自组织分布式存储系统及其方法

Also Published As

Publication number Publication date
CN107491265B (zh) 2021-05-25
WO2017215249A1 (zh) 2017-12-21

Similar Documents

Publication Publication Date Title
Tang et al. An intermediate data placement algorithm for load balancing in spark computing environment
CN105281981B (zh) 网络服务的数据流量监控方法和装置
US20190207869A1 (en) Intelligent Placement within a Data Center
CN106201722A (zh) 服务器的负载调整方法及系统
CN107196865A (zh) 一种负载感知的自适应阈值过载迁移方法
CN107800756A (zh) 一种负载均衡方法及负载均衡器
CN108595254B (zh) 一种查询调度方法
CN108111586A (zh) 一种高并发支持的web集群系统及方法
CN106919449A (zh) 一种计算任务的调度控制方法及电子设备
CN101963969B (zh) Oracle RAC系统中实现负载均衡的方法和数据库服务器
CN107231421A (zh) 一种虚拟机计算能力动态调整方法、装置以及系统
CN103927231A (zh) 一种面向数据处理的能耗优化数据集分配方法
CN104023042B (zh) 云平台资源调度方法
CN107239337A (zh) 虚拟化资源的分配和调度方法及系统
CN107729514A (zh) 一种基于hadoop的副本放置节点确定方法及装置
CN106874109A (zh) 一种分布式作业分发处理方法及系统
CN111522668A (zh) 用于资源配置的方法和装置及计算机可读存储介质
CN105872082B (zh) 基于容器集群负载均衡算法的细粒度资源响应系统
CN107665143A (zh) 资源管理方法、装置及系统
CN113568759B (zh) 一种基于云计算的大数据处理方法及其系统
CN106055271A (zh) 一种基于云计算的重复数据去重选择方法及装置
CN107172193A (zh) 一种基于集群的负载均衡方法及其装置
CN207764844U (zh) 一种数据处理系统
CN106650501A (zh) 数据库访问控制方法和装置
CN106961490A (zh) 一种资源监控方法及系统、一种本地服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant