CN113568753A - 访问路径确定方法、装置、电子设备及可读存储介质 - Google Patents

访问路径确定方法、装置、电子设备及可读存储介质 Download PDF

Info

Publication number
CN113568753A
CN113568753A CN202110872976.8A CN202110872976A CN113568753A CN 113568753 A CN113568753 A CN 113568753A CN 202110872976 A CN202110872976 A CN 202110872976A CN 113568753 A CN113568753 A CN 113568753A
Authority
CN
China
Prior art keywords
access
distributed storage
path
client
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110872976.8A
Other languages
English (en)
Other versions
CN113568753B (zh
Inventor
陈仲涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Topsec Technology Co Ltd
Beijing Topsec Network Security Technology Co Ltd
Beijing Topsec Software Co Ltd
Original Assignee
Beijing Topsec Technology Co Ltd
Beijing Topsec Network Security Technology Co Ltd
Beijing Topsec Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Topsec Technology Co Ltd, Beijing Topsec Network Security Technology Co Ltd, Beijing Topsec Software Co Ltd filed Critical Beijing Topsec Technology Co Ltd
Priority to CN202110872976.8A priority Critical patent/CN113568753B/zh
Publication of CN113568753A publication Critical patent/CN113568753A/zh
Application granted granted Critical
Publication of CN113568753B publication Critical patent/CN113568753B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/62Establishing a time schedule for servicing the requests

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及一种访问路径确定方法、装置、电子设备及可读存储介质,该方法包括:每隔预设时间,从所有访问路径中确定出最优访问路径;将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。通过该方法,可以提高分布式存储系统的资源利用率,提高用户体验。

Description

访问路径确定方法、装置、电子设备及可读存储介质
技术领域
本申请属于通信领域,具体涉及一种访问路径确定方法、装置、电子设备及可读存储介质。
背景技术
为了提高分布式存储系统的可用性,会在每个分布式存储设备上启动多个访问服务,例如iSCSI服务端(Internet Small Computer System Interface,因特网小型计算机系统接口)供客户端选择使用。
在正常情况下,客户端会默认选择一条最优访问路径所在的访问服务进行使用,且只有在该路径异常的情况下才会切换到其他路径。
在实际场景中,不同场景下的网络延迟和服务端性能有所差异。由于访问服务的资源是动态变化的,客户端的位置也可能会变化(例如虚拟机迁移),这些因素都会导致不同路径的访问性能有所差别并且随时变化。因此,客户端既往所选择的最优访问路径并不一直是最优访问路径,在此前提下,若该路径一直处于正常情况,将会导致路径资源的使用率并未达到最大化,造成资源浪费,也影响用户的体验。
发明内容
有鉴于此,本申请的目的在于提供一种访问路径确定方法、装置、电子设备及可读存储介质,可以提高分布式存储系统的资源利用率,提高用户体验。
本申请的实施例是这样实现的:
第一方面,本申请实施例提供一种访问路径确定方法,应用于与分布式存储系统通信连接的策略主机,客户端可通过不同的访问路径访问所述分布式存储系统;所述方法包括:每隔预设时间,从所有访问路径中确定出最优访问路径;将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
在本申请实施例中,每隔预设时间便会检测当前的最优访问路径,然后将客户端当前用于访问分布式存储系统的访问路径,切换到当前的最优访问路径,因此,即使路径资源发生变化导致原有的访问路径不再是最优访问路径,按照本申请实施例所提供的方法,可以及时将原有的访问路径切换到当前的最优访问路径,进而可以提高分布式访问系统的资源利用率,以及提高用户体验。
结合第一方面实施例,在一种可能的实施方式中,所述分布式存储系统包括多个分布式存储设备,在所述分布式存储设备上部署有访问服务,所述从所有访问路径中确定出最优访问路径,包括:获取所述客户端与各个存在连接关系的访问服务之间的访问时延;根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务;计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率;将所述负载均衡率最小时所对应的候选访问服务所在的分布式存储设备与所述客户端之间的访问路径确定为所述最优访问路径。
结合第一方面实施例,在一种可能的实施方式中,在所述分布式存储设备上部署有监控服务,用于监控所述分布式存储设备上的所述访问服务与所述客户端之间的时延,所述获取所述客户端与各个存在连接关系的访问服务之间的访问时延,包括:通过遍历每个所述分布式存储设备上的监控服务,获取所述客户端与各个存在连接关系的访问服务之间的访问时延。
结合第一方面实施例,在一种可能的实施方式中,所述根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务,包括:从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;分别计算所述初始访问时延与其他访问时延之间的时延差;将所述时延差按照从大到小的顺序进行排序,并将排序靠前预设比例的时延差所对应的访问服务确定为所述候选访问服务。
结合第一方面实施例,在一种可能的实施方式中,所述根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务,包括:从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;分别计算所述初始访问时延与其他访问时延之间的时延差;将所述时延差按照从小到大的顺序进行排序,并将排序靠后预设比例的时延差所对应的访问服务确定为所述候选访问服务。
结合第一方面实施例,在一种可能的实施方式中,所述计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率,包括:获取所述分布式存储设备的数量A、所述分布式存储设备的内存使用率M、所述分布式存储设备的CPU使用率U、所述分布式存储设备的网络带宽使用率N;根据每个所述分布式存储设备的内存使用率M,计算所述分布式存储设备的平均内存使用率Mavg;根据每个所述分布式存储设备的CPU使用率U,计算所述分布式存储设备的平均CPU使用率Uavg;根据每个所述分布式存储设备的网络带宽使用率N,计算所述分布式存储设备的平均网络带宽使用率Navg;根据公式
Figure BDA0003189824660000031
计算每个所述候选访问服务作为所述路径端点时,所述分布式存储系统的负载均衡率;其中,Ei为所述候选访问服务i作为所述路径端点时,所述分布式存储系统的负载均衡率,Ui为所述候选访问服务i所在的分布式存储设备的CPU使用率,Mi为所述候选访问服务i所在的分布式存储设备的内存使用率,Ni为所述候选访问服务i所在的分布式存储设备的网络带宽使用率。
结合第一方面实施例,在一种可能的实施方式中,所述访问服务为iSCSI服务端。
第二方面,本申请实施例提供一种访问路径确定装置,应用于与分布式存储系统通信连接的策略主机,客户端可通过不同的访问路径访问所述分布式存储系统;所述装置包括:确定模块以及切换模块。
确定模块,用于每隔预设时间,从所有访问路径中确定出最优访问路径;
切换模块,用于将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
结合第二方面实施例,在一种可能的实施方式中,所述分布式存储系统包括多个分布式存储设备,在所述分布式存储设备上部署有访问服务,所述确定模块,用于:获取所述客户端与各个存在连接关系的访问服务之间的访问时延;根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务;计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率;将所述负载均衡率最小时所对应的候选访问服务所在的分布式存储设备与所述客户端之间的访问路径确定为所述最优访问路径。
结合第二方面实施例,在一种可能的实施方式中,在所述分布式存储设备上部署有监控服务,用于监控所述分布式存储设备上的所述访问服务与所述客户端之间的时延,所述确定模块,用于通过遍历每个所述分布式存储设备上的监控服务,获取所述客户端与各个存在连接关系的访问服务之间的访问时延。
结合第二方面实施例,在一种可能的实施方式中,所述确定模块,用于从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;分别计算所述初始访问时延与其他访问时延之间的时延差;将所述时延差按照从大到小的顺序进行排序,并将排序靠前预设比例的时延差所对应的访问服务确定为所述候选访问服务。
结合第二方面实施例,在一种可能的实施方式中,所述确定模块,用于从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;分别计算所述初始访问时延与其他访问时延之间的时延差;将所述时延差按照从小到大的顺序进行排序,并将排序靠后预设比例的时延差所对应的访问服务确定为所述候选访问服务。
结合第二方面实施例,在一种可能的实施方式中,所述确定模块,用于获取所述分布式存储设备的数量A、所述分布式存储设备的内存使用率M、所述分布式存储设备的CPU使用率U、所述分布式存储设备的网络带宽使用率N;根据每个所述分布式存储设备的内存使用率M,计算所述分布式存储设备的平均内存使用率Mavg;根据每个所述分布式存储设备的CPU使用率U,计算所述分布式存储设备的平均CPU使用率Uavg;根据每个所述分布式存储设备的网络带宽使用率N,计算所述分布式存储设备的平均网络带宽使用率Navg;根据公式
Figure BDA0003189824660000051
计算每个所述候选访问服务作为所述路径端点时,所述分布式存储系统的负载均衡率;其中,Ei为所述候选访问服务i作为所述路径端点时,所述分布式存储系统的负载均衡率,Ui为所述候选访问服务i所在的分布式存储设备的CPU使用率,Mi为所述候选访问服务i所在的分布式存储设备的内存使用率,Ni为所述候选访问服务i所在的分布式存储设备的网络带宽使用率。
结合第二方面实施例,在一种可能的实施方式中,所述访问服务为iSCSI服务端。
第三方面,本申请实施例还提供一种电子设备,包括:存储器和处理器,所述存储器和所述处理器连接;所述存储器用于存储程序;所述处理器调用存储于所述存储器中的程序,以执行上述第一方面实施例和/或结合第一方面实施例的任一种可能的实施方式提供的方法。
第四方面,本申请实施例还提供一种非易失性计算机可读取存储介质(以下简称可读存储介质),其上存储有计算机程序,所述计算机程序被计算机运行时执行上述第一方面实施例和/或结合第一方面实施例的任一种可能的实施方式提供的方法。
本申请的其他特征和优点将在随后的说明书阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请实施例而了解。本申请的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。通过附图所示,本申请的上述及其它目的、特征和优势将更加清晰。在全部附图中相同的附图标记指示相同的部分。并未刻意按实际尺寸等比例缩放绘制附图,重点在于示出本申请的主旨。
图1示出本申请实施例提供的一种访问路径确定方法的流程图。
图2示出本申请实施例提供的一种分布式存储系统的系统构架图。
图3示出本申请实施例提供的一种访问路径确定装置的结构框图。
图4示出本申请实施例提供的一种电子设备的结构示意图。
图标:100-电子设备;110-处理器;120-存储器;200-分布式存储系统;210-分布式存储设备;400-访问路径确定装置;410-确定模块;420-切换模块。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中诸如“第一”、“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
此外,针对现有技术中的路径选择方法所存在的缺陷(导致路径资源的使用率并未达到最大化,造成资源浪费,也影响用户的体验)均是申请人在经过实践并仔细研究后得出的结果,因此,上述缺陷的发现过程以及在下文中本申请实施例针对上述缺陷所提出的解决方案,都应该被认定为是申请人对本申请做出的贡献。
为了解决上述问题,本申请实施例提供一种访问路径确定方法、装置、电子设备及可读存储介质,可以提高分布式存储系统的资源利用率,提高用户体验。
该技术可采用相应的软件、硬件以及软硬结合的方式实现。以下对本申请实施例进行详细介绍。
下面将针对本申请所提供的访问路径确定方法进行介绍。
本申请实施例提供一种应用于策略主机的访问路径确定方法。
其中,该策略主机与分布式存储系统通信连接,可以对从分布式存储系统收集到的信息进行集中管理。
用户可以通过客户端访问该分布式存储系统,从而使用分布式存储系统上所存储的信息。
其中,客户端与分布式存储系统之间的可达访问路径有多条,客户端可通过不同的访问路径访问该分布式存储系统。
下面将结合图1,来对客户端在访问分布式存储系统中所采用的访问路径的确定过程进行说明。
步骤S110:每隔预设时间,从所有访问路径中确定出最优访问路径。
步骤S120:将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
在现有技术中,当首次确定出最优访问路径后,只有在最优访问路径出现故障时,才会切换到其他访问路径。
而在本申请实施例中,是每隔预设时间便会检测当前的最优访问路径,然后将客户端当前用于访问分布式存储系统的访问路径,切换到当前的最优访问路径,因此,即使路径资源发生变化导致原有的访问路径不再是最优访问路径,按照本申请实施例所提供的方法,可以及时将原有的访问路径切换到当前的最优访问路径,进而可以提高分布式访问系统的资源利用率,以及提高用户体验。
下面将针对确定最佳访问路径的过程进行介绍。
请参照图2,分布式存储系统200包括多个分布式存储设备210。
其中,在每个分布式存储设备210上都部署有多个访问服务Target,例如iSCSI服务端。
此外,在每个分布式存储设备210上还部署有监控服务Agent。其中,监控服务Agent用于监控本设备(分布式存储设备210)上的访问服务与客户端之间的访问时延。
其中,在执行步骤S110时,在一种可选的实施方式中,可以包括子步骤S111-步骤S113。
步骤S111:获取所述客户端与各个存在连接关系的访问服务之间的访问时延。
前文提及,监控服务Agent可以采集分布式存储设备210上的访问服务与客户端之间的访问时延。在此基础上,策略主机通过遍历每个分布式存储设备210上的监控服务Agent,获取当前客户端与各个存在连接关系的访问服务之间的访问时延。
步骤S112:根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务。
在获取到客户端与各个存在连接关系的访问服务之间的访问时延后,策略主机可以从获取到的所有访问时延中,确定出初始访问时延。
其中,初始访问时延即为客户端当前用于访问分布式存储系统200的访问路径所选择的访问服务与客户端之间的访问时延。
在确定出初始访问时延之后,策略主机分别计算初始访问时延与其他访问时延之间的时延差,得到多个时延差。然后策略主机将多个时延差按照从大到小的顺序进行排序,并将排序靠前预设比例(例如10%)的时延差所对应的访问服务确定为候选访问服务;或者策略主机将多个时延差按照从小到大的顺序进行排序,并将排序靠后预设比例(例如10%)的时延差所对应的访问服务确定为候选访问服务。
其中,时延差越小,说明访问路径所对应的质量越好,因此,候选访问服务即为所有访问服务中,质量较好的访问服务。
步骤S113:计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率。
在确定出候选访问服务后,策略主机可以针对每个候选访问服务,计算该候选访问服务作为路径端点时,分布式存储系统200所对应的负载均衡率。
在本申请实施例中,策略主机可以基于分布式存储系统200的分布式存储设备210的总数量、各个分布式存储设备210的内存使用率、各个分布式存储设备210的CPU使用率、各个分布式存储设备210的网络带宽使用率,来计算每个候选访问服务作为路径端点时分布式存储系统200所对应的负载均衡率。
其中,监控服务可以采集到分布式存储设备210的内存使用率、分布式存储设备210的CPU使用率、分布式存储设备210的网络带宽使用率等参数。
策略主机在获取到监控服务所采集到的参数后,可以根据每个分布式存储设备210的内存使用率M,计算各个分布式存储设备210的平均内存使用率Mavg;根据每个分布式存储设备210的CPU使用率U,计算各个分布式存储设备210的平均CPU使用率Uavg;根据每个分布式存储设备210的网络带宽使用率N,计算各个分布式存储设备的平均网络带宽使用率Navg
然后,策略主机可以根据公式
Figure BDA0003189824660000111
计算每个候选访问服务作为路径端点时,分布式存储系统200的负载均衡率。
其中,Ei为候选访问服务i作为路径端点时,分布式存储系统200的负载均衡率,Ui为候选访问服务i所在的分布式存储设备210的CPU使用率,Mi为候选访问服务i所在的分布式存储设备的内存使用率,Ni为候选访问服务i所在的分布式存储设备的网络带宽使用率。
步骤S114:将所述负载均衡率最小时所对应的候选访问服务所在的分布式存储设备与所述客户端之间的访问路径确定为所述最优访问路径。
在计算得到每个候选访问服务作为路径端点时,分布式存储系统200的负载均衡率后,可以将负载均衡率最小时所对应的候选访问服务所在的分布式存储设备210与客户端之间的访问路径确定为最优访问路径。
本申请实施例所提供的一种访问路径确定方法,每隔预设时间便会检测当前的最优访问路径,然后将客户端当前用于访问分布式存储系统的访问路径,切换到当前的最优访问路径,因此,即使路径资源发生变化导致原有的访问路径不再是最优访问路径,按照本申请实施例所提供的方法,可以及时将原有的访问路径切换到当前的最优访问路径,进而可以提高分布式访问系统的资源利用率,以及提高用户体验。
如图3所示,本申请实施例还提供一种访问路径确定装置400,应用于与分布式存储系统通信连接的策略主机,客户端可通过不同的访问路径访问所述分布式存储系统;访问路径确定装置400可以包括:确定模块410以及切换模块420。
确定模块410,用于每隔预设时间,从所有访问路径中确定出最优访问路径;
切换模块420,用于将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
在一种可能的实施方式中,所述分布式存储系统包括多个分布式存储设备,在所述分布式存储设备上部署有访问服务,所述确定模块410,用于:获取所述客户端与各个存在连接关系的访问服务之间的访问时延;根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务;计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率;将所述负载均衡率最小时所对应的候选访问服务所在的分布式存储设备与所述客户端之间的访问路径确定为所述最优访问路径。
在一种可能的实施方式中,在所述分布式存储设备上部署有监控服务,用于监控所述分布式存储设备上的所述访问服务与所述客户端之间的时延,所述确定模块410,用于通过遍历每个所述分布式存储设备上的监控服务,获取所述客户端与各个存在连接关系的访问服务之间的访问时延。
在一种可能的实施方式中,所述确定模块410,用于从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;分别计算所述初始访问时延与其他访问时延之间的时延差;将所述时延差按照从大到小的顺序进行排序,并将排序靠前预设比例的时延差所对应的访问服务确定为所述候选访问服务。
在一种可能的实施方式中,所述确定模块410,用于从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;分别计算所述初始访问时延与其他访问时延之间的时延差;将所述时延差按照从小到大的顺序进行排序,并将排序靠后预设比例的时延差所对应的访问服务确定为所述候选访问服务。
在一种可能的实施方式中,所述确定模块410,用于获取所述分布式存储设备的数量A、所述分布式存储设备的内存使用率M、所述分布式存储设备的CPU使用率U、所述分布式存储设备的网络带宽使用率N;根据每个所述分布式存储设备的内存使用率M,计算所述分布式存储设备的平均内存使用率Mavg;根据每个所述分布式存储设备的CPU使用率U,计算所述分布式存储设备的平均CPU使用率Uavg;根据每个所述分布式存储设备的网络带宽使用率N,计算所述分布式存储设备的平均网络带宽使用率Navg;根据公式
Figure BDA0003189824660000131
计算每个所述候选访问服务作为所述路径端点时,所述分布式存储系统的负载均衡率;其中,Ei为所述候选访问服务i作为所述路径端点时,所述分布式存储系统的负载均衡率,Ui为所述候选访问服务i所在的分布式存储设备的CPU使用率,Mi为所述候选访问服务i所在的分布式存储设备的内存使用率,Ni为所述候选访问服务i所在的分布式存储设备的网络带宽使用率。
在一种可能的实施方式中,所述访问服务为iSCSI服务端。
本申请实施例所提供的访问路径确定装置400,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
此外,本申请实施例还提供一种可读存储介质,该可读存储介质上存储有计算机程序,该计算机程序被计算机运行时,执行如上述的访问路径确定方法所包含的步骤。
此外,请参照图4,本申请实施例还提供一种用于实现本申请实施例的访问路径确定方法、装置的电子设备100。
可选的,电子设备100,可以是,但不限于个人电脑(Personal computer,PC)、移动上网设备(Mobile Internet Device,MID)、个人数字助理、服务器等设备。其中,服务器可以是,但不限于网络服务器、云端服务器等。
其中,电子设备100可以包括:处理器110、存储器120。
应当注意,图4所示的电子设备100的组件和结构只是示例性的,而非限制性的,根据需要,电子设备100也可以具有其他组件和结构。
处理器110、存储器120以及其他可能出现于电子设备100的组件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,处理器110、存储器120以及其他可能出现的组件相互之间可通过一条或多条通讯总线或信号线实现电性连接。
存储器120用于存储程序,例如存储有前文出现的访问路径确定方法对应的程序或者前文出现的访问路径确定装置。可选的,当存储器120内存储有访问路径确定装置时,访问路径确定装置包括至少一个可以以软件或固件(firmware)的形式存储于存储器120中的软件功能模块。
可选的,访问路径确定装置所包括软件功能模块也可以固化在电子设备100的操作系统(operating system,OS)中。
处理器110用于执行存储器120中存储的可执行模块,例如访问路径确定装置包括的软件功能模块或计算机程序。当处理器110在接收到执行指令后,可以执行计算机程序,例如执行:每隔预设时间,从所有访问路径中确定出最优访问路径;将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
当然,本申请任一实施例所揭示的方法都可以应用于处理器110中,或者由处理器110实现。
综上所述,本发明实施例提出的访问路径确定方法、装置、电子设备及可读存储介质,策略主机每隔预设时间便会检测当前的最优访问路径,然后将客户端当前用于访问分布式存储系统的访问路径,切换到当前的最优访问路径,因此,即使路径资源发生变化导致原有的访问路径不再是最优访问路径,按照本申请实施例所提供的方法,可以及时将原有的访问路径切换到当前的最优访问路径,进而可以提高分布式访问系统的资源利用率,以及提高用户体验。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个可读存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,笔记本电脑,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。

Claims (10)

1.一种访问路径确定方法,其特征在于,应用于与分布式存储系统通信连接的策略主机,客户端可通过不同的访问路径访问所述分布式存储系统;所述方法包括:
每隔预设时间,从所有访问路径中确定出最优访问路径;
将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
2.根据权利要求1所述的方法,其特征在于,所述分布式存储系统包括多个分布式存储设备,在所述分布式存储设备上部署有访问服务,所述从所有访问路径中确定出最优访问路径,包括:
获取所述客户端与各个存在连接关系的访问服务之间的访问时延;
根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务;
计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率;
将所述负载均衡率最小时所对应的候选访问服务所在的分布式存储设备与所述客户端之间的访问路径确定为所述最优访问路径。
3.根据权利要求2所述的方法,其特征在于,在所述分布式存储设备上部署有监控服务,用于监控所述分布式存储设备上的所述访问服务与所述客户端之间的时延,所述获取所述客户端与各个存在连接关系的访问服务之间的访问时延,包括:
通过遍历每个所述分布式存储设备上的监控服务,获取所述客户端与各个存在连接关系的访问服务之间的访问时延。
4.根据权利要求2所述的方法,其特征在于,所述根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务,包括:
从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;
分别计算所述初始访问时延与其他访问时延之间的时延差;
将所述时延差按照从大到小的顺序进行排序,并将排序靠前预设比例的时延差所对应的访问服务确定为所述候选访问服务。
5.根据权利要求2所述的方法,其特征在于,所述根据所述访问时延,从所述存在连接关系的访问服务中筛选出候选访问服务,包括:
从获取到的所有访问时延中,确定出初始访问时延;所述初始访问时延是所述客户端与所述客户端当前用于访问所述分布式存储系统的访问路径中所包括的访问服务之间的访问时延;
分别计算所述初始访问时延与其他访问时延之间的时延差;
将所述时延差按照从小到大的顺序进行排序,并将排序靠后预设比例的时延差所对应的访问服务确定为所述候选访问服务。
6.根据权利要求2所述的方法,其特征在于,所述计算每个所述候选访问服务作为路径端点时,所述分布式存储系统的负载均衡率,包括:
获取所述分布式存储设备的数量A、所述分布式存储设备的内存使用率M、所述分布式存储设备的CPU使用率U、所述分布式存储设备的网络带宽使用率N;
根据每个所述分布式存储设备的内存使用率M,计算所述分布式存储设备的平均内存使用率Mavg
根据每个所述分布式存储设备的CPU使用率U,计算所述分布式存储设备的平均CPU使用率Uavg
根据每个所述分布式存储设备的网络带宽使用率N,计算所述分布式存储设备的平均网络带宽使用率Navg
根据公式
Figure FDA0003189824650000031
计算每个所述候选访问服务作为所述路径端点时,所述分布式存储系统的负载均衡率;
其中,Ei为所述候选访问服务i作为所述路径端点时,所述分布式存储系统的负载均衡率,Ui为所述候选访问服务i所在的分布式存储设备的CPU使用率,Mi为所述候选访问服务i所在的分布式存储设备的内存使用率,Ni为所述候选访问服务i所在的分布式存储设备的网络带宽使用率。
7.根据权利要求2-6中任一项所述的方法,其特征在于,所述访问服务为iSCSI服务端。
8.一种访问路径确定装置,其特征在于,应用于与分布式存储系统通信连接的策略主机,客户端可通过不同的访问路径访问所述分布式存储系统;所述装置包括:
确定模块,用于每隔预设时间,从所有访问路径中确定出最优访问路径;
切换模块,用于将所述客户端当前用于访问所述分布式存储系统的访问路径,切换到所述最优访问路径。
9.一种电子设备,其特征在于,包括:存储器和处理器,所述存储器和所述处理器连接;
所述存储器用于存储程序;
所述处理器调用存储于所述存储器中的程序,以执行如权利要求1-7中任一项所述的方法。
10.一种可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序被计算机运行时执行如权利要求1-7中任一项所述的方法。
CN202110872976.8A 2021-07-30 2021-07-30 访问路径确定方法、装置、电子设备及可读存储介质 Active CN113568753B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110872976.8A CN113568753B (zh) 2021-07-30 2021-07-30 访问路径确定方法、装置、电子设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110872976.8A CN113568753B (zh) 2021-07-30 2021-07-30 访问路径确定方法、装置、电子设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN113568753A true CN113568753A (zh) 2021-10-29
CN113568753B CN113568753B (zh) 2024-02-09

Family

ID=78169516

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110872976.8A Active CN113568753B (zh) 2021-07-30 2021-07-30 访问路径确定方法、装置、电子设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN113568753B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111464622A (zh) * 2020-03-30 2020-07-28 星辰天合(北京)数据科技有限公司 分布式存储系统中的卷映射处理方法及装置
CN112783673A (zh) * 2021-01-27 2021-05-11 广州品唯软件有限公司 一种调用链的确定方法、装置、计算机设备及存储介质
CN112948128A (zh) * 2021-03-30 2021-06-11 华云数据控股集团有限公司 Target端的选择方法、系统及计算机可读介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111464622A (zh) * 2020-03-30 2020-07-28 星辰天合(北京)数据科技有限公司 分布式存储系统中的卷映射处理方法及装置
CN112783673A (zh) * 2021-01-27 2021-05-11 广州品唯软件有限公司 一种调用链的确定方法、装置、计算机设备及存储介质
CN112948128A (zh) * 2021-03-30 2021-06-11 华云数据控股集团有限公司 Target端的选择方法、系统及计算机可读介质

Also Published As

Publication number Publication date
CN113568753B (zh) 2024-02-09

Similar Documents

Publication Publication Date Title
CN107872402B (zh) 全局流量调度的方法、装置及电子设备
CN112988398B (zh) 一种微服务动态伸缩及迁移方法和装置
CN105979007B (zh) 加速资源处理方法、装置及网络功能虚拟化系统
JP4421637B2 (ja) サブタスク・プロセッサの分散スケジューリング
EP2137944B1 (en) On-demand propagation of routing information in distributed computing system
KR101544359B1 (ko) 관리성 및 효율적인 확장 배포를 위한 애플리케이션 기술 시스템 및 방법
US9229778B2 (en) Method and system for dynamic scaling in a cloud environment
CN112506643A (zh) 一种分布式系统的负载均衡方法、装置及电子设备
WO2011109135A1 (en) System and method for assisting virtual machine instantiation and migration
WO2012173642A1 (en) Decentralized management of virtualized hosts
CN107967164B (zh) 一种虚拟机热迁移的方法及系统
US7421497B2 (en) Method and system for load balancing of computer resources among computers
US10079731B2 (en) Client-space network monitoring
JP2009086741A (ja) 異種ノード混在の分散環境における分散処理制御方法、そのシステム及びそのプログラム
CN110995856B (zh) 一种服务器扩展的方法、装置、设备及存储介质
CN113568753B (zh) 访问路径确定方法、装置、电子设备及可读存储介质
CN112187924A (zh) 服务请求方法、装置、设备及计算机存储介质
CN114020218B (zh) 混合重复数据删除调度方法及系统
CN114745278B (zh) 一种业务系统扩缩容的方法、装置、电子设备和存储介质
CN114006764B (zh) 一种基于超融合系统的安全网元的部署方法和装置
CN112866358B (zh) 一种物联网服务重调度的方法、系统及装置
JP4595274B2 (ja) 負荷分散方法及び負荷分散装置
JP6399127B2 (ja) システム管理装置、システム管理方法、プログラム、情報処理システム
WO2013027332A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP6533487B2 (ja) アプリケーション制御装置、ネットワーク品質予測方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant