CN107317763A - 一种客户端与元数据服务器间的流控方法及装置 - Google Patents

一种客户端与元数据服务器间的流控方法及装置 Download PDF

Info

Publication number
CN107317763A
CN107317763A CN201710521667.XA CN201710521667A CN107317763A CN 107317763 A CN107317763 A CN 107317763A CN 201710521667 A CN201710521667 A CN 201710521667A CN 107317763 A CN107317763 A CN 107317763A
Authority
CN
China
Prior art keywords
request
client
data server
meta data
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710521667.XA
Other languages
English (en)
Other versions
CN107317763B (zh
Inventor
黄威振
张端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710521667.XA priority Critical patent/CN107317763B/zh
Publication of CN107317763A publication Critical patent/CN107317763A/zh
Application granted granted Critical
Publication of CN107317763B publication Critical patent/CN107317763B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/31—Flow control; Congestion control by tagging of packets, e.g. using discard eligibility [DE] bits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/50—Queue scheduling
    • H04L47/62—Queue scheduling characterised by scheduling criteria
    • H04L47/625—Queue scheduling characterised by scheduling criteria for service slots or service orders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例公开了一种客户端与元数据服务器间的流控方法及装置，当接收到客户端发送的数据请求时，判断客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对标记位的设置值进行设定；当判定标记位存在设置值时，将数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；当判定个数未超过阈值时，则将数据请求发送至所述元数据服务器，反之，则数据请求放入请求队列中。减缓了元数据服务器的压力，从而有效的避免了由于客户端请求量太大导致元数据服务器出现异常，提升了元数据服务器的稳定性与可靠性，不仅可提升系统内集群的使用效率，还有利于提升客户端的操作体验。

Description

一种客户端与元数据服务器间的流控方法及装置
技术领域
本发明实施例涉及分布式存储技术领域，特别是涉及一种客户端与元数据服务器间的流控方法及装置。
背景技术
随着云技术、大数据的兴起及快速发展，用户在客户端的请求越来越多，当客户的多个客户端同时向MDS(Metadata Server，元数据服务器)发送大量请求时，会导致元数据服务器的会话map较大，出现异常，元数据服务器处于震荡状态，从而会引起分布式集群系统中的集群无法使用，影响客户端的正常工作。
鉴于此，如何防止因客户端请求量太大，而导致元数据服务器出现异常，是本领域技术人员亟待解决的问题。
发明内容
本发明实施例的目的是提供一种客户端与元数据服务器间的流控方法及装置，以减小元数据服务器的压力，提升客户端的操作体验。
为解决上述技术问题，本发明实施例提供以下技术方案：
本发明实施例一方面提供了一种客户端与元数据服务器间的流控方法，包括：
当接收到客户端发送的数据请求时，判断所述客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定；
当判定所述标记位存在设置值时，将所述数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；
当判定所述个数未超过所述阈值时，则将所述数据请求发送至所述元数据服务器，反之，将所述数据请求放入所述请求队列中。
可选的，在所述将所述数据请求放入请求队列中之后，还包括：
根据所述数据请求加入所述请求队列的时间，对所述请求队列中的各个数据请求进行时间排序；
将所述数据请求与预先创建的定时器进行关联，以使当到达相应预设时间时，自动发送所述数据请求。
可选的，所述根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定包括：
当所述元数据服务器的会话map满足预设条件时，对所述元数据服务器的繁忙字段进行设置，以用于表示当前接收请求已达到上限，并将所述繁忙字段的状态信息放于响应请求信息发送至所述客户端；
当检测到所述元数据服务器的繁忙字段被设置后，对所述客户端的标记位进行设置。
可选的，还包括：
根据预设频率判断所述请求队列中的各所述数据请求是否在各相应预设时间到达后，自动被发送至所述元数据服务器；
当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器，则将所述数据请求发送至所述元数据服务器。
可选的，在所述当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器之后，还包括：
向用户进行报警提示。
本发明实施例另一方面提供了一种客户端与元数据服务器间的流控装置，包括：
状态判断模块，用于当接收到客户端发送的数据请求时，判断所述客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定；
数据请求处理模块，用于当判定所述标记位存在设置值时，将所述数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；当判定所述个数未超过所述阈值时，则将所述数据请求发送至所述元数据服务器，反之，将所述数据请求放入所述请求队列中。
可选的，还包括：
数据请求发送设置模块，用于根据所述数据请求加入所述请求队列的时间，对所述请求队列中的各个数据请求进行时间排序；将所述数据请求与预先创建的定时器进行关联，以使当到达预设时间时，自动发送所述数据请求。
可选的，所述状态判断模块为当所述元数据服务器的会话map满足预设条件时，对所述元数据服务器的繁忙字段进行设置，以用于表示当前接收请求已达到上限，并将所述繁忙字段的状态信息放于响应请求信息发送至所述客户端；当检测到所述元数据服务器的繁忙字段被设置后，对所述客户端的标记位进行设置的模块。
可选的，还包括：
数据请求发送检测模块，用于根据预设频率判断所述请求队列中的各所述数据请求是否在各相应预设时间到达后，自动被发送至所述元数据服务器；当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器，则将所述数据请求发送至所述元数据服务器。
可选的，还包括：
提示模块，用于向用户进行报警提示。
本发明实施例提供了一种客户端与元数据服务器间的流控方法，当接收到客户端发送的数据请求时，判断客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对标记位的设置值进行设定；当判定标记位存在设置值时，将数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；当判定个数未超过阈值时，则将数据请求发送至所述元数据服务器，反之，则数据请求放入请求队列中。
本申请提供的技术方案的优点在于，通过客户端的标记位与元数据服务器反馈的响应信息判断当前客户端的数据请求的发送状态，当元数据服务器繁忙时，将数据请求放入请求队列中，反之，则进行发送。有效的控制了客户端发送数据请求的数量，有利于减缓元数据服务器的压力，从而有效的避免了由于客户端请求量太大导致元数据服务器出现异常，提升了元数据服务器的稳定性与可靠性，不仅可提升分布式系统内集群的使用效率，还有利于提升客户端的操作体验。
此外，本发明实施例还针对客户端与元数据服务器间的流控方法提供了相应的实现装置，进一步使得所述方法更具有实用性，所述装置具有相应的优点。
附图说明
为了更清楚的说明本发明实施例或现有技术的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种客户端与元数据服务器间的流控方法的流程示意图；
图2为本发明实施例提供的另一种客户端与元数据服务器间的流控方法的流程示意图；
图3为本发明实施例提供的再一种客户端与元数据服务器间的流控方法的流程示意图；
图4为本发明实施例提供的客户端与元数据服务器间的流控装置的一种具体实施方式结构图；
图5为本发明实施例提供的客户端与元数据服务器间的流控装置的另一种具体实施方式结构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象，而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可包括没有列出的步骤或单元。
在介绍了本发明实施例的技术方案后，下面详细的说明本申请的各种非限制性实施方式。
首先参见图1，图1为本发明实施例提供的一种客户端与元数据服务器间的流控方法的流程示意图，本发明实施例可包括以下内容：
S101：当接收到客户端发送的数据请求时，判断所述客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定。
具体的可为接收到上层应用的请求或fuse_client内部自发的请求，当然，数据请求并不限于此。
客户端标记位例如可设置为busy_flags，具体可对标记位进行设置不同的值，以用于表示处于不同的状态，例如客户端标记位设置为1，表示当前不可继续发送数据请求，当客户端标记位设置为0时，表示可继续执行下述操作；当然，也可进行设置或不进行设置，当标记位有设置值时，可表示当前不可继续发送数据请求，当标记位没有被设置时，表示可继续执行下述操作。
对于客户端标记位的设置可根据下述方法进行设置：
当元数据服务器的会话map满足预设条件时，例如，当然元数据服务器的会话map很大时(具体的程度，本领域技术人员可根据具体的实际情况进行确定)，表明当前元数据服务器处理的数据请求较多，可对元数据服务器的繁忙字段进行设置，以用于表示当前接收请求是否已达到上限，可将繁忙字段的状态设置为忙时，或具体设置为预先协议好的数值，例如繁忙字段设置为1，表示当前很忙，不可继续接收处理数据请求，当设置为0时，表示可继续接收数据请求，并正常对数据请求进行响应。
然后将设置后的繁忙字段的状态信息放于最近的响应请求信息发送至客户端。客户端接收到响应信息后，当检测该响应信息中携带的繁忙字段时，将本地的标记位进行设置。
S102：当判定所述标记位存在设置值时，将所述数据请求放入请求队列中。
当标记位存在设置值时，也就是客户端标记位根据元数据服务器反馈的信息被设置了，表明当前元数据服务器处理请求较多，不可继续接收数据请求。故将客户端发送的数据请求放于请求队列中，直至元数据服务器可接收数据请求时，在将其进行发送。
请求队列为预先创建的队列，用于存放客户端发送的数据请求，请求队列中各个数据请求可按照放入的时间顺序进行排序，例如先放进队列的位于队列的前端，当可进行发送时，先发送队列前端的数据请求(即先发送先放入队列的数据请求)；还也可根据数据请求的重要性进行排序，重要级别越高放于队列的前段，优先进行发送。当然，也可采用其他方式对请求队列中的数据请求进行排序，或不对其进行排序，这均不影响本申请的实现。
请求队列可与定时装置相关联，用于到达预设时间时将到期的数据请求发送至元数据服务器。
S103：当判定所述标记位不存在设置值时，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值。
当标记位没有被设置时，可能是由于元数据服务器不忙，可继续处理响应客户端的数据请求，还有可能是当前数据请求较多，还没有及时将繁忙字段的设置信息随着响应信息反馈到客户端。鉴于此，为了进一步确保避免元数据服务器端的异常，对元数据服务器的实际处理请求情况进行判断，具体的可通过客户端发送的数据请求中，未收到元数据服务器响应的请求的个数的来判断。
阈值可根据具体的实际情况进行确定，本申请对此不做任何限定。例如客户端已发的8条数据请求，但是仅有两个数据请求收到响应，其他的都没有收到元数据服务器的响应，此时，可判定元数据服务器处理的数据请求较多，便可等一段时间进行发送；而当客户端已发的8条数据请求，但是仅有两个数据请求未收到响应，那么可判定当前元数据服务器还可继续处理数据请求，便可将当前数据请求发送至元数据服务器进行处理。
S104：当判定所述个数未超过所述阈值时，则将所述数据请求发送至所述元数据服务器。
S105：当判定所述个数超过所述阈值时，则将所述数据请求放入请求队列中。
在本发明实施例提供的技术方案中，通过客户端的标记位与元数据服务器反馈的响应信息判断当前客户端的数据请求的发送状态，当元数据服务器繁忙时，将数据请求放入请求队列中，反之，则进行发送。有效的控制了客户端发送数据请求的数量，有利于减缓元数据服务器的压力，从而有效的避免了由于客户端请求量太大导致元数据服务器出现异常，提升了元数据服务器的稳定性与可靠性，不仅可提升分布式系统内集群的使用效率，还有利于提升客户端的操作体验。
在一种具体的实施方式下，本发明实施例可应用于分布式存储系统，基于上述实施例，本申请还提供另外一个实施例，请参阅图2所示，具体可包括：
S106：根据所述数据请求加入所述请求队列的时间，对所述请求队列中的各个数据请求进行时间排序；
S107：将所述数据请求与预先创建的定时器进行关联，以使当到达相应预设时间时，自动发送所述数据请求。
将新加入的数据请求在请求队列中进行排序，并与定时器相关联，以使其到达预设时间时，自动发送至元数据服务器，避免数据请求由于未设置而可能被遗漏。有利于提升系统的可靠性，保证客户端与服务器间的有效交互，提升客户端的操作体验。
在本发明实施例的一些具体实施方式中，请参阅图3所示，还可包括：
S108：根据预设频率判断所述请求队列中的各所述数据请求是否在各相应预设时间到达后，自动被发送至所述元数据服务器。
S109：当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器，则将所述数据请求发送至所述元数据服务器。
为了进一步的确保请求队列中存储的各个数据请求按照预设时间，到期后发送至元数据服务器。可定时进行查看请求队列中的数据发送情况，及时将未发送的数据请求进行发送。
为了确定未发送的原因，可将信息反馈给用户，还可向用户进行报警提示未发送出的数据请求，以使用户尽快进行维修，有利于提升系统的稳定性与可靠性，保证客户端与服务器间的有效交互，提升客户端的操作体验。
本发明实施例还针对客户端与元数据服务器间的流控方法提供了相应的实现装置，进一步使得所述方法更具有实用性。下面对本发明实施例提供的客户端与元数据服务器间的流控装置进行介绍，下文描述的客户端与元数据服务器间的流控装置与上文描述的客户端与元数据服务器间的流控方法可相互对应参照。
请参见图4，图4为本发明实施例提供的客户端与元数据服务器间的流控装置在一种具体实施方式下的结构图，该装置可包括：
状态判断模块401，用于当接收到客户端发送的数据请求时，判断所述客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定；
数据请求处理模块402，用于当判定所述标记位存在设置值时，将所述数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；当判定所述个数未超过所述阈值时，则将所述数据请求发送至所述元数据服务器，反之，将所述数据请求放入请求队列中。
在本实施例的一些实施方式中，所述状态判断模块401为当所述元数据服务器的会话map满足预设条件时，对所述元数据服务器的繁忙字段进行设置，以用于表示当前接收请求已达到上限，并将所述繁忙字段的状态信息放于响应请求信息发送至所述客户端；当检测到所述元数据服务器的繁忙字段被设置后，对所述客户端的标记位进行设置的模块。
可选的，在本申请的一些实施方式中，请参阅图5，所述装置例如可以包括数据请求发送设置模块403，用于根据所述数据请求加入所述请求队列的时间，对所述请求队列中的各个数据请求进行时间排序；将所述数据请求与预先创建的定时器进行关联，以使当到达预设时间时，自动发送所述数据请求。
可选的，在本申请的一些实施方式中，请参阅图5，所述装置例如可以包括数据请求发送检测模块404，用于根据预设频率判断所述请求队列中的各所述数据请求是否在各相应预设时间到达后，自动被发送至所述元数据服务器；当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器，则将所述数据请求发送至所述元数据服务器。
还可包括提示模块，用于向用户进行报警提示。
本发明实施例所述客户端与元数据服务器间的流控装置的各功能模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。
由上可知，本发明实施例通过客户端的标记位与元数据服务器反馈的响应信息判断当前客户端的数据请求的发送状态，当元数据服务器繁忙时，将数据请求放入请求队列中，反之，则进行发送。有效的控制了客户端发送数据请求的数量，有利于减缓元数据服务器的压力，从而有效的避免了由于客户端请求量太大导致元数据服务器出现异常，提升了元数据服务器的稳定性与可靠性，不仅可提升分布式系统内集群的使用效率，还有利于提升客户端的操作体验。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的一种客户端与元数据服务器间的流控方法以及装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (10)

1.一种客户端与元数据服务器间的流控方法，其特征在于，包括：
当接收到客户端发送的数据请求时，判断所述客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定；
当判定所述标记位存在设置值时，将所述数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；
当判定所述个数未超过所述阈值时，则将所述数据请求发送至所述元数据服务器，反之，将所述数据请求放入所述请求队列中。
2.根据权利要求1所述的客户端与元数据服务器间的流控方法，其特征在于，在所述将所述数据请求放入请求队列中之后，还包括：
根据所述数据请求加入所述请求队列的时间，对所述请求队列中的各个数据请求进行时间排序；
将所述数据请求与预先创建的定时器进行关联，以使当到达相应预设时间时，自动发送所述数据请求。
3.根据权利要求1所述的客户端与元数据服务器间的流控方法，其特征在于，所述根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定包括：
当所述元数据服务器的会话map满足预设条件时，对所述元数据服务器的繁忙字段进行设置，以用于表示当前接收请求已达到上限，并将所述繁忙字段的状态信息放于响应请求信息发送至所述客户端；
当检测到所述元数据服务器的繁忙字段被设置后，对所述客户端的标记位进行设置。
4.根据权利要求1至3任意一项所述的客户端与元数据服务器间的流控方法，其特征在于，还包括：
根据预设频率判断所述请求队列中的各所述数据请求是否在各相应预设时间到达后，自动被发送至所述元数据服务器；
当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器，则将所述数据请求发送至所述元数据服务器。
5.根据权利要求4所述的客户端与元数据服务器间的流控方法，其特征在于，在所述当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器之后，还包括：
向用户进行报警提示。
6.一种客户端与元数据服务器间的流控装置，其特征在于，包括：
状态判断模块，用于当接收到客户端发送的数据请求时，判断所述客户端标记位是否存在设置值，根据元数据服务器响应请求信息中繁忙字段的设置状态对所述标记位进行设定；
数据请求处理模块，用于当判定所述标记位存在设置值时，将所述数据请求放入请求队列中，反之，判断所述客户端已发的数据请求中未收到响应的个数是否超过阈值；当判定所述个数未超过所述阈值时，则将所述数据请求发送至所述元数据服务器，反之，将所述数据请求放入所述请求队列中。
7.根据权利要求6所述的客户端与元数据服务器间的流控方法，其特征在于，还包括：
数据请求发送设置模块，用于根据所述数据请求加入所述请求队列的时间，对所述请求队列中的各个数据请求进行时间排序；将所述数据请求与预先创建的定时器进行关联，以使当到达预设时间时，自动发送所述数据请求。
8.根据权利要求7所述的客户端与元数据服务器间的流控方法，其特征在于，所述状态判断模块为当所述元数据服务器的会话map满足预设条件时，对所述元数据服务器的繁忙字段进行设置，以用于表示当前接收请求已达到上限，并将所述繁忙字段的状态信息放于响应请求信息发送至所述客户端；当检测到所述元数据服务器的繁忙字段被设置后，对所述客户端的标记位进行设置的模块。
9.根据权利要求8所述的客户端与元数据服务器间的流控方法，其特征在于，还包括：
数据请求发送检测模块，用于根据预设频率判断所述请求队列中的各所述数据请求是否在各相应预设时间到达后，自动被发送至所述元数据服务器；当判定所述数据请求在相应预设时间到达后，没有被发送至所述元数据服务器，则将所述数据请求发送至所述元数据服务器。
10.根据权利要求9所述的客户端与元数据服务器间的流控方法，其特征在于，还包括：
提示模块，用于向用户进行报警提示。
CN201710521667.XA 2017-06-30 2017-06-30 一种客户端与元数据服务器间的流控方法及装置 Active CN107317763B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710521667.XA CN107317763B (zh) 2017-06-30 2017-06-30 一种客户端与元数据服务器间的流控方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710521667.XA CN107317763B (zh) 2017-06-30 2017-06-30 一种客户端与元数据服务器间的流控方法及装置

Publications (2)

Publication Number Publication Date
CN107317763A true CN107317763A (zh) 2017-11-03
CN107317763B CN107317763B (zh) 2021-04-30

Family

ID=60180424

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710521667.XA Active CN107317763B (zh) 2017-06-30 2017-06-30 一种客户端与元数据服务器间的流控方法及装置

Country Status (1)

Country Link
CN (1) CN107317763B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108234349A (zh) * 2017-12-22 2018-06-29 中国联合网络通信集团有限公司 提高soa系统健壮性的方法和装置
CN110290217A (zh) * 2019-07-01 2019-09-27 腾讯科技（深圳）有限公司 数据请求的处理方法及装置、存储介质及电子装置
CN110417888A (zh) * 2019-07-30 2019-11-05 中国工商银行股份有限公司 流量控制方法、流量控制装置和电子设备
CN111147947A (zh) * 2020-01-10 2020-05-12 深圳市同洲电子股份有限公司 一种基于websocket的flv视频传输及网页播放的方法
CN112054923A (zh) * 2020-08-24 2020-12-08 腾讯科技（深圳）有限公司 业务请求检测方法、设备及介质
CN116016257A (zh) * 2023-01-28 2023-04-25 鹏城实验室 状态监测方法、装置、设备及存储介质
CN116668372A (zh) * 2023-08-01 2023-08-29 腾讯科技（深圳）有限公司 一种流量控制方法和相关装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102904820A (zh) * 2012-09-25 2013-01-30 上海证券交易所 一种带流量控制的可扩展的数据交互方法和系统
CN103368861A (zh) * 2013-07-30 2013-10-23 迈普通信技术股份有限公司 一种处理网络拥塞的系统及方法
CN103442076A (zh) * 2013-09-04 2013-12-11 上海海事大学 一种云存储系统的可用性保障方法
US20160036822A1 (en) * 2014-07-29 2016-02-04 Samsung Electronics Co., Ltd. Method and apparatus for sharing data
WO2016169096A1 (zh) * 2015-04-20 2016-10-27 中兴通讯股份有限公司 一种终端的控制方法及装置
US20170111470A1 (en) * 2015-10-16 2017-04-20 Alticast Corporation Apparatus and method of providing virtualization service platform

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102904820A (zh) * 2012-09-25 2013-01-30 上海证券交易所 一种带流量控制的可扩展的数据交互方法和系统
CN103368861A (zh) * 2013-07-30 2013-10-23 迈普通信技术股份有限公司 一种处理网络拥塞的系统及方法
CN103442076A (zh) * 2013-09-04 2013-12-11 上海海事大学 一种云存储系统的可用性保障方法
US20160036822A1 (en) * 2014-07-29 2016-02-04 Samsung Electronics Co., Ltd. Method and apparatus for sharing data
WO2016169096A1 (zh) * 2015-04-20 2016-10-27 中兴通讯股份有限公司 一种终端的控制方法及装置
US20170111470A1 (en) * 2015-10-16 2017-04-20 Alticast Corporation Apparatus and method of providing virtualization service platform

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108234349A (zh) * 2017-12-22 2018-06-29 中国联合网络通信集团有限公司 提高soa系统健壮性的方法和装置
CN110290217A (zh) * 2019-07-01 2019-09-27 腾讯科技（深圳）有限公司 数据请求的处理方法及装置、存储介质及电子装置
CN110417888A (zh) * 2019-07-30 2019-11-05 中国工商银行股份有限公司 流量控制方法、流量控制装置和电子设备
CN111147947A (zh) * 2020-01-10 2020-05-12 深圳市同洲电子股份有限公司 一种基于websocket的flv视频传输及网页播放的方法
CN111147947B (zh) * 2020-01-10 2021-12-10 深圳市同洲电子股份有限公司 一种基于websocket的flv视频传输及网页播放的方法
CN112054923A (zh) * 2020-08-24 2020-12-08 腾讯科技（深圳）有限公司 业务请求检测方法、设备及介质
CN112054923B (zh) * 2020-08-24 2023-08-18 腾讯科技（深圳）有限公司 业务请求检测方法、设备及介质
CN116016257A (zh) * 2023-01-28 2023-04-25 鹏城实验室 状态监测方法、装置、设备及存储介质
CN116668372A (zh) * 2023-08-01 2023-08-29 腾讯科技（深圳）有限公司 一种流量控制方法和相关装置
CN116668372B (zh) * 2023-08-01 2023-11-03 腾讯科技（深圳）有限公司 一种流量控制方法和相关装置

Also Published As

Publication number Publication date
CN107317763B (zh) 2021-04-30

Similar Documents

Publication Publication Date Title
CN107317763A (zh) 一种客户端与元数据服务器间的流控方法及装置
CN103853610B (zh) 资源优化方法及装置
CN101582850B (zh) 一种实现负载均衡的方法和系统
CN108683604A (zh) 并发访问控制方法、终端设备及介质
CN105446827B (zh) 一种数据库故障时的数据存储方法和设备
CN101035110B (zh) 业务调用方法、系统及单元
CN107391294A (zh) 一种ipsan容灾系统的建立方法及装置
CN107273231A (zh) 分布式存储系统硬盘挂住故障检测、处理方法及装置
CN111628893B (zh) 分布式存储系统的故障处理方法及装置、电子设备
CN108234171A (zh) 一种数据处理方法、系统以及装置
CN106446097A (zh) 一种文件读取方法及系统
CN107135274A (zh) 一种分布式集群系统的存储管理方法及装置
CN107273214A (zh) 一种基于固态硬盘的多核控制器资源访问方法及其装置
CN106293523A (zh) 一种对非易失性存储的io请求响应方法及装置
CN108683528A (zh) 一种数据传输方法、中心服务器、服务器及数据传输系统
CN108494972A (zh) 一种消息提醒方法、消息提醒装置及移动终端
CN106547566B (zh) 通讯服务进程池管理方法及系统
CN108366098A (zh) 一种网络节点的数据交互方法及装置
CN108965054A (zh) 一种客户端与服务端数据快速交互方法
CN103870564B (zh) 一种数据更新方法及电子设备
CN106878990B (zh) 一种信息推送方法及装置
CN107545053A (zh) 一种集群系统缓存查询方法及设备
CN107819823A (zh) 一种信息处理方法、服务器及计算机可读存储介质
CN107911229A (zh) 运行状态改变的提醒方法、装置、电子设备及存储介质
CN114356533B (zh) 微服务无感知发布系统、方法、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant