CN114281578B - 分布式文件存储系统交互方法、装置、计算机设备及介质 - Google Patents
分布式文件存储系统交互方法、装置、计算机设备及介质 Download PDFInfo
- Publication number
- CN114281578B CN114281578B CN202111343475.7A CN202111343475A CN114281578B CN 114281578 B CN114281578 B CN 114281578B CN 202111343475 A CN202111343475 A CN 202111343475A CN 114281578 B CN114281578 B CN 114281578B
- Authority
- CN
- China
- Prior art keywords
- value
- request
- identification
- storage system
- distributed file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000003993 interaction Effects 0.000 title abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 75
- 230000007474 system interaction Effects 0.000 claims abstract description 24
- 230000008569 process Effects 0.000 claims abstract description 18
- 230000004044 response Effects 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 10
- 230000002159 abnormal effect Effects 0.000 claims description 7
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 230000002452 interceptive effect Effects 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种分布式文件存储系统交互方法、装置、计算机设备及介质。所述方法包括:按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;基于预设排列顺序从所分配的所有标识值中确定当前请求值;响应于服务端处理完某一消息请求,则将某一消息请求对应的标识值携带在答应消息中返回至客户端;基于预设排列顺序从服务端返回的所有标识值中确定最后处理值;基于当前请求值和最后处理值判断分布式文件存储系统是否发生故障。本发明的方案不仅保障了分布式文件存储系统交互的可靠性,还实现了对业务处理过程的监管,提升了分布式文件系统业务处理的安全性、稳定性。
Description
技术领域
本发明涉及分布式存储技术领域,尤其涉及一种分布式文件存储系统交互方法、装置、计算机设备及介质。
背景技术
计算机通过文件系统管理、存储数据,而信息爆炸时代中人们可以获取的数据成指数倍增长,单纯通过增加硬盘个数来扩展计算机文件系统的存储容量的方式,在容量大小、容量增长速度、数据备份、数据安全等方面的表现都差强人意。分布式文件存储系统可以有效解决数据的存储和管理难题。
目前,传统分布式文件存储系统通常在一个应用层客户端下发的业务请求,主要依靠通信协议层的握手机制来保证消息的完整传输,以及客户端与服务端一个请求对应一个应答的方式来保证,业务层下发的请求得到完整交互。而在分布式文件存储系统中,为了业务性能有多线程机制,客户端可以多线程发送业务层的请求,这样发送到服务端的请求数量就非常多,原来的消息就不能尽可能的来保证可靠性交互,也无法监控消息处理完成度。
发明内容
有鉴于此,有必要针对以上技术问题,提供能够提高交互可靠性的一种分布式文件存储系统交互方法、装置、计算机设备及介质。
根据本发明的第一方面,提供了一种分布式文件存储系统交互方法,所述方法包括:
按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
在一些实施例中,所述基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障包括:
获取所述当前请求值和所述最后处理值的差值绝对值;
响应于所述差值绝对值等于零,则确认分布式文件存储系统未发生故障。
在一些实施例中,所述方法还包括:
响应于所述差值绝对值不等于零,则判断所述差值绝对值是否超过预设阈值;
响应于所述差值绝对值超过预设阈值,则确认分布式文件存储系统存在故障,并通过所述服务端出发异常告警。
在一些实施例中,所述预设排列顺序为顺序递增或顺序递减,其中,每一标识值均为整数,且任意两个相邻标识值的差值绝对值为1。
在一些实施例中,所述基于所述预设排列顺序从所分配的所有标识值中确定当前请求值包括:
响应于所述预设排列顺序为顺序递增,则将所分配的所有标识值的最大值作为所述当前请求值;
响应于所述预设排列顺序为顺序递减,则将所分配的所有标识值的最小值作为所述当前请求值。
在一些实施例中,所述基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值包括:
响应于所述预设排列顺序为顺序递增,则将所述客户端返回的所有标识值的最大值作为所述最后处理值;
响应于所述预设排列顺序为顺序递减,则将所述客户端返回的所有标识值的最小值作为所述最后处理值。
在一些实施例中,所述方法还包括:
响应于客户端接收到某一线程的答应消息,且所述某一线程继续发送新的消息请求,则基于最后一次分配的标识值和所述预设排列顺序为所述新的消息请求分配标识值。
根据本发明的第二方面,提供了一种分布式文件存储系统交互装置,所述装置包括:
分配模块,配置用于按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
第一确定模块,配置用于基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
答应模块,配置用于响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
第二确定模块,配置用于基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
故障确定模块,配置用于基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
根据本发明的第三方面,还提供了一种计算机设备,该计算机设备包括:
至少一个处理器;以及
存储器,存储器存储有可在处理器上运行的计算机程序,处理器执行程序时执行前述的分布式文件存储系统交互方法,所述方法包括:
按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。根据本发明的第四方面,还提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时执行前述的分布式文件存储系统交互方法,所述方法包括:
按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
上述一种分布式文件存储系统交互方法,通过按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端,然后基于预设排列顺序从所分配的所有标识值中确定当前请求值,假如服务端处理完某一消息请求则将对应的标识值携带在答应消息中返回至述客户端,然后再基于预设排列顺序从服务端返回的所有标识值中确定最后处理值,最后基于当前请求值和最后处理值判断分布式文件存储系统是否发生故障,不仅保障了分布式文件存储系统交互的可靠性,还实现了对分布式文件存储系统的业务处理过程的监管,提升了分布式文件系统业务处理的安全性、稳定性。
此外,本发明还提供了一种分布式文件存储系统交互装置、一种计算机设备和一种计算机可读存储介质,同样能实现上述技术效果,这里不再赘述。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的实施例。
图1A为本发明一个实施例提供的分布式文件存储系统交互方法100的流程示意图;
图1B为本发明一个实施例提供的客户端与服务端的交互示意图;
图2为本发明另一个实施例提供的又一分布式文件存储系统交互方法200的流程示意图;
图3为本发明另一个实施例提供的分布式文件存储系统交互装置300的结构示意图;
图4本发明另一个实施例中计算机设备的内部结构图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明实施例进一步详细说明。
需要说明的是,本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称非相同的实体或者非相同的参量,可见“第一”“第二”仅为了表述的方便,不应理解为对本发明实施例的限定,后续实施例对此不再一一说明。
在一个实施例中,请参照图1A和图1B所示,本发明提供了一种分布式文件存储系统交互方法100,具体来说该方法包括以下步骤:
步骤101,按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
其中,预设排列顺序可以递增排列顺序、递减排列顺序,例如:1、2、3……或者1、3、5……等等,可以理解的是标识值可以是连续的整数或者可以是不连续但具有一定规律的整数,标识值可以是正整数也可是负整数。优选地,每一标识值均为整数,且任意两个相邻标识值的差值绝对值为1(即连续整数)。需要说明的是起始的标识值可以是任何整数,包括但不限于是零,通常在具体实施过程中为了便于对消息请求进行管理,起始的标识值可以采用从零开始分配的方式。
步骤102,基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
其中,当前请求值指的是当前所有线程已分配的标识值中最后一次所分配的标识值。例如,假设某一分布式文件存储系统有五个并发线程,按照连续且顺序递增方式分配标识值时,则分别为五个并发线程对应的消息请求分配标识值1、2、3、4、5,此时当前请求值即为5;同理若按照连续且顺序递减方式分配标识值时,则分别为五个并发线程对应的消息请求分配标识值-1、-2、-3、-4、-5,此时当前请求值即为-5。
步骤103,响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
举例来说,假设线程1携带的标识值是1,当服务端处理完线程1对应的消息请求后,服务端会将该标识值1携带在答应消息中返回给客户端,客户端接收到答应消息后表示服务端完成一次正常请求答应。
步骤104,基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
其中,最后处理值指的是服务端已处理的消息请求中的未处理完的消息请求之前的消息请求所对应的标识值,继续举例来说,假设五个并发线程1-5的消息请求依次对应的标识值为1、2、3、4、5,假设线程1、线程2、线程3和线程5都已处理完成,此时线程4未完成的消息请求,那么最后处理值即为线程3对应的标识值(即为3)。
步骤105,基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
上述一种分布式文件存储系统交互方法,通过按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端,然后基于预设排列顺序从所分配的所有标识值中确定当前请求值,假如服务端处理完某一消息请求则将对应的标识值携带在答应消息中返回至述客户端,然后再基于预设排列顺序从服务端返回的所有标识值中确定最后处理值,最后基于当前请求值和最后处理值判断分布式文件存储系统是否发生故障,不仅保障了分布式文件存储系统交互的可靠性,还实现了对分布式文件存储系统的业务处理过程的监管,提升了分布式文件系统业务处理的安全性、稳定性。
在又一个实施例中,请结合图2所示,图2示出了又一分布式文件存储系统交互方法200的流程示意图,具体来说该方法包括以下步骤:
步骤201,按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
步骤202,基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
步骤203,响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
步骤204,基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
在本实施例中,步骤201-步骤204具体操作已在图1A所示的实施例中步骤101-104进行了详细的介绍,在此不再赘述。
步骤205,获取所述当前请求值和所述最后处理值的差值绝对值;
步骤206,响应于所述差值绝对值等于零,则确认分布式文件存储系统未发生故障。
步骤207,响应于所述差值绝对值不等于零,则判断所述差值绝对值是否超过预设阈值;
步骤208,响应于所述差值绝对值超过预设阈值,则确认分布式文件存储系统存在故障,并通过所述服务端出发异常告警。
步骤209,响应于客户端接收到某一线程的答应消息,且所述某一线程继续发送新的消息请求,则基于最后一次分配的标识值和所述预设排列顺序为所述新的消息请求分配标识值。
在本实施例中,由于线程通常会连续的处理消息请求,例如有五个线程并发处理消息请求,五个线程第一次处理消息请求时对应的消息请求的标识值分别为1-5,假设五个线程对应的消息都被服务端处理完,且五个线程又继续处理新的消息请求,则再为每个线程对应的新的消息请求分配标识值分别为6-10;当某一线程故障时则跳过该故障的线程为其他正常线程对应的新的消息请求分配标识即可,继续举例来说,假设线程1-5中线程4未执行完,且线程1、线程2、线程3和线程5有新得消息请求时,则分别为其分别标识值6-9即可。
在本实施例中,上述一种分布式文件存储系统交互,通过计算当前请求值和最后处理值得差值,然后依据差值确定具体的故障的情形,同时还通过告警的方式通知运维人员,便于及时发现并处理故障,提高了分布式文件存储系统的容错性,为分布式文件存储系统的运维提供了极大便利,提高了分布式存储系统产品的竞争力。
在一些实施例中,前述步骤202具体包括以下步骤:
响应于所述预设排列顺序为顺序递增,则将所分配的所有标识值的最大值作为所述当前请求值;
响应于所述预设排列顺序为顺序递减,则将所分配的所有标识值的最小值作为所述当前请求值。
在一些实施例中,前述步骤204具体包括以下步骤:
响应于所述预设排列顺序为顺序递增,则将所述客户端返回的所有标识值的最大值作为所述最后处理值;
响应于所述预设排列顺序为顺序递减,则将所述客户端返回的所有标识值的最小值作为所述最后处理值。
在又一个实施例中,为了便于理解本发明的技术方案,下面以客户端和服务端具体交互过程例进行详细说明:
步骤一,使用标识值来记录客户端Client与服务端Server之间的每次交互请求处理。该标识值可以记作tid,其为客户端Client端全局管理的一个递增的正整数值。
步骤二,当客户端Client发起一个请求时,将该tid携带至请求消息中,发送到服务端Server。服务端Server接收到并处理完业务请求后,应答客户端Client请求时将该tid返回至客户端Client。以上过程可完成一次完整的客户端Client请求处理。
步骤三,在分布式文件存储系统中,往往客户Client为多线程并发发送业务请求。如图1B所示,假设客户端Client共有n个线程。
步骤四,服务端Server采用两个值来记录客户端的请求处理标识值分别是当前请求值和最后处理值。当前请求值可以记作current_tid,用以记录所有n个线程当前正发送至服务端Server处理的请求。最后处理值表示记作oldest_tid,用于记录服务端Server接收到的已经完整处理结束的请求,该值只记录顺序递增的某个标识值,若多线程中因某个线程请求未结束,其记录到未结束之前的那个标识值。
步骤五,所有n个线程并发发送请求一次请求,而第m个线程发送的请求因某些非正常原因,服务端Server没应答。服务Server在处理完其它线程请求后,应答的tid都为M-1(M为线程m为处理完的一次交互tid),那么oldest_tid=M-1,current_tid=N。
步骤六,当线程n异常恢复后,服务端Server完成一次正常请求应答,再将tid(该tid为当时异常时未正常交互的标识值)返回至客户端Client。下次m线程继续下发请求时,向客户端Client的标识值统一管理服务申请一个唯一的tid(大于current_tid)。下次请求发送至服务端Server后,oldest_tid进行更新。
步骤七,当current_tid与oldest_tid之间的差超过某个设定的阈值,服务端Server即可触发告警,告知业务管理人员,分布式文件存储系统存储异常情况。
本实施例中,分布式文件存储系统为多线程并发系统,可以用以为统一管理的标识值来记录每次的交互请求处理。该标识值可在客户端Client生成并管理,正常一次完整的交互将其携带者消息请求中,该标识值在下次请求时需在携带至新的请求中,以此告警服务端一次完整的请求结束。服务端来记录客户端所有线程与服务端的交互过程中标识值变更。最后处理值来记录服务端接收到的已经完整处理结束的请求,若多线程中因某个线程请求未结束,其记录到未结束之前的标识值。当前请求值为客户端所有线程发送的最新的标识值,采用以上所确定的当前请求值和最后处理值服务端即可判断文件存储系统是否发生故障,并以此发出告警信息,实现了统一管理并保障分布式文件存储系统的可靠性交互完成,并以此进行全局性的告警识别文件存储系统是否存储业务请求是否异常未处理,保障实际业务的安全性,提高了产品的技术竞争能力。
请结合图3所示,本发明还提供了一种分布式文件存储系统交互装置300,具体来说该装置包括:
分配模块301,配置用于按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
第一确定模块302,配置用于基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
答应模块303,配置用于响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
第二确定模块304,配置用于基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
故障确定模块305,配置用于基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
需要说明的是,关于分布式文件存储系统交互装置的具体限定可以参见上文中对分布式文件存储系统交互方法的限定,在此不再赘述。上述分布式文件存储系统交互装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
上述一种分布式文件存储系统交互装置,通过按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端,然后基于预设排列顺序从所分配的所有标识值中确定当前请求值,假如服务端处理完某一消息请求则将对应的标识值携带在答应消息中返回至述客户端,然后再基于预设排列顺序从服务端返回的所有标识值中确定最后处理值,最后基于当前请求值和最后处理值判断分布式文件存储系统是否发生故障,不仅保障了分布式文件存储系统交互的可靠性,还实现了对分布式文件存储系统的业务处理过程的监管,提升了分布式文件系统业务处理的安全性、稳定性。
根据本发明的另一方面,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图请参照图4所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时实现以上所述的分布式文件存储系统交互方法,具体来说,所述方法包括以下步骤:
按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
根据本发明的又一方面,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以上所述的分布式文件存储系统交互方法,具体来说,包括执行以下步骤:
按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值;
基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (8)
1.一种分布式文件存储系统交互方法,其特征在于,所述方法包括:
按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值,所述最后处理值指的是服务端已处理的消息请求中的未处理完的消息请求之前的消息请求所对应的标识值;
基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障;
所述基于所述预设排列顺序从所分配的所有标识值中确定当前请求值包括:
响应于所述预设排列顺序为顺序递增,则将所分配的所有标识值的最大值作为所述当前请求值;
响应于所述预设排列顺序为顺序递减,则将所分配的所有标识值的最小值作为所述当前请求值;
所述基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值包括:
响应于所述预设排列顺序为顺序递增,则将所述客户端返回的所有标识值的最大值作为所述最后处理值;
响应于所述预设排列顺序为顺序递减,则将所述客户端返回的所有标识值的最小值作为所述最后处理值。
2.根据权利要求1所述的分布式文件存储系统交互方法,其特征在于,所述基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障包括:
获取所述当前请求值和所述最后处理值的差值绝对值;
响应于所述差值绝对值等于零,则确认分布式文件存储系统未发生故障。
3.根据权利要求2所述的分布式文件存储系统交互方法,其特征在于,所述方法还包括:
响应于所述差值绝对值不等于零,则判断所述差值绝对值是否超过预设阈值;
响应于所述差值绝对值超过预设阈值,则确认分布式文件存储系统存在故障,并通过所述服务端出发异常告警。
4.根据权利要求1所述的分布式文件存储系统交互方法,其特征在于,所述预设排列顺序为顺序递增或顺序递减,其中,每一标识值均为整数,且任意两个相邻标识值的差值绝对值为1。
5.根据权利要求1-4任意一项所述的分布式文件存储系统交互方法,其特征在于,所述方法还包括:
响应于客户端接收到某一线程的答应消息,且所述某一线程继续发送新的消息请求,则基于最后一次分配的标识值和所述预设排列顺序为所述新的消息请求分配标识值。
6.一种分布式文件存储系统交互装置,其特征在于,所述装置包括:
分配模块,配置用于按照预设排列顺序为客户端的并发请求线程中的每个消息请求分配标识值,并将所分配的标识值携带在对应的消息请求中发送至服务端;
第一确定模块,配置用于基于所述预设排列顺序从所分配的所有标识值中确定当前请求值;
答应模块,配置用于响应于所述服务端处理完某一消息请求,则将所述某一消息请求对应的标识值携带在答应消息中返回至所述客户端;
第二确定模块,配置用于基于所述预设排列顺序从所述服务端返回的所有标识值中确定最后处理值,所述最后处理值指的是服务端已处理的消息请求中的未处理完的消息请求之前的消息请求所对应的标识值;
故障确定模块,配置用于基于所述当前请求值和所述最后处理值判断分布式文件存储系统是否发生故障;
所述第一确定模块进步配置 用于:
响应于所述预设排列顺序为顺序递增,则将所分配的所有标识值的最大值作为所述当前请求值;
响应于所述预设排列顺序为顺序递减,则将所分配的所有标识值的最小值作为所述当前请求值;
所述第二确定模块进步配置用于:
响应于所述预设排列顺序为顺序递增,则将所述客户端返回的所有标识值的最大值作为所述最后处理值;
响应于所述预设排列顺序为顺序递减,则将所述客户端返回的所有标识值的最小值作为所述最后处理值。
7. 一种计算机设备,其特征在于,包括:
至少一个处理器;以及
存储器,所述存储器存储有可在所述处理器中运行的计算机程序,所述处理器执行所述程序时执行权利要求1-5任意一项所述的分布式文件存储系统交互方法。
8.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时执行权利要求1-5任意一项所述的分布式文件存储系统交互方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111343475.7A CN114281578B (zh) | 2021-11-13 | 2021-11-13 | 分布式文件存储系统交互方法、装置、计算机设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111343475.7A CN114281578B (zh) | 2021-11-13 | 2021-11-13 | 分布式文件存储系统交互方法、装置、计算机设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114281578A CN114281578A (zh) | 2022-04-05 |
CN114281578B true CN114281578B (zh) | 2024-01-16 |
Family
ID=80869103
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111343475.7A Active CN114281578B (zh) | 2021-11-13 | 2021-11-13 | 分布式文件存储系统交互方法、装置、计算机设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114281578B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102413156A (zh) * | 2010-09-21 | 2012-04-11 | 腾讯科技(深圳)有限公司 | 一种分布式数据存储系统和方法 |
CN102708192A (zh) * | 2012-05-15 | 2012-10-03 | 华为技术有限公司 | 一种文档共享的方法及系统、设备 |
CN109408116A (zh) * | 2018-10-30 | 2019-03-01 | 北京字节跳动网络技术有限公司 | 一种业务标识获取方法、装置、设备及存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103181140B (zh) * | 2011-10-21 | 2016-09-14 | 华为技术有限公司 | 识别服务请求类型的方法、媒体服务器和终端设备 |
-
2021
- 2021-11-13 CN CN202111343475.7A patent/CN114281578B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102413156A (zh) * | 2010-09-21 | 2012-04-11 | 腾讯科技(深圳)有限公司 | 一种分布式数据存储系统和方法 |
CN102708192A (zh) * | 2012-05-15 | 2012-10-03 | 华为技术有限公司 | 一种文档共享的方法及系统、设备 |
CN109408116A (zh) * | 2018-10-30 | 2019-03-01 | 北京字节跳动网络技术有限公司 | 一种业务标识获取方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114281578A (zh) | 2022-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110830283B (zh) | 故障检测方法、装置、设备和系统 | |
CN112463448B (zh) | 分布式集群数据库同步方法、装置、设备及存储介质 | |
CN110825698B (zh) | 元数据管理方法及相关装置 | |
CN111901176B (zh) | 故障确定方法、装置、设备及存储介质 | |
CN106452836B (zh) | 主节点设置方法及装置 | |
CN107508694B (zh) | 一种集群内的节点管理方法及节点设备 | |
WO2016177130A1 (zh) | 通讯节点的选择方法及装置 | |
WO2021068919A1 (zh) | 基于pbft算法改进的单节点异常主动恢复方法、系统、设备和介质 | |
CN115994044B (zh) | 基于监控服务的数据库故障处理方法、装置及分布式集群 | |
CN109257396B (zh) | 一种分布式锁调度方法及装置 | |
CN107508700B (zh) | 容灾方法、装置、设备及存储介质 | |
CN113590049B (zh) | 一种存储卷跨节点克隆的方法、装置、设备及可读介质 | |
US11159608B2 (en) | Method and control node for managing cloud resources in a communications network | |
CN104753987A (zh) | 一种分布式会话管理方法及系统 | |
CN114281578B (zh) | 分布式文件存储系统交互方法、装置、计算机设备及介质 | |
CN114564153B (zh) | 一种卷映射解除方法、装置、设备和存储介质 | |
CN116192885A (zh) | 高可用集群架构人工智能实验云平台数据处理方法及系统 | |
CN116010199A (zh) | 应用服务自调节方法、装置、计算机设备及存储介质 | |
CN113626240A (zh) | 集群故障恢复方法、装置、计算机设备和存储介质 | |
CN111338848B (zh) | 故障应用副本处理方法、装置、计算机设备和存储介质 | |
CN111258860B (zh) | 数据告警方法、装置、计算机设备和存储介质 | |
CN114328033A (zh) | 保持高可用设备组业务配置一致性的方法及装置 | |
CN113282334A (zh) | 软件缺陷的恢复方法、装置、计算机设备和存储介质 | |
CN112612652A (zh) | 分布式存储系统异常节点重启方法及系统 | |
CN113157493A (zh) | 基于检票系统的备份方法、装置、系统和计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |