CN108875061A - 一种分布式文件系统的一致性测试方法及相关装置 - Google Patents
一种分布式文件系统的一致性测试方法及相关装置 Download PDFInfo
- Publication number
- CN108875061A CN108875061A CN201810699149.1A CN201810699149A CN108875061A CN 108875061 A CN108875061 A CN 108875061A CN 201810699149 A CN201810699149 A CN 201810699149A CN 108875061 A CN108875061 A CN 108875061A
- Authority
- CN
- China
- Prior art keywords
- check value
- test
- client
- data
- calculation processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/08—Error detection or correction by redundancy in data representation, e.g. by using checking codes
- G06F11/10—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's
- G06F11/1008—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's in individual solid state devices
- G06F11/1012—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's in individual solid state devices using codes or arrangements adapted for a specific type of error
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请公开了一种分布式文件系统的一致性测试方法，通过将测试数据在两个客户端中进行交互传输，也就是第二客户端读取第一客户端的数据，第一客户端读取第二客户端的数据，实现了在读取过程中对分布式集群底层逻辑的调用，也就是在测试过程中可以测试出底层逻辑对一致性的影响，使得一致性测试更加全面，提高了一致性测试的测试效度，可以用更少次数的测试更多的系统逻辑。本申请还公开了另一种分布式文件系统的一致性测试方法、两种一致性测试系统、服务器以及计算机可读存储介质，具体上述有益效果。
Description
技术领域
本申请涉及计算机技术领域，特别涉及一种分布式文件系统的一致性测试方法、另一种分布式文件系统的一致性测试方法、两种一致性测试系统、服务器以及计算机可读存储介质。
背景技术
随着信息技术的不断发展，互联网中每时每刻产生的数据量越来越大，由此产生了分布式集群技术。通过分布式集群技术，可以使得多台节点上的服务对外同时提供存储服务。在分布式集群内，任意一台服务器如果出现了宕机也不会影响正常的存储业务，同时还可以随时增加节点实现对存储设备的扩容。并且，在分布式集群中为了保证数据的安全，以及存储数据的可靠性，必须保证节点在出现错误时文件系统数据的一致性，也就是节点运行出现错误后不会影响到存储的数据。
现有技术中为了保持数据存储的一致性，需要对分布式存储系统进行一致性测试。但是，现有技术一般使用通用的测试软件进行测试，也就是只对系统的客户端进行单独的测试，无法覆盖到分布式系统的所有模块，导致对分布式集群系统测试无法测试到系统的底层逻辑，导致一致性测试不够全面，无法显现出底层逻辑对数据一致性的影响。
因此，如何更加全面的进行数据一致性测试是本领域技术人员关注的重点问题。
发明内容
本申请的目的是提供一种分布式文件系统的一致性测试方法、另一种分布式文件系统的一致性测试方法、两种一致性测试系统、服务器以及计算机可读存储介质，通过在一致性测试中加入第一客户端与第二客户端之间的数据交互，使得在测试过程中调用底层逻辑，也就是更加全面的进行一致性测试，提高一致性测试的效度。
为解决上述技术问题，本申请提供一种分布式文件系统的一致性测试方法，包括：
第一客户端写入预设大小的测试数据，对所述测试数据进行校验值计算处理，得到第一校验值；
将所述第一校验值发送至第二客户端，以使所述第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果，并将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值，将所述第三校验值发送至所述第一客户端；
读取所述第二客户端的修改数据，对所述修改数据进行校验值计算处理，得到第四校验值；
将所述第三校验值和所述第四校验值进行对比得到第二对比结果，根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
可选的，所述校验值计算处理为MD5值计算处理。
本申请还提供一种分布式文件系统的一致性测试方法，包括：
当第二客户端接收到第一客户端发送的第一校验值时，所述第二客户端读取所述第一客户端中与所述第一校验值对应的测试数据；
对所述测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果；
将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值；
将所述第三校验值发送至所述第一客户端，以使所述第一客户端读取所述修改数据，对所述修改数据进行校验值计算处理得到第四校验值，将所述第三校验值和所述第四校验值进行对比得到第二对比结果，将所述第二对比结果发送至所述第二客户端；
根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
可选的，所述校验值计算处理为MD5值计算处理。
本申请还提供一种分布式文件系统的一致性测试系统，包括：
测试数据校验模块，用于写入预设大小的测试数据，对所述测试数据进行校验值计算处理，得到第一校验值；
数据修改模块，用于将所述第一校验值发送至第二客户端，以使所述第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果，并将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值，将所述第三校验值发送至所述第一客户端；
修改数据校验模块，用于读取所述第二客户端的修改数据，对所述修改数据进行校验值计算处理，得到第四校验值；
测试结果获取模块，用于将所述第三校验值和所述第四校验值进行对比得到第二对比结果，根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
可选的，所述校验值计算处理为MD5值计算处理。
本申请还提供一种分布式文件系统的一致性测试系统，包括：
第一校验值获取模块，用于接收到第一客户端发送的第一校验值时，所述第二客户端读取所述第一客户端中与所述第一校验值对应的测试数据；
第一对比模块，用于对所述测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果；
数据修改模块，用于将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值；
第二对比模块，用于将所述第三校验值发送至所述第一客户端，以使所述第一客户端读取所述修改数据，对所述修改数据进行校验值计算处理得到第四校验值，将所述第三校验值和所述第四校验值进行对比得到第二对比结果，将所述第二对比结果发送至所述第二客户端；
测试结果获取模块，用于根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
可选的，所述校验值计算处理为MD5值计算处理。
本申请还提供一种服务器，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上所述的一致性测试方法的步骤。
本申请还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的一致性测试方法的步骤。
本申请所提供的一种分布式文件系统的一致性测试方法，包括：第一客户端写入预设大小的测试数据，对所述测试数据进行校验值计算处理，得到第一校验值；将所述第一校验值发送至第二客户端，以使所述第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果，并将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值，将所述第三校验值发送至所述第一客户端；读取所述第二客户端的修改数据，对所述修改数据进行校验值计算处理，得到第四校验值；将所述第三校验值和所述第四校验值进行对比得到第二对比结果，根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
通过将测试数据在两个客户端中进行交互传输，也就是第二客户端读取第一客户端的数据，第一客户端读取第二客户端的数据，实现了在读取过程中对分布式集群底层逻辑的调用，也就是在测试过程中可以测试出底层逻辑对一致性的影响，使得一致性测试更加全面，提高了一致性测试的测试效度，可以用更少次数的测试更多的系统逻辑。
本申请还提供另一种分布式文件系统的一致性测试方法、两种一致性测试系统、服务器以及计算机可读存储介质，具体上述有益效果，在此不再赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例所提供的一种分布式文件系统的一致性测试方法的流程图；
图2为本申请实施例所提供的另一种分布式文件系统的一致性测试方法的流程图；
图3为本申请实施例所提供的一种分布式文件系统的一致性测试系统的结构示意图；
图4为本申请实施例所提供的另一种分布式文件系统的一致性测试系统的结构示意图。
具体实施方式
本申请的核心是提供一种分布式文件系统的一致性测试方法、另一种分布式文件系统的一致性测试方法、两种一致性测试系统、服务器以及计算机可读存储介质，通过在一致性测试中加入第一客户端与第二客户端之间的数据交互，使得在测试过程中调用底层逻辑，也就是更加全面的进行一致性测试，提高一致性测试的效度。
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
现有技术中为了保持数据存储的一致性，需要对分布式存储系统进行一致性测试。但是，现有技术一般使用通用的测试软件进行测试，也就是只对系统的客户端进行单独的测试，无法覆盖到分布式系统的所有模块，导致对分布式集群系统测试无法测试到系统的底层逻辑，导致一致性测试不够全面，无法显现出底层逻辑对数据一致性的影响。
因此，本实施例通过将测试数据在两个客户端中进行交互传输，也就是第二客户端读取第一客户端的数据，第一客户端读取第二客户端的数据，实现了在读取过程中对分布式集群底层逻辑的调用，也就是在测试过程中可以测试出底层逻辑对一致性的影响，使得一致性测试更加全面，提高了一致性测试的测试效度，可以用更少次数的测试更多的系统逻辑。
具体的，请参考图1，图1为本申请实施例所提供的一种分布式文件系统的一致性测试方法的流程图。
该方法可以包括：
S101，第一客户端写入预设大小的测试数据，对测试数据进行校验值计算处理，得到第一校验值；
本步骤旨在对第一客户端写入预设大小的测试数据，并对该测试数据进行校验值计算处理，得到第一校验值。
其中，预设大小可以根据实际应用的环境进行设定，例如在本实施例将测试数据的大小设定为100MB，在此不做具体限定。
S102，将第一校验值发送至第二客户端，以使第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将第一校验值和第二校验值进行对比得到第一对比结果，并将测试数据进行修改得到修改数据，对修改数据进行校验值计算处理得到第三校验值，将第三校验值发送至第一客户端；
在步骤S101的基础上，本步骤旨在将计算得到的第一校验值发送至第二客户端，使得第二客户端从第一客户端读取到测试数据，进行校验值对比，得到第一对比结果。
在一般的一致性测试中，只是在单独的客户端中对数据进行读取实现一致性测试。而往往在现有一致性测试的测试力度并不高，无法将更加底层的逻辑问题测试出来。主要是因为在同一个客户端中进行数据读取的过程，无法调用分布式系统的底层逻辑，因此测试力度较低。
本步骤中实现将第二客户端读取到第一客户端的数据，再进行校验值对比。在第二客户端读取第一客户端的数据时，可以调用到分布式系统的底层逻辑，从而实现对底层逻辑的一致性测试，提高了一致性测试的深度，增加了一致性测试的测试力度。
进一步的，本步骤中第二客户端还将测试数据进行修改得到修改数据，并进行校验值计算得到第三校验值，将第三校验值发送至第一客户端。
S103，读取第二客户端的修改数据，对修改数据进行校验值计算处理，得到第四校验值；
在步骤S102的基础上，本步骤旨在第一客户端读取第二客户端的数据，也就是读取修改数据，进行校验值计算操作得到第四校验值。
S104，将第三校验值和第四校验值进行对比得到第二对比结果，根据第一对比结果和第二对比结果确定一致性测试的测试结果。
在步骤S103的基础上，本步骤旨在得到第二对比结果，并根据第一对比结果和第二对比结果确定一致性测试的测试结果。
本实施例中所进行的校验值计算可以是MD5值计算处理，相应的得到的校验值为ND5值。
综上，本实施例通过将测试数据在两个客户端中进行交互传输，也就是第二客户端读取第一客户端的数据，第一客户端读取第二客户端的数据，实现了在读取过程中对分布式集群底层逻辑的调用，也就是在测试过程中可以测试出底层逻辑对一致性的影响，使得一致性测试更加全面，提高了一致性测试的测试效度，可以用更少次数的测试更多的系统逻辑。
上一实施例是在第一客户端的角度说明该一致性测试方法，基于该实施例，本实施例提供一种在第二客户端的角度说明的一致性测试方法。
具体的，请参考图2，图2为本申请实施例所提供的另一种分布式文件系统的一致性测试方法的流程图。
该方法可以包括：
S201，当第二客户端接收到第一客户端发送的第一校验值时，第二客户端读取第一客户端中与第一校验值对应的测试数据；
本步骤旨在当第二客户端接收到第一客户端发送的第一校验值时，第二客户端读取对应的测试数据。本步骤旨在实现两个客户端之间的数据交互过程，使得在数据调用的过程中调用分布式存储系统的底层逻辑。实现对底层逻辑的一致性测试。
其中，第一校验值为第一客户端对测试数据进行校验值计算得到。
S202，对测试数据进行校验值计算处理得到第二校验值，将第一校验值和第二校验值进行对比得到第一对比结果；
在步骤S201的基础上，本步骤旨在对测试数据进行校验值计算得到第二校验值，并且将第一校验值与第二校验值进行对比得到第一对比结果。本步骤也就是第二客户端将与第一客户端相同的测试数据进行对比，对比的方式就是通过校验值实现。如果，第一校验值和第二校验值不相同，则第一对比结果则为对比不通过，如果第二校验值和第一校验值相同，则第一对比结果为对比通过。相同或不相同两种状态反映了一致性测试的结果，也就是可以判断得到存储系统的一致性的性能。
S203，将测试数据进行修改得到修改数据，对修改数据进行校验值计算处理得到第三校验值；
在步骤S202的基础上，本步骤旨在在第二客户端得到新的数据，也就是修改数据。并且对修改数据进行校验值计算得到第三校验值。
S204，将第三校验值发送至第一客户端，以使第一客户端读取修改数据，对修改数据进行校验值计算处理得到第四校验值，将第三校验值和第四校验值进行对比得到第二对比结果，将第二对比结果发送至第二客户端；
在步骤S203的基础上，本步骤旨在将第三校验值发送至第一客户端时。第一客户端读取第二客户端的数据，实现第二轮的数据校验。也就是第二客户端读取第一客户端的数据，进行校验无法全面的调动底层逻辑，还需要第一客户端读取第二客户端的数据，进行校验实现对等的校验过程，全面调动存储系统的底层逻辑，提高一致性测试的效度。
S205，根据第一对比结果和第二对比结果确定一致性测试的测试结果。
在步骤S204的基础上，本步骤旨在根据第一对比结果和第二对比结果确定本实施例的一致性测试的测试结果。
本申请实施例提供了一种分布式文件系统的一致性测试方法，可以通过将测试数据在两个客户端中进行交互传输，也就是第二客户端读取第一客户端的数据，第一客户端读取第二客户端的数据，实现了在读取过程中对分布式集群底层逻辑的调用，也就是在测试过程中可以测试出底层逻辑对一致性的影响，使得一致性测试更加全面，提高了一致性测试的测试效度，可以用更少次数的测试更多的系统逻辑。
基于以上所有实施例，本申请还可以提供一个更具体的应用实施例。
首先，搭建测试环境。三个节点组成分布式文件系统集群，数据和元数据均为三副本，集群可以保证宕掉任意一个节点都不影响文件系统的可用性，同时也不影响客户端读写业务的准确性。然后，在每个节点上启动NFS服务，NFS服务是分布式文件系统的客户端，负责与分布式文件系统通信，并提供NFS共享服务，NFS客户端可以与NFS服务通信，写入的文件最终保存到分布式文件系统中。同时，为了保证NFS服务的高可用，在每个节点上启动虚拟ip服务，从而当NFS服务所在的节点宕机时，NFS客户端上的业务可以切换到其他正常节点上。
分布式文件系统的搭建主要包括以下几个步骤：
步骤一、启动三节点的分布式文件系统集群；
步骤二、在每个节点上都启动虚拟ip服务、NFS服务，所有的NFS服务导出相同的目录；
步骤三、两个NFS客户端节点通过不同的虚拟ip挂载NFS导出目录，即对应不同的NFS服务节点。
一致性测试的过程包括以下步骤：
步骤一、在NFS客户端1和客户端2上均安装测试软件，测试方式为读写100MB的大文件，块大小为1MB，文件个数根据需求设置。
步骤二、针对每个文件的每个数据块，在NFS客户端A上写入，并将md5值发到NFS客户端B，同时，在客户端B上读取该数据块，比对md5值，然后修改此数据块，并将md5值发到客户端A，然后在客户端A上再次比对此数据块。
步骤三、在整个测试过程中，可以进行单节点宕机测试，从而测试分布式文件系统的稳定性。某个节点宕机后，其中一个NFS客户端(如客户端1)的业务会切换到另外一个正常的节点上，可能与客户端2同时访问一个NFS服务，可能仍然访问不同的NFS服务，这种测试方式对NFS服务和分布式文件系统的可靠性要求很高。如果出现数据不一致的问题，则比对不同场景下的测试结果即可，首先保证宕机后不同的NFS客户端对应相同的NFS服务端的数据准确性，然后保证宕机后不同的NFS客户端对应不同的NFS服务端的数据准确性。
下面对本申请实施例提供的一种分布式文件系统的一致性测试系统进行介绍，下文描述的一种分布式文件系统的一致性测试系统与上文描述的一种分布式文件系统的一致性测试方法可相互对应参照。
具体的，请参考图3，图3为本申请实施例所提供的一种分布式文件系统的一致性测试系统的结构示意图。
该系统可以包括：
测试数据校验模块110，用于写入预设大小的测试数据，对测试数据进行校验值计算处理，得到第一校验值；
数据修改模块120，用于将第一校验值发送至第二客户端，以使第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将第一校验值和第二校验值进行对比得到第一对比结果，并将测试数据进行修改得到修改数据，对修改数据进行校验值计算处理得到第三校验值，将第三校验值发送至第一客户端；
修改数据校验模块130，用于读取第二客户端的修改数据，对修改数据进行校验值计算处理，得到第四校验值；
测试结果获取模块140，用于将第三校验值和第四校验值进行对比得到第二对比结果，根据第一对比结果和第二对比结果确定一致性测试的测试结果。
可选的，校验值计算处理为MD5值计算处理。
本申请实施例还提供另一种分布式文件系统的一致性测试系统。
具体的，请参考图4，图4为本申请实施例所提供的另一种分布式文件系统的一致性测试系统的结构示意图。
第一校验值获取模块210，用于接收到第一客户端发送的第一校验值时，第二客户端读取第一客户端中与第一校验值对应的测试数据；
第一对比模块220，用于对测试数据进行校验值计算处理得到第二校验值，将第一校验值和第二校验值进行对比得到第一对比结果；
数据修改模块230，用于将测试数据进行修改得到修改数据，对修改数据进行校验值计算处理得到第三校验值；
第二对比模块240，用于将第三校验值发送至第一客户端，以使第一客户端读取修改数据，对修改数据进行校验值计算处理得到第四校验值，将第三校验值和第四校验值进行对比得到第二对比结果，将第二对比结果发送至第二客户端；
测试结果获取模块250，用于根据第一对比结果和第二对比结果确定一致性测试的测试结果。
可选的，校验值计算处理为MD5值计算处理。
本申请实施例还提供一种服务器，包括：
存储器，用于存储计算机程序；
处理器，用于执行计算机程序时实现如以上实施例的一致性测试方法的步骤。
本申请实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如以上实施例的一致性测试方法的步骤。
该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本申请所提供的一种分布式文件系统的一致性测试方法、另一种分布式文件系统的一致性测试方法、两种一致性测试系统、服务器以及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。
Claims (10)
1.一种分布式文件系统的一致性测试方法，其特征在于，包括：
第一客户端写入预设大小的测试数据，对所述测试数据进行校验值计算处理，得到第一校验值；
将所述第一校验值发送至第二客户端，以使所述第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果，并将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值，将所述第三校验值发送至所述第一客户端；
读取所述第二客户端的修改数据，对所述修改数据进行校验值计算处理，得到第四校验值；
将所述第三校验值和所述第四校验值进行对比得到第二对比结果，根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
2.根据权利要求1所述的一致性测试方法，其特征在于，所述校验值计算处理为MD5值计算处理。
3.一种分布式文件系统的一致性测试方法，其特征在于，包括：
当第二客户端接收到第一客户端发送的第一校验值时，所述第二客户端读取所述第一客户端中与所述第一校验值对应的测试数据；
对所述测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果；
将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值；
将所述第三校验值发送至所述第一客户端，以使所述第一客户端读取所述修改数据，对所述修改数据进行校验值计算处理得到第四校验值，将所述第三校验值和所述第四校验值进行对比得到第二对比结果，将所述第二对比结果发送至所述第二客户端；
根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
4.根据权利要求3所述的一致性测试方法，其特征在于，所述校验值计算处理为MD5值计算处理。
5.一种分布式文件系统的一致性测试系统，其特征在于，包括：
测试数据校验模块，用于写入预设大小的测试数据，对所述测试数据进行校验值计算处理，得到第一校验值；
数据修改模块，用于将所述第一校验值发送至第二客户端，以使所述第二客户端对读取到的测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果，并将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值，将所述第三校验值发送至所述第一客户端；
修改数据校验模块，用于读取所述第二客户端的修改数据，对所述修改数据进行校验值计算处理，得到第四校验值；
测试结果获取模块，用于将所述第三校验值和所述第四校验值进行对比得到第二对比结果，根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
6.根据权利要求5所述的一致性测试系统，其特征在于，所述校验值计算处理为MD5值计算处理。
7.一种分布式文件系统的一致性测试系统，其特征在于，包括：
第一校验值获取模块，用于接收到第一客户端发送的第一校验值时，所述第二客户端读取所述第一客户端中与所述第一校验值对应的测试数据；
第一对比模块，用于对所述测试数据进行校验值计算处理得到第二校验值，将所述第一校验值和所述第二校验值进行对比得到第一对比结果；
数据修改模块，用于将所述测试数据进行修改得到修改数据，对所述修改数据进行校验值计算处理得到第三校验值；
第二对比模块，用于将所述第三校验值发送至所述第一客户端，以使所述第一客户端读取所述修改数据，对所述修改数据进行校验值计算处理得到第四校验值，将所述第三校验值和所述第四校验值进行对比得到第二对比结果，将所述第二对比结果发送至所述第二客户端；
测试结果获取模块，用于根据所述第一对比结果和所述第二对比结果确定一致性测试的测试结果。
8.根据权利要求7所述的一致性测试系统，其特征在于，所述校验值计算处理为MD5值计算处理。
9.一种服务器，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至4任一项所述的一致性测试方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述的一致性测试方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810699149.1A CN108875061A (zh) | 2018-06-29 | 2018-06-29 | 一种分布式文件系统的一致性测试方法及相关装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810699149.1A CN108875061A (zh) | 2018-06-29 | 2018-06-29 | 一种分布式文件系统的一致性测试方法及相关装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108875061A true CN108875061A (zh) | 2018-11-23 |
Family
ID=64297445
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810699149.1A Pending CN108875061A (zh) | 2018-06-29 | 2018-06-29 | 一种分布式文件系统的一致性测试方法及相关装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108875061A (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110059068A (zh) * | 2019-04-11 | 2019-07-26 | 厦门网宿有限公司 | 一种分布式存储系统中的数据校验方法及数据校验系统 |
| CN111159024A (zh) * | 2019-12-22 | 2020-05-15 | 北京浪潮数据技术有限公司 | 一种远程复制一致性组的测试方法、测试装置及测试设备 |
| CN111176885A (zh) * | 2019-12-31 | 2020-05-19 | 浪潮电子信息产业股份有限公司 | 一种分布式存储系统的数据校验方法及相关装置 |
| CN112395181A (zh) * | 2019-08-13 | 2021-02-23 | 福建天泉教育科技有限公司 | 一种元数据异地多活及时性的测试系统及其测试方法 |
| CN113839839A (zh) * | 2021-10-22 | 2021-12-24 | 武汉天喻信息产业股份有限公司 | 一种多线程并发通信的测试方法及系统 |
| CN114401147A (zh) * | 2022-01-20 | 2022-04-26 | 山西晟视汇智科技有限公司 | 一种基于摘要算法的新能源电站通讯报文比对方法及系统 |
| CN115225535A (zh) * | 2022-07-27 | 2022-10-21 | 济南浪潮数据技术有限公司 | 一种云平台的一致性检测方法及相关组件 |
| US11983147B2 (en) | 2021-06-02 | 2024-05-14 | International Business Machines Corporation | Deduplicating data integrity checks across systems |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2434591A1 (en) * | 2003-07-08 | 2005-01-08 | Bluecelebro 802 Inc. | Method and system for authentication in a network system |
| CN102932332A (zh) * | 2012-09-28 | 2013-02-13 | 用友软件股份有限公司 | 数据校验系统和数据校验方法 |
| CN106209513A (zh) * | 2016-07-12 | 2016-12-07 | 积成电子股份有限公司 | 基于并发模式的iec 61850多客户端实现方法 |
| CN106850566A (zh) * | 2016-12-29 | 2017-06-13 | 北京奇艺世纪科技有限公司 | 一种数据一致性校验的方法及装置 |
| CN107315668A (zh) * | 2017-06-26 | 2017-11-03 | 郑州云海信息技术有限公司 | 分布式存储系统数据一致性自动化快速检测方法及装置 |
| CN107590062A (zh) * | 2016-07-06 | 2018-01-16 | 阿里巴巴集团控股有限公司 | 一种多客户端交互的测试方法和装置 |
| CN107797881A (zh) * | 2017-12-06 | 2018-03-13 | 郑州云海信息技术有限公司 | 一种数据一致性测试方法、装置、设备及存储介质 |
-
2018
- 2018-06-29 CN CN201810699149.1A patent/CN108875061A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2434591A1 (en) * | 2003-07-08 | 2005-01-08 | Bluecelebro 802 Inc. | Method and system for authentication in a network system |
| CN102932332A (zh) * | 2012-09-28 | 2013-02-13 | 用友软件股份有限公司 | 数据校验系统和数据校验方法 |
| CN107590062A (zh) * | 2016-07-06 | 2018-01-16 | 阿里巴巴集团控股有限公司 | 一种多客户端交互的测试方法和装置 |
| CN106209513A (zh) * | 2016-07-12 | 2016-12-07 | 积成电子股份有限公司 | 基于并发模式的iec 61850多客户端实现方法 |
| CN106850566A (zh) * | 2016-12-29 | 2017-06-13 | 北京奇艺世纪科技有限公司 | 一种数据一致性校验的方法及装置 |
| CN107315668A (zh) * | 2017-06-26 | 2017-11-03 | 郑州云海信息技术有限公司 | 分布式存储系统数据一致性自动化快速检测方法及装置 |
| CN107797881A (zh) * | 2017-12-06 | 2018-03-13 | 郑州云海信息技术有限公司 | 一种数据一致性测试方法、装置、设备及存储介质 |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110059068A (zh) * | 2019-04-11 | 2019-07-26 | 厦门网宿有限公司 | 一种分布式存储系统中的数据校验方法及数据校验系统 |
| CN112395181A (zh) * | 2019-08-13 | 2021-02-23 | 福建天泉教育科技有限公司 | 一种元数据异地多活及时性的测试系统及其测试方法 |
| CN111159024A (zh) * | 2019-12-22 | 2020-05-15 | 北京浪潮数据技术有限公司 | 一种远程复制一致性组的测试方法、测试装置及测试设备 |
| CN111159024B (zh) * | 2019-12-22 | 2022-04-22 | 北京浪潮数据技术有限公司 | 一种远程复制一致性组的测试方法、测试装置及测试设备 |
| CN111176885A (zh) * | 2019-12-31 | 2020-05-19 | 浪潮电子信息产业股份有限公司 | 一种分布式存储系统的数据校验方法及相关装置 |
| US11983147B2 (en) | 2021-06-02 | 2024-05-14 | International Business Machines Corporation | Deduplicating data integrity checks across systems |
| CN113839839A (zh) * | 2021-10-22 | 2021-12-24 | 武汉天喻信息产业股份有限公司 | 一种多线程并发通信的测试方法及系统 |
| CN113839839B (zh) * | 2021-10-22 | 2023-05-09 | 武汉天喻信息产业股份有限公司 | 一种多线程并发通信的测试方法及系统 |
| CN114401147A (zh) * | 2022-01-20 | 2022-04-26 | 山西晟视汇智科技有限公司 | 一种基于摘要算法的新能源电站通讯报文比对方法及系统 |
| CN114401147B (zh) * | 2022-01-20 | 2024-02-20 | 山西晟视汇智科技有限公司 | 一种基于摘要算法的新能源电站通讯报文比对方法及系统 |
| CN115225535A (zh) * | 2022-07-27 | 2022-10-21 | 济南浪潮数据技术有限公司 | 一种云平台的一致性检测方法及相关组件 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108875061A (zh) | 一种分布式文件系统的一致性测试方法及相关装置 | |
| CN106201338B (zh) | 数据存储方法及装置 | |
| US20210049715A1 (en) | Blockchain-based data procesing method, apparatus, and electronic device | |
| CN103778030B (zh) | 日志子系统写入方法、错误追踪方法及处理器 | |
| US9823997B2 (en) | Production resiliency testing system | |
| CN107480039A (zh) | 一种分布式存储系统的小文件读写性能测试方法及装置 | |
| US10671506B2 (en) | Evaluating fairness in devices under test | |
| US11442636B2 (en) | Method, apparatus for managing the redundant array of independent disks (RAID) and related computer readable medium | |
| CN111723020A (zh) | 一种电能表测试软件的测试方法、装置及其设备 | |
| CN105183641B (zh) | 一种内核模块的数据一致性校验方法及系统 | |
| US11853284B2 (en) | In-place updates with concurrent reads in a decomposed state | |
| CN115408730A (zh) | 数据处理方法、芯片、电子设备及存储介质 | |
| CN107704568A (zh) | 一种测试数据添加的方法及装置 | |
| CN108846053A (zh) | 数据副本管理方法、装置、设备、系统及可读存储介质 | |
| CN110362569A (zh) | 数据表的校验方法及装置、电子设备、存储介质 | |
| CN110990207B (zh) | 基于Whitley平台的BPS内存测试方法、系统、终端及存储介质 | |
| CN110442474A (zh) | 一种数据一致性验证方法、系统及数据验证端 | |
| CN116382582A (zh) | 一种raid重映射方法、系统、设备以及存储介质 | |
| CN107704548A (zh) | 一种存储介质和对象数据的存储方法、装置及设备 | |
| US11341159B2 (en) | In-stream data load in a replication environment | |
| US12008017B2 (en) | Replicating data across databases by utilizing validation functions for data completeness and sequencing | |
| US20160041900A1 (en) | Testing integrated business systems | |
| CN113538147B (zh) | 股权详情数据生成方法、装置及电子设备 | |
| CN110018784A (zh) | 数据处理方法、装置及计算设备 | |
| CN107870839A (zh) | 一种存储设备测试方法、系统及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181123 |