CN105631042B - 一种数据验重的方法和装置 - Google Patents

一种数据验重的方法和装置 Download PDF

Info

Publication number
CN105631042B
CN105631042B CN201610051295.4A CN201610051295A CN105631042B CN 105631042 B CN105631042 B CN 105631042B CN 201610051295 A CN201610051295 A CN 201610051295A CN 105631042 B CN105631042 B CN 105631042B
Authority
CN
China
Prior art keywords
data
server
tested
setting
judging result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610051295.4A
Other languages
English (en)
Other versions
CN105631042A (zh
Inventor
王石磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201610051295.4A priority Critical patent/CN105631042B/zh
Publication of CN105631042A publication Critical patent/CN105631042A/zh
Application granted granted Critical
Publication of CN105631042B publication Critical patent/CN105631042B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1456—Hardware arrangements for backup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/11—File system administration, e.g. details of archiving or snapshots
    • G06F16/113—Details of archiving

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提供一种数据验重的方法和装置，能够避免单独使用缓存服务器检验数据重复时不便查询和操作的问题，同时解决了海量数据的存储问题，提高了数据去重的准确性和高效性。本发明的方法包括接收待检验数据，并将数据发送给第一服务器；然后接收第一服务器返回的判断结果，当判断结果表明数据已存在于第一服务器时，输出用于表示数据为重复数据的提示信息；否则，将数据发送给第二服务器；然后接收第二服务器返回的判断结果，当判断结果表明数据已存在于第二服务器时，输出用于表示数据为重复数据的提示信息，并将数据保存在所述第一服务器中；否则，输出数据为非重复数据的提示信息，并将数据存储于第二服务器中，以及将数据保存在第一服务器中。

Description

一种数据验重的方法和装置
技术领域
本发明涉及计算机及其软件技术领域，尤其涉及一种数据验重的方法和装置。
背景技术
当前互联网的系统都会面对数据重复接收的情况，根据不同的业务情况，重复数据造成的影响或大或小。大部分的系统都会采用缓存机制来验证数据是否重复。
现有的验证数据是否重复的方法，主要是通过redis服务器来实现的。每次需要验证数据时，调用redis服务器来判断待验证的数据是否已存在，如果已存在则返回该数据相关的信息，否则返回空，并存放此数据。具体的步骤如下：
a)调用redis服务器的api方法，将需要验证的数据传递到redis服务器；
b)如果该数据已存在于redis服务器上，则redis服务器返回该数据相关的信息；
c)如果该数据未存在于redis服务器上，则redis服务器返回空；
d)业务代码根据判断该数据不存在时，将调用redis的api方法,将该数据存放到redis服务器。
现有技术主要存在以下缺点：
1.内存的容量有限。内存的容量无法和硬盘的容量相比，现有redis的最大申请容量为32G，而申请的服务器的硬盘容量远远大于32G；
2.缓存的数据不方便查询和操作。查询redis的数据，首先需要知道数据存放的结构，再编写对应的代码，才能进行查询或是遍例。
3.内存在掉电时内容会丢失。最简单的例子就是，电脑正常关机后，内存中的数据全部丢失。
发明内容
有鉴于此，本发明提供一种数据验重的方法和装置，能够避免单独使用缓存服务器检验数据重复时不方便查询和操作的问题，同时由于本发明技术方案可以将缓存服务器中的数据存储于另一个增加的服务器中，因而解决海量数据的存储问题，也避免了由于关机或者断电而引起的数据丢失的问题，最终提高了数据去重的准确性和高效性。
为实现上述目的，根据本发明的一个方面，提供了一种数据验重的方法。
本发明的数据验重的方法，包括：接收待检验数据，并将待检验数据发送给第一服务器，以供第一服务器判断该待检验数据是否已经存在于第一服务器中；接收所述第一服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第一服务器时，输出用于表示所述待检验数据为重复数据的提示信息；否则，将待检验数据发送给第二服务器，以供第二服务器判断该待检验数据是否已经存在于第二服务器中；接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，输出用于表示所述待检验数据为重复数据的提示信息，并且将所述待检验数据保存在所述第一服务器中；否则，输出所述待检验数据为非重复数据的提示信息，并且将所述待检验数据存储于所述第二服务器中，以及将所述待检验数据保存在所述第一服务器中。
可选地，输出用于表示所述待检验数据为重复数据的提示信息的步骤之后包括：在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长；并且将所述待检验数据保存在所述第一服务器中的步骤包括：每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
可选地，将所述待检验数据存储于所述第二服务器中的步骤之后包括：在第二服务器中设定所述待检验数据的失效时长；并且将所述待检验数据保存在所述第一服务器中的步骤包括：每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
可选地，将获取到的数据提交给第一服务器的步骤之后包括：接收第一服务器所返回的数据提交的反馈信息，如果反馈信息表示数据被第一服务器成功接收，则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效；否则，重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
可选地，所述第一服务器包括：elasticsearch服务器或solr服务器；所述第二服务器包括：redis服务器。
根据本发明的另一方面，提供一种数据验重的装置。
本发明的数据验重的装置，包括：接收模块，用于接收待检验数据，并将待检验数据发送给第一服务器，以供第一服务器判断该待检验数据是否已经存在于第一服务器中；第一输出模块，用于接收所述第一服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第一服务器时，输出用于表示所述待检验数据为重复数据的提示信息；否则，将待检验数据发送给第二服务器，以供第二服务器判断该待检验数据是否已经存在于第二服务器中；第二输出模块，用于接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，输出用于表示所述待检验数据为重复数据的提示信息，并且将所述待检验数据保存于所述第一服务器中；否则，输出所述待检验数据为非重复数据的提示信息，并且将所述待检验数据存储于所述第二服务器中，以及将所述待检验数据保存在所述第一服务器中。
可选地，还包括第一设定模块，用于在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长；并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
可选地，还包括第二设定模块，用于在第二服务器中设定所述待检验数据的失效时长；并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
可选地，还包括判断模块，用于接收第一服务器所返回的数据提交的反馈信息，如果反馈信息表示数据被第一服务器成功接收，则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效；否则，重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
可选地，所述第一服务器包括：elasticsearch服务器或solr服务器；所述第二服务器包括：redis服务器。
根据本发明的技术方案，主要通过新增服务器与缓存服务器同时对数据进行验证，因而能够避免单独使用缓存服务器检验数据重复时不方便查询和操作的问题；同时，由于可以将缓存服务器中的数据存储于所增加的服务器中，因而解决了缓存服务器因存储容量限制而导致的海量数据的存储问题，也避免了由于关机或者断电而引起的数据丢失的问题，最终提高了数据去重的准确性和高效性。
附图说明
附图用于更好地理解本发明，不构成对本发明的不当限定。其中：
图1是根据本发明实施例的一种数据验重的装置的示意图；
图2是根据本发明实施例的一种数据验重的方法的示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
图1是根据本发明实施例的一种数据验重的装置的示意图。如图1所示，本发明实施例的数据验重的装置10主要包括接收模块11、第一输出模块12、以及第二输出模块13；接收模块11用于接收待检验数据，并将待检验数据发送给第一服务器，以供第一服务器判断该待检验数据是否已经存在于第一服务器中；第一输出模块12用于接收所述第一服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第一服务器时，输出用于表示所述待检验数据为重复数据的提示信息；否则，将待检验数据发送给第二服务器，以供第二服务器判断该待检验数据是否已经存在于第二服务器中；第二输出模块13用于接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，输出用于表示所述待检验数据为重复数据的提示信息，并且将所述待检验数据保存在所述第一服务器中；否则，输出所述待检验数据为非重复数据的提示信息，并且将所述待检验数据存储于所述第二服务器中，以及将所述待检验数据保存在所述第一服务器中。
本发明实施例的数据验重的装置10还可包括第一设定模块(图中未示出)，用于在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长；并且所述第二输出模块13还用于每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
本发明实施例的数据验重的装置10还可包括第二设定模块(图中未示出)，用于在第二服务器中设定所述待检验数据的失效时长；并且所述第二输出模块13还用于每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
本发明实施例的数据验重的装置10还可包括判断模块(图中未示出)，用于接收第一服务器所返回的数据提交的反馈信息，如果反馈信息标识数据被第一服务器成功接收，则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效；否则，重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据；所述第一服务器可以是elasticsearch服务器或solr服务器；所述第二服务器可以是redis服务器。
图2是根据本发明实施例的一种数据验重的方法的示意图。如图2所示，该方法的执行主体为图1中所提到的数据验重的装置10，在该实施例中，以elasticsearch服务器作为第一服务器，以redis服务器作为第二服务器对本发明实施例的技术方案做详细说明，该方法主要包括步骤S20至S26。
步骤S20：接收待检验数据，并将待检验数据发送给第一服务器，以供第一服务器判断该待检验数据是否已经存在于第一服务器中。在该步骤中，数据验重的装置10接收外部应用所发送的待检验数据，再将待检验数据发送给elasticsearch服务器，elasticsearch服务器在收到数据验重的装置10发送的数据后，判断该数据是否已经存在于elasticsearch服务器中，并将判断的结果返回给数据验重的装置10。
步骤S21：接收所述第一服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第一服务器时，执行步骤S22；否则，执行步骤S23。在步骤S21中，数据验重的装置10接收elasticsearch服务器所返回的数据的判断结果。
步骤S22：输出用于表示所述待检验数据为重复数据的提示信息。当步骤S21中的判断结果表示待检验数据为重复数据时，数据验重的装置10输出该数据为重复数据的提示信息，例如：该数据已经存在。
步骤S23：将待检验数据发送给第二服务器，以供第二服务器判断该待检验数据是否已经存在于第二服务器中。当步骤S21中的判断结果表示待检验数据为非重复数据时，则表示待检验数据在elasticsearch服务器中是为非重复数据，此时，数据验重的装置10将待检验数据发送给redis服务器进行第二次验证，redis接收到数据验重的装置10所发送的数据后判断该数据是否已经存在于redis服务器中，然后将判断的结果返回给数据验重的装置10。
步骤S24：接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，执行步骤S25；否则，执行步骤S26。在步骤S24中，数据验重的装置10接收redis服务器所返回的待检验数据的判断结果。
步骤S25：输出用于表示所述待检验数据为重复数据的提示信息，并且将所述待检验数据存储于所述第一服务器中。当步骤S24中数据验重的装置10接收到的判断结果显示该待验数据为重复数据时，数据验重的装置10输出该数据为重复数据的提示信息，然后数据验重的装置10在redis服务器中为已存在于redis服务器中的所述待检验数据设定失效时长(假设失效时长为5分钟)，并每隔设定的时间周期(假设时间周期为3分钟)获取所述redis服务器中的待检验数据，并将获取到的数据提交给第一服务器；在此，所述设定的时间周期小于所述待检验数据的失效时长；然后数据验重的装置10接收elasticsearch服务器所返回的数据提交的反馈信息，如果反馈信息表示elasticsearch服务器成功接收数据验重的装置10所提交的数据，则缩短所述redis服务器中的待检验数据的失效时长(例如，将redis服务器中待检验数据的失效时长缩短为1分钟)，以使待检测数据在1分钟内失效；如果elasticsearch服务器所返回给数据验重的装置10的反馈信息表示elasticsearch服务器数据接收失败，那么数据验重的装置10重置所述redis服务器中的待检验数据的失效时长(即将所述数据的失效时长重置为5分钟)，然后在下个时间周期获取所述待检验数据，直到elasticsearch服务器成功接收所述数据验重的装置10所提交的数据。Redis服务器中存在该数据，而elasticsearch服务器中没有，说明是由于异常原因(比如网络阻塞等)导致了elasticsearch服务器未存储该数据。
步骤S26：输出所述待检验数据为非重复数据的提示信息，并且将所述待检验数据存储于所述第二服务器中，以及将所述待检验数据保存在所述第一服务器中。当步骤S24中数据验重的装置10接收到的判断结果显示该待验数据为非重复数据时，数据验重的装置10输出该数据为非重复数据的提示信息，然后数据验重的装置10将所述待检验数据存储于redis服务器中，再为redis服务器中的所述待检验数据设定失效时长(假设失效时长为5分钟)，并且每隔设定的时间周期(假设时间周期为3分钟)获取所述redis服务器中的待检验数据，并将获取到的数据提交给第一服务器；在此，所述设定的时间周期小于所述待检验数据的失效时长；然后数据验重的装置10接收elasticsearch服务器所返回的数据提交的反馈信息，如果反馈信息表示elasticsearch服务器成功接收数据验重的装置10所提交的数据，则缩短所述redis服务器中的待检验数据的失效时长(例如，将redis服务器中待检验数据的失效时长缩短为1分钟)，以使待检测数据在1分钟内失效；如果elasticsearch服务器所返回给数据验重的装置10的反馈信息表示数据接收失败，那么数据验重的装置10重置所述redis服务器中的待检验数据的失效时长(即将所述数据的失效时长重置为5分钟)，然后在下个时间周期获取所述待检验数据，直到elasticsearch服务器成功接收所述数据验重的装置10所提交的数据。
在本发明实施例的技术方案中，elasticsearch服务器也可以由solr服务器或者其他服务器所代替，只要同时替换对应于不同服务器的数据验重的装置即可。
根据本发明实施例的技术方案，主要通过新增服务器与缓存服务器同时对数据进行验证，因而能够避免单独使用缓存服务器检验数据重复时不方便查询和操作的问题；同时，由于可以将缓存服务器中的数据存储于所增加的服务器中，因而解决了缓存服务器因存储容量限制而导致的海量数据的存储问题，也避免了由于关机或者断电而引起的数据丢失的问题，最终提高了数据去重的准确性和高效性。
上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (10)

1.一种数据验重的方法，其特征在于，包括：
接收待检验数据，并将待检验数据发送给第一服务器，以供第一服务器判断该待检验数据是否已经存在于第一服务器中；
接收所述第一服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第一服务器时，输出用于表示所述待检验数据为重复数据的提示信息；否则，将待检验数据发送给第二服务器，以供第二服务器判断该待检验数据是否已经存在于第二服务器中；
接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，输出用于表示所述待检验数据为重复数据的提示信息，并且将所述待检验数据保存在所述第一服务器中；否则，输出所述待检验数据为非重复数据的提示信息，并且将所述待检验数据存储于所述第二服务器中，以及将所述待检验数据保存在所述第一服务器中；
其中，所述第二服务器为缓存服务器。
2.根据权利要求1所述的方法，其特征在于，接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，输出用于表示所述待检验数据为重复数据的提示信息的步骤之后包括：在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长；
并且将所述待检验数据保存在所述第一服务器中的步骤包括：每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
3.根据权利要求1所述的方法，其特征在于，将所述待检验数据存储于所述第二服务器中的步骤之后包括：在第二服务器中设定所述待检验数据的失效时长；
并且将所述待检验数据保存在所述第一服务器中的步骤包括：每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
4.根据权利要求2或3所述的方法，其特征在于，将获取到的数据提交给第一服务器的步骤之后包括：接收第一服务器所返回的数据提交的反馈信息，如果反馈信息表示数据被第一服务器成功接收，则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效；否则，重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
5.根据权利要求1至3中任一项所述的方法，其特征在于，所述第一服务器包括：elasticsearch服务器或solr服务器；所述第二服务器包括：redis服务器。
6.一种数据验重的装置，其特征在于，包括：
接收模块，用于接收待检验数据，并将待检验数据发送给第一服务器，以供第一服务器判断该待检验数据是否已经存在于第一服务器中；
第一输出模块，用于接收所述第一服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第一服务器时，输出用于表示所述待检验数据为重复数据的提示信息；否则，将待检验数据发送给第二服务器，以供第二服务器判断该待检验数据是否已经存在于第二服务器中；
第二输出模块，用于接收所述第二服务器所返回的判断结果，当该判断结果表明所述待检验数据已存在于第二服务器时，输出用于表示所述待检验数据为重复数据的提示信息，并且将所述待检验数据保存于所述第一服务器中；否则，输出所述待检验数据为非重复数据的提示信息，并且将所述待检验数据存储于所述第二服务器中，以及将所述待检验数据保存在所述第一服务器中；
其中，所述第二服务器为缓存服务器。
7.根据权利要求6所述的装置，其特征在于，还包括第一设定模块，用于在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长；
并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
8.根据权利要求6所述的装置，其特征在于，还包括第二设定模块，用于在第二服务器中设定所述待检验数据的失效时长；
并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据，并将获取到的数据提交给第一服务器；所述设定的时间周期小于所述待检验数据的失效时长。
9.根据权利要求7或8所述的装置，其特征在于，还包括判断模块，用于接收第一服务器所返回的数据提交的反馈信息，如果反馈信息表示数据被第一服务器成功接收，则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效；否则，重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
10.根据权利要求6至8中任一项所述的装置，其特征在于，所述第一服务器包括：elasticsearch服务器或solr服务器；所述第二服务器包括：redis服务器。
CN201610051295.4A 2016-01-26 2016-01-26 一种数据验重的方法和装置 Active CN105631042B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610051295.4A CN105631042B (zh) 2016-01-26 2016-01-26 一种数据验重的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610051295.4A CN105631042B (zh) 2016-01-26 2016-01-26 一种数据验重的方法和装置

Publications (2)

Publication Number Publication Date
CN105631042A CN105631042A (zh) 2016-06-01
CN105631042B true CN105631042B (zh) 2019-02-22

Family

ID=56045974

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610051295.4A Active CN105631042B (zh) 2016-01-26 2016-01-26 一种数据验重的方法和装置

Country Status (1)

Country Link
CN (1) CN105631042B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304438A (zh) * 2017-10-12 2018-07-20 深圳市天下房仓科技有限公司 海量数据存储方法及海量数据存储系统
CN113381785B (zh) * 2021-06-09 2022-04-19 宁波奥克斯电气股份有限公司 设备调试方法及装置、蓝牙设备

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8438130B2 (en) * 2010-12-13 2013-05-07 International Business Machines Corporation Method and system for replicating data
CN102279880B (zh) * 2011-07-28 2014-07-16 赵香芳 一种实时更新缓存的方法和系统
CN103544117B (zh) * 2012-07-13 2017-03-01 阿里巴巴集团控股有限公司 一种数据读取方法及装置
EP2864887A1 (en) * 2012-10-01 2015-04-29 Hitachi, Ltd. Backup and restore system for a deduplicated file system and corresponding server and method

Also Published As

Publication number Publication date
CN105631042A (zh) 2016-06-01

Similar Documents

Publication Publication Date Title
US9514034B1 (en) Ordered test execution to enable faster feedback
US9081964B2 (en) Firmware upgrade error detection and automatic rollback
CN107179986B (zh) 业务系统的压力测试方法和装置
CN108536571A (zh) 性能测试方法、装置、设备及计算机可读存储介质
CN107193699A (zh) 一种通过rdma方式自动测试hca卡带宽延时方法
US9559915B2 (en) System and method for dynamically testing networked target systems
CN110427324B (zh) 联调系统、联调方法、计算机设备和存储介质
JP2013137661A5 (zh)
CN105631042B (zh) 一种数据验重的方法和装置
CN109753418A (zh) 性能测试方法、装置、计算机设备和存储介质
US8862939B2 (en) Network system and management server
CN111176918A (zh) 一种服务器测试方法、系统、设备及计算机可读存储介质
CN109032887A (zh) 一种故障硬盘快速定位方法及系统
US9811080B2 (en) Measuring performance of an appliance
WO2016188101A1 (zh) 一种针对业务系统的测试方法和装置
CN113238965A (zh) 一种接口测试脚本生成方法、系统及存储介质
JP2014035595A (ja) 通信システムの試験装置、通信システムの試験用プログラム及び通信システムの試験方法
US20170279700A1 (en) Method and apparatus for transmitting data
CN108574610B (zh) 一种压力测试方法、装置、电子设备及介质
CN111737112B (zh) 一种远程端集成化进行服务器管理的实现方法、系统
CN113014443B (zh) 一种cdn资源是否命中缓存的测试方法及其系统
CN112650666B (zh) 一种软件测试系统、方法、装置、控制设备及存储介质
CN113849388A (zh) 一种测试方法和装置、电子设备和存储介质
CN112995648B (zh) 互联网电视全流程故障诊断方法、装置及计算设备
CN111200512B (zh) 网络连接容灾方法、终端设备、存储介质及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant