CN105631042A - 一种数据验重的方法和装置 - Google Patents

一种数据验重的方法和装置 Download PDF

Info

Publication number
CN105631042A
CN105631042A CN201610051295.4A CN201610051295A CN105631042A CN 105631042 A CN105631042 A CN 105631042A CN 201610051295 A CN201610051295 A CN 201610051295A CN 105631042 A CN105631042 A CN 105631042A
Authority
CN
China
Prior art keywords
data
server
tested
time cycle
inefficacy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610051295.4A
Other languages
English (en)
Other versions
CN105631042B (zh
Inventor
王石磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201610051295.4A priority Critical patent/CN105631042B/zh
Publication of CN105631042A publication Critical patent/CN105631042A/zh
Application granted granted Critical
Publication of CN105631042B publication Critical patent/CN105631042B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1456Hardware arrangements for backup
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/113Details of archiving

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提供一种数据验重的方法和装置,能够避免单独使用缓存服务器检验数据重复时不便查询和操作的问题,同时解决了海量数据的存储问题,提高了数据去重的准确性和高效性。本发明的方法包括接收待检验数据,并将数据发送给第一服务器;然后接收第一服务器返回的判断结果,当判断结果表明数据已存在于第一服务器时,输出用于表示数据为重复数据的提示信息;否则,将数据发送给第二服务器;然后接收第二服务器返回的判断结果,当判断结果表明数据已存在于第二服务器时,输出用于表示数据为重复数据的提示信息,并将数据保存在所述第一服务器中;否则,输出数据为非重复数据的提示信息,并将数据存储于第二服务器中,以及将数据保存在第一服务器中。

Description

一种数据验重的方法和装置
技术领域
本发明涉及计算机及其软件技术领域,尤其涉及一种数据验重的方法和装置。
背景技术
当前互联网的系统都会面对数据重复接收的情况,根据不同的业务情况,重复数据造成的影响或大或小。大部分的系统都会采用缓存机制来验证数据是否重复。
现有的验证数据是否重复的方法,主要是通过redis服务器来实现的。每次需要验证数据时,调用redis服务器来判断待验证的数据是否已存在,如果已存在则返回该数据相关的信息,否则返回空,并存放此数据。具体的步骤如下:
a)调用redis服务器的api方法,将需要验证的数据传递到redis服务器;
b)如果该数据已存在于redis服务器上,则redis服务器返回该数据相关的信息;
c)如果该数据未存在于redis服务器上,则redis服务器返回空;
d)业务代码根据判断该数据不存在时,将调用redis的api方法,将该数据存放到redis服务器。
现有技术主要存在以下缺点:
1.内存的容量有限。内存的容量无法和硬盘的容量相比,现有redis的最大申请容量为32G,而申请的服务器的硬盘容量远远大于32G;
2.缓存的数据不方便查询和操作。查询redis的数据,首先需要知道数据存放的结构,再编写对应的代码,才能进行查询或是遍例。
3.内存在掉电时内容会丢失。最简单的例子就是,电脑正常关机后,内存中的数据全部丢失。
发明内容
有鉴于此,本发明提供一种数据验重的方法和装置,能够避免单独使用缓存服务器检验数据重复时不方便查询和操作的问题,同时由于本发明技术方案可以将缓存服务器中的数据存储于另一个增加的服务器中,因而解决海量数据的存储问题,也避免了由于关机或者断电而引起的数据丢失的问题,最终提高了数据去重的准确性和高效性。
为实现上述目的,根据本发明的一个方面,提供了一种数据验重的方法。
本发明的数据验重的方法,包括:接收待检验数据,并将待检验数据发送给第一服务器,以供第一服务器判断该待检验数据是否已经存在于第一服务器中;接收所述第一服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第一服务器时,输出用于表示所述待检验数据为重复数据的提示信息;否则,将待检验数据发送给第二服务器,以供第二服务器判断该待检验数据是否已经存在于第二服务器中;接收所述第二服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第二服务器时,输出用于表示所述待检验数据为重复数据的提示信息,并且将所述待检验数据保存在所述第一服务器中;否则,输出所述待检验数据为非重复数据的提示信息,并且将所述待检验数据存储于所述第二服务器中,以及将所述待检验数据保存在所述第一服务器中。
可选地,输出用于表示所述待检验数据为重复数据的提示信息的步骤之后包括:在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长;并且将所述待检验数据保存在所述第一服务器中的步骤包括:每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
可选地,将所述待检验数据存储于所述第二服务器中的步骤之后包括:在第二服务器中设定所述待检验数据的失效时长;并且将所述待检验数据保存在所述第一服务器中的步骤包括:每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
可选地,将获取到的数据提交给第一服务器的步骤之后包括:接收第一服务器所返回的数据提交的反馈信息,如果反馈信息表示数据被第一服务器成功接收,则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效;否则,重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
可选地,所述第一服务器包括:elasticsearch服务器或solr服务器;所述第二服务器包括:redis服务器。
根据本发明的另一方面,提供一种数据验重的装置。
本发明的数据验重的装置,包括:接收模块,用于接收待检验数据,并将待检验数据发送给第一服务器,以供第一服务器判断该待检验数据是否已经存在于第一服务器中;第一输出模块,用于接收所述第一服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第一服务器时,输出用于表示所述待检验数据为重复数据的提示信息;否则,将待检验数据发送给第二服务器,以供第二服务器判断该待检验数据是否已经存在于第二服务器中;第二输出模块,用于接收所述第二服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第二服务器时,输出用于表示所述待检验数据为重复数据的提示信息,并且将所述待检验数据保存于所述第一服务器中;否则,输出所述待检验数据为非重复数据的提示信息,并且将所述待检验数据存储于所述第二服务器中,以及将所述待检验数据保存在所述第一服务器中。
可选地,还包括第一设定模块,用于在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长;并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
可选地,还包括第二设定模块,用于在第二服务器中设定所述待检验数据的失效时长;并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
可选地,还包括判断模块,用于接收第一服务器所返回的数据提交的反馈信息,如果反馈信息表示数据被第一服务器成功接收,则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效;否则,重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
可选地,所述第一服务器包括:elasticsearch服务器或solr服务器;所述第二服务器包括:redis服务器。
根据本发明的技术方案,主要通过新增服务器与缓存服务器同时对数据进行验证,因而能够避免单独使用缓存服务器检验数据重复时不方便查询和操作的问题;同时,由于可以将缓存服务器中的数据存储于所增加的服务器中,因而解决了缓存服务器因存储容量限制而导致的海量数据的存储问题,也避免了由于关机或者断电而引起的数据丢失的问题,最终提高了数据去重的准确性和高效性。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明实施例的一种数据验重的装置的示意图;
图2是根据本发明实施例的一种数据验重的方法的示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
图1是根据本发明实施例的一种数据验重的装置的示意图。如图1所示,本发明实施例的数据验重的装置10主要包括接收模块11、第一输出模块12、以及第二输出模块13;接收模块11用于接收待检验数据,并将待检验数据发送给第一服务器,以供第一服务器判断该待检验数据是否已经存在于第一服务器中;第一输出模块12用于接收所述第一服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第一服务器时,输出用于表示所述待检验数据为重复数据的提示信息;否则,将待检验数据发送给第二服务器,以供第二服务器判断该待检验数据是否已经存在于第二服务器中;第二输出模块13用于接收所述第二服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第二服务器时,输出用于表示所述待检验数据为重复数据的提示信息,并且将所述待检验数据保存在所述第一服务器中;否则,输出所述待检验数据为非重复数据的提示信息,并且将所述待检验数据存储于所述第二服务器中,以及将所述待检验数据保存在所述第一服务器中。
本发明实施例的数据验重的装置10还可包括第一设定模块(图中未示出),用于在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长;并且所述第二输出模块13还用于每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
本发明实施例的数据验重的装置10还可包括第二设定模块(图中未示出),用于在第二服务器中设定所述待检验数据的失效时长;并且所述第二输出模块13还用于每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
本发明实施例的数据验重的装置10还可包括判断模块(图中未示出),用于接收第一服务器所返回的数据提交的反馈信息,如果反馈信息标识数据被第一服务器成功接收,则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效;否则,重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据;所述第一服务器可以是elasticsearch服务器或solr服务器;所述第二服务器可以是redis服务器。
图2是根据本发明实施例的一种数据验重的方法的示意图。如图2所示,该方法的执行主体为图1中所提到的数据验重的装置10,在该实施例中,以elasticsearch服务器作为第一服务器,以redis服务器作为第二服务器对本发明实施例的技术方案做详细说明,该方法主要包括步骤S20至S26。
步骤S20:接收待检验数据,并将待检验数据发送给第一服务器,以供第一服务器判断该待检验数据是否已经存在于第一服务器中。在该步骤中,数据验重的装置10接收外部应用所发送的待检验数据,再将待检验数据发送给elasticsearch服务器,elasticsearch服务器在收到数据验重的装置10发送的数据后,判断该数据是否已经存在于elasticsearch服务器中,并将判断的结果返回给数据验重的装置10。
步骤S21:接收所述第一服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第一服务器时,执行步骤S22;否则,执行步骤S23。在步骤S21中,数据验重的装置10接收elasticsearch服务器所返回的数据的判断结果。
步骤S22:输出用于表示所述待检验数据为重复数据的提示信息。当步骤S21中的判断结果表示待检验数据为重复数据时,数据验重的装置10输出该数据为重复数据的提示信息,例如:该数据已经存在。
步骤S23:将待检验数据发送给第二服务器,以供第二服务器判断该待检验数据是否已经存在于第二服务器中。当步骤S21中的判断结果表示待检验数据为非重复数据时,则表示待检验数据在elasticsearch服务器中是为非重复数据,此时,数据验重的装置10将待检验数据发送给redis服务器进行第二次验证,redis接收到数据验重的装置10所发送的数据后判断该数据是否已经存在于redis服务器中,然后将判断的结果返回给数据验重的装置10。
步骤S24:接收所述第二服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第二服务器时,执行步骤S25;否则,执行步骤S26。在步骤S24中,数据验重的装置10接收redis服务器所返回的待检验数据的判断结果。
步骤S25:输出用于表示所述待检验数据为重复数据的提示信息,并且将所述待检验数据存储于所述第一服务器中。当步骤S24中数据验重的装置10接收到的判断结果显示该待验数据为重复数据时,数据验重的装置10输出该数据为重复数据的提示信息,然后数据验重的装置10在redis服务器中为已存在于redis服务器中的所述待检验数据设定失效时长(假设失效时长为5分钟),并每隔设定的时间周期(假设时间周期为3分钟)获取所述redis服务器中的待检验数据,并将获取到的数据提交给第一服务器;在此,所述设定的时间周期小于所述待检验数据的失效时长;然后数据验重的装置10接收elasticsearch服务器所返回的数据提交的反馈信息,如果反馈信息表示elasticsearch服务器成功接收数据验重的装置10所提交的数据,则缩短所述redis服务器中的待检验数据的失效时长(例如,将redis服务器中待检验数据的失效时长缩短为1分钟),以使待检测数据在1分钟内失效;如果elasticsearch服务器所返回给数据验重的装置10的反馈信息表示elasticsearch服务器数据接收失败,那么数据验重的装置10重置所述redis服务器中的待检验数据的失效时长(即将所述数据的失效时长重置为5分钟),然后在下个时间周期获取所述待检验数据,直到elasticsearch服务器成功接收所述数据验重的装置10所提交的数据。Redis服务器中存在该数据,而elasticsearch服务器中没有,说明是由于异常原因(比如网络阻塞等)导致了elasticsearch服务器未存储该数据。
步骤S26:输出所述待检验数据为非重复数据的提示信息,并且将所述待检验数据存储于所述第二服务器中,以及将所述待检验数据保存在所述第一服务器中。当步骤S24中数据验重的装置10接收到的判断结果显示该待验数据为非重复数据时,数据验重的装置10输出该数据为非重复数据的提示信息,然后数据验重的装置10将所述待检验数据存储于redis服务器中,再为redis服务器中的所述待检验数据设定失效时长(假设失效时长为5分钟),并且每隔设定的时间周期(假设时间周期为3分钟)获取所述redis服务器中的待检验数据,并将获取到的数据提交给第一服务器;在此,所述设定的时间周期小于所述待检验数据的失效时长;然后数据验重的装置10接收elasticsearch服务器所返回的数据提交的反馈信息,如果反馈信息表示elasticsearch服务器成功接收数据验重的装置10所提交的数据,则缩短所述redis服务器中的待检验数据的失效时长(例如,将redis服务器中待检验数据的失效时长缩短为1分钟),以使待检测数据在1分钟内失效;如果elasticsearch服务器所返回给数据验重的装置10的反馈信息表示数据接收失败,那么数据验重的装置10重置所述redis服务器中的待检验数据的失效时长(即将所述数据的失效时长重置为5分钟),然后在下个时间周期获取所述待检验数据,直到elasticsearch服务器成功接收所述数据验重的装置10所提交的数据。
在本发明实施例的技术方案中,elasticsearch服务器也可以由solr服务器或者其他服务器所代替,只要同时替换对应于不同服务器的数据验重的装置即可。
根据本发明实施例的技术方案,主要通过新增服务器与缓存服务器同时对数据进行验证,因而能够避免单独使用缓存服务器检验数据重复时不方便查询和操作的问题;同时,由于可以将缓存服务器中的数据存储于所增加的服务器中,因而解决了缓存服务器因存储容量限制而导致的海量数据的存储问题,也避免了由于关机或者断电而引起的数据丢失的问题,最终提高了数据去重的准确性和高效性。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (10)

1.一种数据验重的方法,其特征在于,包括:
接收待检验数据,并将待检验数据发送给第一服务器,以供第一服务器判断该待检验数据是否已经存在于第一服务器中;
接收所述第一服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第一服务器时,输出用于表示所述待检验数据为重复数据的提示信息;否则,将待检验数据发送给第二服务器,以供第二服务器判断该待检验数据是否已经存在于第二服务器中;
接收所述第二服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第二服务器时,输出用于表示所述待检验数据为重复数据的提示信息,并且将所述待检验数据保存在所述第一服务器中;否则,输出所述待检验数据为非重复数据的提示信息,并且将所述待检验数据存储于所述第二服务器中,以及将所述待检验数据保存在所述第一服务器中。
2.根据权利要求1所述的方法,其特征在于,输出用于表示所述待检验数据为重复数据的提示信息的步骤之后包括:在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长;
并且将所述待检验数据保存在所述第一服务器中的步骤包括:每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
3.根据权利要求1所述的方法,其特征在于,将所述待检验数据存储于所述第二服务器中的步骤之后包括:在第二服务器中设定所述待检验数据的失效时长;
并且将所述待检验数据保存在所述第一服务器中的步骤包括:每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
4.根据权利要求2或3所述的方法,其特征在于,将获取到的数据提交给第一服务器的步骤之后包括:接收第一服务器所返回的数据提交的反馈信息,如果反馈信息表示数据被第一服务器成功接收,则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效;否则,重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
5.根据权利要求1至3中任一项所述的方法,其特征在于,所述第一服务器包括:elasticsearch服务器或solr服务器;所述第二服务器包括:redis服务器。
6.一种数据验重的装置,其特征在于,包括:
接收模块,用于接收待检验数据,并将待检验数据发送给第一服务器,以供第一服务器判断该待检验数据是否已经存在于第一服务器中;
第一输出模块,用于接收所述第一服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第一服务器时,输出用于表示所述待检验数据为重复数据的提示信息;否则,将待检验数据发送给第二服务器,以供第二服务器判断该待检验数据是否已经存在于第二服务器中;
第二输出模块,用于接收所述第二服务器所返回的判断结果,当该判断结果表明所述待检验数据已存在于第二服务器时,输出用于表示所述待检验数据为重复数据的提示信息,并且将所述待检验数据保存于所述第一服务器中;否则,输出所述待检验数据为非重复数据的提示信息,并且将所述待检验数据存储于所述第二服务器中,以及将所述待检验数据保存在所述第一服务器中。
7.根据权利要求6所述的装置,其特征在于,还包括第一设定模块,用于在第二服务器中设定已存在于第二服务器中的所述待检验数据的失效时长;
并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
8.根据权利要求6所述的装置,其特征在于,还包括第二设定模块,用于在第二服务器中设定所述待检验数据的失效时长;
并且所述第二输出模块还用于每隔设定的时间周期获取所述第二服务器中的待检验数据,并将获取到的数据提交给第一服务器;所述设定的时间周期小于所述待检验数据的失效时长。
9.根据权利要求7或8所述的装置,其特征在于,还包括判断模块,用于接收第一服务器所返回的数据提交的反馈信息,如果反馈信息表示数据被第一服务器成功接收,则缩短所述第二服务器中的数据的失效时长以使待检测数据在缩短后的失效时长内失效;否则,重置所述第二服务器中的数据的失效时长然后在下个时间周期获取所述待检验数据。
10.根据权利要求6至8中任一项所述的装置,其特征在于,所述第一服务器包括:elasticsearch服务器或solr服务器;所述第二服务器包括:redis服务器。
CN201610051295.4A 2016-01-26 2016-01-26 一种数据验重的方法和装置 Active CN105631042B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610051295.4A CN105631042B (zh) 2016-01-26 2016-01-26 一种数据验重的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610051295.4A CN105631042B (zh) 2016-01-26 2016-01-26 一种数据验重的方法和装置

Publications (2)

Publication Number Publication Date
CN105631042A true CN105631042A (zh) 2016-06-01
CN105631042B CN105631042B (zh) 2019-02-22

Family

ID=56045974

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610051295.4A Active CN105631042B (zh) 2016-01-26 2016-01-26 一种数据验重的方法和装置

Country Status (1)

Country Link
CN (1) CN105631042B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304438A (zh) * 2017-10-12 2018-07-20 深圳市天下房仓科技有限公司 海量数据存储方法及海量数据存储系统
CN113381785A (zh) * 2021-06-09 2021-09-10 宁波奥克斯电气股份有限公司 设备调试方法及装置、蓝牙设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102279880A (zh) * 2011-07-28 2011-12-14 深圳市五巨科技有限公司 一种实时更新缓存的方法和系统
CN103229172A (zh) * 2010-12-13 2013-07-31 国际商业机器公司 复制数据
CN103544117A (zh) * 2012-07-13 2014-01-29 阿里巴巴集团控股有限公司 一种数据读取方法及装置
WO2014054065A1 (en) * 2012-10-01 2014-04-10 Hitachi, Ltd. Backup and restore system for a deduplicated file system and corresponding server and method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103229172A (zh) * 2010-12-13 2013-07-31 国际商业机器公司 复制数据
CN102279880A (zh) * 2011-07-28 2011-12-14 深圳市五巨科技有限公司 一种实时更新缓存的方法和系统
CN103544117A (zh) * 2012-07-13 2014-01-29 阿里巴巴集团控股有限公司 一种数据读取方法及装置
WO2014054065A1 (en) * 2012-10-01 2014-04-10 Hitachi, Ltd. Backup and restore system for a deduplicated file system and corresponding server and method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304438A (zh) * 2017-10-12 2018-07-20 深圳市天下房仓科技有限公司 海量数据存储方法及海量数据存储系统
CN113381785A (zh) * 2021-06-09 2021-09-10 宁波奥克斯电气股份有限公司 设备调试方法及装置、蓝牙设备

Also Published As

Publication number Publication date
CN105631042B (zh) 2019-02-22

Similar Documents

Publication Publication Date Title
EP3386150B1 (en) Terminal failure processing method, device and system
US8260924B2 (en) User load balancing systems and methods thereof
CN101917706B (zh) Fota升级的处理方法及装置
WO2019071858A1 (zh) 一种更新文件的方法、装置和设备
CN102915249A (zh) 远程地实现固件升级的方法和装置
CN102572014A (zh) 消息处理方法、装置和系统
CN105337990A (zh) 用户身份的校验方法及装置
CN111126940B (zh) 业务申请的处理方法、装置、设备及计算机可读存储介质
CN107302582B (zh) 千万级物联网场景的数据采集及弱推送方法
CN104994060A (zh) 一种用于为用户登录提供验证的方法和装置
CN104899142A (zh) 一种远程mock测试方法及装置
CN111177094B (zh) 日志数据处理方法、装置、电子设备及存储介质
CN103440142A (zh) 基于gprs远程升级及动态加载方法
CN111176918A (zh) 一种服务器测试方法、系统、设备及计算机可读存储介质
CN101814050A (zh) 内存测试方法
CN112764997B (zh) 一种日志存储的方法、装置、计算机设备和存储介质
CN105631042A (zh) 一种数据验重的方法和装置
CN110147410A (zh) 一种块链式账本中的数据验证方法、系统、装置及设备
US9811080B2 (en) Measuring performance of an appliance
CN105323748A (zh) 一种测试错误上传方法及装置
CN108574610B (zh) 一种压力测试方法、装置、电子设备及介质
CN100542339C (zh) 对移动终端进行远程管理的方法和系统
CN114443537B (zh) 一种pcie信号发送端参数配置方法、装置、设备及介质
CN105512563A (zh) 确认可信设备的方法和装置以及风险释放方法和装置
CN104639585A (zh) 一种实时数据传输系统及其数据同步方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant