CN103227818A - 终端、服务器、文件传输方法、文件存储管理系统和方法 - Google Patents

终端、服务器、文件传输方法、文件存储管理系统和方法 Download PDF

Info

Publication number
CN103227818A
CN103227818A CN2013101049576A CN201310104957A CN103227818A CN 103227818 A CN103227818 A CN 103227818A CN 2013101049576 A CN2013101049576 A CN 2013101049576A CN 201310104957 A CN201310104957 A CN 201310104957A CN 103227818 A CN103227818 A CN 103227818A
Authority
CN
China
Prior art keywords
file
target
document
alternative document
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013101049576A
Other languages
English (en)
Inventor
许元进
吴慧明
洪跃强
陈勇川
陈元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
FUJIAN ETIM INFORMATION TECHNOLOGY Co Ltd
Original Assignee
FUJIAN ETIM INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FUJIAN ETIM INFORMATION TECHNOLOGY Co Ltd filed Critical FUJIAN ETIM INFORMATION TECHNOLOGY Co Ltd
Priority to CN2013101049576A priority Critical patent/CN103227818A/zh
Publication of CN103227818A publication Critical patent/CN103227818A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明提供了一种服务器,包括:数据接收单元,接收目标文件和目标标识码;标识码比较单元,在接收到其他文件时,获取其他文件对应的其他标识码,判断其他标识码与目标标识码是否相同;文件复制单元,在相同的情况下,取消接收其他文件,将目标文件存储至目标存储位置;文件存储单元,在不同的情况下,将其他文件存储至目标存储位置。本发明还提出了一种终端、一种文件传输方法、一种文件存储管理系统和一种文件存储管理方法。通过本发明的技术方案,能够验证上传和存储的数据是否已在服务器中存储,并对重复的数据进行复制或删除操作,从而避免重复上传数据所浪费的时间和重复存储数据造成的存储空间的浪费。

Description

终端、服务器、文件传输方法、文件存储管理系统和方法
技术领域
本发明涉及数据管理技术领域,具体而言,涉及一种终端、一种服务器、一种文件传输方法、一种文件存储管理系统和一种文件存储管理方法。
背景技术
随着信息网络技术的飞速发展,网络信息数据量呈几何级数的暴涨,各种网络存储平台也相继发展起来。如网络硬盘服务提供商,从早期提供的免费空间只有几十MB的容量,现在已经发展到云存储平台,免费提供的空间也扩展到了几GB,甚至上百GB都有。面对大数据量存储和众多文档的存储,突显存储系统如何更有效对文档进行管理,更大限度的提高空间的利用率及节省文档存储传输过程的时间的重要性。
目前大部份的网络存储服务器提供商,针对私人存储空间的数据存储,一般没有做重复文档的判定和过滤,用户提交什么文档,都是按任务将文件完整的提交存储到服务端。多人在不同的时间段里提交存储相同的文件,每个人都需要做完整的传输和存储过程,都消耗一定的传输时间。私人空间下,用户也会在不同的时间段里往不同的目录提交过往已保存过的文档,造成对存储空间的浪费和存储传输时间的浪费。
因此,需要一种新的数据存储管理技术,能够验证上传和存储的数据是否已在服务器中存储,并对重复的数据进行复制或删除操作,从而避免重复上传数据所浪费的时间和重复存储数据造成的存储空间的浪费。
发明内容
本发明正是基于上述问题,提出了一种数据存储管理技术,能够验证上传和存储的数据在服务其中是否已经存在,并对重复的数据进行复制或删除操作,从而避免重复上传数据所浪费的时间和重复存储数据造成的存储空间的浪费。
有鉴于此,本发明提出了一种终端,包括:文件收发单元,用于接收目标文件,并将所述目标文件和所述目标文件对应的目标标识码传输至服务器;标识码计算单元,用于根据预设算法对所述目标文件进行计算,生成所述目标标识码。
在该技术方案中,终端可以接收用户输入的文件,然后通过哈希算法(也可以用其他能够根据文件内容计算出标识码的算法)对文件中的内容进行运算,可以得到该文件的标识码,从而针对不同的文件,可以生成相应的标识码,服务器在接收终端上传的文件时,同时也存储了该文件对应的标识码。
在上述技术方案中,优选地,还包括:条件设置单元,用于根据接收到的指令设置需要判断重复的文件的属性范围,并将所述属性范围发送至所述服务器,以使所述服务器在接收到其他文件时,根据所述属性范围判断是否将所述其他文件对应的其他标识码与所述目标标识码相比较。
在该技术方案中,用户可以通过终端设置需要判断重复的文件的条件,比如根据文件的大小、上传时间、文件格式等,使服务器仅判断满足条件的文件是否重复。
本发明还提出了一种服务器,包括:数据接收单元,用于接收目标文件和根据预设算法对所述目标文件计算得到的目标标识码;标识码比较单元,用于在接收到其他文件时,获取所述其他文件对应的其他标识码,并判断所述其他标识码与所述目标标识码是否相同;文件复制单元,用于在所述其他标识码与所述目标标识码相同的情况下,取消接收所述其他文件,获取所述其他文件的目标存储位置,并复制所述目标文件,将所述目标文件存储至所述目标存储位置;文件存储单元,用于在所述其他标识码与所述目标标识码不同的情况下,接收所述其他文件,并将所述其他文件存储至所述目标存储位置。
在该技术方案中,服务器接收文件的同时,还接收该文件对应的标识码,不同的文件经过哈希算法(或其他能够根据文件内容计算出标识码的算法)的运算后,可以生成唯一的对应的标识码,从而可以根据比较文件的标识码,来判定两个文件是否重复。服务器在接收文件时,将该文件的标识码与已存储的标识码逐一进行比较,如果相同,则说明即将接收的文件在服务器中是已有的,则复制已有的文件,并将其存储至即将接收的文件需要存储到的位置,从而避免了接收已存储过的文件而浪费时间和网络带宽。
在上述技术方案中,优选地,还包括:比较操作判断单元,用于根据接收到的重复判断指令,判断是否需要将接收的文件的标识码与已存储的文件的标识码进行比较;所述标识码比较单元在所述比较操作判断单元判定需要比较的情况下,判断所述其他标识码与所述目标标识码是否相同;所述文件存储单元在所述比较操作判断单元判定不需要比较的情况下,将所述其他文件存储至所述目标存储位置。
在该技术方案中,服务器只有在接收到需要重复判断的指令时,才在接收文件时,判断文件的重复性,否则,直接将接收的文件存储到用户指定的存储位置。
在上述技术方案中,优选地,还包括:预设条件判断单元,用于判断所述其他文件是否满足预设条件;所述标识码比较单元在所述预设条件判断单元判定满足所述预设条件的情况下,判断所述其他标识码与所述目标标识码是否相同;所述文件存储单元在所述预设条件判断单元判定不满足所述预设条件的情况下,将所述其他文件存储至所述目标存储位置。
在该技术方案中,服务器对于接收的文件,首先判断其是否满足预设条件,比如判断其是否为特定格式的文件,或判断其大小是否在特定的范围内,并在该文件满足预设条件时,才判断其重复性,否则,直接将接收的文件存储到用户指定的存储位置。
在上述技术方案中,优选地,还包括:冗余文件清除单元,用于据接收到的清理指令,获取相应存储区域内的文件的识别码,并判断是否存在标识码相同的冗余文件,若存在,则保留所述冗余文件中的一份文件,并删除所述冗余文件中的其他文件。
在该技术方案中,服务器可以比较已存储的文件的标识码,从而判断已存储的文件是否存在相同的文件,若存在,则仅保留相同文件中的一份文件,并自动删除其他重复的文件,从而可以避免服务器存储空间的浪费。
本发明还提出了一种文件存储管理系统,包括至少一个上述任一项所述的终端,以及上述任一项所述的服务器。
本发明还提出了一种文件传输方法,包括:步骤402,接收目标文件,根据预设算法对所述目标文件进行计算,生成相应的目标标识码;步骤404,将所述目标文件和所述目标标识码传输至服务器。
在该技术方案中,终端可以接收用户输入的文件,然后通过哈希算法(也可以用其他能够根据文件内容计算出标识码的算法)对文件中的内容进行运算,可以得到该文件的标识码,从而针对不同的文件,可以生成相应的标识码,服务器在接收终端上传的文件时,同时也存储了该文件对应的标识码。
在上述技术方案中,优选地,还包括:根据接收到的指令设置需要判断重复的文件的属性范围,并将所述属性范围发送至所述服务器,以使所述服务器在接收到其他文件时,根据所述属性范围判断是否将所述其他文件对应的其他标识码与所述目标标识码相比较。
在该技术方案中,用户可以通过终端设置需要判断重复的文件的条件,比如根据文件的大小、上传时间、文件格式等,使服务器仅判断满足条件的文件是否重复。
本发明还提出了一种文件存储管理方法,包括:步骤502,接收目标文件和根据预设算法对所述目标文件计算得到的目标标识码;步骤504,当接收到其他文件时,获取所述其他文件对应的其他标识码,并判断所述其他标识码与所述目标标识码是否相同;步骤506,若相同,则取消接收所述其他文件,获取所述其他文件的目标存储位置,并复制所述目标文件,将所述目标文件存储至所述目标存储位置;步骤508,若不同,则接收所述其他文件,并将所述其他文件存储至所述目标存储位置。
在该技术方案中,服务器接收文件的同时,还接收该文件对应的标识码,不同的文件经过哈希算法(或其他能够根据文件内容计算出标识码的算法)的运算后,可以生成唯一的对应的标识码,从而可以根据比较文件的标识码,来判定两个文件是否重复。服务器在接收文件时,将该文件的标识码与已存储的标识码逐一进行比较,如果相同,则说明即将接收的文件在服务器中是已有的,则复制已有的文件,并将其存储至即将接收的文件需要存储到的位置,从而避免了接收已存储过的文件而浪费时间和网络带宽。
在上述技术方案中,优选地,在所述步骤504之前,还包括:根据接收到的重复判断指令,判断是否需要将接收的文件的标识码与已存储的文件的标识码进行比较,若需要,则进入步骤504,若不需要,则在接收所述其他文件时,并将所述其他文件存储至所述目标存储位置。
在该技术方案中,服务器只有在接收到需要重复判断的指令时,才在接收文件时,判断文件的重复性,否则,直接将接收的文件存储到用户指定的存储位置。
在上述技术方案中,优选地,所述步骤504还包括:判断所述其他文件是否满足预设条件,若满足,则判断所述其他标识码与所述目标标识码是否相同,若不满足,则在接收所述其他文件时,将所述其他文件存储至所述目标存储位置。
在该技术方案中,服务器对于接收的文件,首先判断其是否满足预设条件,比如判断其是否为特定格式的文件,或判断其大小是否在特定的范围内,并在该文件满足预设条件时,才判断其重复性,否则,直接将接收的文件存储到用户指定的存储位置。
在上述任一技术方案中,优选地,还包括:根据接收到的清理指令,获取相应存储区域内的文件的识别码,并判断是否存在标识码相同的冗余文件,若存在,则保留所述冗余文件中的一份文件,并删除所述冗余文件中的其他文件。
在该技术方案中,服务器可以比较已存储的文件的标识码,从而判断已存储的文件是否存在相同的文件,若存在,则仅保留相同文件中的一份文件,并自动删除其他重复的文件,从而可以避免服务器存储空间的浪费。
通过以上技术方案,能够验证上传和存储的数据在服务其中是否已经存在,并对重复的数据进行复制或删除操作,从而避免重复上传数据所浪费的时间和重复存储数据造成的存储空间的浪费。
附图说明
图1示出了根据本发明的实施例的终端的框图;
图2示出了根据本发明的实施例的服务器的框图;
图3示出了根据本发明的实施例的文件存储管理系统的框图;
图4示出了根据本发明的实施例的文件传输方法的流程图;
图5示出了根据本发明的实施例的文件存储管理方法的流程图;
图6示出了根据本发明的实施例的预设算法的示意图;
图7示出了根据本发明的实施例的文件存储管理系统的结构图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
图1示出了根据本发明的实施例的终端的框图。
如图1所示,根据本发明的实施例的终端100,包括:文件收发单元102,用于接收目标文件,并将目标文件和目标文件对应的目标标识码传输至服务器;标识码计算单元104,用于根据预设算法对目标文件进行计算,生成目标标识码。
终端100可以接收用户输入的文件,然后通过哈希算法(也可以用其他能够根据文件内容计算出标识码的算法)对文件中的内容进行运算,可以得到该文件的标识码,从而针对不同的文件,可以生成相应的标识码,服务器在接收终端上传的文件时,同时也存储了该文件对应的标识码。
优选地,还包括:条件设置单元106,用于根据接收到的指令设置需要判断重复的文件的属性范围,并将属性范围发送至服务器,以使服务器在接收到其他文件时,根据属性范围判断是否将其他文件对应的其他标识码与目标标识码相比较。
用户可以通过终端100设置需要判断重复的文件的条件,比如根据文件的大小、上传时间、文件格式等,使服务器仅判断满足条件的文件是否重复。
图2示出了根据本发明的实施例的服务器的框图。
如图2所示,根据本发明的实施例的服务器200包括:数据接收单元202,用于接收目标文件和根据预设算法对目标文件计算得到的目标标识码;标识码比较单元204,用于在接收到其他文件时,获取其他文件对应的其他标识码,并判断其他标识码与目标标识码是否相同;文件复制单元206,用于在其他标识码与目标标识码相同的情况下,取消接收其他文件,获取其他文件的目标存储位置,并复制目标文件,将目标文件存储至目标存储位置;文件存储单元208,用于在其他标识码与目标标识码不同的情况下,接收其他文件,并将其他文件存储至目标存储位置。
服务器200接收文件的同时,还接收该文件对应的标识码,不同的文件经过哈希算法(或其他能够根据文件内容计算出标识码的算法)的运算后,可以生成唯一的对应的标识码,从而可以根据比较文件的标识码,来判定两个文件是否重复。服务器200在接收文件时,将该文件的标识码与已存储的标识码逐一进行比较,如果相同,则说明即将接收的文件在服务器200中是已有的,则复制已有的文件,并将其存储至即将接收的文件需要存储到的位置,从而避免了接收已存储过的文件而浪费时间和网络带宽。
优选地,还包括:比较操作判断单元210,用于根据接收到的重复判断指令,判断是否需要将接收的文件的标识码与已存储的文件的标识码进行比较;标识码比较单元204在比较操作判断单元210判定需要比较的情况下,判断其他标识码与目标标识码是否相同;文件存储单元208在比较操作判断单元210判定不需要比较的情况下,将其他文件存储至目标存储位置。
服务器200只有在接收到需要重复判断的指令时,才在接收文件时,判断文件的重复性,否则,直接将接收的文件存储到用户指定的存储位置。
优选地,还包括:预设条件判断单元212,用于判断其他文件是否满足预设条件;标识码比较单元204在预设条件判断单元212判定满足预设条件的情况下,判断其他标识码与目标标识码是否相同;文件存储单元208在预设条件判断单元212判定不满足预设条件的情况下,将其他文件存储至目标存储位置。
服务器200对于接收的文件,首先判断其是否满足预设条件,比如判断其是否为特定格式的文件,或判断其大小是否在特定的范围内,并在该文件满足预设条件时,才判断其重复性,否则,直接将接收的文件存储到用户指定的存储位置。
优选地,还包括:冗余文件清除单元214,用于据接收到的清理指令,获取相应存储区域内的文件的识别码,并判断是否存在标识码相同的冗余文件,若存在,则保留冗余文件中的一份文件,并删除冗余文件中的其他文件。
服务器200可以比较已存储的文件的标识码,从而判断已存储的文件是否存在相同的文件,若存在,则仅保留相同文件中的一份文件,并自动删除其他重复的文件,从而可以避免服务器200存储空间的浪费。
图3示出了根据本发明的实施例的文件存储管理系统的框图。
如图3所示,根据本发明的实施例的文件存储管理系统300,包括至少一个如图1所示的终端100和如图2所示的服务器200。
图4示出了根据本发明的实施例的文件传输方法的流程图。
如图4所示,根据本发明的实施例的文件传输方法,包括:步骤402,接收目标文件,根据预设算法对所述目标文件进行计算,生成相应的目标标识码;步骤404,将目标文件和目标标识码传输至服务器。
终端可以接收用户输入的文件,然后通过哈希算法(也可以用其他能够根据文件内容计算出标识码的算法)对文件中的内容进行运算,可以得到该文件的标识码,从而针对不同的文件,可以生成相应的标识码,服务器在接收终端上传的文件时,同时也存储了该文件对应的标识码。
优选地,还包括:根据接收到的指令设置需要判断重复的文件的属性范围,并将属性范围发送至服务器,以使服务器在接收到其他文件时,根据属性范围判断是否将其他文件对应的其他标识码与目标标识码相比较。
用户可以通过终端设置需要判断重复的文件的条件,比如根据文件的大小、上传时间、文件格式等,使服务器仅判断满足条件的文件是否重复。
图5示出了根据本发明的实施例的文件存储管理方法的流程图。
如图5所示,根据本发明的实施例的文件存储管理方法,包括:步骤502,接收目标文件和根据预设算法对目标文件计算得到的目标标识码;步骤504,当接收到其他文件时,获取其他文件对应的其他标识码,并判断其他标识码与目标标识码是否相同;步骤506,若相同,则取消接收其他文件,获取其他文件的目标存储位置,并复制目标文件,将目标文件存储至目标存储位置;步骤508,若不同,则接收其他文件,并将其他文件存储至目标存储位置。
服务器接收文件的同时,还接收该文件对应的标识码,不同的文件经过哈希算法(或其他能够根据文件内容计算出标识码的算法)的运算后,可以生成唯一的对应的标识码,从而可以根据比较文件的标识码,来判定两个文件是否重复。服务器在接收文件时,将该文件的标识码与已存储的标识码逐一进行比较,如果相同,则说明即将接收的文件在服务器中是已有的,则复制已有的文件,并将其存储至即将接收的文件需要存储到的位置,从而避免了接收已存储过的文件而浪费时间和网络带宽。
优选地,在步骤504之前,还包括:根据接收到的重复判断指令,判断是否需要将接收的文件的标识码与已存储的文件的标识码进行比较,若需要,则进入步骤504,若不需要,则在接收其他文件时,并将其他文件存储至目标存储位置。
服务器只有在接收到需要重复判断的指令时,才在接收文件时,判断文件的重复性,否则,直接将接收的文件存储到用户指定的存储位置。
优选地,步骤504还包括:判断其他文件是否满足预设条件,若满足,则判断其他标识码与目标标识码是否相同,若不满足,则在接收其他文件时,将其他文件存储至目标存储位置。
服务器对于接收的文件,首先判断其是否满足预设条件,比如判断其是否为特定格式的文件,或判断其大小是否在特定的范围内,并在该文件满足预设条件时,才判断其重复性,否则,直接将接收的文件存储到用户指定的存储位置。
优选地,还包括:根据接收到的清理指令,获取相应存储区域内的文件的识别码,并判断是否存在标识码相同的冗余文件,若存在,则保留冗余文件中的一份文件,并删除冗余文件中的其他文件。
服务器可以比较已存储的文件的标识码,从而判断已存储的文件是否存在相同的文件,若存在,则仅保留相同文件中的一份文件,并自动删除其他重复的文件,从而可以避免服务器存储空间的浪费。
图6示出了根据本发明的实施例的预设算法的示意图。
如图6所示,根据本发明的实施例的预设算法可以是哈希算法(也可以用其他能够根据文件内容计算出标识码的算法)。
重复文档的判定可以通过哈希算法来实现,哈希算法将任意长度的二进制值映射为固定长度的较小二进制值,这个小的二进制值称为哈希值。哈希值是一段数据唯一且极其紧凑的数值表示形式。如果散列一段明文而且哪怕只更改该段落的一个字母,随后的哈希都将产生不同的值。要找到散列为同一个值的两个不同的输入,在计算上是不可能的,所以数据的哈希值可以检验数据的完整性。具体步骤如下:
(1)采用sha1hash算法对文件a.txt进行计算,生成hash串;
(2)修改文件a.txt中的一个字母,将H变为h;
(3)重新计算文件的hash串,结果与原始文件的值不一样。
结论:即使有一个字节的小差异,也会导致计算结果不一致,因此可以用该判定方法来计算文件的唯一标识码。
图7示出了根据本发明的实施例的文件存储管理系统的结构图。
如图7所示,如图2所示的服务器200的功能,可以由存储服务端与标识码管理服务器两部分来完成。
当用户B通过客户端(相当于终端100)将文件C上传至存储服务端时,客户端可以通过哈希算法对文件C中的内容进行运算,得到文件C的标识码为:a58e7cb581980090848fd7f6c5d3c2dd88af8598,并同时将该标识码发送至存储服务端,其中,存储服务端已存储有用户A的文件A1和文件A2、用户B的文件B、用户C的文件C,当存储服务端接收到客户端上传文件C的请求时,存储服务获取文件C的标识码,并根据该标识码在标识码管理服务器中进行检索,判断是否已存在相同的标识码,如果已存在,说明存储服务端已存储有文件C,从而存储服务端可以直接复制文件C,然后将其粘贴到用户B上传文件C的目标位置,避免了接收重复文件所浪费的时间。
当客户端上传文档时,存储服务端判断是否开启重复文档监控开关和检测条件信息,满足检测条件时计算文件的标识码,存储服务端查询是否已存在重复文档,如果没有重复,则提交该文件的标识码到标识码管理服务器,并存储该文件。
文档编辑保存后,重新生成标识码,更新标识码服务器中原记录的标识码信息。
文档删除后,检测标识码管理服务器中对应的标识码记录是否存在,存在的话,做记录删除处理。
通过对上传,编辑、删除过程进行跟踪维护,确保标识码记录能够真实,准确的判定某个文档在系统上的状态。
可以根据系统管理和用户的实现需要,定制多种策略:
针对特定文档类型不进行判重处理,比如对于.doc格式和.txt格式的文件不判定其重复性;
设置超过指定大小的文件才进行判重处理,如超过100M的文件才判断其重新性;
私人区目录下不允许有重复文档(仅保留重复文档中的一份,自动删除重复文档中的其他文档),节省个人存储空间资源。
以上结合附图详细说明了本发明的技术方案,考虑到相关技术中,针对网络存储空间的数据存储,一般没有做重复文档的判定和过滤,用户提交什么文档,都是按任务将文件完整的提交存储到服务端。当多人在不同的时间段里提交存储相同的文件,每个人都需要做完整的传输和存储过程,而且用户也可能在不同的时间段里往不同的目录提交过往已保存过的文档,造成对存储空间的浪费和存储传输时间的浪费。通过本发明的技术方案,能够验证上传和存储的数据是否已在服务器中存储,并对重复的数据进行复制或删除操作,从而避免重复上传数据所浪费的时间和重复存储数据造成的存储空间的浪费。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种终端,其特征在于,包括:
文件收发单元,用于接收目标文件,并将所述目标文件和所述目标文件对应的目标标识码传输至服务器;
标识码计算单元,用于根据预设算法对所述目标文件进行计算,生成所述目标标识码。
2.根据权利要求1所述的终端,其特征在于,还包括:
条件设置单元,用于根据接收到的指令设置需要判断重复的文件的属性范围,并将所述属性范围发送至所述服务器,以使所述服务器在接收到其他文件时,根据所述属性范围判断是否将所述其他文件对应的其他标识码与所述目标标识码相比较。
3.一种服务器,其特征在于,包括:
数据接收单元,用于接收目标文件和根据预设算法对所述目标文件计算得到的目标标识码;
标识码比较单元,用于在接收到其他文件时,获取所述其他文件对应的其他标识码,并判断所述其他标识码与所述目标标识码是否相同;
文件复制单元,用于在所述其他标识码与所述目标标识码相同的情况下,取消接收所述其他文件,获取所述其他文件的目标存储位置,并复制所述目标文件,将所述目标文件存储至所述目标存储位置;
文件存储单元,用于在所述其他标识码与所述目标标识码不同的情况下,接收所述其他文件,并将所述其他文件存储至所述目标存储位置。
4.根据权利要求3所述的服务器,其特征在于,还包括:
比较操作判断单元,用于根据接收到的重复判断指令,判断是否需要将接收的文件的标识码与已存储的文件的标识码进行比较;
所述标识码比较单元在所述比较操作判断单元判定需要比较的情况下,判断所述其他标识码与所述目标标识码是否相同;
所述文件存储单元在所述比较操作判断单元判定不需要比较的情况下,将所述其他文件存储至所述目标存储位置。
5.根据权利要求3所述的服务器,其特征在于,还包括:
预设条件判断单元,用于判断所述其他文件是否满足预设条件;
所述标识码比较单元在所述预设条件判断单元判定满足所述预设条件的情况下,判断所述其他标识码与所述目标标识码是否相同;
所述文件存储单元在所述预设条件判断单元判定不满足所述预设条件的情况下,将所述其他文件存储至所述目标存储位置。
6.根据权利要求3至5中任一项所述的服务器,其特征在于,还包括:
冗余文件清除单元,用于据接收到的清理指令,获取相应存储区域内的文件的识别码,并判断是否存在标识码相同的冗余文件,若存在,则保留所述冗余文件中的一份文件,并删除所述冗余文件中的其他文件。
7.一种文件存储管理系统,其特征在于,包括至少一个如权利要求1至2中任一项所述的终端,以及如权利要求3至6中任一项所述的服务器。
8.一种文件传输方法,其特征在于,包括:
步骤402,接收目标文件,根据预设算法对所述目标文件进行计算,生成相应的目标标识码;
步骤404,将所述目标文件和所述目标标识码传输至服务器。
9.根据权利要求8所述的文件传输方法,其特征在于,还包括:根据接收到的指令设置需要判断重复的文件的属性范围,并将所述属性范围发送至所述服务器,以使所述服务器在接收到其他文件时,根据所述属性范围判断是否将所述其他文件对应的其他标识码与所述目标标识码相比较。
10.一种文件存储管理方法,其特征在于,包括:
步骤502,接收目标文件和根据预设算法对所述目标文件计算得到的目标标识码;
步骤504,当接收到其他文件时,获取所述其他文件对应的其他标识码,并判断所述其他标识码与所述目标标识码是否相同;
步骤506,若相同,则取消接收所述其他文件,获取所述其他文件的目标存储位置,并复制所述目标文件,将所述目标文件存储至所述目标存储位置;
步骤508,若不同,则接收所述其他文件,并将所述其他文件存储至所述目标存储位置。
11.根据权利要求10所述的文件存储管理方法,其特征在于,在所述步骤504之前,还包括:根据接收到的重复判断指令,判断是否需要将接收的文件的标识码与已存储的文件的标识码进行比较,若需要,则进入步骤504,若不需要,则在接收所述其他文件时,并将所述其他文件存储至所述目标存储位置。
12.根据权利要求10所述的文件存储管理方法,其特征在于,所述步骤504还包括:判断所述其他文件是否满足预设条件,若满足,则判断所述其他标识码与所述目标标识码是否相同,若不满足,则在接收所述其他文件时,将所述其他文件存储至所述目标存储位置。
13.根据权利要求10至12中任一项所述的文件存储管理方法,其特征在于,还包括:根据接收到的清理指令,获取相应存储区域内的文件的识别码,并判断是否存在标识码相同的冗余文件,若存在,则保留所述冗余文件中的一份文件,并删除所述冗余文件中的其他文件。
CN2013101049576A 2013-03-27 2013-03-27 终端、服务器、文件传输方法、文件存储管理系统和方法 Pending CN103227818A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2013101049576A CN103227818A (zh) 2013-03-27 2013-03-27 终端、服务器、文件传输方法、文件存储管理系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2013101049576A CN103227818A (zh) 2013-03-27 2013-03-27 终端、服务器、文件传输方法、文件存储管理系统和方法

Publications (1)

Publication Number Publication Date
CN103227818A true CN103227818A (zh) 2013-07-31

Family

ID=48838074

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013101049576A Pending CN103227818A (zh) 2013-03-27 2013-03-27 终端、服务器、文件传输方法、文件存储管理系统和方法

Country Status (1)

Country Link
CN (1) CN103227818A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103886028A (zh) * 2014-02-27 2014-06-25 广州视睿电子科技有限公司 从存储设备拷贝文件到广告机的方法和装置
CN104361034A (zh) * 2014-10-27 2015-02-18 浪潮(北京)电子信息产业有限公司 一种云存储的文件管理方法及装置
WO2015021753A1 (zh) * 2013-08-15 2015-02-19 华为技术有限公司 一种数据压缩的方法、计算机系统和装置
CN104424225A (zh) * 2013-08-26 2015-03-18 联想(北京)有限公司 基于文件传输过程的文件处理方法及装置
CN105357303A (zh) * 2015-11-12 2016-02-24 姚焕根 文件分享系统及方法
CN106557583A (zh) * 2016-11-29 2017-04-05 用友网络科技股份有限公司 档案存储装置和档案存储方法
CN106844431A (zh) * 2016-12-12 2017-06-13 北京猎豹移动科技有限公司 文件存储方法、装置及其电子设备
WO2017193764A1 (zh) * 2016-05-09 2017-11-16 中兴通讯股份有限公司 镜像文件的处理方法、装置及存储介质
CN107506494A (zh) * 2017-09-27 2017-12-22 广东欧珀移动通信有限公司 文件处理方法、移动终端及计算机可读存储介质
CN107609119A (zh) * 2017-09-13 2018-01-19 广东欧珀移动通信有限公司 文件处理方法、移动终端及计算机可读存储介质
CN107657018A (zh) * 2017-09-26 2018-02-02 北京思特奇信息技术股份有限公司 一种防止数据重复提交的方法及系统
CN108874533A (zh) * 2018-01-08 2018-11-23 深圳市铱硙医疗科技有限公司 处理mri图像的服务器分配方法及装置
CN109672718A (zh) * 2018-09-26 2019-04-23 深圳平安财富宝投资咨询有限公司 系统间的文件传递方法、服务器、存储介质及装置
CN111163456A (zh) * 2019-12-11 2020-05-15 浙江极智通信科技股份有限公司 一种信息获取方法及系统
CN116522410A (zh) * 2023-05-09 2023-08-01 深圳市数存科技有限公司 一种应用于云平台的数据验证系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101552669A (zh) * 2008-04-02 2009-10-07 林兆祥 数据传输的方法及系统
CN101908077A (zh) * 2010-08-27 2010-12-08 华中科技大学 一种适用于云备份的重复数据删除方法
US20120233417A1 (en) * 2011-03-11 2012-09-13 Microsoft Corporation Backup and restore strategies for data deduplication
CN102857578A (zh) * 2012-09-25 2013-01-02 新浪网技术(中国)有限公司 一种网络硬盘的文件上传方法、系统及网盘客户端
CN102929980A (zh) * 2012-10-17 2013-02-13 广东欧珀移动通信有限公司 一种文件夹清理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101552669A (zh) * 2008-04-02 2009-10-07 林兆祥 数据传输的方法及系统
CN101908077A (zh) * 2010-08-27 2010-12-08 华中科技大学 一种适用于云备份的重复数据删除方法
US20120233417A1 (en) * 2011-03-11 2012-09-13 Microsoft Corporation Backup and restore strategies for data deduplication
CN102857578A (zh) * 2012-09-25 2013-01-02 新浪网技术(中国)有限公司 一种网络硬盘的文件上传方法、系统及网盘客户端
CN102929980A (zh) * 2012-10-17 2013-02-13 广东欧珀移动通信有限公司 一种文件夹清理方法及装置

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015021753A1 (zh) * 2013-08-15 2015-02-19 华为技术有限公司 一种数据压缩的方法、计算机系统和装置
CN104376584A (zh) * 2013-08-15 2015-02-25 华为技术有限公司 一种数据压缩的方法、计算机系统和装置
CN104376584B (zh) * 2013-08-15 2018-02-13 华为技术有限公司 一种数据压缩的方法、计算机系统和装置
CN104424225A (zh) * 2013-08-26 2015-03-18 联想(北京)有限公司 基于文件传输过程的文件处理方法及装置
CN103886028A (zh) * 2014-02-27 2014-06-25 广州视睿电子科技有限公司 从存储设备拷贝文件到广告机的方法和装置
CN103886028B (zh) * 2014-02-27 2018-04-20 广州视睿电子科技有限公司 从存储设备拷贝文件到广告机的方法和装置
CN104361034A (zh) * 2014-10-27 2015-02-18 浪潮(北京)电子信息产业有限公司 一种云存储的文件管理方法及装置
CN105357303A (zh) * 2015-11-12 2016-02-24 姚焕根 文件分享系统及方法
CN105357303B (zh) * 2015-11-12 2018-08-31 姚焕根 文件分享系统及方法
WO2017193764A1 (zh) * 2016-05-09 2017-11-16 中兴通讯股份有限公司 镜像文件的处理方法、装置及存储介质
CN106557583A (zh) * 2016-11-29 2017-04-05 用友网络科技股份有限公司 档案存储装置和档案存储方法
CN106557583B (zh) * 2016-11-29 2020-07-03 用友网络科技股份有限公司 档案存储装置和档案存储方法
CN106844431A (zh) * 2016-12-12 2017-06-13 北京猎豹移动科技有限公司 文件存储方法、装置及其电子设备
CN107609119A (zh) * 2017-09-13 2018-01-19 广东欧珀移动通信有限公司 文件处理方法、移动终端及计算机可读存储介质
CN107609119B (zh) * 2017-09-13 2020-01-24 Oppo广东移动通信有限公司 文件处理方法、移动终端及计算机可读存储介质
CN107657018A (zh) * 2017-09-26 2018-02-02 北京思特奇信息技术股份有限公司 一种防止数据重复提交的方法及系统
CN107506494B (zh) * 2017-09-27 2019-04-12 Oppo广东移动通信有限公司 文件处理方法、移动终端及计算机可读存储介质
CN107506494A (zh) * 2017-09-27 2017-12-22 广东欧珀移动通信有限公司 文件处理方法、移动终端及计算机可读存储介质
CN108874533A (zh) * 2018-01-08 2018-11-23 深圳市铱硙医疗科技有限公司 处理mri图像的服务器分配方法及装置
CN109672718A (zh) * 2018-09-26 2019-04-23 深圳平安财富宝投资咨询有限公司 系统间的文件传递方法、服务器、存储介质及装置
CN111163456A (zh) * 2019-12-11 2020-05-15 浙江极智通信科技股份有限公司 一种信息获取方法及系统
CN111163456B (zh) * 2019-12-11 2022-07-15 浙江极智通信科技股份有限公司 一种信息获取方法及系统
CN116522410A (zh) * 2023-05-09 2023-08-01 深圳市数存科技有限公司 一种应用于云平台的数据验证系统及方法

Similar Documents

Publication Publication Date Title
CN103227818A (zh) 终端、服务器、文件传输方法、文件存储管理系统和方法
US10983961B2 (en) De-duplicating distributed file system using cloud-based object store
US8788831B2 (en) More elegant exastore apparatus and method of operation
CN102419766B (zh) 基于hdfs分布式文件系统的数据冗余及文件操作方法
CN105069111B (zh) 云存储中基于相似性的数据块级数据去重方法
US9785646B2 (en) Data file handling in a network environment and independent file server
CN103095843B (zh) 一种基于版本矢量的数据备份方法及客户端
CN103116615B (zh) 一种基于版本矢量的数据索引方法及服务器
WO2017215646A1 (zh) 数据传输方法和装置
CN106161633B (zh) 一种基于云计算环境下打包文件的传输方法及系统
MX2011010287A (es) Restauracion de archivo de sistema de diferencial apartir de pares y la nube.
WO2017020576A1 (zh) 一种键值存储系统中文件压实的方法和装置
CN103067525A (zh) 一种基于特征码的云存储数据备份方法
US10339124B2 (en) Data fingerprint strengthening
US11424760B2 (en) System and method for data compaction and security with extended functionality
CN110958300B (zh) 一种数据的上传方法、系统、装置、电子设备和计算机可读介质
CN103152430B (zh) 一种缩减数据占用空间的云存储方法
CN102523290A (zh) 数据的处理方法、设备和系统
CN105653209A (zh) 一种对象存储数据传输方法及装置
CN116210211A (zh) 网络拓扑中的异常检测
CN109905479B (zh) 文件传输方法和装置
CN104023070A (zh) 基于云存储的文件压缩方法
US9684668B1 (en) Systems and methods for performing lookups on distributed deduplicated data systems
TWI420333B (zh) 分散式的重複數據刪除系統及其處理方法
CN110019056B (zh) 用于云层的容器元数据分离

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20130731