CN103379150A - 一种云服务文件管理系统 - Google Patents

一种云服务文件管理系统 Download PDF

Info

Publication number
CN103379150A
CN103379150A CN2012101164230A CN201210116423A CN103379150A CN 103379150 A CN103379150 A CN 103379150A CN 2012101164230 A CN2012101164230 A CN 2012101164230A CN 201210116423 A CN201210116423 A CN 201210116423A CN 103379150 A CN103379150 A CN 103379150A
Authority
CN
China
Prior art keywords
file
cloud service
management system
storage system
document storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012101164230A
Other languages
English (en)
Inventor
王剑锋
崔长浩
吴建伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING WISDOM STORM SCIENCE AND TECHNOLOGY Co Ltd
Aigo Digital Technology Co Ltd
Original Assignee
BEIJING WISDOM STORM SCIENCE AND TECHNOLOGY Co Ltd
Aigo Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING WISDOM STORM SCIENCE AND TECHNOLOGY Co Ltd, Aigo Digital Technology Co Ltd filed Critical BEIJING WISDOM STORM SCIENCE AND TECHNOLOGY Co Ltd
Priority to CN2012101164230A priority Critical patent/CN103379150A/zh
Publication of CN103379150A publication Critical patent/CN103379150A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种云服务文件管理系统,该系统包括云服务管理系统及文件存储系统,所述的云服务管理系统可将用户上传的文件处理后备份在文件存储系统中;当用户通过客户端对已备份至文件存储系统中的文件进行编辑后,云服务管理系统根据该文件的字节变化信息,能够识别出所编辑的信息,并将已备份文件记忆为主文件,所编辑的信息记忆为从文件,然后将该从文件存储在文件存储系统中。通过本发明可以提高更新文件的上传速度,并能够提高网络运行效率,节约网络资源。

Description

一种云服务文件管理系统
【技术领域】
本发明涉及网络信息存储领域,特别地提供一种云服务文件管理系统。
【背景技术】
随着网络技术的不断发展,网络已经成为人们生活中不可缺少的沟通工具。人们如果希望在不同地方获取自己的文件,则可将该文件保存在移动U盘或者移动硬盘中随身携带,也可将该文件上传至网络存储平台中,例如上传至网易邮箱或者新浪UC等软件实现的网络硬盘中。用户在其他地点通过计算机登陆至该平台后,即可以方便的使用其中保存的文件。
用户在使用网络存储产品备份文件的过程中,当把本地某个文件保存到服务器中后,如果用户在某个时刻通过计算机终端对该已备份的文件进行修改后,如果需要网络存储产品中的备份文件与修改后的文件内容保持一致,则需要用户将修改后的文件上传至服务器以覆盖之前所备份的文件。上传过程中,修改后的文件需要全部上传后来覆盖之前所备份的文件,对于容量较小的文件而言整个上传的过程不会浪费太多时间,然而对于一些容量较大的文件,例如高清视频文件,这样的更新上传方式会浪费较多的时间。
【发明内容】
本发明所要解决的技术问题是提供一种云服务文件文件管理系统,其能够对更新文件进行辨别,并且只上传更新内容至文件存储系统中,而不是以传统的文件覆盖方式来更新文件,以解决现有技术中上传更新信息所需时间长的技术问题。
为解决上述技术问题,本发明是通过以下技术方案实现的:
一种云服务文件管理系统,该系统包括云服务管理系统及文件存储系统,所述的云服务管理系统可将用户上传的文件处理后备份在文件存储系统中;
当用户通过客户端对已备份至文件存储系统中的文件进行编辑后,云服务管理系统根据该文件的字节变化信息,能够识别出所编辑的信息,并将已备份文件记忆为主文件,所编辑的信息记忆为从文件,然后将该从文件存储在文件存储系统中。
进一步地,所述的云服务管理系统包括API接口、用户信息管理器及关系型数据库,所述的API接口为客户端向该云服务管理系统传送相应信息的通道;所述的用户信息管理器用于管理客户端的注册信息及登录信息,并将客户端的注册信息存储在关系型数据库中。
进一步地,所述的文件存储系统包括多个用于存储文件信息的存储器,每个存储器具有一个地址。
进一步地,所述的云服务管理系统包括文件执行管理器及分布式数据库,所述的分布式数据库用于存储备份文件的存储地址、管理和访问文件存储系统;所述的文件执行管理器根据接收到的来自客户端的信息,对该信息进行解析,并对所要长传的文件进行对应的处理后发送给文件存储系统进行备份。
进一步地,所述的文件执行管理器包括更新监视模块,其用于监视用户对已备份至文件存储系统中的文件所作的编辑,当有编辑动作后,更新监视模块将已备份文件记忆为主文件,将所编辑的信息记忆为从文件,并只将从文件发送给文件存储系统进行存储。
进一步地,所述的文件执行管理器还包括关联地址生成模块,其用于根据从文件所在文件存储系统中的存储地址及其属性信息,生成与其对应的主文件关联的关联地址,并将该关联地址发送给分布式数据库中管理。
进一步地,所述文件执行管理器包括文件破碎模块,其用于对用户所上传的文件进行破碎处理,得到多个文件碎片,并将多个文件碎片分存在文件存储系统的不同存储器中。
进一步地,所述的文件执行管理器包括文件组合模块,其用于按照一定的计算程序从文件存储系统的不同的存储器中获取文件碎片,并对文件碎片进行组合,生成一个完整的文件;文件组合模块也能够从文件存储系统中获取主文件及其对应的从文件,将其组合成一个完整的更新文件。
进一步地,所述的文件执行管理器包括索引信息生成模块,其根据打碎后的文件碎片在文件存储系统中的存储地址及属性信息,生成对应的索引信息,并将该索引信息发送给分布式数据库。
进一步地,所述的分布式数据库包括资源分配模块,其用于发现新的可利用资源,并将该资源分配给文件存储系统,以扩展文件存储系统的可利用资源。
进一步地,所述的分布式数据库包括目标文件查询模块及文件索引信息管理模块,所述的目标文件查询模块根据文件执行管理器所需要的文件信息,从文件索引信息管理模块中查找到对应的文件索引信息,并从文件存储系统中查找该文件,将查询结果发送给文件执行管理器。
本发明具有以下几个优点:
本发明可监视用户对已备份文件至云服务文件管理系统中的文件所进行的编辑,并且能够辨别备份文件及所编辑的信息,从而在上传更新文件时,无需将整个备份文件及所编辑的信息一同上传至该系统进行管理,而只是将所编辑的信息上传,这样可以有效提高文件的长传速度,节约了网络通信资源和文件存储系统的资源。
此外,本发明的云服务文件管理系统根据时间界限将用户在不同时间所作的编辑内容记忆为不同的从文件,从而用户在有特殊需求时,能够在客户端查看到在不同时间所作的编辑及相应的更新文件,该更新文件为已备份文件与编辑内容组合后的完整的文件。
【附图说明】
图1为本发明的云服务文件管理系统的结构框图;
图2为本发明的云服务管理系统的文件执行管理器的结构框图;
图3为本发明的云服务管理系统对要备份至文件存储系统中的文件所作的处理示意图;
图4为本发明的更新文件转化流程图;
图5为本发明的云服务管理系统的分布式数据库的结构框图。
【具体实施方式】
为进一步阐述本发明达成预定目的所采取的技术手段及功效,以下结合附图及实施例,对本发明的具体实施方式,详细说明如下。
如图1所示,为本发明的云服务文件管理系统的系统结构框图,该云服务文件管理系统包括云服务管理系统1及文件存储系统2。客户端3通过现有的有线或者无线通讯方式与云服务管理系统2进行通信,云服务管理系统2可将用户上传的文件处理后备份在文件存储系统2中。在客户端3需要访问所需备份文件时,其向云服务管理系统1传送服务指令,通过云服务管理系统1对该指令的识别和处理后,可从文件存储系统2中寻找到对应文件并反馈给客户端。
特别地,在本发明中,如果客户端对已备份至文件存储系统2中的文件进行编辑后,云服务管理系统1根据该文件的字节变化信息,能够识别编辑的信息,将已备份文件记忆为主文件,编辑的信息记忆为从文件,同时生成与主文件关联的从文件的关联地址,然后将该从文件存储在文件存储系统2中,从而无需对整个更新文件进行上传与存储,节约上传空间。
以下将具体介绍本发明的云服务文件管理系统的具体实施方式。
所述的云服务管理系统1包括API接口(Application ProgrammingInterface,应用程序编程接口)14、用户信息管理器11、关系型数据库10、文件执行管理器13及分布式数据库12。
所述的API接口14为预先定义的函数,以提供客户端访问该云服务管理系统1的能力,而又无需访问源码,为客户端向该云服务管理系统1传送相应信息的通道。
所述的用户信息管理器11用于管理客户端的注册信息及登录信息,并将客户端的注册信息存储在关系型数据库10中,当用户登录时,验证该登录信息与存储在关系型数据库10中对应的注册信息是否一致,如果一致则允许客户端的进一步访问动作,如果不一致则拒绝其下一步动作。
所述的关系型数据库10用于存储客户端的注册信息。
所述的分布式数据库用于存储备份文件的存储地址,管理和访问文件存储系统。
所述的文件执行管理器13根据接收到的来自客户端的信息,对该信息进行解析并对所要文件进行对应的处理,例如对所上传文件的破碎处理、对下载文件的组合处理以及文件的索引信息生成等,然后执行相应的文件指令,例如将文件备份至文件存储系统中,将该文件的存储地址发送给分布式数据库12管理等。
具体地,如图2所示,所述的文件执行管理器13包括文件破碎模块131、文件组合模块130、更新监视模块132、索引信息生成模块133及关联地址生成模块134;
所述的文件破碎模块131用于对用户所上传的文件进行破碎处理,得到多个文件碎片,并将多个文件碎片分存在文件存储系统2的不同存储器中,如图3所示,备份文件经过文件破碎模块131的破碎动作之后,生成ABCD四个碎片,这四个碎片被复制成多个并按照一定的组合方式存储在文件存储系统的不同的存储器中,例如存储器1存储碎片AB、存储器2存储碎片BC、存储器3存储碎片CD、存储器4存储碎片AC、存储器5存储碎片AD、存储器6存储碎片BD;当用户需要下载或者访问该文件时,所述文件组合模块130按照一定的计算程序以最高的速率从所述的存储器1至6中获取ABCD这四个碎片,并且将这四个碎片组合成完整的文件发送给客户端3;上传文件以这种破碎及多存储器分别存储碎片的方式可以保证文件的安全性,同样可以防止某个存储器的损坏而丢失文件的情况产生,还可以以最高的计算机运行效率获取到所需文件;
所述的文件组合模块130用于按照一定的计算程序从文件存储系统2的不同的存储器20中获取文件碎片,并对文件碎片进行组合,生成一个完整的文件;文件组合模块130也能够从文件存储系统中获取主文件及其对应的从文件,将其组合成一个完整的更新文件;
所述的索引信息生成模块133根据打碎后的文件碎片在文件存储系统中的存储地址及属性信息,生成对应的索引信息,并将该索引信息发送给分布式数据库12,为文件组合模块130下次获取对应碎片做好路径;
所述的更新监视模块132用于监视用户对已备份文件所作的编辑,此监视方式可根据对文件二进制代码的监控来进行,当然也可以采用其他的监视方式,所述的文件包括单个文件及多个文件构成的文件包;当有编辑动作后,更新监视模块132将已备份文件记忆为主文件,将所编辑信息记忆为从文件,所述的从文件根据修改时间来界定;如图4所示,主文件经过第一次修改后,所修改的内容记忆为从文件1,所得到的更新文件记忆为更新文件1;更新文件1经过第一次修改后,所修改的内容记忆为从文件2,所得到的更新文件记忆为更新文件2;相应地,在更新文件2上所作的第一次修改内容记忆为从文件3,以此类推;更新监视模块132只将从文件1、从文件2及从文件3分别存储在文件存储系统2中,客户端3需要获取更新文件时,通过文件组合模块130将主文件与各从文件进行整合得到完整的更新文件,这样在用户上传更新文件时,无需上传整个修改文件,只需要将从文件存储在文件存储系统中即可,使得上传速度得到提升;此外,文件存储系统2中存储了不同时段的不同的从文件,因此管理员可以根据用户的特殊需求查询到在不同时段发生的不同修改内容及相应的更新文件。
所述的关联地址生成模块134用于根据从文件所在文件存储系统中的存储地址及其属性信息,生成与其对应的主文件关联的从文件关联地址,并将该关联地址发送给分布式数据库12中管理,为文件组合模块130生成完整的更新文件作好路径。
如图5所示,为本发明的分布式数据库12的结构框图,所述的分布式数据库12包括目标文件查询模块120、文件索引信息管理模块121及资源分配模块122;
所述的目标文件查询模块120根据文件执行管理器13所需要的文件信息,从文件索引信息管理模块121中查找到对应的文件索引信息,并从文件存储系统2中查找该文件,如果能够找到对应文件,则将查询结果及对应文件的索引信息通知给文件执行管理器13,由文件执行管理器13访问或者获取对应文件;
所述的文件索引信息管理模块121用于对备份文件的索引信息及所述从文件关联地址进行管理,提供访问对应文件的路劲信息;
所述的资源分配模块122用于发现新的可利用资源,并将该资源分配给文件存储系统2,以扩展文件存储系统的可利用资源,例如有新用户注册后,资源分配模块122发掘该新用户是否有可利用的存储资源或者信息资源,如果有,则给该新的存储资源或者信息资源分配地址,该新的存储资源可被记忆为存储器N。
所述的文件存储系统2包括多个用于存储文件信息的存储器,每个存储器具有一个地址,为分布式数据库12寻找文件或文件碎片作基础;这些存储器可以动态的形式存放文件,以提高文件存储系统的运行效率,例如存储器1暂时无法运行,则该存储器1中的文件可被分配至其它具有更高运行效率的存储器中,提高整个系统运行速率。
以上仅对本发明的实施例加以描述,但并非用以限制本发明,依本发明精神所做出的各种变化或修饰,都在本发明的权利要求的保护范畴之内。

Claims (11)

1.一种云服务文件管理系统,其特征在于:该系统包括云服务管理系统及文件存储系统,所述的云服务管理系统可将用户上传的文件处理后备份在文件存储系统中;
当用户通过客户端对已备份至文件存储系统中的文件进行编辑后,云服务管理系统根据该文件的字节变化信息,能够识别出所编辑的信息,并将已备份文件记忆为主文件,所编辑的信息记忆为从文件,然后将该从文件存储在文件存储系统中。
2.如权利要求1所述的云服务文件管理系统,其特征在于:所述的云服务管理系统包括API接口、用户信息管理器及关系型数据库,所述的API接口为客户端向该云服务管理系统传送相应信息的通道;所述的用户信息管理器用于管理客户端的注册信息及登录信息,并将客户端的注册信息存储在关系型数据库中。
3.如权利要求1所述的云服务文件管理系统,其特征在于:所述的文件存储系统包括多个用于存储文件信息的存储器,每个存储器具有一个地址。
4.如权利要求3所述的云服务文件管理系统,其特征在于:所述的云服务管理系统包括文件执行管理器及分布式数据库,所述的分布式数据库用于存储备份文件的存储地址、管理和访问文件存储系统;所述的文件执行管理器根据接收到的来自客户端的信息,对该信息进行解析,并对所要长传的文件进行对应的处理后发送给文件存储系统进行备份。
5.如权利要求4所述的云服务文件管理系统,其特征在于:所述的文件执行管理器包括更新监视模块,其用于监视用户对已备份至文件存储系统中的文件所作的编辑,当有编辑动作后,更新监视模块将已备份文件记忆为主文件,将所编辑的信息记忆为从文件,并只将从文件发送给文件存储系统进行存储。
6.如权利要求5所述的云服务文件管理系统,其特征在于:所述的文件执行管理器还包括关联地址生成模块,其用于根据从文件所在文件存储系统中的存储地址及其属性信息,生成与其对应的主文件关联的关联地址,并将该关联地址发送给分布式数据库中管理。
7.如权利要求4所述的云服务文件管理系统,其特征在于:所述文件执行管理器包括文件破碎模块,其用于对用户所上传的文件进行破碎处理,得到多个文件碎片,并将多个文件碎片分存在文件存储系统的不同存储器中。
8.如权利要求7所述的云服务文件管理系统,其特征在于:所述的文件执行管理器包括文件组合模块,其用于按照一定的计算程序从文件存储系统的不同的存储器中获取文件碎片,并对文件碎片进行组合,生成一个完整的文件;文件组合模块也能够从文件存储系统中获取主文件及其对应的从文件,将其组合成一个完整的更新文件。
9.如权利要求7所述的云服务文件管理系统,其特征在于:所述的文件执行管理器包括索引信息生成模块,其根据打碎后的文件碎片在文件存储系统中的存储地址及属性信息,生成对应的索引信息,并将该索引信息发送给分布式数据库。
10.如权利要求4所述的云服务文件管理系统,其特征在于:所述的分布式数据库包括资源分配模块,其用于发现新的可利用资源,并将该资源分配给文件存储系统,以扩展文件存储系统的可利用资源。
11.如权利要求4所述的云服务文件管理系统,其特征在于:所述的分布式数据库包括目标文件查询模块及文件索引信息管理模块,所述的目标文件查询模块根据文件执行管理器所需要的文件信息,从文件索引信息管理模块中查找到对应的文件索引信息,并从文件存储系统中查找该文件,将查询结果发送给文件执行管理器。
CN2012101164230A 2012-04-19 2012-04-19 一种云服务文件管理系统 Pending CN103379150A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012101164230A CN103379150A (zh) 2012-04-19 2012-04-19 一种云服务文件管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012101164230A CN103379150A (zh) 2012-04-19 2012-04-19 一种云服务文件管理系统

Publications (1)

Publication Number Publication Date
CN103379150A true CN103379150A (zh) 2013-10-30

Family

ID=49463706

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012101164230A Pending CN103379150A (zh) 2012-04-19 2012-04-19 一种云服务文件管理系统

Country Status (1)

Country Link
CN (1) CN103379150A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1904847A (zh) * 2005-07-28 2007-01-31 国际商业机器公司 用于确定对源文件作出的改变以便传输到目标位置的方法和系统
CN101650677A (zh) * 2009-07-27 2010-02-17 浪潮电子信息产业股份有限公司 一种基于Delta增量的文件数据备份方法
US20100274983A1 (en) * 2009-04-24 2010-10-28 Microsoft Corporation Intelligent tiers of backup data
CN101877008A (zh) * 2010-05-27 2010-11-03 开心人网络科技(北京)有限公司 一种海量小文件的存储方法及装置
CN102014158A (zh) * 2010-11-29 2011-04-13 北京兴宇中科科技开发股份有限公司 一种云存储服务客户端高效细粒度数据缓存系统与方法
CN102118315A (zh) * 2011-02-28 2011-07-06 华为技术有限公司 数据流化方法、数据记录方法、数据读取方法及其系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1904847A (zh) * 2005-07-28 2007-01-31 国际商业机器公司 用于确定对源文件作出的改变以便传输到目标位置的方法和系统
US20100274983A1 (en) * 2009-04-24 2010-10-28 Microsoft Corporation Intelligent tiers of backup data
CN101650677A (zh) * 2009-07-27 2010-02-17 浪潮电子信息产业股份有限公司 一种基于Delta增量的文件数据备份方法
CN101877008A (zh) * 2010-05-27 2010-11-03 开心人网络科技(北京)有限公司 一种海量小文件的存储方法及装置
CN102014158A (zh) * 2010-11-29 2011-04-13 北京兴宇中科科技开发股份有限公司 一种云存储服务客户端高效细粒度数据缓存系统与方法
CN102118315A (zh) * 2011-02-28 2011-07-06 华为技术有限公司 数据流化方法、数据记录方法、数据读取方法及其系统

Similar Documents

Publication Publication Date Title
CN103377208A (zh) 一种云服务文件管理系统更新文件的方法
TWI698108B (zh) 基於區塊鏈的資料處理方法和裝置
EP4047487A1 (en) File storage method, terminal, and storage medium
US9705730B1 (en) Cloud storage using Merkle trees
US12001688B2 (en) Utilizing data views to optimize secure data access in a storage system
CA2933821C (en) System and method for uploading and management of contract-research-organization data to a sponsor company's electronic laboratory notebook
US9009696B2 (en) Generating encoded identifications of selected subsets of installed software packages on a client machine
WO2016180055A1 (zh) 数据存储、读取的方法、装置及系统
CN1894930A (zh) 用于进行基于网格的数据存储的设备、系统和方法
CN109995594A (zh) 区块链网络资源管理方法、装置及区块链系统
US20210055885A1 (en) Enhanced data access using composite data views
CN103067525A (zh) 一种基于特征码的云存储数据备份方法
US12079890B2 (en) Systems and methods for utilizing tracking units in electronic document chain-of custody tracking
Xiong et al. Design and implementation of a prototype cloud video surveillance system
CN105224358A (zh) 一种云计算下软件自动打包部署的系统及方法
CN114746843A (zh) 针对已分化数据恢复配置的存储器健康跟踪
CN104699849A (zh) 数字图书馆资源统一检索系统
CN111680108A (zh) 一种数据存储方法、装置及一种数据获取方法、装置
US10534667B2 (en) Segmented cloud storage
US20110265074A1 (en) Systems and methods for generating exportable encoded identifications of networked machines based on installed package profiles
CN112925619A (zh) 大数据实时计算方法及平台
US20190037010A1 (en) Centralized management of webservice resources in an enterprise
CN103036952B (zh) 一种企业级异构融合存储管理系统
CN111045802B (zh) Redis集群组件调度系统及方法、平台设备
CN202872848U (zh) 一种基于云信息云计算服务的云存储终端设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 100028, room 22, floor 2208, block A, International Building, Sanyuanqiao, Chaoyang District, Beijing

Applicant after: Beijing somersault cloud Technology Co.,Ltd.

Applicant after: AIGO DIGITAL TECHNOLOGY Co.,Ltd.

Address before: 100028, Beijing, Chaoyang District, Chaoyang District, Sanyuanqiao International Building, block A, room 2208, room 22

Applicant before: BEIJING WISDOM STORM SCIENCE AND TECHNOLOGY Co.,Ltd.

Applicant before: AIGO DIGITAL TECHNOLOGY Co.,Ltd.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: BEIJING WISDOM STORM SCIENCE AND TECHNOLOGY CO., LTD. TO: BEIJING JINDOUYUN TECHNOLOGY CO., LTD.

SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20131030