CN101398823B - 利用虚拟文件系统技术实现远程存储的方法及系统 - Google Patents

利用虚拟文件系统技术实现远程存储的方法及系统 Download PDF

Info

Publication number
CN101398823B
CN101398823B CN2007101224480A CN200710122448A CN101398823B CN 101398823 B CN101398823 B CN 101398823B CN 2007101224480 A CN2007101224480 A CN 2007101224480A CN 200710122448 A CN200710122448 A CN 200710122448A CN 101398823 B CN101398823 B CN 101398823B
Authority
CN
China
Prior art keywords
remote storage
data
virtual
file
file system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007101224480A
Other languages
English (en)
Other versions
CN101398823A (zh
Inventor
王弋珵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Newauto Silicon Valley Video Technology Co Ltd
Original Assignee
Newauto Silicon Valley Video Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Newauto Silicon Valley Video Technology Co Ltd filed Critical Newauto Silicon Valley Video Technology Co Ltd
Priority to CN2007101224480A priority Critical patent/CN101398823B/zh
Publication of CN101398823A publication Critical patent/CN101398823A/zh
Application granted granted Critical
Publication of CN101398823B publication Critical patent/CN101398823B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明属于数据存储技术领域,具体涉及一种利用虚拟文件系统技术实现远程存储的方法及系统。该方法在远程办公计算机操作系统的设备层开发一个虚拟硬盘模块,使该虚拟硬盘模块与远程存储之间建立数据联系,将远程的存储数据通过虚拟硬盘模块的文件系统映射到本地磁盘缓存上,上层应用软件直接通过虚拟文件系统在本地磁盘缓存上进行数据处理。本发明更加合理的实现了数据的传输和操作,降低了数据传输操作的复杂性,为各种行业的远程办公提供了便利。

Description

利用虚拟文件系统技术实现远程存储的方法及系统
技术领域
本发明属于数据存储技术领域,具体涉及一种利用虚拟文件系统技术实现远程存储的方法及系统。该方法可以应用到IT行业相关的各种数据存储领域,包括异地办公、数据传输、数据备份等。
背景技术
近年来,随着无纸化办公的推动,远程办公、异地办公、家庭办公也逐步从概念成为现实,对于多数文件数据量不大的行业来说,远程办公已经没有任何技术上的障碍,目前的即时通讯、电子邮件、B/S架构的办公软件等已经足以满足上述远程办公的需要。但是,对于文件数据量比较大的行业,远程办公还是存在着数据传输的困难,这些困难主要表现在两个方面:(1)数据传输量大,需要大的延迟,造成某些应用软件无法流畅运行;(2)数据传输操作复杂,需要用户使用专门的软件,并且需要一定的计算机知识。
造成上述困难的主要因素在于远程办公和本地办公在数据使用方式上存在着区别。在本地办公中,人们可以方便的访问和使用集中存储的数据,在Windows平台下最简单的使用方式是将共享路径映射成本地驱动器;而对于远程办公来说,要想使用集中的存储数据,可选的方式比较少,典型的有FTP、WebDAV等,这些方式在使用上和本地办公的网络映射相比,使用的方便性相差较大。
发明内容
本发明的目的在于针对目前文件数据量较大的行业远程办公中存在的困难,提供一种利用虚拟文件系统技术实现远程存储的方法及系统,从而更加合理的实现数据的传输和操作,为各种行业的远程办公提供便利。
本发明的技术方案如下:一种利用虚拟文件系统技术实现远程存储的方法,该方法在远程办公计算机操作系统的设备层开发一个虚拟硬盘模块,使该虚拟硬盘模块与远程存储之间建立数据联系,将远程的存储数据通过虚拟硬盘模块的文件系统映射到本地磁盘缓存上,上层应用软件直接通过虚拟文件系统在本地磁盘缓存上进行数据处理。
如上所述的利用虚拟文件系统技术实现远程存储的方法,其中,虚拟硬盘模块与远程存储之间可以通过标准的FTP、HTTP、HTTPS、WebDAV协议进行联系,也可以通过自行设计的专用协议进行联系。
如上所述的利用虚拟文件系统技术实现远程存储的方法,其中,该方法通过存储服务器记录和维护远程存储中文件特征标识信息或版本信息,并记录文件的锁定信息。
如上所述的利用虚拟文件系统技术实现远程存储的方法,其中,当虚拟文件系统以独占的方式打开一个文件时,通过存储服务器从远程存储中获取信息,判断该文件是否被占用,如果已经占用则返回上层应用已经被占用的信息,否则,先通知存储服务器独占该文件,然后打开该文件进行正常的操作。
如上所述的利用虚拟文件系统技术实现远程存储的方法,其中,在断网的情况下,上层应用对本地磁盘缓存数据进行处理,存储服务器记录在脱机后所有变化的文件以及这些文件变化的方式,重新联机后,根据这些信息以及存储服务器返回的信息决定是否需要同步到远程存储中。
一种利用虚拟文件系统技术实现远程存储的系统,包括远程办公计算机和远程存储设备,其中,在远程办公计算机的上层软件模块和本地磁盘缓存之间设置一套虚拟的硬盘设备,虚拟的硬盘设备与远程存储设备之间进行数据连接,同时,虚拟的硬盘设备还与存储服务器连接。
如上所述的利用虚拟文件系统技术实现远程存储的系统,其中,虚拟的硬盘设备包括一个或多个虚拟硬盘。
如上所述的利用虚拟文件系统技术实现远程存储的系统,其中,远程存储设备与本地磁盘缓存之间互成映射关系,同时存储需要处理的数据文件。
本发明的有益效果如下:本发明所提供的方法将远程的存储映射到本地驱动器,上层应用只需要对本地磁盘缓存进行数据处理,然后将处理后的数据与远程存储进行同步,从而降低了数据传输操作的复杂性,保证了各种应用软件的流畅运行。
附图说明
图1为本发明的系统结构示意图。
图2为本发明中本地硬盘缓存数据的处理逻辑流程图。
具体实施方式
下面结合附图和实施例对本发明作进一步详细的描述。
要解决远程办公中遇到的数据传输存储中遇到的问题,首先可以分析一下在数据使用方式上远程办公和本地办公的区别:在本地我们可以方便的访问和使用集中存储的数据,在Windows平台下最简单的使用方式是将共享路径映射成本地驱动器。而对于远程办公来说,要想使用集中的存储数据,可选的方式就比较少了,典型的有FTP、WebDAV等,这些方式在使用上和本地办公的网络映射相比使用的方便性就差了很多。本发明所提供的方法在远程办公计算机操作系统的设备层开发一个虚拟硬盘模块,使该虚拟硬盘模块与远程存储之间建立数据联系,将远程的存储数据通过虚拟硬盘模块的文件系统映射到本地磁盘缓存上,上层应用软件直接通过虚拟文件系统在本地磁盘缓存上进行数据处理。其原理如图1所示。
通过图1可以看出,虚拟文件系统(以下简称VFS)负责和远程存储联系,联系的方式可以是多种,比如可以是标准的FTP、HTTP、HTTPS、WebDAV等协议,也可以是出于安全等方面考虑自己设计的专用协议。但是鉴于广域网目前带宽较低的特点,还需要使用本地缓存来提高上层应用的用户体验。使用本地缓存可以让上层应用快速的保存或者打开一些经常使用的文件,这些文件会在后台由VFS保持和远程存储的一致性,另外使用本地缓存还有一个更大的好处——脱机存储,脱机存储可以使用户在断网的情况下继续工作,在链接恢复后VFS自动对变更后的文件进行同步。
存储服务器”(以后简称RS)的主要作用如下:
(1)记录和维护远程存储中文件特征标识信息或者版本信息,以便让VFS方便的确定本地缓存中的文件是否和远程存储中的文件是否一致。
(2)记录文件锁定信息,在远程存储模式下,如果没有一个服务器记录集中存储中的文件被哪些用户以独占的方式打开了,就很有可能造成文件的访问冲突、数据的丢失。VFS在以独占的方式打开一个文件的时候就需要从远程存储中获取信息,判断是否被占用,如果已经占用则返回上层应用已经被占用的信息,否则先通知RS独占该文件,然后打开该文件进行正常的操作,在文件释放后,一定要通知RS解锁,考虑到广域网应用环境的复杂性,该锁定信息应该有时间限制,过期后会自动解锁,另外VFS在断开和RS之间的连接前要通知RS解锁全部相关文件。
利用虚拟文件系统技术实现远程存储的系统,包括远程办公计算机和远程存储设备,其中,在远程办公计算机的上层软件模块和本地磁盘缓存之间设置一套虚拟的硬盘设备,虚拟的硬盘设备可以包括一个或多个虚拟硬盘,虚拟的硬盘设备与远程存储设备之间进行数据连接,同时,虚拟的硬盘设备还与存储服务器连接。本发明的实现没有对操作系统的限制,以Windows操作系统为例,首先开发一个虚拟硬盘模块--文件虚拟层,这是虚拟文件系统的基础,通过该模块用户可以在Windows系统中发现虚拟出来的盘符,可以在该盘符中进行普通的文件操作,与使用普通的硬盘没有什么区别。
有了文件虚拟层之后,就需要为文件虚拟层组织数据。在设计过程中就需要考虑对多种远程资源访问协议的支持,最好是用可扩展的插件的模式去实现,以便扩充支持的协议的种类。VFS的协议插件接口需要支持以下一些基本操作:新建、打开、读取、写入、删除、查询(文件列表),操作的对象可以是文件,也可以是文件夹(路径)。通过协议插件接口,就可以编写不同的插件分别支持FTP、HTTP、HTTPS、WebDAV甚至是CIFS等协议。
在所有的实现中,本地硬盘缓存数据的处理逻辑比较复杂,最突出的问题之一就是从脱机到联机后的数据同步问题,首先需要记录在脱机后所有变化的文件以及这些文件变化的方式,是新建还是删除等,等联机之后就需要根据这些信息以及RS返回的信息决定是否需要同步到远程存储中。其逻辑如图2所示。
图2中是否遍历所有文件可以根据带宽的情况自由配置,如果带宽较低,可以考虑仅仅处理本地修改记录中的文件,其他文件可以在使用时再做比较。
RS中对文件特征标识的处理方式也有多种方式可以选择,因为所有向远程存储中写入数据都是通过VFS,所以整个系统是知道什么时候由哪一台计算机对哪个文件进行了修改,这些信息就可以组成一个特征标识,VFS使用该标识就可以判断本地的文件是否和远程存储中的文件不一致。如果觉得这个方法比较欠缺,那还可以在上传文件的过程中对每一文件用md5等算法计算出特征值,这个方法虽然可靠,但效率会低一些,需要在具体的应用中进行取舍。
考虑到在此公开的对本发明的描述和特殊的实施例,本发明的其他实施例对于本领域的技术人员来说是显而易见的。这些说明和实施例仅作为例子来考虑,它们都属于由所附权利要求所指示的本发明的保护范围和精神之内。

Claims (3)

1.一种利用虚拟文件系统技术实现远程存储的方法,其特征在于:该方法在远程办公计算机操作系统的设备层开发一个虚拟硬盘模块,使该虚拟硬盘模块与远程存储之间建立数据联系,将远程的存储数据通过虚拟硬盘模块的文件系统映射到本地磁盘缓存上,上层应用软件直接通过虚拟文件系统在本地磁盘缓存上进行数据处理;通过存储服务器记录和维护远程存储中文件特征标识信息或版本信息,并记录文件的锁定信息;当虚拟文件系统以独占的方式打开一个文件时,通过存储服务器从远程存储中获取信息,判断该文件是否被占用,如果已经占用则返回上层应用已经被占用的信息,否则,先通知存储服务器独占该文件,然后打开该文件进行正常的操作。
2.如权利要求1所述的利用虚拟文件系统技术实现远程存储的方法,其特征在于:虚拟硬盘模块与远程存储之间可以通过标准的FTP、HTTP、HTTPS、WebDAV协议进行联系,也可以通过自行设计的专用协议进行联系。
3.如权利要求1所述的利用虚拟文件系统技术实现远程存储的方法,其特征在于:在断网的情况下,上层应用对本地磁盘缓存数据进行处理,存储服务器记录在脱机后所有变化的文件以及这些文件变化的方式,重新联机后,根据这些信息以及存储服务器返回的信息决定是否需要同步到远程存储中。
CN2007101224480A 2007-09-26 2007-09-26 利用虚拟文件系统技术实现远程存储的方法及系统 Expired - Fee Related CN101398823B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2007101224480A CN101398823B (zh) 2007-09-26 2007-09-26 利用虚拟文件系统技术实现远程存储的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2007101224480A CN101398823B (zh) 2007-09-26 2007-09-26 利用虚拟文件系统技术实现远程存储的方法及系统

Publications (2)

Publication Number Publication Date
CN101398823A CN101398823A (zh) 2009-04-01
CN101398823B true CN101398823B (zh) 2012-05-09

Family

ID=40517386

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101224480A Expired - Fee Related CN101398823B (zh) 2007-09-26 2007-09-26 利用虚拟文件系统技术实现远程存储的方法及系统

Country Status (1)

Country Link
CN (1) CN101398823B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102024110A (zh) * 2010-12-14 2011-04-20 汉柏科技有限公司 安全隔离桌面的方法及系统
CN103812915A (zh) * 2012-11-15 2014-05-21 中兴通讯股份有限公司 资源共享方法、装置、系统及终端、资源管理中心
CN103442060B (zh) * 2013-08-27 2017-03-15 深圳市深信服电子科技有限公司 基于远程桌面本地应用访问方法及装置
CN103488521A (zh) * 2013-09-03 2014-01-01 珠海许继电气有限公司 一种嵌入式设备虚拟磁盘文件交互方法
CN103442074B (zh) * 2013-09-04 2017-01-25 深圳市丰禾原电子科技有限公司 远程硬盘的联机使用方法及计算机可读取记录媒体
US9262344B2 (en) * 2013-12-17 2016-02-16 International Business Machines Corporation Local locking in a bi-directional synchronous mirroring environment
CN106302601A (zh) * 2015-06-04 2017-01-04 中兴通讯股份有限公司 网络盘本地挂载处理方法、装置及系统
CN106407417A (zh) * 2016-09-23 2017-02-15 维沃移动通信有限公司 一种应用程序数据备份方法及移动终端
CN106776980A (zh) * 2016-12-06 2017-05-31 上海爱数信息技术股份有限公司 一种文档同步方法及系统、文档同步客户端
CN106850825B (zh) * 2017-02-23 2020-08-07 中南大学 一种移动透明计算环境下客户端块级缓存优化方法
CN106980471B (zh) * 2017-03-27 2020-08-25 联想(北京)有限公司 一种提高智能设备的硬盘写入性能的方法及装置
CN109558074A (zh) * 2018-10-25 2019-04-02 深圳点猫科技有限公司 一种基于编程语言的网络存储空间操作方法及电子设备
CN113064856A (zh) * 2020-09-30 2021-07-02 陈梅玉 流式办公信息记录的处理方法及计算机设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1776595A (zh) * 2004-11-19 2006-05-24 国际商业机器公司 存储区域网络知晓的文件系统上的自治数据缓存和拷贝

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1776595A (zh) * 2004-11-19 2006-05-24 国际商业机器公司 存储区域网络知晓的文件系统上的自治数据缓存和拷贝

Also Published As

Publication number Publication date
CN101398823A (zh) 2009-04-01

Similar Documents

Publication Publication Date Title
CN101398823B (zh) 利用虚拟文件系统技术实现远程存储的方法及系统
CN101398744B (zh) 利用虚拟文件系统技术实现网络数据处理的方法及系统
CN103106152B (zh) 基于层次存储介质的数据调度方法
TW591394B (en) Deferred copy-on-write of a snapshot
CN103020257B (zh) 数据操作的实现方法和装置
CN101453489B (zh) 一种网络附加存储装置及其数据备份和数据恢复方法
CN102385633B (zh) 虚拟存储目录的文件管理系统
EP1544754A2 (en) System and method for file and storage management
CN101082927B (zh) 一种基于上下文文件系统的文件服务方法
CN107291889A (zh) 一种数据存储方法及系统
CN106156359A (zh) 一种云计算平台下的数据同步更新方法
CN102855239A (zh) 一种分布式地理文件系统
CN106294870B (zh) 基于对象的分布式云存储方法
US20090150556A1 (en) Memory to storage communication for hybrid systems
CN101751307A (zh) 数据存储系统、方法以及数据存储和备份系统
CN103051671A (zh) 一种集群文件系统重复数据删除方法
CN103986779A (zh) 一种应用数据传输方法、装置及终端设备
WO2023185111A1 (zh) 一种数据文件的快速存取方法及装置
CN103036952B (zh) 一种企业级异构融合存储管理系统
CN103942301A (zh) 一种面向多数据类型访问应用的分布式文件系统
CN105095439A (zh) 一种图片专属安全存储云系统
CN103259998A (zh) 一种航测图像数据的记录系统及方法
CN106528667B (zh) 读写分离的低功耗海量数据全文检索系统框架
CN105701179A (zh) 基于UniWhale的分布式文件系统的视窗访问方法
CN109189724A (zh) 提高视频监控系统音视频数据存储效率的方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120509

Termination date: 20120926