CN108989400A - 一种云存储网关读写文件的方法、装置及设备 - Google Patents
一种云存储网关读写文件的方法、装置及设备 Download PDFInfo
- Publication number
- CN108989400A CN108989400A CN201810689458.0A CN201810689458A CN108989400A CN 108989400 A CN108989400 A CN 108989400A CN 201810689458 A CN201810689458 A CN 201810689458A CN 108989400 A CN108989400 A CN 108989400A
- Authority
- CN
- China
- Prior art keywords
- file
- storage system
- cloud storage
- read
- cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
- H04L67/63—Routing a service request depending on the request content or context
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种云存储网关读写文件的方法，包括：接收客户端发送的文件读取请求；根据云存储文件管理表判断文件读取请求对应的待读取文件是否存在于云存储系统内；若是，则判断待读取文件是否仅存在于云存储系统内；若待读取文件未仅存在于云存储系统内，或待读取文件未存在于云存储系统内，则将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求。本申请所提供的技术方案达到了降低云存储网关数据传输量的效果，进而提高了云存储数据中心网络传输的性能，同时了提高用户体验。本申请同时还提供了一种云存储网关读写文件的装置及系统，具有上述有益效果。
Description
技术领域
本申请涉及云存储网关传输领域，特别涉及一种云存储网关读写文件的方法、装置、设备及计算机可读存储介质。
背景技术
云存储技术是信息化时代数据不断增长的背景下诞生的一种新兴的网络存储技术。云存储是在云计算的基础上扩展出来的一种技术，是通过机器集群、网络、分布式文件装置等技术将不同的存储设备集中起来协同工作，对外提供数据存储和业务访问的装置。云存储技术正处在高速发展的时期，国内外已经出现了很多相对成功的云存储装置。拥有可弹性扩容、安全可靠、价格低廉等优点的云存储服务是未来的发展方向，云存储技术是可见未来内解决数据增长问题的最好技术之一。
云存储网关就是为了解决云存储和传统存储之间接口不匹配的问题而提出来的。大多数云存储服务都使用基于HTTPREST(Representational State Transfer)协议或者SOAP(Simple Object Access Protocol)协议制定的接口，而不提供传统存储协议接口。对于大量成熟稳定的传统应用而言，云存储接口无法直接使用。云存储网关可以将REST或者SOAP形式的云存储接口翻译转换为传统存储协议。云存储网关完成的功能就是云存储接口和传统存储之间协议转换功能，把云存储服务无缝整合到现有的软硬件装置中，满足传统应用的扩容需求。
然而，云计算时代的海量数据传输需要占用超大的带宽，会严重影响云存储数据中心网络传输的性能，较大的访问延迟也会极大降低用户体验。
因此，如何提高云存储网关的传输性能，同时提高用户体验是本领域技术人员目前需要解决的技术问题。
发明内容
本申请的目的是提供一种云存储网关读写文件的方法、装置、设备及计算机可读存储介质，用于提高云存储数据中心网络传输的性能，进而提高用户体验。
为解决上述技术问题，为实现上述目的，本申请实施例提供如下技术方案：
一种云存储网关读取文件的方法，该方法包括：
接收客户端发送的文件读取请求；
根据云存储文件管理表判断所述文件读取请求对应的待读取文件是否存在于所述云存储系统内；
若是，则判断所述待读取文件是否仅存在于所述云存储系统内；
若所述待读取文件未仅存在于所述云存储系统内，或所述待读取文件未存在于所述云存储系统内，则将所述文件读取请求发送至本地存储系统，以使所述本地存储系统处理所述文件读取请求；
其中，所述本地存储系统中存有所述云存储系统中第一预设时间内访问频率大于第一阈值的文件，所述云存储文件管理表存有云存储系统中所有文件的文件信息，且所述云存储文件管理表内仅存在于所述云存储系统内的文件具有标记。
可选的，当所述待读取文件仅存在于所述云存储系统内时，还包括：
从所述云存储系统内读取所述待读取文件，并将所述待读取文件发送至所述客户端；
将所述待读取文件发送至所述本地存储系统，以使所述本地存储系统保存所述待读取文件。
一种云存储网关读取文件的装置，该装置包括：
接收单元，用于接收客户端发送的文件读取请求；
第一判断单元，用于根据云存储文件管理表判断所述文件读取请求对应的待读取文件是否存在于所述云存储系统内；
第二判断单元，用于当所述待读取文件存在于所述云存储系统内时，判断所述待读取文件是否仅存在于所述云存储系统内；
第一发送单元，用于当所述待读取文件未仅存在于所述云存储系统内，或所述待读取文件未存在于所述云存储系统内时，将所述文件读取请求发送至本地存储系统，以使所述本地存储系统处理所述文件读取请求；
其中，所述本地存储系统中存有所述云存储系统中第一预设时间内访问频率大于第一阈值的文件，所述云存储文件管理表存有云存储系统中所有文件的文件信息，且所述云存储文件管理表内仅存在于所述云存储系统内的文件具有标记。
可选的，还包括：
读取单元，用于从所述云存储系统内读取所述待读取文件，并将所述待读取文件发送至所述客户端；
第二发送单元，用于将所述待读取文件发送至所述本地存储系统，以使所述本地存储系统保存所述待读取文件。
一种云存储网关写入文件的方法，该方法包括：
接收客户端发送的文件写入请求；
执行所述文件写入请求将对应的待写入文件写入本地存储系统；
将所述待写入文件上传至云存储系统，并依据所述待写入文件修改云存储文件管理表。
可选的，还包括：
接收所述客户端发送的文件修改请求；
将所述文件修改请求发送至所述本地存储系统，以使所述本地存储系统执行所述修改请求，对待修改文件进行修改；
将修改后的待修改文件上传至所述云存储系统，并依据所述修改后的待修改文件修改云端文件管理表。
一种云存储网关写入文件的装置，该装置包括：
第一接收单元，用于接收客户端发送的文件写入请求；
第一执行单元，用于执行所述文件写入请求将对应的待写入文件写入本地存储系统；
第一上传单元，用于将所述待写入文件上传至云存储系统，并依据所述待写入文件修改云存储文件管理表。
可选的，还包括：
第二接收单元，用于接收所述客户端发送的文件修改请求；
第三发送单元，用于将所述文件修改请求发送至所述本地存储系统，以使所述本地存储系统执行所述修改请求，对待修改文件进行修改；
第二上传单元，用于将修改后的待修改文件上传至所述云存储系统，并依据所述修改后的待修改文件修改云端文件管理表。
一种云存储网关读写系统，该系统包括：客户端、文件读取装置及文件写入装置，其中：
所述客户端，用于将文件读取请求发送至所述文件读取装置；将所述文件写入请求发送至所述文件写入装置；
所述文件读取装置，用于接收所述文件读取请求；根据云存储文件管理表判断所述文件读取请求对应的待读取文件是否存在于所述云存储系统内；若是，则判断所述待读取文件是否仅存在于所述云存储系统内；若所述待读取文件未仅存在于所述云存储系统内，或所述待读取文件未存在于所述云存储系统内，则将所述文件读取请求发送至本地存储系统，以使所述本地存储系统处理所述文件读取请求；
所述文件写入装置，用于接收所述文件写入请求；执行所述文件写入请求将对应的待写入文件写入本地存储系统；将所述待写入文件上传至云存储系统，并依据所述待写入文件修改云存储文件管理表。
可选的，所述文件读取装置还用于：根据所述云存储文件管理表判断所述云存储系统中的文件是否有所述待读取文件；当所述云存储系统中的文件有所述待读取文件时，从所述云存储系统内读取所述待读取文件，并将所述待读取文件发送至所述客户端；将所述待读取文件发送至所述本地存储系统，以使所述本地存储系统保存所述待读取文件。
本申请所提供的云存储网关读写文件的方法，包括：接收客户端发送的文件读取请求；根据云存储文件管理表判断文件读取请求对应的待读取文件是否存在于云存储系统内；若是，则判断待读取文件是否仅存在于云存储系统内；若待读取文件未仅存在于云存储系统内，或待读取文件未存在于云存储系统内，则将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求；其中，本地存储系统中存有云存储系统中第一预设时间内访问频率大于第一阈值的文件，云存储文件管理表存有云存储系统中所有文件的文件信息，且云存储文件管理表内仅存在于云存储系统内的文件具有标记。
本申请所提供的技术方案，通过在云网关中增加本地存储系统，并将经常访问的数据存放至本地存储系统中，当接收到文件读取请求时，先判断待读取文件是否存在于云存储系统内；若是，则判断待读取文件是否仅存在于云存储系统内；若待读取文件未仅存在于云存储系统内，或待读取文件未存在于云存储系统内，则将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求，达到了降低云存储网关数据传输量的效果，进而提高了云存储数据中心网络传输的性能，同时了提高用户体验。本申请同时还提供了一种云存储网关读写文件的装置及系统，具有上述有益效果，在此不再赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例所提供的一种云存储网关读取文件的方法的流程图；
图2为本申请实施例所提供的一种云存储网关读取文件的装置的结构图；
图3为本申请实施例所提供的另一种云存储网关读取文件的装置的结构图；
图4为本申请实施例所提供的一种云存储网关写入文件的方法的流程图；
图5为本申请实施例所提供的另一种云存储网关写入文件的方法的流程图；
图6为本申请实施例所提供的一种云存储网关写入文件的装置的结构图；
图7为本申请实施例所提供的另一种云存储网关写入文件的装置的结构图；
图8为本申请实施例所提供的一种云存储网关读写系统的结构图。
具体实施方式
本申请的核心是提供一种云存储网关读写文件的方法、装置、设备及计算机可读存储介质，用于提高云存储数据中心网络传输的性能，进而提高用户体验。
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
请参考图1，图1为本申请实施例所提供的一种云存储网关读取文件的方法的流程图。
其具体包括如下步骤：
S101：接收客户端发送的文件读取请求；
基于云计算时代的海量数据传输需要占用超大的带宽，会严重影响云存储数据中心网络传输的性能，较大的访问延迟也会极大降低用户体验，本申请提供了一种云存储网关读写文件的方法，用于解决该问题。
S102：根据云存储文件管理表判断文件读取请求对应的待读取文件是否存在于云存储系统内；
若是，则进入步骤S103；若是，则进入步骤S104；
这里提到的本地存储系统中存有云存储系统中第一预设时间内访问频率大于第一阈值的文件，本申请先将云存储系统中第一预设时间内访问频率大于第一阈值的文件复制至本地存储系统，使得当接收到文件读取请求时，能够较大概率的从本地存储系统中直接读取待读取文件，并将其发送至客户端，相对于从云存储系统中读取时通过百兆、千兆的光纤网络传输，能够通过能本地高速带宽(10Gb以太网/40Gb IB/16GB FC)发送至客户端，降低了访问延迟；
这里提到的本地存储系统具体可以采用传统的本地文件系统，如XFS等，将本地存储空间格式化为一个单独的文件系统；进一步的，该本地存储系统的容量可以大于用户在单位时间内数据访问总量和单位时间内的上云数据总带宽；
这里提到的云存储系统具体可以直接云网关将OSS提供的对象接口转换为文件系统提供。
这里提到的云存储文件管理表存有云存储系统中所有文件的文件信息，优选的，该云存储文件管理表的构建方式具体可以为使用B+树形式的树数据结构，以文件路径和名称的哈希值为索引来组织云端文件管理表的数据；这里提到的使用B+树组织数据结构，可以树空间利用率更高，可减少I/O次数，且查询效率稳定，同时，云存储文件管理表需要大量增删操作，使用B+树增删文件(节点)时，效率更高；以文件路径和名称的哈希值来作为索引，既可以避免可能出现的重复问题，也可以降低计算难度；
这里提到的云存储文件管理表可以存放在系统盘的文件上，采用MMap方式进行映射，读性能基本没有影响，也可以使用NVRAM等非易失高性能存储存放云存储文件管理表；
由于云存储文件管理表存有云存储系统中所有文件的文件信息，故当云存储文件管理表中没有待读取文件的文件信息时，则证明该待读取文件不存在于云存储系统内；当云存储文件管理表中有该待读取文件的文件信息时，则证明该待读取文件存在于云存储系统内。
S103：判断待读取文件是否仅存在于云存储系统内；
若是，则进入步骤S104；
由于云存储文件管理表内仅存在于云存储系统内的文件具有标记，因此可直接判断待读取文件的文件信息在云存储文件管理表内是否具有标记即可；
优选的，当待读取文件仅存在于云存储系统内时，还可以包括：
从云存储系统内读取待读取文件，并将待读取文件发送至客户端；
将待读取文件发送至本地存储系统，以使本地存储系统保存待读取文件。
当该待读取文件仅存在于云存储系统内时，则证明本地存储系统中未存有该文件，而该文件为待读取文件则证明该文件可以属于经常访问的数据，因此本申请实施例再从云存储系统内读取待读取文件，并将待读取文件发送至客户端后，还将待读取文件发送至本地存储系统，以使本地存储系统保存待读取文件，进而使得下次再读取该文件时，直接从本地存储系统中读取该文件即可。
S104：将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求。
当该待读取文件未仅存在于云存储系统内，或该待读取文件未存在于云存储系统内时，则将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求；
进一步的，这里提到的本地存储系统处理文件读取请求具体可以为：
本地存储系统判断是否存有该待读取文件，若存有，则读取该待读取文件，并将该待读取文件发送至客户端；若没有，则将文件不存在的信息反馈至客户端。
当云存储系统中的文件没有该待读取文件时，则说明本地存储系统及云存储系统中都未存有该文件，此时将文件不存在的信息反馈至客户端，以使用户及时解决该问题。
当利用本申请所提供的技术方案进行数据传输时，和只使用本地存储相比，用户可以使用的总的空间容量为本地存储系统容量和云存储系统容量之和，而云存储系统又有着空间大、成本低、易扩展等多种优势；同时，由于云存储系统存有完整的用户数据，可以为用户提供全量的数据备份，进而用户可以选择异地OSS作为云端空间，以实现异地容灾的目的；最后，由于云存储系统存有完整的用户数据，用户可以使用云端的强大计算能力来对这些数据进行计算处理，实现远程计算的功能。
基于上述技术方案，本申请所提供的一种云存储网关读取文件的方法，通过在云网关中增加本地存储系统，并将经常访问的数据存放至本地存储系统中，当接收到文件读取请求时，先判断待读取文件是否存在于云存储系统内；若是，则判断待读取文件是否仅存在于云存储系统内；若待读取文件未仅存在于云存储系统内，或待读取文件未存在于云存储系统内，则将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求，达到了降低云存储网关数据传输量的效果，进而提高了云存储数据中心网络传输的性能，同时了提高用户体验。
请参考图2，图2为本申请实施例所提供的一种云存储网关读取文件的装置的结构图。
该装置可以包括：
接收单元201，用于接收客户端发送的文件读取请求；
第一判断单元202，用于根据云存储文件管理表判断文件读取请求对应的待读取文件是否存在于云存储系统内；
第二判断单元203，用于当待读取文件存在于云存储系统内时，判断待读取文件是否仅存在于云存储系统内；
第一发送单元204，用于当待读取文件未仅存在于云存储系统内，或待读取文件未存在于云存储系统内时，将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求；
其中，本地存储系统中存有云存储系统中第一预设时间内访问频率大于第一阈值的文件，云存储文件管理表存有云存储系统中所有文件的文件信息，且云存储文件管理表内仅存在于云存储系统内的文件具有标记。
请参考图3，图3为本申请实施例所提供的另一种云存储网关读取文件的装置的结构图。
该装置还可以包括：
读取单元301，用于从云存储系统内读取待读取文件，并将待读取文件发送至客户端；
第二发送单元302，用于将待读取文件发送至本地存储系统，以使本地存储系统保存待读取文件。
由于云存储网关读取文件的装置部分的实施例与云存储网关读取文件的方法部分的实施例相互对应，因此云存储网关读取文件的装置部分的实施例请参考云存储网关读取文件的方法部分的实施例的描述，这里暂不赘述。
请参考图4，图4为本申请实施例所提供的一种云存储网关写入文件的方法的流程图。
其具体包括以下步骤：
S401：接收客户端发送的文件写入请求；
S402：执行文件写入请求将对应的待写入文件写入本地存储系统；
S403：将待写入文件上传至云存储系统，并依据待写入文件修改云存储文件管理表。
基于上述技术方案，本申请所提供的一种云存储网关写入文件的方法，当接收到客户端发送的文件写入请求时，能够执行文件写入请求将对应的待写入文件写入本地存储系统，然后将待写入文件上传至云存储系统，并依据待写入文件修改云存储文件管理表，使得用户能够完成对待写入文件的写入。
在上述实施例的基础上，请参考图5，图5为本申请实施例所提供的另一种云存储网关写入文件的方法的流程图。
其具体包括以下步骤：
S501：接收客户端发送的文件修改请求；
S502：将文件修改请求发送至本地存储系统，以使本地存储系统执行修改请求，对待修改文件进行修改；
S503：将修改后的待修改文件上传至云存储系统，并依据修改后的待修改文件修改云端文件管理表。
基于上述技术方案，本申请所提供的另一种云存储网关写入文件的方法，当接收到客户端发送的文件修改请求时，能够将文件修改请求发送至本地存储系统，以使本地存储系统执行修改请求，对待修改文件进行修改；然后将修改后的待修改文件上传至云存储系统，并依据修改后的待修改文件修改云端文件管理表，使得用户能够通过客户端完成对修改文件的修改。
请参考图6，图6为本申请实施例所提供的一种云存储网关写入文件的装置的结构图。
该装置可以包括：
第一接收单元601，用于接收客户端发送的文件写入请求；
第一执行单元602，用于执行文件写入请求将对应的待写入文件写入本地存储系统；
第一上传单元603，用于将待写入文件上传至云存储系统，并依据待写入文件修改云存储文件管理表。
请参考图7，图7为本申请实施例所提供的另一种云存储网关写入文件的装置的结构图。
该装置还可以包括：
第二接收单元701，用于接收客户端发送的文件修改请求；
第三发送单元702，用于将文件修改请求发送至本地存储系统，以使本地存储系统执行修改请求，对待修改文件进行修改；
第二上传单元703，用于将修改后的待修改文件上传至云存储系统，并依据修改后的待修改文件修改云端文件管理表。
由于云存储网关写入文件的装置部分的实施例与云存储网关写入文件的方法部分的实施例相互对应，因此云存储网关写入文件的装置部分的实施例请参考云存储网关写入文件的方法部分的实施例的描述，这里暂不赘述。
请参考图8，图8为本申请实施例所提供的一种云存储网关读写系统的结构图。
该云存储网关读写系统可以包括：客户端801、文件读取装置802及文件写入装置803，其中：
客户端801，用于将文件读取请求发送至文件读取装置802；将文件写入请求发送至文件写入装置802；
文件读取装置802，用于接收文件读取请求；根据云存储文件管理表判断文件读取请求对应的待读取文件是否存在于云存储系统内；若是，则判断待读取文件是否仅存在于云存储系统内；若待读取文件未仅存在于云存储系统内，或待读取文件未存在于云存储系统内，则将文件读取请求发送至本地存储系统，以使本地存储系统处理文件读取请求；
文件写入装置802，用于接收文件写入请求；执行文件写入请求将对应的待写入文件写入本地存储系统；将待写入文件上传至云存储系统，并依据待写入文件修改云存储文件管理表。
优选的，该文件读取装置802还可以用于：根据云存储文件管理表判断云存储系统中的文件是否有待读取文件；当云存储系统中的文件有待读取文件时，从云存储系统内读取待读取文件，并将待读取文件发送至客户端801；将待读取文件发送至本地存储系统，以使本地存储系统保存待读取文件。
由于装置部分的实施例与方法部分的实施例相互对应，因此装置部分的实施例请参见方法部分的实施例的描述，这里暂不赘述。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
以上对本申请所提供的一种云存储网关读写文件的方法、装置及系统进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。
还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (10)
1.一种云存储网关读取文件的方法，其特征在于，包括：
接收客户端发送的文件读取请求；
根据云存储文件管理表判断所述文件读取请求对应的待读取文件是否存在于所述云存储系统内；
若是，则判断所述待读取文件是否仅存在于所述云存储系统内；
若所述待读取文件未仅存在于所述云存储系统内，或所述待读取文件未存在于所述云存储系统内，则将所述文件读取请求发送至本地存储系统，以使所述本地存储系统处理所述文件读取请求；
其中，所述本地存储系统中存有所述云存储系统中第一预设时间内访问频率大于第一阈值的文件，所述云存储文件管理表存有云存储系统中所有文件的文件信息，且所述云存储文件管理表内仅存在于所述云存储系统内的文件具有标记。
2.根据权利要求1所述的方法，其特征在于，当所述待读取文件仅存在于所述云存储系统内时，还包括：
从所述云存储系统内读取所述待读取文件，并将所述待读取文件发送至所述客户端；
将所述待读取文件发送至所述本地存储系统，以使所述本地存储系统保存所述待读取文件。
3.一种云存储网关读取文件的装置，其特征在于，包括：
接收单元，用于接收客户端发送的文件读取请求；
第一判断单元，用于根据云存储文件管理表判断所述文件读取请求对应的待读取文件是否存在于所述云存储系统内；
第二判断单元，用于当所述待读取文件存在于所述云存储系统内时，判断所述待读取文件是否仅存在于所述云存储系统内；
第一发送单元，用于当所述待读取文件未仅存在于所述云存储系统内，或所述待读取文件未存在于所述云存储系统内时，将所述文件读取请求发送至本地存储系统，以使所述本地存储系统处理所述文件读取请求；
其中，所述本地存储系统中存有所述云存储系统中第一预设时间内访问频率大于第一阈值的文件，所述云存储文件管理表存有云存储系统中所有文件的文件信息，且所述云存储文件管理表内仅存在于所述云存储系统内的文件具有标记。
4.根据权利要求3所述的装置，其特征在于，还包括：
读取单元，用于从所述云存储系统内读取所述待读取文件，并将所述待读取文件发送至所述客户端；
第二发送单元，用于将所述待读取文件发送至所述本地存储系统，以使所述本地存储系统保存所述待读取文件。
5.一种云存储网关写入文件的方法，其特征在于，包括：
接收客户端发送的文件写入请求；
执行所述文件写入请求将对应的待写入文件写入本地存储系统；
将所述待写入文件上传至云存储系统，并依据所述待写入文件修改云存储文件管理表。
6.根据权利要求5所述的方法，其特征在于，还包括：
接收所述客户端发送的文件修改请求；
将所述文件修改请求发送至所述本地存储系统，以使所述本地存储系统执行所述修改请求，对待修改文件进行修改；
将修改后的待修改文件上传至所述云存储系统，并依据所述修改后的待修改文件修改云端文件管理表。
7.一种云存储网关写入文件的装置，其特征在于，包括：
第一接收单元，用于接收客户端发送的文件写入请求；
第一执行单元，用于执行所述文件写入请求将对应的待写入文件写入本地存储系统；
第一上传单元，用于将所述待写入文件上传至云存储系统，并依据所述待写入文件修改云存储文件管理表。
8.根据权利要求7所述的装置，其特征在于，还包括：
第二接收单元，用于接收所述客户端发送的文件修改请求；
第三发送单元，用于将所述文件修改请求发送至所述本地存储系统，以使所述本地存储系统执行所述修改请求，对待修改文件进行修改；
第二上传单元，用于将修改后的待修改文件上传至所述云存储系统，并依据所述修改后的待修改文件修改云端文件管理表。
9.一种云存储网关读写系统，其特征在于，包括：客户端、文件读取装置及文件写入装置，其中：
所述客户端，用于将文件读取请求发送至所述文件读取装置；将所述文件写入请求发送至所述文件写入装置；
所述文件读取装置，用于接收所述文件读取请求；根据云存储文件管理表判断所述文件读取请求对应的待读取文件是否存在于所述云存储系统内；若是，则判断所述待读取文件是否仅存在于所述云存储系统内；若所述待读取文件未仅存在于所述云存储系统内，或所述待读取文件未存在于所述云存储系统内，则将所述文件读取请求发送至本地存储系统，以使所述本地存储系统处理所述文件读取请求；
所述文件写入装置，用于接收所述文件写入请求；执行所述文件写入请求将对应的待写入文件写入本地存储系统；将所述待写入文件上传至云存储系统，并依据所述待写入文件修改云存储文件管理表。
10.根据权利要求9所述的云存储网关读写系统，其特征在于，所述文件读取装置还用于：根据所述云存储文件管理表判断所述云存储系统中的文件是否有所述待读取文件；当所述云存储系统中的文件有所述待读取文件时，从所述云存储系统内读取所述待读取文件，并将所述待读取文件发送至所述客户端；将所述待读取文件发送至所述本地存储系统，以使所述本地存储系统保存所述待读取文件。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810689458.0A CN108989400A (zh) | 2018-06-28 | 2018-06-28 | 一种云存储网关读写文件的方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810689458.0A CN108989400A (zh) | 2018-06-28 | 2018-06-28 | 一种云存储网关读写文件的方法、装置及设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108989400A true CN108989400A (zh) | 2018-12-11 |
Family
ID=64539467
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810689458.0A Pending CN108989400A (zh) | 2018-06-28 | 2018-06-28 | 一种云存储网关读写文件的方法、装置及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108989400A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101763415A (zh) * | 2009-12-16 | 2010-06-30 | 北京握奇数据系统有限公司 | 一种数据库的b树索引的生成方法及装置 |
| CN102402602A (zh) * | 2011-11-18 | 2012-04-04 | 航天科工深圳（集团）有限公司 | 一种实时数据库的b+树索引方法及装置 |
| CN103931156A (zh) * | 2011-05-14 | 2014-07-16 | 比特卡萨公司 | 具有用户不可知加密文件的服务器侧去重的云文件系统 |
| CN105407044A (zh) * | 2015-12-11 | 2016-03-16 | 西安交通大学 | 一种基于nfs的云存储网关系统的实现方法 |
| CN106576078A (zh) * | 2014-08-26 | 2017-04-19 | Ctera网络有限责任公司 | 用于在云存储系统中路由数据流的方法和系统 |
-
2018
- 2018-06-28 CN CN201810689458.0A patent/CN108989400A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101763415A (zh) * | 2009-12-16 | 2010-06-30 | 北京握奇数据系统有限公司 | 一种数据库的b树索引的生成方法及装置 |
| CN103931156A (zh) * | 2011-05-14 | 2014-07-16 | 比特卡萨公司 | 具有用户不可知加密文件的服务器侧去重的云文件系统 |
| CN102402602A (zh) * | 2011-11-18 | 2012-04-04 | 航天科工深圳（集团）有限公司 | 一种实时数据库的b+树索引方法及装置 |
| CN106576078A (zh) * | 2014-08-26 | 2017-04-19 | Ctera网络有限责任公司 | 用于在云存储系统中路由数据流的方法和系统 |
| CN105407044A (zh) * | 2015-12-11 | 2016-03-16 | 西安交通大学 | 一种基于nfs的云存储网关系统的实现方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10635674B2 (en) | Migrating a pluggable database between database server instances with minimal impact to performance | |
| CN102098342B (zh) | 一种基于事务级的数据同步方法、装置及系统 | |
| KR20180055952A (ko) | 데이터베이스 관리 시스템에서의 데이터 복제 기법 | |
| CN105518641B (zh) | 点对点数据复制方法、设备和系统以及主节点切换方法、设备和系统 | |
| KR101922044B1 (ko) | 데이터베이스 이중화 무중단 정합성 복구 기법 | |
| CN107045422A (zh) | 分布式存储方法和设备 | |
| CN101916289B (zh) | 支持海量小文件和动态备份数的数字图书馆存储系统的构建方法 | |
| CN104917843B (zh) | 云存储与医疗图像无缝对接系统 | |
| CN104011717A (zh) | 对数据存储备份的数据选择 | |
| CN205490680U (zh) | 基于通用服务器和通用交换机的高可用云计算系统 | |
| CN105740248B (zh) | 一种数据同步方法、装置及系统 | |
| CN107967122A (zh) | 一种块设备的数据写入方法、装置及介质 | |
| CN105138679A (zh) | 一种基于分布式缓存的数据处理系统及处理方法 | |
| CN102624911A (zh) | 一种基于集群的可视媒体存储系统 | |
| CN107766355B (zh) | 层级数据管理方法、层级数据管理系统及即时通信系统 | |
| CN108388524A (zh) | 用于缓存数据的方法和设备 | |
| CN108897822A (zh) | 一种数据更新方法、装置、设备及可读存储介质 | |
| Yang et al. | Tombolo: Performance enhancements for cloud storage gateways | |
| CN103428288A (zh) | 基于分区状态表和协调节点的副本同步方法 | |
| CN103634350B (zh) | 一种存储系统及其实现方法 | |
| CN109033250A (zh) | 一种支持大数据文件访问服务的高可用性对象存储方法 | |
| CN106919338B (zh) | 一种适用于软件定义存储的Flash存储访问处理方法及系统 | |
| CN108989400A (zh) | 一种云存储网关读写文件的方法、装置及设备 | |
| CN202856789U (zh) | 一种融合nas和san的数据资源存储系统 | |
| CN104461941A (zh) | 一种内存系统架构及管理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181211 |