CN109582638A - 快照卷数据拷贝方法、装置及计算机可读存储介质 - Google Patents

快照卷数据拷贝方法、装置及计算机可读存储介质 Download PDF

Info

Publication number
CN109582638A
CN109582638A CN201811250502.4A CN201811250502A CN109582638A CN 109582638 A CN109582638 A CN 109582638A CN 201811250502 A CN201811250502 A CN 201811250502A CN 109582638 A CN109582638 A CN 109582638A
Authority
CN
China
Prior art keywords
data
volume
data content
snapshot
access
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811250502.4A
Other languages
English (en)
Other versions
CN109582638B (zh
Inventor
龙飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201811250502.4A priority Critical patent/CN109582638B/zh
Publication of CN109582638A publication Critical patent/CN109582638A/zh
Application granted granted Critical
Publication of CN109582638B publication Critical patent/CN109582638B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及数据处理,公开了一种快照卷数据拷贝方法,该方法包括:当接收到客户端对目标快照卷的数据访问请求时,确定数据访问请求对应的访问对象,并查找目标快照卷上是否有访问对象对应的数据内容;若没有,则按照当前的快照层级逐级从上一层级的父镜像上查找访问对象对应的数据内容,直至从一个层级的父镜像中查找到访问对象对应的数据内容;若各个层级的快照卷中均没有数据内容,则从最高层级的快照卷对应的原始卷中查找数据内容,并将数据内容发送至客户端;将数据内容写入到目标快照卷中。本发明还提出一种快照卷数据拷贝装置以及一种计算机可读存储介质。本发明减少了快照卷数据拷贝中对于存储系统的读写资源的浪费。

Description

快照卷数据拷贝方法、装置及计算机可读存储介质
技术领域
本发明涉及数据处理技术领域,尤其涉及一种快照卷数据拷贝方法、装置及计算机可读存储介质。
背景技术
存储容量越来越大,对数据安全的要求也越来越高。随着存储应用需求的提高,用户需要在线的备份和保护数据。快照技术是一种有效地在线数据保护的方法,能够快速的实现在线数据备份。快照是原始卷的一个完全可用拷贝,该拷贝包括原始卷在某个时间点的映像。指定数据集合称为原始卷,某个时间点的映像称为快照卷。
快照的使用通常是对同一个原始卷在不同时间点建立一系列快照。例如,对于原始卷,在第一时间点配置了第一快照卷,在第二时间点配置了第二快照卷等;当需要拷贝某一快照卷数据(即某一时间点的原始卷数据),存储系统都会结合原始卷本身以及该时间点的快照卷记录的变化的数据,把整个卷的数据都进行拷贝。这种方法几乎是拷贝整个原始卷的数据,但在实际应用中,往往原始卷中只有少部分存储空间存储了有意义的数据,而大部分存储空间存储的是快照卷不会访问的数据,因此往往会大量拷贝了没有意义的数据,导致存储系统的读写资源的浪费。
发明内容
本发明提供一种快照卷数据拷贝方法、装置及计算机可读存储介质,其主要目的在于减少快照卷数据拷贝中对于存储系统的读写资源的浪费。
为实现上述目的,本发明还提供一种快照卷数据拷贝方法,该方法包括:
当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容;
若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容;
若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端;
将所述数据内容写入到所述目标快照卷中。
可选地,在将所述数据内容写入到所述目标快照卷中的步骤之前,所述方法还包括步骤:
确定接收到所述数据访问请求的时间点,并判断到所述时间点为止的预设时间间隔内,对所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第一预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤。
可选地,在将所述数据内容写入到所述目标快照卷中的步骤之前,所述方法还包括步骤:
获取记录的所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第二预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤;
若所述累计访问次数小于所述第二预设阈值,则更新所述累计访问次数。
可选地,所述方法还包括如下步骤:
每间隔预设时长,将各个快照卷中记录的累计访问次数清零。
可选地,在查找所述目标快照卷上是否有所述访问对象对应的数据内容的步骤之后,该方法还包括如下步骤:
若从所述目标快照卷上查找到所述访问对象对应的数据内容,则获取所述数据内容,并发送至所述客户端。
此外,为实现上述目的,本发明还提供一种快照卷数据拷贝装置,该装置包括存储器和处理器,所述存储器中存储有可在所述处理器上运行的数据拷贝程序,所述数据拷贝程序被所述处理器执行时实现如下步骤:
当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容;
若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容;
若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端;
将所述数据内容写入到所述目标快照卷中。
可选地,所述数据拷贝程序还可被处理器执行,以在将所述数据内容写入到所述目标快照卷中的步骤之前,还实现如下步骤:
获取记录的所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第二预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤;
若所述累计访问次数小于所述第二预设阈值,则更新所述累计访问次数。
可选地,所述数据拷贝程序还可被所述处理器执行,以实现如下步骤:
每间隔预设时长,将各个快照卷中记录的累计访问次数清零。
可选地,所述数据拷贝程序还可被所述处理器执行,以在查找所述目标快照卷上是否有所述访问对象对应的数据内容的步骤之后,还实现如下步骤:
若从所述目标快照卷上查找到所述访问对象对应的数据内容,则获取所述数据内容,并发送至所述客户端。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有数据拷贝程序,所述数据拷贝程序可被一个或者多个处理器执行,以实现如上所述的快照卷数据拷贝方法的步骤。
本发明提出的快照卷数据拷贝方法、装置及计算机可读存储介质,当接收到客户端对目标快照卷的数据访问请求时,确定数据访问请求对应的访问对象,并查找目标快照卷上是否有访问对象对应的数据内容;若目标快照卷上没有访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找访问对象对应的数据内容,直至从一个层级的父镜像中查找到访问对象对应的数据内容;若各个层级的快照卷中均没有数据内容,则从最高层级的快照卷对应的原始卷中查找数据内容,并将数据内容发送至客户端;将数据内容写入到目标快照卷中。该方案对于用户首次访问且快照卷中没有的数据内容,从其父镜像中查找到数据内容后拷贝到快照卷中,当用户再次访问时,可以直接从快照卷中获取到数据,并且该方案无需将原始卷中的全部数据一次性的全部拷贝到快照卷中,避免了存储系统的读写资源的浪费,同时能够提高对于快照卷中的数据访问请求的响应速度。
附图说明
图1为本发明一实施例提供的快照卷数据拷贝方法的流程示意图;
图2为本发明一实施例提供的快照卷数据拷贝方法中快照层级示意图;
图3为本发明一实施例提供的快照卷数据拷贝装置的内部结构示意图;
图4为本发明一实施例提供的快照卷数据拷贝装置中数据拷贝程序的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种快照卷数据拷贝方法。参照图1所示,为本发明一实施例提供的快照卷数据拷贝方法的流程示意图。该方法可以由一个装置执行,该装置可以由软件和/或硬件实现。
在本实施例中,快照卷数据拷贝方法包括:
步骤S10,当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容。
快照是指对某一个特定文件系统在某一个特定时间内的一个具有只读属性的镜像。快照是为了保存某个时间点的系统现场.在某个时间点打个快照,那么访问快照得到的数据就是那个时间点里系统的数据。基于这样的原理,初始创建的快照卷中并没有存储父镜像中已经存储的信息,在快照时间点之后,没有物理数据复制发生,仅仅复制了原始数据物理位置的元数据。因此,快照创建非常快,可以瞬间完成。然后,跟踪原始卷的数据变化,一旦原始卷数据块发生首次更新,则先将原始卷数据块读出并写入快照卷,然后用新数据块覆盖原始卷。
当用户需要对某个时间点的系统现场进行备份时,可以通过向服务器发送快照创建指令,服务器在接收到所述快照创建指令时,确定所述快照创建指令对应的原始卷,并创建该原始卷的快照卷。可以以创建快照卷时的时间信息为该快照卷命名。后续用户如果要对该时间点的原始卷的数据进行分析,可以通过访问该快照卷来实现,以该快照卷为目标快照卷,通过客户端向服务器发送对目标快照卷的数据访问请求,服务器在接收到数据访问请求后,确定数据访问请求对应的访问对象,查找该目标快照卷上是否有访问对象对应的数据。
由于对于服务器来说,在建立原始卷的快照卷之后,该快照卷是一个只具有读属性的镜像,当用户修改原始卷中的数据时,会将对应的数据拷贝到快照卷之后,用新的数据块覆盖原始卷中的数据块。而对于那些没有发生过修改的数据则不会被拷贝到快照卷中。因此,当用户访问快照卷中的数据时,快照卷中可能并不存在访问对象对应的具体数据内容,则需要从该快照卷的父镜像中拷贝。
步骤S20,若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容。
步骤S30,若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端。
步骤S40,将所述数据内容写入到所述目标快照卷中。
用户还可以根据需要建立快照卷的快照卷,这样会形成多层级快照,参照图2所示,为本发明一实施例提供的快照卷数据拷贝方法中快照层级示意图,当快照层级过多时,一个快照卷的父镜像可能是快照卷的克隆卷,也可能是原始卷。例如,参照上图所示,快照卷C2为T2时刻创建的原始卷C的快照,快照卷D1为T3时刻创建的快照卷C2的快照。由于在为快照卷打快照时,需要先基于快照卷做一个克隆卷,再给克隆卷打快照,因此,要创建快照卷C2的快照,要先为其创建克隆卷C2’,再创建克隆卷C2’的快照卷D1.即快照卷D1的父镜像为克隆卷C2’,克隆卷C2’的父镜像为快照卷C2,快照卷C2的父镜像为原始卷C。该图为一个具有两个层级快照的情况,在实际应用中,用户可以根据需要创建更多层级的快照。
假设用户以快照卷D1作为目标快照卷,访问该快照卷上的数据,当服务器从快照卷D1上查找不到访问对象对应的数据内容时,需要从其父镜像上查找,即从快照卷C2及其克隆卷上查找,若从快照卷C2上仍然查找不到该数据内容,则从其父镜像,即原始卷C上查找。即当存在多层级快照时,若从目标快照卷上查找不到需要的数据内容,则按照该目标快照卷当前的快照层级逐层级的从上一层级父镜像中查找,直至查找到需要的数据内容。
此外,可以理解的是,在查找所述目标快照卷上是否有所述访问对象对应的数据内容的步骤之后,该方法还包括如下步骤:
若从所述目标快照卷上查找到所述访问对象对应的数据内容,则获取所述数据内容,并发送至所述客户端。
若可以从快照卷D1或者快照卷C2上查找到需要的数据内容,则直接将数据内容发送至客户端。
进一步地,在一实施例中,在将所述数据内容写入到所述目标快照卷中的步骤之前,该方法还包括步骤:
获取记录的所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第二预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤;
若所述累计访问次数小于所述第二预设阈值,则更新所述累计访问次数。
在该实施例中,在快照卷中对访问对象的被访问次数进行统计,在获取到的数据内容并发送给客户端之后,获取记录的数据内容的累计访问次数,并判断该次数是否大于或等于第二预设阈值,若是,则可以判定该数据被多次访问,未来被访问的可能性比较大,为了使得用户可以快速地获取到访问的数据内容,则将该数据内容写入到目标快照卷中,当用户下次访问时,可以直接从快照卷中获取数据返回给客户端。若累计访问次数小于第二预设阈值,则无需拷贝数据,只需更新该累计访问次数即可。通过这样的方式,在快照卷中对那些只存在于父镜像的每个对象设置一个访问计数,如果在某段时间内超过设定的阀值。就自动的将该对象数据从父镜像拷贝到快照卷中。对于那些不存在于快照卷但又在某段时间内经常访问的数据,可以提高访问此数据的速度,同时避免了将数据一次性的从父镜像拷贝到快照卷中,造成一段时间内系统读写繁忙影响业务运行。
进一步地,该方法还包括如下步骤:
每间隔预设时长,将各个快照卷中记录的累计访问次数清零。
由于访问计数的意义在于表明某段时间内该数据的访问的频繁程度。每间隔预设时长,将累计访问次数进行清零的意义在于:如果不清零,这个值代表的就是从系统开始运行以来访问的次数。这样的话,如果某些数据累计了半年才到达第二预设阈值,那么访问它的频率并不频繁,实际上也不需要把这样的数据拷贝到快照卷上,避免占用额外的存储空间。
或者,在其他实施例中,确定接收到所述数据访问请求的时间点,并判断到所述时间点为止的预设时间间隔内,对所述数据内容的累计访问次数;若所述累计访问次数大于或等于第一预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤。
对于每个数据内容的访问时间进行记录,在客户端访问一数据内容后,根据记录的访问时间对该数据内容在预设时间间隔内的被访问次数进行统计,若其大于或等于第一预设阈值,则将该数据内容写入到目标快照卷中。
本实施例提出的快照卷数据拷贝方法,当接收到客户端对目标快照卷的数据访问请求时,确定数据访问请求对应的访问对象,并查找目标快照卷上是否有访问对象对应的数据内容;若目标快照卷上没有访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找访问对象对应的数据内容,直至从一个层级的父镜像中查找到访问对象对应的数据内容;若各个层级的快照卷中均没有数据内容,则从最高层级的快照卷对应的原始卷中查找数据内容,并将数据内容发送至客户端;将数据内容写入到目标快照卷中。该方案对于用户首次访问且快照卷中没有的数据内容,从其父镜像中查找到数据内容后拷贝到快照卷中,当用户再次访问时,可以直接从快照卷中获取到数据,并且该方案无需将原始卷中的全部数据一次性的全部拷贝到快照卷中,避免了存储系统的读写资源的浪费,同时能够提高对于快照卷中的数据访问请求的响应速度。
本发明还提供一种快照卷数据拷贝装置。参照图3所示,为本发明一实施例提供的快照卷数据拷贝装置的内部结构示意图。
在本实施例中,快照卷数据拷贝装置1可以是PC(Personal Computer,个人电脑),也可以是智能手机、平板电脑、便携计算机等终端设备。该快照卷数据拷贝装置1至少包括存储器11、处理器12,网络接口13以及通信总线。
其中,存储器11至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、磁性存储器、磁盘、光盘等。存储器11在一些实施例中可以是快照卷数据拷贝装置1的内部存储单元,例如该快照卷数据拷贝装置1的硬盘。存储器11在另一些实施例中也可以是快照卷数据拷贝装置1的外部存储设备,例如快照卷数据拷贝装置1上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器11还可以既包括快照卷数据拷贝装置1的内部存储单元也包括外部存储设备。存储器11不仅可以用于存储安装于快照卷数据拷贝装置1的应用软件及各类数据,例如数据拷贝程序01的代码等,还可以用于暂时地存储已经输出或者将要输出的数据。
处理器12在一些实施例中可以是一中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器或其他数据处理芯片,用于运行存储器11中存储的程序代码或处理数据,例如执行数据拷贝程序01等。
网络接口13可选的可以包括标准的有线接口、无线接口(如WI-FI接口),通常用于在该装置1与其他电子设备之间建立通信连接。
通信总线用于实现这些组件之间的连接通信。
可选地,该装置1还可以包括用户接口,用户接口可以包括显示器(Display)、输入单元比如键盘(Keyboard),可选的用户接口还可以包括标准的有线接口、无线接口。可选地,在一些实施例中,显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting D读写de,有机发光二极管)触摸器等。其中,显示器也可以适当的称为显示屏或显示单元,用于显示在快照卷数据拷贝装置1中处理的信息以及用于显示可视化的用户界面。
图3仅示出了具有组件11-13以及数据拷贝程序01的快照卷数据拷贝装置1,本领域技术人员可以理解的是,图1示出的结构并不构成对快照卷数据拷贝装置1的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。
在图3所示的装置1实施例中,存储器11中存储有数据拷贝程序01;处理器12执行存储器11中存储的数据拷贝程序01时实现如下步骤:
当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容。
快照是指对某一个特定文件系统在某一个特定时间内的一个具有只读属性的镜像。快照是为了保存某个时间点的系统现场.在某个时间点打个快照,那么访问快照得到的数据就是那个时间点里系统的数据。基于这样的原理,初始创建的快照卷中并没有存储父镜像中已经存储的信息,在快照时间点之后,没有物理数据复制发生,仅仅复制了原始数据物理位置的元数据。因此,快照创建非常快,可以瞬间完成。然后,跟踪原始卷的数据变化,一旦原始卷数据块发生首次更新,则先将原始卷数据块读出并写入快照卷,然后用新数据块覆盖原始卷。
当用户需要对某个时间点的系统现场进行备份时,可以通过向服务器发送快照创建指令,服务器在接收到所述快照创建指令时,确定所述快照创建指令对应的原始卷,并创建该原始卷的快照卷。可以以创建快照卷时的时间信息为该快照卷命名。后续用户如果要对该时间点的原始卷的数据进行分析,可以通过访问该快照卷来实现,以该快照卷为目标快照卷,通过客户端向服务器发送对目标快照卷的数据访问请求,服务器在接收到数据访问请求后,确定数据访问请求对应的访问对象,查找该目标快照卷上是否有访问对象对应的数据。
由于对于服务器来说,在建立原始卷的快照卷之后,该快照卷是一个只具有读属性的镜像,当用户修改原始卷中的数据时,会将对应的数据拷贝到快照卷之后,用新的数据块覆盖原始卷中的数据块。而对于那些没有发生过修改的数据则不会被拷贝到快照卷中。因此,当用户访问快照卷中的数据时,快照卷中可能并不存在访问对象对应的具体数据内容,则需要从该快照卷的父镜像中拷贝。
若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容。
若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端。
将所述数据内容写入到所述目标快照卷中。
用户还可以根据需要建立快照卷的快照卷,这样会形成多层级快照,参照图2所示,为本发明一实施例提供的快照卷数据拷贝方法中快照层级示意图,当快照层级过多时,一个快照卷的父镜像可能是快照卷的克隆卷,也可能是原始卷。例如,参照上图所示,快照卷C2为T2时刻创建的原始卷C的快照,快照卷D1为T3时刻创建的快照卷C2的快照。由于在为快照卷打快照时,需要先基于快照卷做一个克隆卷,再给克隆卷打快照,因此,要创建快照卷C2的快照,要先为其创建克隆卷C2’,再创建克隆卷C2’的快照卷D1.即快照卷D1的父镜像为克隆卷C2’,克隆卷C2’的父镜像为快照卷C2,快照卷C2的父镜像为原始卷C。该图为一个具有两个层级快照的情况,在实际应用中,用户可以根据需要创建更多层级的快照。
假设用户以快照卷D1作为目标快照卷,访问该快照卷上的数据,当服务器从快照卷D1上查找不到访问对象对应的数据内容时,需要从其父镜像上查找,即从快照卷C2及其克隆卷上查找,若从快照卷C2上仍然查找不到该数据内容,则从其父镜像,即原始卷C上查找。即当存在多层级快照时,若从目标快照卷上查找不到需要的数据内容,则按照该目标快照卷当前的快照层级逐层级的从上一层级父镜像中查找,直至查找到需要的数据内容。
此外,可以理解的是,数据拷贝程序01还可被处理器12执行,以在查找所述目标快照卷上是否有所述访问对象对应的数据内容的步骤之后,还实现如下步骤:
若从所述目标快照卷上查找到所述访问对象对应的数据内容,则获取所述数据内容,并发送至所述客户端。
若可以从快照卷D1或者快照卷C2上查找到需要的数据内容,则直接将数据内容发送至客户端。
进一步地,在一实施例中,数据拷贝程序01还可被处理器12执行,以在将所述数据内容写入到所述目标快照卷中的步骤之前,还实现如下步骤:
获取记录的所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第二预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤;
若所述累计访问次数小于所述第二预设阈值,则更新所述累计访问次数。
在该实施例中,在快照卷中对访问对象的被访问次数进行统计,在获取到的数据内容并发送给客户端之后,获取记录的数据内容的累计访问次数,并判断该次数是否大于或等于第二预设阈值,若是,则可以判定该数据被多次访问,未来被访问的可能性比较大,为了使得用户可以快速地获取到访问的数据内容,则将该数据内容写入到目标快照卷中,当用户下次访问时,可以直接从快照卷中获取数据返回给客户端。若累计访问次数小于第二预设阈值,则无需拷贝数据,只需更新该累计访问次数即可。通过这样的方式,在快照卷中对那些只存在于父镜像的每个对象设置一个访问计数,如果在某段时间内超过设定的阀值。就自动的将该对象数据从父镜像拷贝到快照卷中。对于那些不存在于快照卷但又在某段时间内经常访问的数据,可以提高访问此数据的速度,同时避免了将数据一次性的从父镜像拷贝到快照卷中,造成一段时间内系统读写繁忙影响业务运行。
进一步地,数据拷贝程序01还可被处理器12执行,以实现如下步骤:
每间隔预设时长,将各个快照卷中记录的累计访问次数清零。
由于访问计数的意义在于表明某段时间内该数据的访问的频繁程度。每间隔预设时长,将累计访问次数进行清零的意义在于:如果不清零,这个值代表的就是从系统开始运行以来访问的次数。这样的话,如果某些数据累计了半年才到达第二预设阈值,那么访问它的频率并不频繁,实际上也不需要把这样的数据拷贝到快照卷上,避免占用额外的存储空间。
或者,在其他实施例中,确定接收到所述数据访问请求的时间点,并判断到所述时间点为止的预设时间间隔内,对所述数据内容的累计访问次数;若所述累计访问次数大于或等于第一预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤。
对于每个数据内容的访问时间进行记录,在客户端访问一数据内容后,根据记录的访问时间对该数据内容在预设时间间隔内的被访问次数进行统计,若其大于或等于第一预设阈值,则将该数据内容写入到目标快照卷中。
本实施例提出的快照卷数据拷贝装置,当接收到客户端对目标快照卷的数据访问请求时,确定数据访问请求对应的访问对象,并查找目标快照卷上是否有访问对象对应的数据内容;若目标快照卷上没有访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找访问对象对应的数据内容,直至从一个层级的父镜像中查找到访问对象对应的数据内容;若各个层级的快照卷中均没有数据内容,则从最高层级的快照卷对应的原始卷中查找数据内容,并将数据内容发送至客户端;将数据内容写入到目标快照卷中。该方案对于用户首次访问且快照卷中没有的数据内容,从其父镜像中查找到数据内容后拷贝到快照卷中,当用户再次访问时,可以直接从快照卷中获取到数据,并且该方案无需将原始卷中的全部数据一次性的全部拷贝到快照卷中,避免了存储系统的读写资源的浪费,同时能够提高对于快照卷中的数据访问请求的响应速度。
可选地,在其他的实施例中,数据拷贝程序还可以被分割为一个或者多个模块,一个或者多个模块被存储于存储器11中,并由一个或多个处理器(本实施例为处理器12)所执行以完成本发明,本发明所称的模块是指能够完成特定功能的一系列计算机程序指令段,用于描述数据拷贝程序在快照卷数据拷贝装置中的执行过程。
例如,参照图4所示,为本发明快照卷数据拷贝装置一实施例中的数据拷贝程序的程序模块示意图,该实施例中,数据拷贝程序可以被分割为数据查找模块10、数据发送模块20、数据拷贝模块30,示例性地:
数据查找模块10用于:当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容;
数据查找模块10还用于:若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容;
数据发送模块20用于:若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端;
数据拷贝模块30用于:将所述数据内容写入到所述目标快照卷中。
上述数据查找模块10、数据发送模块20、数据拷贝模块30等程序模块被执行时所实现的功能或操作步骤与上述实施例大体相同,在此不再赘述。
此外,本发明实施例还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有数据拷贝程序,所述数据拷贝程序可被一个或多个处理器执行,以实现如下操作:
当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容;
若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容;
若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端;
将所述数据内容写入到所述目标快照卷中。
本发明计算机可读存储介质具体实施方式与上述快照卷数据拷贝装置和方法各实施例基本相同,在此不作累述。
需要说明的是,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种快照卷数据拷贝方法,其特征在于,所述方法包括:
当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容;
若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容;
若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端;
将所述数据内容写入到所述目标快照卷中。
2.如权利要求1所述的快照卷数据拷贝方法,其特征在于,在将所述数据内容写入到所述目标快照卷中的步骤之前,所述方法还包括步骤:
确定接收到所述数据访问请求的时间点,并判断到所述时间点为止的预设时间间隔内,对所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第一预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤。
3.如权利要求1所述的快照卷数据拷贝方法,其特征在于,在将所述数据内容写入到所述目标快照卷中的步骤之前,所述方法还包括步骤:
获取记录的所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第二预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤;
若所述累计访问次数小于所述第二预设阈值,则更新所述累计访问次数。
4.如权利要求3所述的快照卷数据拷贝方法,其特征在于,所述方法还包括如下步骤:
每间隔预设时长,将各个快照卷中记录的累计访问次数清零。
5.如权利要求1至4中任一项所述的快照卷数据拷贝方法,其特征在于,在查找所述目标快照卷上是否有所述访问对象对应的数据内容的步骤之后,该方法还包括如下步骤:
若从所述目标快照卷上查找到所述访问对象对应的数据内容,则获取所述数据内容,并发送至所述客户端。
6.一种快照卷数据拷贝装置,其特征在于,所述装置包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的数据拷贝程序,所述数据拷贝程序被所述处理器执行时实现如下步骤:
当接收到客户端对目标快照卷的数据访问请求时,确定所述数据访问请求对应的访问对象,并查找所述目标快照卷上是否有所述访问对象对应的数据内容;
若所述目标快照卷上没有所述访问对象对应的数据内容,则按照当前的快照层级逐级从上一层级的父镜像上查找所述访问对象对应的数据内容,直至从一个层级的父镜像中查找到所述访问对象对应的数据内容;
若各个层级的快照卷中均没有所述数据内容,则从最高层级的快照卷对应的原始卷中查找所述数据内容,并将所述数据内容发送至所述客户端;
将所述数据内容写入到所述目标快照卷中。
7.如权利要求6所述的快照卷数据拷贝装置,其特征在于,所述数据拷贝程序还可被处理器执行,以在将所述数据内容写入到所述目标快照卷中的步骤之前,还实现如下步骤:
获取记录的所述数据内容的累计访问次数;
若所述累计访问次数大于或等于第二预设阈值,则执行将所述数据内容写入到所述目标快照卷中的步骤;
若所述累计访问次数小于所述第二预设阈值,则更新所述累计访问次数。
8.如权利要求7所述的快照卷数据拷贝装置,其特征在于,所述数据拷贝程序还可被所述处理器执行,以实现如下步骤:
每间隔预设时长,将各个快照卷中记录的累计访问次数清零。
9.如权利要求6至8中任一项所述的快照卷数据拷贝装置,其特征在于,所述数据拷贝程序还可被所述处理器执行,以在查找所述目标快照卷上是否有所述访问对象对应的数据内容的步骤之后,还实现如下步骤:
若从所述目标快照卷上查找到所述访问对象对应的数据内容,则获取所述数据内容,并发送至所述客户端。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有数据拷贝程序,所述数据拷贝程序可被一个或者多个处理器执行,以实现如权利要求1至5中任一项所述的快照卷数据拷贝方法的步骤。
CN201811250502.4A 2018-10-25 2018-10-25 快照卷数据拷贝方法、装置及计算机可读存储介质 Active CN109582638B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811250502.4A CN109582638B (zh) 2018-10-25 2018-10-25 快照卷数据拷贝方法、装置及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811250502.4A CN109582638B (zh) 2018-10-25 2018-10-25 快照卷数据拷贝方法、装置及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109582638A true CN109582638A (zh) 2019-04-05
CN109582638B CN109582638B (zh) 2023-08-22

Family

ID=65920770

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811250502.4A Active CN109582638B (zh) 2018-10-25 2018-10-25 快照卷数据拷贝方法、装置及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN109582638B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102378969A (zh) * 2009-03-30 2012-03-14 惠普开发有限公司 拷贝卷中存储的数据的去重复
US20150127614A1 (en) * 2013-11-04 2015-05-07 Falconstor, Inc. Point in time snapshots using copy on predicted write
CN107577558A (zh) * 2017-08-31 2018-01-12 郑州云海信息技术有限公司 一种云存储的快照方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102378969A (zh) * 2009-03-30 2012-03-14 惠普开发有限公司 拷贝卷中存储的数据的去重复
US20150127614A1 (en) * 2013-11-04 2015-05-07 Falconstor, Inc. Point in time snapshots using copy on predicted write
CN107577558A (zh) * 2017-08-31 2018-01-12 郑州云海信息技术有限公司 一种云存储的快照方法及装置

Also Published As

Publication number Publication date
CN109582638B (zh) 2023-08-22

Similar Documents

Publication Publication Date Title
US9811549B2 (en) Applying a database transaction log record directly to a database table container
US8555018B1 (en) Techniques for storing data
US8170987B2 (en) Methods, systems and computer program products for automatically identifying and backing up user device content
US10430047B2 (en) Managing content on an electronic device
CN109597707A (zh) 克隆卷数据拷贝方法、装置及计算机可读存储介质
CN104572922A (zh) 一种基于移动设备的图片处理方法和装置
US11531658B2 (en) Criterion-based retention of data object versions
CN108874924A (zh) 搜索服务的创建方法、装置及计算机可读存储介质
CN105138376A (zh) 混合模式应用、其网页资源升级方法、移动终端以及系统
CN109582496A (zh) 一致性快照组的创建方法、装置及计算机可读存储介质
CN105657049A (zh) 一种增量数据同步方法、装置和移动终端
CN110941779A (zh) 加载页面的方法、装置、存储介质及电子设备
CN107592118A (zh) 可变长编码文件的解码方法以及装置
CN110222046B (zh) 列表数据的处理方法、装置、服务器和存储介质
CN112988062B (zh) 一种元数据读取限制方法、装置、电子设备及介质
US20170091206A1 (en) Information Processing Method and Electronic Apparatus
CN109522282A (zh) 图片管理方法、装置、计算机装置及存储介质
CN112559913A (zh) 一种数据处理方法、装置、计算设备及可读存储介质
US10528536B1 (en) Managing data object versions in a storage service
CN109582638A (zh) 快照卷数据拷贝方法、装置及计算机可读存储介质
US9378230B1 (en) Ensuring availability of data in a set being uncorrelated over time
CN109766220A (zh) 应用系统的备份恢复方法、装置及计算机可读存储介质
CN111143293B (zh) 一种元数据获取方法、装置、设备及计算机可读存储介质
US20220207075A1 (en) Method and apparatus for generating unordered list, method for managing images and terminal device
US20210357419A1 (en) Preventing dbms deadlock by eliminating shared locking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant