CN108762984B - 一种连续性数据备份的方法及装置 - Google Patents

一种连续性数据备份的方法及装置 Download PDF

Info

Publication number
CN108762984B
CN108762984B CN201810501468.7A CN201810501468A CN108762984B CN 108762984 B CN108762984 B CN 108762984B CN 201810501468 A CN201810501468 A CN 201810501468A CN 108762984 B CN108762984 B CN 108762984B
Authority
CN
China
Prior art keywords
lun
write request
log information
log
cache space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810501468.7A
Other languages
English (en)
Other versions
CN108762984A (zh
Inventor
龚飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Macrosan Technologies Co Ltd
Original Assignee
Macrosan Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Macrosan Technologies Co Ltd filed Critical Macrosan Technologies Co Ltd
Priority to CN201810501468.7A priority Critical patent/CN108762984B/zh
Publication of CN108762984A publication Critical patent/CN108762984A/zh
Application granted granted Critical
Publication of CN108762984B publication Critical patent/CN108762984B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G06F11/1464—Management of the backup or restore process for networked environments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653—Monitoring storage devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0656—Data buffering arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Quality & Reliability (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请提供一种连续性数据备份的方法及装置，该方法包括：若目标LUN为主LUN，向一致性组的其它LUN发送日志收集请求，接收其它LUN上报的写请求日志信息，并从目标LUN的日志缓存空间获取目标LUN的写请求日志信息；按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和目标LUN的写请求日志信息依次写入到组日志缓存空间；将组日志缓存空间中的各写请求日志信息依次传输至灾备中心。在本申请中，一致性组的各个LUN分别配置日志缓存空间，主LUN可以汇总各个LUN的写请求日志信息并传输至灾备中心，在实现连续性数据备份的情况下，减少了各个LUN处理写请求的时延，提高了业务性能。

Description

一种连续性数据备份的方法及装置
技术领域
本申请涉及存储领域，特别涉及一种连续性数据备份的方法及装置。
背景技术
传统的数据备份方案，通常周期性备份数据。周期时长的长短会影响备份数据的完整性，随着企业对业务的可靠性的要求越来越高，对于备份数据的完整性的要求越来越高，相应地，备份的周期时长也越来越短。在这种情况下，CDP(Continuous DataProtection，连续数据保护)应运而生，用于在数据变化的时候，将每一时刻的数据都备份起来。理论上，当存储设备发生故障后，可以基于已备份的数据恢复至任一时间点的数据。
发明内容
有鉴于此，本申请提供一种连续性数据备份的方法及装置，用以对存储设备上的数据进行连续性备份。
具体地，本申请是通过如下技术方案实现的：
一种连续性数据备份的方法，应用于一致性组的目标LUN，所述一致性组包括一个主LUN和若干个从LUN，所述一致性组预配置组日志缓存空间，所述一致性组的各个LUN分别预配置日志缓存空间，包括：
若所述目标LUN为主LUN，向所述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息；
接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；
按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和所述目标LUN的写请求日志信息依次写入到所述组日志缓存空间；
将所述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由所述灾备中心的LUN保存所述写请求日志信息。
在所述连续性数据备份的方法中，所述日志收集请求携带指定时间段；
所述接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息，包括：
接收其它LUN上报的写请求日志信息，从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；其中，所述写请求日志信息的时戳指示的时间在所述指定时间段内。
在所述连续性数据备份的方法中，所述方法还包括：
若所述目标LUN为从LUN，接收所述一致性组的主LUN发送的日志收集请求；
从自身的日志缓存空间中获取并上报写请求日志信息至所述主LUN，以由所述主LUN汇总所述一致性组的各个LUN的写请求日志信息后向灾备中心传输所述写请求日志信息。
在所述连续性数据备份的方法中，所述方法还包括：
若所述目标LUN为从LUN，接收所述一致性组的主LUN发送的日志收集请求；
基于所述日志收集请求中的所述指定时间段，从所述目标LUN的日志缓存空间获取写请求日志信息，所述写请求日志信息的时戳指示的时间在所述指定时间段内；
将获取的所述写请求日志信息上报至所述主LUN，以由所述主LUN汇总所述一致性组的各个LUN的写请求日志信息后向灾备中心传输所述写请求日志信息。
在所述连续性数据备份的方法中，所述方法还包括：
接收写请求；其中，所述写请求中的LUN标识指示所述目标LUN；
将所述写请求中的待写入数据写入到所述目标LUN；
为所述写请求生成写请求日志信息，并将所述写请求日志信息写入到所述目标LUN的日志缓存空间。
在所述连续性数据备份的方法中，所述向所述一致性组的其它LUN发送日志收集请求，包括：
周期性向所述一致性组的其它LUN发送日志收集请求；或，
检查所述目标LUN的日志缓存空间的可用大小是否小于预设的第一阈值，如果是，向其它LUN发送日志收集请求。
在所述连续性数据备份的方法中，若所述一致性组的各个LUN位于至少两个存储设备，各存储设备的时钟通过网络时间协议NTP同步得到。
在所述连续性数据备份的方法中，所述灾备中心的LUN与所述一致性组中的多个LUN一一对应。
在所述连续性数据备份的方法中，所述方法还包括：
基于预设策略，删除自身的日志缓存空间中的写请求日志信息。
一种连续性数据备份的装置，应用于一致性组的目标LUN，所述一致性组包括一个主LUN和若干个从LUN，所述一致性组预配置组日志缓存空间，所述一致性组的各个LUN分别预配置日志缓存空间，包括：
发送单元，用于若所述目标LUN为主LUN，向所述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息；
获取单元，用于接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；
汇总单元，用于按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和所述目标LUN的写请求日志信息依次写入到所述组日志缓存空间；
传输单元，用于将所述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由所述灾备中心的LUN保存所述写请求日志信息。
在本申请技术方案中，一致性组预配置组日志缓存空间，一致性组的各个LUN分别预配置日志缓存空间；若目标LUN为主LUN，目标LUN向上述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息；目标LUN接收其它LUN上报的写请求日志信息，并从自身的日志缓存空间获取上述目标LUN的写请求日志信息，然后按照各写请求日志信息的时戳的先后顺序，将上述写请求日志信息依次写入到上述组日志缓存空间，进一步地，将上述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由灾备中心的LUN保存上述写请求日志信息；
由于一致性组的各个LUN分别配置了日志缓存空间，各个LUN在处理写请求时可向自身的日志缓存空间写入写请求日志信息，一致性组的主LUN汇总各个LUN的写请求日志信息并传输至灾备中心，从而实现了在连续性数据备份的情况下减少了各个LUN处理写请求的时延，提高了业务性能。
附图说明
图1是本申请示出的一种一致性组连续数据保护的网络架构图；
图2是本申请示出的一种日志缓存空间的示意图；
图3是本申请示出的另一种一致性组连续数据保护的网络架构图；
图4是本申请示出的一种处理写请求的方法的流程图；
图5是本申请示出的一种连续性数据备份的方法的流程图；
图6是本申请示出的一种连续性数据备份的装置的实施例框图；
图7是本申请示出的一种连续性数据备份的装置的硬件结构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明实施例中的技术方案，并使本发明实施例的上述目的、特征和优点能够更加明显易懂，下面结合附图对现有技术方案和本发明实施例中的技术方案作进一步详细的说明。
参见图1，为本申请示出的一种一致性组连续数据保护的网络架构图。如图1所示，存储设备A为生产中心的存储设备，负责处理前端业务服务器下发的IO(Input/Output，写入/写出)请求，存储设备A上搭载的一致性组(consistency group)中包括三个LUN(Logical Unit Number，逻辑单元号)。一致性组的多个LUN共用一个日志缓存空间。
其中，一致性组包括多个存在关联的LUN。在CDP技术中，需将一致性组中各个LUN上的数据作为整体进行保护，以使得备份后的数据可以使用。
日志缓存空间用于缓存写入各个LUN的写请求的写请求日志信息。参见图2，为本申请示出的一种日志缓存空间的示意图，如图2所示，日志缓存空间中依次写入存储设备接收的写请求对应的写请求日志信息。其中，写请求日志信息包括写请求信息(包括：起始地址、数据长度、LUN标识)、日志时戳信息(该日志时戳信息可以表征存储设备接收写请求的时间)和写请求中的待写入数据。
存储设备B为灾备中心的存储设备，存储设备B上搭载的一致性组中的LUN与存储设备A上搭载的一致性组中的LUN分别一一对应。
生产中心的存储设备A接收到前端业务服务器下发的写请求，可以下发至该写请求所指示的LUN，以由各个LUN分别写入写请求中的待写入数据并为该写请求生成写请求日志信息。其中，一致性组中各个LUN生成的写请求日志信息都会写入到日志缓存空间。
因此，若一致性组中的各个LUN中的数据出现软错误(比如：因系统中毒或误删除导致数据丢失)，存储设备A可以从日志缓存空间中，恢复出一致性组中任一时间点的数据。
进一步地，存储设备A可以将本地的日志缓存空间中的写请求日志信息依次传输至灾备中心的存储设备B。
存储设备B负责接收存储设备A传输的写请求日志信息，并将写请求日志信息依次下发到本地一致性组中各个LUN上，以使得各个LUN分别写入写请求日志信息中的代写入数据。此外，存储设备B上的一致性组中的LUN写入数据时，同样需要更新日志缓存空间。
因此，若生产中心的存储设备A发生故障，可以从灾备中心恢复出生产中心任一时间点的数据。
由于现有技术中，同一个一致性组的多个LUN共用一个日志缓存空间，当多个LUN同时处理写请求，需分别为写请求生成写请求日志信息后写入到日志缓存空间中。若多个LUN同时对日志缓存空间进行操作，则多个LUN实际上是先后向日志缓存空间写入写请求日志信息，这会增加各个LUN处理写请求的时延，进而影响业务性能。
此外，如果一致性组的多个LUN搭载在至少两个存储设备上，则LUN在处理写请求时跨设备向日志缓存空间写入写请求日志信息会造成更长的时延，进一步影响业务性能。
有鉴于此，本申请提出了一种连续性数据备份的方法及装置，用以将生产中心的数据备份至灾备中心，同时尽量减少LUN处理写请求的时延，减少对业务性能的影响。
在本申请中，一致性组的各个LUN分别被配置日志缓存空间，各日志缓存空间用于记录对应的LUN在处理写请求时产生的写请求日志信息。一致性组被配置组日志缓存空间，该组日志缓存空间用于记录一致性组所有LUN在处理写请求时产生的写请求日志信息。
需要指出的是，若一致性组的各个LUN位于至少两个存储设备，各存储设备的时钟通过NTP(Network Time Protocol，网络时间协议)同步得到。通过该措施，各个LUN上报的写请求日志信息的时戳才能正确表示各写请求日志信息的先后顺序。
参见图3，为本申请示出的另一种一致性组连续数据保护的网络架构图。如图3所示，存储设备A为生产中心的存储设备，负责处理前端业务服务器下发的IO请求，存储设备A上搭载的一致性组中包括三个LUN。一致性组的多个LUN分别配置了日志缓存空间，且一致性组被配置组日志缓存空间。
存储设备B为灾备中心的存储设备，存储设备B上搭载的一致性组中的LUN与存储设备A上搭载的一致性组中的LUN分别一一对应。
参见图4，为本申请示出的一种处理写请求的方法的流程图，所述方法应用于一致性组的目标LUN，所述一致性组的各个LUN分别预配置日志缓存空间，所述方法包括：
步骤401：接收写请求；其中，所述写请求中的LUN标识指示所述目标LUN。
步骤402：将所述写请求中的待写入数据写入到所述目标LUN。
其中，目标LUN泛指一致性组中的任一LUN，其只是为便于描述进行的命名，并不限定本申请。
上述LUN标识可以是LUN ID，也可以是其它可指示LUN的唯一标识。
存储设备接收到前端业务服务器下发的写请求后，会将该写请求下发至该写请求中的LUN标识指示的LUN。上述目标LUN接收到写请求后，将该写请求中的待写入数据写入到目标LUN。
步骤403：为所述写请求生成写请求日志信息，并将所述写请求日志信息写入到所述目标LUN的日志缓存空间。
上述目标LUN可以为上述写请求生成写请求日志信息，该写请求日志信息包括上述写请求中的起始地址、数据长度、LUN标识、待写入数据以及日志时戳信息。
上述目标LUN为自身的写请求生成写请求日志信息，并将写请求日志信息写入到自身的日志缓存空间后，后续可以基于写请求日志信息获取上述目标LUN任一时间点所存储的数据。
由于一致性组的各个LUN分配配置了日志缓存空间，各个LUN在处理写请求时，可以向自身的日志缓存空间写入写请求日志信息。多个LUN不会同时对一个日志缓存空间进行操作，因此，避免了等待产生的处理时延，提高了业务性能。
至此，本申请处理写请求的流程介绍完毕。
下面介绍本申请连续性数据备份的方法，参见图5，为本申请示出的一种连续性数据备份的方法的流程图，所述方法应用于一致性组的目标LUN，所述一致性组包括一个主LUN和若干个从LUN，所述一致性组预配置组日志缓存空间，所述一致性组的各个LUN分别预配置日志缓存空间，所述方法包括以下步骤：
步骤501：若所述目标LUN为主LUN，向所述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息。
其中，目标LUN泛指一致性组中的任一LUN，其只是为便于描述进行的命名，并不限定本申请。
在本申请实施例中，一致性组的多个LUN可以通过预设的选举机制选举出主LUN。比如：各个LUN可以基于预设的周期时长比较在当前周期内所处理的写请求，并将处理写请求最少的LUN选为主LUN，其它LUN均为从LUN。
又比如：各个LUN可以互相比较LUN ID，并将LUN ID最大或最小的LUN选为主LUN，其它LUN均为从LUN。
此外，也可以人为选择一致性组中的一个LUN作为主LUN。
当然，还可以通过其它方式确定一致性组中的主LUN，本申请不具体限定。
在本申请实施例中，若上述目标LUN为一致性组的主LUN，则需负责汇总一致性组中各个LUN的写请求日志信息。
在示出的一种实施方式中，上述目标LUN可以周期性向上述一致性组的其它LUN发送日志收集请求。
在这种情况下，上述目标LUN是周期性汇总各个LUN的写请求日志信息，因此，上述日志收集请求中可以携带指定时间段。其中，该指定时间段即指示当前的周期时间。
比如：若预设的周期时长为1小时，上述目标LUN在每个整点汇总各个LUN的写请求日志信息，当上述目标LUN在下午2点向其它LUN发送日志收集请求时，该日志收集请求携带的指定时间段为下午1点至下午2点。
在示出的另一种实施方式中，上述目标LUN可以检查自身的日志缓存空间的可用大小是否小于预设的第一阈值。
其中，上述第一阈值可以是日志缓存空间的总大小的百分之三十，当然，也可以是其它值，本申请不具体限定。
一方面，如果日志缓存空间的可用大小不小于上述第一阈值，则上述目标LUN可以暂不汇总各个LUN的写请求日志信息。
另一方面，如果日志缓存空间的可用大小小于上述第一阈值，则上述第一目标LUN可以向其它LUN发送日志收集请求。
在这种情况下，上述日志收集请求中可以携带指定时间段。其中，上述指定时间段的起始时刻为前一次发送日志收集请求的时间点，结尾时刻为本次发送日志收集请求的时间点。
比如：若上述目标LUN在下午3点发送了日志收集请求，之后，上述目标LUN在下午7点确定日志缓存空间的可用大小小于第一阈值，则上述目标LUN在下午7点发送的日志收集请求时，该日志收集请求携带的指定时间段为下午3点至下午7点。
在本申请实施例中，一致性组的从LUN可以接收上述目标LUN(一致性组的主LUN)发送的日志收集请求，然后从自身的日志缓存空间中获取并上报写请求日志信息至上述目标LUN。
在示出的一种实施方式中，若上述目标LUN(一致性组的主LUN)发送的日志收集请求携带指定时间段，则一致性组的从LUN可以接收上述日志收集请求，然后基于上述日志收集请求中的指定时间段，从自身的日志缓存空间获取写请求日志信息。其中，从LUN从日志缓存空间获取到的写请求日志信息的时戳指示的时间在上述指定时间段内。
一致性组的从LUN可以将获取的上述写请求信息上报至上述目标LUN。
步骤502：接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息。
在示出的一种实施方式中，若上述目标LUN发送的日志收集请求携带指定时间段，则其它LUN上报的写请求日志信息的时戳指示的时间在上述指定时间段内。此外，上述目标LUN可以基于上述指定时间段从自身的日志缓存空间获取写请求日志信息。
因此，在这种情况下，上述目标LUN接收的写请求日志信息和从自身的日志缓存空间获取到的写请求日志信息的时戳指示的时间都在上述指定时间段内。
通过这种实施方式，上述目标LUN每次只需整理指定时间段内一致性组的写请求日志信息，减少了将写请求日志信息写入到组日志缓存空间时出错的概率。
在本申请实施例中，为减少写请求日志信息占用日志缓存空间，一致性组的各个LUN可以基于预设策略，删除自身的日志缓存空间中的写请求日志信息。
比如：各个LUN可以基于预设周期(比如：24小时)，将自身的日志缓存空间中最早的50％的写请求日志信息删除。
又比如：各个LUN可以在自身的日志缓存空间的利用率达到预设阈值(比如：80％)后，将自身的日志缓存空间中最早的50％的写请求日志信息删除。
当然还可以由其它策略，视实际应用环境而定，在此不做限定。
步骤503：按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和所述目标LUN的写请求日志信息依次写入到所述组日志缓存空间。
上述目标LUN在汇总上述一致性组的写请求日志信息后，可以基于各写请求日志信息的时戳的先后顺序，对各写请求日志信息进行排序，然后将各写请求日志信息依次写入到一致性组的组日志缓存空间。
步骤504：将所述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由所述灾备中心的LUN保存所述写请求日志信息。
作为一种实施例，上述目标LUN可以在每次将汇总的写请求日志信息写入到组日志缓存空间后，将本次汇总的写请求日志信息传输至灾备中心。
作为另一种实施例，上述目标LUN可以周期性地将新写入到组日志缓存空间的写请求日志信息传输至灾备中心。
作为又一种实施例，上述目标LUN可以在自身接收的写请求较少时，将组日志缓存空间中尚未备份过的写请求日志信息传输至灾备中心。
当然，还可以基于其它策略传输写请求日志信息，本申请不具体限定。
在本申请实施例中，灾备中心的LUN接收到生产中心的一致性组的主LUN传输的写请求日志信息后，需保存上述写请求日志信息。
在示出的一种实施方式中，灾备中心的LUN与生产中心的一致性组的多个LUN一一对应。
换而言之，灾备中心有与生产中心的一致性组对应的一致性组，且灾备中心的一致性组也有一个主LUN。同样地，灾备中心的一致性组也被配置组日志缓存空间，以及，灾备中心的一致性组的各个LUN分别被配置日志缓存空间。
上述目标LUN将各写请求日志信息依次传输至灾备中心后，灾备中心的一致性组的主LUN接收上述写请求日志信息并依次写入到组日志缓存空间。
进一步地，主LUN可以基于生产中心的LUN和灾备中心的LUN的对应关系，将上述写请求日志信息下发至灾备中心的一致性组的各个LUN。
作为一种实施例，灾备中心上可以配置备份关系表，该备份关系表记录生产中心的LUN标识与灾备中心的LUN标识的映射关系。
在这种实施例中，灾备中心的主LUN可以基于写请求日志信息中的LUN标识查找上述备份关系表，确定对应的LUN标识，然后将该写请求日志信息下发至该LUN标识指示的LUN，以由该LUN将该写请求日志信息写入到自身的日志缓存空间并写入该写请求日志信息中的待写入数据。
作为另一种实施例，生成中心向灾备中心传输写请求日志信息时，可以同时传输处理该写请求日志信息的LUN的LUN标识。灾备中心的主LUN可以直接将写请求日志信息下发至该LUN标识指示的LUN，以由该LUN将该写请求日志信息写入到自身的日志缓存空间并写入该写请求日志信息中的待写入数据。
通过上述措施，灾备中心的一致性组的各个LUN中分别备份了生产中心对应的LUN中的数据。此外，灾备中心的组日志缓存空间备份了生产中心的一致性组的任一时间点存储的数据，因此，当生产中心的存储设备出现故障，可以从灾备中心获取生产中心的任一时间点的数据。
综上所述，在本申请技术方案中，一致性组的各个LUN分别配置了日志缓存空间，一致性组配置了组日志缓存空间；各个LUN处理写请求时，可以向自身的日志缓存空间写入写请求日志信息；一致性组的主LUN可以汇总各个LUN的写请求日志信息，并按照各写请求日志信息的时戳的先后顺序，将上述写请求日志信息依次写入到上述组日志缓存空间，然后将上述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由灾备中心的LUN保存上述写请求日志信息；
由于各个LUN在为写请求生成写请求日志信息后将写请求日志信息写入到自身的日志缓存空间，多个LUN不会同时对一个日志缓存空间进行操作，无需等待，减少了各个LUN处理写请求的时延，提升了业务性能；
此外，通过主LUN汇总一致性组的各个LUN的写请求日志信息，并在排序后将写请求日志信息传输至灾备中心，实现了连续性数据备份。
与前述连续性数据备份的方法的实施例相对应，本申请还提供了连续性数据备份的装置的实施例。
参见图6，为本申请示出的一种连续性数据备份的装置的实施例框图：
如图6所示，该连续性数据备份的装置60包括：
发送单元610，用于若所述目标LUN为主LUN，向所述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息。
获取单元620，用于接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息。
汇总单元630，用于按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和所述目标LUN的写请求日志信息依次写入到所述组日志缓存空间。
传输单元640，用于将所述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由所述灾备中心的LUN保存所述写请求日志信息。
在本例中，所述日志收集请求携带指定时间段；所述获取单元620，进一步用于：
接收其它LUN上报的写请求日志信息，从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；其中，所述写请求日志信息的时戳指示的时间在所述指定时间段内。
在本例中，所述装置还包括：
接收单元650(图中未示出)，用于若所述目标LUN为从LUN，接收所述一致性组的主LUN发送的日志收集请求。
上报单元660(图中未示出)，用于从自身的日志缓存空间中获取并上报写请求日志信息至所述主LUN，以由所述主LUN汇总所述一致性组的各个LUN的写请求日志信息后向灾备中心传输所述写请求日志信息。
在本例中，所述装置还包括：
接收单元650(图中未示出)，进一步用于若所述目标LUN为从LUN，接收所述一致性组的主LUN发送的日志收集请求。
查找单元670(图中未示出)，用于基于所述日志收集请求中的所述指定时间段，从所述目标LUN的日志缓存空间获取写请求日志信息，所述写请求日志信息的时戳指示的时间在所述指定时间段内。
上报单元660(图中未示出)，进一步用于将获取的所述写请求日志信息上报至所述主LUN，以由所述主LUN汇总所述一致性组的各个LUN的写请求日志信息后向灾备中心传输所述写请求日志信息。
在本例中，所述装置还包括：
接收单元650(图中未示出)，进一步用于接收写请求；其中，所述写请求中的LUN标识指示所述目标LUN。
写入单元680(图中未示出)，用于将所述写请求中的待写入数据写入到所述目标LUN；为所述写请求生成写请求日志信息，并将所述写请求日志信息写入到所述目标LUN的日志缓存空间。
在本例中，所述发送单元610，进一步用于：
周期性向所述一致性组的其它LUN发送日志收集请求；或，
检查所述目标LUN的日志缓存空间的可用大小是否小于预设的第一阈值，如果是，向其它LUN发送日志收集请求。
在本例中，若所述一致性组的各个LUN位于至少两个存储设备，各存储设备的时钟通过网络时间协议NTP同步得到。
在本例中，所述灾备中心的LUN与所述一致性组中的多个LUN一一对应。
在本例中，所述装置还包括：
删除单元690(图中未示出)，用于基于预设策略，删除自身的日志缓存空间中的写请求日志信息。
本申请连续性数据备份的装置的实施例可以应用在存储设备上。装置实施例可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为一个逻辑意义上的装置，是通过其所在存储设备的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，如图7所示，为本申请连续性数据备份的装置所在存储设备的一种硬件结构图，除了图7所示的处理器、内存、网络接口、以及非易失性存储器之外，实施例中装置所在的存储设备通常根据该连续性数据备份的装置的实际功能，还可以包括其他硬件，对此不再赘述。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。

Claims (10)

1.一种连续性数据备份的方法，应用于一致性组的目标LUN，所述一致性组包括一个主LUN和若干个从LUN，所述一致性组预配置组日志缓存空间，所述一致性组的各个LUN分别预配置日志缓存空间，其特征在于，包括：
若所述目标LUN为主LUN，向所述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息；
接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；
按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和所述目标LUN的写请求日志信息依次写入到所述组日志缓存空间；
将所述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由所述灾备中心的LUN保存所述写请求日志信息。
2.根据权利要求1所述的方法，其特征在于，所述日志收集请求携带指定时间段；
所述接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息，包括：
接收其它LUN上报的写请求日志信息，从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；其中，所述写请求日志信息的时戳指示的时间在所述指定时间段内。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
若所述目标LUN为从LUN，接收所述一致性组的主LUN发送的日志收集请求；
从自身的日志缓存空间中获取并上报写请求日志信息至所述主LUN，以由所述主LUN汇总所述一致性组的各个LUN的写请求日志信息后向灾备中心传输所述写请求日志信息。
4.根据权利要求2所述的方法，其特征在于，所述方法还包括：
若所述目标LUN为从LUN，接收所述一致性组的主LUN发送的日志收集请求；
基于所述日志收集请求中的所述指定时间段，从所述目标LUN的日志缓存空间获取写请求日志信息，所述写请求日志信息的时戳指示的时间在所述指定时间段内；
将获取的所述写请求日志信息上报至所述主LUN，以由所述主LUN汇总所述一致性组的各个LUN的写请求日志信息后向灾备中心传输所述写请求日志信息。
5.根据权利要求1-4中任一所述的方法，其特征在于，所述方法还包括：
接收写请求；其中，所述写请求中的LUN标识指示所述目标LUN；
将所述写请求中的待写入数据写入到所述目标LUN；
为所述写请求生成写请求日志信息，并将所述写请求日志信息写入到所述目标LUN的日志缓存空间。
6.根据权利要求1或2所述的方法，其特征在于，所述向所述一致性组的其它LUN发送日志收集请求，包括：
周期性向所述一致性组的其它LUN发送日志收集请求；或，
检查所述目标LUN的日志缓存空间的可用大小是否小于预设的第一阈值，如果是，向其它LUN发送日志收集请求。
7.根据权利要求1所述的方法，其特征在于，若所述一致性组的各个LUN位于至少两个存储设备，各存储设备的时钟通过网络时间协议NTP同步得到。
8.根据权利要求1所述的方法，其特征在于，所述灾备中心的LUN与所述一致性组中的多个LUN一一对应。
9.根据权利要求1或3或4所述的方法，其特征在于，所述方法还包括：
基于预设策略，删除自身的日志缓存空间中的写请求日志信息。
10.一种连续性数据备份的装置，应用于一致性组的目标LUN，所述一致性组包括一个主LUN和若干个从LUN，所述一致性组预配置组日志缓存空间，所述一致性组的各个LUN分别预配置日志缓存空间，其特征在于，包括：
发送单元，用于若所述目标LUN为主LUN，向所述一致性组的其它LUN发送日志收集请求，以由其它LUN分别从自身的日志缓存空间中获取并上报写请求日志信息；
获取单元，用于接收其它LUN上报的写请求日志信息，并从所述目标LUN的日志缓存空间获取所述目标LUN的写请求日志信息；
汇总单元，用于按照各写请求日志信息的时戳的先后顺序，将接收到的写请求日志信息和所述目标LUN的写请求日志信息依次写入到所述组日志缓存空间；
传输单元，用于将所述组日志缓存空间中的各写请求日志信息依次传输至灾备中心，以由所述灾备中心的LUN保存所述写请求日志信息。
CN201810501468.7A 2018-05-23 2018-05-23 一种连续性数据备份的方法及装置 Active CN108762984B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810501468.7A CN108762984B (zh) 2018-05-23 2018-05-23 一种连续性数据备份的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810501468.7A CN108762984B (zh) 2018-05-23 2018-05-23 一种连续性数据备份的方法及装置

Publications (2)

Publication Number Publication Date
CN108762984A CN108762984A (zh) 2018-11-06
CN108762984B true CN108762984B (zh) 2021-05-25

Family

ID=64004743

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810501468.7A Active CN108762984B (zh) 2018-05-23 2018-05-23 一种连续性数据备份的方法及装置

Country Status (1)

Country Link
CN (1) CN108762984B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109710183B (zh) * 2018-12-17 2022-09-06 杭州宏杉科技股份有限公司 一种数据同步方法及装置
CN109710464B (zh) * 2018-12-27 2021-02-09 杭州宏杉科技股份有限公司 一种一致性组分离方法及装置
CN112486735A (zh) * 2020-12-21 2021-03-12 上海英方软件股份有限公司 一种保障应用层数据一致性的数据复制系统及方法
CN113849126A (zh) * 2021-09-01 2021-12-28 北京腾凌科技有限公司 一种日志存储方法及装置
CN115827334A (zh) * 2023-01-09 2023-03-21 四川大学 Oracle数据库块级cdp备份恢复方法及其系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101187948A (zh) * 2007-12-20 2008-05-28 中国科学院计算技术研究所 一种持续数据保护系统及其实现方法
CN103793291A (zh) * 2012-11-01 2014-05-14 华为技术有限公司 分布式数据复制方法和装置
CN104572355A (zh) * 2015-01-30 2015-04-29 浪潮(北京)电子信息产业有限公司 一种异步远程复制数据的方法和设备
CN106407047A (zh) * 2016-09-30 2017-02-15 郑州云海信息技术有限公司 一种容灾系统
CN106899643A (zh) * 2015-12-21 2017-06-27 阿里巴巴集团控股有限公司 一种用户日志存储方法及设备
CN109358987A (zh) * 2018-10-26 2019-02-19 黄淮学院 一种基于两级数据去重的备份集群

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060161810A1 (en) * 2004-08-25 2006-07-20 Bao Bill Q Remote replication
WO2014079028A1 (zh) * 2012-11-23 2014-05-30 华为技术有限公司 数据处理方法和存储设备
WO2015085530A1 (zh) * 2013-12-12 2015-06-18 华为技术有限公司 数据复制方法及存储系统
CN104363977A (zh) * 2013-12-12 2015-02-18 华为技术有限公司 数据复制方法、数据复制装置和存储设备
CN107239382A (zh) * 2017-06-23 2017-10-10 深圳市冬泉谷信息技术有限公司 一种容器应用的日志处理方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101187948A (zh) * 2007-12-20 2008-05-28 中国科学院计算技术研究所 一种持续数据保护系统及其实现方法
CN103793291A (zh) * 2012-11-01 2014-05-14 华为技术有限公司 分布式数据复制方法和装置
CN104572355A (zh) * 2015-01-30 2015-04-29 浪潮(北京)电子信息产业有限公司 一种异步远程复制数据的方法和设备
CN106899643A (zh) * 2015-12-21 2017-06-27 阿里巴巴集团控股有限公司 一种用户日志存储方法及设备
CN106407047A (zh) * 2016-09-30 2017-02-15 郑州云海信息技术有限公司 一种容灾系统
CN109358987A (zh) * 2018-10-26 2019-02-19 黄淮学院 一种基于两级数据去重的备份集群

Also Published As

Publication number Publication date
CN108762984A (zh) 2018-11-06

Similar Documents

Publication Publication Date Title
CN108762984B (zh) 一种连续性数据备份的方法及装置
US10331625B2 (en) Managing sequential data store
CN103207867B (zh) 处理数据块的方法、发起恢复操作的方法和节点
EP2849048A1 (en) Data sending method, data receiving method and storage device
US11055183B2 (en) Data gap management in a remote data mirroring system
CN101755257B (zh) 管理在不同的网络上将写入从首要存储器拷贝到次要存储器
CN101594256A (zh) 容灾方法、装置和系统
CN109391647B (zh) 存储资源回收方法、装置及系统
CN112948064B (zh) 一种数据读取方法、装置及数据读取系统
US12008263B2 (en) Garbage collection and data storage method and apparatus, and storage system
CN109739435B (zh) 文件存储和更新方法及装置
CN102880529A (zh) 内存数据备份方法及内存数据备份系统
CN109522316A (zh) 日志处理方法、装置、设备和存储介质
CN109491832A (zh) 数据容灾方法与站点
CN101937378B (zh) 一种对存储设备的数据进行备份保护的方法及计算机系统
CN112527562A (zh) 分布式存储系统的数据备份方法、装置和计算机设备
US11042454B1 (en) Restoration of a data source
CN109960602B (zh) 信息管理方法、装置、设备及介质
EP4300314A2 (en) Data backup method, apparatus and system
CN111831954B (zh) 内容数据更新方法、装置、计算机设备及存储介质
CN102325171B (zh) 一种监控系统中数据的存储方法及其系统
CN111506453B (zh) 磁盘快照创建方法、装置、系统和存储介质
CN114490540B (zh) 数据存储方法、介质、装置和计算设备
CN116303789A (zh) 多分片多副本数据库并行同步方法、装置及可读介质
CN114741367A (zh) 数据同步方法、装置、电子设备、存储介质和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant