CN101046761A - 一种取快照数据的装置及方法 - Google Patents
一种取快照数据的装置及方法 Download PDFInfo
- Publication number
- CN101046761A CN101046761A CN 200710103026 CN200710103026A CN101046761A CN 101046761 A CN101046761 A CN 101046761A CN 200710103026 CN200710103026 CN 200710103026 CN 200710103026 A CN200710103026 A CN 200710103026A CN 101046761 A CN101046761 A CN 101046761A
- Authority
- CN
- China
- Prior art keywords
- snapshot
- data
- business datum
- time
- fetching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种取快照数据的装置及方法,所述装置包括:业务数据存储实体、读取更新单元、快照数据判断单元、快照数据复制存储单元。所述方法包括步骤:实时读取业务数据存储实体中的业务数据;在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应业务数据的变更;复制业务数据存储实体中的业务数据为快照数据,并记录复制时间;判断详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单时间记录的详单数据更改对应所述快照数据的数据字段。本发明在快照数据时间点,能实时复制所需要的快照数据,并在取快照数据完毕后不需要进行数据同步的问题。
Description
技术领域
本发明涉及数据处理技术,特别是涉及一种取快照数据的装置及方法。
背景技术
随着电子商务的发展,数据在企业中的作用越来越重要,越来越多的企业开始关注实时系统中数据的存储及备份。但在应用所述数据时会遇到的一些常见问题,如:1)备份速度的问题:随着业务的不断发展,数据越来越多,更新越来越快,在休息时间来不及备份如此多的内容,在工作时间备份又会影响系统性能;2)操作简单化的问题:数据备份应可以用于不同领域,而进行数据备份的操作人员也处于不同的层次,操作的简单与否直接影响操作的效果和数据的安全;3)保护数据一致性的问题:有些关键性的任务是要24小时不停机运行,在备份数据的时候,有一些文件可能仍然处于打开状态。比如电信系统、物流系统等;4)容错的问题:如果数据备份损坏了,怎样在最短的时间内恢复等。如果所述常见的问题不能得到较好的控制,将会直接影响数据存储的效率问题。
目前,各个企业都通过各种技术来提高数据存储的高效率和安全性,保护企业的数据。其中,快照数据技术(Flash copy,Snapshot,Point-in-time-copy)是比较成熟的技术之一。即使用快照技术对实时系统数据的快速复制或备份。也就是说,由于实时系统中的数据每时每刻都在变化,如果需要取得某一时间点的快照数据,即某一时间点的静态数据,存在很大困难:1)取数据的过程不可能在一个时间点完成,这个过程会消耗一定的时间;2)在取数据的过程中,数据处于不断变化之中,难以判断某个时间点的静态数据。
在现有技术中,取实时系统中快照数据主要有两种:
一种方法是停止业务运行,使实时系统变为非实时系统,数据在一段时间内不再变化,然后在这段时间进行系统的数据复制,从而取得快照数据。在快照完毕后恢复系统的业务运行。比如银行系统在进行结算时,通常会对外暂停业务运行。但是,该方法在取快照数据时会导致停止业务运行,这在很多实时系统是不允许的,比如电信系统、实时交易系统等。
另一种是镜像法,其系统的结构示意图如图1所示,包括:快照单元11、业务功能单元12、业务数据存储单元13和镜像数据存储单元14。系统正常运行时,业务功能单元12分别将业务数据同时写入业务存储单元与镜像数据存储单元,即同一个数据操作在2个存储单元上进行,2个单元上的数据是同步的、一致的。其具体的取快照数据的实现过程为:
所述快照单元11将取快照指令发送给业务功能单元12,所述业务功能单元12收到所述指令后,写业务数据时,只将该业务数据写入业务数据存储单元13中,切断镜像数据存储单元14的操作。从而使所述镜像数据存储单元14的数据不再发生变化;所述快照单元11对镜像数据存储单元14的数据进行复制。复制完毕,取得快照数据;并发出取消指令;所述业务功能单元12收到指令后,将所述业务数据存储单元13的数据全部同步到镜像数据存储单元14中,并恢复写镜像数据存储单元14的操作。
该方案虽然比第一种有所改进,即不停止业务取快照数据;但是,在取快照前,所述业务功能单元12必须同时写2份数据;在取快照时,切断镜像数据存储单元14复制数据的操作,只往业务数据存储单元中存储数据;在取快照完毕后,又必须将业务数据存储单元13的数据同步到镜像数据存储单元14中,即恢复镜像数据存储单元14中的数据;否则,会出现数据不一致。
因此,在实现本发明过程中,发明人发现现有技术中至少存在如下问题:1)在取快照数据前,业务功能单元12必须同时写2份数据,增加了系统的运行时间;2)在取快照数据完毕后,必须进行数据的同步,该同步过程需要消耗一定的时间,从而会影响系统数据存储的效率。
发明内容
本发明实施例提供一种取快照数据的方法及装置,在快照数据时间点,能实时复制所需要的快照数据,并在取快照数据完毕后不需要进行数据同步的问题。
为解决上述技术问题,本发明实施例提供一种取快照数据的装置,所述装置包括:
业务数据存储实体,用于存储实时运行的业务数据;
读取更新单元,用于读取业务数据存储实体中的业务数据,并更新;
快照数据判断单元,用于在业务数据更新或对业务数据扫描时,判断是否对所读取的业务数据进行快照复制,并发送是的复制指令;
快照数据复制存储单元,用于根据所述复制指令复制并存储需要快照复制的业务数据。
相应的,本发明实施例还提供一种取快照数据的方法,所述方法包括步骤:
读取业务数据存储实体中的业务数据;
在业务数据更新时,判断是否对该业务数据进行快照复制;若是,则复制所述业务数据为快照数据;
对所述业务数据存储实体的每一条业务数据进行扫描,判断是否对该业务数据进行快照数据复制;若是,则复制所述业务数据为快照数据。
另外,本发明实施例还提供一种取快照数据的装置,所述装置包括:
业务数据存储实体,用于存储实时运行的业务数据;
读取更新单元,用于实时读取业务数据存储实体中的业务数据,并更新;
详单数据生成单元,用于在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应变更的业务数据;
快照数据复制存储单元,用于复制并存储业务数据存储实体中的业务数据,记录复制时间;
详单数据分析单元,用于分析所述详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单时间记录的详单数据更改快照数据复制存储单元中对应快照数据的数据字段。
相应的,本发明实施例还提供一种取快照数据的方法,所述方法包括步骤:
读取业务数据存储实体中的业务数据;
在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应业务数据的变更;
复制所有业务数据存储实体中的业务数据,并记录复制时间;
判断详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单时间记录的详单数据更改对应所述快照数据的数据字段。
本发明实施例在不停止业务运行的条件下,可以有效的取实时运行数据的快照数据;在快照数据复制时间内,即在业务数据更新时才需要读写2份数据,这个时间相对于整个业务的运行时间非常短,同时,取快照数据完毕后不需要进行数据同步,提高了系统数据存储的效率。
附图说明
图1为现有技术取实时系统中快照数据的系统的结构示意图;
图2为本发明第一实施例所述取快照数据的装置的结构示意图;
图3为本发明第二实施例所述取快照数据的方法的流程图;
图4为图3中所述更新业务数据的流程图;
图5为图3中所述完成业务快照数据复制处理的流程图;
图6为本发明第三实施例所述取快照数据的装置的结构示意图;
图7为本发明第四实施例所述取快照数据的方法的流程图;
图8为图7中所述业务数据的复制及其详单数据的分析的流程图。
具体实施方式
下面我们将结合附图,对本发明的最佳实施方案进行详细描述。首先要指出的是,本发明实施例中用到的术语、字词及权利要求的含义不能仅仅限于其字面和普通的含义去理解,还包括进而与本发明实施例的技术相符的含义和概念。因此,本说明和附图中所给出的配置,只是本发明实施例的首选实施方案,而不是要列举本发明实施例的所有技术特性。
下面结合符合及实施例进一步说明本发明。
请参阅图2,为本发明实施例所述第一实施例所述取快照数据的装置的结构示意图,所述装置包括:业务数据存储实体21、读取更新单元22、快照数据判断单元23和快照数据复制存储单元24。其中,所述业务数据存储实体21,用于存储实时运行的业务数据;读取更新单元22,用于读取业务数据存储实体中的业务数据,并更新;快照数据判断单元23,用于在业务数据更新或对业务数据扫描时,判断是否对所读取的业务数据进行快照复制,并发送是的复制指令;快照数据复制存储单元24,用于根据所述复制指令复制并存储需要快照复制的业务数据。
所述装置还可以包括设置单元25,与快照数据判断单元23相连,用于设置取快照数据的预设快照时间。也就是说,在取快照数据前,系统要设置一个快照时间,以取得该时间点的快照数据,其中,所述快照时间可以是一个周期性的时间,比如每天00:00取一次快照数据;也可以是一个提供对外设置的时间,比如当需要取当天下午05:00时间点的快照数据时,可以在这个时间之前,设置系统的快照时间为05:00。而对于业务数据的颗粒度划分(指数据在业务处理流程上分割的最小单位,比如银行数据的颗粒度可以以存折账户划分,电信系统可以以号码话单划分)可以基于记录级;或者是单个业务逻辑流程处理的一条或者一组数据。在下述的描述中,基于颗粒度划分基础上的业务数据与快照数据,统一使用记录进行描述。所述业务数据在基于颗粒度划分的基础上,增加一个记录取快照时间的字段,简称快照时间字段。
所述读取更新单元22,用于实时对存储业务数据实体中业务数据的快照时间字段进行读取及更新;也就是说,在执行业务逻辑处理时,需要先读取待处理的业务数据,其一般的处理流程为:先从业务数据存储实体读取待处理的业务数据;然后,执行一定的业务逻辑,比如银行存钱的业务逻辑、判断账户有效性、判断待存入的金额的有效性、将待存金额加入账户或生成详单等;最后,更新业务数据存储实体中的业务数据,并记录处理的详单。
所述快照数据判断单元23包括:业务更新判断子单元231和扫描更新判断子单元232。所述业务更新判断子单元231和扫描更新判断子单元232在实时运行中没有时序上的先后,但是二者共同来完成快照数据的处理。其中所述业务更新判断子单元231集成在业务功能实体中;所述扫描更新判断子单元232集成在快照功能实体中。对于所述业务功能实体,除了完成本发明实施例所涉及的功能外,还需要完成其他相应功能,这对本领域技术人员来说,已为公知技术,在此不再赘述。而快照功能实体需要完成快照数据复制的功能即可。
其中,所述业务更新判断子单元231,分别与设置单元25和读取更新单元22相连,用于在业务数据更新时,判断所读取业务数据的快照时间字段的值是否小于预设快照时间,若是,发送是的复制指令,并更新该业务快照数据时间字段为当前时间。
也就是说,所述业务更新判断子单元231,在业务数据实时运行中完成快照数据处理时,需要对更新业务数据的逻辑作如下修改:对业务数据存储实体的一条记录进行更新时,增加如下判断:
判断读取的业务数据的快照时间字段的值是否小于所预设快照时间,若否,则进行该业务数据的更新,在更新时,不向快照数据复制存储单元24发送复制指令,复制当前业务数据;如果该值小于预设快照时间,则向快照数据复制存储单元24发送复制指令,并更新该业务数据的快照时间字段为当前时间。所述快照数据复制存储单元24根据接收到的复制指令复制当前该业务数并存储。
所述扫描更新判断子单元232,分别与设置单元25和读取更新单元22相连,用于在对业务数据存储实体中的业务数据进行扫描时,判断所读取业务数据的快照时间字段的值是否小于预设快照时间,若是,发送是的复制指令,并更新该业务快照数据时间字段为当前时间。
也就是说,在完成业务数据的快照复制处理时,一般为定时任务触发运行或者供外部调用运行(比如设定一个去快照数据的时间点),来完成业务数据的批量复制。其具体的实现过程为:
读取业务数据存储实体的一条记录;判断该业务数据的快照时间字段的值是否小于所预设快照时间,若否,则认为业务更新判断子单元231已经完成对该业务数据进行了快照处理,不对该数据进行复制处理;如果该值小于所预设快照时间,则将复制指令发送给快照数据复制存储单元24,并更新该业务数据的快照时间字段为当前时间。所述快照数据复制存储单元24根据接收到的复制指令复制当前该业务数为快照数据并存储。循环上述步骤,直至读取业务数据存储实体的所有记录,完成所有业务数据的复制处理。
本实施例在不停止业务运行的条件下,取实时运行的快照数据,在取实时快照数据时,即在快照数据复制时间点,业务逻辑实体在更新数据时需要写2份数据,但是在取得快照数据后不需要进行数据的同步,因此,本发明实施例不但减少了系统的运行时间,同时也提高了取快照数据的效率。
相应的,本发明第二实施例还提供一种取快照数据的方法,该方法的流程图如图3所示。需要说明的是,本发明实施例中所述业务数据的实时运行与设置快照时间和获取快照数据没有时序关系。所述方法包括:
步骤S31:读取业务数据存储实体中的业务数据;
步骤S32:在业务数据更新时,判断是否对该业务数据进行快照复制;若是,则复制所述业务数据为快照数据(即步骤S33);若否,更新该业务数据(即步骤36);
步骤S34:对所述业务数据存储实体的每条业务数据进行扫描,判断是否对该业务数据进行快照数据复制;若是,则复制所述业务数据为快照数据(即步骤S35);否则,更新该业务数据(即步骤S37)。
需要说明书是,步骤S32和步骤S34在时序上没有先后顺序。本流程图以先执行步骤S32,在执行步骤S34为例。反之也成立。
此外,在实现该过程之前还需要预先设置取快照数据的快照时间,其设置快照时间的方式为周期性设置快照时间或提供对外设置的时间。其具体的设置过程详见上述设置该快照时间的过程,在此不再赘述。
在步骤S31中,对实时运行中存储的业务数据的快照时间字段进行读取及更新;所述快照时间字段为业务数据在基于颗粒度划分的基础上增加一个记录快照时间的字段。在步骤S32和S33中,在业务数据更新时,判断是否对该业务数据进行快照复制;若是,则复制所述业务数据为快照数据。其具体的过程为:在业务数据更新时,判断该业务快照数据时间字段的值是否小于所预设快照时间,若是,复制该业务数据为快照数据,并更新该业务数据的快照时间字段为当前时间;否则,更新该业务数据。其具体的实现过程详见图4,如图所示,包括:
步骤S41:判断当前更新的业务数据是否完成快照数据处理;
判断的条件为该业务数据的快照时间字段的值是否小于预设快照时间,若是,则已完成快照数据处理;否则,没有完成快照数据处理。
步骤S42:若已完成快照数据处理,则更新业务数据存储实体中业务数据;
步骤S43:若没有完成快照数据处理,则更新业务数据存储实体中业务数据,并复制该业务数据为快照数据;同时更新该业务数据的快照时间字段为当前时间。
在步骤S33和S34中,对所述业务数据存储实体的每条业务数据进行扫描,判断是否对该业务数据进行快照数据复制;若是,则复制所述业务数据为快照数据。其具体的实现过程如图5所示,包括步骤:
步骤S51:读取业务数据存储实体中一条业务数据;
步骤S52:判断该业务数据是否已完成快照数据处理;若已完成快照数据处理,则执行步骤54;
其判断的条件为:判断的条件为该业务数据的快照时间字段的值是否小于预设快照时间,若是,则已完成快照数据处理;否则,没有完成快照数据处理。
步骤S53:若没有完成快照数据处理,则复制该业务数据为快照数据,并更新该业务数据的快照时间字段为当前时间;
步骤S54:判断该业务数据是否复制完毕,若否,返回步骤S51,继续判断下条业务数据;否则,结束本次流程。
也就是说,扫描业务数据存储实体中每条业务数据的快照时间字段的值,并判断每条业务数据的快照时间字段的值是否小于预设快照时间,若是,复制该业务数据为快照数据,并更新该业务数据的快照时间字段为当前时间;否则,更新该业务数据。
另外,本发明第三实施例还提供一种取快照数据的装置,其结构示意图如图6所示。所述装置包括:业务数据存储实体61、读取更新单元62、详单数据生成单元63、快照数据复制存储单元64和详单数据分析单元65。其中,所述业务数据存储实体61,用于存储实时运行的业务数据;所述读取更新单元62,用于实时读取业务数据存储实体61中的业务数据,并更新;所述详单数据生成单元63,用于在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应变更的业务数据;所述快照数据复制存储单元64,用于复制并存储业务数据存储实体中的业务数据,记录复制时间;所述详单数据分析单元65,用于分析所述详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单时间记录的详单数据更改快照数据复制存储单元中对应快照数据的数据字段。其中,所述快照数据复制存储单元64与详单数据分析单元65可以集成在快照功能实体中;而所述详单数据生成单元63可以集成在业务功能实体中。
另外,所述装置还包括设置单元66,与详单数据分析单元65相连,用于预先设置取快照数据的快照时间。也就是说,在取快照数据前,系统先要设置一个快照时间,以便于在该时间点取快照数据,其中,所述快照时间可以是一个周期性的时间,比如每天00:00取一次快照数据;也可以是一个提供对外设置的时间,其具体的设置过程详见上述,在此不再赘述。
所述详单数据生成单元63,用于实时对存储业务数据进行读取及更新,在更新时,生成更新详单数据,记录生成详单数据的详单时间与更新的业务数据;也就是说,在执行业务逻辑处理时,需要读取与更新待处理的业务数据。其一般的处理流程为:根据一定的条件触发业务运行;比如:存钱的业务触发条件,需要有人去发起一个存钱操作;再比如触发电话流程,需要有人发起电话呼叫等,但并不限于此;从业务数据存储实体中读取待处理的业务数据;然后,执行一定的业务逻辑,比如银行存钱的业务逻辑、判断账户有效性、判断待存入的金额的有效性、将待存金额加入账户或生成详单等;最后,更新业务数据存储实体的数据,并生成记录处理的详单,并存储。
在本实施例中,数据的颗粒度划分可以基于记录级;或者单个业务逻辑流程处理的一条或者一组数据。在下面的描述中,基于颗粒度划分基础上的业务数据与快照数据,统一使用记录进行描述;详单数据以条划分。
所述快照数据复制存储单元64,用于复制所有实时运行存储的业务数据,记录复制时间,并将其存储为快照数据;即实现过程为:先读取业务数据存储实体中的一条记录;复制并存储该业务数据,记录复制时间,或者是更新复制时间字段为当前时间;循环上述过程,完成业务数据存储实体中所有业务数据的复制处理。此外,所述快照数据在基于颗粒度划分的基础上,增加一个记录复制时间的字段,简称复制时间字段。
所述详单数据分析单元65,用于分析所述详单时间是否在复制时间和预设快照时间之间,若是,则根据详单记录的业务数据更改快照数据复制存储单元对应快照数据的数据字段。也就是说,在完成业务数据复制后,根据快照数据复制存储单元64中的业务数据,与详单数据生成单元63中存储的详单数据进行对比分析,如果所述详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单记录的详单数据更改快照数据复制存储单元对应快照数据的数据字段。直至完成业务数据存储实体中所有快照数据的更改。而此时所述快照数据复制存储单元中快照数据就是实时系统中预设快照时间(即某个时间点)的快照数据。
相应的,本发明第四实施例还提供一种取快照数据的方法,该方法的流程图如图7所示,所述方法包括:
步骤S71:读取业务数据存储实体中的业务数据;
步骤S72:在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应业务数据的变更;
步骤S73:复制业务数据存储实体中的业务数据为快照数据,并记录复制时间;
步骤S74:判断所述详单时间是否大于快照时间,且小于复制时间;
步骤S75:若是,则根据详单记录的详单数据更改对应所述快照数据的数据字段;若否,读取下一条业务数据(即步骤S76)。
此外,在实现本过程之前,还需要现设置取快照数据的快照时间,所述设置快照时间的方式为周期性设置快照时间或提供对外设置的时间。其具体的设置过程详见上述设置该快照时间的过程,在此不再赘述。
在步骤S73中,复制业务数据存储实体中的业务数据为快照数据,并记录复制时间,其具体的业务数据复制的过程为:读取业务数据存储实体的一条记录;复制该业务数据为快照数据,以及更新复制时间为当前时间;重复上述过程,完成业务数据存储实体中所有业务数据的复制处理。在步骤S74至S75中,完成数据复制后,对存储的每条详单记录进行分析,判断所述详单时间是否在复制时间和快照时间之间,即详单时间是否大于预设快照时间,且小于复制时间;若是,则根据详单记录的详单数据更改对应所述快照数据的数据字段。若否,取下一条详单进行判断。其具体的实现过程为:读取详单数据生成单元中存储的一条详单数据;读取详单对应的快照数据复制存储单元中的数据记录;分析详单数据的详单时间与快照数据的复制时间,如果详单时间大于等于复制时间,或者详单时间小于快照时间,则跳过下述步骤,取下一条详单进行分析;如果所述详单时间在大于预设快照时间,且小于复制时间,则根据详单记录的详单数据,更改快照数据的对应数据字段。比如详单为扣减,则将详单扣减的数据加入快照数据的对应字段;比如详单为回补,则将详单回补的数据从快照数据的对应字段减去。然后取下一条详单数据继续分析,直至分析完所有的详单数据。此外,本发明实施例中所述对实时运行对业务数据的更新和生成详单,与设置快照和复制数据没有时序先后关系。上述方法的实现过程是以此为例,但并不限于该过程,也可以是其它的实现过程,其实现原理相同,在此不再赘述。
对于本实施例,所述业务数据的复制及其详单数据的分析的具体流程如图8所示,以复制及分析一条数据为例来说明。包括:
步骤S81:从业务数据存储实体中读取一条业务数据;
步骤S82:复制该业务数据为快照数据,并将其存储在快照数据复制存储单元中,记录该业务数据的复制时间为当前时间;
步骤S83:判断所述业务数据存储实体的业务数据是否复制完毕;若否,返回步骤S81;若是,从详单数据生成单元中读取一条详单数据(步骤S84);
步骤S85:从所述快照数据复制存储单元中读取对应的快照数据;
步骤S86:判断详单时间是否大于预设快照时间,且小于复制时间,若否,执行步骤S90;若是,继续判断详单数据是否为扣减(步骤S87),若是,则对快照数据进行回补(步骤S88);否则对快照数据进行扣减(步骤S89);
步骤S90:判断详单数据是否分析完毕,若否,返回步骤S84;若是,结束本流程。
由此可见,本发明实施例所述快照数据通过业务功能实体的业务流程与快照功能实体配合完成,相对于现有技术,在不停止业务运行的条件下,可以在任何时间有效的取实时运行业务数据为快照数据;此外,在快照数据复制时间内,在业务数据更新时,且需要复制该业务数据为快照数据时才需要读写2份业务数据,这个时间相对于整个业务的运行时间非常短,同时,取快照数据完毕后不需要进行数据同步,提高了系统数据存储的效率。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (17)
1、一种取快照数据的装置,其特征在于,包括:
业务数据存储实体,用于存储实时运行的业务数据;
读取更新单元,用于读取业务数据存储实体中的业务数据,并更新;
快照数据判断单元,用于在业务数据更新或对业务数据扫描时,判断是否对所读取的业务数据进行快照复制,并发送是的复制指令;
快照数据复制存储单元,用于根据所述复制指令复制并存储需要快照复制的业务数据。
2、根据权利要求1所述取快照数据的装置,其特征在于,所述装置还包括:设置单元,与快照数据判断单元相连,用于预先设置取快照数据的快照时间。
3、根据权利要求2所述取快照数据的装置,其特征在于,所述快照数据判断单元包括:
业务更新判断子单元,用于在业务数据更新时,判断所读取业务数据的快照时间字段的值是否小于预设快照时间,若是,发送是的复制指令,并更新该业务快照数据时间字段为当前时间;
扫描更新判断子单元,用于在对业务数据进行扫描时,判断所读取业务数据的快照时间字段的值是否小于预设快照时间,若是,发送是的判断结果,并更新该业务快照数据时间字段为当前时间。
4、根据权利要求3所述取快照数据的装置,其特征在于,所述业务更新判断子单元集成在业务功能实体中;所述扫描更新判断子单元集成在快照功能实体中。
5、一种取快照数据的方法,其特征在于,包括步骤:
读取业务数据存储实体中的业务数据;
在业务数据更新时,判断是否对该业务数据进行快照复制;若是,则复制所述业务数据为快照数据;
对所述业务数据存储实体的业务数据进行扫描,判断是否对该业务数据进行快照数据复制;若是,则复制所述业务数据为快照数据。
6、根据权利要求5所述取快照数据的方法,其特征在于,所述方法还包括:预先设置取快照数据的快照时间。
7、根据权利要求6所述取快照数据的方法,其特征在于,根据所读取业务数据的快照时间字段的值是否小于预设快照时间,来判断是否对该业务数据进行快照复制。
8、根据权利要求7所述取快照数据的方法,其特征在于,所述判断是否对该业务数据进行快照复制;若是,则向快照数据存储实体中复制所述业务数据的具体过程为:
判断所述业务快照数据时间字段的值是否小于预设快照时间,若是,则向快照数据存储实体中复制所述业务数据,并更新该业务数据的快照时间字段为当前时间。
9、根据权利要求6所述取快照数据的方法,其特征在于,所述预设设置快照时间的方式为周期性设置快照时间或对外设置快照时间。
10、根据权利要求9所述取快照数据的方法,其特征在于,所述快照时间字段为业务数据在基于颗粒度划分的基础上增加一个记录快照时间的字段。
11、一种取快照数据的装置,其特征在于,包括:
业务数据存储实体,用于存储实时运行的业务数据;
读取更新单元,用于实时读取业务数据存储实体中的业务数据,并更新;
详单数据生成单元,用于在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应变更的业务数据;
快照数据复制存储单元,用于复制并存储业务数据存储实体中的业务数据,记录复制时间;
详单数据分析单元,用于分析所述详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单时间记录的详单数据更改快照数据复制存储单元中对应快照数据的数据字段。
12、根据权利要求11所述取快照数据的装置,其特征在于,所述装置还包括:设置单元,与详单数据分析单元相连,用于预先设置取快照数据的快照时间。
13、根据权利要求11所述取快照数据的装置,其特征在于,所述快照数据复制存储单元与详单数据分析单元集成在快照功能实体中;所述详单数据生成单元集成在业务功能的实体中。
14、一种取快照数据的方法,其特征在于,包括步骤:
实时读取业务数据存储实体中的业务数据;
在业务数据更新时生成更新详单数据,记录生成详单数据的详单时间与对应业务数据的变更;
复制业务数据存储实体中的业务数据为快照数据,并记录复制时间;
判断详单时间是否大于预设快照时间,且小于复制时间,若是,则根据详单时间记录的详单数据更改对应所述快照数据的数据字段。
15、根据权利要求14所述取快照数据的方法,其特征在于,所述根据详单记录的详单数据更改对应所述快照数据的数据字段的方式包括:
若详单数据为扣减,则将详单扣减的数据加入快照数据对应的数据字段;
若详单数据为回补,则将详单回补的数据从快照数据对应的数据字段中减去。
16、根据权利要求14所述取快照数据的方法,其特征在于,所述方法还包括:预先设置取快照数据的快照时间。
17、根据权利要求16所述取快照数据的方法,其特征在于,所述预先设置取快照时间的方式为周期性设置快照时间或对外设置快照时间。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2007101030269A CN100456255C (zh) | 2007-04-29 | 2007-04-29 | 一种取快照数据的装置及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2007101030269A CN100456255C (zh) | 2007-04-29 | 2007-04-29 | 一种取快照数据的装置及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101046761A true CN101046761A (zh) | 2007-10-03 |
CN100456255C CN100456255C (zh) | 2009-01-28 |
Family
ID=38771390
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2007101030269A Expired - Fee Related CN100456255C (zh) | 2007-04-29 | 2007-04-29 | 一种取快照数据的装置及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100456255C (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101582790B (zh) * | 2008-05-15 | 2011-12-07 | 华为技术有限公司 | 动态数据稽核以及业务实体故障检测的方法、装置和系统 |
CN102419758A (zh) * | 2010-09-28 | 2012-04-18 | 金蝶软件(中国)有限公司 | 数据处理系统及方法 |
CN105144105A (zh) * | 2013-02-27 | 2015-12-09 | 网络存储技术公司 | 用于可扩展的崩溃一致的快照操作的系统和方法 |
WO2016155492A1 (zh) * | 2015-04-01 | 2016-10-06 | 阿里巴巴集团控股有限公司 | 一种数据库的远程数据同步方法和装置 |
CN106528575A (zh) * | 2015-09-14 | 2017-03-22 | 北京国双科技有限公司 | 数据对接方法和装置 |
CN109002370A (zh) * | 2017-06-06 | 2018-12-14 | 腾讯科技(深圳)有限公司 | 在线清结算系统的备份方法及装置、存储介质 |
CN109799978A (zh) * | 2019-01-31 | 2019-05-24 | 中合金网(北京)电子商务有限公司 | 页面数据处理方法与装置 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106815091B (zh) * | 2015-11-27 | 2020-02-14 | 成都华为技术有限公司 | 同步续传方法、从端设备及系统 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6061770A (en) * | 1997-11-04 | 2000-05-09 | Adaptec, Inc. | System and method for real-time data backup using snapshot copying with selective compaction of backup data |
US7296125B2 (en) * | 2001-11-29 | 2007-11-13 | Emc Corporation | Preserving a snapshot of selected data of a mass storage system |
GB0227825D0 (en) * | 2002-11-29 | 2003-01-08 | Ibm | High-performance lock management for flash copy in n-way shared storage systems |
CN1331063C (zh) * | 2003-06-10 | 2007-08-08 | 联想(北京)有限公司 | 基于数据卷快照的在线数据备份方法 |
CN100359476C (zh) * | 2004-06-03 | 2008-01-02 | 华为技术有限公司 | 一种快照备份的方法 |
JP4550541B2 (ja) * | 2004-10-06 | 2010-09-22 | 株式会社日立製作所 | ストレージシステム |
US20060174074A1 (en) * | 2005-02-03 | 2006-08-03 | International Business Machines Corporation | Point-in-time copy operation |
US7487386B2 (en) * | 2005-03-30 | 2009-02-03 | International Business Machines Corporation | Method for increasing file system availability via block replication |
-
2007
- 2007-04-29 CN CNB2007101030269A patent/CN100456255C/zh not_active Expired - Fee Related
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101582790B (zh) * | 2008-05-15 | 2011-12-07 | 华为技术有限公司 | 动态数据稽核以及业务实体故障检测的方法、装置和系统 |
CN102419758A (zh) * | 2010-09-28 | 2012-04-18 | 金蝶软件(中国)有限公司 | 数据处理系统及方法 |
CN105144105A (zh) * | 2013-02-27 | 2015-12-09 | 网络存储技术公司 | 用于可扩展的崩溃一致的快照操作的系统和方法 |
CN105144105B (zh) * | 2013-02-27 | 2019-04-19 | Netapp股份有限公司 | 用于可扩展的崩溃一致的快照操作的系统和方法 |
WO2016155492A1 (zh) * | 2015-04-01 | 2016-10-06 | 阿里巴巴集团控股有限公司 | 一种数据库的远程数据同步方法和装置 |
US10877990B2 (en) | 2015-04-01 | 2020-12-29 | Advanced New Technologies Co., Ltd. | Remote database synchronization |
CN106528575A (zh) * | 2015-09-14 | 2017-03-22 | 北京国双科技有限公司 | 数据对接方法和装置 |
CN106528575B (zh) * | 2015-09-14 | 2019-08-20 | 北京国双科技有限公司 | 数据对接方法和装置 |
CN109002370A (zh) * | 2017-06-06 | 2018-12-14 | 腾讯科技(深圳)有限公司 | 在线清结算系统的备份方法及装置、存储介质 |
CN109002370B (zh) * | 2017-06-06 | 2022-10-25 | 腾讯科技(深圳)有限公司 | 在线清结算系统的备份方法及装置、存储介质 |
CN109799978A (zh) * | 2019-01-31 | 2019-05-24 | 中合金网(北京)电子商务有限公司 | 页面数据处理方法与装置 |
Also Published As
Publication number | Publication date |
---|---|
CN100456255C (zh) | 2009-01-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101046761A (zh) | 一种取快照数据的装置及方法 | |
US10225302B2 (en) | Distributed stream processing in the Cloud | |
CN1291320C (zh) | 保存大容量存储系统的所选数据的快照 | |
CN1595365A (zh) | 自动和动态优化应用数据资源以满足业务目标的系统和方法 | |
CN1159649C (zh) | 一种日志信息的自动循环存储方法 | |
CN101359355B (zh) | Windows系统下受限帐户提升用户权限的方法 | |
CN101334825B (zh) | 应用程序管理和运行系统及方法 | |
CN1524223A (zh) | 信息备份的系统和方法 | |
CN102681917B (zh) | 一种操作系统及其修复方法 | |
CN1536485A (zh) | 数据维护、备份和恢复系统及方法 | |
CN102981931A (zh) | 虚拟机备份方法及装置 | |
CN100343807C (zh) | 一种Boot软件升级方法和一种Boot软件恢复方法 | |
CN1920828A (zh) | 一种垃圾文件清理方法及系统 | |
US20110022601A1 (en) | Block level tagging with file level information | |
CN1815475A (zh) | 备份生成装置和恢复处理装置 | |
CN1904837A (zh) | 软件多版本升级的方法及系统 | |
CN1946226A (zh) | 电信设备升级的方法、设备及升级引擎单元 | |
CN1975683A (zh) | 计算机网络数据恢复的方法 | |
CN1677355A (zh) | 文件同步更新的方法、系统及装置 | |
CN114528127A (zh) | 数据处理方法、装置、存储介质及电子设备 | |
CN1275160C (zh) | 一种数据库备份方法 | |
EP1933236A1 (en) | Branch Office and remote server smart archiving based on mirroring and replication software | |
CN1866961A (zh) | 一种客户系统与服务系统数据同步的方法及系统 | |
CN1162782C (zh) | 快速存储器文件的处理方法 | |
CN1976320A (zh) | 数据访问控制方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20090128 Termination date: 20140429 |