CN116881365A - 一种字段同步方法、装置、设备及存储介质 - Google Patents

Abstract

本申请公开了一种字段同步方法、装置、设备及存储介质，涉及数据同步领域，包括：将初始数据分类为冷数据和第一热数据，基于第一热数据生成第一预写日志，基于冷数据和第一热数据生成当前版本数据；若获取源系统字段增加操作后发送的同步指令，则更新第一热数据得到第二热数据，并生成第二预写日志，基于第二预写日志和冷数据生成新的当前版本数据；基于第一预写日志和冷数据生成备份数据，并在接收源系统字段回退操作后发送的回退指令时，将当前版本数据变更为备份数据。通过预写日志进行数据备份，减少字段变更在大数据异构数据库存储多份数据的情况，并且能自动化的处理多次添加字段和回退的情况，降低数据存储，提高效率，保证了服务连续性。

Description

一种字段同步方法、装置、设备及存储介质

技术领域

本发明涉及数据同步领域，特别涉及一种字段同步方法、装置、设备及存储介质。

背景技术

目前大部分公司往往拥有多个业务系统，在建设实时数仓过程中，需要将各个业务系统数据实时同步到数据中心。业务系统往往采用常用的关系型数据库，而数据中心往往使用非结构化大数据湖存储引擎来承载数据。因此数据同步到大数据湖之后，也需要提供准实时甚至实时的查询服务。

但是通过人工操作，源系统进行增加字段操作时，大数据湖存储引擎无法进行自动化进行表数据结构变更操作，需要源系统人工通知到数据中心维护人员，进行人工操作增加字段，流程长且不及时。在人工处理数据的过程中，可能会造成大数据存储中数据结构与源系统不一致，影响数据分析。并且源系统在增加字段时，可能会存在异常回退的情况。此时如果大数据运维人员已经完成了增加字段操作，会造成新的数据进入错误的大数据存储文件，或者对应错误的字段，导致大数据存储中的数据损坏，在人工恢复数据时，大数据实时存储引擎就无法提供正常的数据分析服务。同时由于部分业务系统同步到数据中心数据中，并没有元数据信息，只有数据信息，且存在增加字段遗漏通知的情况，导致人工维护的大数据存储中的实时数据与源系统数据的数据结构一定是不一致的，也会影响业务人员的数据分析。

目前通常通过以下操作解决上述问题，增加源系统字段变更监控以及部分字段变更提前处理，来保证数据一致。但是仍然需要人工进行字段变更操作操作，并且通过binlog日志和归档日志监控到字段变更通知到数据运维人员时，实时数据已经存在不一致可能，源系统回退时可能大数据存储无法回退，造成该表所有数据损坏的风险。因此，如何提高字段同步的效率，保证字段同步时数据的连续性是本领域有待解决的问题。

发明内容

有鉴于此，本发明的目的在于提供一种字段同步方法、装置、设备及存储介质，通过预写日志进行数据备份，减少字段变更在大数据异构数据库存储多份数据的情况，并且能自动化的处理多次添加字段和回退的情况，降低数据存储，提高效率，保证了服务连续性。其具体方案如下：

第一方面，本申请提供了一种字段同步方法，应用于数据中心，包括：

根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；

若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；

基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。

可选的，将所述冷数据保存至本地，包括：

将所述冷数据在本地的预设公共路径中进行存储；

并且，所述方法还包括：

在获取到所述同步指令或所述回退指令时，禁止对所述预设公共路径中存储的所述冷数据进行变更。

可选的，所述字段同步方法，还包括：

生成查询视图，并将所述查询视图指向当前版本数据，以便根据所述查询视图查询当前版本数据。

可选的，所述基于所述第一预写日志和所述冷数据生成第一备份数据之后，还包括：

若在预设时间范围内未接收到所述回退指令，则删除本地的上一版本数据。

可选的，所述字段同步方法，还包括：

若多次获取到所述同步指令，则根据获取到的所有所述同步指令中的增加字段生成对应版本的目标预写日志，并基于所述目标预写日志生成对应的第二备份数据。

可选的，所述基于所述目标预写日志生成对应的第二备份数据之后，还包括：

根据预设筛选规则从所述第二备份数据中筛选出满足预设数据删除条件的待删除数据，并删除所述待删除数据。

第二方面，本申请提供了一种字段同步装置，应用于数据中心，包括：

日志生成模块，用于根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；

字段增加模块，用于若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；

字段回退模块，用于基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。

可选的，所述字段同步装置，还包括：

备份数据生成模块，用于若多次获取到所述同步指令，则根据获取到的所有所述同步指令中的增加字段生成对应版本的目标预写日志，并基于所述目标预写日志生成对应的第二备份数据。

第三方面，本申请提供了一种电子设备，所述电子设备包括处理器和存储器；其中，所述存储器用于存储计算机程序，所述计算机程序由所述处理器加载并执行以实现前述的字段同步方法。

第四方面，本申请提供了一种计算机可读存储介质，用于保存计算机程序，所述计算机程序被处理器执行时实现前述的字段同步方法。

通过上述技术方案，本申请根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。通过预写日志进行数据备份，减少字段变更在大数据异构数据库存储多份数据的情况，实现自动化的处理多次添加字段和回退的情况，降低数据存储，提高字段同步效率。并且保证当源系统发生回退时，大数据异构数据库中的数据始终能与源系统数据保持一致，保证了字段同步发生回退操作时的服务连续性，整个过程中无需人工操作，可以保证数据准确性。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请提供的一种字段同步方法流程图；

图2为本申请提供的一种热数据备份实现的字段同步方法流程图；

图3为本申请提供的一种具体的字段同步方法流程图；

图4为本申请提供的一种具体的字段同步方法流程图；

图5为本申请提供的一种字段同步方法流程图；

图6为本申请提供的一种电子设备结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

目前通过人工进行字段变更操作时，流程长且不及时，并且通过在监控到字段变更通知到数据运维人员时，实时数据已经存在不一致可能，源系统回退时可能大数据存储无法回退，本申请可以通过预写日志进行数据备份，减少字段变更在大数据异构数据库存储多份数据的情况，并且能自动化的处理多次添加字段和回退的情况，降低数据存储，提高效率，保证了服务连续性。

参见图1所示，本发明实施例公开了一种字段同步方法，应用于数据中心，包括：

步骤S11、根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据。

本实施例中，首先可以根据预设分类规则将从源系统获取到的初始数据分类为冷数据和第一热数据，并将冷数据和第一热数据分为两块数据保存至本地的不同区域，并基于第一热数据生成对应的第一预写日志，以及基于冷数据和第一热数据生成当前版本数据。可以理解的是，上述预写日志(WAL Log；WAL，Write-Ahead Logging)是一种常见的数据库技术，用于确保数据的持久性和一致性。WAL Log是WAL技术中的一部分，在数据库系统中，WAL Log用于在事务进行修改之前先将这些修改记录到一个持久的日志文件中，即预写日志。需要指出的是，上述存储冷数据的数据区域为在字段更新中再也不会更新的数据区域，热数据为除了冷数据其他的数据，同时可以根据热数据记录WAL Log。这样一来，本实施例实际的存储空间变成了一份包括冷、热两部分，加上WAL Log部分的完整数据，有利于后续进行数据备份时，利用预写日志代替热数据即可，可以减少字段同步过程产生的数据量，从而减小数据的存储空间。

需要指出的是，如图2所示，为了通过备份数据改善数据同步的效果，目前通常可以在大数据侧同时写两份热数据A和B，通过视图对外映射数据A，提供实时查询服务；当增加字段时，自动触发数据A增加字段，并提供实时查询服务，数据B保持增加字段前数据结构并继续同步数据；若发生回退操作，视图自动指向数据B，保持源系统数据一致，数据A将自动删除最新数据，并拷贝数据B，直至追上最新数据。最终实现字段自动同步，且过程中可以提供查询服务。但是可能存在如下问题：数据存储两份，大多数时间浪费很多空间；字段增加操作，可能会连续多次触发，因此在短时间内，当连续发生字段增加多次时，且部分回退，造成每一个版本的数据都是不可用的。因此，本实施例中，可以利用预写日志代替热数据进行存储，可以节省数据的存储空间。

步骤S12、若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据。

本实施例中，若源系统在进行字段增加后，可以产生对应的指令发送给数据中心，这样一来，数据中心在获取到源系统在自身的数据表进行字段增加操作后发送的同步指令后，可以根据同步指令确定其中的增加字段，然后更新本地存储的第一热数据得到第二热数据，并基于第二热数据生成第二预写日志，这样一来，可以基于第二预写日志和冷数据生成进行字段增加后相应的新的当前版本数据。可以理解的是，此时的当前版本数据为目前完成当前数据同步操作的最新数据，用以取代上一步骤的当前版本数据。需要指出的是，上述进行字段增加操作的同步指令中，所述同步指令也可以基于修改字段类型、删除字段等操作生成，以便通过备份保证数据变更前后的发展状态都有记录，便于进行回退操作，本实施例中仅列举字段增加的对应流程，其他字段操作具体流程在此不做具体阐述。

步骤S13、基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。

本实施例中，由于目前仅进行了以此字段增加操作，因此在字段回退时，需要回退到的版本即为最初生成的版本，因此首先可以基于第一预写日志和冷数据生成第一备份数据，并在接收到源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为第一备份数据。可以理解的是，上述回退指令与上述进行字段增加的同步指令一样，可以有源系统发送，并且上述第一备份数据在仅进行了以此字段增加操作后进行回退操作时，上述第一备份数据对应的数据即为最初版本的热数据对应的第一预写日志和冷数据。通过生成第一备份数据，可以在字段回退操作发生错误时，及时通过备份数据进行数据恢复，同时也可以提供查询服务，以便保证数据的连续性。可以理解的是，上述备份数据生成的过程可以在字段进行同步之前就进行，同时也可以在字段同步后进行备份数据的生成。

并且，在基于第一预写日志和冷数据生成第一备份数据之后，若在预设时间范围内未接收到回退指令，则删除本地的上一版本数据。例如，若在一小时内未接收到对应的回退指令，则可以判定上述字段增加操作不会回退，即字段同步完成，因此可以删除对应的上一版本数据以节省存储空间。

通过上述技术方案，本实施例将冷数据和第一热数据保存至本地的不同区域，并基于第一热数据生成对应的第一预写日志，基于冷数据和第一热数据生成当前版本数据；若获取到源系统发送的同步指令，则根据同步指令中的增加字段更新本地的第一热数据得到第二热数据，并基于第二热数据生成第二预写日志，基于第二预写日志和冷数据生成新的当前版本数据；基于第一预写日志和冷数据生成第一备份数据，并在接收到源系统发送的回退指令时，将当前版本数据变更为第一备份数据。这样一来，通过预写日志进行数据备份，减少字段变更在大数据异构数据库存储多份数据的情况，降低数据存储，提高字段同步效率。并且保证当源系统发生回退时，大数据异构数据库中的数据始终能与源系统数据保持一致，保证了字段同步发生回退操作时的服务连续性，整个过程中无需人工操作，可以保证数据准确性。

基于上一实施例可知，本申请可以基于冷数据、热数据、预写日志结合的方式进行字段同步，接下来，本实施例中将对多次进行字段同步时的过程进行详细地阐述。参见图3所示，本申请实施例公开了一种具体的字段同步方法，包括：

步骤S21、根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据。

本实施例中，需要指出的是，由于本实施例可以基于热数据生成对应的预写日志，以便在后续字段同步后基于预写日志生成当前版本数据。因此为了数据处理效率的提高，可以在将冷数据保存至本地时，将冷数据在本地的预设公共路径中进行存储，这样一来，在后续结合冷数据和预写日志确定当前版本数据时，方便对冷数据进行读取，并且相应的，在获取到同步指令或回退指令时，禁止对预设公共路径中存储的冷数据进行变更。可以理解的是，冷数据是定时进行确定的，例如依靠业务常识每周对数据中心的数据自动进行一次判断，将一些不会发生变更的数据定义为冷数据。也就是说可以自动判定冷数据，通过预设数据判断条件来触发冷数据的判断并自动迁移数据至预设内存。

步骤S22、若多次获取到同步指令，则根据获取到的所有所述同步指令中的增加字段生成对应版本的目标预写日志，并基于所述目标预写日志生成对应的第二备份数据，以在接收到源系统在自身的数据表进行字段回退操作后发送的回退指令时进行对应的回退操作。

本实施例中，若数据中心多次获取到源系统的同步指令，则根据获取到的所有同步指令中的增加字段生成对应版本的目标预写日志，上述增加字段也可以是其他字段同步操作，具体参见上一实施例。然后基于目标预写日志生成对应的第二备份数据，以在接收到源系统在自身的数据表进行字段回退操作后发送的回退指令时进行对应的回退操作。可以理解的是，在上述多次接收到同步指令时，每一次接收到同步指令即可以生成对应版本的目标预写日志，然后生成对应的多个版本的备份数据，这样一来，在进行字段回退时，由于不是所有的字段同步操作都需要进行回退操作，通过多个备份保证数据变更前后的发展状态都有记录，因此可以根据不同版本的备份数据进行数据的回退，以便保证数据的连续性。

需要指出的是，上述根据字段同步指令进行字段增加的操作，多次增加字段操作可以是先后发生，也可以时同时发生的。若同时进行多次字段同步，在一种具体的实施例中将其视为一次字段的变更，因此只需要多增加一个版本的备份数据，并且在回退时将多次增加的字段同时进行回退。在另一种具体的实施例中，考虑到如果多个字段不同时进行回退的情况，如图4所示，也可以基于接收到的多个增加字段分别进行同步，即生成多个对应的备份数据版本，以便在回退时可以分别确定不同版本的回退字段进行回退。上述过程中，具体可以用批次号来标识变更的版本，例如两个字段变更批次号一致，就认为是一次变更，那么要求变更方回退时必须一起回退，不能只保留其中一个。并且需要指出的是，同时增加两个字段，是要求变更方即源系统写一条增加字段的SQL语句(Structured QueryLanguage，结构化查询语言)，并在一个事务中执行的；如果写了两条SQL语句，分两次提交，就认为是两次字段的同步。这样一来，可以根据实际情况进行灵活调整备份数据的版本，更好地改善数据同步的效果。同时可以理解的是，若本次字段回退失败，可以自动撤回该回退操作，以免数据版本出现混乱。

并且在基于目标预写日志生成对应的第二备份数据之后，还根据预设筛选规则从第二备份数据中筛选出满足预设数据删除条件的待删除数据，并删除待删除数据。例如确定出数据同步成功的字段对应的备份数据版本，并进行删除，以节省空间利用，当一段时间之后，将不需要的版本自动删除掉，实现了空间资源回收，同时保证了整个过程中，大数据的数据表可查，且是最新数据。

步骤S23、生成查询视图，并将所述查询视图指向当前版本数据，以便根据所述查询视图查询当前版本数据。

本实施例中，在进行数据同步的过程中，可以生成查询视图，并将查询视图指向当前版本数据，以便根据查询视图查询当前版本数据。例如图4所示，首先将冷数据和热数据作为当前版本数据即数据A后，即将查询视图指向数据A，并且若字段b进行回退，此时的当前版本数据为进行了字段b的增加操作后的数据C，即将查询视图指向数据C，以便在数据回退过程中，若出现问题，可以及时查询，以免数据出现错误。

可以理解的是，上述所有的字段同步操作均不限于字段增加，字段变更、字段删除等其他操作同样适用，只需生成对应的同步指令即可。

通过上述技术方案，本实施例根据预设分类规则将初始数据分类为冷数据和第一热数据，将冷数据和第一热数据保存至本地的不同区域，并基于第一热数据生成对应的第一预写日志，基于冷数据和第一热数据生成当前版本数据。若多次获取到同步指令，则根据获取到的所有同步指令中的增加字段生成对应版本的目标预写日志，并基于目标预写日志生成对应的第二备份数据，以在接收到源系统在自身的数据表进行字段回退操作后发送的回退指令时进行对应的回退操作。生成查询视图，并将查询视图指向当前版本数据，以便根据查询视图查询当前版本数据。这样一来，对于多份日志存储进行优化，不存储两份，而使用了预写日志的方式虚拟多份数据，多个版本的数据保证了多种处理可能，如果进行多次添加字段，可以分别生成多个不同版本的数据对应每次不同的变化，并且当需要回退时，可以将查询视图指向冷数据加新生成一版本的热数据，保证了数据服务连续性，通过使用视图将大数据表和实际对应的数据分离，可以通过快速切换视图操作，保证了修复数据时，不影响数据查询。

参见图5所示，本申请实施例还公开了一种字段同步装置，应用于数据中心，包括：

日志生成模块11，用于根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；

字段增加模块12，用于若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；

字段回退模块13，用于基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。

本实施例中，根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。通过预写日志进行数据备份，减少字段变更在大数据异构数据库存储多份数据的情况，实现自动化的处理多次添加字段和回退的情况，降低数据存储，提高字段同步效率，并且保证了字段同步发生回退操作时的服务连续性，无需人工操作，可以保证数据准确性。

在一些具体实施例中，所述日志生成模块11，具体包括：

数据存储单元，用于将所述冷数据在本地的预设公共路径中进行存储；

并且，所述数据存储单元还用于在获取到所述同步指令或所述回退指令时，禁止对所述预设公共路径中存储的所述冷数据进行变更。

在一些具体实施例中，所述字段同步装置，还包括：

视图生成模块，用于生成查询视图，并将所述查询视图指向当前版本数据，以便根据所述查询视图查询当前版本数据。

在一些具体实施例中，所述字段回退模块13，还包括：

第一数据删除单元，用于在预设时间范围内未接收到所述回退指令时，删除本地的上一版本数据。

在一些具体实施例中，所述字段同步装置，还包括：

备份数据生成模块，用于若多次获取到所述同步指令，则根据获取到的所有所述同步指令中的增加字段生成对应版本的目标预写日志，并基于所述目标预写日志生成对应的第二备份数据。

在一些具体实施例中，所述备份数据生成模块，还包括：

第二数据删除单元，用于根据预设筛选规则从所述第二备份数据中筛选出满足预设数据删除条件的待删除数据，并删除所述待删除数据。

进一步的，本申请实施例还公开了一种电子设备，图6是根据一示例性实施例示出的电子设备20结构图，图中的内容不能认为是对本申请的使用范围的任何限制。

图6为本申请实施例提供的一种电子设备20的结构示意图。该电子设备20，具体可以包括：至少一个处理器21、至少一个存储器22、电源23、通信接口24、输入输出接口25和通信总线26。其中，所述存储器22用于存储计算机程序，所述计算机程序由所述处理器21加载并执行，以实现前述任一实施例公开的字段同步方法中的相关步骤。另外，本实施例中的电子设备20具体可以为电子计算机。

本实施例中，电源23用于为电子设备20上的各硬件设备提供工作电压；通信接口24能够为电子设备20创建与外界设备之间的数据传输通道，其所遵循的通信协议是能够适用于本申请技术方案的任意通信协议，在此不对其进行具体限定；输入输出接口25，用于获取外界输入数据或向外界输出数据，其具体的接口类型可以根据具体应用需要进行选取，在此不进行具体限定。

另外，存储器22作为资源存储的载体，可以是只读存储器、随机存储器、磁盘或者光盘等，其上所存储的资源可以包括操作系统221、计算机程序222等，存储方式可以是短暂存储或者永久存储。

其中，操作系统221用于管理与控制电子设备20上的各硬件设备以及计算机程序222，其可以是Windows Server、Netware、Unix、Linux等。计算机程序222除了包括能够用于完成前述任一实施例公开的由电子设备20执行的字段同步方法的计算机程序之外，还可以进一步包括能够用于完成其他特定工作的计算机程序。

进一步的，本申请还公开了一种计算机可读存储介质，用于存储计算机程序；其中，所述计算机程序被处理器执行时实现前述公开的字段同步方法。关于该方法的具体步骤可以参考前述实施例中公开的相应内容，在此不再进行赘述。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上对本申请所提供的技术方案进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种字段同步方法，其特征在于，应用于数据中心，包括：

根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；

若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；

基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。

2.根据权利要求1所述的字段同步方法，其特征在于，将所述冷数据保存至本地，包括：

将所述冷数据在本地的预设公共路径中进行存储；

并且，所述方法还包括：

在获取到所述同步指令或所述回退指令时，禁止对所述预设公共路径中存储的所述冷数据进行变更。

3.根据权利要求1所述的字段同步方法，其特征在于，还包括：

生成查询视图，并将所述查询视图指向当前版本数据，以便根据所述查询视图查询当前版本数据。

4.根据权利要求1所述的字段同步方法，其特征在于，所述基于所述第一预写日志和所述冷数据生成第一备份数据之后，还包括：

若在预设时间范围内未接收到所述回退指令，则删除本地的上一版本数据。

5.根据权利要求1至4任一项所述的字段同步方法，其特征在于，还包括：

若多次获取到所述同步指令，则根据获取到的所有所述同步指令中的增加字段生成对应版本的目标预写日志，并基于所述目标预写日志生成对应的第二备份数据。

6.根据权利要求5所述的字段同步方法，其特征在于，所述基于所述目标预写日志生成对应的第二备份数据之后，还包括：

根据预设筛选规则从所述第二备份数据中筛选出满足预设数据删除条件的待删除数据，并删除所述待删除数据。

7.一种字段同步装置，其特征在于，应用于数据中心，包括：

日志生成模块，用于根据预设分类规则将初始数据分类为冷数据和第一热数据，将所述冷数据和所述第一热数据保存至本地的不同区域，并基于所述第一热数据生成对应的第一预写日志，基于所述冷数据和所述第一热数据生成当前版本数据；

字段增加模块，用于若获取到源系统在自身的数据表进行字段增加操作后发送的同步指令，则根据所述同步指令中的增加字段更新本地的所述第一热数据得到第二热数据，并基于所述第二热数据生成第二预写日志，基于所述第二预写日志和所述冷数据生成新的当前版本数据；

字段回退模块，用于基于所述第一预写日志和所述冷数据生成第一备份数据，并在接收到所述源系统在自身的数据表进行字段回退操作后发送的回退指令时，将当前版本数据变更为所述第一备份数据。

8.根据权利要求7所述的字段同步装置，其特征在于，还包括：

备份数据生成模块，用于若多次获取到所述同步指令，则根据获取到的所有所述同步指令中的增加字段生成对应版本的目标预写日志，并基于所述目标预写日志生成对应的第二备份数据。

9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器；其中，所述存储器用于存储计算机程序，所述计算机程序由所述处理器加载并执行以实现如权利要求1至6任一项所述的字段同步方法。

10.一种计算机可读存储介质，其特征在于，用于保存计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的字段同步方法。