CN107861958B - 一种元数据同步方法及装置 - Google Patents

Abstract

本发明实施例公开了一种元数据同步方法及装置，实现提高元数据同步效率的目的。其中，所述方法包括：监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；根据所述被影响对象的信息确定与所述被影响对象对应的元数据；根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

Description

一种元数据同步方法及装置

技术领域

本发明涉及计算机领域，尤其涉及一种元数据同步方法及装置。

背景技术

数据库(Database)是按照数据结构来组织、存储和管理数据的仓库。对于大数据领域，数据库可以分为两类：一类是应用数据库，这种数据库一般服务于某个应用系统，即和应用需求相关；另一类是通用数据库，这种数据库一般较大，通常以集群的方式出现，主要为各种应用数据库供应数据。为了在通用数据库中的与所述应用数据库相关的数据发生变化时，能够及时得知并进行数据同步，通常都会基于所述通用数据库的元数据定期同步所述应用数据库的元数据，当发现所述应用数据库的元数据在同步后发生了变化，则所述应用数据库向所述通用数据库同步产生变化的元数据对应的数据。

所述元数据(Metadata)，又称中介数据或中继数据，是描述数据的数据(dataabout data)，也就是数据属性(property)的描述信息，例如数据库列表、数据库表列表、表字段、表分区等信息，所述数据库列表为关于各个数据库信息的列表，所述数据库表列表为关于单个数据库中各个表的信息的列表，所述表字段表示单个表中的各列，所述表分区是指单个表中的各分区。

同步元数据对于应用数据库的及时更新非常重要，尤其是在大数据领域中，通用数据库中的数据变化较为频繁的情况下。例如，当所述应用数据库从所述通用数据库中获取到某个表的某个表分区的数据后，要根据所述应用数据库中该表分区的行数来进行校验，如果所述通用数据库中该表分区的数据被删除若干行，但是所述应用数据库中关于该表的表分区的行数的元数据没有被同步更新，则可能会导致校验失败。

现有技术中应用数据库按照固定周期向所述通用数据库同步所述应用数据库的所有元数据，在所述元数据的数据量较大的情况下，同时进行元数据的同步会影响系统的数据传输效率。

发明内容

为了解决现有技术中存在的技术问题，本发明提供了一种元数据同步方法及装置，实现提高元数据同步效率的目的。

本发明实施例提供了一种元数据同步方法，所述方法包括：

监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；

根据所述被影响对象的信息确定与所述被影响对象对应的元数据；

根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；

按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

优选的，所述监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息包括：

监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息；

所述根据所述被影响对象的信息确定与所述被影响对象对应的元数据包括：

根据所述被访问对象的信息确定与所述被访问的对象对应的元数据。

优选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的增加对象事件，所述增加对象事件中包括增加对象的信息，根据所述被删除对象的信息确定与所述被增加对象对应的元数据。

优选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的修改对象事件，所述修改对象事件中包括被修改对象的信息，根据所述被修改对象的信息确定与所述被修改对象对应的元数据。

优选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的查询对象事件，所述查询对象事件中包括被查询对象的信息，根据所述被查询对象的信息确定与所述被查询对象对应的元数据。

优选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的删除对象事件，所述删除对象事件中包括被删除对象的信息，根据所述被删除对象的信息确定与所述被删除对象对应的元数据。

优选的，所述监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息包括：

监控生成的SQL语句，所述SQL语句用于访问所述应用数据库，所述SQL语句中包括被访问对象的信息。

优选的，所述监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息包括：

监控由对原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

优选的，所述根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整包括：

根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数；

利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整。

优选的，所述根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数包括：

根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值；

所述利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整包括：

判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

优选的，所述元数据包括：

惰性元数据和/或常变元数据，所述惰性元数据为同步时间周期较长的元数据；所述常变元数据为同步时间周期较短的元数据。

优选的，所述惰性元数据包括：数据库列表信息、表字段信息和/或表访问授权信息。

优选的，所述常变元数据包括：

表列表信息和/或表分区信息。

本发明实施例还提供了一种元数据同步装置，所述装置包括：监控单元、元数据确定单元、调整单元以及同步单元；

其中，所述监控单元，用于监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；

所述元数据确定单元，用于根据所述被影响对象的信息确定与所述被影响对象对应的元数据；

所述调整单元，用于根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；

所述同步单元，用于按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

优选的，所述监控单元，具体用于：

监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，所述被访问事件为影响所述被访问对象的元数据的同步时间周期的事件，所述被访问对象对应的元数据属于所述应用数据库的元数据；

所述元数据确定单元，具体用于：

根据所述被访问对象的信息确定与所述被访问的对象对应的元数据。

优选的，所述监控单元，具体用于：

监控所述应用数据库的增加对象事件，所述增加对象事件中包括增加对象的信息，根据所述被删除对象的信息确定与所述被增加对象对应的元数据。

优选的，所述监控单元，具体用于：

监控所述应用数据库的修改对象事件，所述修改对象事件中包括被修改对象的信息，根据所述被修改对象的信息确定与所述被修改对象对应的元数据。

优选的，所述监控单元，具体用于：

监控所述应用数据库的查询对象事件，所述查询对象事件中包括被查询对象的信息，根据所述被查询对象的信息确定与所述被查询对象对应的元数据。

优选的，所述监控单元，具体用于：

监控所述应用数据库的删除对象事件，所述删除对象事件中包括被删除对象的信息，根据所述被删除对象的信息确定与所述被删除对象对应的元数据。

优选的，所述监控单元，具体用于：

监控生成的SQL语句，所述SQL语句用于访问所述应用数据库，所述SQL语句中包括被访问对象的信息。

优选的，所述监控单元，具体用于：

监控由对原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

优选的，所述调整单元包括调整参数确定单元和调整子单元；

其中，所述调整参数确定单元，用于根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数；

所述调整子单元，用于利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整。

优选的，所述调整参数确定单元，具体用于：

根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值；

所述调整子单元，具体用于：

判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

本发明通过监控产生的关于应用数据库的元数据影响事件，并根据所述元数据影响事件中的被影响对象的信息，确定与所述被影响对象对应的元数据，然后根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整，使得所述应用数据库的不同元数据的同步时间周期不同，减少了同一时间内元数据同步的数据传输量，有效提高了元数据同步效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本发明实施例一提供的一种元数据同步方法的流程图；

图2为本发明提供的二提供的一种元数据同步装置的结构框图；

图3为本发明提供的三提供的一种元数据同步服务器的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一：

参见图1，该图为本发明实施例一提供的一种元数据同步方法的流程图。

本实施例提供的元数据同步方法包括如下步骤：

步骤S101：监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息。

在本实施例中，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，那么对所述应用数据库的元数据影响事件进行监控的目的就在于：对所述被影响对象的对应的元数据的同步时间周期进行调整。其中，所述元数据影响事件中包括被影响对象的信息，所述被影响对象的信息用于确定所述被影响对象对应的元数据，所述被影响对象对应的元数据属于所述应用数据库的元数据。所述被影响对象是指对应的元数据的同步时间周期可能被调整的对象，所述被影响对象可以是数据库中的表、表分区、具体数据等，甚至是某个或某些具体的数据库，本发明不做具体限定。

通过根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整，使得不同的元数据具有不同的同步时间周期，因而同一时间内需要同步的元数据的量减少，实现有效减缓了系统之间进行数据传输的压力的目的。

所述元数据影响事件可以分为两类，一类为所述应用数据库的被访问事件；另一类是关于所述应用数据库的非被访问事件。

若所述元数据影响事件为所述应用数据库的被访问事件，则所述被访问事件中包括被访问对象的信息，所述被访问对象的信息用于确定所述被访问对象对应的元数据。

若是所述被访问对象被访问频率较高，则可以适当缩短所述被访问对象的元数据的同步时间周期；若所述被访问对象的被访问频率较低，则可以适当的延长所述被访问对象的元数据的同步时间周期，不仅有效减缓了系统之间进行数据传输的压力，而且，在被访问对象被访问频率较高的情况下，及时同步所述被访问对象的元数据，一旦所述通用数据库的元数据发生了变化，就能够实现及时更新所述应用数据库的相应数据，更好的满足实际的更新需求。

所述应用数据库的被访问事件包括对所述应用数据库中被访问对象的增加、删除、查询、更新等操作。不同的被访问事件，对应的被访问对象不同。比如，若所述被访问事件为修改对象事件，那么所述被访问对象为被修改对象；若所述被访问事件为查询对象事件，那么所述被访问对象为被查询对象；若所述被访问事件为删除对象事件，那么所述被访问对象为被删除对象......

产生所述应用数据库被访问事件的源头可以是用户，也可以是所述应用系统自身，或者是来自其他应用系统等，本发明不做具体限定。例如，用户可以通过应用客户端发起查询所述应用数据库的请求；或者，当满足预设条件时，所述应用系统自动产生更新所述应用数据库的请求；又或者，所述应用数据库接收到来自其他应用系统的查询请求等。

在所述被访问事件中，包括有所述被访问对象的信息。比如，假设所述被访问对象为所述应用数据库的某个表，那么所述被访问对象的信息可以是该表的所属应用数据库的标识(当所述应用数据库存在多个的情况下)以及该表的标识；假设所述被访问对象为所述应用数据库的某个分区，那么所述被访问对象的信息可以是该分区所属的表的标识、该表所述的数据库的标识，以及该分区的标识。所述标识可以是名称、ID等信息。

在实际应用中，对所述应用数据库的操作可以通过SQL(Structured QueryLanguage，结构化查询语言)语句实现，那么所述监控所述应用数据库的被访问事件的具体过程可以为：监控生成的SQL语句，在本实施例中，所述SQL语句为用于访问所述应用数据库的SQL语句，且所述SQL语句中包括被访问对象的信息。

除了所述应用数据库的被访问事件有可能会影响到元数据的同步时间周期的调整，一些非被访问事件也可能会影响到所述元数据的同步时间周期的调整。

例如，若所述用于访问所述应用数据库的SQL语句被修改，但并未或暂时并未根据修改后的SQL语句访问所述应用数据库，则可以认为所述SQL语句中的被访问对象是受关注的，因此可以相应缩短所述被访问对象对应的元数据的同步时间周期。

具体的，所述监控所述产生的关于应用数据库的元数据影响事件的步骤可以为：监控由原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

步骤S102：根据所述被影响对象的信息确定与所述被影响对象对应的元数据。

如前文所述，所述被影响对象的信息用于确定与所述被影响对象对应的元数据。所述元数据可以包括数据库列表、数据库表列表、表字段、表分区等信息。在实际应用中，可以建立一个被影响对象和元数据的映射关系表，当监控到所述元数据影响事件后，根据所述被影响对象的信息查找所述映射关系表，以得到与所述被影响对象对应的元数据。

例如，假设所述被影响的对象是所述应用数据库的表X，所述被影响对象的信息为所述表X的标识，那么，可以根据该表的标识在所述对映射关系表中进行查询，以得到所述被影响对象的元数据，所述被影响对象对应的元数据可以是该表的表字段。

再例如，假设所述被影响对象是所述应用数据库中表Y的分区S，所述被影响对象的信息为所述表Y的标识以及所述分区S的标识，根据所述映射关系表，可以得到所述被影响对象对应的元数据，所述元数据可以包括表分区信息，还可以包括表Y的表字段等，其中所述表分区信息可以包括表分区的行数、列数等。

步骤S103：根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整。

上文讲述了所述被影响对象对应的元数据的同步时间周期为什么需要进行调整，以及为了调整需要做哪些准备工作，下面讲述如何进行调整，以及何时进行调整。

在本实施例中，根据所述被影响事件对所述被影响对象对应的元数据的同步时间周期进行调整。

具体的，可以根据所述被影响对象对应的元数据影响事件的频率来对所述元数据的同步时间周期进行调整。若一段时间内，与所述被影响对象对应的元数据影响事件的频率较高，则可以缩短所述被影响对象对应的元数据的同步时间周期；若与所述被影响对象对应的元数据影响事件的频率较低，则可以延长所述被影响对象对应的元数据的同步时间周期。或者相反。

例如，在某个时间段内，查询所述应用数据库中某个表的频率较高，则可以相应缩短该表对应的元数据的同步时间周期；假设在另外一个时间段内，查询所述应用数据库的该表的频率较低，可以相应延长该表对应的元数据的同步时间周期，或者保持默认的同步时间周期。

按照所述元数据影响事件的频率来调整所述同步时间周期，可以预先统计在一段时间内关于所述被影响对象的所有元数据影响事件的产生的总次数，例如包括查询对象事件、增加对象事件、删除对象事件以及更新对象事件等被访问事件产生的总次数，或者如修改SQL语句等非被访问事件产生的总次数，当所述元数据影响事件的频率达到预设频率时，对所述同步时间周期进行相应的调整。在调整的过程中，可以预设多个频率区间，不同区间的频率对应有不同的调整系数。

举个例子，假设所述同步时间周期为T，若所述被影响对象对应的元数据影响事件的频率为100-500次/分钟，则将所述同步时间周期调整为0.8T；若所述被影响对象对应的元数据影响事件的频率为500-100次/分钟，则将所述同步时间周期调整为0.5T；若所述被影响对象对应的元数据影响事件的频率为0-100次/分钟，则将所述同步时间周期调整为2T。

除了统计在一段时间内，所述被影响对象对应的元数据影响事件的总次数以外，还可以根据所述元数据影响事件的类型的不同而分别统计各个类型对应的次数，然后分别得到各个类型的元数据影响事件的频率，并为各类型元数据影响事件对应的频率赋予一定的权值。

例如，假设所述同步时间周期仍然为T。在1分钟之内，所述被影响对象对应的元数据影响事件包括：查询对象事件、修改对象事件和删除对象事件三种，这三种元数据影响事件对应的权重分别为0.3、0.2和0.5。且所述查询对象事件对应的调整系数为0.8，所述修改对象事件对应的调整系数为0.5，所述删除对象事件对应的调整系数为0.7，那么所述同步时间周期应当被调整为(0.3*0.8+0.2*0.5+0.5*0.7)T＝0.69T。

当然，除了根据所述元数据影响事件的频率，或类型和次数来计算所述同步时间周期的调整系数以外，还可以单独根据类型来得到所述同步时间周期的调整系数。

例如，假设所述同步时间周期为T，且在1分钟之内，所述被影响对象对应的元数据影响事件包括：查询对象事件、修改对象事件和删除对象事件三种，所述查询对象事件对应的调整系数为0.8，所述修改对象事件对应的调整系数为0.5，所述删除对象事件对应的调整系数为0.7，那么所述同步时间周期可以被调整为0.8*0.5*0.7T＝0.28T。

采用调整系数作为所述同步时间周期的调整参数只是其中的一种方式，还可以通过其他调整参数进行调整。

比如，根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值，然后判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

举个例子，假设所述同步时间周期为T，且在1分钟之内，所述被影响对象对应的元数据影响事件包括：查询对象事件、修改对象事件和删除对象事件三种，所述查询对象事件对应分值为2分，所述修改对象事件对应的分值为3分，所述删除对象事件对应的分值为0.5分。在这1分钟之内，所述查询对象事件发生了5次，所述修改对象事件发生了20次，所述删除对象事件发生了4次，那么所述被影响对象对应的元数据的分值为：2*5+3*20+0.5*4＝72，若所述阈值为70分，那么由于所述被影响对象对应的元数据的分值大于所述阈值，则立即执行所述向通用数据库发送元数据同步请求的步骤，以实现对所述被影响对象对应的元数据的同步。

若所述被影响对象对应的元数据的分值小于所述阈值，则不执行所述向通用数据库发送元数据同步请求的步骤，且重新统计所述被影响对象对应的元数据影响事件的在一段时间内产生的次数。

步骤S104：按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

所述通用数据库是所述应用数据库的数据来源，为了保证所述应用数据库中数据的准确性，依据所述通用数据库的元数据，来同步所述应用数据库的元数据非常重要。现有技术按照固定周期同步所述应用数据库的元数据，当所述应用数据库的元数据量较大时，同一时间进行数据传输会导致系统压力较大，从而导致数据传输效率低下的问题。

而本实施例通过监控产生的关于应用数据库的元数据影响事件，并根据所述元数据影响事件中的被影响对象的信息，确定与所述被影响对象对应的元数据，然后根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整，使得所述应用数据库的不同元数据的同步时间周期不同，减少了同一时间内元数据同步的数据传输量，有效提高了元数据同步效率。

此外，本实施例提供的元数据同步方法，是基于所述应用数据库的所有元数据的同步时间周期在调整之前均相同的假设，即所有元数据具有完全相同的默认同步时间周期。但在实际应用中，为了进一步满足不同的被影响对象的元数据的不同同步需求，可以对不同的元数据设置不同的默认同步时间周期。例如，可以将所述元数据分为两种属性，即惰性元数据和常变元数据。所述惰性元数据为同步时间周期较长的元数据，因为其变化通常不频繁，这类元数据可以包括：数据库列表信息、表字段信息和/或表访问授权信息等；所述常变元数据为同步时间周期较短的元数据，因为其变化通常较为频繁，这类元可以包括：表列表信息和/或表分区信息等。

举个例子，可以将所述数据库列表信息的默认同步时间周期设置为每半小时一次，将所述表分区信息的默认同步时间周期设置为每秒钟一次。

基于以上实施例提供的一种车辆参数修改方法，本发明实施例还提供了一种车辆控制器，下面结合附图来详细说明其工作原理。

实施例二

参见图2，该图为本发明实施例二提供的一种元数据同步装置的结构框图。

本实施例提供的元数据同步装置包括：监控单元101、元数据确定单元102、调整单元103以及同步单元104；

其中，所述监控单元101，用于监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；

所述元数据确定单元102，用于根据所述被影响对象的信息确定与所述被影响对象对应的元数据；

所述调整单元103，用于根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；

所述同步单元104，用于按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

而本实施例通过监控产生的关于应用数据库的元数据影响事件，并根据所述元数据影响事件中的被影响对象的信息，确定与所述被影响对象对应的元数据，然后根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整，使得所述应用数据库的不同元数据的同步时间周期不同，减少了同一时间内元数据同步的数据传输量，有效提高了元数据同步效率。

可选的，所述监控单元101，具体用于：

监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，所述被访问事件为影响所述被访问对象的元数据的同步时间周期的事件，所述被访问对象对应的元数据属于所述应用数据库的元数据；

所述元数据确定单元，具体用于：

根据所述被访问对象的信息确定与所述被访问的对象对应的元数据。

可选的，所述监控单元101，具体用于：

监控所述应用数据库的增加对象事件，所述增加对象事件中包括增加对象的信息，根据所述被删除对象的信息确定与所述被增加对象对应的元数据。

可选的，所述监控单元101，具体用于：

监控所述应用数据库的修改对象事件，所述修改对象事件中包括被修改对象的信息，根据所述被修改对象的信息确定与所述被修改对象对应的元数据。

可选的，所述监控单元101，具体用于：

监控所述应用数据库的查询对象事件，所述查询对象事件中包括被查询对象的信息，根据所述被查询对象的信息确定与所述被查询对象对应的元数据。

可选的，所述监控单元101，具体用于：

监控所述应用数据库的删除对象事件，所述删除对象事件中包括被删除对象的信息，根据所述被删除对象的信息确定与所述被删除对象对应的元数据。

可选的，所述监控单元101，具体用于：

监控生成的SQL语句，所述SQL语句用于访问所述应用数据库，所述SQL语句中包括被访问对象的信息。

可选的，所述监控单元101，具体用于：

监控由对原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

可选的，所述调整单元103包括调整参数确定单元和调整子单元；

其中，所述调整参数确定单元，用于根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数；

所述调整子单元，用于利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整。

可选的，所述调整参数确定单元，具体用于：

根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值；

所述调整子单元，具体用于：

判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

实施例三

相应的，本发明实施例三提供一种数据同步服务器，参见图3所示，所述数据同步服务器可以包括：

处理器1001、存储器1002、输入装置1003和输出装置1004。所述服务器中的处理器1001的数量可以一个或多个，图3中以一个处理器为例。在本发明的一些实施例中，处理器1001、存储器1002、输入装置1003和输出装置1004可通过总线或其它方式连接，其中，图3中以通过总线连接为例。

存储器1002可用于存储软件程序以及模块，处理器1001通过运行存储在存储器1002的软件程序以及模块，从而执行所述服务器的各种功能应用以及数据处理。存储器1002可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等。此外，存储器1002可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。输入装置1003可用于接收输入的数字或字符信息，以及产生与浏览器服务器的用户设置以及功能控制有关的键信号输入。

具体在本实施例中，处理器1001会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器1002中，并由处理器1001来运行存储在存储器1002中的应用程序，从而实现各种功能：

监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；

根据所述被影响对象的信息确定与所述被影响对象对应的元数据；

根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；

按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

可选的，所述监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息包括：

监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息；

所述根据所述被影响对象的信息确定与所述被影响对象对应的元数据包括：

根据所述被访问对象的信息确定与所述被访问的对象对应的元数据。

可选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的增加对象事件，所述增加对象事件中包括增加对象的信息，根据所述被删除对象的信息确定与所述被增加对象对应的元数据。

可选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的修改对象事件，所述修改对象事件中包括被修改对象的信息，根据所述被修改对象的信息确定与所述被修改对象对应的元数据。

可选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的查询对象事件，所述查询对象事件中包括被查询对象的信息，根据所述被查询对象的信息确定与所述被查询对象对应的元数据。

可选的，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的删除对象事件，所述删除对象事件中包括被删除对象的信息，根据所述被删除对象的信息确定与所述被删除对象对应的元数据。

可选的，所述监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息包括：

监控生成的SQL语句，所述SQL语句用于访问所述应用数据库，所述SQL语句中包括被访问对象的信息。

可选的，所述监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息包括：

监控由对原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

可选的，所述根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整包括：

根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数；

利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整。

可选的，所述根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数包括：

根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值；

所述利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整包括：

判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

可选的，所述元数据包括：

惰性元数据和/或常变元数据，所述惰性元数据为同步时间周期较长的元数据；所述常变元数据为同步时间周期较短的元数据。

可选的，所述惰性元数据包括：数据库列表信息、表字段信息和/或表访问授权信息。

可选的，所述常变元数据包括：

表列表信息和/或表分区信息。

当介绍本发明的各种实施例的元件时，冠词“一”、“一个”、“这个”和“所述”都意图表示有一个或多个元件。词语“包括”、“包含”和“具有”都是包括性的并意味着除了列出的元件之外，还可以有其它元件。

需要说明的是，本领域普通技术人员可以理解实现上述方法实施例中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(RandomAccess Memory,RAM)等。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元及模块可以是或者也可以不是物理上分开的。另外，还可以根据实际的需要选择其中的部分或者全部单元和模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上所述仅是本发明的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (23)

1.一种元数据同步方法，其特征在于，所述方法包括：

监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；

根据所述被影响对象的信息确定与所述被影响对象对应的元数据；

根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；

按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

2.根据权利要求1所述的方法，其特征在于，所述监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息包括：

监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息；

所述根据所述被影响对象的信息确定与所述被影响对象对应的元数据包括：

根据所述被访问对象的信息确定与所述被访问的对象对应的元数据。

3.根据权利要求2所述的方法，其特征在于，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的增加对象事件，所述增加对象事件中包括增加对象的信息，根据所述增加对象的信息确定与所述增加对象对应的元数据。

4.根据权利要求2所述的方法，其特征在于，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的修改对象事件，所述修改对象事件中包括被修改对象的信息，根据所述被修改对象的信息确定与所述被修改对象对应的元数据。

5.根据权利要求2所述的方法，其特征在于，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的查询对象事件，所述查询对象事件中包括被查询对象的信息，根据所述被查询对象的信息确定与所述被查询对象对应的元数据。

6.根据权利要求2所述的方法，其特征在于，所述监控应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，根据所述被访问对象的信息确定与所述被访问的对象对应的元数据包括：

监控所述应用数据库的删除对象事件，所述删除对象事件中包括被删除对象的信息，根据所述被删除对象的信息确定与所述被删除对象对应的元数据。

7.根据权利要求2至6任意一项所述的方法，其特征在于，所述监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息包括：

监控生成的SQL语句，所述SQL语句用于访问所述应用数据库，所述SQL语句中包括被访问对象的信息。

8.根据权利要求1所述的方法，其特征在于，所述监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息包括：

监控由对原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

9.根据权利要求1所述的方法，其特征在于，所述根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整包括：

根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数；

利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整。

10.根据权利要求9所述的方法，其特征在于，所述根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数包括：

根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值；

所述利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整包括：

判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

11.根据权利要求1所述的方法，其特征在于，所述元数据包括：

惰性元数据和/或常变元数据，所述惰性元数据为同步时间周期较长的元数据；所述常变元数据为同步时间周期较短的元数据。

12.根据权利要求11所述的方法，其特征在于，所述惰性元数据包括：数据库列表信息、表字段信息和/或表访问授权信息。

13.根据权利要求11所述的方法，其特征在于，所述常变元数据包括：

表列表信息和/或表分区信息。

14.一种元数据同步装置，其特征在于，所述装置包括：监控单元、元数据确定单元、调整单元以及同步单元；

其中，所述监控单元，用于监控产生的关于应用数据库的元数据影响事件，所述元数据影响事件中包括所述应用数据库中的被影响对象的信息，所述元数据影响事件为影响所述被影响对象的元数据的同步时间周期的事件，所述被影响对象对应的元数据属于所述应用数据库的元数据；

所述元数据确定单元，用于根据所述被影响对象的信息确定与所述被影响对象对应的元数据；

所述调整单元，用于根据所述元数据影响事件对所述被影响对象的元数据的同步时间周期进行调整；

所述同步单元，用于按照调整后的同步时间周期向通用数据库发送元数据同步请求，以利用所述通用数据库的元数据同步与所述被影响对象对应的元数据。

15.根据权利要求14所述的装置，其特征在于，所述监控单元，具体用于：

监控所述应用数据库的被访问事件，所述被访问事件中包括所述应用数据库中被访问对象的信息，所述被访问事件为影响所述被访问对象的元数据的同步时间周期的事件，所述被访问对象对应的元数据属于所述应用数据库的元数据；

所述元数据确定单元，具体用于：

根据所述被访问对象的信息确定与所述被访问的对象对应的元数据。

16.根据权利要求15所述的装置，其特征在于，所述监控单元，具体用于：

监控所述应用数据库的增加对象事件，所述增加对象事件中包括增加对象的信息，根据所述增加对象的信息确定与所述增加对象对应的元数据。

17.根据权利要求15所述的装置，其特征在于，所述监控单元，具体用于：

监控所述应用数据库的修改对象事件，所述修改对象事件中包括被修改对象的信息，根据所述被修改对象的信息确定与所述被修改对象对应的元数据。

18.根据权利要求15所述的装置，其特征在于，所述监控单元，具体用于：

监控所述应用数据库的查询对象事件，所述查询对象事件中包括被查询对象的信息，根据所述被查询对象的信息确定与所述被查询对象对应的元数据。

19.根据权利要求15所述的装置，其特征在于，所述监控单元，具体用于：

监控所述应用数据库的删除对象事件，所述删除对象事件中包括被删除对象的信息，根据所述被删除对象的信息确定与所述被删除对象对应的元数据。

20.根据权利要求15至19任意一项所述的装置，其特征在于，所述监控单元，具体用于：

监控生成的SQL语句，所述SQL语句用于访问所述应用数据库，所述SQL语句中包括被访问对象的信息。

21.根据权利要求14所述的装置，其特征在于，所述监控单元，具体用于：

监控由对原SQL语句进行修改生成的新SQL语句，所述新SQL语句用于访问所述应用数据库，所述新SQL语句中包括被访问对象的信息。

22.根据权利要求14所述的装置，其特征在于，所述调整单元包括调整参数确定单元和调整子单元；

其中，所述调整参数确定单元，用于根据所述被影响对象对应的所述元数据影响事件发生的类型和/或频率得到所述同步时间周期的调整参数；

所述调整子单元，用于利用所述同步时间周期的调整参数对所述被影响对象对应的元数据的同步时间周期进行调整。

23.根据权利要求22所述的装置，其特征在于，所述调整参数确定单元，具体用于：

根据所述元数据影响事件的类型和/或频率得到所述被影响对象对应的元数据的分值；

所述调整子单元，具体用于：

判断所述分值是否大于或等于阈值，若是，则执行向通用数据库发送元数据同步请求的步骤。

Images