CN113239057A - 企业数据更新方法及装置 - Google Patents

Abstract

本公开提供一种企业数据更新方法及装置，包括：获取企业数据的增量数据标识；根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；根据所述转码企业数据对所述企业数据进行更新。通过本公开的企业数据更新方法能够减少实时计算各维度企业数据所花费的时间，并且能够降低数据库服务器的CPU占用率。

Description

企业数据更新方法及装置

技术领域

本公开涉及互联网技术领域，尤其涉及一种企业数据更新方法及装置。

背景技术

随着每年大量新增各种企业，相应的，企业数据也呈指数级增长。示例性地，当企业根据实际情况变更业务或者经营发生变化时，相应的企业数据也会发生变化。

现有的企业数据获取方式，往往是通过调用数据库服务器的接口，实时获取企业数据，并且对企业数据进行实时计算并返回计算结果。

然而，如果某一企业在某一维度上的企业数据被多次查询，则需要对该维度上的企业数据进行多次计算。当该维度上的企业数据没有变化时，对该维度上的企业数据的多次计算是不必要的。特别是每秒查询率QPS比较高时，实时计算各维度企业数据需要花费较长的时间，且提高服务器的CPU占用率。

发明内容

本公开实施例提供一种企业数据更新方法及装置，能够减少实时计算各维度企业数据所花费的时间，并且能够降低数据库服务器的CPU占用率。

本公开实施例的第一方面，提供一种企业数据更新方法,包括：

获取企业数据的增量数据标识；

根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；

基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；

根据所述转码企业数据对所述企业数据进行更新。

在一种可选的实施方式中，所述获取企业数据的增量数据标识的方法包括：

通过采集机分批次采集所述企业数据所在的数据库中的数据，定位不同业务更新时间，获取所述企业数据的增量数据标识；

其中，所述增量数据标识包括企业增量数据的企业标识和相应的数据维度，所述增量数据标识用于表征关系型数据库的企业增量数据。

在一种可选的实施方式中，所述基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据的方法包括：

基于所述企业增量数据以及统一标准码表信息，通过标准匹配，将所述企业增量数据与所述统一标准码表信息中完全相同的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据的方法包括：

基于所述企业增量数据以及统一标准码表信息，通过相似度关联，将所述企业增量数据与所述统一标准码表信息中相似度大于预设阈值的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述根据所述转码企业数据对所述企业数据进行更新的方法包括：

根据所述企业数据的增量数据标识匹配所述企业数据；

并将所匹配到的企业数据删除，在所述企业数据所在的数据库的对应位置重新插入所述转码企业数据。

本公开实施例的第二方面，提供一种企业数据更新装置，包括：

第一获取单元，用于获取企业数据的增量数据标识；

第二获取单元，用于根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；

转换单元，用于基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；

更新单元，用于根据所述转码企业数据对所述企业数据进行更新。

在一种可选的实施方式中，所述第一获取单元还用于：

通过采集机分批次采集所述企业数据所在的数据库中的数据，定位不同业务更新时间，获取所述企业数据的增量数据标识；

其中，所述增量数据标识包括企业增量数据的企业标识和相应的数据维度，所述增量数据标识用于表征关系型数据库的企业增量数据。

在一种可选的实施方式中，所述转换单元还用于：

基于所述企业增量数据以及统一标准码表信息，通过标准匹配，将所述企业增量数据与所述统一标准码表信息中完全相同的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述转换单元还用于：

基于所述企业增量数据以及统一标准码表信息，通过相似度关联，将所述企业增量数据与所述统一标准码表信息中相似度大于预设阈值的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述更新单元还用于：

根据所述企业数据的增量数据标识匹配所述企业数据；

并将所匹配到的企业数据删除，在所述企业数据所在的数据库的对应位置重新插入所述转码企业数据。

本公开提供的企业数据更新方法，包括获取企业数据的增量数据标识；根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；根据所述转码企业数据对所述企业数据进行更新。本公开提供的企业数据更新方法能够减少实时计算各维度企业数据所花费的时间，并且能够降低数据库服务器的CPU占用率。

附图说明

图1为本公开实施例企业数据更新方法的流程示意图；

图2为本公开实施例企业数据更新装置的结构示意图。

具体实施方式

为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。

本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。

应当理解，在本公开的各种实施例中，各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本公开实施例的实施过程构成任何限定。

应当理解，在本公开中，“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

应当理解，在本公开中，“多个”是指两个或两个以上。“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。“包含A、B和C”、“包含A、B、C”是指A、B、C三者都包含，“包含A、B或C”是指包含A、B、C三者之一，“包含A、B和/或C”是指包含A、B、C三者中任1个或任2个或3个。

应当理解，在本公开中，“与A对应的B”、“与A相对应的B”、“A与B相对应”或者“B与A相对应”，表示B与A相关联，根据A可以确定B。根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其他信息确定B。A与B的匹配，是A与B的相似度大于或等于预设的阈值。

取决于语境，如在此所使用的“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。

下面以具体地实施例对本公开的技术方案进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。

图1示例性地示出本公开实施例企业数据更新方法的流程示意图，如图1所示，所述方法包括：

步骤S101、获取企业数据的增量数据标识；

随着每年大量新增各种企业，相应的，企业数据也呈指数级增长。示例性地，当企业根据实际情况变更业务或者经营发生变化时，相应的企业数据也会发生变化。

现有的企业数据获取方式，往往是通过调用数据库服务器的接口，实时获取企业数据，并且对企业数据进行实时计算并返回计算结果。

然而，如果某一企业在某一维度上的企业数据被多次查询，则需要对该维度上的企业数据进行多次计算。当该维度上的企业数据没有变化时，对该维度上的企业数据的多次计算是不必要的。特别是每秒查询率QPS比较高时，实时计算各维度企业数据需要花费较长的时间，且提高服务器的CPU占用率。

示例性地，本公开实施例的企业数据指的是存储在关系型数据库中与企业经营相关的数据。企业增量数据指的是关系型数据库中发生变化或者新增的企业数据。增量数据标识用于标识企业增量数据，增量数据标识包括企业标识和相应的数据维度。企业标识指的是用于唯一表示企业的标识，比如，企业标识可以是企业名称，也可以是企业的工商注册号码。数据维度可以用于描述企业数据的类别，比如数据维度可以包括工商基础信息、对外投资、失信、法院公告、裁判文书、开庭公告的类别，还可以包括税务、证书、软件著作权、财务信息、招投标、员工信息、司法拍卖等类别。

通过获取企业数据的增量数据标识，可以用于唯一表示企业的标识，能够保证后期数据更新的准确性，防止数据对应错误。

在一种可选的实施方式中，所述获取企业数据的增量数据标识的方法包括：

通过采集机分批次采集所述企业数据所在的数据库中的数据，定位不同业务更新时间，获取所述企业数据的增量数据标识；

其中，所述增量数据标识包括企业增量数据的企业标识和相应的数据维度，所述增量数据标识用于表征关系型数据库的企业增量数据。

示例性地，可以通过采集机分批次采集企业数据所在的数据库中的数据。在实际应用中，当企业信息发生变化时，将产生大量的数据，通过采集机采集企业数据，定位不同业务更新时间，当业务更新时，获取企业数据的增量数据标识。

步骤S102、根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；

示例性地，多个类型源端数据库中存储有大量的与企业经营相关的数据，当企业数据发生变化时，源端数据库可以根据企业数据的变化产生企业增量数据，同时，企业增量数据设有增量数据标识，并向服务器发送增量数据标识。服务器获取企业数据的增量数据标识，并发送增量数据标识，用以后续更新企业数据。

步骤S103、基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；

在一种可选的实施方式中，所述基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据的方法包括：

基于所述企业增量数据以及统一标准码表信息，通过标准匹配，将所述企业增量数据与所述统一标准码表信息中完全相同的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据的方法包括：

基于所述企业增量数据以及统一标准码表信息，通过相似度关联，将所述企业增量数据与所述统一标准码表信息中相似度大于预设阈值的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

根据国际/国家统一标准码表信息，可以通过标准匹配和/或相似度关联等方式，将相关指标进行结构化转码，示例性地，可以将某一具体工商管理局转换为数字码值。

具体地，以通过相似度关联为例，企业增量数据在实际转码过程中，可能存在多个对应的信息，例如某某县工商行政、或某某县工商、或某某县工商行政管理局等，通过相似度关联的方式，可以将其中相似度大于预设阈值的企业增量数据作为备选，并将备选数据中相似度最高的企业增量数据作为最终的企业增量数据。

基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据，能够从繁杂的数据中筛选出与企业增量数据最为匹配的数据，提高数据更新的准确性。

步骤S104、根据所述转码企业数据对所述企业数据进行更新。

在一种可选的实施方式中，所述根据所述转码企业数据对所述企业数据进行更新的方法包括：

根据所述企业数据的增量数据标识匹配所述企业数据；

并将所匹配到的企业数据删除，在所述企业数据所在的数据库的对应位置重新插入所述转码企业数据。

示例性地，当企业数据变化后，可以将原先的数据删除替换掉，以此减轻数据库服务器的CPU的占用率。

具体地，可以根据企业数据的增量数据标识匹配企业数据，匹配到企业数据后，将企业数据删除，并且将企业数据所在的数据库的对应位置重新插入转码企业数据。

本公开提供的企业数据更新方法能够减少实时计算各维度企业数据所花费的时间，并且能够降低数据库服务器的CPU占用率。

图2示例性地示出本公开实施例企业数据更新装置的结构示意图，如图2所示，所述装置包括：

第一获取单元21，用于获取企业数据的增量数据标识；

第二获取单元22，用于根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；

转换单元23，用于基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；

更新单元24，用于根据所述转码企业数据对所述企业数据进行更新。

在一种可选的实施方式中，所述第一获取单元21还用于：

通过采集机分批次采集所述企业数据所在的数据库中的数据，定位不同业务更新时间，获取所述企业数据的增量数据标识；

其中，所述增量数据标识包括企业增量数据的企业标识和相应的数据维度，所述增量数据标识用于表征关系型数据库的企业增量数据。

在一种可选的实施方式中，所述转换单元23还用于：

基于所述企业增量数据以及统一标准码表信息，通过标准匹配，将所述企业增量数据与所述统一标准码表信息中完全相同的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述转换单元23还用于：

基于所述企业增量数据以及统一标准码表信息，通过相似度关联，将所述企业增量数据与所述统一标准码表信息中相似度大于预设阈值的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

在一种可选的实施方式中，所述更新单元24还用于：

根据所述企业数据的增量数据标识匹配所述企业数据；

并将所匹配到的企业数据删除，在所述企业数据所在的数据库的对应位置重新插入所述转码企业数据。

本公开还提供一种程序产品，该程序产品包括执行指令，该执行指令存储在可读存储介质中。设备的至少一个处理器可以从可读存储介质读取该执行指令，至少一个处理器执行该执行指令使得设备实施上述的各种实施方式提供的方法。

其中，可读存储介质可以是计算机存储介质，也可以是通信介质。通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。计算机存储介质可以是通用或专用计算机能够存取的任何可用介质。例如，可读存储介质耦合至处理器，从而使处理器能够从该可读存储介质读取信息，且可向该可读存储介质写入信息。当然，可读存储介质也可以是处理器的组成部分。处理器和可读存储介质可以位于专用集成电路(ApplicationSpecific Integrated Circuits，简称：ASIC)中。另外，该ASIC可以位于用户设备中。当然，处理器和可读存储介质也可以作为分立组件存在于通信设备中。可读存储介质可以是只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

在上述终端或者服务器的实施例中，应理解，处理器可以是中央处理单元(英文：Central Processing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：Application SpecificIntegrated Circuit，简称：ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本公开所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。

最后应说明的是：以上各实施例仅用以说明本公开的技术方案，而非对其限制；尽管参照前述各实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本公开各实施例技术方案的范围。

Claims (10)

1.一种企业数据更新方法，其特征在于，包括：

获取企业数据的增量数据标识；

根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；

基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；

根据所述转码企业数据对所述企业数据进行更新。

2.根据权利要求1所述的方法，其特征在于，所述获取企业数据的增量数据标识的方法包括：

通过采集机分批次采集所述企业数据所在的数据库中的数据，定位不同业务更新时间，获取所述企业数据的增量数据标识；

其中，所述增量数据标识包括企业增量数据的企业标识和相应的数据维度，所述增量数据标识用于表征关系型数据库的企业增量数据。

3.根据权利要求1所述的方法，其特征在于，所述基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据的方法包括：

基于所述企业增量数据以及统一标准码表信息，通过标准匹配，将所述企业增量数据与所述统一标准码表信息中完全相同的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

4.根据权利要求1所述的方法，其特征在于，所述基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据的方法包括：

基于所述企业增量数据以及统一标准码表信息，通过相似度关联，将所述企业增量数据与所述统一标准码表信息中相似度大于预设阈值的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

5.根据权利要求1所述的方法，其特征在于，所述根据所述转码企业数据对所述企业数据进行更新的方法包括：

根据所述企业数据的增量数据标识匹配所述企业数据；

并将所匹配到的企业数据删除，在所述企业数据所在的数据库的对应位置重新插入所述转码企业数据。

6.一种企业数据更新装置，其特征在于，包括：

第一获取单元，用于获取企业数据的增量数据标识；

第二获取单元，用于根据所述企业数据的增量数据标识，从多个类型源端数据库中获取与所述增量数据标识对应的企业增量数据；

转换单元，用于基于所述企业增量数据以及统一标准码表信息，通过标准匹配和/或相似度关联，将所述企业增量数据转换为转码企业数据；

更新单元，用于根据所述转码企业数据对所述企业数据进行更新。

7.根据权利要求6所述的装置，其特征在于，所述第一获取单元还用于：

通过采集机分批次采集所述企业数据所在的数据库中的数据，定位不同业务更新时间，获取所述企业数据的增量数据标识；

其中，所述增量数据标识包括企业增量数据的企业标识和相应的数据维度，所述增量数据标识用于表征关系型数据库的企业增量数据。

8.根据权利要求6所述的装置，其特征在于，所述转换单元还用于：

基于所述企业增量数据以及统一标准码表信息，通过标准匹配，将所述企业增量数据与所述统一标准码表信息中完全相同的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

9.根据权利要求6所述的装置，其特征在于，所述转换单元还用于：

基于所述企业增量数据以及统一标准码表信息，通过相似度关联，将所述企业增量数据与所述统一标准码表信息中相似度大于预设阈值的企业增量数据，进行结构转码，将所述企业增量数据转换为转码企业数据。

10.根据权利要求6所述的装置，其特征在于，所述更新单元还用于：

根据所述企业数据的增量数据标识匹配所述企业数据；

并将所匹配到的企业数据删除，在所述企业数据所在的数据库的对应位置重新插入所述转码企业数据。

Images