CN114647703B - 数据处理方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明公开了一种数据处理方法、装置、电子设备及存储介质，该方法包括响应于对目标对象的同步任务创建指令，将目标对象的源数据加载至存储引擎和搜索引擎中，并在存储引擎和搜索引擎中分别生成与目标对象对应的唯一ID信息，然后根据预设的分类规则对存储引擎中的源数据进行分析处理，以生成与目标对象匹配的目标标签，最后基于目标对象的ID信息，将目标标签同步至搜索引擎中对应的源数据中。采用本实施例，既能保障在存储引擎中对目标对象及其行为数据进行大规模的读写处理能力，又能保障搜索引擎在实际业务中多变的查询和性能需求，从而解决了标签系统存在灵活性低的缺陷。

Description

数据处理方法、装置、电子设备及存储介质

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据处理方法、装置、电子设备及存储介质。

背景技术

标签系统主要是用于对目标对象，例如对人、车辆等对象打标签，以通过所打的标签来形容目标对象的特征，从而能够对不同的目标对象采用不同的营销/管理/处理手段。

而现有的标签系统在完成对目标对象的打标签处理后，便不会再对该目标对象的标签进行管理。并且，现有的标签系统通常是与多个业务系统进行关联，多个业务系统之间可能存在不相同的处理事项。因此，标签系统对目标对象生成的标签往往并不能适用于每个业务系统。

由于现有的标签系统中打标签的逻辑规则是由代码决定的，当逻辑规则需要修改时，则需要工程师对一个个的代码进行修改。由此导致了现有的标签系统存在缺乏灵活性的问题。

发明内容

本发明实施例的目的是提供一种数据处理方法、装置、电子设备及存储介质，以解决现有的标签系统灵活性低的技术问题。

在第一方面，为实现上述目的，本发明实施例提供了一种数据处理方法，包括：

响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签；

基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

进一步的，在所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理的步骤之前，所述数据处理方法还包括：

获取预先配置的分类标签，所述分类标签还配置有对应的属性信息；

根据所述分类标签的属性信息，确定所述分类标签的生命周期；

对所述分类标签配置对应的分类规则，得到预设的分类规则。

进一步的，所述分析处理包括第一分析处理和第二分析处理，所述第二分析处理的第二执行频率大于所述第一分析处理的第一执行频率，所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签，包括：

若所述分类标签的生命周期大于预设阈值，则根据预设的分类规则以第一执行频率对所述存储引擎中的所述源数据进行第一分析处理，以生成与所述目标对象匹配的目标标签；

若所述分类标签的生命周期不大于预设阈值，则根据预设的分类规则以第二执行频率对所述存储引擎中的所述源数据进行第二分析处理，以生成与所述目标对象匹配的目标标签。

进一步的，所述预设的分类规则包括第一分类规则、第二分类规则以及第三分类规则，所述对所述分类标签配置对应的分类规则，包括：

将从预设的SQL语句库中调取的目标SQL语句作为第一分类规则，并为所述分类标签配置所述第一分类规则；或，

将用户输入的自定义SQL语句作为第二分类规则，并为所述分类标签配置所述第二分类规则；或，

将用户输入的自定义SQL语句以及从预设的SQL语句库中调取的目标SQL语句作为第三分类规则，并为所述分类标签配置所述第三分类规则。

进一步的，在所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签的步骤之后，所述数据处理方法还包括：

将进行分析处理的分析处理方式、所采用的分类规则以及生成的目标标签，作为所述目标对象的新增信息，并将所述新增信息存储至所述存储引擎中的所述源数据的历史信息中；

所述基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中，包括：

基于所述目标对象的ID信息，将所述新增信息同步至所述搜索引擎中对应的源数据中。

进一步的，所述的数据处理方法，还包括：

响应于查询指令，根据所述查询指令中的ID信息查询对应对象的源数据。

进一步的，所述将所述目标对象的源数据加载至存储引擎和搜索引擎中，包括：

通过ETL工具获取所述目标对象的源数据；

对所述源数据进行转换处理，以将转换处理后的所述源数据加载至存储引擎和搜索引擎中。

在第二方面，为了解决相同的技术问题，本发明实施例提供了一种数据处理装置，包括：

加载模块，用于响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

分析模块，用于根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签；

同步模块，用于基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

在第三方面，为了解决相同的技术问题，本发明实施例提供了一种电子设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述存储器与所述处理器耦接，且所述处理器执行所述计算机程序时，实现上述任一项所述的数据处理方法中的步骤。

在第四方面，为了解决相同的技术问题，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在的设备执行上述任一项所述的数据处理方法中的步骤。

本发明实施例提供了一种数据处理方法、装置、电子设备及存储介质，该方法通过在存储引擎和搜索引擎中分别生成与目标对象对应的唯一ID信息，能够使得存储引擎和搜索引擎中的数据记录具有相互映射的关系。然后通过对存储引擎中的源数据进行分析处理，并将分析处理后生成的目标标签同步至搜索引擎，如此既能保障在存储引擎中对目标对象及其行为数据进行大规模的读写处理能力，又能保障搜索引擎在实际业务中多变的查询和性能需求，从而解决了标签系统存在灵活性低的缺陷。

附图说明

图1是本发明实施例提供的数据处理方法的一种流程示意图；

图2是本发明实施例提供的分类标签配置过程的一种流程示意图；

图3是本发明实施例提供的同步过程的一种流程示意图；

图4是本发明实施例提供的数据处理的另一种流程示意图；

图5是本发明实施例提供的数据处理装置的一种结构示意图；

图6是本发明实施例提供的电子设备的一种结构示意图；

图7是本发明实施例提供的电子设备的另一种结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解的是，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。

本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。

在相关技术中，标签系统用于对人或车辆等对象进行打标签，以通过所打的标签来形容该对象的特征。而相关技术中的标签系统在完成对目标对象的打标签处理后，便不会再对该目标对象的标签进行管理。由于人或车辆等对象在某一场景中的特征较当前场景中的特征会发生变化，因此标签系统生成的固定标签将影响到与标签系统相关联的多个业务系统，从而降低了业务系统的业务能力，并且还降低了用户使用的用户体验。

为了解决相关技术中标签系统存在的技术问题，本申请实施例提供了一种应用于标签系统的数据处理方法，请参见图1，图1是本发明实施例提供的数据处理方法的一种流程示意图，如图1所示，本发明实施例提供的数据处理方法包括步骤101至步骤103。

步骤101，响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息。

其中，同步任务创建指令为用户输入的，或用户在控制面板上进行操作而生成的指令，在一种情况下，同步任务创建指令可以为用户输入的文本指令，也可以为标签系统根据用户的操作而生成的文本指令。在其他情况下，该指令可以为语音指令，例如与“开启同步任务”等相关的指令。源数据包括业务结构化数据和流数据。

具体的，标签系统在接收到同步任务创建指令后，标签系统可以创建周期同步任务，也可以创建实时流同步任务以对目标对象执行同步任务，而具体创建任务的类型根据实际应用需求而定，在此不做限定。在本实施例中，所述将所述目标对象的源数据加载至存储引擎和搜索引擎中的步骤，具体包括：通过ETL（Extract-Transform-Load，抽取-转换-加载）工具获取所述目标对象的源数据；对所述源数据进行转换处理，以将转换处理后的所述源数据加载至存储引擎和搜索引擎中。

通过在存储引擎和搜索引擎中分别生成与目标对象对应的唯一ID信息，能够使得存储引擎和搜索引擎中的数据记录具有相互映射的关系，从而既能保障在存储引擎中对目标对象及其行为数据进行大规模的读写处理能力，又能保障搜索引擎在实际业务中多变的查询和性能需求，解决了标签系统存在灵活性低的缺陷。

步骤102，根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签。

在本实施例中，在所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理的步骤，也即步骤102之前，本实施例提供的数据处理方法还包括：获取预先配置的分类标签，所述分类标签还配置有对应的属性信息；根据所述分类标签的属性信息，确定所述分类标签的生命周期；对所述分类标签配置对应的分类规则，得到预设的分类规则。

具体的，分类标签为用户预先配置的标签，各标签相互之间具有不同的层次关系，即同一类的分类标签包括有父类标签和子类标签。例如，当分类为人时，则分类标签可以包括标签为“男人”和“女人”的父类标签，其中，“男人”和“女人”的父类标签又可以分别包括“幼年”、“青年”、“成年”、“老年”等子类标签。各子类标签下还可以包括其他的子类标签，具体的情形在此不一一例举。分类标签的属性信息包括标签的基本信息、编码、名称以及描述等，这些信息主要用于形容该标签的特征。例如，上述“男人”和“女人”可作为标签的属性信息。

在一些实施例中，标签具有不同的生命周期。例如一个人的标签，“男人”和“女人”为永久的标签，即永久生命周期（长的生命周期）。而“幼年”、“青年”、“成年”、“老年”则为短时间内的标签，即短的生命周期。因此，通过为标签设置不同的生命周期，能够确定再次对不同目标对象的分类周期，以此实现对目标对象的分类标签的更新，提高各业务系统的业务能力。具体的，可根据不同的应用场景，对目标对象（例如人）的属性信息设定不同生命周期的标签，并对不同生命周期的分类标签配置对应的分类规则。例如，在只需要识别男人和女人的应用场景时，为分类标签设定长生命周期，并配置对男人和女人的分类规则，避免对男人和女人进行多次分类处理，节省系统处理资源；在需要识别年龄阶段的应用场景时，为分类标签设置短生命周期，并配置对人类年龄阶段的分类规则，以此避免同一个人常年匹配同一标签，例如“幼年”的标签，从而避免影响业务系统对该对象（人）的营销方式，降低用户体验。

在另一些实施例中，所述预设的分类规则包括第一分类规则、第二分类规则以及第三分类规则。所述对所述分类标签配置对应的分类规则的步骤，包括：将从预设的SQL语句库中调取的目标SQL语句作为第一分类规则，并为所述分类标签配置所述第一分类规则；或，将用户输入的自定义SQL语句作为第二分类规则，并为所述分类标签配置所述第二分类规则；或，将用户输入的自定义SQL语句以及从预设的SQL语句库中调取的目标SQL语句作为第三分类规则，并为所述分类标签配置所述第三分类规则。

其中，第一分类规则为存储于预设的SQL语句库中的规则，该预设的SQL语句库是预先构建的，且该预设的SQL语句库中的SQL语句主要是用于为特殊标签配置实体和行为的属性规则，例如，采用特殊标签配置的对用户性别进行归类的属性规则，将用户分类为“男人”或“女人”。第二分类规则为用户输入的自定义SQL语句，该自定义SQL语句主要是用于为复杂标签配置实体和行为的复杂规则，例如，采用复杂标签配置的对用户的年龄进行归类的复杂规则，将用户分类为“幼年”或“青年”或“成年”或“老年”。第三分类规则为预设的SQL语句库中的SQL语句与用户自定义SQL语句组合的复合SQL语句，该复合SQL语句主要是用于为复合标签配置实体和行为的复合规则，例如，采用复合标签配置的对用户的性别和年龄进行归类的复合规则，将用户分类为“男童”或“女童”或“男孩”或“女孩”或“成年男性”或“成年女性”或“老年男性”或“老年女性”。

在一些具体的应用场景中，当目标对象为班级信息表时（该班级信息表包括班级、姓名、年龄、性别等信息），则第一分类规则可以为预设的SQL语句库中的规则（例如，班级为一年级或性别为男等简单单一的特殊规则）；第二分类规则可以为通过用户在触发选择控件后生成的复杂/组合指令对应的规则（例如，在用户的条件指令选择操作后生成的、能够同时满足姓名中含有陈字、年龄小于8岁的复杂规则）；第三分类规则可以为第一分类规则和第二分类规则的组合得到的复合规则（例如，班级为一年级、姓名中含有陈字、年龄小于8岁的复合规则）。

具体的，请参见图2，图2是本发明实施例提供的分类标签配置过程的一种流程示意图，如图2所示，在开始进行分类标签的配置后，用户将首先配置标签分类和各标签的层次关系，然后填写各标签的属性信息（包括基本信息、编码、名称、描述等）。在完成标签属性信息的填写后，判断各标签是否为永久性标签，若判断的标签为永久性标签，则将对应标签进行更新的方式确定为手动执行规则（手动执行规则：标签系统在检测到手动执行规则后会立刻进行分析处理，处理完成后就同步标签数据，之后不再进行对该标签更新。仅当手动触发重新分析处理后，才会重新执行分析处理）；若判断的标签为非永久性标签，且将对应标签进更新的方式确定为周期性例行执行规则（周期性例行执行规则：根据配置的定时规则自动进行标签的更新，且每次分析处理都会保留之前的处理结果，便于查看或回溯历史版本，历史版本中包含了标签的规则信息、分类分层信息、结果集合、计算状态、更新方式、创建方式、创建人等基本信息）。在确定完标签的更新方式后，判断各标签的类型，若标签的类型为特殊标签，则为特殊标签配置实体和行为的属性规则；若标签的类型为自定义标签（即复杂标签，无法采用特殊标签来表示的标签），则为复杂标签配置实体和行为的复杂规则；若标签的类型为复合标签，则为复合标签配置实体和行为的复合规则。至此完成各标签和各标签规则的配置。

在一些实施例中，所述分析处理包括第一分析处理和第二分析处理，所述第二分析处理的第二执行频率大于所述第一分析处理的第一执行频率。在一种情况下。所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签的步骤，包括：若所述分类标签的生命周期大于预设阈值，则根据预设的分类规则以第一执行频率对所述存储引擎中的所述源数据进行第一分析处理，以生成与所述目标对象匹配的目标标签。在另一种情况下，所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签的步骤，包括：若所述分类标签的生命周期不大于预设阈值，则根据预设的分类规则以第二执行频率对所述存储引擎中的所述源数据进行第二分析处理，以生成与所述目标对象匹配的目标标签。

其中，不同的分析处理对应不同生命周期的标签。例如，当标签的生命周期为长生命周期如永久标签时，此时的长生命周期大于预设阈值如1年，则采用第一执行频率对存储引擎中的源数据进行第一分析处理，第一执行频率可以为1次、2次等较低的频率；当标签的生命周期为短生命周期时，此时的短生命周期不大于预设阈值1年，则采用第二执行频率对存储引擎中的源数据进行第二分析处理，第二执行频率可以为10次、20次等较高的频率。采用不同的执行频率对存储引擎中的数据源进行分析处理，能够减少对生命周期较长的标签进行的更新，实现节省系统处理资源的目的，还能够为生命周期较短的标签保持最新的标签分类状态，实现标签实时更新的目的，有效解决现有标签系统不对生成的标签进管理的问题。

在另一些实施例中，本实施例提供的数据处理方法中的分析处理还包括第三分析处理和第四分析处理。所述第三分析处理的第三执行频率与目标对象的相关数据进行关联。具体的，在检测到目标对象的相关数据中的预设数据发生变化时，执行第三分析处理。其中，相关数据包括目标对象的基本信息和特征信息（基本信息可以为目标对象的类型，如人、车、数据表等。特征信息可以为目标对象的特征，如人的年龄/性别、车的颜色/类型、数据表中各数据所属的类型等）。通过第三分析处理，能够在确定目标对象在重要数据（用户关注的数据）发生变化时，才进行第三分析处理，从而能够有效减少计算资源。

所述第四分析处理的第四执行频率则与目标对象的源数据进行关联。具体的，在获取到目标对象的源数据时，执行第四分析处理，否则不执行任何分析处理。其中，可以通过监听ETL工具是否获取到目标对象的源数据，若ETL工具获取到了目标对象的源数据，则开始执行第四分析处理；若ETL工具未获取到任何关于目标对象的源数据，则不对目标对象进行任何分析处理。通过第四分析处理，能够在确定获取到目标对象的源数据后，才开始执行第三分析处理，从而能够进一步的减少计算资源。

可以理解的是，本发明实施例提供的数据处理方法中的分析处理并不限于上述实施例提及的第一分析处理、第二分析处理、第三分析处理以及第四分析处理，还可以为其他应用于不同应用场景的分析处理，在此不进行具体的限定。

此外，本发明实施例还可通过将多个分析处理方式集合在一个策略池中，当需要进行分析处理时，则弹出分析处理方式的策略选择窗口，供用户需要进行自由选择。或者，根据训练后的基于卷积神经网络的目标对象识别模型确定的目标对象的类型/特征，并以此生成若干个与目标对象相匹配的分析处理方式的策略推荐供用户选择，其中，策略推荐的若干个数量可以进行自定义，在此不作具体限定。采用本发明提供的实施例，能够有效的提高了分析处理的智能程度，并提高了用户体验。

作为可选的实施例，在所述根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签的步骤之后，本实施例提供的数据处理方法还包括：将进行分析处理的分析处理方式、所采用的分类规则以及生成的目标标签，作为所述目标对象的新增信息，并将所述新增信息存储至所述存储引擎中的所述源数据的历史信息中。

其中，通过将每次进行分析处理的分析处理方式、所采用的分类规则以及生成的目标标签进行保留，能够便于后续查看或回溯历史版本。

步骤103，基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

在本实施例中，为了便于后续查看或回溯历史版本，所述基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中的步骤，具体包括：基于所述目标对象的ID信息，将所述新增信息同步至所述搜索引擎中对应的源数据中。

请参见图3，图3是本发明实施例提供的同步过程的一种流程示意图，如图3所示，在完成分析处理任务后，标签系统中的标签调度器会将分析处理中的计算任务提交至标签系统的查询/存储引擎，以使查询/存储引擎根据依次对当前进行排队的计算队列执行计算任务。在计算完成并生成标签数据后，则会触发标签数据同步任务，根据映射的唯一ID信息将生成的标签数据同步至搜索引擎中对应的源数据中，以便于后续的业务查询或标签查询操作。

在本实施例中，在完成标签数据同步任务后，可以对标签的执行状态进行更新，以使查询/存储引擎可对下一个计算队列执行计算任务。如此通过异步处理的方式，不仅能够保障在存储引擎中对目标对象及其行为数据进行大规模的读写处理能力，还能保障搜索引擎在实际业务中多变的查询和性能需求，从而进一步的解决了标签系统存在灵活性低的缺陷。

可选的，本实施例提供的数据处理方法，还包括：响应于查询指令，根据所述查询指令中的ID信息查询对应对象的源数据。在本实施例中，通过ID信息即可快速准确的对目标对象的实体源数据进行查询，有效提高查询的效率，同时也提高了用户体验。

具体的，请参见图4，图4是本发明实施例提供的数据处理的另一种流程示意图，如图4所示，标签系统在检测到对目标对象的同步任务创建指令后，标签系统将会创建周期同步任务或实时流同步任务，然后根据同步任务获取业务结构化数据或流数据，并将这些数据同步至存储引擎和搜索引擎。之后再获取用户创建的标签分类和规则，并基于各标签确定的更新方式（包括手动或周期性例行更新的方式），在存储引擎中触发各标签的分析计算任务对目标对象进行计算，生成目标对象的标签数据。然后将生成的标签数据同步至搜索引擎中，其中，为了便于后续的业务查询或标签查询操作，还需要创建标签的历史回溯版本信息，并将这些信息对应存储。进一步的，为了使存储引擎可对下一个对象进行计算任务，还需要对标签执行状态进行更新。至此完成标签系统对目标对象的数据处理全过程。

综上所述，本发明实施例提供的数据处理方法，包括响应于对目标对象的同步任务创建指令，将目标对象的源数据加载至存储引擎和搜索引擎中，并在存储引擎和搜索引擎中分别生成与目标对象对应的唯一ID信息，然后根据预设的分类规则对存储引擎中的源数据进行分析处理，以生成与目标对象匹配的目标标签，最后基于目标对象的ID信息，将目标标签同步至搜索引擎中对应的源数据中。采用本实施例，既能保障在存储引擎中对目标对象及其行为数据进行大规模的读写处理能力，又能保障搜索引擎在实际业务中多变的查询和性能需求，从而解决了标签系统存在灵活性低的缺陷。

根据上述实施例所描述的方法，本实施例将从数据处理装置的角度进一步进行描述，该数据处理装置具体可以作为独立的实体来实现，也可以集成在电子设备，比如终端中来实现，该终端可以包括手机、平板电脑等。

请参见图5，图5是本发明实施例提供的数据处理装置的一种结构示意图，如图5所示，本发明实施例提供的数据处理装置500，包括：

加载模块501，用于响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息。

在本实施例中，加载模块501具体用于：通过ETL工具获取所述目标对象的源数据；对所述源数据进行转换处理，以将转换处理后的所述源数据加载至存储引擎和搜索引擎中。

分析模块502，用于根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签。

在本实施例中，所述分析处理包括第一分析处理和第二分析处理，所述第二分析处理的第二执行频率大于所述第一分析处理的第一执行频率。分析模块502具体用于：若所述分类标签的生命周期大于预设阈值，则根据预设的分类规则以第一执行频率对所述存储引擎中的所述源数据进行第一分析处理，以生成与所述目标对象匹配的目标标签；若所述分类标签的生命周期不大于预设阈值，则根据预设的分类规则以第二执行频率对所述存储引擎中的所述源数据进行第二分析处理，以生成与所述目标对象匹配的目标标签。

同步模块503，用于基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

请继续参见图5，本发明实施例提供的数据处理装置还包括：获取模块504、存储模块505以及查询模块506；

获取模块504，用于获取预先配置的分类标签，所述分类标签还配置有对应的属性信息；根据所述分类标签的属性信息，确定所述分类标签的生命周期；对所述分类标签配置对应的分类规则，得到预设的分类规则。

在本实施例中，所述预设的分类规则包括第一分类规则、第二分类规则以及第三分类规则。获取模块504具体用于：将从预设的SQL语句库中调取的目标SQL语句作为第一分类规则，并为所述分类标签配置所述第一分类规则；或，将用户输入的自定义SQL语句作为第二分类规则，并为所述分类标签配置所述第二分类规则；或，将用户输入的自定义SQL语句以及从预设的SQL语句库中调取的目标SQL语句作为第三分类规则，并为所述分类标签配置所述第三分类规则。

存储模块505，用于将进行分析处理的分析处理方式、所采用的分类规则以及生成的目标标签，作为所述目标对象的新增信息，并将所述新增信息存储至所述存储引擎中的所述源数据的历史信息中。

在本实施例中，同步模块503具体用于：基于所述目标对象的ID信息，将所述新增信息同步至所述搜索引擎中对应的源数据中。

查询模块506，用于响应于查询指令，根据所述查询指令中的ID信息查询对应对象的源数据。

具体实施时，以上各个模块和/或单元可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个模块和/或单元的具体实施可参见前面的方法实施例，具体可以达到的有益效果也请参看前面的方法实施例中的有益效果，在此不再赘述。

另外，请参见图6，图6是本发明实施例提供的电子设备的一种结构示意图，该电子设备可以是移动终端如智能手机、平板电脑等设备。如图6所示，电子设备600包括处理器601、存储器602。其中，处理器601与存储器602电性连接。

处理器601是电子设备600的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或加载存储在存储器602内的应用程序，以及调用存储在存储器602内的数据，执行电子设备600的各种功能和处理数据，从而对电子设备600进行整体监控。

在本实施例中，电子设备600中的处理器601会按照如下的步骤，将一个或一个以上的应用程序的进程对应的指令加载到存储器602中，并由处理器601来运行存储在存储器602中的应用程序，从而实现各种功能：

响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签；

基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

该电子设备600可以实现本发明实施例所提供的数据处理方法任一实施例中的步骤，因此，可以实现本发明实施例所提供的任一数据处理方法所能实现的有益效果，详见前面的实施例，在此不再赘述。

请参见图7，图7是本发明实施例提供的电子设备的另一种结构示意图，如图7所示，图7示出了本发明实施例提供的电子设备的具体结构框图，该电子设备可以用于实施上述实施例中提供的数据处理方法。该电子设备700可以为移动终端如智能手机或笔记本电脑等设备。

RF电路710用于接收以及发送电磁波，实现电磁波与电信号的相互转换，从而与通讯网络或者其他设备进行通讯。RF电路710可包括各种现有的用于执行这些功能的电路元件，例如，天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块（SIM）卡、存储器等等。RF电路710可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。上述的无线网络可包括蜂窝式电话网、无线局域网或者城域网。上述的无线网络可以使用各种通信标准、协议及技术，包括但并不限于全球移动通信系统（Global System for Mobile Communication, GSM）、增强型移动通信技术（EnhancedData GSM Environment, EDGE)，宽带码分多址技术（Wideband Code Division MultipleAccess, WCDMA），码分多址技术（Code Division Access, CDMA）、时分多址技术（TimeDivision Multiple Access, TDMA），无线保真技术（Wireless Fidelity， Wi-Fi）（如美国电气和电子工程师协会标准 IEEE 802.11a， IEEE 802.11b, IEEE802.11g 和/或 IEEE802.11n）、网络电话（Voice over Internet Protocol, VoIP）、全球微波互联接入（Worldwide Interoperability for Microwave Access， Wi-Max）、其他用于邮件、即时通讯及短消息的协议，以及任何其他合适的通讯协议，甚至可包括那些当前仍未被开发出来的协议。

存储器720可用于存储软件程序以及模块，如上述实施例中数据处理方法对应的程序指令/模块，处理器780通过运行存储在存储器720内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现如下功能：

响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签；

基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

存储器720可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器720可进一步包括相对于处理器780远程设置的存储器，这些远程存储器可以通过网络连接至电子设备700。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入单元730可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元730可包括触敏表面731以及其他输入设备732。触敏表面731，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作（比如用户使用手指、触笔等任何适合的物体或附件在触敏表面731上或在触敏表面731附近的操作），并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面731可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器780，并能接收处理器780发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面731。除了触敏表面731，输入单元730还可以包括其他输入设备732。具体地，其他输入设备732可以包括但不限于物理键盘、功能键（比如音量控制按键、开关按键等）、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元740可用于显示由用户输入的信息或提供给用户的信息以及电子设备700的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元740可包括显示面板741，可选的，可以采用LCD(Liquid Crystal Display，液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板741。进一步的，触敏表面731可覆盖显示面板741，当触敏表面731检测到在其上或附近的触摸操作后，传送给处理器780以确定触摸事件的类型，随后处理器780根据触摸事件的类型在显示面板741上提供相应的视觉输出。虽然在图中，触敏表面731与显示面板741是作为两个独立的部件来实现输入和输出功能，但是在某些实施例中，可以将触敏表面731与显示面板741集成而实现输入和输出功能。

电子设备700还可包括至少一种传感器750，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板741的亮度，接近传感器可在翻盖合上或者关闭时产生中断。作为运动传感器的一种，重力加速度传感器可检测各个方向上（一般为三轴）加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用（比如横竖屏切换、相关游戏、磁力计姿态校准）、振动识别相关功能（比如计步器、敲击）等;至于电子设备700还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路760、扬声器761，传声器762可提供用户与电子设备700之间的音频接口。音频电路760可将接收到的音频数据转换后的电信号，传输到扬声器761，由扬声器761转换为声音信号输出；另一方面，传声器762将收集的声音信号转换为电信号，由音频电路760接收后转换为音频数据，再将音频数据输出处理器780处理后，经RF电路710以发送给比如另一终端，或者将音频数据输出至存储器720以便进一步处理。音频电路760还可能包括耳塞插孔，以提供外设耳机与电子设备700的通信。

电子设备700通过传输模块770（例如Wi-Fi模块）可以帮助用户接收请求、发送信息等，它为用户提供了无线的宽带互联网访问。虽然图中示出了传输模块770，但是可以理解的是，其并不属于电子设备700的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器780是电子设备700的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器720内的软件程序和/或模块，以及调用存储在存储器720内的数据，执行电子设备700的各种功能和处理数据，从而对电子设备进行整体监控。可选的，处理器780可包括一个或多个处理核心；在一些实施例中，处理器780可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解地，上述调制解调处理器也可以不集成到处理器780中。

电子设备700还包括给各个部件供电的电源790（比如电池），在一些实施例中，电源可以通过电源管理系统与处理器780逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源790还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管未示出，电子设备700还包括摄像头（如前置摄像头、后置摄像头）、蓝牙模块等，在此不再赘述。具体在本实施例中，电子设备的显示单元是触摸屏显示器，移动终端还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行一个或者一个以上程序包含用于进行以下操作的指令：

响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

根据预设的分类规则对所述存储引擎中的所述源数据进行分析处理，以生成与所述目标对象匹配的目标标签；

基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

具体实施时，以上各个模块可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个模块的具体实施可参见前面的方法实施例，在此不再赘述。

本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。为此，本发明实施例提供一种存储介质，其中存储有多条指令，该指令能够被处理器进行加载，以执行本发明实施例所提供的数据处理方法中任一实施例的步骤。

其中，该存储介质可以包括：只读存储器（ROM，Read Only Memory）、随机存取记忆体（RAM，Random Access Memory）、磁盘或光盘等。

由于该存储介质中所存储的指令，可以执行本发明实施例所提供的数据处理方法任一实施例中的步骤，因此，可以实现本发明实施例所提供的任一数据处理方法所能实现的有益效果，详见前面的实施例，在此不再赘述。

以上对本申请实施例所提供的一种数据处理方法、装置、电子设备及存储介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。并且，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (8)

1.一种数据处理方法，其特征在于，包括：

响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

获取预先配置的分类标签，所述分类标签还配置有对应的属性信息；

根据所述分类标签的属性信息，确定所述分类标签的生命周期；

对所述分类标签配置对应的分类规则，得到预设的分类规则；

若所述分类标签的生命周期大于预设阈值，则根据预设的分类规则以第一执行频率对所述存储引擎中的所述源数据进行第一分析处理，以生成与所述目标对象匹配的目标标签；

若所述分类标签的生命周期不大于预设阈值，则根据预设的分类规则以第二执行频率对所述存储引擎中的所述源数据进行第二分析处理，以生成与所述目标对象匹配的目标标签；其中，所述第二分析处理的第二执行频率大于所述第一分析处理的第一执行频率；

基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

2.如权利要求1所述的数据处理方法，其特征在于，所述预设的分类规则包括第一分类规则、第二分类规则以及第三分类规则，所述对所述分类标签配置对应的分类规则，包括：

将从预设的SQL语句库中调取的目标SQL语句作为第一分类规则，并为所述分类标签配置所述第一分类规则；或，

将用户输入的自定义SQL语句作为第二分类规则，并为所述分类标签配置所述第二分类规则；或，

将用户输入的自定义SQL语句以及从预设的SQL语句库中调取的目标SQL语句作为第三分类规则，并为所述分类标签配置所述第三分类规则。

3.如权利要求1所述的数据处理方法，其特征在于，所述数据处理方法还包括：

将进行分析处理的分析处理方式、所采用的分类规则以及生成的目标标签，作为所述目标对象的新增信息，并将所述新增信息存储至所述存储引擎中的所述源数据的历史信息中；

所述基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中，包括：

基于所述目标对象的ID信息，将所述新增信息同步至所述搜索引擎中对应的源数据中。

4.如权利要求1所述的数据处理方法，其特征在于，还包括：

响应于查询指令，根据所述查询指令中的ID信息查询对应对象的源数据。

5.如权利要求1所述的数据处理方法，其特征在于，所述将所述目标对象的源数据加载至存储引擎和搜索引擎中，包括：

通过ETL工具获取所述目标对象的源数据；

对所述源数据进行转换处理，以将转换处理后的所述源数据加载至存储引擎和搜索引擎中。

6.一种数据处理装置，其特征在于，包括：

加载模块，用于响应于对目标对象的同步任务创建指令，将所述目标对象的源数据加载至存储引擎和搜索引擎中，并在所述存储引擎和所述搜索引擎中分别生成与所述目标对象对应的唯一ID信息；

获取模块，用于获取预先配置的分类标签，所述分类标签还配置有对应的属性信息；根据所述分类标签的属性信息，确定所述分类标签的生命周期；对所述分类标签配置对应的分类规则，得到预设的分类规则；

分析模块，用于若所述分类标签的生命周期大于预设阈值，则根据预设的分类规则以第一执行频率对所述存储引擎中的所述源数据进行第一分析处理，以生成与所述目标对象匹配的目标标签；若所述分类标签的生命周期不大于预设阈值，则根据预设的分类规则以第二执行频率对所述存储引擎中的所述源数据进行第二分析处理，以生成与所述目标对象匹配的目标标签；其中，所述第二分析处理的第二执行频率大于所述第一分析处理的第一执行频率；

同步模块，用于基于所述目标对象的ID信息，将所述目标标签同步至所述搜索引擎中对应的源数据中。

7.一种电子设备，其特征在于，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述存储器与所述处理器耦接，且所述处理器执行所述计算机程序时，实现如权利要求1至5任一项所述的数据处理方法中的步骤。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在的设备执行如权利要求1至5任一项所述的数据处理方法中的步骤。

Images