CN110543477A - 一种标签构建系统及方法 - Google Patents

Abstract

本发明提供了一种标签构建系统及方法，系统包括客户端、大数据平台和搜索服务器；客户端，用于获得各个标签信息；在检测到审核通过指令后，基于审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；大数据平台，用于接收任务，查找满足任务所携带目标标签信息的目标对象，获得目标对象的目标身份标识，将目标身份标识和目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将数据表中的数据抽取至搜索服务器；搜索服务器，用于在接收到查询请求后，查找具有查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。应用本发明实施例，提高了标签构建的效率和准确率。

Description

一种标签构建系统及方法

技术领域

本发明涉及数据处理技术领域，尤其涉及一种标签构建系统及方法。

背景技术

标签可以帮助人们描述对象的关键信息，有利于快速分类对象，以便于检索和分享。例如，用标签描述具有同一属性的人群，性别标签(标签值可以为男或女)用于表示同性别的人员；如涉恐标签，用于描述公安涉恐人员。总之，标签是同一特征的人群集合，是一个业务逻辑的抽象。

近年来，用标签对人员进行画像和相关特征分析变得越来越重要，研究一种标签构建系统极具现实意义。目前，标签构建系统主要是基于人工经验，通过人工经验判断对象是否具有某类标签，标签的构建比较宽泛，且完全人赖人工经验，未对对象进行深度挖掘和关联，标签构建的效率和准确率不高。尤其对需要从海量情报信息中串并深挖，预测预警的业务警种和情报分析等业务来说，意义不是很大。

因此有必要设计一种新的标签构建系统及方法，以克服上述问题。

发明内容

本发明的目的在于克服现有技术之缺陷，提供了一种标签构建系统及方法，以实现提高标签构建的效率和准确率。

本发明是这样实现的：

第一方面，本发明提供一种标签构建系统，所述系统包括客户端、大数据平台和搜索服务器；

所述客户端，用于获得各个标签信息，所述标签信息包括标签名称及其对应的标签特征；在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；

所述大数据平台，用于接收所述任务，查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将所述目标身份标识和所述目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器；

所述搜索服务器，用于在接收到查询请求后，查找具有所述查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。

可选的，所述标签特征为用于描述标签规则的SQL语句。

可选的，所述标签信息还包括跑批方式和跑批时间，所述大数据平台查找满足所述任务所携带目标标签信息的目标对象，具体为：

在达到所述跑批时间后，按照所述跑批方式，查找满足所述任务所携带目标标签信息的目标对象。

可选的，所述大数据平台查找满足任务所携带目标标签信息的目标对象，具体为：

确定所述任务所携带目标标签信息中的目标标签特征；从所存储的所有对象中查找满足所确定目标标签特征的对象，作为目标对象。

可选的，所述大数据平台还用于提供标签查询接口、数据统计接口、任务接收接口，跑批日志查询接口、跑批管理接口，其中，所述标签查询接口用于提供两种标签查询方式；所述数据统计接口用于统计每个标签所包含的对象；所述任务接收接口用于接收客户端发送的任务；所述跑批日志查询接口用于存储和查询跑批日志；所述跑批管理接口用于向大数据平台的可视化管理界面发布正在执行的任务和任务的跑批历史。

可选的，所述查询请求的发送者为大数据平台或客户端。

第二方面，本发明提供一种标签构建方法，应用于上述任一所述的系统，所述方法包括：

客户端获得各个标签信息，所述标签信息包括标签名称及其对应的标签特征；在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；

大数据平台接收所述任务，查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将所述目标身份标识和所述目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器；

所述搜索服务器在接收到查询请求后，查找具有所述查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。

可选的，所述标签特征为用于描述标签规则的SQL语句。

可选的，所述标签信息还包括跑批方式和跑批时间，所述大数据平台查找满足所述任务所携带目标标签信息的目标对象，包括：

在达到所述跑批时间后，按照所述跑批方式，查找满足所述任务所携带目标标签信息的目标对象。

可选的，所述大数据平台查找满足任务所携带目标标签信息的目标对象，包括：

确定所述任务所携带目标标签信息中的目标标签特征；从所存储的所有对象中查找满足所确定目标标签特征的对象，作为目标对象。

本发明具有以下有益效果：应用本发明实施例，可以通过客户端获得标签信息，基于审核通过指令所作用的目标标签信息生成任务；然后通过大数据平台查找满足任务所携带目标标签信息的目标对象，获得目标对象的目标身份标识，将目标身份标识和该目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器，通过搜索服务器查找具有查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。实现了为各个对象构建标签，且整个标签构建过程由客户端、大数据平台协作完成，提高了标签构建的效率和准确率；并还能通过身份标识或标签名称查找到对象的基本信息，有利于发现和预测对象的标签特征，便于进行人员预警管控和风险评估。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本发明实施例提供的一种标签构建系统的结构示意图；

图2为本发明实施例提供的一种标签构建方法的流程示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

为解决现有技术问题，本发明实施例提供了一种标签构建系统及方法。下面首先对本发明所提供的一种标签构建系统进行说明。

参见图1，图1为本发明实施例提供的一种标签构建系统，所述系统包括客户端、大数据平台和搜索服务器，

所述客户端，用于获得各个标签信息，所述标签信息包括标签名称及其对应的标签特征；在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；

所述大数据平台，用于接收任务，查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将所述目标身份标识和该目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器；

所述搜索服务器，用于在接收到查询请求后，查找具有所述查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。

客户端可以为个人电脑、手机等，可以提供人机交互界面，用户可以通过客户端的人机交互界面输入标签信息，从而客户端可以获得标签信息。标签信息可以包括标签名称、标签类别、标签特征等，每个标签名称都具有唯一性，且可以属于相应的标签类别。标签类别可以包括人员标签、物品标签、关系标签、地点标签及案件标签等。其中，人员标签可细分为身份标签和行为标签，身份标签可以包括年龄、性别、户籍等信息，比如，标签“90后”和“80后”的标签类别为年龄，标签“高中”和“本科”的标签类别为学历。

若标签信息还包括跑批方式和跑批时间，所述大数据平台查找满足所述任务所携带目标标签信息的目标对象，具体为：

在达到所述跑批时间后，按照所述跑批方式，查找满足所述任务所携带目标标签信息的目标对象。

跑批方式可以用来规定标签信息的刷新方式，跑批方式为单次刷新或每隔预设固定时长刷新等；相应的，跑批时间可以是单次刷新的时间点或刷新周期。若跑批方式为单次刷新，则只在达到跑批时间时，执行一次查找满足所述任务所携带目标标签信息的目标对象；若跑批方式为每隔预设固定时长刷新，则在每达到跑批时间所设定的预设固定时长后，就执行查找满足所述任务所携带目标标签信息的目标对象。

示例性的，跑批方式为单次刷新，跑批时间为8:00，则只在达到8:00时，执行一次查找满足所述任务所携带目标标签信息的目标对象。

标签特征可以为用于描述标签规则的SQL(Structured Query Language，结构化查询语言)语句。或者，在其他实现方式中，标签特征也可以为其他格式的语句，例如，hive语句。

大数据中心可以解析标签特征，查找出符合这个标签特征所描述标签规则的一个或多个对象，可以认为符合标签特征的对象就具有该标签特征对应的标签名称，进而可以为查找到的各个对象添加该标签名称。

客户端所提供的人机交互界面可以显示任务调度页面，在检测到任务调度页面下的新建任务按钮被点击后，可以显示所获得的各个标签信息，若检测到审核者选中一个或多个标签信息并点击人机交互界面的通过按钮，则可以确定检测到审核通过指令，且该审核通过指令所作用的目标标签信息为所选中的一个或多个标签信息，进而，可以基于所选中的每个目标标签信息生成一个任务。在检测到激活按钮被点击后，就可以将所生成的任务发送给大数据平台；或者，也可以在生成任务后直接将所生成的任务发送给大数据平台。

或者，其他实现方式中，在检测到审核者选中一个或多个目标标签信息后，可以采用预设的审核规则判断所选中的目标标签信息是否通过审核，若目标标签信息符合预设的审核规则，则可以基于该目标标签信息生成一个任务；否则，可以删除该目标标签信息。预设的审核规则可以根据需求事先设定，本发明对此不做限定，例如，若目标标签信息中的标签名称是预设名称库中的标签名称，则可以判定该目标标签信息通过审核；否则，可以判定该目标标签信息未通过审核。

大数据平台可以包括一台或多台服务器，可以接收来自客户端的任务，可以将所接收的任务放入OZZIE组件，通过OZZIE组件定时执行各个任务，从而可以查找到满足任务所携带目标标签信息的目标对象。OZZIE组件可以是大数据平台的一个功能组件，这个组件可以用于定时执行任务。

大数据平台可以存储很多对象的基本信息，对象可以是人或者其他需要构建标签的物体。基本信息可以包括身份标识、年龄、性别、头像，姓名、手机号等个人信息和/或社会详细信息。身份标识可以是身份证号或其他可以唯一标识对象的编号。对于所接收的每个任务，大数据平台可以查找到满足该任务所携带目标标签信息的目标对象，并获得目标对象的身份标识。

一种实现方式中，大数据平台查找满足任务所携带目标标签信息的目标对象，具体可以为：

确定所述任务所携带目标标签信息中的目标标签特征；从所存储的所有对象中查找满足所确定目标标签特征的对象，作为目标对象。

例如，目标标签特征为selecct*from tb where year between 18and 30，则可以查询到年龄在18and 30之间的人作为目标对象。

为了便于后续快速获取身份标识及其对应的标签名称，大数据平台可以将查找到的目标对象存入一个单独的数据表中(表头可以为身份标识，标签id)。数据表可以为RDBMS(Relational Database Management System，关系数据库管理系统)或Hbase数据库或其他类型的数据库中的数据表，从而实现对身份标识及其对应的标签名称的永久存储。标签id可以为标签名称。

若接收的任务有多个，大数据平台还可以将各个任务生成的各个数据表汇总成一张大的数据表(表头可以为身份标识，标签id1，标签id2，标签id3...)，并在每到达预设时间点后，将汇总后的大数据表中的数据抽取至搜索服务器，还可以对外提供这张大表的查询接口，从而客户端或其他第三方设备可以通过查询接口查到某个对象所具有的标签或具有某个标签的各个对象。预设时间点可以根据实际需求设定，例如可以为每天的24:00或8:00或12:00等等。

一种实现方式中，大数据平台可以提供多个大数据处理接口，例如可以包括：标签查询接口、数据统计接口、任务接收接口，跑批日志查询接口、跑批管理接口等等。

标签查询接口可以提供两种查询方式，一种用于在获得标签名称后，查询具有这个标签的各个对象的基本信息；另一种用于在获得某个对象的身份标识后，查询这个对象的基本信息和标签信息。这两种查询方式的搜索结果都可以在大数据平台的人员详情页面中进行展示。

数据统计接口可以用于统计每个标签分别包含多少对象；通过数据统计接口可以统计每个标签所包含的对象，从而快速对对象进行分类，得到具有某个标签的各个对象。

任务接收接口可以用于接收客户端发送的任务，大数据平台在成功接收任务后，可以定期刷新标签数据。

跑批日志查询接口可以用于存储和查询跑批日志，跑批日志是在大数据平台执行任务的过程中生成的日志。通过查询跑批日志，可以及时了解各个任务的执行情况，对于出现执行异常的情况，可以及时进行相应的处理，从而保证各个任务的顺利执行。在监控到大数据平台任务跑批完成后，可以在平台的搜索界面通过标签查询接口输入身份标识或标签名称，搜出相应人员的基本信息。

跑批管理接口可以用于向大数据平台的可视化管理界面发布正在执行任务和各任务的跑批历史，从而，可以通过可视化管理界面查看正在执行的任务和各任务的跑批历史。

搜索服务器可以为elasticsearch服务器或其他具备搜索功能的服务器。客户端可以提供标签选择界面，标签选择界面可以显示多种标签名称，用户可以通过客户端的标签选择界面选择标签名称，或者，用户可以通过客户端输入待查询对象的姓名或者身份证号等身份标识。

客户端在获得标签名称或身份标识后，可以生成并发送查询请求至大数据平台，大数据平台可以通过标签查询接口接收到客户端发送的查询请求，进而可以将该查询请求转发给搜索服务器，查询请求可以携带身份标识或标签名称，身份标识可以为身份证号或姓名，进而搜索服务器查询出满足所选标签名称或具有该身份标识的对象，构造对象的基本信息并返回给客户端，还可以显示所查找到的基本信息。构造对象基本信息的过程可以为：从本地或其他第三方数据库拉取具有满足所选标签名称或具有该身份标识的目标信息，将所拉取的各个目标信息合并，就得到对象的基本信息。例如，可以从公安网站拉取一些关联信息，包括户籍信息、轨迹信息、住酒店信息等等，进而构造对象的基本信息。

或者，又一种实现方式中，用户可以直接通过大数据平台的标签选择界面选择标签名称或者输入身份标识，进而大数据平台在获得标签名称或身份标识后，可以生成查询请求，并发送查询请求至搜索服务器，从而，搜索服务器进行相应的搜索。

应用本发明实施例，可以通过客户端获得标签信息，在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台，然后通过大数据平台查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将目标身份标识和该目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器，通过搜索服务器查找具有查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。实现了为各个对象构建标签，并还能通过身份标识或标签名称查找到对象的基本信息，有利于发现和预测对象内在的特征，进行人员预警管控和风险评估。

相应于上述标签构建系统实施例，本发明实施例提供了一种标签构建方法，参见图2所示，应用于上述的标签构建系统，所述方法包括：

S201、客户端获得各个标签信息，所述标签信息包括标签名称及其对应的标签特征；在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；

S202、所述大数据平台接收所述任务，查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将所述目标身份标识和所述目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器；

S203、所述搜索服务器在接收到查询请求后，查找具有所述查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。

应用本发明实施例，可以通过客户端获得标签信息，基于审核通过指令所作用的目标标签信息生成任务；然后通过大数据平台查找满足任务所携带目标标签信息的目标对象，获得目标对象的目标身份标识，将目标身份标识和该目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器，通过搜索服务器查找具有查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。实现了为各个对象构建标签，且整个标签构建过程由客户端、大数据平台协作完成，提高了标签构建的效率和准确率；并还能通过身份标识或标签名称查找到对象的基本信息，有利于发现和预测对象的标签特征，便于进行人员预警管控和风险评估。

可选的，所述标签特征为用于描述标签规则的SQL语句。

可选的，所述标签信息还包括跑批方式和跑批时间，所述大数据平台查找满足所述任务所携带目标标签信息的目标对象，包括：

在达到所述跑批时间后，按照所述跑批方式，查找满足所述任务所携带目标标签信息的目标对象。

可选的，所述大数据平台查找满足任务所携带目标标签信息的目标对象，包括：

确定所述任务所携带目标标签信息中的目标标签特征；从所存储的所有对象中查找满足所确定目标标签特征的对象，作为目标对象。

可选的，所述大数据平台还用于提供标签查询接口、数据统计接口、任务接收接口，跑批日志查询接口、跑批管理接口，其中，所述标签查询接口用于提供两种标签查询方式；所述数据统计接口用于统计每个标签所包含的对象；所述任务接收接口用于接收客户端发送的任务；所述跑批日志查询接口用于存储和查询跑批日志；所述跑批管理接口用于向大数据平台的可视化管理界面发布正在执行的任务和任务的跑批历史。

可选的，所述查询请求的发送者为大数据平台或客户端。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于方法实施例而言，由于其基本相似于系统实施例，所以描述的比较简单，相关之处参见系统实施例的部分说明即可。

以上仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种标签构建系统，其特征在于，所述系统包括客户端、大数据平台和搜索服务器；

所述客户端，用于获得各个标签信息，所述标签信息包括标签名称及其对应的标签特征；在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；

所述大数据平台，用于接收所述任务，查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将所述目标身份标识和所述目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器；

所述搜索服务器，用于在接收到查询请求后，查找具有所述查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。

2.根据权利要求1所述的系统，其特征在于，所述标签特征为用于描述标签规则的SQL语句。

3.根据权利要求1所述的系统，其特征在于，所述标签信息还包括跑批方式和跑批时间，所述大数据平台查找满足所述任务所携带目标标签信息的目标对象，具体为：

在达到所述跑批时间后，按照所述跑批方式，查找满足所述任务所携带目标标签信息的目标对象。

4.根据权利要求1所述的系统，其特征在于，所述大数据平台查找满足任务所携带目标标签信息的目标对象，具体为：

确定所述任务所携带目标标签信息中的目标标签特征；从所存储的所有对象中查找满足所确定目标标签特征的对象，作为目标对象。

5.根据权利要求1所述的系统，其特征在于，所述大数据平台还用于提供标签查询接口、数据统计接口、任务接收接口，跑批日志查询接口、跑批管理接口，其中，所述标签查询接口用于提供两种标签查询方式；所述数据统计接口用于统计每个标签所包含的对象；所述任务接收接口用于接收客户端发送的任务；所述跑批日志查询接口用于存储和查询跑批日志；所述跑批管理接口用于向大数据平台的可视化管理界面发布正在执行的任务和任务的跑批历史。

6.根据权利要求1所述的系统，其特征在于，所述查询请求的发送者为大数据平台或客户端。

7.一种标签构建方法，其特征在于，应用于权利要求1所述的系统，所述方法包括：

客户端获得各个标签信息，所述标签信息包括标签名称及其对应的标签特征；在检测到审核通过指令后，基于所述审核通过指令所作用的目标标签信息生成任务；将所生成的任务发送给大数据平台；

所述大数据平台接收所述任务，查找满足所述任务所携带目标标签信息的目标对象，获得所述目标对象的目标身份标识，将所述目标身份标识和所述目标标签信息中的目标标签名称存储至数据表；每到达预设时间点，将所述数据表中的数据抽取至搜索服务器；

所述搜索服务器在接收到查询请求后，查找具有所述查询请求所携带的身份标识或标签名称的对象的基本信息，显示所查找到的基本信息。

8.根据权利要求7所述的方法，其特征在于，所述标签特征为用于描述标签规则的SQL语句。

9.根据权利要求7所述的方法，其特征在于，所述标签信息还包括跑批方式和跑批时间，所述大数据平台查找满足所述任务所携带目标标签信息的目标对象，包括：

在达到所述跑批时间后，按照所述跑批方式，查找满足所述任务所携带目标标签信息的目标对象。

10.根据权利要求7所述的方法，其特征在于，所述大数据平台查找满足任务所携带目标标签信息的目标对象，包括：

确定所述任务所携带目标标签信息中的目标标签特征；从所存储的所有对象中查找满足所确定目标标签特征的对象，作为目标对象。