CN113627568A - 一种补标方法、装置、设备及可读存储介质 - Google Patents

Abstract

本申请公开了一种补标方法、装置、设备及可读存储介质，通过获取包含有既有标注类别的待处理数据，以及包含有需求标注类别的补标需求，并根据待处理数据中的既有标注类别对待处理数据进行分类，得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的融合标注类别，最后针对每一个待补标数据集合，创建包含每一个待补标数据集合的待处理数据及其对应的融合标注类别的补标任务，该补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

Description

一种补标方法、装置、设备及可读存储介质

技术领域

本申请涉及数据标注领域，尤其涉及一种补标方法、装置、设备及可读存储介质。

背景技术

随着科技的不断发展，自动驾驶车辆逐渐的进入了人们的生活中，给人们的日常生活提供了诸多的便利。由于没有驾驶员对车辆进行操控，自动驾驶车辆需要借助搭载的传感器，采集周边环境的图像数据，并利用训练后的检测模型对图像数据中的行人、车辆和障碍物进行分辨，再根据得到的信息做出预测，从而控制车辆的行驶状态。其中，为确保自动驾驶车辆能够对周围环境进行准确的分辨，需要基于大量已经标注好的采集数据对检测模型进行训练。

目前随着采集的数据以及需要标注的类别的增加，采集的数据已经可以涵盖几乎所有的场景，大多数标注需求不再是对新采集的数据进行标注，而是为已标注过的采集数据进行补标，因此，如何对已经标注过的采集数据进行补标，是人们一直关注的问题。

发明内容

有鉴于此，本申请提供了一种补标方法、装置、设备及可读存储介质，以便于对已经标注过的采集数据进行补标。

为了实现上述目的，现提出的方案如下：

一种补标方法，包括：

获取待处理数据及补标需求，所述待处理数据包含既有标注类别，所述补标需求中包含需求标注类别；

将所述待处理数据按照既有标注类别进行分类，得到若干个待补标数据集合；

基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别；

针对每一个待补标数据集合，创建补标任务，所述补标任务中包含待补标数据集合及其对应的融合标注类别；

所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

可选的，所述基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别，包括：

获取每一个待补标数据集合对应的既有决策图，所述既有决策图包含既有标注类别；

根据所述需求标注类别，得到补标决策图；

将每一个待补标数据集合对应的既有决策图和所述补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图；

基于每一个待补标数据集合对应的融合决策图，得到每一个待补标数据集合对应的融合标注类别。

可选的，所述既有决策图由原节点集合、原节点关系集合和原节点选项集合构建，所述原节点集合中包括每一既有标注类别对应的原节点，所述原节点关系集合中包括原节点集合中各个节点的连接关系，所述原节点选项集合中包括原节点集合中各个节点对应的选项；

所述补标决策图由补标节点集合、补标节点关系集合和补标节点选项集合构建，所述补标节点集合中包括每一需求标注类别对应的补标节点，所述补标节点关系集合中包括补标节点集合中各个节点的连接关系，所述补标节点选项集合中包括补标节点集合中各个节点对应的选项。

可选的，所述将每一个待补标数据集合对应的既有决策图和所述补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图，包括：

将所述补标节点集合相比于原节点集合新增的节点，添加至原节点集合中，得到融合节点集合；

从所述补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原节点关系集合中，得到融合节点关系集合；

将所述补标节点选项集合相比于原节点选项集合新增的选项，添加至原选项集合中，得到融合节点选项集合；

基于每一个待补标数据集合对应的融合节点集合、融合节点关系集合和融合选项集合，得到每一个待补标数据集合对应的融合决策图。

可选的，从所述补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原关系节点集合中，得到融合节点关系集合，包括：

从所述补标节点关系集合中，确定新增节点的上级节点和下级节点；

从所述原节点关系集合中，查找与所述新增节点的上级节点相同的第一目标节点，以及与所述新增节点的下级节点相同的第二目标节点；

确定所述新增节点与所述第一目标节点的节点关系，以及所述新增节点与所述第二目标节点的节点关系，并添加至所述原关系节点集合中，得到融合节点关系集合。

可选的，还包括：

针对每一个补标任务，按照补标任务中待补标数据集合对应的融合标注类别，对待补标数据集合中的待处理数据进行补标，得到每一个待处理数据的标注结果。

可选的，还包括：

显示每一个待处理数据的标注结果中与需求标注类别对应的标注结果。

可选的，还包括：

针对每一个补标任务，在标注界面显示补标任务中包含的待处理数据，以及待处理数据的既有标注类别对应的原标注结果，以供标注员根据融合标注类别对待处理数据进行补标，得到待处理数据对应的补标结果。

可选的，所述补标需求中还包含补标标注规范；

则，所述补标任务中，还包含补标标注规范，所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别及补标标注规范，对每一个待补标数据集合中的待处理数据进行补标。

一种补标装置，包括：

数据获取模块，用于获取待处理数据及补标需求，所述待处理数据包含既有标注类别，所述补标需求中包含需求标注类别；

集合生成模块，用于将所述待处理数据按照既有标注类别进行分类，得到若干个待补标数据集合；

新标注类别生成模块，用于基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别；

补标任务创建模块，用于针对每一个待补标数据集合，创建补标任务，所述补标任务中包含待补标数据集合及其对应的融合标注类别；

所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

可选的，还包括：

补标注模块，用于针对每一补标任务，按照补标任务中待补标数据集合对应的融合标注类别，对待补标数据集合中的待处理数据进行补标，得到每一个待处理数据的标注结果。

可选的，还包括：

标注界面显示模块，用于根据所述补标任务，在标注界面显示各待处理数据，以及各待处理数据对应的原标注结果，以供补标员根据融合标注类别对待处理数据进行补标，得到各待处理数据对应的补标结果。

一种补标设备，包括存储器和处理器；

所述存储器，用于存储程序；

所述处理器，用于执行所述程序，实现如前述补标方法的各个步骤。

一种可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现前述补标方法的各个步骤。

从上述的技术方案可以看出，本申请实施例提供的一种补标方法，通过获取包含有既有标注类别的待处理数据，以及包含有需求标注类别的补标需求，并根据待处理数据中的既有标注类别对待处理数据进行分类，可以得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的合并后的标注类别，最后针对每一个待补标数据集合，创建包含待补标数据集合及其对应的融合标注类别的补标任务，该补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。本申请根据待处理数据中的既有标注类别对待处理数据进行分类，可以将既有标注类别一致的待处理数据整合到同一个待补标数据集合，并在后续得到每个待补标数据集合对应的融合标注类别，并针对每一个待补标数据集合，创建对应的补标任务，去指示按照补标任务中的每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。本申请提出的补标方法，可以利用待处理数据中的既有标注结果，在既有标注结果中存在于需求标注类别一致的既有标注结果时，可以借用既有标注结果，从而减少重复标注，使得补标的过程更加的方便合理。

进一步的，由于各个待处理数据中的既有标注类别可能会存在不同，且不一致的既有标注类别不存在于需求标注类别中，所以本申请在获取待处理数据之后，会根据补标数据中的既有标注类别对待处理数据进行分类，得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的融合标注类别，用于对每一个待补标数据集合中的待处理数据进行补标，相比于在获取待处理数据之后，直接将所有待处理数据的既有标注类别与需求标注类别合并，得到一个总的标注类别，用于对所有待处理数据进行补标，可以一定程度上避免增加额外的工作量，并且在省去额外的工作量之后，标注涉及的标注类别和标注结果也相对会减少，从而提升标注效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请实施例提供的一种补标方法流程图；

图2为本申请实施例提供的一种融合标注类别生成方法流程图；

图3为本申请实施例提供的一种融合决策图生成过程示意图；

图4为本申请实施例提供的一种融合决策图生成方法流程图；

图5为本申请实施例提供的一种补标装置结构示意图；

图6为本申请实施例公开的一种补标设备的硬件结构框图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请发明人发现在根据标注需求，对已标注的数据进行进一步标注时，需要先根据所有已标注数据的既有标注类别和标注需求中的需求标注类别，合并得到全量标注类别，并根据全量标注类别对已标注的数据进行进一步标注。但是，按照这个方式标注，会增加额外的工作量，而且按照全量标注类别进行标注，当涉及的标注类别较多时，还会因为标注类别和标注结果过多，导致标注效率下降。

比如，当前存在两个数据集，第一数据集包含编号为1-50的数据，第二数据集包含编号为51-100的数据，其中，第一数据集中的数据已经标注过“行人”和“树”，第二数据集中的数据已经标注过“行人”和“车”，此时，得到新的标注需求，需要标注编号为25-75的数据中的“树”和“路障”，由于编号为25-50的数据已经标注过“行人”和“树”，编号为51-75的数据已经标注过“行人”和“车”，所以得到全量标注类别“行人”、“树”、“车”和“路障”，根据全量标注类别对编号为25-75的数据进行标注，最终，编号为25-75的数据可以包含“行人”、“树”、“车”和“路障”的标注结果，并且可以选择其中一个或者多个进行显示。但是，通过上述方式进行标注后，可以发现编号为25-75的数据中对“车”进行了标注，而实际的需求中并没有要求标注编号为25-75的数据中的“车”，而且可能未来也不会有相应的需求产生，所以对编号为25-75的数据中的“车”进行标注就属于增加的额外工作量，同时，当涉及的标注类别更多时，由于标注类别和标注结果过多，还会导致标注效率下降。

基于此，本申请实施例中，根据补标数据中的既有标注类别对待处理数据进行分类，得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的融合标注类别，用于对每一个待补标数据集合中的待处理数据进行补标，相比于在获取待处理数据之后，直接将所有待处理数据的既有标注类别与需求标注类别合并，得到一个总的标注类别，用于对所有待处理数据进行补标，可以一定程度上避免增加额外的工作量，并且在省去额外的工作量之后，标注涉及的标注类别和标注结果也相对会减少，从而提升标注效率。

参考图1所示，图1为本申请实施例提供的一种补标方法流程图，该方法可以包括以下步骤：

步骤S100、获取待处理数据及补标需求。

其中，上述待处理数据可以包含既有标注类别，补标需求中可以包含需求标注类别。

具体的，待处理数据可以是之前已经进行标注过的数据，根据待处理数据之前标注过程中确定的标注类别，可以确定每个待处理数据的既有标注类别。比如，获取待补标的图片A，待补标的图片A之前已经对图片中的树和行人进行了标注，此时，可以得到待补标的图片A的既有标注类别为“树”和“行人”。获取的待处理数据所包含的既有标注类别，可以是所有的既有标注类别都是相同的，也可以是部分既有标注类别相同，还可以是全部既有标注类别都不相同。

补标需求可以是针对当前获取的待处理数据，所提出的补标需求，在补标需求中会包含需求标注类别。需求标注类别可以与获取的待处理数据中包含的既有标注类别部分相同，也可以与既有标注类别完全不相同，也可以与既有标注类别完全一致。比如，有两张待补标图片A和B，待补标图片A的既有标注类别为“树”和“行人”，待补标图片B的既有标注类别为“行人”和“车”，补标需求中的需求标注类别可以是“树”和“路障”，也可以是“路障”，还可以是“树”和“行人”。

步骤S101、将待处理数据按照既有标注类别进行分类，得到若干个待补标数据集合。

具体的，通过上述步骤可以获取待处理数据，根据每个待处理数据中的既有标注类别，对待处理数据进行分类。利用既有标注类别相同的待处理数据组成一个集合，从而可以得到若干个待补标数据集合，每个集合中的待处理数据的既有标注类别都相同。

步骤S102、基于每一个待补标数据集合对应的既有标注类别和需求标注类别，得到每一个待补标数据集合对应的融合标注类别。

具体的，由于每一个待补标数据集合都有对应的既有标注类别，可以利用每一个待补标数据集合对应的既有标注类别和需求标注类别，去得到每一个待补标数据集合对应的融合标注类别。融合标注类别中可以包含既有标注类别和需求标注类别。

由于标注是按照标注类别得到对应的标注结果，所以如果仅采用需求标注类别对待补标数据集合中的待处理数据进行补标，得到的补标结果只有需求标注类别对应的标注结果。因此，为了得到完整的标注结果，需要在进行补标前基于每一个待补标数据集合对应的既有标注类别和需求标注类别得到融合标注类别，按照融合标注类别对每一个待补标数据集合中的待处理数据进行补标，可以得到融合标注类别对应的标注结果。

步骤S103、针对每一个待补标数据集合，创建补标任务。

其中，上述补标任务中可以包含每一个待补标数据集合及其对应的融合标注类别。补标任务可以用于指示根据每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

具体的，由于补标任务是针对每一个待补标数据集合而独立创建的，所有每个待补标数据集合都对应有一个补标任务。在针对补标任务进行标注的过程中，由于待处理数据是按照融合标注类别进行补标，其中，融合标注类别包含了既有标注类别，所以标注时待处理数据上可以显示该待处理数据的既有标注类别对应的原标注结果，又因为融合标注类别是基于既有标注类别和需求标注类别得到的，所以按照融合标注类别对对应的待处理数据进行补标时，可以从融合标注类别中确定出需求标注类别，从而标注时可以在显示该待处理数据对应的原标注结果的情况下，对需求标注类别对应的内容进行补标标注，对既有标注类别对应的标注结果进行复用。

进一步的，为避免标注时界面显示过多的框干扰标注员的标注，可以根据需求标注类别中的标注类别，使得标注界面上只显示与需求标注类别对应的标注结果，其他的标注结果可以选择隐藏，从而可以避免显示过多的框干扰标注员的标注，同时标注员又能够对相关标注结果进行修改。

从上述的技术方案可以看出，本申请实施例提供的一种补标方法，通过获取包含有既有标注类别的待处理数据，以及包含有需求标注类别的补标需求，并根据待处理数据中的既有标注类别对待处理数据进行分类，可以得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的合并后的标注类别，最后针对每一个待补标数据集合，创建包含待补标数据集合及其对应的融合标注类别的补标任务，该补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。本申请根据待处理数据中的既有标注类别对待处理数据进行分类，可以将既有标注类别一致的待处理数据整合到同一个待补标数据集合，并在后续得到每个待补标数据集合对应的融合标注类别，并针对每一个待补标数据集合，创建对应的补标任务，去指示按照补标任务中的每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

进一步的，由于各个待处理数据中的既有标注类别可能会存在不同，且不一致的既有标注类别不存在于需求标注类别中，所以本申请在获取待处理数据之后，会根据补标数据中的既有标注类别对待处理数据进行分类，得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的融合标注类别，用于对每一个待补标数据集合中的待处理数据进行补标，相比于在获取待处理数据之后，直接将所有待处理数据的既有标注类别与需求标注类别合并，得到一个总的标注类别，用于对所有待处理数据进行补标，可以一定程度上避免增加额外的工作量。

接下来，通过实际例子对本申请的补标方法进行介绍。

当用户提出需要100个标注了“树”和“路障”的数据时，可以根据用户提出的需求，从服务器已经被标注过的数据中，选取100个数据作为待处理数据，以“树”和“路障”作为需求标注类别。

根据选取的100个数据的既有标注类别，对100个数据进行分类，假设分类后可以得到两个待补标数据集合，其中，第一待补标数据集合为：60个既有标注类别为“行人”和“树”的数据，第二待补标数据集合为：40个既有标注类别为“行人”和“车”的数据。

此时，根据需求标注类别和三个待补标数据集合中对应的既有标注类别，可以得到第一待补标数据集合对应的第一融合标注类别为“行人”、“树”和“路障”，第二待补标数据集合对应的第二融合标注类别为“行人”、“车”、“树”和“路障”。

针对每一个待补标数据集合，创建一个包含该待补标数据集合及其对应的融合标注类别的补标任务，从而可以创建得到两个补标任务。

在服务器或者标注员收到两个补标任务后，可以根据每个任务中的融合标注类别对该任务中的待处理数据进行标注。在标注的过程中，由于融合标注类别中包含了既有标注类别，所以在标注时标注界面会出现既有标注结果。比如，在第一待补标数据集合中的待处理数据进行标注时，数据中已经存在“树”的标注结果，在该标注结果没有问题的情况下，可以直接借用，减少了对“树”的重复标注。

完成标注之后，第一补标任务中包括：60个标注了“行人”、“树”和“路障”的数据，第二补标任务中包括：40个标注了“行人”、“车”、“树”和“路障”的数据。

由于第一补标任务和第二补标任务中的数据均包含“树”和“路障”的标注结果，此时，再根据用户的需求，使得提取的数据只显示“树”和“路障”的标注结果，即可实现用户的需求。

在此基础上，先前选取的100个数据，已经由60个标注了“行人”和“树”的数据，40个标注了“行人”和“车”的数据，变为了60个标注了“行人”、“树”和“路障”的数据，40个标注了“行人”、“车”、“树”和“路障”的数据，使得数据的标注结果更加丰富，可以适应更多的需求。

在本申请的一些实施例中，对步骤S102、基于每一个待补标数据集合对应的既有标注类别和需求标注类别，得到每一个待补标数据集合对应的融合标注类别的过程进行介绍。如图2所示，图2为本申请实施例提供的一种融合标注类别生成方法流程图，该方法可以包括：

步骤S200、获取每一个待补标数据集合对应的既有决策图。

具体的，由于每一个待处理数据均是已经标注过的数据，所以可以得到每一个待处理数据对应的既有决策图。而且每一个待补标数据集合中的待处理数据的既有标注类别一致，所以每一个待补标数据集合中的待处理数据的既有决策图也相同，从而可以确定每一个待补标数据集合对应的既有决策图。

其中，决策图可以包括：节点、节点关系和节点选项。节点可以包括：特定节点和自定义节点，比如，“属性结”、“RIA框起”等特定节点，以及“车”、“颜色”等自定义节点。节点关系可以包括各个节点之间的关系，关系可以是上下级关系，也可以是并列关系。节点选项可以包括各个节点可以选择的选项，比如自定义节点“颜色”对应的节点选项可以是“红”、“绿”和“黄”。

一个决策图中的所有节点可以组成一个集合作为节点集合，所有节点关系可以组成一个集合作为节点关系集合，所有节点选项可以组成一个集合，作为节点关系集合。从而可以由节点集合、节点关系集合和节点选项集合构建得到当前的决策图。

步骤S201、根据需求标注类别，得到补标决策图。

具体的，根据需求标注类别，可以通过使用决策图创建工具和决策图的设计规则，得到补标决策图；还可以查找之前的标注记录，从而得到与目前的需求标注类别对应的决策图，作为补标决策图。得到的补标决策图直接用于对待处理数据进行标注，得到的标注结果只会包含需求标注类别中涉及到的类别，而其他不属于需求标注类别的标注类别所涉及的标注结果均不会在标注结果中出现。

步骤S202、将每一个待补标数据集合对应的既有决策图和补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图。

具体的，通过上述步骤可以得到每一个待补标数据集合对应的既有决策图和补标决策图，由于决策图是通过决策图创建工具，根据决策图的设计规则创建得到的，所以可以将每一个待补标数据集合对应的既有决策图和补标决策图进行合并，从而得到每一个待补标数据集合对应的融合决策图。

步骤S203、基于每一个待补标数据集合对应的融合决策图，得到每一个待补标数据集合对应的融合标注类别。

具体的，通过每一个待补标数据集合对应的融合决策图，可以去得到每一个待补标数据集合对应的融合标注类别。由于每一个待补标数据集合对应的融合决策图，是通过将每一个待补标数据集合对应的既有决策图和补标决策图进行合并得到的，在合并的过程中涉及到既有标注类别和需求标注类别的合并，所以得到的融合标注类别是既有标注类别和需求标注类别合并后的标注类别。

通过上述技术方案，利用每个待补标数据集合对应的既有标注类别，得到每个待补标数据集合的既有决策图，再利用需求标注类别得到补标决策图，通过决策图的合并，从而得到融合标注类别。由于既有决策图是已有，在没有现有的补标决策图的情况下，只需要单独对补标决策图进行创建，从而利用创建得到的补标决策图与每个待补标数据集合对应的既有决策图进行合并，相比于先将每一个待补标数据集合对应的既有标注类别与需求标注类别进行合并，再一个个单独创建融合决策图，可以减少人工去创建决策图。

接下来，结合实际的例子对融合决策图的生成过程进行介绍。

参见图3，其示例了本申请生成融合决策图的一种实现过程。

在用户提出需要标注了“树”和“路障”的数据之后，可以根据用户的需求，从服务器已经被标注过的数据中，选取需求数量的数据作为待处理数据。

假设待处理数据中包含一部分既有标注类别为“车”和“树”的数据，此时，可以得到这部分既有标注类别为“车”和“树”的数据对应的既有决策图，再根据用户的需求可以得到对应的补标决策图。

由于，既有决策图和补标决策图除了标注类别对应的框之外，还包含一些特定的框，根据特定的框可以将既有决策图和补标决策图进行合并，最终得到融合决策图。

从融合决策图中可以确定，融合标注类别是“车”、“树”和“路障”，按照融合决策图对既有标注类别为“车”和“树”的待处理数据进行标注，最终得到的数据为标注了“车”、“树”和“路障”。此时，得到的数据不仅可以满足当前用户“树”和“路障”的标注数据需求，还可以在出现比如“路障”，“车”和“路障”，以及“车”、“树”和“路障”等需求时，可以直接借用原来的标注结果，减少重复标注。

在本申请的一些实施例中，对步骤S202、将每一个待补标数据集合对应的既有决策图和补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图的过程进行介绍。

一种可选的方式中，结合图4所示，上述步骤S202、将每一个待补标数据集合对应的既有决策图和补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图的过程，可以包括：

步骤S300、将补标节点集合相比于原节点集合新增的节点，添加至原节点集合中，得到融合节点集合。

具体的，通过将每一个待补标数据集合对应的既有决策图中的原节点集合与补标决策图中的补标节点集合进行比较，从而可以确定补标节点集合中，相比于每一个待补标数据集合对应的原节点集合新增的节点，在确定新增的节点之后，将新增的节点添加到原节点集合中，可以得到融合节点集合。此时，融合节点集合中包括了原节点集合中的节点，以及补标节点集合中相比于原节点集合新增的节点。

步骤S301、从补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原节点关系集合中，得到融合节点关系集合。

具体的，通过上述步骤，可以确定补标节点中的新增的节点，通过新增的节点，可以从补标节点关系集合中，查找新增的节点与其他节点的关系数据，并将新增节点与其他节点的关系数据添加到原节点关系中，得到融合节点关系集合。此时，融合节点关系集合可以与上述步骤中得到的节点集合相对于，将新增的节点与其他节点建立关系。

步骤S302、将补标节点选项集合相比于原节点选项集合新增的选项，添加至原选项集合中，得到融合节点选项集合。

具体的，通过将每一个待补标数据集合对应的既有决策图中的原节点选项集合与补标决策图中的补标节点选项集合进行比较，从而可以确定补标节点选项集合中，相比于每一个待补标数据集合对应的原节点选项集合新增的选项，在确定新增的选项之后，将新增的节点添加到原节点选项集合中，可以得到融合节点集合。

步骤S303、基于每一个待补标数据集合对应的融合节点集合、融合节点关系集合和融合选项集合，得到每一个待补标数据集合对应的融合决策图。

具体的，在上述步骤中，可以得到每一个待补标数据集合对应的融合节点集合、融合节点关系集合和融合选项集合，从而可以得到每一个待补标数据集合对应的融合决策图。

在上述技术方案中，通过将每一个待补标数据集合对应的原节点集合、原节点关系集合和原节点选项集合，分别与需求标注类别对应的补标节点集合、补标节点关系集合和补标节点选项集合进行比较，并根据比较结果得到融合节点集合、融合节点关系集合和融合节点选项集合，从而利用三个集合得到融合决策图。

在本申请的一些实施例中，对步骤S301、从补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原节点关系集合中，得到融合节点关系集合的过程进行介绍，过程可以包括：

S1、从补标节点关系集合中，确定新增节点的上级节点和下级节点。

具体的，在补标节点关系集合中，可以根据新增节点，确定新增节点对应的上级节点和下级节点。

S2、从原节点关系集合中，查找与新增节点的上级节点相同的第一目标节点，以及与新增节点的下级节点相同的第二目标节点。

具体的，通过上述步骤，可以确定新增节点的上级节点和下级节点，根据得到的上级节点和下级节点，可以从原节点关系集合中，查找与新增节点的上级节点相同的第一目标节点，以及查找与新增节点的下级节点相同的第二目标节点。

示例如，假设对比得到新增节点为“车”，此时，根据新增节点“车”，可以从补标节点关系集合中，查找新增节点“车”与其他节点的关系，从而可以得到“车”的上级节点“3D框类型”和下级节点“RIA框结”，根据得到的上级节点“3D框类型”和下级节点“RIA框结”，从原节点关系中查找得到上级匹配节点“3D框类型”和下级匹配节点“RIA框结”。

S3、确定新增节点与第一目标节点的节点关系，以及新增节点与第二目标节点的节点关系，并添加至原关系节点集合中。

具体的，由于新增节点与上级节点的关系可以确定，且上级节点和第一目标节点相同，所以可以确定新增节点与第一目标节点的关系；同样的，由于新增节点与下级节点的关系可以确定，且下级节点和第二目标节点相同，所以也可以确定新增节点与第二目标节点的关系。确定关系之后，将对应的关系添加至原关系节点集合中，可以得到融合关系节点集合。

上述技术方案中，通过确定补标节点集合中新增节点的上下级节点，再从原节点关系集合中查找与上级节点相同的第一目标节点和与下级节点相同的第二目标节点，从而确定添加至原节点集合中的新增节点与原节点集合中各节点的关系。

在本申请的一些实施例中，通过上述实施例可以得到针对每一个待补标数据集合，创建的补标任务。针对每一个补标任务，可以有多种方式去进行补标，下面就对几种可选的方式进行介绍。

第一种、针对每一个补标任务，自动进行标注。

具体的，针对每一个补标任务，按照补标任务中待补标数据集合对应的融合标注类别，对待补标数据集合中的待处理数据进行补标，得到每一个待处理数据的标注结果。

通过上述方式对待处理数据进行补标，由于待处理数据是按照所在的补标任务对应的融合标注类别进行标注，所以最终得到的标注结果中包含融合标注类别对应的标注结果。而且，在标注过程中，待处理数据可以显示该待处理数据的既有标注类别对应的原标注结果，由于原标注结果仍然存在，所以可以只对需求标注类别相关的内容进行标注，得到补标的标注结果，再将补标的标注结果和原标注结果结合就可以得到最终的标注结果。

进一步的，在得到每一个待处理数据的标注结果之后，可以显示每一个待处理数据的标注结果中与需求标注类别对应的标注结果，其他标注结果可以隐藏不显示。

第二种、针对每一个补标任务，由标注员进行补标。

具体的，根据每一个标注任务，在标注界面显示补标任务中包含的待处理数据，以及待处理数据的既有标注类别对应的原标注结果，以供标注员根据融合标注类别对待处理数据进行补标，得到待处理数据对应的补标结果。

其中，标注员通过标注界面，按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标时，由于待处理数据是按照融合标注类别进行补标，融合标注类别包含了既有标注类别，所以标注时标注界面上可以显示待处理数据的既有标注类别对应的原标注结果，又因为融合标注类别是基于既有标注类别和需求标注类别得到的，所以按照融合标注类别对对应的待处理数据进行补标时，可以从融合标注类别中确定出需求标注类别，从而，标注时可以在显示该待处理数据的既有标注类别对应的原标注结果的情况下，对需求标注类别对应的内容进行补标标注。

进一步的，为避免标注员标注时界面显示过多的框干扰标注员的标注，可以根据需求标注类别中的标注类别，使得标注界面上只显示需求标注类别中的标注类型对应的标注结果，其他的标注结果可以选择隐藏，从而可以避免显示过多的框干扰标注员的标注，同时标注员又能够对相关标注结果进行修改。

更进一步的，在标注员标注之后，可以通过每个标注结果记录的创建或修改时间来判断标注是否属于新的标注。比如，当标注结果修改或创建的时间晚于补标任务的创建时间，则可以认为该标注结果为新增标注结果。

在上述实施例中，由于标注员在完成标注后，一般以标注结果的数量计算标注工作量，并根据标注工作量计算薪酬。但是，通过上述补标标注过程对待处理数据进行标注，标注结果中会存在既有的标注结果和补标的标注结果，既有的标注结果在标注员未进行修改的情况下，实际上并不属于标注员的工作成果，如果此时还是按照标注结果的数量来计算标注工作量，明显不够合理。因此，可以通过判断每个标注结果的修改或创建的时间是否晚于补标任务的创建时间，来确定每一个标注结果是否为新增标注结果，并根据新增标注结果的数量来确定标注员的标注工作量，使得薪酬计算更合理，从而达到节约成本的效果。

在本申请的一些实施例中，补标需求中还可以包含补标标注规范。补标标注规范可以用于指示进行标注时的一些操作规范。在上述步骤创建补标任务的过程中，可以使得补标任务按照补标规范进行执行。由于待处理数据中会带有原标注规范，在执行补标任务时，可以按照补标标注规范执行，也可以在执行标注任务之前，利用补标标注规范替换原标注规范。

通过上述技术方案中的补标标注规范，可以使得标注更加的规范统一，实现规范化标注。

下面对本申请实施例提供的一种补标装置进行描述，下文描述的一种补标装置与上文描述的一种补标方法可相互对应参照。

结合图5所示，图5为本申请实施例提供的一种补标装置，可以包括：

数据获取模块10，用于获取待处理数据及补标需求，所述待处理数据包含既有标注类别，所述补标需求中包含需求标注类别；

集合生成模块20，用于将所述待处理数据按照既有标注类别进行分类，得到若干个待处理数据集合；

新标注类别生成模块30，用于基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别；

补标任务创建模块40，用于针对每一个待补标数据集合，创建补标任务，所述补标任务中包含待补标数据集合及其对应的融合标注类别；

所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

从上述的技术方案可以看出，本申请实施例提供的一种补标装置，本申请的集合生成模块20根据待处理数据中的既有标注类别对待处理数据进行分类，可以将既有标注类别一致的待处理数据整合到同一个待补标数据集合，然后新标注类别生成模块30得到每个待补标数据集合对应的融合标注类别，并针对每一个待补标数据集合，再通过补标任务创建模块40创建对应的补标任务，去指示按照补标任务中的每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

进一步的，由于各个待处理数据中的既有标注类别可能会存在不同，且不一致的既有标注类别不存在于需求标注类别中，所以本申请在获取待处理数据之后，会根据补标数据中的既有标注类别对待处理数据进行分类，得到若干个待补标数据集合，再基于每一个待补标数据集合对应的既有标注类别和补标需求中的需求标注类别，得到每一个待补标数据集合对应的融合标注类别，用于对每一个待补标数据集合中的待处理数据进行补标，相比于在获取待处理数据之后，直接将所有待处理数据的既有标注类别与需求标注类别合并，得到一个总的标注类别，用于对所有待处理数据进行补标，可以一定程度上避免增加额外的工作量。

可选的，补标装置，还可以包括：

补标注模块，用于针对每一补标任务，按照补标任务中待补标数据集合对应的融合标注类别，对待补标数据集合中的待处理数据进行补标，得到每一个待处理数据的标注结果。

可选的，补标装置，还可以包括：

标注界面显示模块，用于根据所述补标任务，在标注界面显示各待处理数据，以及各待处理数据对应的原标注结果，以供补标员根据融合标注类别对待处理数据进行补标，得到各待处理数据对应的补标结果。

可选的，新标注类别生成模块30，可以包括：

既有决策图获取模块，用于获取每一个待补标数据集合对应的既有决策图，所述既有决策图包含既有标注类别；

补标决策图获取模块，用于根据所述需求标注类别，得到补标决策图；

新决策图合并模块，用于将每一个待补标数据集合对应的既有决策图和所述补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图；

新标注类别生成子模块，用于基于每一个待补标数据集合对应的融合决策图，得到每一个待补标数据集合对应的融合标注类别。

可选的，新决策图合并模块，可以包括：

新节点集合生成模块，用于将所述补标节点集合相比于原节点集合新增的节点，添加至原节点集合中，得到融合节点集合；

新节点关系集合生成模块，用于从所述补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原节点关系集合中，得到融合节点关系集合；

新节点选项集合生成模块，用于将所述补标节点选项集合相比于原节点选项集合新增的选项，添加至原选项集合中，得到融合节点选项集合；

新决策图生成模块，用于基于每一个待补标数据集合对应的融合节点集合、融合节点关系集合和融合选项集合，得到每一个待补标数据集合对应的融合决策图。

可选的，新节点关系集合生成模块，可以包括：

节点确定模块，用于从所述补标节点关系集合中，确定新增节点的上级节点和下级节点；

节点查找模块，用于从所述原节点关系集合中，查找与所述新增节点的上级节点相同的第一目标节点，以及与所述新增节点的下级节点相同的第二目标节点；

新节点关系集合生成子模块，用于确定所述新增节点与所述第一目标节点的节点关系，以及所述新增节点与所述第二目标节点的节点关系，并添加至所述原关系节点集合中，得到融合节点关系集合。

可选的，还可以包括：

标注结果显示模块，用于显示每一个待处理数据的标注结果中与需求标注类别对应的标注结果。

本申请实施例还提供一种补标设备，图6示出了补标设备的硬件结构框图，参照图6，补标设备的硬件结构可以包括：至少一个处理器1，至少一个通信接口2，至少一个存储器3和至少一个通信总线4；

在本申请实施例中，处理器1、通信接口2、存储器3、通信总线4的数量为至少一个，且处理器1、通信接口2、存储器3通过通信总线4完成相互间的通信；

处理器1可能是一个中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路等；

存储器3可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatilememory)等，例如至少一个磁盘存储器；

其中，存储器存储有程序，处理器可调用存储器存储的程序，所述程序用于：实现前述补标方法中的各个处理流程。

本申请实施例还提供一种存储介质，该存储介质可存储有适于处理器执行的程序，所述程序用于：实现前述补标方法中的各个处理流程。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间可以相互组合，且相同相似部分互相参见即可。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (14)

1.一种补标方法，其特征在于，包括：

获取待处理数据及补标需求，所述待处理数据包含既有标注类别，所述补标需求中包含需求标注类别；

将所述待处理数据按照既有标注类别进行分类，得到若干个待补标数据集合；

基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别；

针对每一个待补标数据集合，创建补标任务，所述补标任务中包含待补标数据集合及其对应的融合标注类别；

所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

2.根据权利要求1所述的方法，其特征在于，所述基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别，包括：

获取每一个待补标数据集合对应的既有决策图，所述既有决策图包含既有标注类别；

根据所述需求标注类别，得到补标决策图；

将每一个待补标数据集合对应的既有决策图和所述补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图；

基于每一个待补标数据集合对应的融合决策图，得到每一个待补标数据集合对应的融合标注类别。

3.根据权利要求2所述的方法，其特征在于，所述既有决策图由原节点集合、原节点关系集合和原节点选项集合构建，所述原节点集合中包括每一既有标注类别对应的原节点，所述原节点关系集合中包括原节点集合中各个节点的连接关系，所述原节点选项集合中包括原节点集合中各个节点对应的选项；

所述补标决策图由补标节点集合、补标节点关系集合和补标节点选项集合构建，所述补标节点集合中包括每一需求标注类别对应的补标节点，所述补标节点关系集合中包括补标节点集合中各个节点的连接关系，所述补标节点选项集合中包括补标节点集合中各个节点对应的选项。

4.根据权利要求3所述的方法，其特征在于，所述将每一个待补标数据集合对应的既有决策图和所述补标决策图进行合并，得到每一个待补标数据集合对应的融合决策图，包括：

将所述补标节点集合相比于原节点集合新增的节点，添加至原节点集合中，得到融合节点集合；

从所述补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原节点关系集合中，得到融合节点关系集合；

将所述补标节点选项集合相比于原节点选项集合新增的选项，添加至原选项集合中，得到融合节点选项集合；

基于每一个待补标数据集合对应的融合节点集合、融合节点关系集合和融合选项集合，得到每一个待补标数据集合对应的融合决策图。

5.根据权利要求4所述的方法，其特征在于，从所述补标节点关系集合中查找新增的节点与其他节点的关系数据，并添加至原关系节点集合中，得到融合节点关系集合，包括：

从所述补标节点关系集合中，确定新增节点的上级节点和下级节点；

从所述原节点关系集合中，查找与所述新增节点的上级节点相同的第一目标节点，以及与所述新增节点的下级节点相同的第二目标节点；

确定所述新增节点与所述第一目标节点的节点关系，以及所述新增节点与所述第二目标节点的节点关系，并添加至所述原关系节点集合中，得到融合节点关系集合。

6.根据权利要求1-5任意一项所述的方法，其特征在于，还包括：

针对每一个补标任务，按照补标任务中待补标数据集合对应的融合标注类别，对待补标数据集合中的待处理数据进行补标，得到每一个待处理数据的标注结果。

7.根据权利要求6所述的方法，其特征在于，还包括：

显示每一个待处理数据的标注结果中与需求标注类别对应的标注结果。

8.根据权利要求1-5任意一项所述的方法，其特征在于，还包括：

针对每一个补标任务，在标注界面显示补标任务中包含的待处理数据，以及待处理数据的既有标注类别对应的原标注结果，以供标注员根据融合标注类别对待处理数据进行补标，得到待处理数据对应的补标结果。

9.根据权利要求1-5任意一项所述的方法，其特征在于，所述补标需求中还包含补标标注规范；

则，所述补标任务中，还包含补标标注规范，所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别及补标标注规范，对每一个待补标数据集合中的待处理数据进行补标。

10.一种补标装置，其特征在于，包括：

数据获取模块，用于获取待处理数据及补标需求，所述待处理数据包含既有标注类别，所述补标需求中包含需求标注类别；

集合生成模块，用于将所述待处理数据按照既有标注类别进行分类，得到若干个待补标数据集合；

新标注类别生成模块，用于基于每一个待补标数据集合对应的既有标注类别和所述需求标注类别，得到每一个待补标数据集合对应的融合标注类别；

补标任务创建模块，用于针对每一个待补标数据集合，创建补标任务，所述补标任务中包含待补标数据集合及其对应的融合标注类别；

所述补标任务用于指示按照每一个待补标数据集合对应的融合标注类别，对每一个待补标数据集合中的待处理数据进行补标。

11.根据权利要求10所述的装置，其特征在于，还包括：

补标注模块，用于针对每一补标任务，按照补标任务中待补标数据集合对应的融合标注类别，对待补标数据集合中的待处理数据进行补标，得到每一个待处理数据的标注结果。

12.根据权利要求10所述的装置，其特征在于，还包括：

标注界面显示模块，用于根据所述补标任务，在标注界面显示各待处理数据，以及各待处理数据对应的原标注结果，以供补标员根据融合标注类别对待处理数据进行补标，得到各待处理数据对应的补标结果。

13.一种补标设备，其特征在于，包括存储器和处理器；

所述存储器，用于存储程序；

所述处理器，用于执行所述程序，实现如权利要求1-9任一项的补标方法的各个步骤。

14.一种可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-9任一项的补标方法的各个步骤。

Images