CN111460187B

CN111460187B - 一种图片标注方法、装置、设备及可读存储介质

Info

Publication number: CN111460187B
Application number: CN202010250465.8A
Authority: CN
Inventors: 朱宏新; 黄访
Original assignee: Chongqing Jinshan Medical Technology Research Institute Co Ltd
Current assignee: Chongqing Jinshan Medical Technology Research Institute Co Ltd
Priority date: 2020-04-01
Filing date: 2020-04-01
Publication date: 2023-06-30
Anticipated expiration: 2040-04-01
Also published as: CN111460187A

Abstract

本发明公开了一种图片标注方法、装置、设备及可读存储介质，该方法包括以下步骤：在本地缓存中存储从云端获取的待标记图片；显示所述本地缓存中当前页内存区存储的待标记图片；获取用户标记操作，并对显示的待标记目标图片添加标记信息；将所述标记信息反馈给所述云端后，从所述当前页内存区中删除所述已标记目标图片；将所述本地缓存中下一页内存区存储的所述待标记图片依次填充至所述当前页内存区。在本方法中，可避免出现重复标记、在完成一个待标记图片的标记工作后，自动填充空白位置，可使得标记人员无需过多关注图片打开操作，而是专注的进行图片标注工作，可提高图片标记效率。

Description

一种图片标注方法、装置、设备及可读存储介质

技术领域

本发明涉及图片处理技术领域，特别是涉及一种图片标注方法、装置、设备及可读存储介质。

背景技术

机器学习技术中，往往需要对涉及出的模型进行训练，而训练必不可少的就是样本投喂。为了使得训练出的模型达到较高性能，需要大量的样本。例如，训练用于图片识别分类的模型而言，该模型的训练需要大量有标签图片进行训练、验证和优化。因此，如何得到大量有标签图片非常关键。

但是，目前对于图片标签添加处理，通常的模式为：下载待标记图片，然后再显示界面标记图片时，需耗费大量时间等待图片下载完毕；另外，对于标记界面的处理也是需要没完成一个图片标记之后进行手动处理，如补充新图片，删除已标记图片等。整个过程操作繁琐，而且还容易出现重复标记的情况。

综上所述，如何有效地提高图片标记处理的效率等问题，是目前本领域技术人员急需解决的技术问题。

发明内容

本发明的目的是提供一种图片标注方法、装置、设备及可读存储介质，通过自动删除已标记图片，避免重复标记，将缓存的待标记图片自动填充至当前页内存区并进行显示，可减少标记人员的工作负担，可使得标记人员更加专注于图片标记工作本身，可提高图片标记效率。

为解决上述技术问题，本发明提供如下技术方案：

一种图片标注方法，包括：

在本地缓存中存储从云端获取的待标记图片；

显示所述本地缓存中当前页内存区存储的待标记图片；

获取用户标记操作，并对显示的待标记目标图片添加标记信息；

将所述标记信息反馈给所述云端后，从所述当前页内存区中删除所述已标记目标图片；

将所述本地缓存中下一页内存区存储的所述待标记图片依次填充至所述当前页内存区。

优选地，还包括：

在接收到当前页切换指令时，将所述当前页切换指令对应的目标页内存区的待标记图片拷贝迁移至所述当前页内存区。

优选地，若所述当前切换指令为查看上一页图片，则所述当前页切换指令对应的目标页内存区的待标记图片拷贝至所述当前页内存区，包括：

判断所述本地缓存的上一页内存区是否存储有所述待标记图片；

如果是，则将所述当前页内存区存储的所述待标记图片拷贝到所述下一页内存区中，将所述上一页内存区存储的所述待标记图片拷贝到所述当前页内存区中，显示所述当前页内存区存储的所述待标记图片。

优选地，所述在本地缓存中存储从云端获取的待标记图片，包括：

判断所述云端是否有上一页的所述待标记图片；

如果是，则下载上一页的所述待标记图片，并缓存到所述上一页内存区中。

优选地，若所述当前切换指令为查看下一页图片，则所述当前页切换指令对应的目标页内存区的待标记图片拷贝至所述当前页内存区，包括：

判断所述本地缓存的下一页内存区是否存储有所述待标记图片；

如果是，则将所述当前页内存区存储的所述待标记图片拷贝到所述上一页内存区中，将所述下一页内存区存储的所述待标记图片拷贝到所述当前页内存区中，显示所述当前页内存区存储的所述待标记图片。

判断所述云端是否有下一页的所述待标记图片；

如果是，则下载下一页的所述待标记图片，并缓存到所述下一页内存区中。

优选地，所述获取用户标记操作，并对显示的待标记目标图片添加标记信息，包括：

获取用户标记操作，并对所述待标记目标图片添加分类标记或标记框；

在所述待标记目标图片的标记文件中记录所述分类标记或所述标记框。

一种图片标注装置，包括：

图片缓存模块，用于在本地缓存中存储从云端获取的待标记图片；

图片显示模块，用于显示所述本地缓存中当前页内存区存储的待标记图片；

标记添加模块，用于获取用户标记操作，并对显示的待标记目标图片添加标记信息；

标记反馈模块，用于将所述标记信息反馈给所述云端后，从所述当前页内存区中删除所述已标记目标图片；

图片填充模块，用于将所述本地缓存中下一页内存区存储的所述待标记图片依次填充至所述当前页内存区。

一种图片标注设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现上述图片标注方法的步骤。

一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述图片标注方法的步骤。

应用本发明实施例所提供的方法，在本地缓存中存储从云端获取的待标记图片；显示本地缓存中当前页内存区存储的待标记图片；获取用户标记操作，并对显示的待标记目标图片添加标记信息；将标记信息反馈给云端后，从当前页内存区中删除已标记目标图片；将本地缓存中下一页内存区存储的待标记图片依次填充至当前页内存区。

在本方法中，在本地缓存中存储待标记图片，在显示图片时，则显示本地缓存中当前页内存区存储的待标记图片。对于用户标记操作进行响应，即对显示的待标记目标图片添加标记信息。然后将标记信息反馈给云端，完成标记信息反馈后，将该已标记目标图片从当前页内存区，即不再显示该已标记图片，如此便可避免出现重复标记。另外，当前页内存区会空出一个待标记图片的位置，此时将下一页内存区存储的待标记图像依次填充至当前页内存区。如此，便可使得当前显示页面在完成一个待标记图片的标记工作中，自动填充空白位置，使得标记人员无需过多关注图片打开操作，而是专注的进行图片标注工作，可提高图片标记效率。

相应地，本发明实施例还提供了与上述图片标注方法相对应的图片标注装置、设备和可读存储介质，具有上述技术效果，在此不再赘述。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例中一种图片标注方法的实施流程图；

图2为本发明实施例中一种图片存储结构示意图；

图3为本发明实施例中一种图片缓存示意图；

图4为本发明实施例中一种图片标注装置的结构示意图；

图5为本发明实施例中一种图片标注设备的结构示意图；

图6为本发明实施例中一种图片标注设备的具体结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参考图1，图1为本发明实施例中一种图片标注方法的流程图，该方法可应用于图像管理系统(可具体包括存储图片的云端，对图片进行浏览、标记的客户端)中的终端(如客户端)中。该方法包括以下步骤：

S101、在本地缓存中存储从云端获取的待标记图片。

客户端可从云端中下载待标记图片，然后将待标记图片存储在本地缓存中。

请参考图2，为了便于查看标记待标记图片(jpg为图片)，可将待标记图片分别存储在本地缓存中的当前页内存区、上一页内存区、下一页内存区。当然，在实际应用中，还可多缓存更多页数的待标记图片。在本实施例中，对于每一页内存区缓存的图片数量并不做限定，例如，该图片数量可与当前显示界面所能显示的图片数量匹配，而当前显示界面所能显示的图片数量可根据图片显示大小和显示模型而定，如单幅图片模式对应的图片数量为1，而多福图片模式下对应的图片数量则为多个。

S102、显示本地缓存中当前页内存区存储的待标记图片。

即在显示界面显示本地缓存中当前页面内存区存储的待标记图片。当然，在实际应用中，也可针对当前页内区存储的某个待标记图片进行放大显示。

S103、获取用户标记操作，并对显示的待标记目标图片添加标记信息。

其中，用户标记操作可具体为对图片进行甄别之后，为图片添加分类标记，或对图片中的某些特殊区域进行画框标记。待标记目标图片即可当前页内存区存储的任意一张待标记图片，待标记目标图片可以单幅显示方式在显示界面呈现，也可以多福显示方式在显示界面中呈现。

对用户标记操作进行响应，即将显示的待标记目标图像添加上标记信息。对应与用户标记操作，标记信息可具体为分类标签，也可框图信息。

具体的：标记信息的添加过程可具体包括：

步骤一、获取用户标记操作，并对待标记目标图片添加分类标记或标记框；

步骤二、在待标记目标图片的标记文件中记录分类标记或标记框。

其中，标记文件可具体为txt(文本格式)、xml(可扩展标记语言)等格式的文件，在标记文件中存储的文本信息，记录了图片的名称，以及对应图片的标注信息。

举例说明：当待标记图像为医学图像，用户的标记操作可为对医学影像分类，例如：电子胃镜或者胶囊胃镜拍摄的人体消化道图像，此图像是属于食管、胃部、小肠或者属于胃部的胃底、贲门、幽门等，这些信息需要标注工具对图像进行分类，把部位信息记录在某个文件中，把图像名称和存储文件相关联；用户的标记操作也可为对医学图像打框，例如：图像中有出血、发红、溃疡、早癌等统称病灶，需要对图像的病灶部位进行打框，把打框信息存储在某个文件中，再把文件信息和图像相关联。

在为待标记目标图片添加了标记信息之后，该图片即为已标记目标图片。

S104、将标记信息反馈给云端后，从当前页内存区中删除已标记目标图片。

可将标记信息反馈给云端，具体的，可将已标记目标图像对应的标记文件反馈给云端，以便云端得知该已标记目标图像的标记信息。

完成标记信息反馈之后，便可从当前页内存区中删除该已标记目标图片，以避免标记人员对同一个图片进行重复标记。

S105、将下一页内存区存储的待标记图片依次填充至当前页内存区。

将已标记图片删除之后，当前页内存区便会出现一个图片存储位置的空闲，为了使得显示的图片不出现空白，此时可从下一页内存区中依次选取一个待标记图片填充至当前页内存区中。

考虑到、由于标注过程中图片量大，不是每张图片都会需要，所以标注时，没有被标注的图片充满了当前页，此时可直接以页为单位进行切换。优选地，在下一页内存区中缺少一个待标记图片时，可从云端下载一个新待标记图片进行填充。以便在以整页为单位切换待标记图片时，避免出现等待下载图片的情况，或出现空白区域的情况，而使得当前页的图片总充满屏幕的。关于以整页为单位进行图片切换显示，可在接收到当前页切换指令时，将当前页切换指令对应的目标页内存区的待标记图片拷贝迁移至当前页内存区。

为便于说明，下面请参考图3(箭头方向为图片传输方向)，分别以切换显示上一页和下一页进行详细说明：

情况一：

若当前切换指令为查看上一页图片，则当前页切换指令对应的目标页内存区的待标记图片拷贝至当前页内存区，包括：

判断本地缓存的上一页内存区是否存储有待标记图片；

如果是，则将当前页内存区存储的待标记图片拷贝到下一页内存区中，将上一页内存区存储的待标记图片拷贝到当前页内存区中，显示当前页内存区存储的待标记图片。

相应地，在本地缓存中存储从云端获取的待标记图片，包括：

判断云端是否有上一页的待标记图片；

如果是，则下载上一页的待标记图片，并缓存到上一页内存区中。

为便于理解，下面将与情况一相关的步骤结合起来进行详细说明。

当用户查看上一页(点击“上一页”按钮)时，可首先检查上一页内存区中有无数据(本文中内存区中的数据指待标记图片)，如果无数据则不进行任何操作，如果有数据则把当前页内存区的数据拷贝到下一页内存区中，把上一页内存区的数据拷贝到当前页内存区中，随后显示当前页内存区数据到屏幕。在显示当前页屏幕中数据时，检查云端是否有上一页的图片数据，如果有，则下载上一页的图片数据到上一页内存区中。

情况二：

若当前切换指令为查看下一页图片，则当前页切换指令对应的目标页内存区的待标记图片拷贝至当前页内存区，包括：

判断本地缓存的下一页内存区是否存储有待标记图片；

如果是，则将当前页内存区存储的待标记图片拷贝到上一页内存区中，将下一页内存区存储的待标记图片拷贝到当前页内存区中，显示当前页内存区存储的待标记图片。

判断云端是否有下一页的待标记图片；

如果是，则下载下一页的待标记图片，并缓存到下一页内存区中。

为便于理解，下面将与情况二相应步骤结合起来进行详细说明。

当用户点击查看下一页(点击“下一页”按钮)时，客户端软件系统检查下一页内存区中是否有数据，如果有会自动把当前页内存区数据拷贝到上一页的内存区保存，并把下一页内存区数据拷贝到当前页内存区中，随后显示当前页内存区的数据到屏幕上。在屏幕显示当前页数据期间，客户端系统判断云端是否有下一页图片数据，如果有则从云端下载下一页的图片数据到客户端下一页内存区，如果云端没有下一页数据，则不进行下载。

特别地，在云端的图片具有标记信息之后，可导出云端图片及标注信息进行模型训练，以使得训练出的模型能够对待识别的图像进行分类识别。

相应于上面的方法实施例，本发明实施例还提供了一种图片标注装置，下文描述的图片标注装置与上文描述的图片标注方法可相互对应参照。

参见图4所示，该装置包括以下模块：

图片缓存模块101，用于在本地缓存中存储从云端获取的待标记图片；

图片显示模块102，用于显示本地缓存中当前页内存区存储的待标记图片；

标记添加模块103，用于获取用户标记操作，并对显示的待标记目标图片添加标记信息；

标记反馈模块104，用于将标记信息反馈给云端后，从当前页内存区中删除已标记目标图片；

图片填充模块105，用于将本地缓存中下一页内存区存储的待标记图片依次填充至当前页内存区。

应用本发明实施例所提供的装置，在本地缓存中存储从云端获取的待标记图片；显示本地缓存中当前页内存区存储的待标记图片；获取用户标记操作，并对显示的待标记目标图片添加标记信息；将标记信息反馈给云端后，从当前页内存区中删除已标记目标图片；将本地缓存中下一页内存区存储的待标记图片依次填充至当前页内存区。

在本装置中，在本地缓存中存储待标记图片，在显示图片时，则显示本地缓存中当前页内存区存储的待标记图片。对于用户标记操作进行响应，即对显示的待标记目标图片添加标记信息。然后将标记信息反馈给云端，完成标记信息反馈后，将该已标记目标图片从当前页内存区，即不再显示该已标记图片，如此便可避免出现重复标记。另外，当前页内存区会空出一个待标记图片的位置，此时将下一页内存区存储的待标记图像依次填充至当前页内存区。如此，便可使得当前显示页面在完成一个待标记图片的标记工作中，自动填充空白位置，使得标记人员无需过多关注图片打开操作，而是专注的进行图片标注工作，可提高图片标记效率。

在本发明的一种具体实施方式中，还包括：

显示图片切换模块，用于在接收到当前页切换指令时，将当前页切换指令对应的目标页内存区的待标记图片拷贝迁移至当前页内存区。

在本发明的一种具体实施方式中，当前切换指令为查看上一页图片，显示图片切换模块，具体用于判断本地缓存的上一页内存区是否存储有待标记图片；如果是，则将当前页内存区存储的待标记图片拷贝到下一页内存区中，将上一页内存区存储的待标记图片拷贝到当前页内存区中，显示当前页内存区存储的待标记图片。

在本发明的一种具体实施方式中，图片缓存模块101，具体用于判断云端是否有上一页的待标记图片；如果是，则下载上一页的待标记图片，并缓存到上一页内存区中。

在本发明的一种具体实施方式中，当前切换指令为查看下一页图片，显示图片切换模块，具体用于判断本地缓存的下一页内存区是否存储有待标记图片；如果是，则将当前页内存区存储的待标记图片拷贝到上一页内存区中，将下一页内存区存储的待标记图片拷贝到当前页内存区中，显示当前页内存区存储的待标记图片。

在本发明的一种具体实施方式中，图片缓存模块101，具体用于判断云端是否有下一页的待标记图片；如果是，则下载下一页的待标记图片，并缓存到下一页内存区中。

在本发明的一种具体实施方式中，标记添加模块103，具体用于获取用户标记操作，并对待标记目标图片添加分类标记或标记框；在待标记目标图片的标记文件中记录分类标记或标记框。

相应于上面的方法实施例，本发明实施例还提供了一种图片标注设备，下文描述的一种图片标注设备与上文描述的一种图片标注方法可相互对应参照。

参见图5所示，该图片标注设备包括：

存储器D1，用于存储计算机程序；

处理器D2，用于执行计算机程序时实现上述方法实施例的图片标注方法的步骤。

具体的，请参考图6，为本实施例提供的一种图片标注设备的具体结构示意图，该图片标注设备可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(central processing units，CPU)322(例如，一个或一个以上处理器)和存储器332，一个或一个以上存储应用程序342或数据344的存储介质330(例如一个或一个以上海量存储设备)。其中，存储器332和存储介质330可以是短暂存储或持久存储。存储在存储介质330的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对数据处理设备中的一系列指令操作。更进一步地，中央处理器322可以设置为与存储介质330通信，在图片标注设备301上执行存储介质330中的一系列指令操作。

图片标注设备301还可以包括一个或一个以上电源326，一个或一个以上有线或无线网络接口350，一个或一个以上输入输出接口358，和/或，一个或一个以上操作系统341。例如，Windows ServerTM，Mac OS XTM，UnixTM，LinuxTM，FreeBSDTM等。

上文所描述的图片标注方法中的步骤可以由图片标注设备的结构实现。

相应于上面的方法实施例，本发明实施例还提供了一种可读存储介质，下文描述的一种可读存储介质与上文描述的一种图片标注方法可相互对应参照。

一种可读存储介质，可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述方法实施例的图片标注方法的步骤。

该可读存储介质具体可以为U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可存储程序代码的可读存储介质。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

Claims

1.一种图片标注方法，其特征在于，包括：

在本地缓存中存储从云端获取的待标记图片；

显示所述本地缓存中当前页内存区存储的待标记图片；

将所述本地缓存中下一页内存区存储的所述待标记图片依次填充至所述当前页内存区；

其中，所述图片标注方法，还包括：

在接收到当前页切换指令时，若所述当前切换指令为查看上一页图片，则判断所述本地缓存的上一页内存区是否存储有所述待标记图片；如果是，则将所述当前页内存区存储的所述待标记图片拷贝到所述下一页内存区中，将所述上一页内存区存储的所述待标记图片拷贝到所述当前页内存区中，显示所述当前页内存区存储的所述待标记图片；若所述当前切换指令为查看下一页图片，则判断所述本地缓存的下一页内存区是否存储有所述待标记图片；如果是，则将所述当前页内存区存储的所述待标记图片拷贝到所述上一页内存区中，将所述下一页内存区存储的所述待标记图片拷贝到所述当前页内存区中，显示所述当前页内存区存储的所述待标记图片。

2.根据权利要求1所述的图片标注方法，其特征在于，所述在本地缓存中存储从云端获取的待标记图片，包括：

判断所述云端是否有上一页的所述待标记图片；

3.根据权利要求1所述的图片标注方法，其特征在于，所述在本地缓存中存储从云端获取的待标记图片，包括：

判断所述云端是否有下一页的所述待标记图片；

4.根据权利要求1所述的图片标注方法，其特征在于，所述获取用户标记操作，并对显示的待标记目标图片添加标记信息，包括：

5.一种图片标注装置，其特征在于，包括：

图片填充模块，用于将所述本地缓存中下一页内存区存储的所述待标记图片依次填充至所述当前页内存区；

其中，所述图片标注装置，具体用于：

6.一种图片标注设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至4任一项所述图片标注方法的步骤。

7.一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述图片标注方法的步骤。