CN110910362A

CN110910362A - 一种影像序列的标注方法、装置、处理器及存储介质

Info

Publication number: CN110910362A
Application number: CN201911118733.4A
Authority: CN
Inventors: 徐梦利; 李建喜; 陈宽; 王少康
Original assignee: Infervision Co Ltd
Current assignee: Beijing Infervision Technology Co Ltd; Infervision Co Ltd
Priority date: 2019-11-15
Filing date: 2019-11-15
Publication date: 2020-03-24

Abstract

本发明提供了一种影像序列的标注方法及装置，其中方法包括：获取目标标注信息，目标标注信息包括目标标注框的标识和目标标注框的位置信息；在预设待标注层面生成与目标标注框的标识相对应的标注框，其中，标注框的位置信息与目标标注框的位置信息相同。本发明在获取目标标注信息的情况下，在待标注层面可以自动化生成与目标标注信息相对应的标注框，而不需要人工逐层标注，大幅度提高了对影像序列的标注效率。

Description

一种影像序列的标注方法、装置、处理器及存储介质

技术领域

本发明涉及数据处理技术领域，更具体的，涉及一种影像序列的标注方法、装置处理器及存储介质。

背景技术

对医学影像进行研究与分析的第一步是对医学影像进行检测、分割等标注工作。目前有大量的医学影像是三维的，比如CT、MRI等，即一个影像序列中有多个图像帧，每个图像帧都可以看做是一个影像层面，多个影响层面共同构成被扫描的三维体积，并且随着科技的进步，薄层影像日益成为主导，同样的体积经过扫描会产出更多层面。

当需要对感兴趣的病灶或器官进行标注时，病灶或器官极有可能跨越多层，所以需要逐层进行标注，标注流程繁琐，标注效率低下标注。

发明内容

有鉴于此，本发明提供了一种影像序列的标注方法、装置处理器及存储介质，提高了影像序列的标注效率。

为了实现上述发明目的，本发明提供的具体技术方案如下：

一种影像序列的标注方法，包括：

获取目标标注信息，所述目标标注信息包括目标标注框的标识和所述目标标注框的位置信息；

在预设待标注层面生成与所述目标标注框的标识相对应的标注框，所述标注框的位置信息与所述目标标注框的位置信息相同。

可选的，所述方法还包括：

获取边缘修改指令，所述边缘修改指令包括待修改层面、待修改标注框的标识以及所述待修改标注框调整后的位置信息；

将所述待修改层面中与所述待修改标注框的标识相对应的标注框的位置信息更新为所述调整后的位置信息，以响应所述边缘修改指令。

可选的，所述获取目标标注信息，包括：

生成所述目标标注框，得到所述目标标注框的标识和所述目标标注框的位置信息，并将所述目标标注框的标识和所述目标标注框的位置信息确定为所述目标标注信息。

可选的，所述方法还包括：

接收用户输入的标注起始层面号和标注结束层面号；

依据所述标注起始层面号和所述标注结束层面号，确定所述待标注层面。

可选的，所述在预设待标注层面生成与所述目标标注框的标识相对应的标注框，包括：

判断所述预设待标注层面是否含有与所述目标标注框的标识相对应的标注框；

若不含有与所述目标标注框的标识相对应的标注框，在所述预设待标注层面生成与所述目标标注框的标识相对应的标注框，所述标注框的位置信息与所述目标标注框的位置信息相同。

可选的，所述方法还包括：

获取标注删除指令，所述标注删除指令包括待删除层面和待删除标注框的标识；

删除所述待删除层面中与所述待删除标注框的标识相对应的标注框，以响应所述标注删除指令。

可选的，所述方法还包括以下至少一项：

在数据库中所述预设待标注层面的存储路径中写入所述目标标注信息；

在数据库中所述待修改层面的存储路径中将与所述待修改标注框的标识相对应的标注框的位置信息更新为所述调整后的位置信息；

在数据库中所述待删除层面的存储路径中删除所述待删除标注框的标识和位置信息。

一种影像序列的标注装置，包括：

标注信息获取单元，用于获取目标标注信息，所述目标标注信息包括目标标注框的标识和所述目标标注框的位置信息；

标注框生成单元，用于在预设待标注层面生成与所述目标标注框的标识相对应的标注框，所述标注框的位置信息与所述目标标注框的位置信息相同。

可选的，所述装置还包括：

边缘修改单元，用于获取边缘修改指令，所述边缘修改指令包括待修改层面、待修改标注框的标识以及所述待修改标注框调整后的位置信息；将所述待修改层面中与所述待修改标注框的标识相对应的标注框的位置信息更新为所述调整后的位置信息，以响应所述边缘修改指令。

可选的，所述标注信息获取单元，具体用于生成所述目标标注框，得到所述目标标注框的标识和所述目标标注框的位置信息，并将所述目标标注框的标识和所述目标标注框的位置信息确定为所述目标标注信息。

可选的，所述装置还包括：

待标注层面确定单元，用于接收用户输入的标注起始层面号和标注结束层面号；依据所述标注起始层面号和所述标注结束层面号，确定所述待标注层面。

可选的，所述标注框生成单元，具体用于：

可选的，所述装置还包括：

标注框删除单元，用于获取标注删除指令，所述标注删除指令包括待删除层面和待删除标注框的标识；删除所述待删除层面中与所述待删除标注框的标识相对应的标注框，以响应所述标注删除指令。

可选的，所述装置还包括以下至少一项：

标注信息写入单元，用于在数据库中所述预设待标注层面的存储路径中写入所述目标标注信息；

标注信息更新单元，用于在数据库中所述待修改层面的存储路径中将与所述待修改标注框的标识相对应的标注框的位置信息更新为所述调整后的位置信息；

标注信息删除单元，用于在数据库中所述待删除层面的存储路径中删除所述待删除标注框的标识和位置信息。

一种处理器，所述处理器用于运行程序，

其中，所述程序运行时执行如上述中任一项所述的影像序列的标注方法。

一种存储介质，所述存储介质包括存储的程序，

其中，在所述程序运行时控制所述存储介质所在的设备执行如上述中任意一项所述的影像序列的标注方法。

相对于现有技术，本发明的有益效果如下：

本发明公开的一种影像序列的标注方法，在获取目标标注信息的情况下，可以自动化在影像序列的待标注层面生成与目标标注信息相对应的标注框，而不需要人工逐层标注大幅度提高了对影像序列的标注效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例公开的一种影像序列的标注方法的流程示意图；

图2为本发明实施例公开的一种标注框边缘的修改方法的流程示意图；

图3为本发明实施例公开的一种标注框的删除方法的流程示意图；

图4为本发明实施例公开的一种影像序列的标注装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

发明人通过研究发现，三维医学影像序列中每层面之间的标注位置和形状相差不大，只是逐渐变化，如果在每一层都需要完全重新标注，会费时费力。

为了解决上述技术问题，本实施例公开了一种影像序列的标注方法，应用于能够对影像序列进行读取和编辑的设备，影像序列为CT(英文全称：Computed Tomography，中文名称：电子计算机断层扫描成像)、MRI(英文全称：Nuclear magnetic resonance，中文名称：核磁共振成像)等三维医学影像，也可以为其他影像序列，请参阅图1，该方法具体包括以下步骤：

S101：获取目标标注信息，目标标注信息包括目标标注框的标识和目标标注框的位置信息；

目标标注框的数量为1个或1个以上。

目标标注信息的获取方式可以有多种，如获取用户输入的标注信息；在影像序列中的某一层面自动化生成的标注信息；获取影像序列中某一层面已标注的标注信息等等。

其中，在获取用户输入的标注信息的实施方式，可以获取用户通过可视化界面输入的标注信息。

在影像序列中的某一层面自动化生成的标注信息的实施方式，可以包括以下步骤：

生成目标标注框，得到目标标注框的标识和目标标注框的位置信息；

将目标标注框的标识和目标标注框的位置信息确定为目标标注信息。

其中，生成目标标注框的方式，可以为接收用户输入的携带有标注框位置信息的标注指令，生成目标标注框；也可以利用深度学习算法在图像中发现感兴趣的区域，并对感兴趣的区域进行分割，得到目标标注框。

获取影像序列中某一层面已标注的标注信息的实施方式中，需要在目标层面选中目标标注框并复制目标标注框从而获取目标标注信息，目标标注框被选中后为激活状态，当目标标注框被复制后转换为未激活状态，复制动作可以为键盘动作如“Ctrl+C”，复制动作还可以为鼠标动作如右键点击选择复制。

只有激活状态的标注框才能被复制，避免标注框的误复制，提高了操作的准确性。

目标标注框为矩形框或多边形框，目标标注框的标识用于区分不同类型的标注框，目标标注框的位置信息为目标标注框在相应层面的坐标信息。

S102：在预设待标注层面生成与目标标注框的标识相对应的标注框，其中，标注框的位置信息与目标标注框的位置信息相同。

待标注层面为预先设定的，待标注层面的数量可以为一个或一个以上。

确定待标注层面的方式可以为：接收用户输入的标注起始层面号和标注结束层面号，依据标注起始层面和标注结束层面号确定待标注层面。

当待标注层面的数量为1时，用户输入的标注起始层面号和标注结束层面号相同，即为待标注层面号。

当待标注层面的数量为2时，用户输入的标注起始层面号和标注结束层面号不同，用户输入的标注起始层面号和标注结束层面号即为待标注层面号。

当待标注层面的数量为2个以上时，用户输入的标注起始层面号和标注结束层面号不同，标注起始层面号与标注结束层面号之间的所有层面以及标注起始层面和标注结束层面都为待标注层面。

接收用户输入标注起始层面号和标注结束层面号可以有多种实现方式，以下为两种可选的实现方式：

实现方式一

检测到键盘动作“【”，将键盘动作“【”对应的层面号确定为标注起始层面号firstIndex；检测到键盘动作“】”，将键盘动作“】”对应的层面号确定为标注结束层面号lastIndex。

需要说明的是，键盘动作“【”和键盘动作“】”仅为一种可选的键盘动作方式，也可以用其他键盘动作表示标注起始和标注结束，且用户可以先执行表示标注起始的键盘动作再执行表示标注结束的键盘动作，用户也可以先执行表示标注结束的键盘动作再执行表示标注起始的键盘动作。

实现方式二

接收用户通过对话框输入的标注起始层面号和标注结束层面号。

为了提高标注效率，避免在已有目标标注框的层面再次生成目标标注框，在预设待标注层面生成与目标标注框的标识相对应的标注框的方法包括如下步骤：

判断预设待标注层面是否含有与目标标注框的标识相对应的标注框；

若含有与目标标注框的标识相对应的标注框，则不在预设待标注层面生成与目标标注框的标识相对应的标注框；

若不含有与目标标注框的标识相对应的标注框，在预设待标注层面生成与目标标注框的标识相对应的标注框，标注框的位置信息与目标标注框的位置信息相同。

为了便于对影像序列的标注信息进行管理，影像序列的标注信息都存储在数据库中，影像序列的每个层面分别在数据库中对应唯一的存储路径，如c:/a/b/c.jpg，取相对路径a/b/c.jpg即可。

再次基础上，可以通过访问预设待标注层面在数据库中的存储路径，判断该存储路径中是否存储有目标标注框的标识，若有，则预设待标注层面含有目标标注框，反之，则预设待标注层面不含有目标标注框。

在预设待标注层面生成与目标标注框的标识相对应的标注框的同时，在数据库中预设待标注层面的存储路径中写入目标标注信息。

本实施例公开的一种影像序列的标注方法，在获取目标标注信息的情况下，可以自动化在影像序列的待标注层面生成与目标标注信息相对应的标注框，而不需要人工逐层标注，大幅度提高了对影像序列的标注效率。

优选的，由于影像序列中每个层面之间相同标识的标注框的位置和形状相差不大，只是逐渐变化，为了使标注更加准确，需要对标注框的形状进行调整。

可选的，请参阅图2，标注框边缘修改方法包括以下步骤：

S201：获取边缘修改指令，边缘修改指令包括待修改层面、待修改标注框的标识以及待修改标注框调整后的位置信息；

边缘修改指令中用待修改层面号表示待修改层面。

S202：将待修改层面中与待修改标注框的标识相对应的标注框的位置信息更新为上述调整后的位置信息；

S203：在数据库中待修改层面的存储路径中将与待修改标注框的标识相对应的标注框的位置信息更新为上述调整后的位置信息，以响应边缘修改指令。

还需要说明的是，在标注过程中可能出现标注错误的情况，需要对标注错误的标注框进行删除，由于同一标识对应的标注框表示同一类对象，如医学影像序列中同一标识对应的标注框被视为同一个病灶或器官，为了提高删除效率，可以进行批量删除。

可选的，请参阅图3，标注框的删除方法包括以下步骤：

S301：获取标注删除指令，标注删除指令包括待删除层面和待删除标注框的标识；

标注删除指令中用待删除层面号表示待删除层面。

S302：删除待删除层面中与待删除标注框的标识相对应的标注框；

S303：在数据库中待删除层面的存储路径中删除待删除标注框的标识和位置信息，以响应标注删除指令。

可见，本实施例公开的影像序列的标注方法，可以实现批量标注、标注框边缘修改、标注框删除等多种功能，满足了用户的多种标注需求，提升了用户体验。

基于上述实施例公开的一种影像序列的标注方法，本实施例对应公开了一种影像序列的标注装置，请参阅图4，该装置包括：

标注信息获取单元401，用于获取目标标注信息，所述目标标注信息包括目标标注框的标识和所述目标标注框的位置信息；

标注框生成单元402，用于在预设待标注层面生成与所述目标标注框的标识相对应的标注框，所述标注框的位置信息与所述目标标注框的位置信息相同。

可选的，所述装置还包括：

可选的，所述标注框生成单元，具体用于：

可选的，所述装置还包括：

可选的，所述装置还包括以下至少一项：

所述影像序列的标注装置包括处理器和存储器，上述标注信息获取单元、标注框生成单元、边缘修改单元、待标注层面确定单元、标注框删除单元、标注信息写入单元、标注信息更新单元和标注信息删除单元标注等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。

处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来提高影像序列的标注效率。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。

本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现所述影像序列的标注方法。

本发明实施例提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行所述影像序列的标注方法。

本发明实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：

进一步，所述方法还包括：

进一步，所述获取目标标注信息，包括：

进一步，所述方法还包括：

接收用户输入的标注起始层面号和标注结束层面号；

进一步，所述在预设待标注层面生成与所述目标标注框的标识相对应的标注框，包括：

进一步，所述方法还包括：

进一步，所述方法还包括以下至少一项：

本文中的设备可以是服务器、PC、PAD、手机等。

本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：

进一步，所述方法还包括：

进一步，所述获取目标标注信息，包括：

进一步，所述方法还包括：

接收用户输入的标注起始层面号和标注结束层面号；

进一步，所述方法还包括：

进一步，所述方法还包括以下至少一项：

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。

本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims

1.一种影像序列的标注方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

3.根据权利要求1或2所述的方法，其特征在于，所述获取目标标注信息，包括：

4.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

接收用户输入的标注起始层面号和标注结束层面号；

5.根据权利要求1或2所述的方法，其特征在于，所述在预设待标注层面生成与所述目标标注框的标识相对应的标注框，包括：

6.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

7.根据权利要求6所述的方法，其特征在于，所述方法还包括以下至少一项：

8.一种影像序列的标注装置，其特征在于，包括：

9.根据权利要求8所述的装置，其特征在于，所述装置还包括：

10.根据权利要求8或9所述的装置，其特征在于，所述标注信息获取单元，具体用于生成所述目标标注框，得到所述目标标注框的标识和所述目标标注框的位置信息，并将所述目标标注框的标识和所述目标标注框的位置信息确定为所述目标标注信息。

11.根据权利要求8或9所述的装置，其特征在于，所述装置还包括：

12.根据权利要求8或9所述的装置，其特征在于，所述标注框生成单元，具体用于：

13.根据权利要求8或9所述的装置，其特征在于，所述装置还包括：

14.根据权利要求13所述的装置，其特征在于，所述装置还包括以下至少一项：

15.一种处理器，其特征在于，所述处理器用于运行程序，

其中，所述程序运行时执行如权利要求1～7中任一项所述的影像序列的标注方法。

16.一种存储介质，其特征在于，所述存储介质包括存储的程序，

其中，在所述程序运行时控制所述存储介质所在的设备执行如权利要求1～7中任意一项所述的影像序列的标注方法。