CN104661584B - 标注宫颈图像 - Google Patents

标注宫颈图像 Download PDF

Info

Publication number
CN104661584B
CN104661584B CN201380049028.8A CN201380049028A CN104661584B CN 104661584 B CN104661584 B CN 104661584B CN 201380049028 A CN201380049028 A CN 201380049028A CN 104661584 B CN104661584 B CN 104661584B
Authority
CN
China
Prior art keywords
image
uterine neck
cervical region
neck image
technology
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380049028.8A
Other languages
English (en)
Other versions
CN104661584A (zh
Inventor
V·古普塔
P·瓦集内帕里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN104661584A publication Critical patent/CN104661584A/zh
Application granted granted Critical
Publication of CN104661584B publication Critical patent/CN104661584B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/43Detecting, measuring or recording for evaluating the reproductive systems
    • A61B5/4306Detecting, measuring or recording for evaluating the reproductive systems for evaluating the female reproductive systems, e.g. gynaecological evaluations
    • A61B5/4318Evaluation of the lower reproductive system
    • A61B5/4331Evaluation of the lower reproductive system of the cervix
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30096Tumor; Lesion
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Abstract

一种用于标注在患者的阴道镜检查期间获得的宫颈图像(110)的系统(100),所述系统包括:检测器(120),其用于检测在所述宫颈图像中的宫颈区域(122);分析器(140),其用于i)计算所述宫颈区域(122)的图像特征,所述图像特征指示用于提高宫颈区域中的病变的可见性的技术的使用,所述技术来自多个不同技术(144),所述多个不同技术(144)包括以下中的至少一个:在图像采集期间使用绿滤波器(GRN);将染色剂应用到宫颈区域(LU‑IO、PR‑AC、PO‑AC);以及,对宫颈区域(ZM、UN‑ZM)进行缩放,以及ii)分析所述图像特征以确定在获得宫颈图像(110)中是否使用了所述技术,从而获得确定的使用(142);以及,标注器(160),其用于基于所述确定的使用(142)来标注所述宫颈图像(110)。

Description

标注宫颈图像
技术领域
本发明涉及一种用于标注在患者的阴道镜检查期间获得的宫颈图像的系统和方法。本发明还涉及一种工作站、成像系统和包括所述系统的阴道镜。本发明还涉及一种用于令处理器系统执行所述方法的计算机程序产品。
阴道镜检查是用于针对宫颈癌和其他医学状况而检查宫颈和邻接区域的医学诊断技术。在印度和其他发展中国家,宫颈癌是妇科癌症的主要原因。阴道镜检查通常包括将染色剂(诸如醋酸和卢戈碘溶液)应用到宫颈区域以提高病变的可见性。其后,当照亮宫颈区域时,在显微镜下检查宫颈区域。癌前病变和恶性区显示出在宫颈图像中具有特定的血管图样或在一系列宫颈图像上(例如,在视频中)以瞬态的方式转变成醋酸白并且变回。这些特征是这些区的即时活检的线索。
背景技术
已知用于自动分析宫颈图像的各种系统。
例如,US 2009/0046905 A1描述了一种用于宫颈癌筛查的计算机辅助诊断(CAD)系统。所述系统自动分析从子宫颈采集的数据,并且提供组织和患者诊断,以及检查的充足性。据说CAD系统被设计用于多数据(不同时刻、不同造影剂,如醋酸、卢戈碘液等)。CAD系统采用特征提取来提取阴道镜的特征,包括:解剖的、醋酸白、血管结构、病变边缘、轮廓、卢戈碘染色。能够提供图像增强,其增强了在影像中的特定特征,尤其阴道镜的特征。依据对组织诊断的重要性,单个特征也能够被分类:正常、低度、高度和癌。
WO 2012/123881 A2提供一种用于检查宫颈的医疗器械,其包括光学检查系统;处理器,其用于控制医疗器械;以及存储器,其包含机器可执行指令。所述指令的执行令所述处理器执行所采集图像的图像过程。
WO 2002/25588 A2公开了一种采用图像数据库的处理前策略来从图像中(尤其在每个图像中的感兴趣的区域(如果有))之内获得导出信息的系统。相似的处理前策略可以被应用到查询图像,使得基于导出的信息,在查询图像和来自图像数据库的图像之间可以执行快速且高精确的比较。例如,处理前策略可以包括图像数据的正规化、对经正规化的图像数据的采样、感兴趣的区域的分割以及来自经正规化、采样、分割的图像数据的特征矢量的提取。整体策略可以提供新的和存档图像的有效比较。本文还公开了在对各种应用的正规化图像数据进行建模中、在组织和查询数据库中、在提供用户接口中采用这些策略的技术,所述用户接口用于在医疗工作场所应用所述系统以及用于基于这些策略本地地和在计算机网络上部署应用。
US2005/235272 A1提供系统、方法和装置,通过所述系统、方法和装置将非过程图像注释模板转化成源代码,并且编译成可执行的图像注释,其具有针对成像系统的原生计算机指令。在成像系统上的图像查看器访问原生指令并且调用所述原生指令以用文本信息对图像进行注释。
发明内容
以上系统的问题是,其不足够地适合于分析和/或处理前述多数据类型的宫颈图像。
具有实现能够更好地分析和/或处理不同类型的宫颈图像的系统或方法将是有利的。
为了更好地解决该问题,本发明的第一方面提供一种用于标注在患者的阴道镜检查期间获得的宫颈图像的系统,所述系统包括:
-检测器,其用于检测宫颈图像中的宫颈区域;
-分析器,其用于i)计算宫颈区域的图像特征,所述图像特征指示用于提高宫颈区域中的病变的可见性的技术的使用,以及ii)分析图像特征以确定在获得宫颈图像中是否使用了所述技术,从而获得确定的使用;以及
-标注器,其用于基于所述确定的使用标注宫颈图像。
在本发明的又一方面,提供一种包括所述系统的工作站、成像装置和/或阴道镜。
在本发明的又一方面,提供一种用于标注在患者的阴道镜检查期间获得的宫颈图像的方法,所述方法包括:
-检测宫颈图像中的宫颈区域;
-计算宫颈区域的图像特征,所述图像特征指示用于提高宫颈区域中的病变的可见性的技术的使用;
-分析图像特征以确定在获得宫颈图像中是否使用了所述技术,从而获得确定的使用;以及
-基于所述确定的使用标注宫颈图像。
在本发明的又一方面,提供一种计算机程序产品,所述计算机程序产品包括用于令处理器系统执行所述方法的指令。
以上措施分析从患者的阴道镜检查中获得的宫颈图像。由于从阴道镜检查中获得这样的宫颈图像,因此宫颈图像也被称为阴道镜检查图像。宫颈图像通常示出了患者的宫颈区域以及宫颈区域的邻接区域。例如,使用从医学图像分析领域本身已知的宫颈区域检测算法或分割算法检测宫颈区域。
然后基于宫颈区域的图像数据计算图像特征。因此,图像特征构成宫颈区域的特征,其来源于宫颈区域的图像数据。图像特征指示用于提高宫颈区域中的病变的可见性的技术的使用。注意,这些技术中的若干技术本身在阴道镜检查领域中是已知的。临床医生也已知这些技术一般地如何影响宫颈区域的表现。由此,图像特征表示表现的方面,其来源于宫颈区域的图像数据并且指示技术的使用。
分析图像特征以确定在获得宫颈图像中是否使用了所述技术。此处,术语“在获得宫颈图像中使用”指的是在阴道镜检查之前或期间的技术的使用,其导致影响宫颈图像中的宫颈区域的表现的技术。然后因此明确地(例如,通过修改宫颈图像的标题)或隐含地(例如,通过创建与宫颈图像相关联的元数据)标注宫颈图像。
以上措施具有这样的作用,自动分析宫颈图像以确定在获得宫颈图像中是否使用了用于提高病变的可见性的技术,然后因此标注宫颈图像。正因如此,宫颈图像的进一步分析和/或处理能够基于在获得宫颈图像中使用的用于提高病变的可见性的技术。
发明人已经认识到,宫颈图像的进一步分析和/或处理受益于获知是否使用了所述技术,由于这允许对于具体类型的宫颈图像优化进一步分析和/或处理,和/或进一步分析和/或处理被选择性地应用到所述类型的宫颈图像。有利地,获得改进的宫颈癌筛查。注意,诸如US 2009/0046905 A1的系统的已知系统,例如,通过从宫颈图像中提取多种特征,尝试处理宫颈区域的多种表现。不利地,对于具体类型的宫颈图像不能够优化进一步分析和/或处理。不利地,为了允许进一步分析和/或处理被选择性地应用到所述类型的宫颈图像,需要手动标注。
任选地,分析器被布置用于:
-计算宫颈区域的多个图像特征,多个图像特征中的每个指示用于提高宫颈区域中的病变的可见性的多种不同技术中的相应一个的使用;以及
-分析多个图像特征中的一个或多个,以确定在获得宫颈图像中多个不同技术中的至少一个的使用。
不同技术可以用于提高宫颈区域中的病变的可见性。例如,在获得宫颈图像之前,可以将染色剂应用到宫颈区域。另一范例是在宫颈图像的采集期间的绿滤波器的前述使用。通过计算宫颈区域的多个图像特征,每个图像特征与用于提高宫颈区域中的病变的可见性的不同技术相关联,能够确定在获得宫颈图像中是否使用了不同技术中的至少一个。有利地,正确地标注宫颈图像,不考虑在获得宫颈图像中使用不同技术中的哪项技术。
任选地,标注器被布置用于根据使用多个不同技术中的哪些技术来标注宫颈图像。可以组合多个不同技术中的某些技术。例如,在图像采集期间绿滤波器的使用可以与将醋酸应用到宫颈区域进行组合。通过根据使用多个不同技术中的哪些技术来标注宫颈图像,正确地标注宫颈图像,即使组合了若干不同技术。
任选地,多个不同技术包括以下中的至少一个:在图像采集期间使用绿滤波器;将染色剂应用到宫颈区域;以及,对宫颈区域进行缩放。所述技术很适合于提高宫颈区域中的病变的可见性,以及由此有可能被使用。
任选地,染色剂是以下中的至少一个:醋酸和卢戈碘。
任选地,分析器被布置用于,通过将图像特征与根据患者的早前宫颈图像计算的参考图像特征进行比较,确定醋酸的使用。由此,分析器利用这样的事实,在一系列宫颈图像上病变以瞬态方式(例如,通过转变成醋酸白并且变回)变化。
任选地,分析器被布置用于,基于所述比较,确定宫颈图像是醋酸前宫颈图像还是醋酸后宫颈图像。
任选地,分析器被布置用于,基于确定以下中的至少一个的缺失来确定卢戈碘的使用:在图像采集期间使用绿滤波器;以及,将醋酸应用到宫颈区域。
任选地,分析器被布置用于,通过以下方式确定使用多个不同技术中的哪项:
-分析一个或多个图像特征,以确定是否应用了绿滤波器、是否应用了卢戈碘、或者宫颈区域是否表现正常;
-如果宫颈区域表现正常,确定宫颈图像是令人满意的缩放还是不令人满意的缩放的宫颈图像,和/或宫颈图像是醋酸前宫颈图像还是醋酸后宫颈图像。
发明人已经认识到,技术的某些组合可以发生,而其他不可能发生。以上层次化的途径考虑所述事实。有利地,能够更有效率地(即,较低计算复杂性)确定多个不同技术中的一个或多个的使用。
任选地,分析器被布置用于,通过i)计算宫颈区域的尺寸,以及ii)分析宫颈区域的尺寸以确定在宫颈图像中是否令人满意地对宫颈区域进行缩放,从而确定对宫颈区域进行缩放的使用。
任选地,分析器被布置用于确定,对于基于宫颈区域的尺寸的所述分析的进一步分析和/或处理,所述宫颈图像是不令人满意的。
本领域技术人员将认识到,可以以认为有用的任何方式对本发明的上述实施例、实施方式和/或方面中的两个或更多进行组合。
基于本说明书,能够由本领域技术人员实现对应于描述的系统的修改和变型的工作站、成像装置、阴道镜、方法和/或计算机程序产品的修改和变型。
在独立权利要求中定义本发明。在从属权利要求中定义有利实施例。
附图说明
参考下文描述的实施例,本发明的这些和其他方面将显而易见并得以阐述。在附图中,
图1示出了用于基于在获得宫颈图像中是否使用了用于提高病变的可见性的技术来标注宫颈图像的系统;
图2示出了用于标注宫颈图像的方法;
图3示出了用于执行所述方法的计算机程序产品;
图4示出了阴道镜检查过程的工作流程;以及
图5示出了根据使用多个不同技术中的哪些技术的宫颈图像的标注。
具体实施方式
图1示意性地示出了用于标注在患者的阴道镜检查期间获得的宫颈图像110的系统100。系统100包括检测器120,其用于检测宫颈图像110中的宫颈区域122。系统100还包括分析器140,其用于计算宫颈区域122的图像特征,并且分析所述图像特征以获得确定的使用142。为了该目的,分析器140被示为接收来自检测器120的宫颈区域122,或指示其的数据。例如,分析器140可以接收以坐标的形式的宫颈区域122。分析器140还被示为接收宫颈图像110,从而使分析器140能够计算宫颈区域122的图像特征。备选地或额外地,分析器140可以接收以宫颈区域122的图像数据的形式的宫颈区域122。因此,分析器140可以不需要接收所有的宫颈图像122。系统100还包括标注器160,其用于基于确定的使用142来标注宫颈图像110。为了该目的,标注器160被示为(例如,以使用数据的形式)接收来自分析器140的确定的使用142。标注器160还被示为接收宫颈图像110。在该范例中,标注器160可以明确地标注宫颈图像110,例如,通过将元数据包括在宫颈图像110的标题,以及从而产生标注的宫颈图像作为输出162。备选地或额外地,标注器160可以产生以标注数据的形式的分开的标注作为输出162,所述分开的标注与宫颈图像110相关联,但被分开地提供。因此,标注器160可以不需要接收宫颈图像110。
系统100的操作可以被简单地解释如下。检测器120检测宫颈图像110中的宫颈区域122。然后分析器140计算宫颈区域122的图像特征,所述图像特征指示用于提高宫颈区域中的病变的可见性的技术的使用。分析器140进一步分析图像特征以确定在获得宫颈图像110中是否使用了所述技术,从而获得确定的使用142。最后,标注器160基于确定的使用142标注宫颈图像110。
图2示出了用于标注在患者的阴道镜检查期间获得的宫颈图像的方法200。注意,方法200可以对应于系统100的操作。然而,也可以独立于所述系统100执行方法200,例如,在不同系统或设备上执行方法200。方法200包括,在题为“检测宫颈区域”的步骤中,检测210宫颈图像中的宫颈区域。方法200还包括,在题为“计算宫颈区域的图像特征”的步骤中,计算220宫颈区域的图像特征,所述图像特征指示用于提高宫颈区域中的病变的可见性的技术的使用。方法200还包括,在题为“分析图像特征”的步骤中,分析230图像特征以确定在获得宫颈图像中是否使用了所述技术,从而获得确定的使用。方法200还包括,在题为“标注宫颈图像”的步骤中,基于确定的使用标注240所述宫颈图像。
图3示出了计算机程序产品260,所述计算机程序产品260包括用于令处理器系统执行根据本发明的方法的指令。计算机程序产品260可以被包括在计算机可读介质250上,例如,作为一系列机器可读物理标记和/或作为具有不同电学(例如,磁性)或光学特性或值的一系列元件。
可以参考图4和图5进一步解释系统100的操作和方法200。图4示出了可以由临床医生执行的阴道镜检查过程的工作流程300。阴道镜检查的第一阶段310可以包括灌洗和清洁发生在宫颈区域以及宫颈区域的邻接区域的任何分泌物。为了该目的,可以使用生理盐溶液。因此,在阴道镜检查的该阶段310,可以不使用用于提高宫颈区域中的病变的可见性的具体技术。因此,如果在阴道镜检查的该阶段310使用阴道镜采集宫颈图像110,宫颈图像可以被认为是‘正常’宫颈图像,并且因此可以要求对它进行标注。在阴道镜检查的该阶段310,阴道镜也可以对宫颈区域进行缩放。由于缩放允许临床医生获得宫颈区域以及由此其中病变的更好的视图,其构成用于提高宫颈区域中的病变的可见性的技术144。因此,在该阶段310采集的宫颈图像110也可以是令人满意的缩放的宫颈图像。备选地,在某些情形下,宫颈图像也可以被认为是不令人满意缩放的宫颈图像。
阴道镜检查的第二阶段320可以包括使用绿滤波器以突显血管图样中的某些血液图样,其可以指示宫颈区域中的病变。因此,在阴道镜检查的该阶段320采集的宫颈图像110可以是绿滤波器宫颈图像。绿滤波器的强度(即,通过和/或阻止光谱的宽度)可以改变。在使用‘强’绿滤波器的情况下,宫颈图像110可以是绿+滤波器宫颈图像。在使用‘弱’绿滤波器的情况下,宫颈图像110可以是绿-滤波器宫颈图像。阴道镜检查的第三阶段330可以包括将醋酸(例如3-5%醋酸溶液)应用到宫颈区域。因此,在阴道镜检查的该阶段330采集的宫颈图像110可以是醋酸后的宫颈图像。阴道镜检查的第四阶段340可以包括将卢戈碘应用到宫颈区域。因此,在阴道镜检查的该阶段340采集的宫颈图像110可以是醋酸后的宫颈图像。最后,阴道镜检查的第五阶段350可以包括执行来自宫颈异常区的活检。
注意,阴道镜检查过程的以上工作流程是范例性的,其通常随国家和地区而改变。具体而言,在许多国家和地区可以省略将卢戈碘应用到宫颈区域的阶段。
可以不知道在获得宫颈图像中是否,以及如果,使用了用于提高宫颈区域中的病变的可见性的哪项技术。为此的原因可以是不知道在阴道镜检查的哪个阶段来采集宫颈图像,在阶段期间实际上应用了哪些技术,以及阴道镜检查包括哪些阶段。本发明涉及确定在获得宫颈图像以及因此标注宫颈图像中是否使用了技术。
为了该目的,检测器120可以如下方式检测宫颈图像中的宫颈区域122。最初,高斯低通滤波器可以被应用到宫颈图像的RGB值以去除脉冲噪声。这可以跟随两步法,以基于粉红色的宫颈识别在宫颈图像中粉红像素的存在。在第一步骤中,对于宫颈区域检测,可以识别特征空间。特征空间可以被定义为RGB色彩空间的红色分量,其中,红色值超过阈值Th。可以实验性地定义阈值Th,例如,在8-位色值的情况下具有值225。已经识别了特征空间,可以应用基于K-均值的非监督两类聚类技术。然后宫颈图像中的中心簇可以被识别为宫颈区域。宫颈区域122的以上检测基于检测在色彩滤波之后获得的宫颈区域的凸壳。备选地,也可以使用来自医学图像分析领域的其他宫颈区域检测算法或分割算法。
图5示出了根据在获得宫颈图像中使用的多个不同技术中的哪些技术对宫颈图像110进行标注。多个不同技术144可以包括以下中的一个或多个:例如,在图像采集期间使用绿滤波器;将染色剂应用到宫颈区域;以及,对宫颈区域进行缩放。此处,染色剂可以是,例如,醋酸或卢戈碘。因此,为了标注宫颈图像,分析器140可以被布置用于计算宫颈区域122的多个图像特征,多个图像特征中的每个指示多个不同技术144中的相应一个的使用。分析器140还可以被布置用于分析多个图像特征中的一个或多个,以确定在获得宫颈图像中多个不同技术中的至少一个的使用。此外,标注器160可以被布置用于根据使用多个不同技术中的哪些技术来标注宫颈图像110。因此,利用一个或多个标注可以标注宫颈图像110。
图5示意性地图示了通过从宫颈图像110到多个标注的箭头对宫颈图像110进行标注,所述多个标注被指示如下:NRML指示正常的宫颈图像,ZM指示令人满意的缩放的宫颈图像,PR-AC指示醋酸前宫颈图像,PO-AC指示醋酸后宫颈图像,UN-ZM指示不令人满意的缩放的宫颈图像,GRN指示绿滤波器宫颈图像,LU-IO指示卢戈碘宫颈图像。图5也示意性地指示,如在图4中示出的,在阴道镜检查过程300的哪个阶段期间,借助于虚线边框最可能采集宫颈图像110。为了根据图5标注宫颈图像110,分析器140可以被布置用于,通过分析一个或多个图像特征来确定使用多个不同技术144中的哪个,以确定是否应用了绿滤波器GRN、是否应用了卢戈碘LU-IO、或者宫颈区域是否出现正常的NRML,以及如果宫颈区域表现正常,确定宫颈图像是令人满意的缩放ZM还是不令人满意缩放UN-ZM的宫颈图像,和/或宫颈图像是醋酸前PR-AC宫颈图像还是醋酸后PO-AC宫颈图像。
注意,以上一些标注是互相排斥的,而其他则不是。是否是这种情况取决于具体技术和阴道镜检查过程。例如,在该具体范例中,由于通常在应用卢戈碘期间或之后不使用绿滤波器,指示绿滤波器使用的标注GRN和指示卢戈碘的应用的标注LU-IO不可能都被应用。然而,可以同时都应用指示醋酸后应用的标注PO-AC和指示对宫颈区域进行缩放的标注ZM。
在下文中,提供可以如何实现对根据图5的宫颈图像110进行标注的更详细范例。
在第一步骤中,将由检测器120检测的宫颈区域122被转换成二元掩模。然后,基于二元掩模的面积和宫颈图像110的总面积的比率,计算所谓的可感知放大级别。
在第二步骤中,如果宫颈区域122的面积超过预定阈值,则确定宫颈图像是否是来自一系列图像中的第一图像。在这种情况下,宫颈图像被标注为正常,即,NRML,并且对R/G色彩通道比率进行预计算,以在标注来自一系列图像中的后续图像中使用:
a、随机地从宫颈区域中采样N(例如,100-200)个像素;
b、基于强度对像素进行分类;
c、计算第一(N/2)像素中的每个色彩通道的均值强度M1,M1是3-通道矢量,即,(R、G、B);
d、计算R/G比率R1=M1(1)/M1(2),即,将红色通道的均值强度除以绿色通道的均值强度。
在第三步骤中,如果宫颈图像不是来自一系列图像中的第一图像,通过以下方式确定宫颈图像是否是醋酸后宫颈图像:
a、随机地从宫颈区域中采样N个像素,考虑计算复杂性和执行性,值N可以被选择为大约200;
b、基于强度对像素进行分类;
c、计算例如,第一100个像素的均值强度M2
d、计算R/G比率R2=M2(1)/M2(2),并且使用关系‘R1>R2+Δ’将R1和R2进行比较;
e、如果满足所述关系,应用标注醋酸后,即PO-AC,否则正常,即NRML。
在第四步骤中,如果宫颈区域122的面积超过预定上限阈值Th,并且如果其满足某些位置要求,宫颈图像110被认为是充分缩放的图像,即,令人满意的缩放的图像。位置要求的范例是宫颈区域处在宫颈图像的中心。位置要求也可以考虑,宫颈区域明显位于所述中心之外,以及由此宫颈区域的部分位于所述中心之外。因此,应用标注ZM。否则,在以下第五步骤中继续以上处理。
在第五步骤中,如果宫颈区域122的面积在预定下限阈值Tl以下,则通过比较红色分量和绿色分量的平均强度,确定宫颈图像是否是绿滤波器图像。此处,如果绿色分量的平均强度高于红色分量的平均强度,宫颈图像被认为是绿滤波器宫颈图像,并且应用标注GRN。任选地,如果绿色分量的平均强度明显高于红色分量的平均强度,则可以应用标注GRN+,并且如果绿色分量的平均强度稍微高于红色分量的平均强度,可以应用标注GRN-。如果所述标注中的两个都不被应用,在以下第六步骤中继续以上处理。
在第六步骤中,从图像中随机地采样许多像素,其用色彩启发法验证。在分析若干经标注的图像之后,可以实验性地导出这样的色彩启发法。对于卢戈碘染色的图像,宫颈区域通常具有呈褐色/带黑色/带黄色种类的表现。因此,色彩启发法可以核对这些色彩/色调的存在,并且如果满足所述启发法的像素的数量N大于阈值NT,宫颈图像被认为是卢戈碘染色的宫颈图像,并且应用标注LU-IO。任选地,如果像素的数量N大于上限阈值NH,可以应用标注LU-IO+。备选地,如果像素的数量N大于下限阈值NL,可以应用标注LU-IO-。如果像素的数量N低于NL,在以下第七步骤中继续以上处理。
在第七步骤中,如果在最后四个步骤中宫颈图像110未被标注,声明为不令人满意的阴道镜检查图像并且不适于分析。如果可应用,也将不令人满意的缩放的标注UN-ZO应用到宫颈图像。
通常,分析器140可以被布置用于,通过将图像特征与根据患者的早前宫颈图像计算的参考图像特征进行比较来确定醋酸PR-AC、PO-AC的使用,如果在醋酸的使用之后获得宫颈图像,没有所述使用最可能获得所述患者的早前宫颈图像。基于时间戳,尤其宫颈图像和假定的早前宫颈图像的时间步骤的比较,可以识别早前宫颈图像。在所述系统涉及采集宫颈图像的情况下,所述系统可以自动地激活时间戳模式,使得时间信息可用于采集的图像。此外,分析器140可以被布置用于,基于所述比较来确定宫颈图像110是醋酸前PR-AC宫颈图像还是醋酸后PO-AC宫颈图像。分析器140可以被布置用于,基于确定以下中的至少一个的缺失来确定卢戈碘LU-IO的使用:在图像采集期间使用绿滤波器GRN,以及将醋酸应用到宫颈区域PR-AC、PO-AC。分析器140可以被布置用于,通过以下方式来确定对宫颈区域122进行缩放ZM的使用:i)计算宫颈区域的尺寸,以及ii)分析宫颈区域的尺寸以确定在宫颈图像110中是否令人满意地对宫颈区域进行了放大。
将认识到,本发明也应用于计算机程序,尤其在载体上或内的计算机程序,其适于将本发明付诸实践。所述程序可以是源代码、目标代码、源和目标代码中间的代码(诸如,部分编译的形式)的形式,或适合于在根据本发明的方法的实施中使用的任何其他形式。也应当认识到,这样的程序可以具有许多不同的架构设计。例如,实施根据本发明的方法或系统的功能的程序代码可以被分为一个或多个子例程。将功能分布在这些子例程之间的许多不同方式对本领域技术人员来说将是显而易见的。子例程可以一起被存储在一个可执行文件中,以形成自含程序。这样的可执行文件可以包括计算机可执行指令,例如,处理器指令和/或解读器指令(例如,Java解读器指令)。备选地,一个或多个或所有子例程可以被存储在至少一个外部库文件中,并且例如在运行时,静态地或动态地与主程序链接。主程序包含对子例程中的至少一个的至少一个调用。子例程也可以包括对彼此的函数调用。涉及计算机程序产品的实施例包括对应于本文提出的方法中的至少一个的每个处理步骤的计算机可执行指令。这些指令可以被分为子例程,和/或被存储在可以静态地或动态地被链接的一个或多个文件中。涉及计算机程序产品的另一实施例包括对应于本文提出的系统和/或产品中的至少一个的每个模块的计算机可执行指令。这些指令可以被分为子例程,和/或被存储在可以静态地或动态地被链接的一个或多个文件中。
计算机程序的载体可以是能够承载程序的任何实体或设备。例如,载体可以包括存储介质,诸如,ROM(例如,CD ROM或半导体ROM)或磁记录介质(例如,硬盘)。此外,载体可以是可传送载体,诸如电信号或光信号,其可以经由电缆或光缆或通过无线电或其他手段进行输送。当在这样的信号中体现程序时,载体可以由这样的缆线或其他设备或器件构成。备选地,载体可以是集成电路,在所述集成电路中体现程序,所述集成电路适于执行相关方法,或用于相关方法的执行。
应当注意,上述实施例图示而非限制本发明,并且本领域技术人员将能够在不偏离权利要求的范围的情况下设计许多备选实施例。在权利要求中,置于括号中的任何附图标记都不应被解释为限制权利要求。动词“包括”和其词形变化的使用不排除权利要求中列出之外的元件或步骤存在。元件前的词语“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括若干不同元件的硬件,以及借助适当编程的计算机来实施。在枚举了若干器件的装置型权利要求中,这些器件中的若干可以被包含在同一硬件项中。尽管在互不相同的从属权利要求中记载了特定措施,但是这并不指示不能有利地使用这些措施的组合。

Claims (14)

1.一种用于标注在患者的阴道镜检查期间获得的宫颈图像(110)的系统(100),所述系统包括:
-检测器(120),其用于检测所述宫颈图像中的宫颈区域(122);
-分析器(140),其用于i)计算所述宫颈区域(122)的图像特征,所述图像特征指示用于提高所述宫颈区域中的病变的可见性的技术的使用,所述技术来自多个不同技术(144),所述多个不同技术(144)包括以下中的至少一个:在图像采集期间使用绿滤波器;将染色剂应用到所述宫颈区域;以及,对所述宫颈区域进行缩放,以及ii)分析所述图像特征中的一个或多个以确定在获得所述宫颈图像(110)中是否使用了所述技术,从而获得确定的使用(142);以及
-标注器(160),其用于基于所述确定的使用(142)来标注所述宫颈图像(110)。
2.根据权利要求1所述的系统(100),其中,所述分析器(140)被布置用于:
-计算所述宫颈区域(122)的多个图像特征,所述多个图像特征中的每个指示用于提高所述宫颈区域中的病变的可见性的多个不同技术(144)中的相应一个的所述使用;以及
-分析所述多个图像特征中的一个或多个,以确定在获得所述宫颈图像中所述多个不同技术中的至少一个的所述使用。
3.根据权利要求2所述的系统(100),其中,所述标注器(160)被布置用于根据使用了所述多个不同技术(144)中的哪些技术来标注所述宫颈图像。
4.根据权利要求1所述的系统(100),其中,所述染色剂是以下中的至少一个:醋酸和卢戈碘。
5.根据权利要求4所述的系统(100),其中,所述分析器(140)被布置用于,通过将所述图像特征与根据所述患者的早前宫颈图像计算的参考图像特征进行比较来确定醋酸的使用。
6.根据权利要求5所述的系统(100),其中,所述分析器(140)被布置用于,基于所述比较来确定所述宫颈图像(110)是醋酸前宫颈图像还是醋酸后宫颈图像。
7.根据权利要求4所述的系统(100),其中,所述分析器(140)被布置用于,基于确定以下中的至少一个的缺失来确定卢戈碘的使用:在图像采集期间使用所述绿滤波器;以及,将醋酸应用到所述宫颈区域。
8.根据权利要求1所述的系统(100),其中,所述分析器(140)被布置用于通过以下方式确定使用了所述多个不同技术(144)中的哪个:
-分析所述一个或多个图像特征,以确定是否应用了所述绿滤波器、是否应用了卢戈碘、或者所述宫颈区域是否表现正常;
-如果所述宫颈区域表现正常,则确定所述宫颈图像是令人满意缩放的宫颈图像还是不令人满意缩放的宫颈图像,和/或所述宫颈图像是醋酸前宫颈图像还是醋酸后宫颈图像。
9.根据权利要求1所述的系统(100),其中,所述分析器(140)被布置用于,通过以下方式来确定对所述宫颈区域(122)进行缩放的使用:i)计算所述宫颈区域的尺寸,以及ii)分析所述宫颈区域的所述尺寸以确定在所述宫颈图像(110)中是否令人满意地对所述宫颈区域进行了放大。
10.根据权利要求9所述的系统(100),其中,所述分析器(140)被布置用于基于对所述宫颈区域(122)的所述尺寸的所述分析来确定所述宫颈图像(110)针对进一步分析和/或处理是不令人满意的。
11.一种包括根据权利要求1所述的系统的工作站或成像装置。
12.一种包括根据权利要求1所述的系统的阴道镜。
13.一种用于标注在患者的阴道镜检查期间获得的宫颈图像的方法(200),所述方法包括:
-检测(210)所述宫颈图像中的宫颈区域;
-计算(220)所述宫颈区域的图像特征,所述图像特征指示用于提高所述宫颈区域中的病变的可见性的技术的使用,所述技术来自多个不同技术,所述多个不同技术包括以下中的至少一个:在图像采集期间使用绿滤波器;将染色剂应用到所述宫颈区域;以及,对所述宫颈区域进行缩放;
-分析(230)所述图像特征中的一个或多个以确定在获得所述宫颈图像中是否使用了所述技术,从而获得确定的使用;以及
-基于所述确定的使用来标注(240)所述宫颈图像。
14.一种用于标注在患者的阴道镜检查期间获得的宫颈图像的装置,包括:
-用于检测(210)所述宫颈图像中的宫颈区域的单元;
-用于计算(220)所述宫颈区域的图像特征的单元,所述图像特征指示用于提高所述宫颈区域中的病变的可见性的技术的使用,所述技术来自多个不同技术,所述多个不同技术包括以下中的至少一个:在图像采集期间使用绿滤波器;将染色剂应用到所述宫颈区域;以及,对所述宫颈区域进行缩放;
-用于分析(230)所述图像特征中的一个或多个以确定在获得所述宫颈图像中是否使用了所述技术,从而获得确定的使用的单元;以及
-用于基于所述确定的使用来标注(240)所述宫颈图像的单元。
CN201380049028.8A 2012-09-21 2013-09-13 标注宫颈图像 Expired - Fee Related CN104661584B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261704140P 2012-09-21 2012-09-21
US61/704,140 2012-09-21
PCT/IB2013/058523 WO2014045174A1 (en) 2012-09-21 2013-09-13 Labeling a cervical image

Publications (2)

Publication Number Publication Date
CN104661584A CN104661584A (zh) 2015-05-27
CN104661584B true CN104661584B (zh) 2017-06-27

Family

ID=49709770

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380049028.8A Expired - Fee Related CN104661584B (zh) 2012-09-21 2013-09-13 标注宫颈图像

Country Status (4)

Country Link
CN (1) CN104661584B (zh)
BR (1) BR112015006004A2 (zh)
RU (1) RU2659013C2 (zh)
WO (1) WO2014045174A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109543719B (zh) * 2018-10-30 2020-09-08 浙江大学 基于多模态注意力模型的宫颈非典型病变诊断模型和装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102298666A (zh) * 2010-06-28 2011-12-28 深圳市金科威实业有限公司 用于进行图像质量评估的阴道镜网络系统及方法
CN202288239U (zh) * 2011-08-12 2012-07-04 三维医疗科技江苏股份有限公司 一种以单片机为核心的数字式阴道镜

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GR1004180B (el) * 2000-03-28 2003-03-11 ����������� ����� ��������� (����) Μεθοδος και συστημα χαρακτηρισμου και χαρτογραφησης αλλοιωσεων των ιστων
WO2002025588A2 (en) * 2000-09-21 2002-03-28 Md Online Inc. Medical image processing systems
US20050235272A1 (en) * 2004-04-20 2005-10-20 General Electric Company Systems, methods and apparatus for image annotation
US7664300B2 (en) 2005-02-03 2010-02-16 Sti Medical Systems, Llc Uterine cervical cancer computer-aided-diagnosis (CAD)
BRPI0808578A2 (pt) * 2007-04-11 2014-09-09 Forth Photonics Ltd "uma estrutura de suporte e uma estação de trabalho incorporado a estrutura de suporte para aperfeiçoar, objetivar e documentar in vivo exames do útero"
RU2429779C2 (ru) * 2009-07-22 2011-09-27 Общество с ограниченной ответственностью "Диагностика +" (ООО "Диагностика +") Способ диагностики состояния органов человека или животного и устройство для его осуществления
WO2012123881A2 (en) * 2011-03-16 2012-09-20 Koninklijke Philips Electronics N.V. Medical instrument for examining the cervix

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102298666A (zh) * 2010-06-28 2011-12-28 深圳市金科威实业有限公司 用于进行图像质量评估的阴道镜网络系统及方法
CN202288239U (zh) * 2011-08-12 2012-07-04 三维医疗科技江苏股份有限公司 一种以单片机为核心的数字式阴道镜

Also Published As

Publication number Publication date
WO2014045174A1 (en) 2014-03-27
BR112015006004A2 (pt) 2017-07-04
CN104661584A (zh) 2015-05-27
RU2015114810A (ru) 2016-11-10
RU2659013C2 (ru) 2018-06-26

Similar Documents

Publication Publication Date Title
CN103020585B (zh) 一种免疫组织阳性细胞和阴性细胞识别方法
Navarro et al. Accurate segmentation and registration of skin lesion images to evaluate lesion change
US11315245B2 (en) Semi-automated system for real-time wound image segmentation and photogrammetry on a mobile platform
Fauzi et al. Computerized segmentation and measurement of chronic wound images
US10650221B2 (en) Systems and methods for comprehensive multi-assay tissue analysis
CN110600122B (zh) 一种消化道影像的处理方法、装置、以及医疗系统
Liu et al. A framework of wound segmentation based on deep convolutional networks
JP5200101B2 (ja) Ct画像データにおける出血性脳卒中の検出
CN103442628A (zh) 用于检查宫颈的医疗器械
JP2006500124A (ja) 医療画像をコンピュータ支援検出(cad)のガイドによって読み取る方法及びシステム
US11967181B2 (en) Method and device for retinal image recognition, electronic equipment, and storage medium
US20230052133A1 (en) Medical image processing method and apparatus, device, storage medium, and product
CN103327883A (zh) 医用图像处理装置和医用图像处理方法
WO2016154116A1 (en) Systems, methods, and apparatuses for digital histopathological imaging for prescreened detection of cancer and other abnormalities
CN112071418B (zh) 基于增强ct影像组学的胃癌腹膜转移的预测系统及方法
EP2584526B1 (en) Image processing device, image processing method, and image processing program
CN105975955B (zh) 一种图像中文本区域的检测方法
CN104661584B (zh) 标注宫颈图像
Figueiredo et al. Unsupervised segmentation of colonic polyps in narrow-band imaging data based on manifold representation of images and Wasserstein distance
WO2019223121A1 (zh) 病变部位识别方法及装置、计算机装置及可读存储介质
US11430116B2 (en) Systems and methods for processing electronic images to provide localized semantic analysis of whole slide images
Popescu et al. Detection of small tumors of the brain using medical imaging
Oliveira et al. Automatic detection of microaneurysm based on the slant stacking
CN102176229B (zh) 结肠镜图像序列识别方法及系统
Osborne et al. Machine classification of melanoma and nevi from skin lesions

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170627