CN115381490A - 超声波诊断装置以及诊断辅助方法 - Google Patents

超声波诊断装置以及诊断辅助方法 Download PDF

Info

Publication number
CN115381490A
CN115381490A CN202210572914.XA CN202210572914A CN115381490A CN 115381490 A CN115381490 A CN 115381490A CN 202210572914 A CN202210572914 A CN 202210572914A CN 115381490 A CN115381490 A CN 115381490A
Authority
CN
China
Prior art keywords
data sequence
smoothing
lesion
frame data
marker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210572914.XA
Other languages
English (en)
Inventor
井上健太
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Healthcare Corp
Original Assignee
Fujifilm Healthcare Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Healthcare Corp filed Critical Fujifilm Healthcare Corp
Publication of CN115381490A publication Critical patent/CN115381490A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/085Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating body or organic structures, e.g. tumours, calculi, blood vessels, nodules
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0825Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • A61B8/15Transmission-tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/523Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for generating planar views from image data in a user selectable plane not corresponding to the acquisition plane
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/174Segmentation; Edge detection involving the use of two or more images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/181Segmentation; Edge detection involving edge growing; involving edge linking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20182Noise reduction or smoothing in the temporal domain; Spatio-temporal filtering

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Vascular Medicine (AREA)
  • Physiology (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Geometry (AREA)
  • Quality & Reliability (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本发明提供一种超声波诊断装置以及诊断辅助方法。图像解析部(28)按照每个断层图像来进行病变部的检测。图像解析部(28)在病变部检测状态下,输出表示病变部的位置以及尺寸的时间性变化的位置数据列以及尺寸数据列。变化率运算部(33)对表示断层图像内容的时间性变化的程度的变化率进行运算。平滑化部(34)根据变化率,对位置数据列以及尺寸数据列进行平滑化。基于进行了平滑化的位置数据列以及尺寸数据列来生成标记。

Description

超声波诊断装置以及诊断辅助方法
技术领域
本公开涉及超声波诊断装置以及诊断辅助方法,特别涉及在超声波图像上显示对病变部进行通知的标记的技术。
背景技术
在乳房的超声波检查中,与乳房的表面抵接的探测器沿着乳房的表面进行扫描。在该扫描的过程中,由检查者来观察显示在显示器的实时断层图像,通过该观察来判断有无病变部。在找到了病变部的情况下,将其周围组织包括在内而对病变部详细地进行检查。这在其他脏器的超声波检查中也是同样的。
在视觉上确定在实时变化的断层图像上暂时性地显现的病变部并不容易。特别在乳房的超声波检查中,断层图像上显现的组织具有多层构造,检查者瞬时地识别其中所包括的病变部并不容易。
作为辅助病变部的确定的技术,有CADe(Computer Aided Detection,计算机辅助检测)。该技术例如按照每帧来检测断层图像内的病变部(正确而言,是病变部候补),在断层图像内包括病变部的情况下对其进行通知。例如,在断层图像上显示包围病变部的标记。CADe与CAD(Computer Aided Diagnosis,计算机辅助诊断)一起被利用或包括于CAD。
在文献1(日本特开2020-178989公报)中公开了具备CAD功能的医疗装置。该医疗装置具备通过根据探测器扫描速度使标记的颜色变化从而针对检查者提示探测器扫描速度的功能。在文献1中,未公开与标记的平滑化有关的技术。另外,在本申请说明书中,病变部意味着有可能是疾患的部位或有必要进行精查的部位。
发明内容
发明要解决的课题
在搭载有CADe功能或CAD功能的超声波诊断装置中,在超声波图像上显示对病变部进行通知的标记。通过标记的出现以及其持续性的显示,能够对检查者通知存在病变部这样的情况,由此对检查者促使进行病变部的详细检查。
然而,若尽管超声波图像的内容几乎不变化也根据各个病变部检测结果而忠实地生成以及显示标记,则根据状况,标记的显示会变得不稳定。若标记的位置、尺寸按照每个帧而时刻地变化,则标记闪烁地显示,会给观察标记的检查者带来压力、不安感。相对于此,也考虑在应用某些平滑化处理的基础上显示标记,但在该情况下,在超声波图像的内容大幅变化的状况下,可能产生不能针对瞬时性地显现的病变部而响应性优良地显示标记这样的问题。这可能成为看漏病变部的主要因素。
本公开的目的在于,通过标记来通知检测出的病变部的情况下进行与状况相适合的标记显示。
用于解决课题的手段
本公开涉及的超声波诊断装置的特征在于,包括:解析部,基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此输出所在数据列;平滑化部,根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所述所在数据列进行平滑化,由此输出进行了平滑化的所在数据列;和生成部,根据进行了平滑化的所述所在数据列,生成对所述病变部进行通知的标记,在基于所述帧数据列而形成的超声波图像上显示所述标记。
本公开涉及的诊断辅助方法的特征在于,包括:基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此生成所在数据列的工序;根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所述所在数据列进行平滑化,由此生成进行了平滑化的所在数据列的工序;和根据进行了平滑化的所述所在数据列来生成对所述病变部进行通知的标记的工序,在基于所述帧数据列而形成的超声波图像上显示所述标记。
本公开涉及的程序,是用于在信息处理装置中执行诊断辅助方法的程序,其特征在于,所述程序包括:基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此生成所在数据列的功能;根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所述所在数据列进行平滑化,由此生成进行了平滑化的所在数据列的功能;和根据进行了平滑化的所述所在数据列来生成对所述病变部进行通知的标记的功能,并在基于所述帧数据列而形成的超声波图像上显示所述标记。
附图说明
图1是示出实施方式涉及的超声波诊断装置的框图。
图2是示出标记显示处理的图。
图3是示出平滑化部的结构例的图。
图4是示出变化率与平滑化数的关系的图。
图5示出权重函数的一个例子。
图6是示出第1显示例的图。
图7是示出第2显示例的图。
图8是示出平滑化处理的一个例子的图。
图9是示出第1动作例的流程图。
图10是示出第2动作例的流程图。
具体实施方式
以下,基于附图来对实施方式进行说明。
(1)实施方式的概要
实施方式涉及的超声波诊断装置,具有解析部、平滑化部以及生成部。解析部基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此输出所在数据列。平滑化部根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所在数据列进行平滑化,由此输出进行了平滑化的所在数据列。生成部根据进行了平滑化的所在数据列,生成对病变部进行通知的标记。在基于帧数据列而形成的超声波图像上显示标记。解析部相当于解析器(analyzer)。平滑化部相当于平滑化器(smoother、filter(滤波器))。生成部相当于生成器(generator)。
根据上述结构,根据进行了平滑化的所在数据列来显示标记。此时,根据表示帧数据内容的时间性变化的程度的变化率来决定平滑化度。若在变化率小的情况下,即在如超声波图像的内容没怎么变化那样的情况下,使平滑化度增大,则能够防止或减轻标记显示变得不稳定。例如,能够抑制闪烁地显示标记的现象。另一方面,若在变化率大的情况下,即在超声波图像的内容大幅变化的情况下,使平滑化度减小,则能够响应性优良地显示标记,由此能够防止或减轻瞬时性地显现的病变部的看漏。根据实施方式涉及的结构,能够实现与状况相适合的标记显示,因此能提高标记显示的可靠性。
病变部的所在意味着在超声波图像内存在病变部的场所或部位。作为病变部的所在,既可以确定出代表病变部的多个点,也可以确定出存在病变部的区域或包含病变部的区域。作为变化率或在变化率的运算时,也可以参照探测器移动信息、帧数据间的差分信息、收发波帧频等。
在实施方式中,解析部确定病变部的位置以及尺寸作为病变部的所在,并输出位置数据列以及尺寸数据列作为所在数据列。平滑化部包括对位置数据列进行平滑化的第1平滑化部和对尺寸数据列进行平滑化的第2平滑化部。生成部根据进行了平滑化的位置数据列以及进行了平滑化的尺寸数据列来生成标记。在实施方式中,位置数据列的各位置数据是表示包含病变部在内的区域的中心位置的数据,尺寸数据列的各尺寸数据是表示区域的角部位置的数据。第1平滑化部相当于第1平滑化器。第2平滑化部相当于第2平滑化器。
作为标记显示变得不稳定的主要因素,可举出针对病变部检测出的位置的时间性变动以及针对病变部检测出的尺寸的时间性变动。它们被单独地进行平滑化。由此,在如超声波图像的内容未怎么变化那样的状况下,能够稳定地显示标记整体。另外,对标记本身进行平滑化的变形例也被考虑在内。
在实施方式中,平滑化部随着变化率的增大而使平滑化度减少。根据该结构,帧数据内容的变化的程度变得越大而越重视响应性,帧数据内容的变化的程度变得越小,则越重视平滑性或稳定性。
在实施方式中,平滑化部在增减平滑化度时,使平滑化中利用的帧数据的个数增减。也可以在平滑化时利用加权函数。也可以在画面上显示表示平滑化度的数值或平滑化中利用的帧数。也可以通过用户选择或自动地设置将平滑化度固定为给定值的模式。
在实施方式中,平滑化部基于解析部的输出来判定针对病变部的时间性不连续,在判定出了时间性不连续的情况下对标记的生成进行限制。在实施方式中,平滑化部基于解析部的输出来判定针对病变部的空间性不连续,在判定出了空间性不连续的情况下对标记的生成进行限制。在判定出了时间性不连续或空间性不连续的情况下,也可以对标记的生成进行限制而使标记不显示,也可以对进行了平滑化处理的标记显示进行限制。后述的时间性连续条件的不满足判定相当于时间性不连续的判定。后述的空间性连续条件的不满足判定相当于空间性不连续的判定。
实施方式涉及的诊断辅助方法具有解析工序、平滑化工序以及生成工序。在解析工序中,基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此生成所在数据列。在平滑化工序中,根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所在数据列进行平滑化,由此生成进行了平滑化的所在数据列。在生成工序中,根据进行了平滑化的所在数据列,生成对病变部进行通知的标记。在基于帧数据列而形成的超声波图像上显示所述标记。
上述诊断辅助方法可以通过硬件的功能或通过软件的功能来实现。在后者的情况下,用于执行诊断辅助方法的程序经由可携带存储介质或网络向信息处理装置安装。在信息处理装置的概念中,包括超声波诊断装置、超声波图像处理装置以及计算机。信息处理装置具有存储有上述的程序的非暂时的存储介质。
(2)实施方式的详细情况
在图1中将实施方式涉及的超声波诊断装置的结构示为框图。超声波诊断装置设置于医院等医疗机关,是基于通过针对生命体(被检者)的超声波的收发波而获得的接收信号来形成超声波图像的医疗用的装置。成为超声波诊断对象的脏器在实施方式中例如是乳房。
在乳房的大规模筛查中,需要在短时间内并且不看漏地确定病变部。实施方式涉及的超声波诊断装置为了对基于检查者的病变部的确定进行辅助,具备对超声波图像所包括的病变部(例如低亮度的肿瘤像)自动地进行检测的CADe功能。对此将在之后详细描述。
探测器10作为对超声波进行收发的单元而发挥功能。探测器10是可携带型收发器,其由检查者(医师、检查技师等)保持以及操作。在乳房的超声波诊断时,探测器10的收发波面(具体而言是声透镜表面)与被检者的胸部表面16抵接。观察实时显示的断层图像并沿着胸部表面16手动地使探测器10进行扫描。
探测器10在图示的结构例中,具备由一维排列的多个振动元件(transducers,换能器)构成的振动元件阵列。由振动元件阵列形成超声波波束(发送波束以及接收波束)12,通过超声波波束12的电子性扫描来形成扫描面14。扫描面14是观察面,即是二维数据取入区域。作为超声波波束12的电子扫描方式,已知有电子扇形扫描方式、电子线性扫描方式等。也可以进行超声波波束12的凸面扫描。也可以在超声波探测器10内设置2D振动元件阵列,通过超声波波束的二维扫描来从生命体内获取体数据。通过重复超声波波束的扫描,来生成后述的接收帧数据列。
在图示的结构例中,设置有求出探测器10的位置信息的测位系统。测位系统由磁传感器18、磁场发生器20以及测位控制器21构成。在探测器10(正确而言是探测器中的探测器头)设置有磁传感器18。通过磁传感器18来检测由磁场发生器20生成的磁场。由此,获得磁传感器18的三维坐标信息。基于该三维坐标信息来确定探测器10的位置以及姿势。从测位控制器向标记生成部30以及主控制部38传送位置信息。
发送电路22作为发送波束成形器而发挥功能。具体地,在发送时,发送电路22针对振动元件阵列来并行地供给多个发送信号。由此,形成发送波束。在接收时,若来自生命体内的反射波到达振动元件阵列,则从多个振动元件并行地输出多个接收信号。接收电路24作为接收波束成形器而发挥功能,通过对多个接收信号进行整相相加(phase-alignmentand summing)(也称为迟延相加(delay and summing),来生成波束数据。
顺带一提,每进行1次电子扫描,生成沿电子扫描方向排列的多个波束数据,它们构成与扫描面14对应的接收帧数据。各个波束数据由沿深度方向排列的多个回波数据构成。在接收电路24的后级设置有波束数据处理部,但省略了其图示。
图像形成部26是基于接收帧数据来生成断层图像(B模式断层图像)的电子电路。其具有DSC(Digital Scan Converter,数字扫描变换器)。DSC具有坐标变换功能、像素插补功能、帧频变换功能等。更详细而言,在图像形成部26中,基于接收帧数据列来形成显示帧数据列。构成显示帧数据列的多个显示帧数据是多个断层图像数据,由它们的数据构成实时运动图像。也可以生成断层图像以外的超声波图像。例如,也可以形成颜色流映射图像,也可以形成立体地表现了组织的三维图像。显示帧数据列被传送至图像解析部28以及显示处理部32。
图像解析部28是发挥CADe功能的模块。图像解析部28按照每个显示帧数据、即按照每个断层图像来执行病变部检测处理。具体而言,使用CNN(Convolutional NeuralNetwork,卷积神经网络)等机器学习网络,从断层图像内对具有预先学习到的任意与病变部特征量类似的特征量的、区域进行探索。成为检测对象的病变部在网络的设计者处事先决定。例如,在成为检测对象的病变部中包括肿瘤性病变部、非肿瘤性病变部等。在病变部检测处理时,也可以针对断层图像而应用二值化处理、边缘检测处理等等处理。
在检测出病变部的情况下,从图像解析部28输出病变部信息。在病变部信息中包括病变部检测标志、病变部的可靠度、病变部的位置信息(位置数据)以及病变部的尺寸信息(尺寸数据)。按照每个显示帧数据,从图像解析部28向标记生成部30传送病变部信息。换言之,从图像解析部28向标记生成部30传送位置数据列以及尺寸数据列。
病变部的位置信息例如是表示与病变部相当的封闭区域的中心点(或重心点)的坐标的信息、或者表示包围病变部的图形的中心点(或重心点)的坐标的信息。病变部的尺寸信息例如是表示包括病变部的图形的大小的信息。例如,也可以定义与病变部外接并且包围病变部的矩形,根据其中心点的坐标和其左上角点的坐标来确定病变部的尺寸。在确定出中心点的坐标的前提之下,也可以将左上角点的坐标看作病变部的尺寸信息。也可以求出与病变部相当的封闭区域的面积作为病变部的尺寸信息。也可以并行地检测多个病变部。关于病变部的位置信息以及尺寸信息,可以将它们一并称为病变部的所在信息。
标记生成部30按照每个显示帧数据来基于病变部信息生成标记。标记是表示病变部存在的场所的显示要素。具体地,标记具有包围病变部的形态,可以通过观察标记来确定病变部的中心位置以及尺寸。在时间轴上连续地观察标记的情况下,标记相当于动态图形(运动图像)。在按照每个显示帧数据单独地观察标记的情况下,标记相当于静态图形(静止图像)。
实施方式涉及的标记生成部30具有变化率运算部33以及平滑化部34。变化率运算部33按照每个显示帧数据,对变化率进行运算作为表示显示帧数据内容的时间性变化的程度的信息。例如,也可以在显示帧数据间对差分或相关值进行运算,使用该运算结果作为变化率。也可以基于从测位系统输出的位置信息的时间性变化来对变化率进行运算。这是因为,在探测器移动量(探测器移动速度)大的情况下,推定为显示帧数据内容的时间性变化大,在探测器移动量小的情况下,推定为显示帧数据内容的时间性变化小。也可以基于表示显示帧数据内容的时间性变化的程度的多个信息来对变化率进行运算。
在显示帧数据间对相关值进行运算的情况下,也可以针对各个显示帧数据,基于病变部的中心位置来设定参照区域,在2个参照区域间对相关值进行运算。在该情况下,也可以按照各个坐标中的每个坐标来对像素值的差分进行运算,用像素数(面积)对这些差分的总和进行标准化,由此来对相关值进行运算。也可以基于2个参照区域间中的直方图的相关值、在2个参照区域间运算得到的光流等来对变化率进行运算。也可以在变化率的运算之前,对各显示帧数据应用分割、二值化处理等预处理。
也可以基于收发波帧频来对变化率进行运算,或者也可以将收发波帧频本身用作变化率。这是因为,在收发波帧频大的情况下,通常显示帧数据内容的时间性变化会变大,而在收发波帧频小的情况下,通常显示帧数据内容的时间性变化会变小。不过,在探测器10完全静止的情况下,显示帧数据的内容与收发波帧频无关地稳定。由此,希望使用收发波帧频作为辅助性信息。
平滑化部34执行平滑化处理。在实施方式中,针对图像解析部28生成以及输出的位置数据列以及尺寸数据列而单独地应用平滑化处理。在实施方式中,如之后使用具体例说明的那样,对与病变部外接的矩形区域的中心坐标以及左上角坐标应用平滑化处理。
变化率越小则平滑化部34使平滑化度越大,而变化率越大则平滑化部34使平滑化度越小。通过这样的平滑化度的适应性改变,从而能够兼顾超声波图像的内容未怎么变化的状况下的标记的稳定的显示、和超声波图像的内容大幅变化的状况下的响应性优良的标记显示。
实际上,平滑化部34在变化率小的情况下,使在平滑化处理中参照的数据数(平滑化数)增大,在变化率大的情况下,使在平滑化处理中参照的数据数减小。在此,数据数意味着帧数,其相当于作为从当前向过去追溯的一定期间的时间窗。参照的帧数的最大值以及最小值也可以由用户决定或自动地决定。
标记生成部30基于进行了平滑化的位置数据列以及进行了平滑化的尺寸数据列,按照每个显示帧数据来生成作为静止像的标记。标记生成部30具备用于保存为了平滑化处理所需要的数据的存储器。
更详细而言,标记生成部30仅限于在满足时间性连续条件以及空间性连续条件的情况下生成标记。在不满足时间性连续条件以及空间性连续条件中的任一者的情况下,将标记设为不显示。在作为包括当前的显示帧数据的m(其中m为2以上的整数)个显示帧数据的整体而连续地检测出了病变部的情况下,满足时间性连续条件。在成为基准的显示帧数据中的病变部中心与当前的显示帧数据中的病变部中心之间的距离为给定值以下的情况下,满足空间性连续条件。成为基准的显示帧数据例如是在病变部的连续检测状况下,在最初检测出该病变部的时间点获取到的显示帧数据。也可以将成为基准的显示帧数据作为前1个显示帧数据。
在一定的时间范围内病变部检出中断了的情况下,标记显示被限制。此外,在病变部的移动相当于不自然的跳跃的情况下,标记显示被限制。由此,能够避免在未检测出病变部位的状况下的标记显示、由误检测引起的标记的突发性显示等。
不过,有时病变部检出会由于探测器抵接状态的变化、噪声等而暂时性地中断,因而标记显示条件或标记显示限制条件也可以由检查者来变更或自动地变更。在不满足任一连续条件的情况下,也可以取代标记不显示,进行基于未进行平滑化的位置数据以及尺寸数据的、标记的生成以及显示。
在标记生成部30中,在根据变化率来决定平滑化度时,也可以利用变换表,还可以利用变换函数。在进行平滑化处理时,也可以利用权重沿着时间轴而变化的权重函数。在标记生成部30中,按照每个显示帧数据来生成包括标记的图形数据,并将该图形数据传送给显示处理部32。
图像形成部26、图像解析部28以及标记生成部30分别可以由处理器构成。单一的处理器也可以作为图像形成部26、图像解析部28以及标记生成部30而发挥功能。后述的CPU也可以作为图像形成部26、图像解析部28以及标记生成部30而发挥功能。
显示处理部32具有色彩运算功能、图像合成功能等。在显示处理部32中,针对显示帧数据(断层图像)而合成包括标记的图形数据,由此生成显示于显示器36的图像。显示器36由LCD、有机EL显示器件等构成。在显示器36实时地显示作为运动图像的断层图像,此外作为图形图像的一部分而显示标记。显示处理部32例如由处理器构成。
主控制部38控制图1所示的各要素的动作。在实施方式中,主控制部38由CPU以及程序构成。在主控制部38连接有操作面板40。操作面板40是输入器件,其具有多个开关、多个按钮、轨迹球、键盘等。在实施方式中,显示帧数据列被提供给图像解析部28,但接收帧数据列也可以被提供给图像解析部28(参照符号42)。在该情况下,也可以设置根据接收帧数据列来简易地生成显示帧数据列的第2图像形成部。
在图2中示出了标记显示处理。在断层图像44中包括病变部46。病变部46在图像解析部中被检测出。在检测病变部46时,例如定义与病变部46外接的矩形(或区域)52。实际上,可确定出矩形52中的中心点48的坐标以及左上角点50的坐标。也可以基于边缘量等图像特征量来检测病变部。
作为在矩形52的外侧沿水平方向以及垂直方向留有一定的余量56、58的图形,定义矩形54。该矩形54在断层图像上被显示为标记64。标记64是包围病变部46以及其周围的图形。在图示的例子中,标记64由虚线构成。标记64的显示样态能够自由地选择。例如,也可以显示由实线构成的标记,还可以显示由仅表示4个角部分的4个要素构成的标记。也可以显示圆形、椭圆的标记。
若尽管显示帧数据的内容几乎未变化、即病变部几乎示变化,显示的标记64的位置、尺寸也按照每个帧而时刻变化,则会使检查者产生压力或不安感。另一方面,在显示帧数据的内容大幅变化的状况下,有效地防止突发地出现的病变部的看漏也是重要的。从这样的观点出发,在实施方式中,如已经说明的那样,此外如在以下对具体例进行说明的那样,执行基于变化率的适应性的平滑化处理。
在图3中示出了平滑化部34的结构。平滑化部34具有第1平滑化部34A以及第2平滑化部34B。第1平滑化部34A对位置数据列进行平滑化。第2平滑化部34B对尺寸数据列进行平滑化。除此以外,也可以设置对病变部检测的可靠度进行平滑化的第3平滑化部。
在图4中,关于平滑化处理,示出了变化率R与参照数据数(平滑化数)N的关系。如用线性函数66A示出的那样,也可以随着变化率R的增大而使参照数据数N单调减少。也可以根据非线性函数66B,根据变化率R来决定参照数据数N。
在图5中示出了权重函数106。横轴为时间轴,n表示当前的帧编号,n-1~n-5表示过去的帧。纵轴表示权重w。如由权重函数106示出的那样,也可以对更加新的数据赋予更大的权重w。也可以针对根据变化率R决定的时间窗,以适合的方式使权重函数106伸缩。也可以在时间窗内设定一律相同的权重,也可以在时间窗内使权重线性地变化。
在图6中示出了第1标记显示例,在图7中示出了第2标记显示例。第1显示例例如表示探测器移动速度大且运算出大的变化率的状态。第2显示例例如表示探测器移动速度小且运算出了小的变化率的状态。在图6以及图7中,横轴是时间轴。
在图6所示的第1标记显示例中,包括各时刻的断层图像70A~70D,在它们中包括病变部72A~72D。在时间轴上,病变部的样态(内容、位置等)在时间上大幅变化。在这样的情况下,决定出小的平滑化度,在各时刻处,包围病变部72A~72D的标记74A~74D被响应性优良地生成以及显示。由此,能够防止或减轻病变部的看漏。
在图7所示的第2显示例中,包括各时刻的断层图像76A~76D,在它们中包括病变部78A~78D。在时间轴上,病变部的样态未怎么变化。在这样的情况下,决定出大的平滑化度,在各时刻处,包围病变部78A~78D的标记79A~79D的变化被抑制。由此,闪烁地显示标记的现象被抑止。
在图8中示出了平滑化处理例。纵轴是时间轴。符号80示出了1个数据集合。多个数据集合沿着时间轴排列。沿着横轴示出了帧编号82、有无检测出病变部84、作为变化率的探测器移动速度86、平滑化数(参照数据数)88、中心点坐标90、平滑化后的中心点坐标92、左上角点坐标94以及平滑化后的左上角点坐标96。
在由帧编号11确定的时间点,未检测出病变部。不执行平滑化处理。在由帧编号12确定的时间点,检测出病变部,根据移动速度10决定出平滑化数5,但在该时间点不进行平滑化,基于中心点坐标C12以及左上角点坐标L12来生成标记。在由帧编号13确定的时间点,检测出病变部,根据移动速度11决定出平滑化数5。在该时间点,基于2个中心点坐标C12、C13来对平滑化后的中心点坐标C13’进行运算(参照符号98。括弧内的2个坐标示出了平滑化范围。)。与此同样地,基于2个左上角点坐标L12、L13来对平滑化后的左上角点坐标L13’进行运算(参照符号100)。基于平滑化后的中心点坐标C13’以及平滑化后的左上角点坐标L13’来生成标记。
在由帧编号18确定的时间点,检测出了(跨越帧编号12-18而连续检测出)病变部,基于5个中心点坐标C14-C18来对平滑化后的中心点坐标C18’进行运算(参照符号102)。与此同样地,基于5个左上角点坐标L14-L18来对平滑化后的左上角点坐标L18’进行运算。基于平滑化后的中心点坐标C18’以及平滑化后的左上角点坐标L18’来生成标记(参照符号104)。
从由帧编号31确定的时间点到由帧编号34确定的时间点,病变部检测连续,但在该期间内,移动速度比较大,并且在该期间内平滑化数小。在实施方式中,像这样根据变化率的变动来适应性地决定平滑化度。在其中包括平滑化的打开关闭的适应性的切换。
在图9中示出了标记生成部的第1动作例。在S10中,判断是否检测出了病变部。例如,也可以在可靠度为给定值以上的情况下,判断为检测出病变部。在S10中满足结束条件的情况下,本处理结束。
在判断为检测出病变部的情况下,在S12中,基于变化率来决定平滑化数(参照数据数)。在S14中,判断是否满足时间性连续条件(第1条件)。在S15中,判断是否满足空间性连续条件(第2条件)。在满足第1条件以及第2条件这两者的情况下执行S16,在不满足任一条件的情况下执行S18。
在S16中,基于平滑化处理结果、即基于进行了平滑化的位置数据列以及尺寸数据列来生成标记。在S20中,显示所生成的标记。在S18中,对标记的显示进行限制。具体而言,将标记设为不显示。重复执行如以上那样的处理。
在图10中,示出了标记生成部的第2动作例。另外,在图10中,对与图9所示的工序同样的工序标注相同的步骤编号,省略其说明。
在第2动作例中,在不满足第1条件以及第2条件中的任意者的情况下,在S21中,在对平滑化进行了限制的基础上生成标记。即,基于未被平滑化的位置数据以及尺寸数据来生成标记,在S20中对其进行显示。
在第1动作例以及第2动作例中的任意者中,均在满足一定条件的情况下,根据基于变化率的平滑化度来显示进行了平滑化的标记。在如断层图像的内容几乎不变化那样的状况下,能够有效地防止或减轻闪烁地显示标记的现象的发生。在如断层图像的内容大幅变化那样的状况下,能够通过标记来可靠地对突发地检测出的病变部进行通知。

Claims (9)

1.一种超声波诊断装置,其特征在于,包括:
解析部(28),基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此输出所在数据列;
平滑化部(34),根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所述所在数据列进行平滑化,由此输出进行了平滑化的所在数据列;和
生成部(30),根据进行了平滑化的所述所在数据列,生成对所述病变部进行通知的标记,
在基于所述帧数据列而形成的超声波图像上显示所述标记。
2.根据权利要求1所述的超声波诊断装置,其特征在于,
所述解析部(28)确定所述病变部的位置以及尺寸作为所述病变部的所在,并输出位置数据列以及尺寸数据列作为所述所在数据列,
所述平滑化部(34)包括对所述位置数据列进行平滑化的第1平滑化部(34A)和对所述尺寸数据列进行平滑化的第2平滑化部(34B),
所述生成部(30)根据进行了平滑化的所述位置数据列以及进行了平滑化的所述尺寸数据列,生成所述标记。
3.根据权利要求2所述的超声波诊断装置,其特征在于,
所述位置数据列的各位置数据是表示包含所述病变部在内的区域的中心位置的数据,
所述尺寸数据列的各尺寸数据是表示所述区域的角部位置的数据。
4.根据权利要求1所述的超声波诊断装置,其特征在于,
所述平滑化部(34)随着所述变化率的增大而使所述平滑化度减少。
5.根据权利要求4所述的超声波诊断装置,其特征在于,
所述平滑化部(34)在对所述平滑化度进行增减时,使平滑化中利用的帧数据的个数增减。
6.根据权利要求1所述的超声波诊断装置,其特征在于,
所述生成部(30):
基于所述解析部(28)的输出,判定针对所述病变部的时间性不连续,
在判定出所述时间性不连续的情况下对所述标记的生成进行限制。
7.根据权利要求1所述的超声波诊断装置,其特征在于,
所述生成部(30):
基于所述解析部(28)的输出,判定针对所述病变部的空间性不连续,
在判定出所述空间性不连续的情况下对所述标记的生成进行限制。
8.一种诊断辅助方法,其特征在于,包括:
基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此生成所在数据列的工序(28);
根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所述所在数据列进行平滑化,由此生成进行了平滑化的所在数据列的工序(34);和
根据进行了平滑化的所述所在数据列来生成对所述病变部进行通知的标记的工序(30),
在基于所述帧数据列而形成的超声波图像上显示所述标记。
9.一种程序,用于在信息处理装置中执行诊断辅助方法,其特征在于,所述程序包括:
基于通过对超声波波束进行反复扫描而获取到的帧数据列,按照每个帧数据来确定病变部的所在,由此生成所在数据列的功能(28);
根据表示帧数据内容的时间性变化的程度的变化率来动态地改变平滑化度并对所述所在数据列进行平滑化,由此生成进行了平滑化的所在数据列的功能(34);和
根据进行了平滑化的所述所在数据列来生成对所述病变部进行通知的标记的功能(30),
在基于所述帧数据列而形成的超声波图像上显示所述标记。
CN202210572914.XA 2021-05-25 2022-05-24 超声波诊断装置以及诊断辅助方法 Pending CN115381490A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021087804A JP2022180993A (ja) 2021-05-25 2021-05-25 超音波診断装置及び診断支援方法
JP2021-087804 2021-05-25

Publications (1)

Publication Number Publication Date
CN115381490A true CN115381490A (zh) 2022-11-25

Family

ID=84115484

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210572914.XA Pending CN115381490A (zh) 2021-05-25 2022-05-24 超声波诊断装置以及诊断辅助方法

Country Status (3)

Country Link
US (1) US20220378403A1 (zh)
JP (1) JP2022180993A (zh)
CN (1) CN115381490A (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5442462A (en) * 1992-06-10 1995-08-15 D.V.P. Technologies Ltd. Apparatus and method for smoothing images
US20040015079A1 (en) * 1999-06-22 2004-01-22 Teratech Corporation Ultrasound probe with integrated electronics
EP1897495A4 (en) * 2005-06-28 2011-01-05 Konica Minolta Med & Graphic METHOD FOR THE DETECTION OF ANOMALIC SHADE CANDIDATES, DEVICE FOR DETECTING ANOMALIC SHADE CANDIDATES
KR20160049897A (ko) * 2014-10-28 2016-05-10 삼성전자주식회사 연속적인 의료 영상을 이용한 컴퓨터 보조 진단 장치 및 방법

Also Published As

Publication number Publication date
JP2022180993A (ja) 2022-12-07
US20220378403A1 (en) 2022-12-01

Similar Documents

Publication Publication Date Title
CN110786880B (zh) 超声波诊断装置以及超声波图像处理方法
KR100748178B1 (ko) 임의 m-모드 영상을 디스플레이하는 초음파 진단 시스템및 방법
WO2008035445A1 (fr) Système de diagnostic de sein à ultrasons
JP2020531074A (ja) 画像アーチファクト特定及び除去のための深層学習ネットワークを有する超音波システム
JP2014121594A (ja) 超音波診断装置、画像処理装置および画像処理方法
JP2020068797A (ja) 医用撮像装置、画像処理装置、および、画像処理方法
US20090177086A1 (en) Method and apparatus for selectively enhancing ultrasound image data
CN111053572B (zh) 用于医疗图像中的运动检测和补偿的方法和系统
CN111434311B (zh) 超声波摄像装置以及图像处理方法
CN112137643A (zh) 用于在定量超声中纵向监测的感兴趣区域定位
US20210161506A1 (en) Ultrasound diagnostic apparatus and display method
CN115381490A (zh) 超声波诊断装置以及诊断辅助方法
KR20100121767A (ko) 볼륨 데이터를 렌더링하는 초음파 시스템 및 방법
JP7488789B2 (ja) 超音波診断装置及び診断支援方法
US20230196580A1 (en) Ultrasound diagnostic apparatus and ultrasound image processing method
CN113679415B (zh) 超声波诊断装置以及诊断辅助方法
JP7438038B2 (ja) 超音波診断装置及び診断支援方法
JP7299100B2 (ja) 超音波診断装置及び超音波画像処理方法
US20230099970A1 (en) Method and system for ultrasonic imaging
US10426444B2 (en) Ultrasonic diagnosis apparatus, medical image processing apparatus and medical image processing method
CN115120263A (zh) 用于检测声学遮蔽的超声成像系统和方法
CN115337039A (zh) 超声波诊断装置以及诊断辅助方法
JP2021164569A (ja) 超音波診断装置、およびプログラム
CN116650006A (zh) 用于自动超声检查的系统和方法
JP2020022550A (ja) 超音波画像処理装置およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination