CN110570369B - 一种甲状腺结节超声图像去噪方法 - Google Patents

一种甲状腺结节超声图像去噪方法 Download PDF

Info

Publication number
CN110570369B
CN110570369B CN201910784432.9A CN201910784432A CN110570369B CN 110570369 B CN110570369 B CN 110570369B CN 201910784432 A CN201910784432 A CN 201910784432A CN 110570369 B CN110570369 B CN 110570369B
Authority
CN
China
Prior art keywords
image
speckle noise
frequency component
thyroid nodule
ultrasonic image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910784432.9A
Other languages
English (en)
Other versions
CN110570369A (zh
Inventor
张鑫
陈伟斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wenzhou Medical University
Original Assignee
Wenzhou Medical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wenzhou Medical University filed Critical Wenzhou Medical University
Priority to CN201910784432.9A priority Critical patent/CN110570369B/zh
Publication of CN110570369A publication Critical patent/CN110570369A/zh
Application granted granted Critical
Publication of CN110570369B publication Critical patent/CN110570369B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30096Tumor; Lesion

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种甲状腺结节超声图像去噪方法,包括以下步骤:构建甲状腺结节超声图像的数据库;对甲状腺结节超声图像进行NSST分解,并针对甲状腺超声图像散斑噪声分布的特性,得到相应的低频分量去噪的稀疏表示模型,以消除低频分量的散斑噪声,提高图像对比度;设计深度学习网络训练模型,并将经NSST变换后的高频分量结合深度学习网络训练模型,来更有效的分离散斑噪声和图像边缘;通过INSST重构去除散斑噪声后的甲状腺结节超声图像。本发明具有以下优点和效果:基于多尺度几何分析与深度学习相结合,并建立对应的散斑噪声抑制模型与框架,以期得到良好的甲状腺结节超声图像处理结果。

Description

一种甲状腺结节超声图像去噪方法
技术领域
本发明涉及超声图像去噪领域,特别涉及一种甲状腺结节超声图像去噪方法。
背景技术
随着生活水平的提高,人们的健康意识也在不断加强。因患甲状腺疾病而就诊的患者也在不断增加。据中国卫生协会公布,甲状腺疾病已成为全球第五大病因,预计到2020年将跃升为第二大病因,并成为致命疾病。近年来,国内甲状腺疾病的增长速率急剧攀升,北京市卫生局2012年发布,2000至2010年北京地区甲状腺癌的涨幅超过200%,在各类癌症发病增长率中居于首位,并据官方统计数据显示:甲状腺结节患病率高达18.6%,意味着每5人中就有近1人存在甲状腺结节的问题。2014年国际甲状腺知识宣传周的新闻发布会在北京举行,发布会上公布,保守估计我国甲状腺疾病患者超2亿,其中甲亢患者1000万,甲减患者9000万,而甲状腺结节患者超过1亿。作为内分泌领域的第二大疾病,我国甲状腺疾病知晓率、治疗率却都非常低,目前甲状腺疾病的整体治疗率不足5%。2015年,在天津甲状腺癌高峰论坛上专家指出近年来,我国甲状腺癌高发,已成为增长速度最快的恶性肿瘤,发病率10年增长了近5倍。
绝大多数甲状腺结节是良性的,但还是有约5-15%的结节有癌变的可能。值得注意的是,甲状腺癌与其它恶性肿瘤不同,若是能够及早发现且尽快治疗的话,治愈率在95%以上。因此,有效分辨甲状腺结节的良恶性具有极其重大的意义。目前在甲状腺结节临床诊断中,B型超声对人体无害、费用低、敏感度高、无需注射药物等优点已使其成为甲状腺结节临床检查的首选影像学方法。甲状腺结节病理和组织学特性的差异使得甲状腺良恶性结节的灰阶超声征象表现有所不同。在临床诊断中,医生主要根据形状、边缘、内部回声、后方回声衰减、钙化5个方面的超声征象鉴别甲状腺结节的良恶性。甲状腺良性结节和恶性结节超声图像分别如图1和图2所示。
甲状腺结节超声图像中广泛存在着一类颗粒状的散斑噪声,其表现为像素灰度值的突变,掩盖了和模糊了图像的细节,而甲状腺结节超声图像的细节信息对很多临床诊断至关重要,并且散斑噪声的抑制是其进行后续处理所必须的步骤,因而散斑应当被抑制。如果能充分认识甲状腺结节的各种超声特点,正确地识别判断,就可以减少误诊机会,提高诊断符合率,使许多病人免予不必要的手术,对指导临床治疗有重要价值。因此,甲状腺结节超声图像散斑噪声抑制和组织结构保留对超声图像的临床诊断非常重要。
发明内容
本发明的目的在于提供一种甲状腺结节超声图像去噪方法,基于多尺度几何分析与深度学习相结合,并建立对应的散斑噪声抑制模型与框架,以期得到良好的甲状腺结节超声图像处理结果。
为了达到上述目的,本发明提供了一种甲状腺结节超声图像去噪方法,包括以下步骤:
S1、构建甲状腺结节超声图像的数据库;
S2、对甲状腺结节超声图像进行NSST分解,并针对甲状腺超声图像散斑噪声分布的特性,得到相应的低频分量去噪的稀疏表示模型,以消除低频分量的散斑噪声,提高图像对比度;
S3、设计深度学习网络训练模型,并将经NSST变换后的高频分量结合深度学习网络训练模型,来更有效的分离散斑噪声和图像边缘;
S4、通过INSST重构去除散斑噪声后的甲状腺结节超声图像。
进一步设置是所述的步骤S2具体包括,
采用的超声图像散斑噪声为:
f=u*n (1)
其中,f为退化的超声图像,u表示去除散斑噪声的理想图像,n代表散斑噪声;构造的低频分量去噪的稀疏表示模型的离散形式描述为:
Figure BDA0002177587180000031
其中,γ和τ为大于零的惩罚参数,用于平衡模型中的各项;||·||1为l1范数,是▽u绝对值的总和,D和a分别为噪声图像训练得到的字典及稀疏表示系数;模型公式(2)中第一项为数据项,表示待估测图像与观测图像的接近程度;第二项为TV正则项,用来保持图像边缘并减少字典学习引入的图像伪影;第三项为稀疏先验项。
进一步设置是所述的步骤S3具体包括:
高频分量滤除噪声过程可以看作判别式分类学习过程,其中采用深度学习方法,通过利用前馈卷积神经网络进行训练,对高频分量进行有用信息及散斑噪声信号的分离;并通过对网络层次的设计及训练学习,采用深度学习网络得出高频分量的残差图像;
通过深度学习网络,可以求出以下参数:
Figure BDA0002177587180000032
其中,θ可以通过设计的深度学习网络训练得到,
Figure BDA0002177587180000033
为N对含有噪声图像及去除噪声图像训练对。
进一步设置是还包括有位于步骤S4之后的步骤S5,
S5、对低频分量及高频分量进行整合,构建完整散斑噪声抑制模型与框架,并建立甲状腺结节超声图像散斑噪声去噪效果有效性客观评价系统,对甲状腺结节去除散斑噪声超声图像进行指标评价,已验证方法、模型有效性、鲁棒性与可靠性。
本发明的有益效果是:
本发明深入研究多尺度分析与深度学习相结合的新方法,通过分析甲状腺结节超声图像特点,探索散斑噪声抑制新方法,为临床甲状腺结节的准确评价提供理论依据及创新方法;同时,在本发明中利用深度学习理论既能够抑制噪声又可以保留超声图像边缘及细节信息,并通过建立的对应散斑噪声抑制模型与框架,得到良好的甲状腺结节超声图像处理结果;
可以为超声诊断下不同类型的甲状腺结节的诊断准确性提供前期的数据处理支持,提高诊断准确性比例;
还可以直接与医科大学附属医院的临床应用相结合,为甲状腺结节的评估和诊断提供探索性及实用性研究,为辅助医生对疾病的诊断提供技术支持,提高该疾病的诊断水平,还可用于跟踪病理变化等。
附图说明
图1为本发明中背景技术中提到的甲状腺良性结节超声图像;
图2为本发明中背景技术中提到的甲状腺恶性结节超声图像;
图3为本发明中的残差图像的深度学习网络;
图4为本发明的流程框图。
具体实施方式
下面结合附图对本发明做进一步详细描述:
如图4所示,一种甲状腺结节超声图像去噪方法,包括以下步骤:
S1、构建甲状腺结节超声图像的数据库;图像数据库采用标准的数据库(BSD数据库)和临床一线的大量病人数据构成的数据库。
S2、对甲状腺结节超声图像进行NSST分解,并针对甲状腺超声图像散斑噪声分布的特性,得到相应的低频分量去噪的稀疏表示模型,以消除低频分量的散斑噪声,提高图像对比度;
S3、设计深度学习网络训练模型,并将经NSST变换后的高频分量结合深度学习网络训练模型,来更有效的分离散斑噪声和图像边缘;
首先利用非下采样shearlet变换(NSST)将图像分解为低频分量和高频分量,并研究低频分量和高频分量的特性。然后研究低频分量的稀疏表示方法,通过构建最佳结构化字典,对低频分量信息进行稀疏分解,并采用稀疏表示建模的方法对低频分量进行降噪,以消除低频分量的散斑噪声,提高图像对比度。接着针对经NSST分解后的高频分量中边缘和噪声的特性,设计深度学习网络层次结构,在学习中可以考虑各分辨率下散斑噪声分布情况及边缘保持情况。
S4、通过INSST重构去除散斑噪声后的甲状腺结节超声图像,INSST即非下采样shearlet反变换。
S5、对低频分量及高频分量进行整合,构建完整散斑噪声抑制模型与框架,并建立甲状腺结节超声图像散斑噪声去噪效果有效性客观评价系统,对甲状腺结节去除散斑噪声超声图像进行指标评价,已验证方法、模型有效性、鲁棒性与可靠性;还可并行临床应用验证,从而为甲状腺结节超声图像散斑噪声的去除提供新手段。
需要说明的是:NSST是一种非正交变换,舍弃了传统shearlet变换的下采样操作,把标准的剪切波滤波器从伪极化格坐标系统映射回笛卡尔坐标系统,将非下采样塔式变换和非下采样滤波器组结合起来进行多尺度剖分和方向局部化;INSST即为非下采样shearlet反变换。
更加具体的是:
步骤S2包括以下步骤,采用的超声图像散斑噪声模型为:
f=u*n (1)
其中,f为退化的超声图像,u表示去除散斑噪声的理想图像,n代表散斑噪声;对散斑噪声进行统计特性分析,并根据统计特性估测出数据保真项,本项目构造的低频分量去噪模型主要包括三项:数据保真项、变分正则项及稀疏先验项。构造的低频分量去噪的稀疏表示模型的离散形式描述为:
Figure BDA0002177587180000061
其中,γ和τ为大于零的惩罚参数,用于平衡模型中的各项;||·||1为l1范数,是▽u绝对值的总和,D和a分别为噪声图像训练得到的字典及稀疏表示系数;模型公式(2)中第一项为数据项,表示待估测图像与观测图像的接近程度;第二项为TV正则项,用来保持图像边缘并减少字典学习引入的图像伪影;第三项为稀疏先验项。
步骤S3包括以下步骤,
超声图像经NSST变换后,高频分量含有图像边缘信息和大部分噪声,如果能有效分离噪声和图像边缘,将会获得更好地视觉效果。高频分量滤除噪声过程可以看作判别式分类学习过程。本项目采用深度学习方法,通过利用卷积神经网络(CNN)进行训练,对高频分量进行有用信息及散斑噪声信号的分离。通过对网络层次的设计及训练学习,采用深度学习法得出高频分量的残差图像(RI),设计的残差图像的深度学习网络如图3所示。
假设深度学习网络的深度为D。DConv+ReLU为深度学习网络第一层,DConv为扩张卷积,通过选择合适滤波器可以产生n个特征图谱,ReLU为激活函数。DConv+BN+ReLU为深度学习网络的2-(D-1)层,BN为批处理标准化单元,中间通过一个跳跃连接相连。通过对深度学习网络层次的设计及训练,可以求出如下参数:
Figure BDA0002177587180000071
其中,θ可以通过设计的深度学习网络训练得到,
Figure BDA0002177587180000072
为N对含有噪声图像及去除噪声图像训练对。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (3)

1.一种甲状腺结节超声图像去噪方法,其特征在于,包括以下步骤:
S1、构建甲状腺结节超声图像的数据库;
S2、对甲状腺结节超声图像进行NSST分解,并针对甲状腺超声图像散斑噪声分布的特性,得到相应的低频分量去噪的稀疏表示模型,以消除低频分量的散斑噪声,提高图像对比度;
S3、设计深度学习网络训练模型,并将经NSST变换后的高频分量结合深度学习网络训练模型,来更有效的分离散斑噪声和图像边缘;
S4、通过INSST重构去除散斑噪声后的甲状腺结节超声图像;
所述的步骤S2具体包括,
采用的超声图像散斑噪声模型为:
f=u*n (1)
其中,f为退化的超声图像,u表示去除散斑噪声的理想图像,n代表散斑噪声;构造的低频分量去噪的稀疏表示模型的离散形式描述为:
Figure FDA0002404612510000011
其中,γ和τ为大于零的惩罚参数,用于平衡模型中的各项;||·||1为l1范数,是▽u绝对值的总和,D和a分别为噪声图像训练得到的字典及稀疏表示系数;模型公式(2)中第一项为数据项,表示待估测图像与观测图像的接近程度;第二项为TV正则项,用来保持图像边缘并减少字典学习引入的图像伪影;第三项为稀疏先验项。
2.根据权利要求1所述的一种甲状腺结节超声图像去噪方法,其特征在于,所述的步骤S3具体包括:
高频分量滤除噪声过程可以看作判别式分类学习过程,其中采用深度学习方法,通过利用前馈卷积神经网络进行训练,对高频分量进行有用信息及散斑噪声信号的分离;并通过对网络层次的设计及训练学习,采用深度学习网络得出高频分量的残差图像;
通过深度学习网络,可以求出以下参数:
Figure FDA0002404612510000021
其中,θ可以通过设计的深度学习网络训练得到,
Figure FDA0002404612510000022
为N对含有噪声图像及去除噪声图像训练对。
3.根据权利要求1所述的一种甲状腺结节超声图像去噪方法,其特征在于:还包括有位于步骤S4之后的步骤S5,
S5、对低频分量及高频分量进行整合,构建完整散斑噪声抑制模型与框架,并建立甲状腺结节超声图像散斑噪声去噪效果有效性客观评价系统,对甲状腺结节去除散斑噪声超声图像进行指标评价,以验证方法、模型有效性、鲁棒性与可靠性。
CN201910784432.9A 2019-08-23 2019-08-23 一种甲状腺结节超声图像去噪方法 Active CN110570369B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910784432.9A CN110570369B (zh) 2019-08-23 2019-08-23 一种甲状腺结节超声图像去噪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910784432.9A CN110570369B (zh) 2019-08-23 2019-08-23 一种甲状腺结节超声图像去噪方法

Publications (2)

Publication Number Publication Date
CN110570369A CN110570369A (zh) 2019-12-13
CN110570369B true CN110570369B (zh) 2020-05-12

Family

ID=68775863

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910784432.9A Active CN110570369B (zh) 2019-08-23 2019-08-23 一种甲状腺结节超声图像去噪方法

Country Status (1)

Country Link
CN (1) CN110570369B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112927808A (zh) * 2021-03-01 2021-06-08 北京小白世纪网络科技有限公司 一种基于甲状腺超声图像的结节分级系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101609549A (zh) * 2009-07-24 2009-12-23 河海大学常州校区 视频模糊图像的多尺度几何分析超分辨处理方法
CN101840568A (zh) * 2009-09-29 2010-09-22 天津大学 基于PCNN区域分割的NeighShrink图像去噪方法
CN104008537A (zh) * 2013-11-04 2014-08-27 无锡金帆钻凿设备股份有限公司 结合cs-ct-chmm的噪声图像融合新方法
CN108898155A (zh) * 2018-05-18 2018-11-27 浙江工业大学 一种小波阈值降噪结合卷积神经网络的sar图像目标识别方法
CN110070516A (zh) * 2019-03-14 2019-07-30 天津大学 一种面向医学能谱ct的图像融合方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103295201B (zh) * 2013-05-31 2016-05-25 中国人民武装警察部队工程大学 一种基于nsst域iicm的多传感器图像融合方法
WO2018047669A1 (ja) * 2016-09-12 2018-03-15 ソニー株式会社 画像処理装置および画像処理方法
CN108564555B (zh) * 2018-05-11 2021-09-21 中北大学 一种基于nsst和cnn的数字图像降噪方法
CN108846813A (zh) * 2018-06-04 2018-11-20 浙江工业大学之江学院 基于mfdf分解框架与nsst的医学ct图像去噪方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101609549A (zh) * 2009-07-24 2009-12-23 河海大学常州校区 视频模糊图像的多尺度几何分析超分辨处理方法
CN101840568A (zh) * 2009-09-29 2010-09-22 天津大学 基于PCNN区域分割的NeighShrink图像去噪方法
CN104008537A (zh) * 2013-11-04 2014-08-27 无锡金帆钻凿设备股份有限公司 结合cs-ct-chmm的噪声图像融合新方法
CN108898155A (zh) * 2018-05-18 2018-11-27 浙江工业大学 一种小波阈值降噪结合卷积神经网络的sar图像目标识别方法
CN110070516A (zh) * 2019-03-14 2019-07-30 天津大学 一种面向医学能谱ct的图像融合方法

Also Published As

Publication number Publication date
CN110570369A (zh) 2019-12-13

Similar Documents

Publication Publication Date Title
Andria et al. Linear filtering of 2-D wavelet coefficients for denoising ultrasound medical images
CN109102550B (zh) 基于卷积残差网络的全网络低剂量ct成像方法及装置
CN104240203A (zh) 基于小波变换和快速双边滤波的医学超声图像去噪方法
Sivakumar et al. Comparative study of speckle noise reduction of ultrasound b-scan images in matrix laboratory environment
CN109598680B (zh) 基于快速非局部均值和tv-l1模型的剪切波变换医学ct图像去噪方法
Zhuang et al. Breast ultrasound lesion classification based on image decomposition and transfer learning
CN115496771A (zh) 一种基于脑部三维mri图像设计的脑肿瘤分割方法
CN107403416A (zh) 基于nsct的改进滤波与阈值函数的医学超声图像去噪方法
CN111815766A (zh) 基于2d-dsa图像重建血管三维模型处理方法及系统
CN104616255A (zh) 基于乳腺x线图像的自适应增强方法
CN109035156B (zh) 基于dnst的医学ct图像去噪方法
Mredhula et al. An extensive review of significant researches on medical image denoising techniques
Ganvir et al. Filtering method for pre-processing mammogram images for breast cancer detection
CN116645283A (zh) 基于自监督感知损失多尺度卷积神经网络的低剂量ct图像去噪方法
Raj et al. Ultrasound medical image denoising using hybrid bilateral filtering
CN110570369B (zh) 一种甲状腺结节超声图像去噪方法
CN102426702A (zh) Ct图像与mr图像的融合方法
CN108846813A (zh) 基于mfdf分解框架与nsst的医学ct图像去噪方法
CN109559283B (zh) 基于dnst域双变量收缩和双边非局部均值滤波的医学pet图像去噪方法
Wachowiak et al. Classification and estimation of ultrasound speckle noise with neural networks
Yu et al. Generative adversarial networks with dense connection for optical coherence tomography images denoising
Arora et al. Performance analysis of various denoising filters on intravascular ultrasound coronary artery images
Paul et al. Preprocessing techniques with medical ultrasound common carotid artery images
CN110084772B (zh) 基于弯曲波的mri/ct融合方法
Wei et al. Clustering-oriented multiple convolutional neural networks for optical coherence tomography image denoising

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant