CN113361633A - 一种医疗图像大数据3d残差网络分类方法 - Google Patents

一种医疗图像大数据3d残差网络分类方法 Download PDF

Info

Publication number
CN113361633A
CN113361633A CN202110726543.1A CN202110726543A CN113361633A CN 113361633 A CN113361633 A CN 113361633A CN 202110726543 A CN202110726543 A CN 202110726543A CN 113361633 A CN113361633 A CN 113361633A
Authority
CN
China
Prior art keywords
image
focus
residual error
error network
focus image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110726543.1A
Other languages
English (en)
Inventor
刘玉蓉
杨晓凡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Feitang Netscape Technology Co ltd
Original Assignee
Chongqing Feitang Netscape Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Feitang Netscape Technology Co ltd filed Critical Chongqing Feitang Netscape Technology Co ltd
Priority to CN202110726543.1A priority Critical patent/CN113361633A/zh
Publication of CN113361633A publication Critical patent/CN113361633A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration using histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/187Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Molecular Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Probability & Statistics with Applications (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Epidemiology (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明提出了一种医疗图像大数据3D残差网络分类方法,包括如下步骤:S1,通过去噪算法对图像中的噪声进行平滑处理;通过3D残差网络输出预测图像,通过判断属性函数进行图像分类;S2,对分类后的图像通过加权过程实现损失函数计算,从而获取图像增强的内窥镜图像。

Description

一种医疗图像大数据3D残差网络分类方法
技术领域
本发明涉及大数据提取领域,尤其涉及一种医疗图像大数据3D残差网络分类方法。
背景技术
通过内窥镜获取的横断图像中,在边缘图像中会发生椭圆畸变,由于内窥镜图像获取过程中包括毛细血管在内会产生很多噪声,造成采样图像发生失真或者病灶不突出显示的问题,这在对内窥镜图像进行分类过程中普遍采用神经网络学习的方法进行不断学习,使获取图像更准确,但是因为类学习不充分,无法进行优化的学习方式,也不能准确分类和提取出来所需的医学影像,这就亟需本领域技术人员解决相应的技术问题。
发明内容
本发明旨在至少解决现有技术中存在的技术问题,特别创新地提出了一种医疗图像大数据3D残差网络分类方法。
为了实现本发明的上述目的,本发明提供了一种医疗图像大数据3D残差网络分类方法,其特征在于,包括如下步骤:
S1,通过去噪算法对图像中的噪声进行平滑处理;通过3D残差网络输出预测图像,通过判断属性函数进行图像分类;
S2,对分类后的图像通过加权过程实现损失函数计算,从而获取图像增强的内窥镜图像。
优选的,所述S1包括:
S1-1,通过计算全部时间轴上的图像特征权重Ei=|qi-h|2·|qi-gt|,得到病灶图像特征向量,通过二维平滑函数进行平滑处理;
Figure BDA0003138881440000021
qi为包含病灶图像的编码参数,h为参考病灶图像的编码参数,通过相减求绝对值再平方的计算方法,得到病灶图像编码差值,gt为在按照时间轴顺序输出的图像编码参数,与噪声编码参数相减之后得到时间属性的病灶图像编码参数,i为正整数,t为时间;Li为病灶图像长度,x为图像x轴坐标,y为图像y轴坐标,W病灶图像类别参数。
优选的,所述S1还包括:
S1-2,根据病灶图像的x和y轴坐标位置,通过训练3D残差网络,计算病灶图像和平滑图像之间的差值,更新3D残差网络的病灶图像参数,从而输出预测的病灶图像;
其中病灶图像参数运算过程为
Figure BDA0003138881440000022
capacity(x,y)为病灶图像中连通域的全部像素坐标,j(x,y)为3D残差网络中输出的病灶图像结果概率,k(x,y)为发现病灶图像的加权概率;
计算j(x,y)=l(x,y)·ji(x,y)·μ,
l(x,y)为病灶图像的坐标权重,ji(x,y)为3D残差网络中输出的第i个病灶图像的结果概率,μ为3D残差网络中输出的病灶图像计算因子;
k(x,y)=l(x,y)·ki(x,y)·σ;ki(x,y)为发现第i个病灶图像的加权概率,σ为发现病灶图像的计算因子。
优选的,所述S1包括:
S2-3,对于病灶图像进行预测之后,通过判断属性函数进行病灶图像分类,
对于不同病灶图像的类别,进行概率分布计算,所得到的概率分布需要调用3D残差网络训练的病灶图像,对病灶图像的不同特征进行分类操作,
概率分布为
Figure BDA0003138881440000031
H为全部病灶的坐标图像,f为病灶图像的种类,zf为每种病灶图像的提取数量,φ为正则参数,Qx为病灶图像X轴坐标的提取权值,Qy为病灶图像Y轴坐标的提取权值。
优选的,所述S2包括:
进行加权的损失函数为
Figure BDA0003138881440000032
其中,Ui为线性增量,T(x,y)为观察病灶图像所获得的差异坐标,η为惩罚因子,V为获取增强病灶图像的计算参数,ψ为辅助因子,I(x,y)为病灶细节纹理特征的增强图像坐标。
综上所述,由于采用了上述技术方案,本发明的有益效果是:
通过本发明的工作方法获取图像更准确,图像的类学习更充分,实现了优化的3D残差网络学习方式,准确分类和提取出来所需的医学影像。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明总体示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
如图1所示,本发明公开一种医疗图像大数据3D残差网络分类方法,包括如下步骤:
S1,将内窥镜图像转换为灰度图像;将图像亮度进行提升,获取纹理特征描述直方图;截取图像中的最大连通区域;
S1-1,将全部内窥镜图像按照采集时间进行分组处理,图像序列为{w1,w2,...,wn}的目标图像序列,由于内窥镜图像为圆形,带有血管信息的图像进行灰度处理,处理的目标图像形成目标图像向量序列{a1,a2,...,an},对目标图像向量序列进行堆叠操作,形成图像向量矩阵
Figure BDA0003138881440000041
n为获取的内窥镜图像个数,b为向量维度;
S1-2,为了能够更加容易观察到异常特征,对内窥镜图像进行颜色空间转换,根据彩色图像RGB转换至HSV颜色空间,分别计算色调H,饱和度S和亮度V的分量:
Figure BDA0003138881440000042
通过计算红颜色分量R最大像素值Pmax减去最小像素值Pmin得到相应差值,其中,Pmax>Pmin,获取的角度分量
Figure BDA0003138881440000043
Figure BDA0003138881440000044
V=Pmax
通过HSV颜色分量的计算将亮度提升,从而帮助判断内窥镜图像突变区域,在HSV颜色空间提升亮度判断时,突变区域的中心区域是否在内窥镜图像中心位置,S1-3,通过计算内窥镜图像纹理特征直方图
Figure BDA0003138881440000051
获取整体灰度图像中的特定纹理特征;
截取整体灰度图像中特定纹理特征的最大连通域
Figure BDA0003138881440000052
其中CD(x,y)为图像帧的坐标函数,λ为图像的编码参数,C为图像的增量因子,Cdiffer为图像帧的差异坐标函数,W为图像纹理差异的判断权重,ε为图像增强参数;
S2,对于纹理特征直方图获取的最大连通域,刻画纹理特征图像的最大轮廓,通过去噪算法对图像中的噪声进行平滑处理;通过3D残差网络输出预测图像,通过判断属性函数进行图像分类;
S2-1,通过计算全部时间轴上的图像特征权重Ei=|qi-h|2·|qi-gt|,得到病灶图像特征向量,通过二维平滑函数进行平滑处理;
Figure BDA0003138881440000053
qi为包含病灶图像的编码参数,h为参考病灶图像的编码参数,通过相减求绝对值再平方的计算方法,得到病灶图像编码差值,gt为在按照时间轴顺序输出的图像编码参数,与噪声编码参数相减之后得到时间属性的病灶图像编码参数,i为正整数,t为时间;Li为病灶图像长度,x为图像x轴坐标,y为图像y轴坐标,W病灶图像类别参数;
S2-2,根据病灶图像的x和y轴坐标位置,通过训练3D残差网络,计算病灶图像和平滑图像之间的差值,更新3D残差网络的病灶图像参数,从而输出预测的病灶图像;
其中病灶图像参数运算过程为
Figure BDA0003138881440000061
capacity(x,y)为病灶图像中连通域的全部像素坐标,j(x,y)为3D残差网络中输出的病灶图像结果概率,k(x,y)为发现病灶图像的加权概率;
计算j(x,y)=l(x,y)·ji(x,y)·μ,
l(x,y)为病灶图像的坐标权重,ji(x,y)为3D残差网络中输出的第i个病灶图像的结果概率,μ为3D残差网络中输出的病灶图像计算因子;
k(x,y)=l(x,y)·ki(x,y)·σ;ki(x,y)为发现第i个病灶图像的加权概率,σ为发现病灶图像的计算因子;
S2-3,对于病灶图像进行预测之后,通过判断属性函数进行病灶图像分类,
对于不同病灶图像的类别,例如:有血凝、肿瘤、等;进行概率分布计算,所得到的概率分布需要调用3D残差网络训练的病灶图像,对病灶图像的不同特征进行分类操作,
概率分布为
Figure BDA0003138881440000062
H为全部病灶的坐标图像,f为病灶图像的种类,zf为每种病灶图像的提取数量,φ为正则参数,Qx为病灶图像X轴坐标的提取权值,Qy为病灶图像Y轴坐标的提取权值,
S3,对分类后的图像通过加权过程实现损失函数计算,从而获取图像增强的内窥镜图像;
进行加权的损失函数为
Figure BDA0003138881440000063
其中,Ui为线性增量,T(x,y)为观察病灶图像所获得的差异坐标,η为惩罚因子,V为获取增强病灶图像的计算参数,ψ为辅助因子,I(x,y)为病灶细节纹理特征的增强图像坐标;
输出的增强图像通道Xsuper将进行3D残差网络计算之后的病灶图像,通过加权损失函数进行噪声剔除操作,从而对增强后的病灶图像的位置坐标能够更准确的的定位,突出强化病灶细节和病灶的种类,在最初的HSV色调、饱和度和亮度的计算增强后,能够获取更加准确的病灶图像。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。

Claims (5)

1.一种医疗图像大数据3D残差网络分类方法,其特征在于,包括如下步骤:
S1,通过去噪算法对图像中的噪声进行平滑处理;通过3D残差网络输出预测图像,通过判断属性函数进行图像分类;
S2,对分类后的图像通过加权过程实现损失函数计算,从而获取图像增强的内窥镜图像。
2.根据权利要求1所述的医疗图像大数据3D残差网络分类方法,其特征在于,所述S1包括:
S1-1,通过计算全部时间轴上的图像特征权重Ei=|qi-h|2·|qi-gt|,得到病灶图像特征向量,通过二维平滑函数进行平滑处理;
Figure FDA0003138881430000011
qi为包含病灶图像的编码参数,h为参考病灶图像的编码参数,通过相减求绝对值再平方的计算方法,得到病灶图像编码差值,gt为在按照时间轴顺序输出的图像编码参数,与噪声编码参数相减之后得到时间属性的病灶图像编码参数,i为正整数,t为时间;Li为病灶图像长度,x为图像x轴坐标,y为图像y轴坐标,W病灶图像类别参数。
3.根据权利要求1所述的医疗图像大数据3D残差网络分类方法,其特征在于,所述S1还包括:
S1-2,根据病灶图像的x和y轴坐标位置,通过训练3D残差网络,计算病灶图像和平滑图像之间的差值,更新3D残差网络的病灶图像参数,从而输出预测的病灶图像;
其中病灶图像参数运算过程为
Figure FDA0003138881430000021
capacity(x,y)为病灶图像中连通域的全部像素坐标,j(x,y)为3D残差网络中输出的病灶图像结果概率,k(x,y)为发现病灶图像的加权概率;
计算j(x,y)=l(x,y)·ji(x,y)·μ,
l(x,y)为病灶图像的坐标权重,ji(x,y)为3D残差网络中输出的第i个病灶图像的结果概率,μ为3D残差网络中输出的病灶图像计算因子;
k(x,y)=l(x,y)·ki(x,y)·σ;ki(x,y)为发现第i个病灶图像的加权概率,σ为发现病灶图像的计算因子。
4.根据权利要求1所述的医疗图像大数据3D残差网络分类方法,其特征在于,所述S1包括:
S2-3,对于病灶图像进行预测之后,通过判断属性函数进行病灶图像分类,
对于不同病灶图像的类别,进行概率分布计算,所得到的概率分布需要调用3D残差网络训练的病灶图像,对病灶图像的不同特征进行分类操作,
概率分布为
Figure FDA0003138881430000022
H为全部病灶的坐标图像,f为病灶图像的种类,zf为每种病灶图像的提取数量,φ为正则参数,Qx为病灶图像X轴坐标的提取权值,Qy为病灶图像Y轴坐标的提取权值。
5.根据权利要求1所述的医疗图像大数据3D残差网络分类方法,其特征在于,所述S2包括:
进行加权的损失函数为
Figure FDA0003138881430000023
其中,Ui为线性增量,T(x,y)为观察病灶图像所获得的差异坐标,η为惩罚因子,V为获取增强病灶图像的计算参数,ψ为辅助因子,I(x,y)为病灶细节纹理特征的增强图像坐标。
CN202110726543.1A 2021-06-29 2021-06-29 一种医疗图像大数据3d残差网络分类方法 Withdrawn CN113361633A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110726543.1A CN113361633A (zh) 2021-06-29 2021-06-29 一种医疗图像大数据3d残差网络分类方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110726543.1A CN113361633A (zh) 2021-06-29 2021-06-29 一种医疗图像大数据3d残差网络分类方法

Publications (1)

Publication Number Publication Date
CN113361633A true CN113361633A (zh) 2021-09-07

Family

ID=77537027

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110726543.1A Withdrawn CN113361633A (zh) 2021-06-29 2021-06-29 一种医疗图像大数据3d残差网络分类方法

Country Status (1)

Country Link
CN (1) CN113361633A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114463584A (zh) * 2022-01-29 2022-05-10 北京百度网讯科技有限公司 图像处理、模型训练方法、装置、设备、存储介质及程序

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114463584A (zh) * 2022-01-29 2022-05-10 北京百度网讯科技有限公司 图像处理、模型训练方法、装置、设备、存储介质及程序

Similar Documents

Publication Publication Date Title
Miri et al. Retinal image analysis using curvelet transform and multistructure elements morphology by reconstruction
CN108319973B (zh) 一种树上柑橘果实检测方法
CN109872285B (zh) 一种基于变分约束的Retinex低照度彩色图像增强方法
WO2013099772A1 (ja) 細胞輪郭線形成装置及びその方法、コンピュータにより処理可能な細胞輪郭線形成プログラムを記憶する記憶媒体
CN112733950A (zh) 一种基于图像融合与目标检测结合的电力设备故障诊断方法
CN106991380A (zh) 一种基于掌静脉图像的预处理方法
CN111080574A (zh) 一种基于信息熵和视觉注意机制的织物疵点检测方法
CN110930425B (zh) 基于邻域向量内积局部对比度图像增强的损伤目标检测方法
CN114155202A (zh) 基于特征融合和迁移学习的甲状腺结节超声图像分类方法
Jin et al. Perceptual Gradient Similarity Deviation for Full Reference Image Quality Assessment.
CN113361633A (zh) 一种医疗图像大数据3d残差网络分类方法
CN112215878B (zh) 一种基于surf特征点的x光图像配准方法
CN111640097B (zh) 皮肤镜图像识别方法及设备
CN107729863B (zh) 人体指静脉识别方法
CN116843581A (zh) 一种多场景图的图像增强方法、系统、设备和存储介质
CN111815542A (zh) 一种树木年轮图像髓心定位、年轮测量方法
CN108629780B (zh) 基于颜色分解和阈值技术的舌图像分割方法
CN113393484A (zh) 一种医疗图像大数据提取方法
CN113393403A (zh) 一种医疗图像大数据动态获取工作方法
CN115393239A (zh) 一种多模态眼底图像配准和融合方法及系统
CN115908155A (zh) Nsst域结合gan及尺度相关系数的低照度图像增强及去噪方法
CN115018820A (zh) 基于纹理加强的乳腺癌多分类方法
CN115187791A (zh) 一种融合颜色和尺度特征的orb图像匹配方法
Yang et al. Cherry recognition based on color channel transform
CN109658382B (zh) 基于图像聚类和灰度投影的舌体定位方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20210907

WW01 Invention patent application withdrawn after publication