CN112420199A - 一种基于白癜风色度的疗效评估方法 - Google Patents
一种基于白癜风色度的疗效评估方法 Download PDFInfo
- Publication number
- CN112420199A CN112420199A CN202011495285.2A CN202011495285A CN112420199A CN 112420199 A CN112420199 A CN 112420199A CN 202011495285 A CN202011495285 A CN 202011495285A CN 112420199 A CN112420199 A CN 112420199A
- Authority
- CN
- China
- Prior art keywords
- vitiligo
- treatment
- iwa
- area
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 206010047642 Vitiligo Diseases 0.000 title claims abstract description 62
- 230000000694 effects Effects 0.000 title claims abstract description 16
- 238000011156 evaluation Methods 0.000 title claims abstract description 11
- 238000000034 method Methods 0.000 claims abstract description 19
- 238000001514 detection method Methods 0.000 claims abstract description 9
- 230000011218 segmentation Effects 0.000 claims abstract description 9
- 239000011159 matrix material Substances 0.000 claims abstract description 6
- 230000009466 transformation Effects 0.000 claims abstract description 5
- 238000004364 calculation method Methods 0.000 claims abstract description 4
- 238000002203 pretreatment Methods 0.000 claims description 11
- 238000010606 normalization Methods 0.000 claims description 3
- 230000001225 therapeutic effect Effects 0.000 claims 2
- 238000012545 processing Methods 0.000 abstract description 6
- 238000012549 training Methods 0.000 description 13
- 238000012360 testing method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 210000000416 exudates and transudate Anatomy 0.000 description 2
- 210000004209 hair Anatomy 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004042 decolorization Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000037311 normal skin Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Geometry (AREA)
- Multimedia (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
一种基于白癜风色度的疗效评估方法,其先对患者治疗前的白癜风区域进行拍照,采用目标检测与分割算法对照片进行处理得到白癜风区域,然后采用IWA值计算图像区域的平均色度;然后对治疗后的患者的相同位置进行拍照,计算得到两张照片的变换矩阵,从而得到治疗后患者的白癜风区域,采用IWA值计算该图像区域的平均色度,用治疗前后白癜风区域的两个的色度值的差值,来评估白癜风治疗方案效果。该方法可以很好的反映白癜风治疗前后的色度变化,快速评估白癜风的治疗效果,有效的运用到皮肤科医生的临床工作中。
Description
【技术领域】
本发明涉及医学图像处理领域,具有为一种基于白癜风色度的疗效评估方法。
【背景技术】
现有的半客观评价指标中,VETFa的优点是可以对白癜风的分期即疾病是否进展进行评价;VASI被认为是最适合评价病情严重程度的工具,它能同时评价白斑面积和脱色情况;但是VETFa和VASI在白斑面积评估中使用九分法或手掌单位,因而不适用于小面积白斑的评估;而且VETFa和VASI操作繁琐耗时,这也是未被皮肤科医生在临床工作中广泛使用的原因之一。
由此可见,提供一种适用于小面积白斑的白癜风疗效评估方法是本领域亟需解决的问题。
【发明内容】
针对上述问题,本发明提供一种基于白癜风色度的疗效评估方法,先对患者治疗前的白癜风区域进行拍照,采用目标检测与分割算法对照片进行处理得到白癜风区域,然后采用IWA值计算图像区域的平均色度;然后对治疗后的患者的相同位置进行拍照,计算得到两张照片的变换矩阵,从而得到治疗后患者的白癜风区域,采用IWA值计算该图像区域的平均色度,用治疗前后白癜风区域的两个的色度值的差值,来评估白癜风治疗方案效果。
进一步的,所述评估方法包括以下步骤:
步骤一:对治疗前的白癜风患者图像进行白癜风区域的检测;
步骤二:对获得的白癜风区域进行高精度的白斑分割;
步骤三:计算治疗前IWA值;
步骤四:计算治疗后的白癜风区域;
步骤五:计算治疗后白癜风区域的平均IWA值;
步骤六:计算色度变化。
进一步的,所述步骤三是先将图像从RGB色彩空间转换到XYZ色彩空间,再将图片从XYZ色彩空间转换到Lab色彩空间,接着进行Lab的归一化操作,最后将最后算出的Lab值带入公式计算IWA值。
进一步的,所述步骤六中色度变化=(治疗前IWA-治疗后IWA)/(治疗前IWA-治疗前皮肤IWA)。
与现有技术相比,本发明的技术方案具有以下有益技术效果:
本发明创造性的提出了一种基于白癜风色度的疗效评估方法,先对现有的白癜风指标进行了分析,进而提出利用图像检测与分割方法来自动定位白癜风区域,从而采用IWA计算治疗前后白癜风区域的色度值变化来评估,该方法可以很好的反映白癜风治疗前后的色度变化,快速评估白癜风的治疗效果,有效的运用到皮肤科医生的临床工作中。
【附图说明】
图1是本发明的流程示意图。
图2是本发明中RGB色彩空间转换到XYZ色彩空间的公式。
图3是本发明中XYZ色彩空间转换到Lab色彩空间的公式。
图4是本发明中计算IWA的公式。
【具体实施方式】
本发明所提到的方向用语,例如「上」、「下」、「前」、「后」、「左」、「右」、「内」、「外」、「侧面」等,仅是附图中的方向,只是用来解释和说明本发明,而不是用来限定本发明的保护范围。
本发明公开了一种基于白癜风色度的疗效评估方法,先对患者治疗前的白癜风区域进行拍照,采用目标检测与分割算法对照片进行处理得到白癜风区域,然后采用IWA值计算图像区域的平均色度;然后对治疗后的患者的相同位置进行拍照,计算得到两张照片的变换矩阵,从而得到治疗后患者的白癜风区域,采用IWA值计算该图像区域的平均色度。治疗前后白癜风区域的两个的色度值的差值,可以用来评估白癜风治疗方案效果,本方法具体包括以下步骤:
步骤一:对治疗前的白癜风患者图像进行白癜风区域的检测,待评估的白癜风患者图像应当整体清晰,毛发、背景等遮挡物应当尽量减少,图像中皮肤高光应当尽量减少,以免造成检测的干扰;
1.1准备训练检测网络的数据集:采集多位白癜风患者的共2000张白癜风的数码照片,筛除了聚焦差、图像质量差的照片,使用label-image软件将采集的2000张照片的白癜风区域进行框定标注,分为训练集、测试集和验证集,数据集间无交叉,完全独立;
1.2用上述标注好的数据集对YOLO V3神经网络进行训练:首先使用卷积层对输入到网络的训练集照片提取细小的特征,得到照片的特征图;然后将照片以特征图的大小分成多个小方格,若标注图中某个待检测区域的中心坐标落在某一个小方格中,就由该小方格来对此待检测区域进行预测,每个小方格都会预测一定个数的外接矩形框;YOLO v3中对小方格的预测的矩形框是3个,并且这些预测矩形框的初始大小都不同,预测框中只有和真值的IOU最大的外接矩形框才是用来预测该目标的;
1.3训练完成后用验证集照片进行验证,对出现的错标、漏标情况进行分析:进行数据集的扩充以及对模型算法进行修改和优化,对错标、漏标图片进行纠正,然后再投入模型中进行学习训练,反复进行多轮,最后将待检测患者的照片通过检测模型,得到白癜风检测的结果。
步骤二:对获得的白癜风区域进行高精度的白斑分割;
2.1准备训练分割网络的数据集:采集多位白癜风患者的1000张临床照片,通过光影魔术手手动对白癜风白斑区域进行分割出来作为样本,选取的白癜风区域大部分位于图片中心,且没有衣物、头发等遮挡物。这些样本中80%作为训练集用于训练模型,10%作为测试集用于测试模型表现是否良好,10%作为验证集用来对模型进行调整优化,各个数据集之间无交叉且完全独立;
2.2用上述分割好的数据集对UNet++神经网络进行训练:首先进行数据集的扩充,需要注意图像的平移和旋转不变性,接着在3×3的网格上使用随机位移矢量进行变形操作,然后使用三次插值法计算每个像素的位移,训练时由于卷积的时候没有进行填充操作,因此输出的照片尺寸会小于输入的照片尺寸,为了减少开销并最大程度地利用GPU内存,训练时使用图块,将批处理减少为单图像处理,最后通过UNet++里面的参数,在训练集上将输入与真实输出进行非线性映射,从而得到的这组参数也可以用来预测测试集中的数据,从而完成白癜风区域的预测诊断。
步骤三:将患者治疗前的照片经过步骤2分割获得图像,将图像从RGB色彩空间转换成CIELab色彩空间,将算出的lab值带入计算IWA的公式。
3.1将图片从RGB色彩空间转换到XYZ色彩空间,其公式如图1所示,
3.2将图片从XYZ色彩空间转换到Lab色彩空间,其公式如图2所示,
其中L,a,b分别为白癜风区域在CIELab颜色空间的三个通道的平均值,L代表的是明亮程度,a代表的是从红色到深绿,b则是代表从蓝色到黄色;
3.3进行Lab的归一化操作,即L=L*255/100,a=a+128,b=b+128;
3.4将最后算出的Lab值带入计算IWA的公式,其公式如图3所示
步骤四:输入一张白癜风患者治疗后的照片,通过采用图像匹配方法计算治疗前后两张照片的变换矩阵,利用该矩阵计算得到治疗后照片中的白癜风区域;
步骤五:参见步骤三,计算治疗后白癜风区域的平均IWA值;
步骤六:计算色度变化,公式如下:
色度变化=(治疗前IWA-治疗后IWA)/(治疗前IWA-治疗前皮肤IWA),其中“治疗前皮肤IWA”指治疗前患者照片中正常皮肤区域的IWA色度值。
此外,应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当将说明书作为一个整体,各实施例中的技术方案也可以经适当组合,形成本领域技术人员可以理解的其他实施方式。
Claims (4)
1.一种基于白癜风色度的疗效评估方法,其特征在于,先对患者治疗前的白癜风区域进行拍照,采用目标检测与分割算法对照片进行处理得到白癜风区域,然后采用IWA值计算图像区域的平均色度;然后对治疗后的患者的相同位置进行拍照,计算得到两张照片的变换矩阵,从而得到治疗后患者的白癜风区域,采用IWA值计算该图像区域的平均色度,用治疗前后白癜风区域的两个的色度值的差值,来评估白癜风治疗方案效果。
2.根据权利要求1所述的基于白癜风色度的疗效评估方法,其特征在于,所述评估方法包括以下步骤:
步骤一:对治疗前白癜风患者图像进行白癜风区域的检测;
步骤二:对获得的白癜风区域进行高精度的白斑分割;
步骤三:计算治疗前IWA值;
步骤四:计算治疗后的白癜风区域;
步骤五:计算治疗后白癜风区域的平均IWA值;
步骤六:计算色度变化。
3.根据权利要求2所述的基于白癜风色度的疗效评估方法,其特征在于,所述步骤三是先将图像从RGB色彩空间转换到XYZ色彩空间,再将图片从XYZ色彩空间转换到Lab色彩空间,接着进行Lab的归一化操作,最后将最后算出的Lab值带入公式计算IWA值。
4.根据权利要求2所述的基于白癜风色度的疗效评估方法,其特征在于,所述步骤六中色度变化=(治疗前IWA-治疗后IWA)/(治疗前IWA-治疗前皮肤IWA)。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011495285.2A CN112420199A (zh) | 2020-12-17 | 2020-12-17 | 一种基于白癜风色度的疗效评估方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011495285.2A CN112420199A (zh) | 2020-12-17 | 2020-12-17 | 一种基于白癜风色度的疗效评估方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112420199A true CN112420199A (zh) | 2021-02-26 |
Family
ID=74776796
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011495285.2A Pending CN112420199A (zh) | 2020-12-17 | 2020-12-17 | 一种基于白癜风色度的疗效评估方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112420199A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116269217A (zh) * | 2023-02-10 | 2023-06-23 | 安徽医科大学 | 一种基于深度学习的白癜风治疗效果量化评估方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107049263A (zh) * | 2017-06-14 | 2017-08-18 | 武汉理工大学 | 基于图像处理的白癜风病情诊断与疗效评估方法与系统 |
CN108154503A (zh) * | 2017-12-13 | 2018-06-12 | 西安交通大学医学院第附属医院 | 一种基于图像处理的白癜风病情诊断系统 |
CN108648825A (zh) * | 2018-05-30 | 2018-10-12 | 江苏大学附属医院 | 一种基于图像识别的白癜风白斑评估方法 |
CN111508016A (zh) * | 2020-04-14 | 2020-08-07 | 南京泓图人工智能技术研究院有限公司 | 一种基于图像处理的白癜风区域色度值和面积计算的方法 |
CN111640121A (zh) * | 2020-04-28 | 2020-09-08 | 南京理工大学 | 基于改进U-net的直肠CT图像肿瘤分割方法 |
-
2020
- 2020-12-17 CN CN202011495285.2A patent/CN112420199A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107049263A (zh) * | 2017-06-14 | 2017-08-18 | 武汉理工大学 | 基于图像处理的白癜风病情诊断与疗效评估方法与系统 |
CN108154503A (zh) * | 2017-12-13 | 2018-06-12 | 西安交通大学医学院第附属医院 | 一种基于图像处理的白癜风病情诊断系统 |
CN108648825A (zh) * | 2018-05-30 | 2018-10-12 | 江苏大学附属医院 | 一种基于图像识别的白癜风白斑评估方法 |
CN111508016A (zh) * | 2020-04-14 | 2020-08-07 | 南京泓图人工智能技术研究院有限公司 | 一种基于图像处理的白癜风区域色度值和面积计算的方法 |
CN111640121A (zh) * | 2020-04-28 | 2020-09-08 | 南京理工大学 | 基于改进U-net的直肠CT图像肿瘤分割方法 |
Non-Patent Citations (1)
Title |
---|
申铉国 等: "光纤探头式皮肤病变测定仪的研究", 仪器仪表学报, vol. 14, no. 2, pages 195 - 199 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116269217A (zh) * | 2023-02-10 | 2023-06-23 | 安徽医科大学 | 一种基于深度学习的白癜风治疗效果量化评估方法 |
CN116269217B (zh) * | 2023-02-10 | 2024-04-26 | 安徽医科大学 | 一种基于深度学习的白癜风治疗效果量化评估方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zhou et al. | Color retinal image enhancement based on luminosity and contrast adjustment | |
WO2021031458A1 (zh) | 适用于内窥镜的图像颜色校正方法、装置和存储介质 | |
WO2020151307A1 (zh) | 病灶自动识别方法、装置及计算机可读存储介质 | |
CN110599552A (zh) | 一种基于计算机视觉的pH试纸检测方法 | |
CN112669959B (zh) | 一种基于图像的白癜风病情自动评估方法 | |
WO2020038312A1 (zh) | 多通道舌体边缘检测装置、方法及存储介质 | |
CN110969631B (zh) | 一种精细化照片染发方法及系统 | |
CN115049666B (zh) | 基于彩色小波协方差深度图模型的内镜虚拟活检装置 | |
CN109242792B (zh) | 一种基于白色物体的白平衡校对方法 | |
CN115631350B (zh) | 罐印图像的颜色识别方法和装置 | |
Salvi et al. | DermoCC-GAN: A new approach for standardizing dermatological images using generative adversarial networks | |
CN111488912A (zh) | 一种基于深度学习神经网络的喉部疾病诊断系统 | |
CN113129390B (zh) | 一种基于联合显著性的色盲图像重新着色方法及系统 | |
CN114494092A (zh) | 一种可见光图像与荧光图像融合方法及系统 | |
CN112420199A (zh) | 一种基于白癜风色度的疗效评估方法 | |
CN110473177B (zh) | 皮肤色素分布预测方法、图像处理系统及存储介质 | |
CN114511567B (zh) | 舌体与舌苔图像识别分离方法 | |
CN104766068A (zh) | 一种多规则融合的随机游走舌像提取方法 | |
CN108363986A (zh) | 基于改进Sobel算子的人脸速写系统和轮廓提取方法 | |
CN103226689B (zh) | 检测红眼的方法及装置、去除红眼的方法及装置 | |
TWI615130B (zh) | 影像處理方法及非暫態電腦可讀取媒體 | |
CN107316040A (zh) | 一种光照不变的图像颜色空间变换方法 | |
CN114155575A (zh) | 基于卷积神经网络的证件照口红识别方法、装置、介质及设备 | |
CN114972065A (zh) | 色差校正模型的训练方法、系统、电子设备和移动设备 | |
CN111007020B (zh) | 双帧四光谱成像方法及应用 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |