CN106097335A - 消化道病灶图像识别系统及识别方法 - Google Patents

消化道病灶图像识别系统及识别方法 Download PDF

Info

Publication number
CN106097335A
CN106097335A CN201610405322.3A CN201610405322A CN106097335A CN 106097335 A CN106097335 A CN 106097335A CN 201610405322 A CN201610405322 A CN 201610405322A CN 106097335 A CN106097335 A CN 106097335A
Authority
CN
China
Prior art keywords
image
digestive tract
module
data
machine learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610405322.3A
Other languages
English (en)
Other versions
CN106097335B (zh
Inventor
张皓
袁文金
张行
王新宏
段晓东
肖国华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ankon Technologies Co Ltd
Original Assignee
Anhan Photoelectric Technology Wuhan Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=57228886&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN106097335(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Anhan Photoelectric Technology Wuhan Co ltd filed Critical Anhan Photoelectric Technology Wuhan Co ltd
Priority to CN201610405322.3A priority Critical patent/CN106097335B/zh
Publication of CN106097335A publication Critical patent/CN106097335A/zh
Application granted granted Critical
Publication of CN106097335B publication Critical patent/CN106097335B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30028Colon; Small intestine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30092Stomach; Gastric

Abstract

本发明公开了一种消化道病灶图像识别系统,它包括存储器、图像预处理模块、图像特征提取模块、机器学习模块和图像识别模块,其中,所述存储器的存储数据通信端连接图像预处理模块的数据输入端,图像预处理模块的数据输出端连接图像特征提取模块的数据输入端,图像特征提取模块的第一数据输出端连接机器学习模块的数据输入端,图像特征提取模块的第二数据输出端连接图像识别模块的第一数据输入端,机器学习模块的数据输出端连接图像识别模块的第二数据输入端。本发明提高了消化道病灶图像识别的效率和准确性。

Description

消化道病灶图像识别系统及识别方法
技术领域
本发明涉及图像识别和图像处理技术领域,具体地指一种消化道病灶图像识别系统及识别方法。
背景技术
使用胶囊内窥镜进行胃部的检测,可以使人们摆脱采用传统胃镜带来的痛苦与不适,是胃镜发展的一个全新方向。在用胶囊内镜进行胃部检测的过程中,一次检查会产生几千张图片,如果加上小肠检测,检查的图片数将超过50000张,未来随着胶囊图像传输帧率的提高及功耗的进一步下降会产生更多的图像数据。图像数据的增加将会增加人工阅片的时长和难度。
中国科学院深圳先进技术研究院的专利CN103984957A,发明了一种胶囊内镜图像可疑病变区域自动预警系统,实现了对小肠平坦性病变实现检测和预警功能。该方案存在如下五点缺点:
1、没有涉及胃部图像的病灶识别和处理,因而没有考虑到消化道图像中气泡、杂质等特征对病灶识别的影响;
2、没有考虑胶囊内镜图像的旋转,因而没有提取内镜图像的旋转不变特征进行病灶的识别;
3、对于非平坦性病变如肿瘤、息肉等也没有给出识别方法;
4、没有用去冗余算法减少胶囊内镜图像数量;
5、没有提出对全消化道器官进行分类的算法,因而无法有效生成胃部或食道的辅助诊断结果。
发明内容
本发明就是针对上述技术问题,提供一种消化道病灶图像识别系统及识别方法,该系统和方法,该系统及方法提高了消化道病灶图像识别的效率和准确性。
为实现上述目的,本发明所设计的一种消化道病灶图像识别系统,其特征在于:它包括存储器、图像预处理模块、图像特征提取模块、机器学习模块和图像识别模块,其中,所述存储器的存储数据通信端连接图像预处理模块的数据输入端,图像预处理模块的数据输出端连接图像特征提取模块的数据输入端,图像特征提取模块的第一数据输出端连接机器学习模块的数据输入端,图像特征提取模块的第二数据输出端连接图像识别模块的第一数据输入端,机器学习模块的数据输出端连接图像识别模块的第二数据输入端。
一种利用上述系统进行消化道病灶图像识别的方法,其特征在于,它包括如下步骤:
步骤1:在存储器中存入机器学习训练数据,其中,所述机器学习训练数据包括训练样本图像、测试样本图像、图像分类信息,数据解析模块从存储器中提取机器学习训练数据,并对提取的机器学习训练数据进行格式转换,生成所需图片格式的图像;
步骤2:图像特征提取模块使用尺度不变特征转换算法和完整局部二值模式算法提取机器学习训练数据中训练样本图像的图像纹理特征,同时使用超像素方法和网格法对机器学习训练数据进行分割,然后提取分割后机器学习训练数据中训练样本图像的熵特征和颜色矩特征;
图像特征提取模块还将图像纹理特征、熵特征和颜色矩特征分别传输给机器学习模块和图像识别模块;
图像特征提取模块还将机器学习训练数据传输给机器学习模块;
步骤3:机器学习模块采用卷积神经网络的深度学习方法根据图像分类信息对测试样本图像进行消化道位置分类,得到消化道位置分类数据,机器学习模块还根据图像纹理特征、熵特征和颜色矩特征,并依据支持向量机算法进行学习训练生成消化道病灶信息数据模型;
机器学习模块还将消化道位置分类和消化道病灶信息数据模型传输给图像识别模块;
步骤4:图像识别模块对训练样本图像按照消化道位置分类数据进行分类,并基于消化道位置分类的结果对不同消化道部位的训练样本图像提取图像纹理特征、熵特征和颜色矩特征,然后采用Adaboost算法对不同消化道部位的训练样本图像提取的图像纹理特征、熵特征和颜色矩特征进行病灶识别得到病灶的疑似区域,最后使用支持向量机应用消化道病灶信息数据模型对病灶识别疑似区域进行分类得到准确的病灶信息。
所述对数据解析模块生成的图像通过图像去冗余算法去除图像中的冗余图像的具体方法为:
根据如下图像去冗余算法先计算出时间序列上相邻的两个图像之间的相似度SI;
S I = Σ i = 1 N | g i - s i |
其中,N为图像宽度,gi源图像像素列,si目的图像像素列,时间序列在前的图像为源图像,时间序列在后的图像为目的图像;
根据如下公式计算时间序列上相邻的两个图像之间的相似度SI的加权平均值SI′:
SI′=0.299SIr+0.587SIg+0.114SIb
其中,SIr为红色的SI值,SIg为绿色的SI值,SIb为蓝色的SI值;
判断上述加权平均值SI′是否在预设的相似度阈值范围内,如果是,则删除,则表示时间序列上相邻的两个图像相似,此时删除目的图像,如果否,则表示时间序列上相邻的两个图像不相似,保留上述时间序列上相邻的两个图像;
所述图像边缘识别算法去掉消化道边缘轮廓的具体方法为:采用canny边缘检测算法待处理图像进行边缘检测,该算法使用了一阶有限差分sobel算子来计算图像梯度的幅值和方向,然后通过非极大值抑制和双阈值设定得到图像的边缘,并将检测到的图像边缘删除。
本发明针对消化道胶囊内镜图像尤其是胶囊胃镜图像提供了一个完整的病灶图像识别方案。该方案,能够有效提高阅片效率、识别定位病灶并提供辅助诊断信息。其带来的有益效果有:
1、本发明的图像去冗余算法有效减少了胶囊内镜的冗余图像,减少阅片工作量。
2、本发明中消化道分类算法能准确的划分消化道位置,可以分别对食道、胃部、小肠各段消化道做分类检查,并提高了辅助诊断的准确性。
3、本发明利用图像识别算法对病灶图像进行识别,能够有效的区分出出血、溃疡、肿瘤、息肉等病灶特征。
4、本发明通过图像预处理算法去除图像中的气泡、杂质、消化道边缘等干扰,并提取如SIFT、CLBP等图像特征,提高了消化道病灶图像识别的效率和准确性。
附图说明
图1为本发明的系统结构示意图。
图中:1—存储器、2—数据解析模块、3—图像预处理模块、4—图像特征提取模块、5—机器学习模块、6—图像识别模块。
具体实施方式
下面结合附图和具体实施例对本发明作进一步的详细说明。
本发明设计的一种消化道病灶图像识别系统,如图1所述,它包括存储器1(优选云端存储器)、图像预处理模块3、图像特征提取模块4、机器学习模块5和图像识别模块6,其中,所述存储器1的存储数据通信端连接图像预处理模块3的数据输入端,图像预处理模块3的数据输出端连接图像特征提取模块4的数据输入端,图像特征提取模块4的第一数据输出端连接机器学习模块5的数据输入端,图像特征提取模块4的第二数据输出端连接图像识别模块6的第一数据输入端,机器学习模块5的数据输出端连接图像识别模块6的第二数据输入端。
上述技术方案中,所述存储器1用于存储机器学习训练数据,其中,所述机器学习训练数据包括训练样本图像、测试样本图像、图像分类信息(图像分类信息通过图像的文件名与训练样本图像和测试样本图像关联);
所述图像特征提取模块4用于使用尺度不变特征转换算法(SIFT,Scale-invariantfeaturetransform)和完整局部二值模式算法(CLPB,completed local binarypattern)提取机器学习训练数据中训练样本图像的图像纹理特征,同时使用超像素方法和网格法对机器学习训练数据进行分割,然后提取分割后机器学习训练数据中训练样本图像的熵特征和颜色矩特征;尺度不变特征是1999年由David Lowe提出来的一种基于尺度空间的,对图像缩放、旋转甚至仿射变换保持不变性的图像局部特征描述算子,尺度不变特征转换算法首先构建图像的尺度空间,然后提取尺度空间的局部极值点作为关键点,最后由关键点区域的梯度方向信息生成具有尺度不变性的128维特征描述向量;
图像特征提取模块4还用于将图像纹理特征、熵特征和颜色矩特征分别传输给机器学习模块5和图像识别模块6;
图像特征提取模块4还用于将机器学习训练数据传输给机器学习模块5;
机器学习模块5用于采用卷积神经网络的深度学习方法根据图像分类信息对测试样本图像进行消化道位置分类,(分类位置包括食道、胃部、小肠、结肠),得到消化道位置分类数据,机器学习模块5还用于根据图像纹理特征、熵特征和颜色矩特征,并依据支持向量机算法(SVM,Support Vector Machine)进行学习训练生成消化道病灶信息数据模型;
机器学习模块5还用于将消化道位置分类和消化道病灶信息数据模型传输给图像识别模块6;
所述图像识别模块6用于对训练样本图像按照消化道位置分类数据进行分类,并基于消化道位置分类的结果对不同消化道部位的训练样本图像提取图像纹理特征、熵特征和颜色矩特征,然后采用Adaboost算法对不同消化道部位的训练样本图像提取的图像纹理特征、熵特征和颜色矩特征进行病灶识别,最后应用消化道病灶信息数据模型对病灶识别结果进行分类得到准确的病灶信息。
上述技术方案中,图像识别模块6最后将准确的病灶信息传输给辅助诊断模块。该辅助诊断模块对病历数据库中的病灶特征、形状、颜色、数量进行统计,然后根据图像识别模块6得到的准确病灶信息使用朴素贝叶斯算法生成相关病灶的诊断结果。该结果用于胶囊内窥镜机器辅助诊断。病历数据库包括以下字段:病历id、性别、病灶范围、病灶大小、病灶程度、病灶部位、病灶描述、检查建议。
辅助诊断模块首先会提取云端数据库的病历数据,统计每种病灶,病灶数量,病灶形状,病灶颜色,相对于疾病的条件概率。然后对病灶识别结果应用朴素贝叶斯算法得出辅助诊断结果。朴素贝叶斯是一种简单的分类器,要求每种属性的概率是相互独立的,计算病灶分类的概率公式其定义为:
P ( x | y i ) P ( y i ) = P ( a 1 | y i ) P ( a 2 | y i ) ... P ( a m | y i ) = P ( y i ) Π j = 1 m P ( a j | y i )
其中p(yi)表示疾病i的概率,p(am|yi)表示属性m相对疾病i的条件概率。P(X|Yi)表示X属性相对于i疾病的条件概率,此公式为朴素贝叶斯算法的公式。求该公式计算得到的最大值即可估计出疾病类型,然后根据疾病的类型生成诊断结果。
上述技术方案中,它还包括数据解析模块2,所述存储器1的存储数据通信端连接数据解析模块2的存储数据通信端,所述数据解析模块2的数据输出端连接图像预处理模块3的数据输入端;
所述数据解析模块2用于由机器学习训练数据生成所需图片格式的图像,图片格式包括JPEG、BMP、PNG和DICOM格式。
所述图像预处理模块3用于对数据解析模块2生成的图像通过图像去冗余算法去除图像中的冗余图像,再对去冗余后的图像使用Gabor滤波算法去掉图像中的噪声干扰、杂质干扰、气泡干扰、粘液干扰,并用图像边缘识别算法去掉消化道边缘轮廓的影响。Gabor滤波器的频率和方向表达同人类视觉系统类似,十分适合图像纹理的表达和分离。本发明使用的二维Gabor滤波器的脉冲响应可以定义为一个正弦平面波函数乘以高斯函数,其复数表示如下:
g ( x , y ; λ , θ , ψ , σ , γ ) = exp ( - x ′ 2 + γ 2 y ′ 2 2 σ 2 ) exp ( i ( 2 π x ′ λ + ψ )
其中:x′=xcosθ+ysinθ,y′=-xcosθ+ysinθ,λ表示正弦波函数的波长,它的值以像素为单位指定,通常大于等于2,但不能大于输入图像尺寸的五分之一;θ指定了Gabor函数并行条纹的方向,它的取值为0到360度;ψ为相位偏移它的取值范围为-180°~180°;γ为空间纵横比,它决定了Gabor函数的椭圆率;σ为Gabor函数的高斯因子的标准差,x、y表示图像的像素值;通过调整Gabor滤波器的波长λ和方向θ可以得到一组滤波器,本发明使用了一组(4×4个)Gabor滤波器来提取图像中的气泡和杂质特征,并使用提取到的特征对图像进行掩模过滤。
一种利用上述系统进行消化道病灶图像识别的方法,它包括如下步骤:
步骤1:在存储器1中存入机器学习训练数据,其中,所述机器学习训练数据包括训练样本图像、测试样本图像、图像分类信息,数据解析模块2从存储器1中提取机器学习训练数据,并对提取的机器学习训练数据进行格式转换,生成所需图片格式的图像;
步骤2:图像特征提取模块4使用尺度不变特征转换算法和完整局部二值模式算法提取机器学习训练数据中训练样本图像的图像纹理特征,同时使用超像素方法和网格法对机器学习训练数据进行分割,然后提取分割后机器学习训练数据中训练样本图像的熵特征和颜色矩特征;
图像特征提取模块4还将图像纹理特征、熵特征和颜色矩特征分别传输给机器学习模块5和图像识别模块6;
图像特征提取模块4还将机器学习训练数据传输给机器学习模块5;
步骤3:机器学习模块5采用卷积神经网络的深度学习方法根据图像分类信息对测试样本图像进行消化道位置分类,得到消化道位置分类数据,机器学习模块5还根据图像纹理特征、熵特征和颜色矩特征,并依据支持向量机算法进行学习训练生成消化道病灶信息数据模型;
机器学习模块5还将消化道位置分类和消化道病灶信息数据模型传输给图像识别模块6;
步骤4:图像识别模块6对训练样本图像按照消化道位置分类数据进行分类,并基于消化道位置分类的结果对不同消化道部位的训练样本图像提取图像纹理特征、熵特征和颜色矩特征,然后采用Adaboost算法对不同消化道部位的训练样本图像提取的图像纹理特征、熵特征和颜色矩特征进行病灶识别得到病灶的疑似区域,最后使用支持向量机应用消化道病灶信息数据模型对病灶识别疑似区域进行分类得到准确的病灶信息。
上述技术方案中,所述机器学习训练数据由消化道原始图像数据采取人工按需要选择的方式生成。消化道原始图像数据由胶囊内窥镜拍摄提供。消化道原始图像数据的数据格式为自定义类型。
上述技术方案中,所述对数据解析模块2生成的图像通过图像去冗余算法去除图像中的冗余图像的具体方法为:
根据如下图像去冗余算法先计算出时间序列上相邻的两个图像之间的相似度SI;
S I = Σ i = 1 N | g i - s i |
其中,N为图像宽度,gi源图像像素列,si目的图像像素列,时间序列在前的图像为源图像,时间序列在后的图像为目的图像;
根据如下公式计算时间序列上相邻的两个图像之间的相似度SI的加权平均值SI′:
SI′=0.299SIr+0.587SIg+0.114SIb
其中,SIr为红色的SI值,SIg为绿色的SI值,SIb为蓝色的SI值;
判断上述加权平均值SI′是否在预设的相似度阈值范围内,如果是,则删除,则表示时间序列上相邻的两个图像相似,此时删除目的图像,如果否,则表示时间序列上相邻的两个图像不相似,保留上述时间序列上相邻的两个图像;
所述图像边缘识别算法去掉消化道边缘轮廓的具体方法为:采用canny边缘检测算法待处理图像进行边缘检测,该算法使用了一阶有限差分sobel算子来计算图像梯度的幅值和方向,然后通过非极大值抑制和双阈值设定得到图像的边缘,并将检测到的图像边缘删除。
上述技术方案中,提取颜色特征前先使用上述的边缘检测算法去除消化道内壁等边缘特征,以减少其对提取图像颜色特征的干扰,然后对图像做网格分割和超像素分割并提取局部的颜色特征;
所述提取分割后机器学习训练数据中训练样本图像的颜色矩特征的具体方法为:
颜色特征主要提取HSV颜色空间(色调H,饱和度S,明度V)和RGB颜色空间下的颜色矩和颜色纯度特征,其中颜色矩包括,一阶矩二阶矩三阶矩
其中,hij表示彩色图像第i个颜色通道分量中灰度为j的像素出现的概率,n表示图像中的像素个数,μi表示第i个颜色通道图像灰度的均值;
颜色纯度特征包括RGB颜色空间下的红色颜色通道和HSV颜色空间下的饱和度通道与各自颜色空间中的其它通道的比值。
上述技术方案中,图像特征提取模块4提取训练样本图像的熵特征的方法为;提取训练样本图像的二维熵信息,训练样本图像的二维熵信息选择训练样本图像的邻域灰度均值作为灰度分布的空间特征量,灰度分布的空间特征量与训练样本图像的像素灰度组成特征二元组,记为(i,j),其中i表示像素的灰度值,j表示邻域灰度均值,训练样本图像任意像素位置上的灰度值与该像素位置周围像素灰度分布的综合特征的定义为Pij=f(i,j)/N2,其中f(i,j)为特征二元组(i,j)出现的频数,N为训练样本图像的尺度,离散的训练样本图像二维熵定义为:
H = Σ i = 0 255 P i j logP i j .
上述技术方案中,图像识别模块6对训练样本图像按照消化道位置分类数据并应用卷积神经网络模型(CNN,Convolutional neural networks)进行分类。
上述技术方案中,机器学习模块5对消化道分类和病灶分类采用了不同的学习方法。对消化道分类采用了基于神经网络的深度学习的方法,深度学习采用了5层卷积神经网络模型,在全连接层采用了SoftMax函数对提取到的消化道特征进行了分类,消化道分类结果为食道、胃部、小肠、结肠。对病灶的分类使用多分类的支持向量机(SVM)来实现,SVM分类器的公式可表示为:
f ( x ) = Σ i = 1 N ( α i y i x i · x + b )
其中ai拉格朗日系数该系数由训练得到,yi样本i的分类值,xi样本i的值。SVM分类使用了图像的颜色矩、CLBP特征、SIFT特征、二维熵特征,SVM可将病灶分为出血、溃疡、肿瘤、息肉。
图像识别模块6对去冗余、降噪、去干扰处理后的消化道图像应用CNN模型得到图像的分类结果,然后根据图像的时间序列得到消化的分段模型,并记录下胶囊通过食道、胃部、小肠、结肠的时间和这几个部位的起止图像ID。
根据上述消化道分段模型,在每个消化道的分段内应用Adaboost算法对病灶做一个初步的分类识别。Adaboost分类算法是将几个弱分类器加权组合成一个效果更好的强分类器,其公式可表达为:
G ( x ) = Σ m = 1 M α m G m ( x )
其中Gm(x)为第m个弱分类器,G(X)为最终得到的强分类器,am是弱分类器的系数即权值,可由弱分类器误差概率em计算得到,其计算方法为Adaboost识别出可疑病灶后,应用SVM再做一次病灶的细分类。对于出血(红色)、溃疡(白色)、黄色素瘤(黄色)等以颜色区分的病变,主要通过颜色矩、二维熵、CLBP等特征来识别。对于息肉和肿瘤等隆起型病变,主要使用CLPB、SIFT等特征来识别。将这些提取出来的特征应用于SVM可进一步提高病灶识别精度。
本说明书未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (10)

1.一种消化道病灶图像识别系统,其特征在于:它包括存储器(1)、图像预处理模块(3)、图像特征提取模块(4)、机器学习模块(5)和图像识别模块(6),其中,所述存储器(1)的存储数据通信端连接图像预处理模块(3)的数据输入端,图像预处理模块(3)的数据输出端连接图像特征提取模块(4)的数据输入端,图像特征提取模块(4)的第一数据输出端连接机器学习模块(5)的数据输入端,图像特征提取模块(4)的第二数据输出端连接图像识别模块(6)的第一数据输入端,机器学习模块(5)的数据输出端连接图像识别模块(6)的第二数据输入端。
2.根据权利要求1所述的消化道病灶图像识别系统,其特征在于:
所述存储器(1)用于存储机器学习训练数据,其中,所述机器学习训练数据包括训练样本图像、测试样本图像、图像分类信息;
所述图像特征提取模块(4)用于使用尺度不变特征转换算法和完整局部二值模式算法提取机器学习训练数据中训练样本图像的图像纹理特征,同时使用超像素方法和网格法对机器学习训练数据进行分割,然后提取分割后机器学习训练数据中训练样本图像的熵特征和颜色矩特征;
图像特征提取模块(4)还用于将图像纹理特征、熵特征和颜色矩特征分别传输给机器学习模块(5)和图像识别模块(6);
图像特征提取模块(4)还用于将机器学习训练数据传输给机器学习模块(5);
机器学习模块(5)用于采用卷积神经网络的深度学习方法根据图像分类信息对测试样本图像进行消化道位置分类,得到消化道位置分类数据,机器学习模块(5)还用于根据图像纹理特征、熵特征和颜色矩特征,并依据支持向量机算法进行学习训练生成消化道病灶信息数据模型;
机器学习模块(5)还用于将消化道位置分类和消化道病灶信息数据模型传输给图像识别模块(6);
所述图像识别模块(6)用于对训练样本图像按照消化道位置分类数据进行分类,并基于消化道位置分类的结果对不同消化道部位的训练样本图像提取图像纹理特征、熵特征和颜色矩特征,然后采用Adaboost算法对不同消化道部位的训练样本图像提取的图像纹理特征、熵特征和颜色矩特征进行病灶识别,最后应用消化道病灶信息数据模型对病灶识别结果进行分类得到准确的病灶信息。
3.根据权利要求1所述的消化道病灶图像识别系统,其特征在于:它还包括数据解析模块(2),所述存储器(1)的存储数据通信端连接数据解析模块(2)的存储数据通信端,所述数据解析模块(2)的数据输出端连接图像预处理模块(3)的数据输入端;
所述数据解析模块(2)用于由机器学习训练数据生成所需图片格式的图像;
所述图像预处理模块(3)用于对数据解析模块(2)生成的图像通过图像去冗余算法去除图像中的冗余图像,再对去冗余后的图像使用Gabor滤波算法去掉图像中的噪声干扰、杂质干扰、气泡干扰、粘液干扰,并用图像边缘识别算法去掉消化道边缘轮廓的影响。
4.一种利用权利要求1所述系统进行消化道病灶图像识别的方法,其特征在于,它包括如下步骤:
步骤1:在存储器(1)中存入机器学习训练数据,其中,所述机器学习训练数据包括训练样本图像、测试样本图像、图像分类信息,数据解析模块(2)从存储器(1)中提取机器学习训练数据,并对提取的机器学习训练数据进行格式转换,生成所需图片格式的图像;
步骤2:图像特征提取模块(4)使用尺度不变特征转换算法和完整局部二值模式算法提取机器学习训练数据中训练样本图像的图像纹理特征,同时使用超像素方法和网格法对机器学习训练数据进行分割,然后提取分割后机器学习训练数据中训练样本图像的熵特征和颜色矩特征;
图像特征提取模块(4)还将图像纹理特征、熵特征和颜色矩特征分别传输给机器学习模块(5)和图像识别模块(6);
图像特征提取模块(4)还将机器学习训练数据传输给机器学习模块(5);
步骤3:机器学习模块(5)采用卷积神经网络的深度学习方法根据图像分类信息对测试样本图像进行消化道位置分类,得到消化道位置分类数据,机器学习模块(5)还根据图像纹理特征、熵特征和颜色矩特征,并依据支持向量机算法进行学习训练生成消化道病灶信息数据模型;
机器学习模块(5)还将消化道位置分类和消化道病灶信息数据模型传输给图像识别模块(6);
步骤4:图像识别模块(6)对训练样本图像按照消化道位置分类数据进行分类,并基于消化道位置分类的结果对不同消化道部位的训练样本图像提取图像纹理特征、熵特征和颜色矩特征,然后采用Adaboost算法对不同消化道部位的训练样本图像提取的图像纹理特征、熵特征和颜色矩特征进行病灶识别得到病灶的疑似区域,最后使用支持向量机应用消化道病灶信息数据模型对病灶识别疑似区域进行分类得到准确的病灶信息。
5.根据权利要求4所述的消化道病灶图像识别方法,其特征在于:所述机器学习训练数据由消化道原始图像数据采取人工按需要选择的方式生成。
6.根据权利要求4所述的消化道病灶图像识别方法,其特征在于:所述对数据解析模块(2)生成的图像通过图像去冗余算法去除图像中的冗余图像的具体方法为:
根据如下图像去冗余算法先计算出时间序列上相邻的两个图像之间的相似度SI;
S I = Σ i = 1 N | g i - s i |
其中,N为图像宽度,gi源图像像素列,si目的图像像素列,时间序列在前的图像为源图像,时间序列在后的图像为目的图像;
根据如下公式计算时间序列上相邻的两个图像之间的相似度SI的加权平均值SI′:
SI′=0.299SIr+0.587SIg+0.114SIb
其中,SIr为红色的SI值,SIg为绿色的SI值,SIb为蓝色的SI值;
判断上述加权平均值SI′是否在预设的相似度阈值范围内,如果是,则删除,则表示时间序列上相邻的两个图像相似,此时删除目的图像,如果否,则表示时间序列上相邻的两个图像不相似,保留上述时间序列上相邻的两个图像;
所述图像边缘识别算法去掉消化道边缘轮廓的具体方法为:采用canny边缘检测算法待处理图像进行边缘检测,该算法使用了一阶有限差分sobel算子来计算图像梯度的幅值和方向,然后通过非极大值抑制和双阈值设定得到图像的边缘,并将检测到的图像边缘删除。
7.根据权利要求4所述的消化道病灶图像识别方法,其特征在于:所述提取分割后机器学习训练数据中训练样本图像的熵特征和颜色矩特征的具体方法为:
颜色特征主要提取HSV颜色空间和RGB颜色空间下的颜色矩和颜色纯度特征,其中颜色矩包括,一阶矩二阶矩三阶矩
其中,hij表示彩色图像第i个颜色通道分量中灰度为j的像素出现的概率,n表示图像中的像素个数,μi表示第i个颜色通道图像灰度的均值;
颜色纯度特征包括RGB颜色空间下的红色颜色通道和HSV颜色空间下的饱和度通道与各自颜色空间中的其它通道的比值。
8.根据权利要求4所述的消化道病灶图像识别方法,其特征在于:图像特征提取模块(4)提取训练样本图像的熵特征的方法为;提取训练样本图像的二维熵信息,训练样本图像的二维熵信息选择训练样本图像的邻域灰度均值作为灰度分布的空间特征量,灰度分布的空间特征量与训练样本图像的像素灰度组成特征二元组,记为(i,j),其中i表示像素的灰度值,j表示邻域灰度均值,训练样本图像任意像素位置上的灰度值与该像素位置周围像素灰度分布的综合特征的定义为Pij=f(i,j)/N2,其中f(i,j)为特征二元组(i,j)出现的频数,N为训练样本图像的尺度,离散的训练样本图像二维熵定义为:
H = Σ i = 0 255 P i j log P i j .
9.根据权利要求4所述的消化道病灶图像识别方法,其特征在于:图像识别模块(6)对训练样本图像按照消化道位置分类数据并应用卷积神经网络模型进行分类。
10.根据权利要求5所述的消化道病灶图像识别方法,其特征在于:所述消化道原始图像数据由胶囊内窥镜拍摄提供。
CN201610405322.3A 2016-06-08 2016-06-08 消化道病灶图像识别系统及识别方法 Active CN106097335B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610405322.3A CN106097335B (zh) 2016-06-08 2016-06-08 消化道病灶图像识别系统及识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610405322.3A CN106097335B (zh) 2016-06-08 2016-06-08 消化道病灶图像识别系统及识别方法

Publications (2)

Publication Number Publication Date
CN106097335A true CN106097335A (zh) 2016-11-09
CN106097335B CN106097335B (zh) 2019-01-25

Family

ID=57228886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610405322.3A Active CN106097335B (zh) 2016-06-08 2016-06-08 消化道病灶图像识别系统及识别方法

Country Status (1)

Country Link
CN (1) CN106097335B (zh)

Cited By (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106780456A (zh) * 2016-12-09 2017-05-31 江西中科九峰智慧医疗科技有限公司 检测粉刺数目的影像方法及系统
CN106910184A (zh) * 2017-01-12 2017-06-30 杭州电子科技大学 基于深度卷积神经网络的内窥镜图像肠道出血检测方法
CN106934799A (zh) * 2017-02-24 2017-07-07 安翰光电技术(武汉)有限公司 胶囊内窥镜图像辅助阅片系统及方法
CN107145840A (zh) * 2017-04-18 2017-09-08 重庆金山医疗器械有限公司 内镜专家诊断知识嵌入的计算机辅助 wce 序列图像数据识别模型
CN107230198A (zh) * 2017-06-09 2017-10-03 合肥工业大学 胃镜图像智能处理方法及装置
CN107240091A (zh) * 2017-04-21 2017-10-10 安翰光电技术(武汉)有限公司 胶囊内窥镜图像预处理系统及方法
CN107256552A (zh) * 2017-06-14 2017-10-17 成都康托医疗设备有限公司 息肉图像识别系统及方法
CN107292347A (zh) * 2017-07-06 2017-10-24 中冶华天南京电气工程技术有限公司 一种胶囊内窥镜图像识别方法
CN107564580A (zh) * 2017-09-11 2018-01-09 合肥工业大学 基于集成学习的胃镜图像辅助处理系统及方法
CN107730489A (zh) * 2017-10-09 2018-02-23 杭州电子科技大学 无线胶囊内窥镜小肠病变计算机辅助检测系统及检测方法
CN107729948A (zh) * 2017-10-31 2018-02-23 京东方科技集团股份有限公司 图像处理方法及装置、计算机产品和存储介质
CN108055454A (zh) * 2017-12-08 2018-05-18 合肥工业大学 医用内窥镜人工智能芯片的体系架构及图像处理方法
WO2018103538A1 (zh) * 2016-12-08 2018-06-14 北京推想科技有限公司 一种分析高维医疗数据的深度学习方法和装置
CN108354578A (zh) * 2018-03-14 2018-08-03 重庆金山医疗器械有限公司 一种胶囊内镜定位系统
CN108564570A (zh) * 2018-03-29 2018-09-21 哈尔滨工业大学(威海) 一种智能化的病变组织定位的方法和装置
CN108596870A (zh) * 2018-03-06 2018-09-28 重庆金山医疗器械有限公司 基于深度学习的胶囊内镜图像筛除方法、装置及设备
CN108596237A (zh) * 2018-04-19 2018-09-28 北京邮电大学 一种基于颜色和血管的lci激光内镜下的结肠息肉分类方法
CN108593643A (zh) * 2018-03-13 2018-09-28 重庆交通大学 基于智能移动终端的尿液检测方法
CN109044283A (zh) * 2018-08-31 2018-12-21 重庆高铂瑞骐科技开发有限公司 一种基于多模态信息的食道功能性疾病诊断系统
CN109091098A (zh) * 2017-10-27 2018-12-28 重庆金山医疗器械有限公司 磁控胶囊式内窥镜诊查系统
CN109154989A (zh) * 2018-03-02 2019-01-04 香港应用科技研究院有限公司 使用掩模来提高卷积神经网络对于癌细胞筛查应用的分类性能
CN109345503A (zh) * 2018-08-06 2019-02-15 浙江大学 一种基于图像多特征融合的胶囊胃镜图像出血点识别方法
CN109447966A (zh) * 2018-10-26 2019-03-08 科大讯飞股份有限公司 医学图像的病灶定位识别方法、装置、设备及存储介质
CN109447985A (zh) * 2018-11-16 2019-03-08 青岛美迪康数字工程有限公司 结肠镜图像分析方法、装置及可读存储介质
CN109447973A (zh) * 2018-10-31 2019-03-08 腾讯科技(深圳)有限公司 一种结肠息肉图像的处理方法和装置及系统
CN109493340A (zh) * 2018-11-28 2019-03-19 武汉大学人民医院(湖北省人民医院) 一种胃镜下食管胃底静脉曲张辅助诊断系统及方法
CN109670530A (zh) * 2018-11-15 2019-04-23 首都医科大学附属北京友谊医院 一种萎缩性胃炎图像识别模型的构建方法及其应用
CN109886937A (zh) * 2019-01-29 2019-06-14 国家电网有限公司 基于超像素分割图像识别的绝缘子缺陷检测方法
CN110060246A (zh) * 2019-04-15 2019-07-26 上海商汤智能科技有限公司 一种图像处理方法、设备及存储介质
CN110082781A (zh) * 2019-05-20 2019-08-02 东北大学秦皇岛分校 基于slam技术与图像识别的火源定位方法及系统
CN110121749A (zh) * 2016-11-23 2019-08-13 通用电气公司 用于图像采集的深度学习医疗系统和方法
CN110415792A (zh) * 2019-05-31 2019-11-05 上海联影智能医疗科技有限公司 图像检测方法、装置、计算机设备和存储介质
CN110414607A (zh) * 2019-07-31 2019-11-05 中山大学 胶囊内窥镜图像的分类方法、装置、设备及介质
CN110428393A (zh) * 2018-04-27 2019-11-08 丰田自动车株式会社 解析装置以及解析程序
WO2019218835A1 (zh) * 2018-05-16 2019-11-21 腾讯科技(深圳)有限公司 图像识别方法、存储介质及计算机设备
CN110600122A (zh) * 2019-08-23 2019-12-20 腾讯医疗健康(深圳)有限公司 一种消化道影像的处理方法、装置、以及医疗系统
CN110648311A (zh) * 2019-09-03 2020-01-03 南开大学 一种基于多任务学习的痤疮图像病灶分割与计数网络模型
US10537720B2 (en) 2018-04-09 2020-01-21 Vibrant Ltd. Method of enhancing absorption of ingested medicaments for treatment of parkinsonism
JP2020036837A (ja) * 2018-09-05 2020-03-12 株式会社ニデック 眼科画像処理装置、および眼科撮影装置
CN111259304A (zh) * 2020-02-17 2020-06-09 猎港信息技术(上海)有限公司 基于图像识别的论坛监控系统
CN111488889A (zh) * 2020-04-14 2020-08-04 郑州轻工业大学 一种用于图像边缘提取的智能图像处理仪
CN111507410A (zh) * 2020-04-17 2020-08-07 中国科学院半导体研究所 卷积胶囊层的构建方法和多视角图像的分类方法及装置
CN111655116A (zh) * 2017-10-30 2020-09-11 公益财团法人癌研究会 图像诊断辅助装置、资料收集方法、图像诊断辅助方法及图像诊断辅助程序
CN111739024A (zh) * 2020-08-28 2020-10-02 安翰科技(武汉)股份有限公司 图像识别方法、电子设备及可读存储介质
US10814113B2 (en) 2019-01-03 2020-10-27 Vibrant Ltd. Device and method for delivering an ingestible medicament into the gastrointestinal tract of a user
CN111986196A (zh) * 2020-09-08 2020-11-24 贵州工程应用技术学院 一种消化道胶囊内镜滞留自动监测方法及系统
US10888277B1 (en) 2017-01-30 2021-01-12 Vibrant Ltd Method for treating diarrhea and reducing Bristol stool scores using a vibrating ingestible capsule
US10905378B1 (en) 2017-01-30 2021-02-02 Vibrant Ltd Method for treating gastroparesis using a vibrating ingestible capsule
CN112419396A (zh) * 2020-12-03 2021-02-26 前线智能科技(南京)有限公司 一种甲状腺超声视频自动分析方法与系统
CN112801991A (zh) * 2021-02-03 2021-05-14 广东省科学院广州地理研究所 一种基于图像分割的水稻白叶枯病检测方法
US11020018B2 (en) 2019-01-21 2021-06-01 Vibrant Ltd. Device and method for delivering a flowable ingestible medicament into the gastrointestinal tract of a user
US11052018B2 (en) 2019-02-04 2021-07-06 Vibrant Ltd. Temperature activated vibrating capsule for gastrointestinal treatment, and a method of use thereof
CN113473899A (zh) * 2019-02-26 2021-10-01 奥林巴斯株式会社 内窥镜装置以及程序
CN113689939A (zh) * 2021-10-26 2021-11-23 萱闱(北京)生物科技有限公司 用于图像特征匹配的图像存储方法、系统和计算设备
US11276164B2 (en) 2018-08-21 2022-03-15 International Business Machines Corporation Classifier trained with data of different granularity
US11478401B2 (en) 2016-09-21 2022-10-25 Vibrant Ltd. Methods and systems for adaptive treatment of disorders in the gastrointestinal tract
US11504024B2 (en) 2018-03-30 2022-11-22 Vibrant Ltd. Gastrointestinal treatment system including a vibrating capsule, and method of use thereof
CN115375674A (zh) * 2022-10-21 2022-11-22 武汉楚精灵医疗科技有限公司 胃白光瘤变图像识别方法、装置及存储介质
US11510590B1 (en) 2018-05-07 2022-11-29 Vibrant Ltd. Methods and systems for treating gastrointestinal disorders
US11638678B1 (en) 2018-04-09 2023-05-02 Vibrant Ltd. Vibrating capsule system and treatment method
CN112419396B (zh) * 2020-12-03 2024-04-26 前线智能科技(南京)有限公司 一种甲状腺超声视频自动分析方法与系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103984957A (zh) * 2014-05-04 2014-08-13 中国科学院深圳先进技术研究院 胶囊内窥镜图像可疑病变区域自动预警系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103984957A (zh) * 2014-05-04 2014-08-13 中国科学院深圳先进技术研究院 胶囊内窥镜图像可疑病变区域自动预警系统

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
付延安: "无线胶囊内窥镜图像处理技术研究", 《中国博士学位论文全文数据库 信息科技辑》 *
张旭亚: "基于特征提取和机器学习的医学图像分析", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
徐琨 等: "基于分块颜色矩和纹理特征的图像检索方法", 《西安石油大学大学学报》 *
武京相: "融合全局和局部特征的医学图像分类", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
潘宁: "胶囊内镜图像序列冗余数据筛查方法研究", 《中国博士学位论文全文数据库 信息科技辑》 *

Cited By (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11478401B2 (en) 2016-09-21 2022-10-25 Vibrant Ltd. Methods and systems for adaptive treatment of disorders in the gastrointestinal tract
CN110121749A (zh) * 2016-11-23 2019-08-13 通用电气公司 用于图像采集的深度学习医疗系统和方法
CN110121749B (zh) * 2016-11-23 2024-02-13 通用电气公司 用于图像采集的深度学习医疗系统和方法
WO2018103538A1 (zh) * 2016-12-08 2018-06-14 北京推想科技有限公司 一种分析高维医疗数据的深度学习方法和装置
CN106780456A (zh) * 2016-12-09 2017-05-31 江西中科九峰智慧医疗科技有限公司 检测粉刺数目的影像方法及系统
CN106910184A (zh) * 2017-01-12 2017-06-30 杭州电子科技大学 基于深度卷积神经网络的内窥镜图像肠道出血检测方法
CN106910184B (zh) * 2017-01-12 2020-10-09 杭州电子科技大学 基于深度卷积神经网络的内窥镜图像肠道出血检测方法
US10905378B1 (en) 2017-01-30 2021-02-02 Vibrant Ltd Method for treating gastroparesis using a vibrating ingestible capsule
US10888277B1 (en) 2017-01-30 2021-01-12 Vibrant Ltd Method for treating diarrhea and reducing Bristol stool scores using a vibrating ingestible capsule
CN106934799A (zh) * 2017-02-24 2017-07-07 安翰光电技术(武汉)有限公司 胶囊内窥镜图像辅助阅片系统及方法
CN106934799B (zh) * 2017-02-24 2019-09-03 安翰科技(武汉)股份有限公司 胶囊内窥镜图像辅助阅片系统及方法
CN107145840A (zh) * 2017-04-18 2017-09-08 重庆金山医疗器械有限公司 内镜专家诊断知识嵌入的计算机辅助 wce 序列图像数据识别模型
CN107145840B (zh) * 2017-04-18 2020-04-21 重庆金山医疗器械有限公司 内镜专家诊断知识嵌入的计算机辅助wce序列图像数据识别方法
CN107240091B (zh) * 2017-04-21 2019-09-03 安翰科技(武汉)股份有限公司 胶囊内窥镜图像预处理系统及方法
CN107240091A (zh) * 2017-04-21 2017-10-10 安翰光电技术(武汉)有限公司 胶囊内窥镜图像预处理系统及方法
CN107230198A (zh) * 2017-06-09 2017-10-03 合肥工业大学 胃镜图像智能处理方法及装置
CN107256552B (zh) * 2017-06-14 2020-08-18 成都微识医疗设备有限公司 息肉图像识别系统及方法
CN107256552A (zh) * 2017-06-14 2017-10-17 成都康托医疗设备有限公司 息肉图像识别系统及方法
CN107292347A (zh) * 2017-07-06 2017-10-24 中冶华天南京电气工程技术有限公司 一种胶囊内窥镜图像识别方法
CN107564580A (zh) * 2017-09-11 2018-01-09 合肥工业大学 基于集成学习的胃镜图像辅助处理系统及方法
CN107730489A (zh) * 2017-10-09 2018-02-23 杭州电子科技大学 无线胶囊内窥镜小肠病变计算机辅助检测系统及检测方法
CN109091098A (zh) * 2017-10-27 2018-12-28 重庆金山医疗器械有限公司 磁控胶囊式内窥镜诊查系统
CN111655116A (zh) * 2017-10-30 2020-09-11 公益财团法人癌研究会 图像诊断辅助装置、资料收集方法、图像诊断辅助方法及图像诊断辅助程序
US11633084B2 (en) 2017-10-30 2023-04-25 Japanese Foundation For Cancer Research Image diagnosis assistance apparatus, data collection method, image diagnosis assistance method, and image diagnosis assistance program
US11138738B2 (en) 2017-10-31 2021-10-05 Boe Technology Group Co., Ltd. Image processing method and image processing device
CN107729948A (zh) * 2017-10-31 2018-02-23 京东方科技集团股份有限公司 图像处理方法及装置、计算机产品和存储介质
CN108055454A (zh) * 2017-12-08 2018-05-18 合肥工业大学 医用内窥镜人工智能芯片的体系架构及图像处理方法
CN108055454B (zh) * 2017-12-08 2020-07-28 合肥工业大学 医用内窥镜人工智能芯片的体系架构及图像处理方法
CN109154989A (zh) * 2018-03-02 2019-01-04 香港应用科技研究院有限公司 使用掩模来提高卷积神经网络对于癌细胞筛查应用的分类性能
CN109154989B (zh) * 2018-03-02 2021-07-06 香港应用科技研究院有限公司 使用掩模来提高卷积神经网络对于癌细胞筛查应用的分类性能
CN108596870A (zh) * 2018-03-06 2018-09-28 重庆金山医疗器械有限公司 基于深度学习的胶囊内镜图像筛除方法、装置及设备
CN108593643A (zh) * 2018-03-13 2018-09-28 重庆交通大学 基于智能移动终端的尿液检测方法
CN108354578A (zh) * 2018-03-14 2018-08-03 重庆金山医疗器械有限公司 一种胶囊内镜定位系统
CN108564570A (zh) * 2018-03-29 2018-09-21 哈尔滨工业大学(威海) 一种智能化的病变组织定位的方法和装置
US11504024B2 (en) 2018-03-30 2022-11-22 Vibrant Ltd. Gastrointestinal treatment system including a vibrating capsule, and method of use thereof
US10537720B2 (en) 2018-04-09 2020-01-21 Vibrant Ltd. Method of enhancing absorption of ingested medicaments for treatment of parkinsonism
US11638678B1 (en) 2018-04-09 2023-05-02 Vibrant Ltd. Vibrating capsule system and treatment method
US10543348B2 (en) 2018-04-09 2020-01-28 Vibrant Ltd. Method of enhancing absorption of ingested medicaments for treatment of an an ailment of the GI tract
CN108596237A (zh) * 2018-04-19 2018-09-28 北京邮电大学 一种基于颜色和血管的lci激光内镜下的结肠息肉分类方法
CN110428393A (zh) * 2018-04-27 2019-11-08 丰田自动车株式会社 解析装置以及解析程序
CN110428393B (zh) * 2018-04-27 2022-12-13 丰田自动车株式会社 解析装置以及解析程序
US11510590B1 (en) 2018-05-07 2022-11-29 Vibrant Ltd. Methods and systems for treating gastrointestinal disorders
WO2019218835A1 (zh) * 2018-05-16 2019-11-21 腾讯科技(深圳)有限公司 图像识别方法、存储介质及计算机设备
US11270169B2 (en) 2018-05-16 2022-03-08 Tencent Technology (Shenzhen) Company Limited Image recognition method, storage medium and computer device
CN109345503A (zh) * 2018-08-06 2019-02-15 浙江大学 一种基于图像多特征融合的胶囊胃镜图像出血点识别方法
US11276164B2 (en) 2018-08-21 2022-03-15 International Business Machines Corporation Classifier trained with data of different granularity
CN109044283A (zh) * 2018-08-31 2018-12-21 重庆高铂瑞骐科技开发有限公司 一种基于多模态信息的食道功能性疾病诊断系统
JP2020036837A (ja) * 2018-09-05 2020-03-12 株式会社ニデック 眼科画像処理装置、および眼科撮影装置
JP7328489B2 (ja) 2018-09-05 2023-08-17 株式会社ニデック 眼科画像処理装置、および眼科撮影装置
CN109447966A (zh) * 2018-10-26 2019-03-08 科大讯飞股份有限公司 医学图像的病灶定位识别方法、装置、设备及存储介质
CN109447973A (zh) * 2018-10-31 2019-03-08 腾讯科技(深圳)有限公司 一种结肠息肉图像的处理方法和装置及系统
CN109447973B (zh) * 2018-10-31 2021-11-26 腾讯医疗健康(深圳)有限公司 一种结肠息肉图像的处理方法和装置及系统
CN109670530A (zh) * 2018-11-15 2019-04-23 首都医科大学附属北京友谊医院 一种萎缩性胃炎图像识别模型的构建方法及其应用
CN109447985A (zh) * 2018-11-16 2019-03-08 青岛美迪康数字工程有限公司 结肠镜图像分析方法、装置及可读存储介质
CN109493340A (zh) * 2018-11-28 2019-03-19 武汉大学人民医院(湖北省人民医院) 一种胃镜下食管胃底静脉曲张辅助诊断系统及方法
US10814113B2 (en) 2019-01-03 2020-10-27 Vibrant Ltd. Device and method for delivering an ingestible medicament into the gastrointestinal tract of a user
US11020018B2 (en) 2019-01-21 2021-06-01 Vibrant Ltd. Device and method for delivering a flowable ingestible medicament into the gastrointestinal tract of a user
CN109886937A (zh) * 2019-01-29 2019-06-14 国家电网有限公司 基于超像素分割图像识别的绝缘子缺陷检测方法
CN109886937B (zh) * 2019-01-29 2021-08-03 国家电网有限公司 基于超像素分割图像识别的绝缘子缺陷检测方法
US11052018B2 (en) 2019-02-04 2021-07-06 Vibrant Ltd. Temperature activated vibrating capsule for gastrointestinal treatment, and a method of use thereof
CN113473899A (zh) * 2019-02-26 2021-10-01 奥林巴斯株式会社 内窥镜装置以及程序
CN110060246A (zh) * 2019-04-15 2019-07-26 上海商汤智能科技有限公司 一种图像处理方法、设备及存储介质
CN110060246B (zh) * 2019-04-15 2021-08-24 上海商汤智能科技有限公司 一种图像处理方法、设备及存储介质
CN110082781A (zh) * 2019-05-20 2019-08-02 东北大学秦皇岛分校 基于slam技术与图像识别的火源定位方法及系统
CN110415792A (zh) * 2019-05-31 2019-11-05 上海联影智能医疗科技有限公司 图像检测方法、装置、计算机设备和存储介质
CN110415792B (zh) * 2019-05-31 2022-03-25 上海联影智能医疗科技有限公司 图像检测方法、装置、计算机设备和存储介质
CN110414607A (zh) * 2019-07-31 2019-11-05 中山大学 胶囊内窥镜图像的分类方法、装置、设备及介质
CN110600122B (zh) * 2019-08-23 2023-08-29 腾讯医疗健康(深圳)有限公司 一种消化道影像的处理方法、装置、以及医疗系统
CN110600122A (zh) * 2019-08-23 2019-12-20 腾讯医疗健康(深圳)有限公司 一种消化道影像的处理方法、装置、以及医疗系统
CN110648311B (zh) * 2019-09-03 2023-04-18 南开大学 一种基于多任务学习的痤疮图像病灶分割与计数网络模型
CN110648311A (zh) * 2019-09-03 2020-01-03 南开大学 一种基于多任务学习的痤疮图像病灶分割与计数网络模型
CN111259304A (zh) * 2020-02-17 2020-06-09 猎港信息技术(上海)有限公司 基于图像识别的论坛监控系统
CN111488889A (zh) * 2020-04-14 2020-08-04 郑州轻工业大学 一种用于图像边缘提取的智能图像处理仪
CN111488889B (zh) * 2020-04-14 2023-11-07 郑州轻工业大学 一种用于图像边缘提取的智能图像处理仪
CN111507410B (zh) * 2020-04-17 2021-02-12 中国科学院半导体研究所 卷积胶囊层的构建方法和多视角图像的分类方法及装置
CN111507410A (zh) * 2020-04-17 2020-08-07 中国科学院半导体研究所 卷积胶囊层的构建方法和多视角图像的分类方法及装置
CN111739024B (zh) * 2020-08-28 2020-11-24 安翰科技(武汉)股份有限公司 图像识别方法、电子设备及可读存储介质
CN111739024A (zh) * 2020-08-28 2020-10-02 安翰科技(武汉)股份有限公司 图像识别方法、电子设备及可读存储介质
CN111986196A (zh) * 2020-09-08 2020-11-24 贵州工程应用技术学院 一种消化道胶囊内镜滞留自动监测方法及系统
CN112419396A (zh) * 2020-12-03 2021-02-26 前线智能科技(南京)有限公司 一种甲状腺超声视频自动分析方法与系统
CN112419396B (zh) * 2020-12-03 2024-04-26 前线智能科技(南京)有限公司 一种甲状腺超声视频自动分析方法与系统
CN112801991A (zh) * 2021-02-03 2021-05-14 广东省科学院广州地理研究所 一种基于图像分割的水稻白叶枯病检测方法
CN113689939B (zh) * 2021-10-26 2022-04-08 萱闱(北京)生物科技有限公司 用于图像特征匹配的图像存储方法、系统和计算设备
CN113689939A (zh) * 2021-10-26 2021-11-23 萱闱(北京)生物科技有限公司 用于图像特征匹配的图像存储方法、系统和计算设备
CN115375674A (zh) * 2022-10-21 2022-11-22 武汉楚精灵医疗科技有限公司 胃白光瘤变图像识别方法、装置及存储介质

Also Published As

Publication number Publication date
CN106097335B (zh) 2019-01-25

Similar Documents

Publication Publication Date Title
CN106097335A (zh) 消化道病灶图像识别系统及识别方法
Shoieb et al. Computer-aided model for skin diagnosis using deep learning
Ribeiro et al. Colonic polyp classification with convolutional neural networks
Shin et al. Comparison of hand-craft feature based SVM and CNN based deep learning framework for automatic polyp classification
CN110348319B (zh) 一种基于人脸深度信息和边缘图像融合的人脸防伪方法
Zhu et al. Lesion detection of endoscopy images based on convolutional neural network features
US8345936B2 (en) Multispectral iris fusion for enhancement and interoperability
Rahmatullah et al. Integration of local and global features for anatomical object detection in ultrasound
CN103679192B (zh) 基于协方差特征的图像场景类型判别方法
CN112150428A (zh) 一种基于深度学习的医学图像分割方法
CN111126240B (zh) 一种三通道特征融合人脸识别方法
CN109977955A (zh) 一种基于深度学习的宫颈癌前病变识别的方法
CN104298974A (zh) 一种基于深度视频序列的人体行为识别方法
CN107292346B (zh) 一种基于局部子空间学习的mr图像海马体分割算法
CN109284781A (zh) 基于流形学习的图像分类算法和系统
CN114511502A (zh) 一种基于人工智能的胃肠道内窥镜图像息肉检测系统、终端及存储介质
Hao et al. Automatic labeling of cortical sulci using spherical convolutional neural networks in a developmental cohort
CN109165551B (zh) 一种自适应加权融合显著性结构张量和lbp特征的表情识别方法
Vu et al. Boundary delineation of reflux esophagitis lesions from endoscopic images using color and texture
HajiMaghsoudi et al. Automatic informative tissue's discriminators in WCE
Niazi et al. Hybrid face detection in color images
Zhao et al. WCE video abstracting based on novel color and texture features
CN107423765A (zh) 基于稀疏编码反馈网络的自底而上显著目标检测方法
Zhou et al. Wireless capsule endoscopy video automatic segmentation
Zhang et al. Deep Learning of Color Constancy Based on Object Recognition

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 430075 666 new high tech Avenue, East Lake New Technology Development Zone, Wuhan, Hubei

Patentee after: Anhan Technology (Wuhan) Co.,Ltd.

Address before: 430075 666 new high tech Avenue, East Lake New Technology Development Zone, Wuhan, Hubei

Patentee before: ANKON TECHNOLOGIES Co.,Ltd.

CP01 Change in the name or title of a patent holder
IP01 Partial invalidation of patent right

Commission number: 4W114619

Conclusion of examination: Claim 6 of invention patent number 201610405322.3 is declared invalid, and the validity of this patent shall continue to be maintained on the basis of claims 1-5 and 7-9

Decision date of declaring invalidation: 20230414

Decision number of declaring invalidation: 560260

Denomination of invention: Image recognition system and methods for gastrointestinal lesions

Granted publication date: 20190125

Patentee: Anhan Technology (Wuhan) Co.,Ltd.

IP01 Partial invalidation of patent right