CN106687023A - 评价值计算装置以及电子内窥镜系统 - Google Patents
评价值计算装置以及电子内窥镜系统 Download PDFInfo
- Publication number
- CN106687023A CN106687023A CN201680002610.2A CN201680002610A CN106687023A CN 106687023 A CN106687023 A CN 106687023A CN 201680002610 A CN201680002610 A CN 201680002610A CN 106687023 A CN106687023 A CN 106687023A
- Authority
- CN
- China
- Prior art keywords
- evaluation
- axle
- pixel
- corresponding point
- pixel corresponding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 121
- 238000004364 calculation method Methods 0.000 title claims abstract description 20
- 210000004877 mucosa Anatomy 0.000 claims description 52
- 230000033228 biological regulation Effects 0.000 claims description 42
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 241001062009 Indigofera Species 0.000 claims description 2
- 230000009466 transformation Effects 0.000 abstract 3
- 238000000034 method Methods 0.000 description 149
- 230000008569 process Effects 0.000 description 76
- 206010061218 Inflammation Diseases 0.000 description 65
- 230000004054 inflammatory process Effects 0.000 description 65
- 238000012545 processing Methods 0.000 description 40
- 230000002757 inflammatory effect Effects 0.000 description 36
- 230000008859 change Effects 0.000 description 35
- 230000009471 action Effects 0.000 description 24
- 239000000203 mixture Substances 0.000 description 19
- 102000001554 Hemoglobins Human genes 0.000 description 11
- 108010054147 Hemoglobins Proteins 0.000 description 11
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 11
- 201000010099 disease Diseases 0.000 description 10
- 230000003902 lesion Effects 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 7
- 230000000295 complement effect Effects 0.000 description 6
- 238000003745 diagnosis Methods 0.000 description 6
- 239000003086 colorant Substances 0.000 description 5
- 230000005611 electricity Effects 0.000 description 5
- 210000002429 large intestine Anatomy 0.000 description 5
- 210000000056 organ Anatomy 0.000 description 5
- 230000005855 radiation Effects 0.000 description 5
- 230000009467 reduction Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000002349 favourable effect Effects 0.000 description 3
- 231100000915 pathological change Toxicity 0.000 description 3
- 230000036285 pathological change Effects 0.000 description 3
- 230000000241 respiratory effect Effects 0.000 description 3
- 206010009900 Colitis ulcerative Diseases 0.000 description 2
- 208000022559 Inflammatory bowel disease Diseases 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 2
- 208000037062 Polyps Diseases 0.000 description 2
- 201000006704 Ulcerative Colitis Diseases 0.000 description 2
- 230000032683 aging Effects 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 201000011510 cancer Diseases 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000001079 digestive effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000000968 intestinal effect Effects 0.000 description 2
- 230000000873 masking effect Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000002784 stomach Anatomy 0.000 description 2
- 238000013316 zoning Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000007844 bleaching agent Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 210000001198 duodenum Anatomy 0.000 description 1
- 235000013601 eggs Nutrition 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000007717 exclusion Effects 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 1
- 239000010931 gold Substances 0.000 description 1
- 229910052737 gold Inorganic materials 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002401 inhibitory effect Effects 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 229910001507 metal halide Inorganic materials 0.000 description 1
- 150000005309 metal halides Chemical class 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 210000004400 mucous membrane Anatomy 0.000 description 1
- 210000004798 organs belonging to the digestive system Anatomy 0.000 description 1
- 244000144985 peep Species 0.000 description 1
- 239000000049 pigment Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000000243 solution Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 210000004291 uterus Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/00048—Constructional features of the display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
- A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/207—Analysis of motion for motion estimation over a hierarchy of resolutions
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Optics & Photonics (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种评价值计算装置以及电子内窥镜系统,其中,所述电子内窥镜系统被构成为具备:配置单元,将与具有多个色彩成分并构成彩色图像的各像素对应的像素对应点按照该像素对应点的色彩成分配置在与规定的色彩空间的原点交叉的第一色彩平面内;轴设定单元,在第一色彩平面内设定规定的基准轴;转换单元,定义包括基准轴的第二色彩平面,将该第一色彩平面内的所述各像素对应点投影转换于该第二色彩平面;评价值计算单元,基于被投影转换于第二色彩平面的各像素对应点,计算对于彩色图像的规定的评价值。
Description
技术领域
本发明涉及一种计算规定的评价值的评价值计算装置以及电子内窥镜系统。
背景技术
一般而言,病变部会显示出与正常的粘膜组织不同的颜色。近年来,伴随彩色内窥镜装置性能的提升,手术者已经能够有把握地诊断出颜色上与正常组织存在细微不同的病变部。然而,手术者为了能够基于内窥镜的拍摄图像上颜色的细微差别而正确并且有把握地从正常组织中诊断出病变部,需要在熟练技术人员的指导下接受长期的训练。并且,即使对于熟练的手术者来说,也不能轻易地基于颜色上的细微差别而有把握地诊断出病变部,要求谨慎的作业。
因此,例如在日本特开2014-18332号公报(以下,记为“专利文献1”)中记载有一种装置,为了辅助手术者进行病变部的诊断,对拍摄图像上显示的病变部进行评分。具体而言,在专利文献1所记载的装置中,对构成内窥镜的拍摄图像的各像素,进行对像素值赋予非线性的增益的色调增强处理,扩大被判定为病变部的像素值的区域的边界附近的动态范围,之后,将由RGB三原色定义的RGB空间的经色调增强的像素数据转换为HSI色彩空间、HSV色彩空间等规定的色彩空间,取得色相和饱和度的信息,基于所取得的色相和饱和度的信息来判定是否为病变部的像素,并且基于被判定的像素的数量来计算评价值(病变指数)。
发明内容
但是,由于色调增强处理等非线性的计算处理和色彩空间的转换处理负荷重,因此,存在执行处理时需要多量的硬件资源的问题。另外,由于进行色调增强处理,从而也存在拍摄图像的评价值由于影响图像的明亮度的拍摄条件(例如照射光的照射情况等)而产生变动的问题。
本发明是鉴于上述的问题而完成的,其目的在于提供一种评价值计算装置以及电子内窥镜系统,能够抑制由于图像的明亮度所导致的评价值的变动,同时,能够抑制评价值计算的处理负荷。
本发明的一实施方式所涉及的电子内窥镜系统具备:配置单元,将与具有多个色彩成分并构成彩色图像的各像素对应的像素对应点按照该像素对应点的色彩成分配置在与规定的色彩空间的原点交叉的第一色彩平面内;轴设定单元,在第一色彩平面内设定规定的基准轴;转换单元,定义包括基准轴的第二色彩平面,并且将该第一色彩平面内的各像素对应点投影转换在该第二色彩平面内;评价值计算单元,基于被投影转换在第二色彩平面内的各像素对应点计算对于彩色图像的规定的评价值。
另外,在本发明的一实施方式中,第一色彩平面例如为包括R成分的轴的平面。
另外,在本发明的一实施方式中,第一色彩平面例如为还包括G成分的轴的平面。
另外,在本发明的一实施方式中,第二色彩平面例如为包括R成分的轴以及基准轴的平面,R成分的轴和基准轴正交。
另外,在本发明的一实施方式中,基准轴例如为与体腔内的粘膜的颜色相关度高的轴。
另外,在本发明的一实施方式中,评价值计算单元可以构成为,对被投影转换于第二色彩平面的各像素对应点,应用与R成分的轴的值成比例地变高的第一系数和随着基准轴的值变高而变低的第二系数,并且基于所应用的第一系数以及第二系数计算该像素对应点的评价值,并且基于计算出的各像素对应点的评价值计算对于彩色图像的规定的评价值。
另外,在本发明的一实施方式中,评价值计算单元可以构成为,将应用于像素对应点的第一系数和第二系数相乘,并且基于相乘所得到的值计算该像素对应点的评价值。
在本发明的一实施方式中,规定的评价值例如为将体腔内的异常部数值化示出的值。
另外,在本发明的一实施方式中,可以构成为,轴设定单元通过基准轴将第一色彩平面划分为第一区域和第二区域。在这种情况下,评价值计算单元使用配置在第一区域的像素对应点计算规定的评价值。另外,轴设定单元设定基准轴,以使得配置在第二区域内的像素对应点的数量在规定的范围内。
另外,本发明的一实施方式所涉及的评价值计算装置具备:配置单元,将与具有多个色彩成分并构成彩色图像的各像素对应的像素对应点按照该像素对应点的色彩成分配置在与规定的色彩空间的原点交叉的第一色彩平面内;轴设定单元,在第一色彩平面内设定规定的基准轴;转换单元,定义包括基准轴的第二色彩平面,并且将该第一色彩平面内的各像素对应点投影转换于该第二色彩平面;评价值计算单元,基于被投影转换于第二色彩平面的各像素对应点计算对于彩色图像的规定的评价值。
本发明的一实施方式所涉及的评价值计算装置具备:配置单元,将与具有R(红)、G(绿)、B(蓝)的各色彩成分并构成彩色图像的各像素对应的像素对应点按照其色彩成分配置在包括R成分的轴即第一轴和与该第一轴正交的G成分的轴即第二轴的第一平面内;转换单元,定义在第一平面内穿过第一轴和第二轴的交点并且相对于该第一轴、该第二轴的任何一方非平行的第三轴,定义该第一轴和该第二轴正交的第二平面,并且将各像素对应点投影转换于该第二平面;评价值计算单元,基于被投影转换于第二平面的各像素对应点,计算对于彩色图像的规定的评价值。
另外,在本发明的一实施方式中,第三轴例如为与体腔内的粘膜的颜色相关度高的轴。
另外,在本发明的一实施方式中,评价值计算单元可以构成为,对被投影转换于第二平面的各像素对应点,应用与第一轴的值成比例地变高的第一系数和随着第三轴的值变高而变低的第二系数,并且基于所应用的第一系数以及第二系数计算该像素对应点的评价值,基于计算出的各像素对应点的评价值计算对于彩色图像的规定的评价值。
另外,在本发明的一实施方式中,评价值计算单元可以构成为,将应用于像素对应点的第一系数和第二系数相乘,并且基于相乘所得到的值计算该像素对应点的评价值。
另外,在本发明的一实施方式中,规定的评价值例如为将体腔内的异常部数值化示出的值。
另外,本发明的一实施方式所涉及的评价值计算装置可以组装于电子内窥镜系统。
根据本发明的一实施方式,提供一种评价值计算装置以及电子内窥镜系统,能够抑制由于图像的明亮度而导致的评价值的变动,同时,能够抑制评价值计算的处理负荷。
附图说明
图1为示出本发明的一实施方式所涉及的电子内窥镜系统的构成的框图。
图2为示出利用本发明的一实施方式所涉及的处理器所具备的特殊图像处理电路进行的特殊图像生成处理的流程的图。
图3为辅助图2的处理步骤S13中的炎症强度的计算处理的说明的图。
图4为辅助图2的处理步骤S13中的炎症强度的计算处理的说明的图。
图5为辅助图2的处理步骤S13中的炎症强度的计算处理的说明的图。
图6为示出在本发明的一实施方式中,当特殊模式时监视器的显示画面上显示的显示画面例子的图。
图7为示出利用本发明的另一实施方式所涉及的处理器所具备的特殊图像处理电路进行的特殊图像生成处理的流程的图。
图8为辅助图7的处理步骤S212中的基准轴AX的设定方法的说明的图。
图9为示出图7所示的在实施方式的变形例中执行的、粘膜变化轴(基准轴AX)的设定处理的流程的图。
图10为辅助图9所示的变形例所涉及的设定处理的说明的图。
图11为示出本发明的另一实施方式所涉及的炎症评价值计算处理的流程的图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。另外,在以下的说明中,作为本发明的一实施方式,以电子内窥镜系统为例进行说明。
[电子内窥镜系统1的构成]
图1为示出本发明的一实施方式所涉及的电子内窥镜系统1的构成的框图。如图1所示,电子内窥镜系统1包括电子镜100、处理器200以及监视器300。
处理器200包括系统控制器202和时刻控制器204。系统控制器202执行存储在存储器222中的各种程序,并且统一控制电子内窥镜系统1整体。另外,系统控制器202连接于操作面板218。系统控制器202根据从操作面板218输入的来自手术者的指示而变更电子内窥镜系统1的各动作以及用于各动作的参数。在手术者的输入指示中存在例如电子内窥镜系统1的动作模式的切换指示。在本实施方式中,作为动作模式,有普通模式和特殊模式。时刻控制器204将调整各部分的动作的时刻的时钟脉冲输出至电子内窥镜系统1内的各电路。
灯208在利用灯电源点火器206开始动作后射出白色光L。灯208例如为氙灯、卤素灯、汞灯、金属卤化物灯等高亮度灯。从灯208射出的白色光L被聚光透镜210聚光并且经由光圈212被限制为适当的光量。此外,灯208可以调换为LD(激光二极管Laser Diode)或者LED(发光二极管LightEmitting Diode)等半导体发光元件。此外,关于半导体发光元件,与其他的光源相比较,由于具有低消耗电力、发热量小等特征,因此,具有能够抑制消耗电力和发热量并且取得明亮的图像的优点。能够取得明亮的图像与提高后述的炎症评价值的精度相关。
电机214经由省略图示的臂部或者齿轮等传递机构而机械连接于光圈212。电机214例如为DC电机,在驱动器216的驱动控制下进行驱动。就光圈212而言,为了使显示在监视器300的显示画面的影像为适当的亮度,通过电机214进行动作而改变开度。从灯208照射的白色光L的光量根据光圈212的开度而被限制。适当的影像的明亮度的基准根据手术者对操作面板218的亮度调节操作来设定变更。此外,控制驱动器216而进行亮度调整的调光电路是公知的电路,在本说明书中省略其说明。
通过光圈212的白色光L汇聚在LCB(光导纤维束Light Carrying Bundle)102的入射端面并射入LCB102内。从入射端面入射至LCB102内的白色光L在LCB102内传播。在LCB102内传播的白色光L从配置于电子镜100的前端的LCB102的射出端面射出,经由配光透镜104而照射生物体组织。来自被白色光L照射的生物体组织的返回光经由物镜106在固体拍摄元件108的受光面上形成光学图像。
固体拍摄元件108为具有拜耳型像素配置的单板式彩色CCD(电荷耦合装置ChargeCoupled Device)图像传感器。固体拍摄元件108将由受光面上的各像素成像的光学图像作为对应于光量的电荷进行蓄积,生成R(Red,红色)、G(Green,绿色)、B(Blue,蓝色)的图像信号并输出。以下,将由固体拍摄元件108依次输出的各像素(各像素地址)的图像信号记为“像素信号”。此外,固体拍摄元件108并不限于CCD图像传感器,也可以调换为CMOS(互补金属氧化物半导体Complementary Metal Oxide Semiconductor)图像传感器或其他种类的拍摄装置。固定拍摄元件108还可以搭载补色系滤光器。作为补色系滤光器的一例,可举出CMYG(青色、品红色、黄色、绿色)滤光器。
原色系(RGB)滤光器与补色系滤光器相比较,显色性好。因此,如果将由搭载原色系滤光器的拍摄元件拍摄的RGB图像信号用于算出炎症评价值的话,则能够提高评价精度。另外,通过使用原色系滤光器,在后述的炎症评价值计算的处理中无需进行信号的转换。因此,能够抑制炎症评价值计算的处理负荷。
在电子镜100的连接部内具备驱动器信号处理电路112。以帧周期通过固体拍摄元件108向驱动器信号处理电路112输入由白色光L照射的生物体组织的像素信号。驱动器信号处理电路112将由固体拍摄元件108输入的像素信号向处理器200的前级信号处理电路220输出。此外,在以后的说明中,“帧”也可以调换为“半帧”。在本实施方式中,帧周期、半帧周期分别为1/30秒、1/60秒。
驱动器信号处理电路112还访问存储器114并读取电子镜100的固有信息。存储器114中所记录的电子镜100的固有信息包括例如固体拍摄器件108的像素数或敏感度、可操作的帧速率、型号等。驱动器信号处理电路112将从存储器114读出的固有信息输出至系统控制器202。
系统控制器202基于电子镜100的固有信息进行各种运算,并生成控制信号。系统控制器202使用所生成的控制信号控制处理器200内的各种电路的动作和时刻,从而进行适合与处理器200连接的电子镜的处理。
时刻控制器204根据系统控制器202的时刻控制向驱动器信号处理电路112供应时钟脉冲。驱动器信号处理电路112根据从时刻控制器204供应的时钟脉冲,按照与在处理器200侧所处理的影像的帧速率同步的时序来驱动控制固体拍摄元件108。
[普通模式时的动作]
对普通模式时的处理器200进行的信号处理动作进行说明。
前级信号处理电路220对以帧周期通过驱动器信号处理电路112输入的R、G、B的各像素信号实施去马赛克处理。具体而言,对R的各像素信号实施利用G、B的周边像素的插值处理,对G的各像素信号实施利用R、B的周边像素的插值处理,对B的各像素信号实施利用R、G的周边像素的插值处理。由此,仅具有一个色彩成分的信息的像素信号全部转换为具有R、G、B三个色彩成分的信息的像素数据。此外,在本实施方式中,对于去马赛克后的像素数据,R、G、B的每个色彩成分具有8位(0~255)的信息。
前级信号处理电路220对去马赛克处理后的像素数据实施矩阵运算、白平衡调整处理、灰度矫正处理等规定的信号处理,并向特殊图像处理电路230输出。
特殊图像处理电路230将通过前级信号处理电路220输入的像素数据向后级信号处理电路240直通输出。
后级信号处理电路240对通过特殊图像处理电路230输入的像素数据实施规定的信号处理,从而生成监视器显示用的画面数据,并且将所生成的监视器显示用的画面数据转换为规定的视频格式的信号。被转换的视频格式的信号被输出至监视器300。由此,生物体组织的彩色图像显示在监视器300的显示画面上。
[特殊模式时的动作]
接着,对特殊模式时的处理器200进行的信号处理动作进行说明。
前级信号处理电路220对以帧周期通过驱动器信号处理电路112输入的像素信号实施去马赛克处理、矩阵运算、白平衡调整处理、图像灰度矫正处理等规定的信号处理,并向特殊图像处理电路230输出。
[特殊图像生成处理]
图2为示出利用特殊图像处理电路230进行的特殊图像生成处理的流程。在图2的特殊图像生成处理中,在将电子内窥镜系统1的动作模式切换为特殊模式的时刻开始。
[图2的S11(当前帧的像素数据的输入)]
在本处理步骤S11中,通过前级信号处理电路220输入当前帧的各像素的像素数据。
[图2的S12(注目像素的选择)]
在本处理步骤S12中,按照规定的顺序从所有的像素中选择一个注目像素。
[图2的S13(炎症强度的计算)]
在本处理步骤S13中,对在处理步骤S12(注目像素的选择)中选择的注目像素计算对象疾病的炎症强度。图3~图5中示出辅助炎症强度的计算处理的说明的图。
图3中示出由彼此正交的R轴和G轴定义的RG平面(更详细而言,由R轴、G轴这两个轴规定的RG平面内的区划)。此外,R轴为R成分(R的像素值)的轴,G轴为G成分(G的像素值)的轴。在本处理步骤S13中,将由RGB三原色定义的RGB空间的注目像素数据(三维数据)转换为RG的二维数据,如图3所示,对应于R、G的像素值标绘在RG平面内。以下,为了便于说明,将标绘在RG平面内(以及后述的[R-粘膜]平面)的注目像素数据的点记为“注目像素对应点”。
这样,在本处理步骤S13中,将RGB空间的注目像素数据(三维数据)正投影于RG平面,从对应于该注目像素数据的RGB空间内的点朝向RG平面的垂线的点为注目像素对应点(二维数据)。
在成为拍摄对象的患者的体腔内,由于血红蛋白色素等的影响,R成分相对于其他的成分(G成分以及B成分)是支配性的,典型特点是,炎症越强就越偏红(即R成分)。因此,可以认为注目像素的R轴的值基本上与炎症的强度成比例关系。但是,对于体腔内的拍摄图像,根据影响明亮度的拍摄条件(例如白色光L的照射情况),颜色产生变化。举例说明,白色光L没有照射到的阴影部分变黑(无色彩),白色光L强烈照射进行正反射的部分变白(无色彩)。也就是说,根据白色光L的照射情况,注目像素的R轴的值也会取得与炎症的强度不相关的值。因此,难以仅通过R成分来精确地评价炎症的强度。
通常来说,未引起炎症的体腔内的正常部位被足够的粘膜覆盖。与之相对,引起炎症的体腔内的异常部位未被足够的粘膜覆盖。在病变部等异常部位,炎症越强则粘膜越薄。粘膜基本上为白基调,颜色略微偏黄,显示在图像上的颜色(黄色的颜色)因其浓淡(粘膜的厚度)产生变化。因此,认为粘膜的浓淡也是评价炎症的强度的指标之一。
因此,在本处理步骤S13中,如图3所示,在RG平面内,设定通过R轴和G轴的交点(原点)并且相对于R轴、G轴的任一轴非平行的轴。所述轴为通过对体腔内的粘膜的样本图像进行多次分析求得的轴(以下,为了便于说明,记为“粘膜变化轴(或者基准轴AX)”),并且是与粘膜的浓淡(粘膜的颜色)相关度高的轴。粘膜变化轴的设定数据被存储于例如存储器222等存储介质。粘膜变化轴为混合有R成分和G成分的色彩成分即黄成分为支配性颜色的变化轴,并且为连结原点(0,0)和终点(255,192)的轴。此外,在本处理步骤是13中执行的将像素数据配置在RG平面内的动作由配置单元执行。另外,在RG平面内设定基准轴AX的动作通过轴设定单元进行。
接着,如图4所示,定义R轴和粘膜变化轴正交的平面(以下,为了便于说明,记为“[R-粘膜]平面”。),将标绘于RG平面的注目像素数据(注目像素对应点)投影转换(正投影转换)在[R-粘膜]平面上。此外,本发明的发明人对体腔内的粘膜的样本图像进行了多次分析,其结果是,判定被投影转换在[R-粘膜]平面上的像素对应点的R轴的值即使是最大也未达到128的程度。因此,在[R-粘膜]平面中,为了减轻计算处理负荷,将R轴压缩为7位。另外,粘膜变化轴为8位。此外,在本处理步骤S13中执行的将像素数据配置在RG平面内的动作由配置单元执行。另外,在RG平面内设定粘膜变化轴(基准轴AX)的动作由轴设定单元执行。另外,将像素数据投影转换于[R-粘膜]平面的动作由转换单元执行。
接着,将炎症越强值越高的两个系数(血红蛋白系数以及粘膜系数)应用于注目像素对应点,将应用的血红蛋白系数和粘膜系数相乘。
血红蛋白系数为与R轴的值成比例地变高的系数,与炎症的强度相关。在本实施方式中,血红蛋白系数与R轴的值一致。举例说明,在注目像素对应点的R轴的值为10的情况下,对该注目像素对应点应用“10”作为血红蛋白系数,在注目像素对应点的R轴的值为250的情况下,对该注目像素对应点应用“250”作为血红蛋白系数。
粘膜系数为随着粘膜变化轴的值变高而变低的系数,在本实施方式中,从值255减去粘膜变化轴的值而得到。在另一观点中,粘膜系数为随着粘膜变化轴的值变低而变高的系数,粘膜越薄(炎症越强)其越高。举例说明,在注目像素对应点的粘膜变化轴的值为10的情况下,对该注目像素对应点应用“245(=255-10)”作为粘膜系数,在注目像素对应点的R轴的值为250的情况下,对该注目像素对应点应用“5(=255-250)”作为粘膜系数。
将血红蛋白系数和粘膜系数相乘得到的值除以血红蛋白系数的最大值即128。由此,关于注目像素,计算0~255的范围内的炎症强度。
这样,在本处理步骤S13中,当计算炎症强度时,除法仅存在能够以移位运算的方式进行的运算。因此,不需要浮动小数点运算,炎症强度的计算的处理负荷小。
图5为说明在本处理步骤S13中计算的炎症强度和体腔内的拍摄图像的明亮度的关系的图。
在图5中,炎症强度如同位于箭头A所指的方向的像素对应点的像素那样变高。换言之,在图5中,炎症强度如同位于血红蛋白系数、粘膜系数都低的左上区域的像素对应点的像素那样变低,并且如同位于血红蛋白系数、粘膜系数都高的右下区域的像素对应点的像素那样变高。
另一方面,当体腔内的拍摄图像的明亮度根据白色光L的照射情况产生变化时,可以认为虽然拍摄图像的颜色存在个人差异、拍摄部位、炎症的状态等的影响,但基本上以在各色彩成分上相同的方式产生变化。根据该想法,在图5中,体腔内的拍摄图像如同位于箭头B所指的方向的像素对应点的像素那样变亮。换言之,在图5中,体腔内的拍摄图像如同位于R轴、粘膜变化轴的值都低的左下区域的像素对应点的像素那样变暗,并且如同位于R轴、粘膜变化轴的值都高的右上区域的像素对应点的像素那样变亮。
如图5所示,在[R-粘膜]平面内,与炎症强度的变化相关度高的方向(箭头A方向)和与拍摄图像的明亮度的变化相关度高的方向(箭头B方向)大致正交。由此可以判断。在本处理步骤S13中计算的炎症强度为实际上难以受到拍摄图像的明亮度的变化影响的值。
[图2的S14(色彩表图像上的显示色的确定)]
在本实施方式中,能够通过对应于炎症强度的显示色来显示将拍摄图像马赛克化得到的色彩表图像。为了能够显示色彩表图像,将炎症强度的值和规定的显示色对应得到的表被存储于存储器222等的存储区域。在本表中,例如,以值5刻度对应不同的显示色。举例说明,在炎症强度的值为0~5的范围内对应黄色,该值每增加5,按照色相环中颜色的排列顺序对应不同的显示色,该值在250~255的范围内对应红色。
在本处理步骤S14中,在处理步骤S12(注目像素的选择)选择的注目像素的、在色彩表图像上的显示色基于上述样本被确定为对应于在处理步骤S13(炎症强度的计算)中计算得到的注目像素的炎症强度的值的颜色。
[图2的S15(对全像素的处理的执行完成判定)]
在本处理步骤S15中,判定对当前帧的所有的像素是否执行了处理步骤S12~S14。
在残留未执行处理步骤S12~S14的像素的情况下(S15:否),图2的特殊图像生成处理为了对下一个注目像素执行处理步骤S12~S14而返回到处理步骤S12(注目像素的选择)。
[图2的S16(炎症评价值的计算)]
在判定为于处理步骤S15(对全像素的处理的执行完成的判定)中对当前帧的所有的像素执行了处理步骤S12~S14的情况下(S15:是),执行本处理步骤S16。在本处理步骤S16中,将当前帧的所有的像素的炎症强度平均化得到的平均值作为拍摄图像整体的炎症评价值计算,生成计算得到的炎症评价值的显示数据(显示数据例:评分:○○)。此外,在本处理步骤S16中执行的计算作为对于彩色图像的规定的评价值的炎症评价值的动作,通过评价值计算单元进行。
[图2的S17(叠加处理)]
在本处理步骤S17中,将基于由前级信号处理电路220输入的像素数据(即,具有RGB三个色彩成分的像素数据)的普通图像、和基于在处理步骤S14(色彩表图像上的显示色的确定)中确定为规定的显示色的像素数据的色彩表图像叠加的比例作为系数,将前者的像素数据(普通的像素数据)和后者的像素数据(色彩表图像用的像素数据)相加。系数的设定能够通过用户操作进行适当设定变更。在想要较浓地显示普通图像的情况下,较高地设定普通的像素数据的系数,在想要较浓地显示色彩表图像的情况下,较高地设定色彩表图像用的像素数据的系数。
[图2的S18(结束判定)]
在本处理步骤S18中,判定电子内窥镜系统1的动作模式是否被切换为不同于特殊模式的另一模式。在判定为未切换为另一模式的情况下(S18:否),图2的特殊图像生成处理返回到处理步骤S11(当前帧的像素数据的输入)。另一方面,在判定为切换为另一模式的情况下(S18:是),图2的特殊图像生成处理结束。
[画面显示例]
后级信号处理电路240基于在图2的处理步骤S17(叠加处理)中进行加法处理得到的像素数据,在生成普通图像和色彩表图像的叠加图像的显示数据的同时进行将监视器300的显示画面的周边区域(图像显示区域的周围)掩蔽的掩蔽处理,进一步,生成在通过掩蔽处理生成的掩蔽区域重叠炎症评价值得到的、监视器显示用的画面数据。后级信号处理电路240将所生成的监视器显示用的画面数据转换为规定的视频格式信号,并向监视器300输出。
图6中示出特殊模式时的画面显示例。如图6例示,在监视器300的显示画面中,在其中央区域显示体腔内的拍摄图像(将普通图像和色彩表图像叠加显示的叠加图像),同时,显示图像显示区域的周围被掩蔽的画面。另外,在掩蔽区域显示炎症评价值(评分)。
这样,根据本实施方式,不进行色调强调处理等非线性的计算处理和复杂的色彩空间转换处理等而仅进行单纯的计算处理,由此求出炎症评价值(在此为与拍摄部位的血红蛋白色素的增减存在相关的值)。也就是说,大幅度地抑制了炎症评价值的计算所需的硬件资源。另外,由于炎症评价值并未因影响体腔内的拍摄图像的明亮度的拍摄条件(例如照射光的照射情况等)而产生实质上的变动,因此,手术者对炎症能够更加客观地作出正确的判断。
另外,本实施方式所涉及的电子内窥镜系统带来该技术领域中的如下效果以及问题的解决。
第一,本实施方式所涉及的电子内窥镜系统为用于早期发现炎症性疾病的诊断辅助。
第二,根据本实施方式的构成,能够画面显示炎症程度或者增强发生炎症的区域的图像,以使得手术者能够发现难以肉眼识别的轻度炎症。特别地,由于轻度炎症与正常部分的判别较难,因此,关于轻度炎症的评价,本实施方式的构成所带来的效果显著。
第三,根据本实施方式的构成,作为炎症度的评价能够为手术者提供客观的评价值,因此,能够降低手术者之间的诊断差。特别地,对于经验尚浅的手术者,根据本实施方式的构成能够提供客观的评价值的优势较大。
第四,根据本实施方式的构成,通过减轻图像处理的负荷,能够将炎症部作为图像而实时显示。因此,能够提高诊断精度。
第五,根据本实施方式的构成,与上述的背景技术相比较,减轻了评价值计算的处理负荷,因此,能够没有延迟地排列或者合成显示色彩表图像(示出炎症度的图像)和普通图像。因此,能够在不延长检查时间的情况下显示色彩表图像,进而,能够避免增加患者负担。
本实施方式中的观察的对象部位例如为呼吸器官等、消化器官等。呼吸器官等例如为肺、耳鼻咽喉。消化器官例如为大肠、小肠、胃、十二指肠、子宫等。认为在观察对象为大肠的情况下,本实施方式所涉及的电子内窥镜系统的效果更佳显著。关于这一点,具体而言有如下理由。
大肠存在能够将炎症作为基准进行评价的病,发现炎症部位的优势与其他的器官相比较更大。特别地,作为以溃疡性大肠炎为代表的炎症性肠疾病(IBD)的指标,根据本实施方式的炎症评价值是有效的。由于溃疡性大肠炎并未确立治疗法,因此,通过本实施方式的构成的电子内窥镜系统的使用而早期发现并抑制其发展的效果非常大。
大肠与胃等相比较为细长的器官,所得到的图像有纵深,并且越深越暗。根据本实施方式的构成,能够控制因图像内的明亮度的变化而导致的评价值的变动。因此,当将本实施方式所涉及的电子内窥镜系统应用于大肠的观察时,根据本实施方式的效果显著。也就是说,本实施方式所涉及的电子内窥镜系统优选为呼吸器官用电子内窥镜系统或者消化器官用电子内窥镜系统,更加优选为大肠用电子内窥镜系统。
另外,虽然轻度的炎症通常难以诊断,但是根据本实施方式的构成,例如,通过将评价了炎症度的结果显示在画面上,能够避免手术者看漏轻度炎症。特别地,关于轻度的炎症,由于其判断基准并不明了,因此,成为加大手术者之间的个人差异的主要原因。关于这一点,根据本实施方式的构成,由于能够为手术者提供客观的评价值,因此,能够降低因个人差异而导致的诊断的偏差。
此外,本实施方式的上述构成不仅适用于炎症度,也能够适用于癌症、息肉等其他伴有颜色变化的各种病变的评价值的算出,在上述情况下,也能够带来与上述同样的有利的效果。即,优选的是本实施方式的评价值为伴有颜色变化的病变的评价值,包含炎症度、癌症、息肉的至少任一个的评价值。
以上为本发明的例示性的实施方式的说明。本发明的实施方式并不限于上述所说明的方式,在本发明的技术思想的范围内能够进行各种各样的变形。例如,将说明书中例示性明示的实施方式等或者显而易见的实施方式等进行适当组合而得到的内容也包含在本发明的实施方式中。
在上述的实施方式中,使用各像素所包含的R成分和G成分(RG的二维色彩空间)计算炎症评价值,而在另一实施方式中,代替RG的二维色彩空间而使用RB等其他的二维色彩空间或者HSI、HSV、Lab等三维色彩空间,由此,也能够计算与该色彩空间对应的有别于上述的实施方式的与对象疾病有关的评价值。
在上述的实施方式中,使用R、G、B的原色成分算出炎症等的评价值,然而本发明的用于评价值算出的构成并不限定于R、G、B的原色成分的使用。也可以使用C、M、Y、G(青色、品红色、黄色、绿色)的补色系成分代替R、G、B原色成分,并且通过与上述的实施方式同样的手法算出炎症等的评价值。
在上述的实施方式中,将包括灯电源点火器206、灯208、聚光透镜210、光圈212、电机214等的光源部与处理器一体地设置,但是光源部也可以作为与处理器分开的装置设置。
如上述的实施方式中所说明,可以使用CMOS图像传感器代替CCD图像传感器作为固体拍摄元件108。通常,CMOS图像传感器与CCD图像传感器相比较,存在图像整体地变暗的倾向。因此,根据上述的实施方式的构成的、能够抑制由于图像的明亮度而导致的评价值的变动这样的有利的效果,在使用CMOS图像传感器作为固体拍摄元件的状况下表现的更加显著。
优选的是,为了高精度地进行诊断而得到高精细的图像。因此,在进一步提高诊断的精度的观点中,图像的分辨率优选为100万像素以上,更加优选为200万像素,进一步优选为800万像素以上。图像的分辨率越高,用于对全像素进行上述的评价值计算的处理负荷越重。但是,根据上述的实施方式的构成,由于能够抑制评价值计算的处理负荷,因此,在处理高精细的图像的状况下,利用本实施方式的构成的有利的效果显著地表现出来。
在上述的实施方式中的特殊图像生成处理中,将图像中的所有像素作为处理的对象,但也可以将例如极高亮度的像素以及极低亮度的像素等从处理的对象中除去。具体而言,例如,仅将被判定为具有预先设定的基准亮度范围的亮度的像素作为评价值算出的对象,由此,能够提高评价值的精度。
如在上述的实施方式的说明中所述,作为电子内窥镜系统1中使用的光源,能够使用各种类型的光源。另一方面,根据电子内窥镜系统1的观察目的等也可以将光源的类型进行限定(例如,作为光源的类型除去激光等)。
另外,关于使用于评价值算出的色彩成分,也有排除使用色相和饱和度算出评价值的方法的方式。
图7中示出利用另一实施方式所涉及的特殊图像处理电路230进行的特殊图像生成处理的流程。在图7的特殊图像生成处理中,例如,将电子内窥镜1的动作模式设定为特殊模式,并且,在按下电子镜100的冻结按钮的时刻(进行静止画面的截屏操作的时刻)开始。此外,对于与上述的实施方式共同的内容,适当省略或者简略说明。
[图7的S211(当前帧的像素数据的输入)]
在本处理步骤S211中,通过前级信号处理电路220输入当前帧(截屏操作时)的各像素的像素数据。
[图7的S212(基准轴AX的设定)]
在本处理步骤S212中,设定用于对象疾病的炎症强度的计算的基准轴AX。图8为辅助基准轴AX的设定方法的说明的图,示出由彼此正交的R轴和G轴定义的RG平面(更详细而言,由R轴、G轴这二个轴规定的RG平面内的区划)。
在本处理步骤S212中,将由RGB三原色定义的RGB空间的各像素的像素数据(三维数据)转换为RG的二维数据,如图8所示,对应R、G的像素值标绘在RG平面内。这样,在本处理步骤S212中,将RGB空间的注目像素数据(三维数据)正投影在RG平面上,从对应于该注目像素数据的RGB空间内的点朝向RG平面的垂线的点为注目像素对应点(二维数据)。
在本处理步骤S212中,如图8所示,在RG平面内,设定通过R轴和G轴的交点(原点)并且相对于R轴、G轴的任一轴非平行的基准轴AX。具体而言,检测位于从起点彼此相同(任一起点均为原点(0,0))的G轴的终点朝向R轴的终点连结的线段上的像素对应点中最接近G轴的终点的像素对应点(在图8的例子中,被标注了符号α的像素对应点)。接着,将连结检测出的像素对应点α和R轴以及G轴的起点(即原点(0,0))的轴设定为基准轴AX。
基准轴AX为混合有R成分和G成分的色彩成分即黄成分为支配性的颜色的变化轴,与粘膜的浓淡(粘膜的颜色)相关度高。本发明的发明人对体腔内的样品图像进行了多次分析,其结果是,如图8所例示,在RG平面内,如果将位于从G轴的终点朝向R轴的终点连接的线段上的像素对应点中最接近G轴的终点的像素对应点α与和R轴以及G轴的起点连结的话,则能够判定,出现了以其(基准轴AX(或者粘膜变化轴))为边界而分布有像素对应点的区域和未分布有像素对应点的区域。
补足说明,可以认为RG平面内的像素对应点分布在被表示血液和粘膜的轴所夹持的区域内。因此,分布有像素对应点的区域和未分布有像素对应点的区域的边界线相当于表示粘膜的轴(粘膜变化轴)。由于符号α的点为位于该边界线上的点,因此,将连结符号α的点和原点的基准轴AX定义为粘膜变化轴。
另外,分布有像素对应点的区域为表示在对象疾病的拍摄时所能够拍摄到的颜色的RG平面内的区域。另外,未分布有像素对应点的区域为表示在对象疾病的拍摄时未能拍摄到的颜色的RG平面内的区域。
这样,在本实施方式中,在图7所示的特殊图像生成处理的执行过程中,利用实际的体腔内的拍摄图像自动地执行校准(由于电子镜100的机种差异或老化等而变化的基准轴AX的设定)。由此,不需要以往为了校准而需要的专用夹具或费时费力的作业。
[图7的S213(注目像素的选择)]
在本处理步骤S213中,按照规定的顺序从所有的像素中选择一个注目像素。
[图7的S214(炎症强度的计算)]
在本处理步骤S214中,如使用图4以及图5说明的,对在处理步骤S213(注目像素的选择)中选择的注目像素计算炎症强度。
[图7的S215(色彩表图像上的显示色的确定)]
在本处理步骤S215中,在处理步骤S213(注目像素的选择)中选择的注目像素的、在色彩表图像上的显示色,基于将炎症强度的值和规定的显示色对应得到表格,被确定为对应于在处理步骤S214(炎症强度的计算)中计算得到的注目像素的炎症强度的值的颜色。
[图7的S216(对全像素的处理的执行完成判定)]
在本处理步骤S216中,判定是否对当前帧的所有的像素执行了处理步骤S213~S215。
在残留未执行处理步骤S213~S215的像素的情况下(S216:否),为了对下一个注目像素执行处理步骤S213~S215,图7的特殊图像生成处理返回到处理步骤S213(注目像素的选择)。
[图7的S217(炎症评价值的计算)]
在判定为于处理步骤S216(对全像素的处理的执行完成判定)中对当前帧的所有的像素执行了处理步骤S213~S215的情况下(S216:是),执行本处理步骤S217。在本处理步骤S217中,将在当前帧的所有的像素的炎症强度平均化得到平均值作为拍摄图像整体的炎症评价值计算,生成计算得到的炎症评价值的显示数据(显示数据例:评分○○)。
[图7的S218(叠加处理)]
在本处理步骤S218中,将基于由前级信号处理电路220输入的像素数据(即,具有RGB三个色彩成分的像素数据)的普通图像、和基于在处理步骤S215(色彩表图像上的显示色的确定)中确定为规定的显示色的像素数据的色彩表图像叠加的比例作为系数,将前者的像素数据(普通的像素数据)和后者的像素数据(色彩表图像用的像素数据)相加。
[图7的S219(结束判定)]
在本处理步骤S219中,判定是否将电子内窥镜系统1的动作模式切换为不同于特殊模式的其他模式。在判定为未切换为另一模式的情况下(S219:否),图7的特殊图像生成处理返回到处理步骤S211(当前帧的像素数据的输入)。另一方面,当判定为切换为另一模式的情况下(S219:是),图7的特殊图像生成处理结束。
在图7所示的实施方式中,在图7的处理步骤S212(基准轴AX的设定)中,将连结像素对应点α和原点(0,0)的轴设定为基准轴AX(粘膜变化轴),但是,基准轴AX的设定方法并不限定于此。
图9中示出在图7的实施方式的变形例中执行的、基准轴AX的设定处理的流程。另外,在图10(a)~图10(c)示出辅助本变形例所涉及的设定处理的说明的图。本变形例所涉及的特殊图像生成处理在除了通过图9所示的设定处理的执行设定基准轴AX这一点以外和图7的实施方式所涉及的特殊图像生成处理实质相同。
[图9的S51(像素对应点的配置)]
在本处理步骤S51中,将当前帧的各像素对应点配置在RG平面内。
[图9的S52(基准轴AX的初始设定)]
在本处理步骤S52中,如图10(a)所示,对RG平面初始设定基准轴AX。基准轴AX的初始设定数据被预先存储在例如存储器222等规定的存储介质中。此外,在以后的内容中,将基准轴AX和R轴所形成的角度记为θ。
[图9的S53(注目像素的选择)]
在本处理步骤S53中,按照规定的顺序从所有的像素中选择一个注目像素(注目像素对应点)。
[图9的S54(位置的判定)]
在本变形例中,在图2的S14(炎症强度的计算)中,将位于基准轴AX和R轴之间的区域(第一区域)的注目像素对应点用于炎症强度的计算,未将位于基准轴AX和G轴之间的区域(第二区域)的注目像素对应点用于炎症强度的计算。在本处理步骤S54中,判定在处理步骤S53(注目像素的选择)中选择的注目像素对应点是否位于第二区域。
[图9的S55(计数处理)]
在于处理步骤S54(位置的判定)中判定注目像素对应点位于第二区域的情况下(S54:是)执行本处理步骤S55。在本处理步骤S55中,使特殊图像处理电路230内的计数器的计数值C增加1。此外,例如,在开始执行图9所示的设定处理的时刻暂时将计数值C重置为零。
[图9的S56(对全像素的处理的执行完成判定)]
在本处理步骤S56中,判定是否对在处理步骤S51(像素对应点的配置)中配置的所有的像素对应点执行了处理步骤S53~S54。
在残留未执行处理步骤S53~S54的像素对应点的情况下(S56:否),为了对下一个注目像素对应点执行处理,图9所示的设定处理返回到处理步骤S53(注目像素的选择)。
[图9的S57(计数值C的判定)]
在于处理步骤S56(对全像素的处理的执行完成判定)中判定对所有的像素对应点执行了处理步骤S53~S54的情况下(S56:是),执行本处理步骤S57。在本处理步骤S57中,判定计数值C是否大于规定的上限阈值。
[图9的S58(角度θ的增加)]
在于处理步骤S57(计数值C的判定)中判定计数值C大于规定的上限阈值的情况下(S57:是),执行本处理步骤S58。在这种情况下,位于第二区域的注目像素对应点(换言之,未用于炎症强度的计算的注目像素)过多,从而难以高精度计算炎症评价值。因此,在本处理步骤S58中,为了将位于第二区域的注目像素对应点减少为适当数量,如图10(b)所示,增大角度θ。
此外,角度θ的增加量可以是固定值,也可以根据计数值C的大小进行适当设定。在后者的情况下,例如,计数值C越大,角度θ的增加量设定得越大。
执行本处理步骤S58之后,将计数值C重置为零,同时,将图9所示的设定处理返回到处理步骤S53(注目像素的选择)。并且,有关角度θ增加后的基准轴AX,执行处理步骤S53~S56(即,对位于角度θ增加后的第二区域的注目像素对应点的数量进行计数),并执行处理步骤S57(计数值C的判定)。循环处理步骤S53~S58直至计数值C为规定的上限阈值以下。
[图9的S59(计数值C的判定)]
在于处理步骤S57(计数值C的判定)中判定计数值C为规定的上限阈值以下的情况下(S57:否),执行本处理步骤S59。在本处理步骤S59中,判定计数值C是否小于规定的下限阈值。
[图9的S60(角度θ的减小)]
在于处理步骤S59(计数值C的判定)中判定计数值C小于规定的下限阈值的情况下(S59:是),执行本处理步骤S60。在这种情况下,位于第二区域的注目像素对应点(换言之,未用于炎症强度的计算的注目像素)过少,从而存在不能适当地设定基准轴AX(例如,基准轴AX位于大大远离于注目像素对应点稠密分布的区域等)的可能性。因此,在本处理步骤S60中,为了使位于第二区域的注目像素对应点增加至适当数量,如图10(c)所示,减小角度θ。
此外,角度θ的减小量可以是固定值,另外,也可以根据计数值C的大小进行适当设定。在后者的情况下,例如,计数值C越小,角度θ的减小量设定得越大。
执行本处理步骤S60之后,将计数值C重置为零,同时,将图9所示的设定处理返回到处理步骤S53(注目像素的选择)。并且,关于角度θ减小后的基准轴AX,执行处理步骤S53~S56(即,对位于角度θ减小后的第二区域的注目像素对应点的数量进行计数),执行处理步骤S57(计数值C的判定),之后执行处理步骤S59(计数值C的判定)。循环处理步骤S53~S60直至计数值C为规定的下限阈值以上。
通过重复角度θ的增加/减小,使位于第二区域的注目像素对应点的数量处在适当范围内(下限阈值至上限阈值之间)(S60:否)。由此,实现高精度的校准(由于电子镜100的机种差异和老化等而变化的基准轴AX的设定)。
在图2或者图7、图9所示的特殊图像生成处理中,对截屏图像计算炎症评价值,然而在另一实施方式中,也可以对动画图像(即,遍及多帧)计算炎症评价值。
在图11中示出另一实施方式所涉及的炎症评价值的计算处理的流程。在例如将电子内窥镜系统1的动作模式设定为特殊模式的时刻开始图11所示的炎症评价值计算处理。此外,在另一实施方式中,如后记载,显示在监视器300的显示画面中的内容仅限于炎症评价值,然而在另一实施方式中,与图2或者图7、图9所示的特殊图像生成处理同样地,炎症评价值可以与叠加图像等内窥镜图像一起显示在监视器300的显示画面中。
[图11的S111(基准轴AX的初始设定)]
在本处理步骤S111中,使用存储于存储器222等的初始设定数据对RG平面初始设定基准轴AX。
[图11的S112(当前帧的像素数据的输入)]
在本处理步骤S112中,通过前级信号处理电路220输入当前帧的各像素的像素数据。
[图11的S113(像素对应点的配置)]
在本处理步骤S113中,将当前帧的各像素对应点配置在RG平面内。
[图11的S114(注目像素的选择)]
在本处理步骤S114中,按照规定的顺序从所有的像素中选择一个注目像素(注目像素对应点)。
[图11的S115(位置的判定)]
在本处理步骤S115中,判定在处理步骤S114(注目像素的选择)中选择的注目像素对应点是否位于第二区域。
[图11的S116(计数处理)]
在于处理步骤S115(位置的判定)中判定注目像素对应点位于第二区域的情况下(S115:是),执行本处理步骤S116。在本处理步骤S116中,计数值C增加1。此外,计数值C例如在每帧(例如,当每次对对象帧执行处理步骤S112(当前帧的像素数据的输入))被重置为零。
[图11的S117(炎症强度的计算)]
在于处理步骤S115(位置的判定)中判定注目像素对应点不位于第二区域(换言之,位于第一区域)的情况下(S115:否),执行本处理步骤S117。在本处理步骤S117中,对在处理步骤S114(注目像素的选择)中选择的注目像素计算炎症强度。
[图11的S118(对全像素的处理的执行完成判定)]
在本处理步骤S118中,判定是否对当前帧的所有的像素执行了处理步骤S114~S115。
在残留未执行处理步骤S114~S115的像素的情况下(S118:否),为了对下一个注目像素执行处理步骤S114~S15,图11的炎症评价值计算处理返回到处理步骤S114(注目像素的选择)。
[图11的S119(炎症评价值的计算)]
在于处理步骤S118(对全像素的处理的执行完成判定)中判定对当前帧的所有的像素执行了处理步骤S114~S115的情况下(S118:是),执行本处理步骤S119。在本处理步骤S119中,将在处理步骤S117(炎症强度的计算)中计算得到的各像素(换言之,仅位于第一区域的像素)的炎症强度平均化得到平均值计算为拍摄图像整体的炎症评价值,并将其显示在监视器300的显示画面中。
[图11的S120(计数值C的判定)]
在本处理步骤S120中,判定计数值C是否大于规定的上限阈值。
[图11的S121(角度θ的增加)]
在于处理步骤S120(计数值C的判定)中判定计数值C大于规定的上限阈值的情况下(S120:是),执行本处理步骤S121。在这种情况下,位于第二区域的注目像素对应点过多,从而难以高精度地计算炎症评价值。因此,在本处理步骤S120中,为了将位于第二区域的注目像素对应点减少为适当数量,增大角度θ。
[图11的S122(计数值C的判定)]
在于处理步骤S120(计数值C的判定)中判定计数值C为规定的上限阈值以下的情况下(S120:否),执行本处理步骤S122。在本处理步骤S122中,判定计数值C是否小于规定的下限阈值。
[图11的S123(角度θ的减小)]
在于处理步骤S122(计数值C的判定)中判定计数值C小于规定的下限阈值的情况下(S112:是),执行本处理步骤S123。在这种情况下,位于第二区域的注目像素对应点过少,从而存在不能适当地设定基准轴AX的可能性。因此,在本处理步骤S123中,为了使位于第二区域的注目像素对应点增加至适当数量,减小角度θ。
[图11的S124(炎症评价值计算处理的结束判定)]
在本处理步骤S124中,例如判定是否由手术者从特殊模式切换为普通模式等其他模式。在未切换为其他的模式的情况下(S124:否),为了对下一帧进行炎症评价值的计算以及显示,图11的炎症评价值计算处理返回到处理步骤S122(当前帧的像素数据的输入)。在切换为其他的模式的情况下(S124:是),图11的炎症评价值计算处理结束。
根据另一实施方式,当进行拍摄条件或拍摄区域逐次变化的动画拍摄时,逐次调整基准轴AX(即,每帧进行再设定。但是,当位于第二区域的注目像素对应点的数量在适当范围(下限阈值至上限阈值之间)内时维持基准轴AX)。因此,即使在拍摄条件或拍摄区域逐次变化的状况下,也能够高精度地逐次计算炎症评价值。
Claims (16)
1.一种电子内窥镜系统,其特征在于,具备:
配置单元,将与具有多个色彩成分并构成彩色图像的各像素对应的像素对应点按照该像素对应点的色彩成分配置在与规定的色彩空间的原点交叉的第一色彩平面内;
轴设定单元,在所述第一色彩平面内设定规定的基准轴;
转换单元,定义包括所述基准轴的第二色彩平面,并且将该第一色彩平面内的所述各像素对应点投影转换于该第二色彩平面;
评价值计算单元,基于被投影转换于所述第二色彩平面的各像素对应点,计算对于所述彩色图像的规定的评价值。
2.根据权利要求1所述的电子内窥镜系统,其特征在于,
所述第一色彩平面为包括R成分的轴的平面。
3.根据权利要求2所述的电子内窥镜系统,其特征在于,
所述第一色彩平面为还包括G成分的轴的平面。
4.根据权利要求1至3中任一项所述的电子内窥镜系统,其特征在于,
所述第二色彩平面为包括R成分的轴以及所述基准轴的平面,所述R成分的轴和所述基准轴正交。
5.根据权利要求1至4中任一项所述的电子内窥镜系统,其特征在于,
所述基准轴为与体腔内的粘膜的颜色的相关度高的轴。
6.根据权利要求4或引用权利要求4的权利要求5所述的电子内窥镜系统,其特征在于,
所述评价值计算单元对被投影转换于所述第二色彩平面的各像素对应点,应用与所述R成分的轴的值成比例地变高的第一系数和随着所述基准轴的值变高而变低的第二系数,并且基于所应用的第一系数以及第二系数计算该像素对应点的评价值,
基于计算出的各像素对应点的评价值计算对于所述彩色图像的规定的评价值。
7.根据权利要求6所述的电子内窥镜系统,其特征在于,
所述评价值计算单元将应用于所述像素对应点的所述第一系数和所述第二系数相乘,并且基于相乘所得到的值计算该像素对应点的评价值。
8.根据权利要求1至7中任一项所述的电子内窥镜系统,其特征在于,
所述规定的评价值为将体腔内的异常部数值化示出的值。
9.根据权利要求1至8中任一项所述的电子内窥镜系统,其特征在于,
所述轴设定单元通过所述基准轴将所述第一色彩平面划分为第一区域和第二区域,
所述评价值计算单元使用所述第一区域内配置的像素对应点计算所述规定的评价值,
所述轴设定单元设定所述基准轴,以使得所述第二区域内配置的像素对应点的数量在规定的范围内。
10.一种评价值计算装置,其特征在于,具备:
配置单元,将与具有多个色彩成分并构成彩色图像的各像素对应的像素对应点按照该像素对应点的色彩成分配置在与规定的色彩空间的原点交叉的第一色彩平面内;
轴设定单元,在所述第一色彩平面内设定规定的基准轴;
转换单元,定义包括所述基准轴的第二色彩平面,并且将该第一色彩平面内的各像素对应点投影转换于该第二色彩平面;
评价值计算单元,基于被投影转换于所述第二色彩平面的各像素对应点计算对于所述彩色图像的规定的评价值。
11.一种评价值计算装置,其特征在于,具备:
配置单元,将与具有R(红)、G(绿)、B(蓝)的各色彩成分并构成彩色图像的各像素对应的像素对应点按照其色彩成分配置在包括R成分的轴即第一轴和与该第一轴正交的G成分的轴即第二轴的第一平面内;
转换单元,定义在所述第一平面内通过所述第一轴和所述第二轴的交点,并且相对于该第一轴、该第二轴的任何一方非平行的第三轴,定义该第一轴和该第三轴所正交的第二平面,并且将所述各像素对应点投影转换于该第二平面;
评价值计算单元,基于被投影转换于所述第二平面的各像素对应点,计算对于所述彩色图像的规定的评价值。
12.根据权利要求11所述的评价值计算装置,其特征在于,
所述第三轴为与体腔内的粘膜的颜色相关度高的轴。
13.根据权利要求12所述的评价值计算装置,其特征在于,
所述评价值计算单元对被投影转换于所述第二平面的各像素对应点,应用与所述第一轴的值成比例地变高的第一系数和随着所述第三轴的值变高而变低的第二系数,并且基于所应用的第一系数以及第二系数计算该像素对应点的评价值,
基于计算出的各像素对应点的评价值计算对于所述彩色图像的规定的评价值。
14.根据权利要求13所述的评价值计算装置,其特征在于,
所述评价值计算单元将应用于所述像素对应点的所述第一系数和所述第二系数相乘,并且基于相乘所得到的值计算该像素对应点的评价值。
15.根据权利要求11至14中任一项所述的评价值计算装置,其特征在于,
所述规定的评价值为将体腔内的异常部数值化示出的值。
16.根据权利要求11至15中任一项所述的评价值计算装置,其特征在于,
其组装于电子内窥镜系统。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015159909 | 2015-08-13 | ||
JP2015159908 | 2015-08-13 | ||
JP2015-159908 | 2015-08-13 | ||
JP2015-159909 | 2015-08-13 | ||
PCT/JP2016/073718 WO2017026540A1 (ja) | 2015-08-13 | 2016-08-12 | 評価値計算装置及び電子内視鏡システム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106687023A true CN106687023A (zh) | 2017-05-17 |
CN106687023B CN106687023B (zh) | 2018-12-18 |
Family
ID=57984514
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680002610.2A Active CN106687023B (zh) | 2015-08-13 | 2016-08-12 | 评价值计算装置以及电子内窥镜系统 |
Country Status (5)
Country | Link |
---|---|
US (3) | US20170273543A1 (zh) |
JP (1) | JP6113387B1 (zh) |
CN (1) | CN106687023B (zh) |
DE (1) | DE112016000095B4 (zh) |
WO (1) | WO2017026540A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10939801B2 (en) | 2017-03-31 | 2021-03-09 | Hoya Corporation | Electronic endoscope system |
JP6912688B2 (ja) * | 2019-04-02 | 2021-08-04 | Hoya株式会社 | 電子内視鏡システム及びデータ処理装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09114985A (ja) * | 1995-10-20 | 1997-05-02 | Sony Corp | 画像処理装置 |
CN1828432A (zh) * | 2005-02-28 | 2006-09-06 | 村田机械株式会社 | 颜色判断装置及颜色判断方法 |
CN101803899A (zh) * | 2009-02-16 | 2010-08-18 | 奥林巴斯株式会社 | 图像处理装置以及图像处理方法 |
CN102665527A (zh) * | 2009-11-13 | 2012-09-12 | 奥林巴斯株式会社 | 图像处理装置、电子设备、内窥镜系统和程序 |
CN104116485A (zh) * | 2013-04-26 | 2014-10-29 | Hoya株式会社 | 损伤评估信息生成器及其方法 |
CN104540438A (zh) * | 2012-07-17 | 2015-04-22 | Hoya株式会社 | 图像处理装置和内窥镜装置 |
WO2015064435A1 (ja) * | 2013-10-28 | 2015-05-07 | 富士フイルム株式会社 | 画像処理装置及びその作動方法 |
Family Cites Families (79)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4819077A (en) | 1986-05-14 | 1989-04-04 | Kabushiki Kaisha Toshiba | Color image processing system |
JPS62266030A (ja) | 1986-05-14 | 1987-11-18 | 株式会社東芝 | 内視鏡装置 |
US4805016A (en) * | 1986-08-25 | 1989-02-14 | Kabushiki Kaisha Toshiba | Endoscopic system for converting primary color images into hue, saturation and intensity images |
JP2682626B2 (ja) | 1987-10-15 | 1997-11-26 | オリンパス光学工業株式会社 | 経内視鏡分光診断装置 |
JPH02114931A (ja) | 1988-10-26 | 1990-04-27 | Toshiba Corp | 電子内視鏡画像処理装置 |
JPH034832A (ja) | 1989-06-01 | 1991-01-10 | Toshiba Corp | 電子内視鏡装置 |
US5751261A (en) | 1990-12-31 | 1998-05-12 | Kopin Corporation | Control system for display panels |
JP2964715B2 (ja) | 1991-07-01 | 1999-10-18 | 富士写真光機株式会社 | 電子内視鏡システム |
US6826422B1 (en) | 1997-01-13 | 2004-11-30 | Medispectra, Inc. | Spectral volume microprobe arrays |
US7123293B1 (en) | 1998-01-07 | 2006-10-17 | Fuji Photo Film Co., Ltd. | Image processing method to compensate for color differences due to a type of image sensing device |
US6280381B1 (en) | 1999-07-22 | 2001-08-28 | Instrumentation Metrics, Inc. | Intelligent system for noninvasive blood analyte prediction |
JP2002535023A (ja) | 1999-01-22 | 2002-10-22 | インストルメンテーション メトリックス インコーポレイテッド | 非侵襲的血液分析測定のためのシステムおよび方法 |
JP4284754B2 (ja) | 1999-05-31 | 2009-06-24 | ソニー株式会社 | カラー撮像装置及びその制御方法 |
DE10055725B4 (de) | 1999-11-11 | 2007-12-27 | Pentax Corp. | Elektronisches Endoskopsystem |
JP4360724B2 (ja) | 2000-01-11 | 2009-11-11 | Hoya株式会社 | 電子内視鏡用信号切換装置 |
JP4327380B2 (ja) | 2000-06-06 | 2009-09-09 | 富士フイルム株式会社 | 蛍光画像表示方法および装置 |
DE60130170T2 (de) | 2000-06-06 | 2008-05-21 | Fujifilm Corp. | Fluorezentlicht Bilddarstellungsverfahren und Gerät dafür |
WO2002007587A2 (en) | 2000-07-14 | 2002-01-31 | Xillix Technologies Corporation | Compact fluorescent endoscopy video system |
JP3510576B2 (ja) | 2000-09-28 | 2004-03-29 | Necエレクトロニクス株式会社 | 半導体装置及びその製造方法 |
JP2005504561A (ja) | 2001-03-01 | 2005-02-17 | トラスティーズ・オブ・ダートマウス・カレッジ | 蛍光寿命分光計(fls)および病変組織の検出方法 |
WO2002073507A2 (en) * | 2001-03-14 | 2002-09-19 | Given Imaging Ltd. | Method and system for detecting colorimetric abnormalities |
US7139598B2 (en) | 2002-04-04 | 2006-11-21 | Veralight, Inc. | Determination of a measure of a glycation end-product or disease state using tissue fluorescence |
CA2453423C (fr) * | 2001-07-12 | 2014-10-14 | Vision Iq | Procede et systeme pour fournir des informations formatees a des moyens de traitement d'images |
US7042488B2 (en) * | 2001-09-27 | 2006-05-09 | Fujinon Corporation | Electronic endoscope for highlighting blood vessel |
US6956602B2 (en) | 2001-09-27 | 2005-10-18 | Fujinon Corporation | Electronic endoscope for highlighting blood vessel |
US7123288B2 (en) | 2001-09-28 | 2006-10-17 | Fujinon Corporation | Electronic endoscope eliminating influence of light distribution in optical zooming |
US20040073120A1 (en) | 2002-04-05 | 2004-04-15 | Massachusetts Institute Of Technology | Systems and methods for spectroscopy of biological tissue |
JP4583704B2 (ja) | 2002-11-01 | 2010-11-17 | オリンパス株式会社 | 内視鏡撮像装置 |
US7195588B2 (en) | 2004-03-01 | 2007-03-27 | Olympus Corporation | Endoscope image pick-up apparatus |
JP4375781B2 (ja) * | 2002-11-29 | 2009-12-02 | 株式会社リコー | 画像処理装置および画像処理方法並びにプログラムおよび記録媒体 |
US7356102B2 (en) | 2002-12-04 | 2008-04-08 | Research In Motion Limited | Gain compensation over temperature and frequency variations in wireless transceivers |
JP4394356B2 (ja) | 2003-02-07 | 2010-01-06 | Hoya株式会社 | 電子内視鏡装置 |
CN100998499B (zh) | 2003-10-28 | 2013-07-24 | 薇拉莱特公司 | 使用组织荧光确定某一糖化终产物或疾病状态 |
JP4832300B2 (ja) | 2004-07-30 | 2011-12-07 | 株式会社日立メディコ | 医用画像診断支援装置の作動方法、医用画像診断支援装置、及び画像処理プログラム |
EP1787577B1 (en) | 2004-08-30 | 2011-03-09 | Olympus Corporation | Endoscope |
JP4009626B2 (ja) | 2004-08-30 | 2007-11-21 | オリンパス株式会社 | 内視鏡用映像信号処理装置 |
JP4933766B2 (ja) | 2004-10-20 | 2012-05-16 | 富士フイルム株式会社 | 電子内視鏡装置 |
EP1650980A3 (en) | 2004-10-20 | 2010-09-29 | FUJIFILM Corporation | Electronic endoscope apparatus |
JP2006198106A (ja) | 2005-01-19 | 2006-08-03 | Olympus Corp | 電子内視鏡装置 |
JP4786910B2 (ja) | 2005-02-07 | 2011-10-05 | Hoya株式会社 | 電子内視鏡 |
US7850599B2 (en) | 2005-03-04 | 2010-12-14 | Fujinon Corporation | Endoscope apparatus |
JP4579721B2 (ja) | 2005-03-04 | 2010-11-10 | 富士フイルム株式会社 | 内視鏡装置 |
JP4804062B2 (ja) | 2005-07-29 | 2011-10-26 | オリンパス株式会社 | 内視鏡システム |
US8451327B2 (en) | 2005-08-18 | 2013-05-28 | Hoya Corporation | Electronic endoscope, endoscope light unit, endoscope processor, and electronic endoscope system |
US8472682B2 (en) | 2005-09-12 | 2013-06-25 | Dvp Technologies Ltd. | Medical image processing |
JP4745790B2 (ja) | 2005-10-21 | 2011-08-10 | Hoya株式会社 | 電子内視鏡装置 |
JP2007135989A (ja) | 2005-11-21 | 2007-06-07 | Olympus Corp | 分光内視鏡 |
JP4773217B2 (ja) | 2006-01-31 | 2011-09-14 | 富士フイルム株式会社 | 電子内視鏡装置 |
JP5242381B2 (ja) | 2006-03-16 | 2013-07-24 | オリンパスメディカルシステムズ株式会社 | 医療用画像処理装置及び医療用画像処理方法 |
JP2008295490A (ja) | 2007-05-29 | 2008-12-11 | Olympus Medical Systems Corp | カプセル内視鏡画像表示装置 |
JP5106928B2 (ja) | 2007-06-14 | 2012-12-26 | オリンパス株式会社 | 画像処理装置および画像処理プログラム |
JP5006759B2 (ja) | 2007-10-29 | 2012-08-22 | Hoya株式会社 | 電子内視鏡用信号処理装置および電子内視鏡装置 |
EP2231029B1 (en) | 2007-12-21 | 2023-08-16 | GT Metabolic Solutions, Inc. | Devices for endoscopically creating an anastomosis |
JP5312807B2 (ja) * | 2008-01-08 | 2013-10-09 | オリンパス株式会社 | 画像処理装置および画像処理プログラム |
JP5594711B2 (ja) | 2008-02-26 | 2014-09-24 | ギブン イメージング リミテッド | 生体内画像コントラストを強化するための方法 |
US20090237498A1 (en) * | 2008-03-20 | 2009-09-24 | Modell Mark D | System and methods for the improvement of images generated by fiberoptic imaging bundles |
JP2009240354A (ja) | 2008-03-28 | 2009-10-22 | Fujinon Corp | 電子内視鏡装置 |
JP5235473B2 (ja) | 2008-04-04 | 2013-07-10 | Hoya株式会社 | 分光特性推定装置 |
JP5374078B2 (ja) | 2008-06-16 | 2013-12-25 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP5467754B2 (ja) | 2008-07-08 | 2014-04-09 | Hoya株式会社 | 電子内視鏡用信号処理装置および電子内視鏡装置 |
JP5380973B2 (ja) | 2008-09-25 | 2014-01-08 | 株式会社ニコン | 画像処理装置及び画像処理プログラム |
WO2010044432A1 (ja) | 2008-10-17 | 2010-04-22 | オリンパスメディカルシステムズ株式会社 | 内視鏡システムおよび内視鏡画像処理装置 |
JP2010115243A (ja) | 2008-11-11 | 2010-05-27 | Hoya Corp | 電子内視鏡用画像信号処理装置 |
JP4692786B2 (ja) | 2009-01-09 | 2011-06-01 | 花王株式会社 | 肌のテクスチャの解析方法 |
US8300093B2 (en) * | 2009-01-12 | 2012-10-30 | Fujifilm Corporation | Endoscope image processing method and apparatus, and endoscope system using the same |
JP2010172673A (ja) | 2009-02-02 | 2010-08-12 | Fujifilm Corp | 内視鏡システム、内視鏡用プロセッサ装置、並びに内視鏡検査支援方法 |
JP2011092681A (ja) | 2009-09-30 | 2011-05-12 | Fujifilm Corp | 医用画像処理装置および方法並びにプログラム |
DE112010004184B4 (de) | 2009-10-29 | 2017-10-12 | Hoya Corp. | Hilfsdiagnoseeinrichtung und Hilfsdiagnoseverfahren |
JP5452242B2 (ja) | 2010-01-15 | 2014-03-26 | オリンパス株式会社 | 画像処理装置、内視鏡システム、プログラム及び画像処理装置の作動方法 |
JP5220780B2 (ja) | 2010-02-05 | 2013-06-26 | オリンパス株式会社 | 画像処理装置、内視鏡システム、プログラム及び画像処理装置の作動方法 |
JP2011182993A (ja) | 2010-03-09 | 2011-09-22 | Panasonic Electric Works Co Ltd | 歯垢検知装置 |
JP2011194024A (ja) | 2010-03-19 | 2011-10-06 | Fujifilm Corp | 異常陰影検出装置および方法ならびにプログラム |
JP5580637B2 (ja) | 2010-03-30 | 2014-08-27 | オリンパス株式会社 | 画像処理装置、内視鏡装置の作動方法及びプログラム |
JP2011218090A (ja) | 2010-04-14 | 2011-11-04 | Olympus Corp | 画像処理装置、内視鏡システム及びプログラム |
JP5800468B2 (ja) | 2010-05-11 | 2015-10-28 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
JP2011255006A (ja) | 2010-06-09 | 2011-12-22 | Olympus Corp | 画像処理装置、内視鏡装置、プログラム及び画像処理方法 |
JP5851160B2 (ja) * | 2011-08-31 | 2016-02-03 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
JP6067264B2 (ja) | 2012-07-17 | 2017-01-25 | Hoya株式会社 | 画像処理装置及び内視鏡装置 |
EP2979618B1 (en) | 2013-03-27 | 2018-11-28 | FUJIFILM Corporation | Image processing device for operating endoscope system |
-
2016
- 2016-08-12 CN CN201680002610.2A patent/CN106687023B/zh active Active
- 2016-08-12 WO PCT/JP2016/073718 patent/WO2017026540A1/ja active Application Filing
- 2016-08-12 DE DE112016000095.2T patent/DE112016000095B4/de active Active
- 2016-08-12 US US15/505,753 patent/US20170273543A1/en not_active Abandoned
- 2016-08-12 JP JP2016574468A patent/JP6113387B1/ja active Active
-
2019
- 2019-06-06 US US16/433,414 patent/US11559186B2/en active Active
-
2022
- 2022-12-15 US US18/082,143 patent/US20230113382A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09114985A (ja) * | 1995-10-20 | 1997-05-02 | Sony Corp | 画像処理装置 |
CN1828432A (zh) * | 2005-02-28 | 2006-09-06 | 村田机械株式会社 | 颜色判断装置及颜色判断方法 |
CN101803899A (zh) * | 2009-02-16 | 2010-08-18 | 奥林巴斯株式会社 | 图像处理装置以及图像处理方法 |
CN102665527A (zh) * | 2009-11-13 | 2012-09-12 | 奥林巴斯株式会社 | 图像处理装置、电子设备、内窥镜系统和程序 |
CN104540438A (zh) * | 2012-07-17 | 2015-04-22 | Hoya株式会社 | 图像处理装置和内窥镜装置 |
CN104116485A (zh) * | 2013-04-26 | 2014-10-29 | Hoya株式会社 | 损伤评估信息生成器及其方法 |
WO2015064435A1 (ja) * | 2013-10-28 | 2015-05-07 | 富士フイルム株式会社 | 画像処理装置及びその作動方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6113387B1 (ja) | 2017-04-12 |
DE112016000095T5 (de) | 2017-04-27 |
US20190282065A1 (en) | 2019-09-19 |
DE112016000095B4 (de) | 2019-07-11 |
US20170273543A1 (en) | 2017-09-28 |
WO2017026540A1 (ja) | 2017-02-16 |
US11559186B2 (en) | 2023-01-24 |
JPWO2017026540A1 (ja) | 2017-08-10 |
US20230113382A1 (en) | 2023-04-13 |
CN106687023B (zh) | 2018-12-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107072509B (zh) | 内窥镜系统以及评价值计算装置 | |
CN106714651B (zh) | 评价值计算装置以及电子内窥镜系统 | |
CN109310301B (zh) | 电子内窥镜用处理器以及电子内窥镜系统 | |
CN104470416B (zh) | 图像处理装置和内窥镜装置 | |
US8027533B2 (en) | Method of automated image color calibration | |
CN103561629B (zh) | 内窥镜装置及内窥镜装置的工作方法 | |
JP5968944B2 (ja) | 内視鏡システム、プロセッサ装置、光源装置、内視鏡システムの作動方法、プロセッサ装置の作動方法、光源装置の作動方法 | |
CN107529957B (zh) | 修正数据生成方法以及修正数据生成装置 | |
JP2003000536A (ja) | 電子内視鏡装置 | |
WO2016136442A1 (ja) | 画像処理装置 | |
CN106999019B (zh) | 图像处理装置、图像处理方法、记录介质以及内窥镜装置 | |
CN111345903A (zh) | 图像处理设备、荧光观察设备及模拟荧光观察设备的方法 | |
CN107205629A (zh) | 图像处理装置和摄像系统 | |
CN107005683A (zh) | 内窥镜装置 | |
US20230113382A1 (en) | Evaluation value calculation device and electronic endoscope system | |
CN107405050B (zh) | 内窥镜系统以及评价值计算装置 | |
CN109310299B (zh) | 电子内窥镜用处理器以及电子内窥镜系统 | |
CN109152520A (zh) | 图像信号处理装置、图像信号处理方法以及图像信号处理程序 | |
JP6591688B2 (ja) | 電子内視鏡用プロセッサ及び電子内視鏡システム | |
JPH04193254A (ja) | 内視鏡画像処理装置 | |
WO2019142689A1 (ja) | 電子内視鏡用プロセッサ及び電子内視鏡システム | |
JP2018011796A (ja) | キャリブレーション方法 | |
JP2018011797A (ja) | 補正効果確認方法及び指標 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |