CN105828692B - 内窥镜装置 - Google Patents
内窥镜装置 Download PDFInfo
- Publication number
- CN105828692B CN105828692B CN201480068172.0A CN201480068172A CN105828692B CN 105828692 B CN105828692 B CN 105828692B CN 201480068172 A CN201480068172 A CN 201480068172A CN 105828692 B CN105828692 B CN 105828692B
- Authority
- CN
- China
- Prior art keywords
- filter
- light
- wave band
- filters
- endoscope apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005286 illumination Methods 0.000 claims abstract description 80
- 230000009467 reduction Effects 0.000 claims abstract description 16
- 230000005540 biological transmission Effects 0.000 claims description 44
- 230000035945 sensitivity Effects 0.000 claims description 9
- 238000006243 chemical reaction Methods 0.000 claims description 7
- 230000005693 optoelectronics Effects 0.000 claims description 4
- 241001062009 Indigofera Species 0.000 claims description 2
- 238000012545 processing Methods 0.000 abstract description 46
- 238000003672 processing method Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 21
- 230000008569 process Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 14
- 238000003780 insertion Methods 0.000 description 14
- 230000037431 insertion Effects 0.000 description 14
- 238000003384 imaging method Methods 0.000 description 13
- 230000015654 memory Effects 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 11
- 238000003860 storage Methods 0.000 description 8
- 230000000295 complement effect Effects 0.000 description 6
- 239000000203 mixture Substances 0.000 description 6
- 239000004065 semiconductor Substances 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 238000007689 inspection Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000005452 bending Methods 0.000 description 4
- 241000894007 species Species 0.000 description 4
- 210000001519 tissue Anatomy 0.000 description 4
- 238000002834 transmittance Methods 0.000 description 4
- 238000010521 absorption reaction Methods 0.000 description 3
- 239000002775 capsule Substances 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 229910044991 metal oxide Inorganic materials 0.000 description 3
- 150000004706 metal oxides Chemical class 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 210000004400 mucous membrane Anatomy 0.000 description 2
- 102000001554 Hemoglobins Human genes 0.000 description 1
- 108010054147 Hemoglobins Proteins 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 210000001601 blood-air barrier Anatomy 0.000 description 1
- 238000013098 chemical test method Methods 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 239000003365 glass fiber Substances 0.000 description 1
- BGOFCVIGEYGEOF-UJPOAAIJSA-N helicin Chemical compound O[C@@H]1[C@@H](O)[C@H](O)[C@@H](CO)O[C@H]1OC1=CC=CC=C1C=O BGOFCVIGEYGEOF-UJPOAAIJSA-N 0.000 description 1
- 238000001727 in vivo Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000005622 photoelectricity Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00112—Connection or coupling means
- A61B1/00114—Electrical cables in or with an endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00186—Optical arrangements with imaging filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0646—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2476—Non-optical details, e.g. housings, mountings, supports
- G02B23/2484—Arrangements in relation to a camera or imaging device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/043—Picture signal generators using solid-state devices having a single pick-up sensor using an alternating colour separation filter, e.g. colour wheel or colour LCD
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
- H04N2209/046—Colour interpolation to calculate the missing colour values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- Optics & Photonics (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Theoretical Computer Science (AREA)
- Astronomy & Astrophysics (AREA)
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
提供在白色照明光观察方式和窄带光观察方式的任意观察方式中均能够进行适当的NR处理的内窥镜装置和噪声降低处理方法。内窥镜装置(1)具有噪声降低部,该噪声降低部根据使用滤镜信息来选择关注像素,使用该关注图像输出的电信号来检测在不同时间拍摄到的图像的运动,由此降低所述图像信号中包含的噪声成分,所述使用滤镜信息根据由光源部(3)射出的光和构成滤色镜(202a)的各滤镜的特性确定。
Description
技术领域
本发明涉及被导入到活体内并取得该活体内的图像的内窥镜装置。
背景技术
以往,作为降低CCD(Charge Coupled Device:电荷耦合器件)或CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)等摄像元件生成的图像信号中包含的噪声成分的噪声降低处理(以下称为“NR处理”),公知有如下技术:根据与摄像元件生成的时间上相邻的图像信号对应的当前帧和前帧,检测帧间的运动量,根据该运动量来降低当前帧的噪声成分(参照专利文献1)。
并且,作为其他的NR处理,公知有如下技术:根据摄像元件生成的图像信号中的、接收透射过用于透射特定颜色成分的滤镜的光的像素的像素值,检测帧间的运动量,根据该运动量来降低当前帧的噪声成分(参照专利文献2)。
现有技术文献
专利文献
专利文献1:日本特开2005-150903号公报
专利文献2:日本特开2011-029722号公报
发明内容
发明要解决的课题
但是,近年来,在内窥镜装置中,除了使用白色的照明光(以下称为“白色照明光”)的白色光观察(WLI:White Light Imaging)方式以外,为了观察存在于活体的粘膜表层中的毛细血管和粘膜微细图案等,还利用使用由蓝色光和绿色光的波段中分别包含的两个窄带光构成的照明光(以下称为“窄带照明光”)的窄带光观察(NBI:Narrow Band Imaging)方式。
但是,在分别进行上述白色照明光观察方式和窄带光观察方式的情况下,在根据从设置有特定滤镜的像素输出的像素值进行NR处理时,由于观察方式的特性不同而使各像素的像素值不同,所以,存在如下问题:在一个观察方式中能够适当降低噪声成分,但是,在另一个观察方式中无法适当降低噪声成分。
本发明是鉴于上述情况而完成的,其目的在于,提供在白色照明光观察方式和窄带光观察方式的任意观察方式中均能够适当降低噪声成分的内窥镜装置。
用于解决课题的手段
为了解决上述课题并实现目的,本发明的内窥镜装置的特征在于,所述内窥镜装置具有:光源部,其射出包含红色、绿色和蓝色的波段的光在内的白色照明光、或由所述蓝色和所述绿色的波段中分别包含的窄带光构成的窄带照明光;摄像元件,其对呈格子状配置的多个像素分别接收的光进行光电转换,生成电信号作为图像信号;滤色镜,其与所述多个像素对应地配置滤镜单元而成,该滤镜单元由多个滤镜构成,该多个滤镜至少具有透射所述蓝色的波段的光的滤镜、透射所述蓝色的波段的光以及所述绿色和所述红色中的至少一方的波段的光的滤镜,在所述滤镜单元中,透射所述绿色的波段的光的滤镜数量为该滤镜单元的全部滤镜数量的一半以上、且透射所述蓝色的波段的光的滤镜数量为透射所述绿色的波段的光的滤镜数量以上;以及噪声降低部,其根据使用滤镜信息来选择关注像素,使用该关注像素输出的电信号来检测在不同时间拍摄到的图像的运动,由此降低所述图像信号中包含的噪声成分,所述使用滤镜信息是根据由所述光源部射出的光和构成所述滤色镜的各滤镜的特性确定的。
发明效果
根据本发明的内窥镜装置,发挥在白色照明光观察方式和窄带光观察方式的任意观察方式中均能够适当降低噪声成分的效果。
附图说明
图1是示出本发明的一个实施方式的内窥镜装置的概略结构的图。
图2是示出本发明的一个实施方式的内窥镜装置的概略结构的示意图。
图3是示出本发明的一个实施方式的内窥镜装置的摄像元件的像素的结构的示意图。
图4是示出本发明的一个实施方式的内窥镜装置的滤色镜的结构的一例的示意图。
图5是示出本发明的一个实施方式的滤色镜的各滤镜的特性的一例的图。
图6是示出本发明的一个实施方式的滤色镜的结构的另一例的示意图。
图7是示出本发明的一个实施方式的滤色镜的结构的另一例的示意图。
图8是示出本发明的一个实施方式的滤色镜的结构的另一例的示意图。
图9是示出本发明的一个实施方式的滤色镜的结构的另一例的示意图。
图10是示出本发明的一个实施方式的滤色镜的结构的另一例的示意图。
图11是示出本发明的一个实施方式的内窥镜装置的使用滤镜信息记录部记录的使用滤镜信息的一例的图。
图12是示出本发明的一个实施方式的内窥镜装置执行的处理的概要的流程图。
图13是示意地说明本发明的一个实施方式的运动补偿部进行的摄像时刻不同的图像间的运动补偿的图。
图14是示意地说明本发明的一个实施方式的运动补偿部进行的运动补偿处理中使用的关注像素和块的图。
图15是示意地说明本发明的一个实施方式的运动补偿部进行的运动补偿处理中使用的另一个关注像素和块的图。
具体实施方式
下面,对用于实施本发明的方式(以下称为“实施方式”)进行说明。在实施方式中,说明对患者等被检体的体腔内的图像进行摄像并进行显示的医疗用的内窥镜装置。并且,本发明不由该实施方式限定。进而,在附图的记载中,对相同部分标注相同标号进行说明。
图1是示出本发明的一个实施方式的内窥镜装置的概略结构的图。图2是示出本发明的一个实施方式的内窥镜装置的概略结构的示意图。
图1和图2所示的内窥镜装置1具有:内窥镜2(内窥镜镜体),其通过将前端部插入到被检体的体腔内而对被检体内的观察部位进行摄像,生成观察部位的体内图像(图像信号);光源部3(光源装置),其经由内窥镜2从内窥镜2的前端朝向观察部位射出包含红色、绿色和蓝色的波段的光的白色照明光或由所述蓝色和所述绿色的波段中分别包含的窄带光构成的窄带照明光;处理器部4(处理装置),其对摄像元件202生成的体内图像实施规定图像处理,并且对内窥镜装置1整体的动作进行总括控制;以及显示部5,其显示由处理器部4实施了图像处理后的体内图像。内窥镜装置1将插入部21插入到患者等被检体的体腔内,取得体腔内的体内图像。医师等使用者通过进行所取得的体内图像的观察,检查有无作为检测对象部位的出血部位或肿瘤部位(病变部S)。
首先,对内窥镜2的结构进行说明。
内窥镜2具备具有挠性的呈细长形状的插入部21、与插入部21的基端侧连接且受理各种操作信号的输入的操作部22、从操作部22向与插入部21的延伸方向不同的方向延伸且内置有与光源部3和处理器部4连接的各种缆线的通用软线23。
插入部21具有内置有摄像元件202的前端部24、由多个弯曲块构成的弯曲自如的弯曲部25、以及与弯曲部25的基端侧连接且具有挠性的长条状的挠性管部26,该摄像元件202呈格子(矩阵)状排列有接收光的像素(光电二极管),通过对该像素接收的光进行光电转换而生成图像信号。
操作部22具有使弯曲部25向上下方向和左右方向弯曲的弯曲旋钮221、以及除了光源部3、处理器部4以外还输入送气单元、送水单元、送雾单元等周边设备的操作指示信号的操作输入部即多个开关222(参照图1)。并且,操作部22具有在体腔内插入活体钳子、激光刀和检查探针等处置器械的处置器械插入部223,从处置器械插入部223插入的处置器械经由前端部24的处置器械通道(未图示)而从开口部(未图示)露出。
通用软线23至少内置有光导203和汇集一个或多个缆线而得到的集合缆线。集合缆线是在内窥镜2和光源部3与处理器部4之间发送接收信号的信号线,包含用于发送接收设定数据的信号线、用于发送接收图像信号的信号线、用于发送接收对摄像元件202进行驱动的驱动用时刻信号的信号线等。通用软线23具有相对于光源部3拆装自如的连接器部27。连接器部27延伸设置有螺旋状的螺旋缆线27a,在螺旋缆线27a的延伸端具有相对于处理器部4拆装自如的连接器部28。
并且,内窥镜2至少具有摄像光学系统201、摄像元件202、光导203、照明用透镜204、A/D转换部205、摄像信息存储部206。
摄像光学系统201设置在内窥镜2的前端,至少使来自观察部位的光进行会聚。摄像光学系统201使用一个或多个透镜构成。另外,也可以在摄像光学系统201中设置改变视场角的光学变焦机构和改变焦点的对焦机构。
摄像元件202相对于摄像光学系统201的光轴垂直设置,对由摄像光学系统201形成的光的像进行光电转换,生成电信号(图像信号)。摄像元件202使用CCD(Charge CoupledDevice)图像传感器或CMOS(Complementary Metal Oxide Semiconductor)图像传感器实现。
这里,对摄像元件202的像素的结构进行说明。图3是示出摄像元件202的像素的结构的示意图。
如图3所示,摄像元件202呈格子(矩阵)状排列有用于接收来自摄像光学系统201的光的多个像素。而且,摄像元件202通过对各个像素接收的光进行光电转换,生成电信号(也称为图像信号、像素值等)作为图像信号。该电信号包含像素值(亮度值)和像素的位置信息等。在图3中,将第i行j列配置的像素记载为像素Pij。
摄像元件202具有滤色镜202a,该滤色镜202a具有设置在摄像光学系统201与该摄像元件202之间、分别透射单独设定的波段的光的多个滤镜。滤色镜202a设置在摄像元件202的受光面上。
这里,对滤色镜202a的结构进行说明。在本实施方式中,能够使用多种滤色镜202a。因此,下面,对本实施方式中能够应用的滤色镜202a的结构进行说明。
(滤色镜的结构1)
图4是示出滤色镜202a的结构的一例(结构1)的示意图。
在本实施方式中,图4所示的滤色镜202a_1根据像素Pij的配置而以二维方式(矩阵状)并列配置例如由呈2×2的矩阵状并列的4个滤镜构成的滤镜单元U1。设置有滤镜的像素Pij接收滤镜透射的波段的光。例如,设置有透射蓝色波段的光的滤镜的像素Pij接收蓝色的波段的光。下面,将接收蓝色的波段的光的像素Pij称为B像素。同样,将接收绿色的波段的光的像素Pij称为G像素,将接收红色的波段的光的像素Pij称为R像素。
这里的滤镜单元U1透射蓝色(B)的波段HB、绿色(G)的波段HG和红色(R)的波段HR的光。而且,滤镜单元U1选择多个滤镜进行配置,以使得透射波段HG的光的滤镜的数量为构成滤镜单元U1的全部滤镜的数量的一半以上,并且透射波段HB的光的滤镜的数量为透射波段HG的光的滤镜的数量以上。蓝色、绿色和红色的波段HB、HG和HR例如是波段HB为390nm~500nm,波段HG为500nm~600nm,波段HR为600nm~700nm。
如该图4所示,本实施方式的滤镜单元U1由透射波段HB的光的一个B滤镜、分别透射波段HG的光的2个G滤镜、透射波段HB和波段HR的光的一个Mg滤镜构成。下面,在与像素Pij对应的位置设置B滤镜的情况下,将该B滤镜记载为Bij。同样,在与像素Pij对应的位置设置G滤镜的情况下,将该G滤镜记载为Gij,在与像素Pij对应的位置设置Mg滤镜的情况下,将该Mg滤镜记载为Mgij。
在滤镜单元U1中,透射波段HG的光的滤镜(G滤镜)的数量为2个,透射波段HB的光的滤镜(B滤镜和Mg滤镜)的数量为2个。
图5是示出本实施方式的滤色镜202a_1的各滤镜的特性的一例的图,是示出光的波长与各滤镜的透射率的关系的图。在图5中,对透射率曲线进行标准化,以使得各滤镜的透射率的最大值相等。图5所示的曲线Lb(实线)表示B滤镜的透射率曲线,曲线Lg(虚线)表示G滤镜的透射率曲线,曲线Lm(单点划线)表示Mg滤镜的透射率曲线。
如图5所示,B滤镜透射波段HB的光。Mg滤镜透射绿色的补色即品红色的波段的光。换言之,Mg滤镜吸收波段HG的光,透射波段HB的光,并且透射波段HR的光。G滤镜透射波段HG的光。另外,在本说明书中,补色是指由包含波段HB、HG、HR中的至少2个波段的光构成的颜色。
(滤色镜的结构2)
图6是示出本实施方式的滤色镜202a的结构的另一例(结构2)的示意图。
在本实施方式中,图6所示的滤色镜202a_2以二维方式并列排列例如由呈2×2的格子状并列的4个滤镜构成的滤镜单元U2。滤镜单元U2由透射波段HB的光的一个B滤镜、透射波段HB、HG的光的2个Cy滤镜、透射波段HR的光的一个R滤镜构成。
Cy滤镜透射红色的补色即青色的波段的光。换言之,Cy滤镜吸收波段HR的光,透射波段HB的光,并且透射波段HG的光。
在滤镜单元U2中,透射波段HG的光的滤镜(Cy滤镜)的数量为2个,透射波段HB的光的滤镜(B滤镜和Cy滤镜)的数量为3个。
(滤色镜的结构3)
图7是示出本实施方式的滤色镜202a的结构的另一例(结构3)的示意图。
在本实施方式中,图7所示的滤色镜202a_3以二维方式并列排列例如由呈2×2的格子状并列的4个滤镜构成的滤镜单元U3。滤镜单元U3由透射波段HB的光的一个B滤镜、透射波段HB、HG的光的2个Cy滤镜、透射波段HB、HR的光的一个Mg滤镜构成。
在滤镜单元U3中,透射波段HG的光的滤镜(Cy滤镜)的数量为2个,透射波段HB的光的滤镜(B滤镜、Cy滤镜和Mg滤镜)的数量为4个。
(滤色镜的结构4)
图8是示出本实施方式的滤色镜202a的结构的另一例(结构4)的示意图。
在本实施方式中,图8所示的滤色镜202a_4以二维方式并列排列例如由呈2×2的格子状并列的4个滤镜构成的滤镜单元U4。滤镜单元U4由透射波段HB的光的一个B滤镜、透射波段HB、HG的光的2个Cy滤镜、透射波段HB、HG、HR的光的一个W滤镜构成。
W滤镜透射白色的波段的光。换言之,W滤镜透射波段HB、HG、HR的光(白色光)。另外,也可以不设置W滤镜而设为空(透明)的滤镜区域。
在滤镜单元U4中,透射波段HG的光的滤镜(Cy滤镜和W滤镜)的数量为3个,透射波段HB的光的滤镜(B滤镜、Cy滤镜和W滤镜)的数量为4个。
(滤色镜的结构5)
图9是示出本实施方式的滤色镜202a的结构的另一例(结构5)的示意图。
在本实施方式中,图9所示的滤色镜202a_5以二维方式并列排列例如由呈4×4的矩阵状并列的16个滤镜构成的滤镜单元U5。滤镜单元U5分别具有多个上述B滤镜、G滤镜和Mg滤镜,并且,各G滤镜呈对角配置。
在滤镜单元U5中,透射波段HG的光的滤镜(G滤镜)的数量为8个,透射波段HB的光的滤镜(B滤镜和Mg滤镜)的数量为8个。
(滤色镜的结构6)
图10是示出本实施方式的滤色镜的结构的另一例(结构6)的示意图。
在本实施方式中,图10所示的滤色镜202a_6以二维方式并列排列例如由呈4×4的格子状并列的16个滤镜构成的滤镜单元U6。滤镜单元U6分别具有多个上述B滤镜、Mg滤镜和W滤镜,并且,各W滤镜呈对角配置。
在滤镜单元U6中,透射波段HG的光的滤镜(W滤镜)的数量为8个,透射波段HB的光的滤镜(B滤镜、Mg滤镜和W滤镜)的数量为16个。
这样,在本实施方式中,上述6种滤色镜202a中的任意一方设置在摄像元件202的受光面上。关于上述实施方式的滤色镜202a,在滤镜单元中,只要透射波段HG的光的滤镜的数量为构成滤镜单元的滤镜的数量的一半以上、且透射波段HB的光的滤镜的数量为透射波段HG的光的滤镜的数量以上即可,除了上述排列以外,只要是满足上述条件的排列,则能够应用。另外,下面,设接收波段HG的光的像素Pij为G像素、接收波段HR的光的像素Pij为R像素、接收波段HB、HG的光的像素Pij为Cy像素、接收波段HB、HR的光的像素Pij为Mg像素、接收波段HB、HG、HR的光的像素Pij为W像素进行说明。
返回图1和图2,继续说明内窥镜2的结构。
光导203使用玻璃纤维等构成,构成光源部3射出的光的导光路。
照明用透镜204设置在光导203的前端,对由光导203引导的光进行扩散,从前端部24向外部射出。
A/D转换部205对摄像元件202生成的图像信号进行A/D转换,将转换为数字的图像信号(电信号)输出到处理器部4。
摄像信息存储部206存储用于使内窥镜2进行动作的各种程序、包含内窥镜2的动作所需要的各种参数和内窥镜2的识别信息D等的数据。识别信息D中包含有内窥镜2的固有信息(ID)即镜体ID、年型、说明书信息、传送方式、传送率和镜体ID中附带的滤色镜202a的透射滤镜的排列信息等。摄像信息存储部206使用Flash存储器等半导体存储器实现。
接着,对光源部3的结构进行说明。
光源部3具有照明部31和照明控制部32。
照明部31在照明控制部32的控制下,切换射出波段相互不同的多个照明光。照明部31切换射出波段相互不同的多个照明光。照明部31具有光源31a、光源驱动器31b、切换滤镜31c、驱动部31d、驱动器31e、会聚透镜31f。
光源31a在照明控制部32的控制下,射出包含红色、绿色和蓝色的波段HR、HG和HB的光在内的白色照明光。光源31a产生的白色照明光经由切换滤镜31c、会聚透镜31f和光导203从前端部24射出到外部。光源31a使用白色LED、氙灯等发出白色光的光源实现。
光源驱动器31b在照明控制部32的控制下,通过对光源31a供给电流,使光源31a射出白色照明光。
切换滤镜31c仅透射光源31a射出的白色照明光中的蓝色的窄带光和绿色的窄带光。切换滤镜31c在照明控制部32的控制下,以插入脱离自如的方式配置在光源31a射出的白色照明光的光路上。切换滤镜31c通过配置在白色照明光的光路上,仅透射两个窄带光。具体而言,切换滤镜31c透射由波段HB中包含的窄带TB(例如390nm~445nm)的光和波段HG中包含的窄带TG(例如530nm~550nm)的光构成的窄带照明光。该窄带TB、TG是容易被血液中的血红蛋白吸收的蓝色光和绿色光的波段。将被限制为该频带而射出的光称为窄带照明光,将基于该窄带照明光的图像的观察称为窄带光观察(NBI)方式。
驱动部31d使切换滤镜31c相对于光源31a的光路进行插入脱离动作。驱动部31d使用步进马达或DC马达等构成。
驱动器31e在照明控制部32的控制下,对驱动部31d供给规定电流。
会聚透镜31f使光源31a射出的白色照明光或透射过切换滤镜31c的窄带照明光进行会聚,射出到光源部3的外部(光导203)。
照明控制部32控制光源驱动器31b,使光源31a进行接通断开动作。并且,照明控制部32控制驱动器31e,通过使切换滤镜31c相对于光源31a的光路进行插入脱离动作,控制由照明部31射出的照明光的种类(波段)。具体而言,照明控制部32通过使切换滤镜31c相对于光源31a的光路进行插入脱离动作,进行将从照明部31射出的照明光切换为白色照明光和窄带照明光中的任意一方的控制。换言之,照明控制部32进行切换为白色照明光观察(WLI:White Light Imaging)方式和窄带光观察(NBI:Narrow Band Imaging)方式中的任意观察方式的控制,所述白色照明光观察方式使用包含波段HB、HG和HR的光的白色照明光,所述窄带光观察方式使用由窄带TB、TG的光构成的窄带照明光。
接着,对处理器部4的结构进行说明。
处理器部4具有噪声降低部41、帧存储器42、图像处理部43、显示图像生成部44、记录部45、输入部46、控制部47。
噪声降低部41进行降低从A/D转换部205输入的图像信号中包含的噪声成分的NR处理,将其输出到图像处理部43和帧存储器42。噪声降低部41具有运动补偿部411和像素相加部412。
运动补偿部411根据由后述使用滤镜信息记录部451记录的使用滤镜信息来选择关注像素,使用该关注像素输出的电信号(像素值),检测摄像元件202在不同时间进行摄像而生成的图像的运动,由此降低摄像元件202生成的图像信号中包含的噪声成分,所述使用滤镜信息根据光源部3射出的光和构成滤色镜202a的各滤镜的特性确定。具体而言,运动补偿部411进行运动补偿处理,对与摄像元件202生成的时间上相邻的图像信号对应的2个图像(帧)的运动进行补偿。
像素相加部412在与从A/D转换部205输入的最新的图像信号对应的当前帧(最新图像)的各像素的像素值(电信号)中,加上与从运动补偿部411输入的进行了图像的运动补偿后的图像信号对应的前帧(补偿图像)的各像素的像素值,并求平均,由此降低与最新图像的图像信号对应的当前帧(最新图像)中包含的噪声成分,将与降低了该噪声成分的图像信号对应的当前帧(最新图像)输出到帧存储器42和图像处理部43。
帧存储器42存储从噪声降低部41输入的降低了噪声成分的图像信号(当前帧)。帧存储器42使用SDRAM等半导体存储器构成。
图像处理部43对与从噪声降低部41输入的最新的图像信号对应的当前帧(最新图像)进行各种图像处理,将其输出到显示图像生成部44。这里,作为图像处理部43进行的图像处理,是对黑电平的偏置量进行校正的OB钳位处理、根据多个像素的颜色信息的相关值进行缺失的颜色成分的插值的去马赛克处理、对实施了去马赛克处理后的图像信号进行明亮度电平的灰度处理的增益调整处理和生成彩色图像信号的彩色图像生成处理等。
显示图像生成部44对与从图像处理部43输入的最新图像的图像信号对应的当前帧(最新图像)进行灰度转换处理、放大处理和/或粘膜表层的毛细血管或粘膜微细图案等的构造强调处理等,将其输出到显示部5。
记录部45记录用于使内窥镜装置1进行动作的各种程序和包含内窥镜装置1的动作所需要的各种参数等的数据。记录部45使用Flash存储器或SDRAM等半导体存储器实现。并且,记录部45具有使用滤镜信息记录部451。
使用滤镜信息记录部451记录与运动补偿部411对由摄像元件202生成的图像信号进行运动补偿时的使用滤镜有关的使用滤镜信息。
图11是示出使用滤镜信息记录部451记录的使用滤镜信息的一例的图。图11所示的使用滤镜信息T1按照每个滤色镜,根据照明光的种类来记录运动补偿部411在运动补偿处理中使用的滤镜的种类。首先,基本上,摄像元件202所具有的滤色镜202a被固定而无法切换,但是,在本实施方式中,构成为能够更换内窥镜2(镜体)本身。因此,图11所示的“使用滤镜信息T1”和“滤色镜的种类”在实际使用时作为“镜体ID”进行附加并进行管理,但是,为了明确说明,这里表记为“滤色镜类别”。在该前提下,对设定运动补偿部411在运动补偿处理中要使用的滤镜时的条件进行说明。在设定运动补偿部411在运动补偿处理中要使用的滤镜时,首先根据以下两个条件1、2中的条件1来设定滤镜,在条件1存在多个候选的情况下,进而根据条件2来缩小候选范围,设定要使用的滤镜。
条件1:在滤镜单元中透射相同种类的颜色成分的滤镜数量最大的滤镜。
条件2:在存在多个符合条件1的滤镜的情况下、窄带照明光的灵敏度更高的滤镜。这里,灵敏度的顺序是W滤镜>Cy滤镜>B滤镜>Mg滤镜>G滤镜。
另外,针对分别构成各滤色镜202a_1~202a_6的滤镜单元U1~U6考虑该条件1、2就足够了。
首先,对滤色镜202a_1进行说明。在照明光是白色光的情况下,根据条件1,G滤镜成为运动补偿处理用的滤镜。并且,在照明光是窄带光的情况下,由于Mg滤镜仅透射波段HB的光,所以,实质上视为B滤镜。因此,根据条件1,透射波段HB的光的滤镜数量和透射波段HG的光的滤镜数量为相同数量。因此,当应用条件2时,由于B滤镜的灵敏度高于G滤镜的灵敏度,所以,B滤镜(包含Mg滤镜)成为运动补偿处理用的滤镜。
对滤色镜202a_2进行说明。在照明光是白色光的情况下,根据条件1,Cy滤镜成为运动补偿处理用的滤镜。并且,在照明光是窄带光的情况下,由于Cy滤镜直接透射青色成分,所以,该情况下,根据条件1,Cy滤镜成为运动补偿处理用的滤镜。
对滤色镜202a_3进行说明。在照明光是白色光的情况下,根据条件1,Cy滤镜成为运动补偿处理用的滤镜。并且,在照明光是窄带光的情况下,由于Mg滤镜仅透射波段HB的光,所以,实质上视为B滤镜。因此,根据条件1,仅透射波段HB的光的滤镜数量和透射青色成分的滤镜数量为相同数量。因此,当应用条件2时,由于Cy滤镜的灵敏度高于B滤镜的灵敏度,所以,在照明光是窄带光的情况下,Cy滤镜成为运动补偿处理用的滤镜。
对滤色镜202a_4进行说明。在照明光是白色光的情况下,根据条件1,Cy滤镜成为运动补偿处理用的滤镜。并且,在照明光是窄带光的情况下,由于W滤镜透射波段HB的光和波段HG的光,所以,实质上成为Cy滤镜。因此,在照明光是窄带光的情况下,Cy滤镜(包含W滤镜)成为运动补偿处理用的滤镜。
对滤色镜202a_5进行说明。在照明光是白色光的情况下,根据条件1,G滤镜成为运动补偿处理用的滤镜。并且,在照明光是窄带光的情况下,由于Mg滤镜仅透射波段HB的光,所以,实质上视为B滤镜。因此,根据条件1,实质上的B滤镜和G滤镜的数量成为相同数量。因此,当应用条件2时,由于B滤镜的灵敏度高于G滤镜的灵敏度,所以,B滤镜(包含Mg滤镜)成为运动补偿处理用的滤镜。
对滤色镜202a_6进行说明。在照明光是白色光的情况下,根据条件1,W滤镜成为运动补偿处理用的滤镜。并且,在照明光是窄带光的情况下,W滤镜实质上视为Cy滤镜,Mg滤镜实质上视为B滤镜。因此,根据条件1,透射青色成分的滤镜数量和仅透射波段HB的光的滤镜数量成为相同数量。因此,当应用条件2时,由于Cy滤镜的灵敏度高于B滤镜的灵敏度,所以,实质上作为Cy滤镜的W滤镜成为运动补偿处理用的滤镜。
这样,运动补偿部411参照照明光的类别信息和使用滤镜信息T1(镜体ID),确定运动补偿处理中应该使用的滤镜,使用与所确定的滤镜对应的像素(关注像素)输出的电信号,进行在不同时间拍摄到的图像的运动补偿处理。
返回图1和图2,继续说明处理器部4的结构。
输入部46是用于供用户对内窥镜装置1进行输入等的接口,构成为包括用于进行电源的接通/断开的电源开关、用于切换拍摄模式和其他各种模式的模式切换按钮、用于切换光源部3的照明光的照明光切换按钮等。
控制部47进行包含内窥镜2和光源部3在内的各结构部的驱动控制以及针对各结构部的信息的输入输出控制等。并且,控制部47经由规定信号线或总线将记录部45中存储的摄像控制用的设定数据(例如读出对象的像素等)、表示摄像时刻的时刻信号和表示光源部3的照射时刻的照射时刻信号等输出到内窥镜2和光源部3。并且,控制部47将照明光的类别信息和经由摄像信息存储部206取得的滤色镜信息(识别信息D)输出到噪声降低部41。
接着,对显示部5进行说明。
显示部5显示与从处理器部4输入的显示图像信号对应的图像。显示部5使用液晶或有机EL(Electro Luminescence:电致发光)等构成。
对具有以上结构的内窥镜装置1执行的处理进行说明。图12是示出内窥镜装置1执行的处理的概要的流程图。另外,在以下的处理中,对滤色镜202a_1(滤镜单元U1)的例子进行说明。
如图12所示,首先,控制部47从与处理器部4连接的内窥镜2的摄像信息存储部206的识别信息记录部206a取得滤色镜信息(镜体ID)(步骤S101)。该情况下,控制部47将从识别信息记录部206a取得的滤色镜信息输出到运动补偿部411。
接着,在内窥镜装置1的观察方式是白色照明光观察方式的情况下(步骤S102:是),在光源31a射出的白色光的光路上插入切换滤镜31c时(步骤S103:是),照明控制部32通过控制驱动部31d,使切换滤镜31c从光源31a的光路上退避(步骤S104)。
然后,照明控制部32使光源31a朝向被检体内的活体组织照射白色光(步骤S105)。该情况下,照明控制部32在从操作部22输入用于指示结束被检体的检查的指示信号或用于指示照射窄带照明光的指示信号之前,使光源31a连续照射白色光。此时,照明控制部32经由控制部47将照明光的类别信息输出到运动补偿部411。
接着,控制部47使摄像元件202对由光源部3照射了白色光的被检体内的活体组织进行摄像(步骤S106)。
然后,运动补偿部411经由A/D转换部205取得与摄像元件202生成的最新图像的图像信号对应的当前帧,从帧存储器42取得与刚降低噪声成分之前的图像信号对应的前帧,从使用滤镜信息记录部451取得使用滤镜信息(步骤S107)。
接着,运动补偿部411根据从控制部47输入的滤色镜信息、照明光的类别信息和使用滤镜信息,执行对前帧和当前帧的运动进行补偿的运动补偿处理(步骤S108)。
图13是示意地说明运动补偿部411分别对前帧和当前帧执行的运动补偿处理中使用的像素的选择方法的图。
如图13所示,运动补偿部411针对与紧前的图像信号对应的前帧F1,使用块匹配法进行对前帧F1和当前帧F2的运动进行补偿的运动补偿处理。关于块匹配法,例如,检测前帧F1的对象像素M1’移动到当前帧F2的哪个位置。因此,运动补偿部411将以对象像素M1’为中心的块B1(小区域)作为模板,在当前帧F2中,以与前帧F1的对象像素M1’的位置相同的位置的像素f2为中心,利用块B1的模板对当前帧F2进行扫描,将模板间的差分绝对值之和为最小的位置的中心像素作为对象像素M1。即,运动补偿部411在当前帧F2中检测从对象像素M1’到对象像素M1的运动量Y1(运动向量),对前帧F1的全部像素进行该处理。
在图13所示的状况下,运动补偿部411根据滤色镜信息、照明光的类别信息和使用滤镜信息来选择关注像素。具体而言,如图14所示,在滤色镜202a为滤色镜202a_1(滤镜单元U1)、照明光为白色光的情况下,在对象像素M1为关注像素且为像素P43时,运动补偿部411根据使用滤镜信息,以像素P43为中心,将由与像素P43相邻的像素构成的块B1作为模板,在关注像素中对前帧F1进行扫描。另外,在图14中,利用括弧来记载与像素Pij对应的滤镜。
与此相对,如图15所示,在滤色镜202a为滤色镜202a_1(滤镜单元U1)、照明光为白色光的情况下,在对象像素M1不是关注像素且为像素P33时,运动补偿部411根据使用滤镜信息,代替像素P33而将由关注像素即像素P33的周边的像素P23、P32、P34、P43构成的块B1作为模板,对前帧F1进行扫描。由此,能够进行与照明光的特性对应的运动补偿,所以,能够准确地检测前帧F1与当前帧F2之间产生的运动量Y1。
返回图12,继续说明步骤S109以后。
在步骤S109中,像素相加部412进行如下的像素相加处理:在与最新的图像信号对应的当前帧(最新图像)的各像素的像素值中,加上与运动补偿部411进行了运动补偿后的最新的图像信号对应的当前帧(最新图像)的各像素的像素值,并求平均,将其输出到图像处理部43。
接着,图像处理部43进行如下图像处理:对从噪声降低部41输入的图像信号进行去马赛克处理、颜色成分生成处理和彩色图像生成处理等,将其输出到显示图像生成部44(步骤S110)。
然后,显示图像生成部44进行针对从图像处理部43输入的图像信号生成显示用的显示图像信号的显示图像生成处理,将其输出到显示部5(步骤S111)。在步骤S111之后,内窥镜装置1转移到后述步骤S121。
在步骤S103中未在光源31a射出的白色光的光路上插入切换滤镜31c时(步骤S103:否),内窥镜装置1转移到步骤S105。
接着,对步骤S102中内窥镜装置1的观察方式不是白色照明光观察方式的情况、即窄带光观察的情况(步骤S102:否)进行说明。该情况下,在光源31a射出的白色光的光路上插入切换滤镜31c时(步骤S112:是),照明控制部32使照明部31对被检体内的活体组织照射窄带光(步骤S114)。此时,照明控制部32在从操作部22输入用于指示结束被检体的检查的指示信号或用于指示照射窄带照明光的指示信号之前,使光源31a连续照射白色光。进而,照明控制部32经由控制部47将照明光的类别信息输出到运动补偿部411。
接着,控制部47使摄像元件202对被照射了照明部31所照射的窄带光的被检体内的活体组织进行摄像(步骤S115)。
然后,运动补偿部411经由A/D转换部205取得与摄像元件202生成的最新的图像信号对应的当前帧,从帧存储器42取得与刚降低噪声成分之前的图像信号对应的前帧,从使用滤镜信息记录部451取得使用滤镜信息(步骤S116)。
接着,运动补偿部411根据从使用滤镜信息记录部451取得的使用滤镜信息,执行运动补偿处理,对紧前的图像信号和最新的图像信号的运动进行补偿(步骤S117)。
然后,像素相加部412进行如下的像素相加处理:在与最新的图像信号对应的当前帧的各像素的像素值中,加上与运动补偿部411进行了运动补偿后的最新的图像信号对应的当前帧的各像素的像素值,将其输出到图像处理部43(步骤S118)。
接着,图像处理部43进行如下图像处理:对从噪声降低部41输入的图像信号进行去马赛克处理、颜色成分生成处理和彩色图像生成处理等,将其输出到显示图像生成部44(步骤S119)。
然后,显示图像生成部44进行将从图像处理部43输入的B像素的像素值和毛细血管的成分分配给显示部5的B通道和G通道、将深层血管的成分分配给R通道的显示图像生成处理,将其输出到显示部5(步骤S120)。由此,表层的毛细血管的部位被着色为红褐色,其他部位被着色为青色到绿色,在显示部5中显示对粘膜表层的毛细血管进行了强调的强调图像。在步骤S120之后,内窥镜装置1转移到步骤S121。
在步骤S111或步骤S120之后,在经由操作部22输入了结束被检体的检查的指示信号的情况下(步骤S121:是),内窥镜装置1结束本处理。该情况下,照明控制部32使光源31a停止。与此相对,在未经由操作部22输入结束被检体的检查的指示信号的情况下(步骤S121:否),内窥镜装置1返回步骤S102。
在步骤S112中未在光源31a射出的白色光的光路上插入切换滤镜31c时(步骤S112:否),照明控制部32通过控制驱动部31d,将切换滤镜31c插入到光源31a的光路上(步骤S113)。在步骤S113之后,内窥镜装置1转移到步骤S114。
根据以上说明的本实施的一个实施方式,在白色照明光观察方式和窄带光观察方式中的任意观察方式中均能够适当降低噪声成分。
另外,在上述实施方式的内窥镜装置1中,说明了针对从一个光源31a射出的白色光,通过切换滤镜31c的插入脱离而将从照明部31射出的照明光切换为白色照明光和窄带照明光的情况,但是,也可以切换分别射出白色照明光和窄带照明光的两个光源,从而射出白色照明光和窄带照明光中的任意一方。在切换两个光源而射出白色照明光和窄带照明光中的任意一方的情况下,例如,还能够应用于具有光源部、滤色镜和摄像元件且被导入到被检体内的胶囊型内窥镜。
并且,关于本发明的滤色镜,在滤镜单元中,只要透射波段HG的光的滤镜的数量为构成滤镜单元的滤镜的数量的一半以上、且透射波段HB的光的滤镜的数量为透射波段HG的光的滤镜的数量以上即可,除了上述排列以外,只要是满足上述条件的排列,则能够应用。
并且,在本发明中,说明了具有多个分别透射规定波段的光的透射滤镜的滤色镜设置在摄像元件的受光面上的情况,但是,各透射滤镜也可以单独设置在摄像元件的各像素中。
并且,本发明的内窥镜装置还能够应用于在前端部内置有摄像元件和超声波转换器的超声波内窥镜、以及能够导入到被检体内的胶囊型内窥镜。在应用于胶囊型内窥镜的情况下,在切换2个光源而射出白色照明光和窄带照明光中的任意一方的情况下,例如,将光源部、滤色镜和摄像元件设置在胶囊型的壳体内即可。
另外,在本说明书的流程图的说明中,使用“首先”、“然后”、“接着”等表现明示了步骤间的处理的前后关系,但是,实施本发明所需要的处理的顺序不由这些表现唯一决定。即,能够在不矛盾的范围内对本说明书中记载的流程图中的处理的顺序进行变更。
这样,本发明可以包括这里未记载的各种实施方式,能够在由权利要求书确定的技术思想范围内进行各种设计变更等。
标号说明
1:内窥镜装置;2:内窥镜;3:光源装置;4:处理装置;5:显示部;21:插入部;22:操作部;23:通用软线;24:前端部;31:照明部;31a:光源;31b:光源驱动器;31c:切换滤镜;31d:驱动部;31e:驱动器;31f:会聚透镜;32:照明控制部;41:噪声降低部;42:帧存储器;43:图像处理部;44:显示图像生成部;45:记录部;46:输入部;47:控制部;201:摄像光学系统;202:摄像元件;202a:滤色镜;203:光导;204:照明用透镜;205:A/D转换部;206:摄像信息存储部;411:运动补偿部;412:像素相加部;451:使用滤镜信息记录部;U1~U6:滤镜单元。
Claims (5)
1.一种内窥镜装置,其特征在于,所述内窥镜装置具有:
光源部,其射出包含红色、绿色和蓝色的波段的光在内的白色照明光、或由所述蓝色和所述绿色的波段中分别包含的窄带光构成的窄带照明光;
摄像元件,其对呈格子状配置的多个像素分别接收的光进行光电转换,生成电信号作为图像信号;
滤色镜,其与所述多个像素对应地配置滤镜单元而成,该滤镜单元由多个滤镜构成,该多个滤镜至少具有透射所述蓝色的波段的光的滤镜、透射所述绿色和所述红色中的至少一方的波段的光以及所述蓝色的波段的光的滤镜,在所述滤镜单元中,透射所述绿色的波段的光的滤镜数量为该滤镜单元的全部滤镜数量的一半以上、且透射所述蓝色的波段的光的滤镜数量为透射所述绿色的波段的光的滤镜数量以上;以及
噪声降低部,其根据使用滤镜信息来选择关注像素,使用该关注像素输出的电信号来检测在不同时间拍摄到的图像的运动,由此降低所述图像信号中包含的噪声成分,所述使用滤镜信息是根据由所述光源部射出的光和构成所述滤色镜的各滤镜的特性确定的。
2.根据权利要求1所述的内窥镜装置,其特征在于,
所述使用滤镜信息是根据以下的条件按照所述光源部射出的光来设定与所述关注像素对应的滤镜而成的信息,
条件1:在所述滤镜单元中透射相同种类的颜色成分的滤镜数量最大的滤镜,
条件2:在存在多个符合条件1的滤镜的情况下、所述窄带照明光的灵敏度更高的滤镜。
3.根据权利要求1或2所述的内窥镜装置,其特征在于,
所述内窥镜装置还具有记录所述使用滤镜信息的使用滤镜信息记录部。
4.根据权利要求1或2所述的内窥镜装置,其特征在于,
所述滤镜单元包括透射所述蓝色的波段的光以及所述绿色的波段的光或透射所述蓝色的波段的光以及所述红色的波段的光的滤镜。
5.根据权利要求1或2所述的内窥镜装置,其特征在于,
所述滤镜单元包括透射所述红色、绿色和蓝色的各波段的光的滤镜。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013-264121 | 2013-12-20 | ||
JP2013264121A JP6230409B2 (ja) | 2013-12-20 | 2013-12-20 | 内視鏡装置 |
PCT/JP2014/074641 WO2015093114A1 (ja) | 2013-12-20 | 2014-09-18 | 内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105828692A CN105828692A (zh) | 2016-08-03 |
CN105828692B true CN105828692B (zh) | 2018-01-23 |
Family
ID=53402471
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480068172.0A Active CN105828692B (zh) | 2013-12-20 | 2014-09-18 | 内窥镜装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10264948B2 (zh) |
EP (1) | EP3085299A4 (zh) |
JP (1) | JP6230409B2 (zh) |
CN (1) | CN105828692B (zh) |
WO (1) | WO2015093114A1 (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107113405B (zh) * | 2015-01-20 | 2019-01-15 | 奥林巴斯株式会社 | 图像处理装置、图像处理装置的工作方法、记录介质和内窥镜装置 |
JP6153689B1 (ja) * | 2015-09-30 | 2017-06-28 | オリンパス株式会社 | 撮像素子及び撮像装置 |
WO2017158692A1 (ja) | 2016-03-14 | 2017-09-21 | オリンパス株式会社 | 内視鏡装置、画像処理装置、画像処理方法およびプログラム |
WO2017199509A1 (ja) * | 2016-05-19 | 2017-11-23 | オリンパス株式会社 | 生体観察システム |
JP6800664B2 (ja) * | 2016-09-08 | 2020-12-16 | オリンパス株式会社 | 内視鏡装置 |
JP7140113B2 (ja) * | 2017-05-15 | 2022-09-21 | ソニーグループ株式会社 | 内視鏡 |
JP2018192043A (ja) * | 2017-05-18 | 2018-12-06 | オリンパス株式会社 | 内視鏡及び内視鏡システム |
WO2020100184A1 (ja) * | 2018-11-12 | 2020-05-22 | オリンパス株式会社 | 内視鏡用光源装置、内視鏡装置及び内視鏡用光源装置の作動方法 |
CN115380523A (zh) * | 2020-02-13 | 2022-11-22 | Lg伊诺特有限公司 | 相机模块 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5604530A (en) * | 1992-08-14 | 1997-02-18 | Olympus Optical Co., Ltd. | Solid-state image sensing device for endoscope and endoscope imaging apparatus |
CN102151118A (zh) * | 2010-01-15 | 2011-08-17 | 奥林巴斯株式会社 | 图像处理装置、内窥镜系统以及图像处理方法 |
JP2011234844A (ja) * | 2010-05-10 | 2011-11-24 | Olympus Corp | 制御装置、内視鏡装置及びプログラム |
JP2012005512A (ja) * | 2010-06-22 | 2012-01-12 | Olympus Corp | 画像処理装置、内視鏡装置、内視鏡システム、プログラム及び画像処理方法 |
JP2012095828A (ja) * | 2010-11-02 | 2012-05-24 | Olympus Corp | 撮像装置、内視鏡装置及び画像生成方法 |
JP2012170640A (ja) * | 2011-02-22 | 2012-09-10 | Fujifilm Corp | 内視鏡システム、および粘膜表層の毛細血管の強調画像表示方法 |
EP2645708A2 (en) * | 2012-03-30 | 2013-10-02 | FUJIFILM Corporation | Stripe noise correction method of captured image, photographing apparatus and electronic endoscopic apparatus |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS6089187A (ja) * | 1983-10-21 | 1985-05-20 | Matsushita Electronics Corp | カラ−固体撮像装置 |
US6366319B1 (en) * | 1997-07-03 | 2002-04-02 | Photronics Corp. | Subtractive color processing system for digital imaging |
JP2001186534A (ja) * | 1999-12-22 | 2001-07-06 | Toshiba Corp | 固体撮像装置 |
JP2005150903A (ja) | 2003-11-12 | 2005-06-09 | Matsushita Electric Ind Co Ltd | 画像処理装置、ノイズ除去方法及びノイズ除去プログラム |
JP5401191B2 (ja) | 2009-07-21 | 2014-01-29 | 富士フイルム株式会社 | 撮像装置及び信号処理方法 |
JP5346856B2 (ja) * | 2010-03-18 | 2013-11-20 | オリンパス株式会社 | 内視鏡システム、内視鏡システムの作動方法及び撮像装置 |
JP5603676B2 (ja) * | 2010-06-29 | 2014-10-08 | オリンパス株式会社 | 画像処理装置及びプログラム |
JP5864880B2 (ja) * | 2011-04-07 | 2016-02-17 | オリンパス株式会社 | 内視鏡装置及び内視鏡装置の作動方法 |
-
2013
- 2013-12-20 JP JP2013264121A patent/JP6230409B2/ja active Active
-
2014
- 2014-09-18 EP EP14871004.9A patent/EP3085299A4/en not_active Withdrawn
- 2014-09-18 WO PCT/JP2014/074641 patent/WO2015093114A1/ja active Application Filing
- 2014-09-18 CN CN201480068172.0A patent/CN105828692B/zh active Active
-
2016
- 2016-06-06 US US15/173,868 patent/US10264948B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5604530A (en) * | 1992-08-14 | 1997-02-18 | Olympus Optical Co., Ltd. | Solid-state image sensing device for endoscope and endoscope imaging apparatus |
CN102151118A (zh) * | 2010-01-15 | 2011-08-17 | 奥林巴斯株式会社 | 图像处理装置、内窥镜系统以及图像处理方法 |
JP2011234844A (ja) * | 2010-05-10 | 2011-11-24 | Olympus Corp | 制御装置、内視鏡装置及びプログラム |
JP2012005512A (ja) * | 2010-06-22 | 2012-01-12 | Olympus Corp | 画像処理装置、内視鏡装置、内視鏡システム、プログラム及び画像処理方法 |
JP2012095828A (ja) * | 2010-11-02 | 2012-05-24 | Olympus Corp | 撮像装置、内視鏡装置及び画像生成方法 |
JP2012170640A (ja) * | 2011-02-22 | 2012-09-10 | Fujifilm Corp | 内視鏡システム、および粘膜表層の毛細血管の強調画像表示方法 |
EP2645708A2 (en) * | 2012-03-30 | 2013-10-02 | FUJIFILM Corporation | Stripe noise correction method of captured image, photographing apparatus and electronic endoscopic apparatus |
Also Published As
Publication number | Publication date |
---|---|
EP3085299A4 (en) | 2017-09-27 |
WO2015093114A1 (ja) | 2015-06-25 |
US20160278613A1 (en) | 2016-09-29 |
CN105828692A (zh) | 2016-08-03 |
US10264948B2 (en) | 2019-04-23 |
EP3085299A1 (en) | 2016-10-26 |
JP2015119765A (ja) | 2015-07-02 |
JP6230409B2 (ja) | 2017-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105828692B (zh) | 内窥镜装置 | |
CN105828693B (zh) | 内窥镜装置 | |
CN105792727B (zh) | 内窥镜装置 | |
CN103124515B (zh) | 摄像装置 | |
JP5606120B2 (ja) | 内視鏡装置 | |
US9095250B2 (en) | Endoscope apparatus with particular illumination, illumination control and image processing | |
JP5508959B2 (ja) | 内視鏡装置 | |
CN105163646B (zh) | 内窥镜 | |
CN107072506B (zh) | 摄像装置和处理装置 | |
CN106388756A (zh) | 图像处理装置及其工作方法以及内窥镜系统 | |
CN107105987B (zh) | 图像处理装置及其工作方法、记录介质和内窥镜装置 | |
CN108778091A (zh) | 内窥镜装置、图像处理装置、图像处理方法和程序 | |
JP2012005807A (ja) | 内視鏡装置の制御方法及び内視鏡装置 | |
CN105212885B (zh) | 医用图像处理装置及其工作方法、以及内窥镜系统 | |
US10327622B2 (en) | Endoscope | |
US20230000330A1 (en) | Medical observation system, medical imaging device and imaging method | |
CN104780825A (zh) | 内窥镜系统 | |
CN107005683A (zh) | 内窥镜装置 | |
CN109788891A (zh) | 内窥镜镜体、内窥镜处理器和内窥镜用适配器 | |
JP2011194082A (ja) | 内視鏡画像補正装置および内視鏡装置 | |
CN105338882B (zh) | 摄像装置 | |
US11298011B2 (en) | Processing device, setting method and computer-readable recording medium | |
JP2016042913A (ja) | 感度調整方法および撮像装置 | |
JP5897663B2 (ja) | 内視鏡装置 | |
JP2017087078A (ja) | 内視鏡装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |