CN102450997B - 内窥镜装置 - Google Patents

内窥镜装置 Download PDF

Info

Publication number
CN102450997B
CN102450997B CN201110307926.1A CN201110307926A CN102450997B CN 102450997 B CN102450997 B CN 102450997B CN 201110307926 A CN201110307926 A CN 201110307926A CN 102450997 B CN102450997 B CN 102450997B
Authority
CN
China
Prior art keywords
image
correction
sensitivity
sensitivity inhomogeneity
correction parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110307926.1A
Other languages
English (en)
Other versions
CN102450997A (zh
Inventor
高松正树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN102450997A publication Critical patent/CN102450997A/zh
Application granted granted Critical
Publication of CN102450997B publication Critical patent/CN102450997B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement

Abstract

本发明提供一种内窥镜装置,能不依赖于相对于光量的CCD传感器的输出特性,高精度地对摄像元件所拍摄的图像进行灵敏度不均匀校正。作为灵敏度不均匀校正的校正参数,具有与多个照度区域分别对应的校正参数,按照图像的照度,使用对应的校正参数来进行灵敏度不均匀校正,由此解决上述课题。

Description

内窥镜装置
技术领域
本发明属于使用(固体)摄像元件来拍摄图像的内窥镜装置的技术领域,详细地,涉及与摄像元件的输出特性无关而能进行适当的灵敏度不均匀校正的内窥镜装置。
背景技术
在诊断生物体是否有病变部或病变部发展到什么程度等时,使用内窥镜(电子内窥镜)。
在内窥镜中,通过对生物体的一部分照射光,用CCD传感器等摄像元件来拍摄反射回来的光,在显示器上显示拍摄的图像,由此来观察生物体表面的颜色、明亮度、构造等的变化,根据该观察由医师来判断病变部的状态。
众所周知,拍摄图像的摄像元件是将拍摄图像的像素(光量测定点)二维排列而成的。
在此,摄像元件的各像素并非具有完全均匀的特性,例如,在每个像素中存在灵敏度的不均匀(灵敏度偏差)等。另外,各像素的灵敏度不均匀不仅由于摄像元件的特性而产生,还由于透镜的特性(周围的光量降低等)、摄像元件的受光面的状态、透镜面的状态等而产生。
在这样的具有摄像元件的特性的不均匀(个体不均匀(偏差))的状态下即使拍摄图像,也不能得到适当的图像。特别是在医疗用途中所使用的内窥镜中,用不适当的图像来进行的诊断会导致诊断失误等重大问题。
因此,如专利文献1、专利文献2所示那样,在内窥镜中,对用摄像元件所拍摄的图像进行灵敏度不均匀校正,从而能输出没有因各个像素的个体不均匀等而引起的画质劣化的适当的图像。
专利文献1:JP特开2005-211231号公报
专利文献2:JP特开昭63-117727号公报
在内窥镜中,通常预先算出每个像素中的灵敏度不均匀校正用的校正参数并存储,针对拍摄的图像,用对应的校正参数来校正(处理)各像素的图像数据,由此来进行灵敏度不均匀校正。
在此,如前所述,摄像元件的特性不均匀不仅由于摄像元件的特性而产生,还由于透镜或摄像元件的受光面等的状态而产生。因此,灵敏度不均匀校正需要以安装透镜的状态来进行。
因此,如专利文献1、专利文献2所记载那样,作为灵敏度不均匀校正用的校正参数的一例,通过内窥镜对白色被摄体等的整面具有均匀浓度的被摄体进行拍摄,并解析该图像,按每个像素生成能在全画面输出均匀的图像的校正参数。
在此,摄像元件对于全部的光量具有直线状(线性)的输出特性,但不限于此。例如,存在受光量为高光量的区域比受光量为低光量(低照度)的区域,输出值相对高的情况或反之相对低的情况。
在摄像元件的输出特性为直线状的情况下,如前所述通过进行灵敏度不均匀校正,能适当地校正摄像元件的特性不均匀,输出适合的图像。但是在摄像元件的输出特性为非直线状的情况下,不能进行精度良好的灵敏度不均匀校正,反之,存在由于校正而导致由摄像元件的灵敏度不均匀引起的图像的不均匀加剧的情况。
发明内容
本发明的目的在于通过解决所述现有技术的问题点,提供一种内窥镜装置,在通过摄像元件拍摄图像来进行诊断的内窥镜装置中,不依赖于摄像元件的输出特性,能在全部的照度区域(全部的浓度区域)进行适当的灵敏度不均匀校正,能稳定地输出合理校正了摄像元件的灵敏度不均匀的、可进行适当诊断的图像。
为了达成所述目的,本发明的内窥镜装置通过摄像元件来拍摄图像,其特征在于,具有:存储单元,其存储灵敏度不均匀校正参数;以及灵敏度不均匀校正单元,其使用存储于存储单元的灵敏度不均匀校正参数来进行摄像元件的灵敏度不均匀校正,且,存储单元按照不同的多个照度区域的每一个来存储灵敏度不均匀校正参数,另外,灵敏度不均匀校正单元使用与校正的图像的照度相应的灵敏度不均匀校正参数来进行灵敏度不均匀校正。
优选在这样的本发明的内窥镜装置中,灵敏度不均匀校正参数按照使用摄像元件所拍摄的图像来创建校正用图像,并校正该校正用图像的不均匀的方式来生成,创建与各照度区域相应的图像作为校正用图像,并使用各图像来生成分别与各照度区域相应的灵敏度不均匀校正参数。
此时,优选在用于创建校正用图像的拍摄中,通过变更观察光的强度来创建与各照度区域相应的图像,或者优选在用于创建校正用图像的拍摄中,通过变更摄像元件的曝光时间来创建与各照度区域相应的图像,或者优选为了创建校正用图像,通过拍摄不同浓度的图像,来创建与各照度区域相应的图像。
另外,也可以具有特殊光观察的功能。
进而,优选为了创建校正用图像,对摄像元件所拍摄的图像每间除规定数量来进行选择,并使用选择的规定数量的图像来创建校正用图像。此时,优选在选择的图像的规定区域的平均图像数据超出规定范围的情况下,不在校正用图像的创建中使用该图像,进一步优选在选择的图像相对于规定的判定图像未变动规定阈值以上的情况下,不在校正用图像的创建中使用该图像。
根据具有上述构成的本发明的内窥镜装置,与高照度区域、中照度区域以及低照度区域分别对应而具有用于进行灵敏度不均匀校正(灵敏度偏差校正)的灵敏度不均匀校正参数,按照摄像元件的照度(输出强度(图像浓度)),使用对应的照度区域的灵敏度不均匀校正参数,来进行灵敏度不均匀校正。
因此,根据本发明,即使在CCD传感器等摄像元件的输出特性不为直线状的情况下,也能按照各照度区域来精度良好地进行灵敏度不均匀校正,能稳定地输出可进行适当诊断的图像。
附图说明
图1是示意地表示本发明的内窥镜装置的一例的图。
图2(A)是示意地表示内窥镜的内镜(scope)部的构成的框图,(B)是示意地表示内窥镜的视频连接器的构成的框图。
图3是示意地表示图1所示的内窥镜装置的构成的框图。
图4是用于说明校正用图像的创建方法的流程图。
图5(A)是用于说明现有的灵敏度不均匀校正的示意图,(B)是用于说明本发明中的灵敏度不均匀校正的示意图。
符号说明
10    内窥镜装置
12    内窥镜
14    处理器装置
16    光源装置
18    显示装置
20    输入装置
26    插入部
28    操作部
30    通用塞绳(universal cord)
32    连接器
36    视频连接器
38    柔性部
40    弯曲部
42    内镜部
46    摄像透镜
48    CCD传感器
50    照明用透镜
52    光导
54    信号处理部
56    图像校正部
58    存储器
60    区域
62    白色光产生部
64    窄带域光产生部
68    图像处理部
70    条件设定部
72    灵敏度不均匀校正参数生成部
具体实施方式
下面,根据附图所示的优选的实施例来详细说明本发明的内窥镜装置。
图1示意地表示本发明的内窥镜装置的一例。
图1所示的内窥镜装置10作为一例,具有:内窥镜12、进行内窥镜12所拍摄的图像的处理等的处理器装置14、提供用于进行内窥镜下的拍摄(观察)的照明光的光源装置16、显示内窥镜所拍摄的图像的显示装置18、以及用于输入各种指示等的输入装置20。
如图1所示,内窥镜12与通常的内窥镜同样,具有:插入部26、操作部28、通用塞绳30、连接器32、视频连接器36。另外,与通常的内窥镜相同,插入部26具有基端侧的拉长的柔性部38、配置有CCD传感器48等的前端的内镜部(内窥镜前端部)42、在柔性部38和内镜部42之间的弯曲部(折弯部)40,在操作部28还设有使弯曲部40弯曲的操作旋钮28a等。
图2(A)用框图来示意地表示内镜部42的构成。
如图2(A)所示,在内镜部42配置有摄像透镜46、CCD传感器((固体)摄像元件)48、照明用透镜50以及光导52。
另外,虽然在图示中省略,但在内镜部42还设有:用于插通钳子等的各种治疗工具的钳子通道以及钳子口;用于进行吸入、送气、送水等的送气/送水通道以及送气/送水口。钳子通道穿过弯曲部40以及柔性部38与设于操作部28的钳子插入口连通,送气/送水通道穿过弯曲部40、柔性部38、操作部28以及通用塞绳30,与连接器32的与吸入单元、送气单元、送水单元之间的连接部连通。
光导52穿过弯曲部40、柔性部38、操作部28以及通用塞绳30,插通到与光源装置16连接的连接器32为止。
后述的光源装置16所照射的照明光从连接器32入射到光导52,并由光导52进行传播,在内镜部42中,从光导52的前端部入射到照明用透镜50,通过照明用透镜50照射到观察部位。
另外,照明光所照射的观察部位的图像通过摄像透镜46而在CCD传感器48的受光面上成像。
CCD传感器48的输出信号通过信号线从内镜部42经过弯曲部40、柔性部38、操作部28、通用塞绳30、以及连接器32,送往视频连接器36(后述的信号处理部54)。
内窥镜12在通常的观察时(诊断时),在处理器装置14的连接部14a连接视频连接器36,在光源装置16的连接部16a连接连接器32来使用。
另外,与通常的内窥镜相同,在连接器32还连接有进行观察部位的吸入或送气的吸入单元和送气单元、用于向观察部位喷射水的吸水单元等。
图2(B)是示意地表示视频连接器36的构成的框图。
在图示例的内窥镜装置10中,作为优选的形态,在内窥镜12的视频连接器36(视频连接器36所具有的电子电路基板)上,配置有信号处理部54、图像校正部56以及存储器58,在视频连接器36对CCD传感器48的输出信号进行规定的处理。
即,CCD传感器48的输出信号被提供给信号处理部54,在信号处理部54中,被进行放大、A/D变换、log变换等规定的信号处理。
经信号处理部54处理后的图像接下来在图像校正部56中进行规定的图像校正,并从连接部14a提供给处理器装置14。在图像校正部56设有进行灵敏度不均匀校正的灵敏度不均匀校正部56a。
在内窥镜12中,对于由视频连接器36的图像校正部56实施的图像校正没有特别的限定,例示了各种图像校正(图像处理)。
作为一例,除了在灵敏度不均匀校正部56a进行的灵敏度不均匀校正(灵敏度偏差校正(增益不均匀校正))之外,还例示了偏移校正、缺陷像素校正、白平衡调整、色相饱和度校正以及伽玛校正(灰度校正)等。
进而,也可以根据实施的图像校正的种类,按照需要,在存储器54中预先存储分别与特殊光观察和白色光观察对应的校正参数,图像校正部52使用与观察光相应的校正参数,来进行图像校正。
在此,在本发明的内窥镜装置所涉及的内窥镜12中,由灵敏度不均匀校正部56进行的灵敏度不均匀校正按照拍摄的图像的照度(CCD传感器的像素所接受的照度(光量),即输出信号强度),根据分别与高照度区域、中照度区域以及低照度区域的各个照度对应的灵敏度不均匀校正参数来进行。
关于该点在后详述。
存储器58存储用于进行图像校正部56中的图像的校正的校正参数。
在此,如图2(B)示意地表示那样,存储器58设有存储灵敏度不均匀校正参数的区域60。在该区域60中,分别在区域60H存储与高照度区域对应的灵敏度不均匀校正参数H,在区域60M存储与中照度区域对应的灵敏度不均匀校正参数M,在区域60L存储与低照度区域对应的灵敏度不均匀校正参数L。
图像校正部56中的各校正都是采用预先生成并存储于存储器58中的校正参数等来处理图像数据,采用公知的方法进行即可。灵敏度不均匀校正也是如此,使用了灵敏度不均匀校正参数的灵敏度不均匀校正的处理自身基本上与公知的灵敏度不均匀校正同样地进行即可。
另外,存储于存储器58的校正参数都是在启动时以1天1次、1周1次等规定的间隔来更新(进行内窥镜的校准)。内窥镜12的校准也与公知的方法同样地进行即可。
但是,本发明并不限于此。例如内窥镜12以及处理器装置14也可以没有校正参数的生成单元,而如后述那样,若是使用生成图像校正部52中的校正参数的专用的装置的构成,则也可以通过该专用的装置来生成校正参数,并将其提供给/存储于内窥镜12的视频连接器36的存储器54等。
另外,校正参数的更新也并非一定要如上所述定期进行,在任意的时机来进行校正参数的更新均可。
另外,在图示的装置内窥镜12的视频连接器36配置有信号处理部54、图像校正部56以及存储器58,但本发明并不限于此。
例如,作为内窥镜12的视频连接器36以外的部位的一例,可能的话,也可以将信号处理部54配置于内镜部42,并将图像校正部56以及存储器58配置于视频连接器36,或者也可以在内镜部42配置信号处理部54、图像校正部56以及存储器58。
另外,信号处理部54、图像校正部56以及存储器58也可以具有连接器32而不是视频连接器38。或者,信号处理部54、图像校正部56以及存储器58也可以具有操作部28。
或者,可以是在连接器32配置信号处理部54,在视频连接器36配置图像校正部56以及存储器58的构成,也可以是在操作部28配置信号处理部54,在连接器32配置图像校正部56以及存储器58的构成等在操作部28、连接器32以及视频连接器38处分配各部位来进行配置。
或者,可以是将信号处理部54、图像校正部56以及存储器58全部配置于处理器装置14的构成。或者,也可以是在视频连接器36(视频连接器36或连接器32等的内窥镜12内部)仅配置信号处理部54,在处理器装置14配置图像校正部56以及存储器58的构成。
另外,也可以是将信号处理部54的一部分处理功能配置于视频连接器36(视频连接器36或连接器32等的内窥镜12内部),而将信号处理部54的剩余的处理功能、和图像校正部56以及存储器58一起配置于处理器装置14的构成。进而,也可以是将信号处理部54、以及图像校正部56的一部分校正功能配置于视频连接器36(视频连接器36或连接器32等的内窥镜12内部),而将图像校正部56的剩余的校正功能配置于处理器装置14的构成。
图3用框图示意地表示内窥镜装置10的构成。
光源装置16是照射用于进行基于内窥镜12的观察的照明光的公知的照明装置。如图3所示,图示例的光源装置16除了具有用于进行通常观察的白色光产生部62以外,还具有用于进行窄带域观察的窄带域光产生部64。
另外,在本发明中,光源装置16并不限于该构成,也可以仅具有白色光产生部62,还可以代替窄带域光产生部64或者在具有窄带域光产生部64的基础上,还具有产生红外光的红外光产生部等用于进行窄带域光观察以外的特殊光观察的观察光的产生部。
白色光产生部62所产生的白色光通过光导62a传播到连接部16a,另一方面,窄带域光产生部64所产生的窄带域光通过光导64b传播到连接部16a。
两观察光都是通过在连接部16a上连接内窥镜12的连接器32来从连接部16a传播到内窥镜12的光导52,进而通过光导52传播到内镜部42,从而从观察光透镜50照射到观察部位。
处理器装置14对内窥镜12所拍摄的图像实施规定的处理,并显示于显示装置18,处理器装置14具有图像处理部68、条件设定部70和控制部74而构成。
内窥镜12所拍摄的图像(图像数据)从视频连接器36提供到处理器装置14,在处理器装置14(图像处理部68)中实施了各种图像处理后,显示于显示装置18。
另外,处理器装置14以及光源装置16除了图示的部位以外,无疑还可以具有存储装置、电源装置等公知的内窥镜装置的处理器装置以及光源装置所具有的各种部位。
控制部74是进行处理器装置14的控制、以及内窥镜装置10的整体的控制的部位。
图像处理部68对内窥镜12所拍摄的图像进行与通过输入装置20所输入的指示相应的处理等各种图像处理,从而使其成为显示装置18的显示用的图像(图像数据)。
另外,关于图像处理部68所进行的图像处理没有特别的限定,能利用各种噪声去除、轮廓强调(锐化处理)等公知的图像处理。另外,这些图像处理均可利用由内窥镜装置进行的公知的方法来进行。
条件设定部70对在视频连接器36的图像校正部56所进行的图像校正中使用的校正参数(图像校正条件)的生成、缺陷像素的检测、设定图像处理部68中的图像处理条件等进行设定。
另外,在本发明中,灵敏度不均匀校正以外的图像处理部68中的图像处理条件的设定、图像校正部56中的校正参数的生成、缺陷像素的检测等按照实施的处理,使用公知的方法来进行即可。
另外,在图示例中,在视频连接器36(内窥镜12)上配置图像校正部56的情况下,也可以在视频连接器36(视频连接器36或连接器32等的内窥镜12内部)还设置图像校正部56中的校正参数的生成单元。或者,也可以是,内窥镜12和处理器装置14都不具有图像校正部56中的校正参数的生成单元,而是具有进行图像校正部56中的校正参数的生成的由个人计算机等构成的专用的装置。
如前所述,在条件设定部70具有灵敏度不均匀校正参数生成部72。
灵敏度不均匀校正参数生成部72生成由视频连接器36的图像校正部56的灵敏度不均匀校正部56a所进行的灵敏度不均匀校正的校正参数。
在此,在本发明的内窥镜装置10中,灵敏度不均匀校正并不是利用按CCD传感器48((固体)摄像元件)的每个像素而生成的1个灵敏度不均匀校正参数来进行,而是按每个像素,按照图像的照度(CCD传感器所接受的光量(输出强度/图像浓度)),使用分别与高照度区域、中照度区域以及低照度区域对应而生成的灵敏度不均匀校正参数,来进行灵敏度不均匀校正。
以下,说明条件设定部70以及灵敏度不均匀校正参数生成部72的作用,由此更详细地说明本发明的内窥镜装置10。
在生成灵敏度不均匀校正参数时(进行内窥镜的校准时),首先,创建用于生成灵敏度不均匀校正参数(或进一步生成除此之外的校正的校正参数)的校正用图像。
图4示出校正用图像的创建方法的一例的流程图。
在通过输入装置20等而作出灵敏度不均匀校正的校正参数的生成指示(进行内窥镜12的校准的指示)后,控制单元74在显示装置18上显示用于创建校正用图像的拍摄的意思的指示。
作为校正用图像的一例,通过由内窥镜12拍摄白色的被摄体等均一浓度的被摄体等来创建。或者可以不使用专用的均一浓度的被摄体,而使用在内窥镜12的观察中拍摄的图像(通常图像)来创建校正用图像。
以下所示的校正用图像的创建方法特别在使用通常图像来创建校正用图像时是特别适合的方法。因此,在拍摄均一浓度的被摄体等来创建校正用图像的情况下,也可以合理利用单纯地将多张拍摄图像的平均图像作为校正用图像的方法。
为了创建校正用图像,将拍摄的图像提供给条件设定部70,进行后述的处理。另外,此时,经视频连接器36的信号处理部54处理过的图像(图像数据)在图像校正部56不进行任何的处理,而将处于仅由信号处理单元50处理过的状态的图像提供给处理器装置14的条件设定部70。
另外,也可以在用于生成灵敏度不均匀校正的校正参数的拍摄前,或之后,为了生成偏移校正(暗场校正)用的校正参数,在对内镜部42完全遮光的状态下来进行拍摄,并将该图像提供给条件设定部70,从而生成偏移校正参数(offset)。偏移校正参数的生成如前所述,使用公知的方法即可。
生成的偏移校正参数被提供给视频连接器36的存储器58,存储于规定的区域。
在此,校正用图像可以根据1个图像(1帧)来创建,但优选根据适宜设定的规定张数(规定帧数)的图像来创建。
特别是为了防止在校正用图像中取入被摄体的构造,获得适当反映了内窥镜12所具有的灵敏度不均匀(偏差)的图像,优选从连续的图像中间除规定数量来选择图像,根据选择的规定张数的图像来创建校正图像。另外,为了更适宜地排除被摄体的构造的影响,也可以在显示装置18显示对被摄体的不同部位进行拍摄的意思。
例如,若设为间除2个图像,即间除第1张以及第2张的图像而选择第3张的图像,间除第4张以及第5张的图像而选择第6张的图像,下面同样地选择第9张、第12张、第15张……,选择间除2张图像之后的图像。另外,间除的数量也并不限于2,只要适当地设定即可,另外,尽管可以是间除0(全部图像选择),但优选至少间除1张。
接下来,条件设定部70检测已选择的图像的亮度等级(光量等级),来确认是否以规定的亮度进行了拍摄(NG(失败)/OK(成功))。另外,该亮度的确认如后所述,在高照度、中照度以及低照度的各校正用图像中不同。
作为亮度等级的一例,将图像进行3×3的9分割,算出中央区域的平均亮度(平均信号强度/平均浓度),在该平均亮度处于规定的范围内的情况下设为OK,在处于规定范围外的情况下设为NG,在NG的情况下,不将该图像用在校正用图像的创建中。
另外,在选择的图像为NG的情况下,可以选择下一图像,或者不进行变更而反复进行间除/选择。
例如,以上述间除2张为例,在选择的第6张图像为NG的情况下,选择第7张,之后,同样地进行每2张一组的间除来进行选择(即选择第10张、第13张……),或者也可以不变更选择的图像而与刚才同样地选择第9张、第12张……。
关于这点,在下一图像移动量的检测中也是同样。
在选择的图像的亮度等级为适当的情况下,接下来检测图像移动量。
所谓图像移动量即是图像的变化量。在图示例中,选择在一定程度上不同的图像(有变化的图像)来创建校正用图像,由此与前面的间除同样,防止在校正用图像中取入被摄体的构造,创建适当反映了灵敏度不均匀等的校正用图像。
图像移动量例如取选择的图像和判定图像之差的绝对值,在该差超过了规定的阈值T的情况下设为OK,在为阈值T以下的情况下设为NG。
即若为|(选择图像)-(判定图像)|>T,则设为OK,
若为|(选择图像)-(判定图像)|<T,则设为NG,在NG的情况下,不将该图像用于校正用图像的创建中。
另外,作为判定图像的一例,例示了选择图像的前一个(1帧前)图像等。另外,图像的比较以平均亮度、全像素值的平均等来进行即可。
在图像移动量为适当的情况下,将该图像作为用于创建校正用图像的图像而取入,以下,直到取入的图像的数量成为规定的张数为止,反复上述操作。
取入规定张数的图像后,条件设定部70接下来创建取入的图像的加法平均图像,并将其作为校正用图像。另外,用于创建校正用图像的图像的取入张数没有特别的限定,但优选100~10000程度。另外,在以上的例子中,尽管判定亮度等级和图像移动量这两者来取入图像,但本发明并不限于此,也可以进行仅其中任一者的判定,或者两者的判定都不进行。
在此,在本发明的内窥镜装置10中,对这样的校正用图像创建高照度的校正用图像、中照度的校正用图像以及低照度的校正用图像这三种。
所谓高照度的校正用图像是向CCD传感器48入射高照度的光(高光量的光)而创建的校正用图像。即,此时,来自CCD传感器48的各像素的输出信号变大(变强),作为图像浓度则成为低浓度。
所谓中照度(中间照度)的校正用图像是向CCD传感器48入射中间程度的照度的光(中光量的光)而创建的校正用图像。即,此时,来自CCD传感器48的各像素的输出信号成为动态范围的中央区域,作为图像浓度则成为中等程度的浓度。
所谓低照度的校正用图像是向CCD传感器48入射低照度的光(低光量的光)而创建的校正用图像。即,此时,来自CCD传感器48的各像素的输出信号变小,作为图像浓度则成为高浓度。
对于高照度、中照度以及低照度的校正用图像的创建方法没有特别的限定。
作为一例,例示了通过调整在CCD传感器48(摄像元件)的曝光时间(电子快门速度),来创建高照度、中照度以及低照度的校正用图像的方法。
作为其它的方法,例示了通过调整从光源装置16照射的观察光的强度,来创建高照度、中照度以及低照度的校正用图像的方法。
作为再其它的方法,例示了如下方法:为了创建校正用图像,通过使用具有3种不同浓度的均一浓度图像(也可以是浓度不同的3个被摄体)的被摄体作为由内窥镜12拍摄图像的被摄体,来创建高照度、中照度以及低照度的校正用图像的方法。
条件设定部70在创建高照度、中照度以及低照度的校正用图像后,将这些校正用图像依次提供给灵敏度不均匀校正参数生成部72。
灵敏度不均匀校正参数生成部72使用高照度的校正用图像,与CCD传感器48的各像素对应,生成用于进行高照度区域的图像的灵敏度不均匀校正的灵敏度不均匀校正参数H。所谓高光量区域的图像,如前所述,是CCD传感器48的像素所接受的光量高的区域,即,是像素输出强度高的区域(低浓度区域)。
另外,灵敏度不均匀校正参数生成部72使用中照度的校正用图像,与CCD传感器48的各像素对应,生成用于进行中照度区域的图像的灵敏度不均匀校正的灵敏度不均匀校正参数M。所谓中光量区域的图像,如前所述,是CCD传感器48的像素所接受的光量为中等程度的区域,即,是像素的输出强度为中等强度的区域(中浓度区域)。
进而,灵敏度不均匀校正参数生成部72使用低照度的校正用图像,与CCD传感器48的各像素对应,生成用于进行低照度区域的图像的灵敏度不均匀校正的灵敏度不均匀校正参数L。所谓低光量区域的图像,如前所述,是CCD传感器48的像素所接受的光量低的区域,即,是像素输出强度低的区域(高浓度区域)。
灵敏度不均匀校正参数生成部72所生成的灵敏度不均匀校正参数H、灵敏度不均匀校正参数M以及灵敏度不均匀校正参数L被提供给内窥镜12的视频连接器36的存储器58,并分别存储于规定的区域。
在观察时(诊断时),视频连接器36的图像校正部56按照所拍摄的图像的照度,从存储器58中读出对应的照度区域的灵敏度不均匀校正参数,来进行灵敏度不均匀校正。
本发明的内窥镜装置10通过具有这样的构成,即使在CCD传感器48的输出强度相对于光量并非直线状的情况下,也能与全部的光量区域对应来进行适当的灵敏度不均匀校正。
现有的灵敏度不均匀校正如图5(A)示意所示那样,使用1个灵敏度不均匀校正参数,对CCD传感器等摄像元件的各个像素(像素a~像素c)进行校正,由此输出在全部像素没有灵敏度不均匀(灵敏度偏差)的图像。
在这样的灵敏度不均匀校正方法中,在CCD传感器48的输出强度相对于光量为直线状(线性)的情况下没有问题,能进行适当的灵敏度不均匀校正。但是,在CCD传感器48的输出强度相对于光量并非直线状的情况下,不能根据图像的照度来进行适当的校正,反之,有时还会出现由于校正而导致图像的不均匀(偏差)变大的情况。
与此相对,在本发明的内窥镜装置10中,如图5(B)示意所示那样,分别与高照度区域(区域H)、中照度区域(区域M)以及低照度区域(区域L)对应而具有灵敏度不均匀校正参数,按照CCD传感器48所接受的光量(照度),使用对应的照度区域的灵敏度不均匀校正参数,来进行灵敏度不均匀校正。
因此,根据本发明,即使在CCD传感器48((固体)摄像元件)的输出特性并非直线状的情况下,也能对应各照度区域来精度良好地进行灵敏度不均匀校正,能稳定地输出使适当的诊断成为可能的图像。另外,即使在CCD传感器48的直线性较差的情况下,也能适当地改善动态范围,以良好的S/N比来使用CCD传感器48。
在本发明中,对于高照度区域、中照度区域以及低照度区域没有特别的限定,按照CCD传感器48((固体)摄像元件)的输出特性等适宜地进行设定即可。
作为一例,分别例示了高照度区域为超过CCD传感器48的饱和输出等级的信号强度的80%的区域,中照度区域为CCD传感器48的饱和输出等级的信号强度的80%以下、且超过CCD传感器48的饱和输出等级的信号强度的20%的区域,低照度区域为CCD传感器48的饱和输出等级的信号强度的20%以下的区域。
按照在创建校正用图像时入射到CCD传感器48的光成为各照度区域的中间程度(优选为中央饱和输出等级的±5%的范围)的照度(光量)的方式,来调整/设定前述的曝光时间、观察光强度、图像浓度等,由此来创建所述高照度、中照度以及低照度的校正用图像即可。
另外,在本发明中,并不限于将照度区域分为高照度区域、中照度区域以及低照度区域这3个区域。
例如,也可以将照度区域分为低照度区域和高照度区域,或者也可以分为4个以上的照度区域,具有各自的灵敏度不均匀校正参数。
另外,对于使用了校正用图像的灵敏度不均匀校正参数的生成方法没有特别的限定,能利用可在内窥镜装置利用的各种公知的灵敏度不均匀校正参数的生成方法。
作为一例,在高照度、中照度以及低照度的各校正用图像中,算出全部的像素(优选除了缺陷像素以外的全部像素)的平均值。接下来,例示了如下方法:针对全部的像素,通过与校正用图像的像素值相乘,算出各像素的像素值成为所述平均值的灵敏度不均匀校正参数。或者,不是平均值,而是按照匹配全部像素中的最高值、最低值的方式来算出灵敏度不均匀校正参数。
另外,在本发明的内窥镜装置10中,也可以在创建校正用图像后,在灵敏度不均匀校正参数生成部72的灵敏度不均匀校正用的参数的生成前,进行缺陷像素的检测。
缺陷像素的检测方法能利用各种公知的方法。作为一例,算出全部像素的平均值,并将关注像素(判定是否为缺陷像素的像素)的像素值除以算出的平均值,来检测出在所得到的值处于规定的范围内的像素为适当的像素,而处于规定的范围外的像素为缺陷像素。
在如此检测出缺陷像素之后,将该信息(位置信息)提供给视频连接器36的存储器58并存储。图像校正部56将该缺陷像素的信息作为校正参数来进行缺陷像素校正。
另外,如前所述,缺陷像素校正能用后述那样的使用周边像素的补足等公知的方法来进行。
如此,在灵敏度不均匀校正参数生成部72生成灵敏度不均匀校正参数后,从连接部14a向内窥镜12的视频连接器36提供生成的灵敏度不均匀校正参数。
将提供给视频连接器36的各灵敏度不均匀校正参数存储于存储器58的规定区域。即如图2(B)所示,分别将与高照度区域对应的灵敏度不均匀校正参数H存储于存储器58的区域60H,与中照度区域对应的灵敏度不均匀校正参数M存储于存储器58的区域60M,与低照度区域对应的灵敏度不均匀校正参数L存储于存储器58的区域60L。
在进行内窥镜12的拍摄(观察)时,通过来自光源装置16的观察光的照射而拍摄的CCD传感器48的输出信号首先在信号处理部54被实施了放大、A/D变换等的规定的信号处理之后,在图像校正部56进行偏移校正、白平衡调整等规定的图像校正。
在此,图像校正部56的灵敏度不均匀校正部56a按照拍摄的图像的照度,对每个像素,使用对应的照度区域的灵敏度不均匀校正参数来进行灵敏度不均匀校正。即,在校正的图像的照度区域是高照度区域的情况下,从存储器58的区域60H读出对应的灵敏度不均匀校正参数H来对每个像素进行灵敏度不均匀校正。在校正的图像的照度区域是中照度区域的情况下,从存储器58的区域60M读出对应的灵敏度不均匀校正参数M来对每个像素进行灵敏度不均匀校正。在校正的图像的照度区域是低照度区域的情况下,从存储器58的区域60L读出对应的灵敏度不均匀校正参数L来对每个像素进行灵敏度不均匀校正。
作为灵敏度不均匀校正的一例,通过对各像素的图像(图像数据)乘上对应的灵敏度不均匀校正参数来进行。优选图像校正部56考虑CCD传感器的偏移,设灵敏度不均匀校正前的图像数据为G,灵敏度不均匀校正参数为P,灵敏度不均匀校正后的图像数据为G′,使用暗场校正参数(offset),通过下式来进行灵敏度不均匀校正。
G′=(G-offset)P+offset
经图像校正部56校正后的图像从连接部16a提供给处理器装置14,并在图像处理部68实施规定的图像处理后显示于显示装置18。
在此,该图像由于是进行了基于与照度区域相应的灵敏度校正参数的灵敏度校正的图像,因此是不依赖于CCD传感器48的输出特性,从低照度到高照度(从高浓度到低浓度)都高精度地进行了灵敏度不均匀校正的高质量的图像。
以上说明了本发明的内窥镜装置,但本发明并不限于上述实施例,能在不脱离本发明的主旨的范围内进行各种的改良和变形,这是毫无疑问的。
产业上的可利用性
能在利用内窥镜的医疗现场等合理利用。

Claims (7)

1.一种内窥镜装置,通过摄像元件来拍摄图像,其特征在于,具有:
存储单元,其存储灵敏度不均匀校正参数;和
灵敏度不均匀校正单元,其使用存储于所述存储单元的灵敏度不均匀校正参数来进行所述摄像元件的灵敏度不均匀校正,
且,所述存储单元按照不同的多个照度区域的每一个来存储所述灵敏度不均匀校正参数,
另外,所述灵敏度不均匀校正单元使用与校正的图像的照度相应的所述灵敏度不均匀校正参数来进行所述灵敏度不均匀校正,
所述灵敏度不均匀校正参数按照使用所述摄像元件所拍摄的图像来创建校正用图像,并校正该校正用图像的不均匀的方式来生成,
创建与各照度区域相应的图像作为所述校正用图像,并使用各图像来生成分别与所述各照度区域的每一个相应的灵敏度不均匀校正参数,
为了创建所述校正用图像,对摄像元件所拍摄的图像每间除规定数量来进行选择,并使用选择的规定数量的图像来创建所述校正用图像。
2.根据权利要求1所述的内窥镜装置,其特征在于,
在用于创建所述校正用图像的拍摄中,通过变更观察光的强度来创建与所述各照度区域相应的图像。
3.根据权利要求1所述的内窥镜装置,其特征在于,
在用于创建所述校正用图像的拍摄中,通过变更摄像元件的曝光时间来创建与所述各照度区域相应的图像。
4.根据权利要求1所述的内窥镜装置,其特征在于,
为了创建所述校正用图像,通过拍摄不同浓度的图像,来创建与所述各照度区域相应的图像。
5.根据权利要求1所述的内窥镜装置,其特征在于,
所述内窥镜装置具有特殊光观察的功能。
6.根据权利要求1所述的内窥镜装置,其特征在于,
在选择的所述图像的规定区域的平均图像数据超出规定范围的情况下,不在所述校正用图像的创建中使用该图像。
7.根据权利要求1或6所述的内窥镜装置,其特征在于,
在选择的图像相对于规定的判定图像未变动规定阈值以上的情况下,不在校正用图像的创建中使用该图像。
CN201110307926.1A 2010-10-18 2011-10-12 内窥镜装置 Expired - Fee Related CN102450997B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010233405A JP5244164B2 (ja) 2010-10-18 2010-10-18 内視鏡装置
JP2010-233405 2010-10-18

Publications (2)

Publication Number Publication Date
CN102450997A CN102450997A (zh) 2012-05-16
CN102450997B true CN102450997B (zh) 2015-05-27

Family

ID=45933829

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110307926.1A Expired - Fee Related CN102450997B (zh) 2010-10-18 2011-10-12 内窥镜装置

Country Status (3)

Country Link
US (1) US20120092471A1 (zh)
JP (1) JP5244164B2 (zh)
CN (1) CN102450997B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015151663A1 (ja) * 2014-03-31 2015-10-08 富士フイルム株式会社 医用画像処理装置及びその作動方法並びに内視鏡システム
JP6744713B2 (ja) * 2015-12-17 2020-08-19 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び内視鏡システムの作動方法
JP6744712B2 (ja) 2015-12-17 2020-08-19 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び内視鏡システムの作動方法
JP6629639B2 (ja) * 2016-03-07 2020-01-15 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
JP6561000B2 (ja) * 2016-03-09 2019-08-14 富士フイルム株式会社 内視鏡システム及びその作動方法
CN109068121B (zh) * 2018-09-04 2019-07-23 珠海康弘医疗科技有限公司 三维成像系统、三维成像系统校准方法及装置
JP2022186391A (ja) * 2021-06-04 2022-12-15 株式会社Sumco ウェーハの外観検査装置及びウェーハの外観検査方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1415267A (zh) * 2001-10-18 2003-05-07 韩国电工技术研究院 荧光内窥镜装置和使用该装置在身体内对组织成像的方法
CN1572229A (zh) * 2003-06-18 2005-02-02 奥林巴斯株式会社 内窥镜装置
CN101170939A (zh) * 2005-05-23 2008-04-30 奥林巴斯医疗株式会社 图像处理装置、内窥镜装置以及色彩平衡调节方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06103925B2 (ja) * 1989-10-30 1994-12-14 大日本スクリーン製造株式会社 イメージセンサの感度補正方法
JP3019010B2 (ja) * 1996-11-13 2000-03-13 日本電気株式会社 撮像装置
US7453490B2 (en) * 1997-01-31 2008-11-18 Gyrus Acmi, Inc. Correction of image signals characteristic of non-uniform images in an endoscopic imaging system
JP2000231062A (ja) * 1999-02-09 2000-08-22 Olympus Optical Co Ltd 内視鏡装置
JP2001268441A (ja) * 2000-03-15 2001-09-28 Hitachi Ltd 固体撮像装置およびこれを用いた通信装置
AUPR585901A0 (en) * 2001-06-21 2001-07-12 Dynamic Digital Depth Resources Pty Ltd Image processing system
JP4360777B2 (ja) * 2002-05-31 2009-11-11 Hoya株式会社 電子内視鏡装置の増幅度自動調整装置
JP4410989B2 (ja) * 2002-12-12 2010-02-10 キヤノン株式会社 画像処理装置及び画像復号処理装置
JP4388327B2 (ja) * 2003-08-25 2009-12-24 オリンパス株式会社 顕微鏡像撮像装置及び顕微鏡像撮像方法
JP4647346B2 (ja) * 2005-03-04 2011-03-09 富士フイルム株式会社 内視鏡装置
US20100231748A1 (en) * 2006-05-09 2010-09-16 Mitsuhiko Takeda Imaging device
JP5106870B2 (ja) * 2006-06-14 2012-12-26 株式会社東芝 固体撮像素子
JP2008068021A (ja) * 2006-09-15 2008-03-27 Olympus Corp 電子内視鏡装置
KR100818987B1 (ko) * 2006-09-19 2008-04-04 삼성전자주식회사 이미지 촬상 장치 및 상기 이미지 촬상 장치의 동작 방법
US8405711B2 (en) * 2007-01-09 2013-03-26 Capso Vision, Inc. Methods to compensate manufacturing variations and design imperfections in a capsule camera
DE102007026595A1 (de) * 2007-06-08 2008-12-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur Kompensation von Farbverschiebungen in faseroptischen Abbildungssystemen
JP2009182405A (ja) * 2008-01-29 2009-08-13 Fujifilm Corp Ccd型固体撮像素子及びその出力信号補正方法
JP5296396B2 (ja) * 2008-03-05 2013-09-25 オリンパスメディカルシステムズ株式会社 生体内画像取得装置、生体内画像受信装置、生体内画像表示装置およびノイズ除去方法
JP5244455B2 (ja) * 2008-05-21 2013-07-24 Hoya株式会社 内視鏡プロセッサおよび内視鏡システム
JP5010533B2 (ja) * 2008-05-21 2012-08-29 株式会社リコー 撮像装置
CN102170817B (zh) * 2008-10-17 2014-03-19 奥林巴斯医疗株式会社 内窥镜系统和内窥镜图像处理装置
JP4589463B2 (ja) * 2008-10-17 2010-12-01 オリンパス株式会社 撮像装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1415267A (zh) * 2001-10-18 2003-05-07 韩国电工技术研究院 荧光内窥镜装置和使用该装置在身体内对组织成像的方法
CN1572229A (zh) * 2003-06-18 2005-02-02 奥林巴斯株式会社 内窥镜装置
CN101170939A (zh) * 2005-05-23 2008-04-30 奥林巴斯医疗株式会社 图像处理装置、内窥镜装置以及色彩平衡调节方法

Also Published As

Publication number Publication date
US20120092471A1 (en) 2012-04-19
JP5244164B2 (ja) 2013-07-24
CN102450997A (zh) 2012-05-16
JP2012085720A (ja) 2012-05-10

Similar Documents

Publication Publication Date Title
JP5570373B2 (ja) 内視鏡システム
CN102450997B (zh) 内窥镜装置
US7713192B2 (en) Endoscope system
US9538108B2 (en) Endoscope system and pixel correction method
US9137453B2 (en) Control apparatus and imaging system
US20090213211A1 (en) Method and Device for Reducing the Fixed Pattern Noise of a Digital Image
US10523911B2 (en) Image pickup system
WO2014002732A1 (ja) 撮像装置および撮像システム
US20120092473A1 (en) Endoscopic device
CN102970914A (zh) 内窥镜系统
JP2013208284A (ja) 撮像画像のスジ状ノイズ補正方法及び撮影装置と電子内視鏡装置
JP5847017B2 (ja) 電子内視鏡装置及びその作動方法
WO2016104386A1 (ja) 調光装置、撮像システム、調光装置の作動方法および調光装置の作動プログラム
JP2007215907A (ja) 内視鏡プロセッサ、内視鏡システム、及びブラックバランス調整プログラム
JP4606838B2 (ja) 電子内視鏡装置
US11399700B2 (en) Processing device, endoscope, endoscope system, image processing method, and computer-readable recording medium for correcting a defective pixel
US11122225B2 (en) Medical image processing apparatus and medical observation system
US20220225857A1 (en) Medical control device and medical observation system
JP2012075516A (ja) 内視鏡システムおよび内視鏡の較正方法
JP2007117153A (ja) 電子内視鏡システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150527

Termination date: 20211012

CF01 Termination of patent right due to non-payment of annual fee