CN102186400B - 摄像装置以及摄像系统 - Google Patents
摄像装置以及摄像系统 Download PDFInfo
- Publication number
- CN102186400B CN102186400B CN2009801414069A CN200980141406A CN102186400B CN 102186400 B CN102186400 B CN 102186400B CN 2009801414069 A CN2009801414069 A CN 2009801414069A CN 200980141406 A CN200980141406 A CN 200980141406A CN 102186400 B CN102186400 B CN 102186400B
- Authority
- CN
- China
- Prior art keywords
- image
- mentioned
- light source
- brightness
- zone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title abstract description 18
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 238000012937 correction Methods 0.000 abstract description 42
- 230000001788 irregular Effects 0.000 description 43
- 239000002775 capsule Substances 0.000 description 32
- 238000001727 in vivo Methods 0.000 description 16
- 238000001228 spectrum Methods 0.000 description 16
- 230000003287 optical effect Effects 0.000 description 14
- 210000004204 blood vessel Anatomy 0.000 description 10
- 238000006243 chemical reaction Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 239000008280 blood Substances 0.000 description 9
- 210000004369 blood Anatomy 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000001915 proofreading effect Effects 0.000 description 8
- 230000008033 biological extinction Effects 0.000 description 5
- 210000004877 mucosa Anatomy 0.000 description 5
- 210000001835 viscera Anatomy 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 239000003086 colorant Substances 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 239000000758 substrate Substances 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000003760 hair shine Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 229920006395 saturated elastomer Polymers 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 235000013351 cheese Nutrition 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 230000000968 intestinal effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 230000009747 swallowing Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/07—Endoradiosondes
- A61B5/073—Intestinal transmitters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0607—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for annular illumination
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0684—Endoscope light sources using light emitting diodes [LED]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1075—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions by non-invasive methods, e.g. for determining thickness of tissue layer
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Optics & Photonics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Endoscopes (AREA)
- Color Television Image Signal Generators (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明提供一种摄像装置,该摄像装置具备:第一光源,其具有第一频率特性;第二光源,其具有与上述第一频率特性不同的第二频率特性,被配置在与上述第一光源不同的位置上;摄像部,其接收从上述第一光源和上述第二光源照射的被摄体的反射光,生成对象物的图像;以及图像校正部(55),其使用保存有校正数据的校正表(58)对上述摄像部所拍摄的上述图像的颜色不均匀进行校正,该校正数据基于上述摄像部预先拍摄的利用上述第一光源得到的第一图像和利用上述第二光源得到的第二图像,使上述第一图像和上述第二图像的各区域的亮度比固定。
Description
技术领域
本发明涉及一种能够对基于特定的颜色成分生成的光谱图像进行摄像并对该光谱图像的颜色不均匀进行校正的摄像装置以及摄像系统。
背景技术
近年来,在内窥镜领域中,提出了一种设有摄像功能和无线通信功能的胶囊型被检体内导入装置(例如胶囊型内窥镜),并开发出了一种使用该胶囊型内窥镜获取被检体内的图像的被检体内导入系统。胶囊型内窥镜以如下的方式发挥功能:在为了对被检体内进行观察(检查)而例如从被检体的口中吞服该胶囊型内窥镜之后,直到自然排出为止的期间,该胶囊型内窥镜在体腔内例如胃、小肠等脏器的内部随着其蠕动运动而进行移动,并且在移动过程中,以例如0.5秒为间隔拍摄被检体内的图像。
在胶囊型内窥镜在被检体内移动的期间,由该胶囊型内窥镜拍摄的图像通过配置在被检体的身体表面上的天线被外部的图像显示装置所接收。该图像显示装置具有与胶囊型内窥镜进行无线通信的功能和图像的存储功能,将从被检体内的胶囊型内窥镜接收到的图像依次保存到存储器中。医生或者护士将存储在上述图像显示装置中的图像、即被检体的消化管道内的图像显示到显示器上,从而能够对被检体内进行观察(检查)并进行诊断。
在此,在专利文献1中记载了如下一种能够咽下的生物体内摄像胶囊,该生物体内摄像胶囊能够根据由生物体内摄像装置生成并再次反射到生物体内摄像装置的照明的量使该照明的强度和/或持续时间发生变化。
专利文献1:日本专利第3782093号公报
发明内容
发明要解决的问题
另外,在胶囊型内窥镜等中,存在想要拍摄使用蓝色和绿色的特定颜色成分生成体腔内壁的鲜明的血管图像等的光谱图像的情况,在这种情况下,将在蓝色波长域具有峰值的发光元件和在绿色波长域具有峰值的发光元件分别配置在不同的位置上来对被摄体进行照明,并利用一个摄像元件获取光谱图像。但是,当将在不同的波长域具有峰值的不同的光源配置在不同的位置上时,存在如下问题:所获取的图像中会产生颜色不均匀(包括局部的白平衡的偏差、亮度不均匀)。
本发明是鉴于上述问题而完成的,其目的在于提供一种即使在将在不同的波长域发光的不同的光源配置在不同的位置上来得到光谱图像的情况下也能够去除颜色不均匀的摄像装置以及摄像系统。
用于解决问题的方案
为了解决上述问题并达到目的,本发明所涉及的摄像装置的特征在于,具有:第一光源,其具有第一频率特性;第二光源,其具有与上述第一频率特性不同的第二频率特性,被配置在与上述第一光源不同的位置处;摄像部,其接收来自被上述第一光源和上述第二光源照射的被摄体的反射光,来生成对象物的图像;以及图像校正部,其使用校正数据对上述摄像部所拍摄的上述图像的颜色不均匀进行校正,该校正数据基于上述摄像部预先拍摄的利用上述第一光源得到的第一图像和利用上述第二光源得到的第二图像,使上述第一图像和上述第二图像的各区域的亮度比固定。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,上述图像校正部具有校正表,该校正表针对上述图像的每个区域将各颜色元素数据的组合数据值分别与预先进行过颜色不均匀校正的一个以上的颜色元素数据进行对应。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,还具备:颜色空间转换部,其将上述摄像部输出的颜色空间的各颜色元素数据转换为不同的校正颜色空间的颜色元素数据;以及颜色空间逆转换部,其将上述校正颜色空间的颜色元素数据逆转换为上述颜色空间的颜色元素数据;其中,上述图像校正部对由上述颜色空间转换部转换后的校正颜色空间的各颜色元素数据进行校正,上述颜色空间逆转换部对由上述图像校正部校正后的各颜色元素数据进行逆转换。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,上述颜色空间是以红色、绿色、蓝色的三基色为颜色元素的空间,上述校正颜色空间是以色调、饱和度、亮度为颜色元素的空间。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,上述第一光源具有以蓝色为中心的发光光谱,上述第二光源具有以绿色为中心的发光光谱。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,还具有使上述被摄体的图像在上述摄像部的摄像面上成像的光学透镜,在能够由上述光学透镜在上述摄像面上进行成像的区域内,设定在上述第一频率特性和上述第二频率特性之间均匀的校正用被摄体面,上述校正数据是基于拍摄上述校正用被摄体面得到的图像而生成的。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,上述校正用被摄体面是与上述光学透镜的光轴垂直的平面、相对于该光轴对称的平面、相对于该光轴对称的曲面、或者基于该光学透镜的空间频率特性设定的面。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,上述图像校正部对以下区域进行检测:高亮度区域,其在上述第一图像和上述第二图像的各区域内具有规定值以上的亮度值;以及伪色区域,其在上述第一图像和上述第二图像的各区域内某一方的图像的亮度值为上述规定值以上而另一方的图像的亮度值小于上述规定值,其中,该图像校正部将上述高亮度区域和上述伪色区域分别变更为表示上述高亮度区域和上述伪色区域的颜色元素数据或显示方式,以代替上述颜色不均匀的校正。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,对上述第一光源和上述第二光源的光源指向性进行设定配置,以使上述摄像部接收光而形成的图像的各区域的亮度变得平坦。
另外,本发明所涉及的摄像装置的特征在于,在上述发明中,上述第一光源和上述第二光源在平板上配置成圆环状,从该平板的一个面照射向垂直的方向扩散的光,并且光的指向性朝向径外方向且设定为较高,上述摄像部以光轴垂直于上述平板的方式配置在上述圆环的圆中心处。
另外,本发明所涉及的摄像系统的特征在于,具备胶囊型内窥镜,该胶囊型内窥镜具有:第一光源,其具有第一频率特性;第二光源,其具有与上述第一频率特性不同的第二频率特性,并配置在与上述第一光源不同的位置处;以及摄像部,其接收来自被上述第一光源和上述第二光源照射的被摄体的反射光,来生成对象物的图像,其中,该胶囊型内窥镜将上述摄像部所拍摄的图像发送到被检体外部。
发明的效果
根据本发明,图像校正部使用校正数据对上述摄像部所拍摄的上述图像的颜色不均匀进行校正,该校正数据基于上述摄像部预先拍摄的利用上述第一光源得到的第一图像和利用上述第二光源得到的第二图像,使上述第一图像和上述第二图像的各区域的亮度比固定,因此即使在将在不同的波长域发光的不同的第一光源和第二光源配置在不同的位置上来得到光谱图像的情况下,也能够去除颜色不均匀。
附图说明
图1是表示本发明的实施方式1中作为的摄像系统的胶囊型内窥镜系统的整体概要结构的图。
图2是本发明的实施方式1的胶囊型内窥镜的摄像部和照明部附近的平面图。
图3是本发明的实施方式1的胶囊型内窥镜的摄像部和照明部附近的截面图。
图4是表示本发明的实施方式1中安装于胶囊型内窥镜的摄像元件的像素阵列的一例的图。
图5是表示本发明的实施方式1中发光元件的放射亮度特性和摄像元件的光谱灵敏度特性的图。
图6是表示血液的吸光特性水平的波长依赖性的图。
图7是表示对于体腔内壁和血管的光的进入与反射之间的关系的示意图。
图8是表示本发明的实施方式1中安装在接收装置上的图像处理部的详细结构的框图。
图9是表示颜色不均匀的图像的一例的图。
图10是表示本发明实施方式1中表示饱和度的校正数据的校正量的位置依赖性的图。
图11是表示本发明的实施方式2中高亮度区域和伪色区域的一例的图。
图12是表示本发明的实施方式3中降低由LED的配置导致的颜色不均匀的配光特性的一例的图。
附图标记说明
1:被检体;2:胶囊型内窥镜;3:接收装置;3a~3h:接收天线;4:图像显示装置;10、11:LED;12:透明盖;13:光学透镜;14:摄像元件;15、16:像素;20:圆顶形透明盖;21:胶囊型壳体;23:基板;40:粘膜表层;41:粘膜深部;42:内部组织;43:毛细血管;44:血管;50:图像处理部;51:白平衡调整部;52:同时化处理部;53:RGB/HLS转换部;54:存储部;55:颜色不均匀校正部;56:HLS/RGB转换部;57:后处理部;58:校正表;80:发光指向性;E20:高亮度区域;E21:伪色区域。
具体实施方式
以下参照附图对本发明所涉及的摄像装置以及使用该摄像装置的摄像系统的实施方式进行详细的说明。此外,在以下的实施方式中,列举胶囊型内窥镜系统进行说明,但本发明并不限定于这些实施方式。
(实施方式1)
图1是表示本发明的实施方式1所涉及的胶囊型内窥镜系统的结构的示意图。如图1所示,本实施方式1所涉及的内窥镜系统具有:胶囊型内窥镜2,其拍摄被检体1的体内图像;接收装置3,其接收由胶囊型内窥镜2无线发送的图像信号;图像显示装置4,其显示由胶囊型内窥镜2所拍摄的体内图像;以及便携式记录介质5,其用于进行接收装置3与图像显示装置4之间的数据交换。
胶囊型内窥镜2在胶囊型的壳体内部具有摄像功能和无线通信功能。在通过口服摄取等将胶囊型内窥镜2导入到被检体1的脏器内部之后,该胶囊型内窥镜2通过蠕动运动等在被检体1的脏器内部移动,并以规定的间隔(例如以0.5秒为间隔)依次拍摄被检体1的体内图像。具体地说,胶囊型内窥镜2在脏器内部对被摄体分别照射来自例如配置在不同的位置处的蓝色光发光元件和绿色光发光元件的蓝色光和绿色光,来拍摄被该照明光照亮的被摄体的图像、具体地说是作为血管图像的光谱图像等的体内图像。胶囊型内窥镜2将这样拍摄到的被检体1的体内图像的图像信号无线发送到外部的接收装置3。从胶囊型内窥镜2被导入到被检体1的脏器内部直到被排出到被检体1的外部的期间内,该胶囊型内窥镜2依次重复上述体内图像的摄像动作和无线发送动作。
接收装置3具有分散配置在例如被检体1的身体表面上的多个接收天线3a~3h,通过多个接收天线3a~3h中的至少一个天线接收来自被检体1内部的胶囊型内窥镜2的无线信号。接收装置3从来自胶囊型内窥镜2的无线信号中提取出图像信号,获取包含在该提取出的图像信号中的体内图像的图像数据。
另外,接收装置3具有图像处理部,该图像处理部进行包括颜色不均匀校正处理在内的图像处理,上述颜色不均匀校正处理是指基于所获取的图像数据来进行图像的颜色不均匀校正的处理。接收装置3将经过图像处理的体内图像群存储到预先插入的记录介质5中。另外,接收装置3使摄像时刻或接收时刻等的时间数据与体内图像群的各图像分别对应。
此外,接收装置3的接收天线3a~3h既可以如图1所示那样配置在被检体1的身体表面上,也可以配置在被检体1所穿着的夹克上。另外,接收装置3的接收天线的数量只要大于等于一个即可,并没有特别限定为八个。
图像显示装置4具有通过记录介质5读取被检体1的体内图像群等各种数据、并对读取到的体内图像群等的各种数据进行显示的工作站的结构。具体地说,图像显示装置4通过被插入从接收装置3取下的记录介质5并读取该记录介质5的保存数据,来获取被检体1的体内图像群等各种数据。图像显示装置4具有将获取的体内图像显示到显示器上的功能。通过由该图像显示装置4进行的图像显示进行诊断等。
记录介质5是用于进行上述接收装置3和图像显示装置4之间的数据交换的便携式记录介质。记录介质5对于接收装置3和图像显示装置4可拆卸,具有在插入到这两者上时能够输出和记录数据的结构。具体地说,记录介质5在被插入到接收装置3时,存储由接收装置3进行图像处理后的体内图像群以及各图像的时间数据等。
胶囊型内窥镜2在胶囊型壳体21内内置有各种功能,其一端被圆顶型透明盖20所覆盖,在该一端侧配置有照明部和摄像部。如图2和图3所示,在圆板状的基板23的圆中央部设置有镜筒24,在该镜筒24内设置有光学透镜13和摄像元件14,它们以胶囊型壳体21的圆筒轴为光轴。在基板23的周缘侧,三个LED10a~10c(10)和三个LED 11a~11c(11)在不同的位置上呈圆环状交替地进行配置,其中,上述三个LED 10a~10c(10)是呈现出在415nm(蓝色)附近具有峰值的波长光谱(图5的曲线Lb)的发光元件,上述三个LED 11a~11c(11)是呈现出在540nm(绿色)附近具有峰值的波长光谱(图5的曲线Lg)的发光元件。在各LED 10、11的上部设有透明的固定部件12。此外,关于LED 11,也可以在LED 10的上部设置荧光部件,该荧光部件被从LED 10发出的415nm的光激发而发出540nm的荧光。
如图4所示,对于摄像元件的多个像素,只配置了图2所示的绿色(G)的像素15和蓝色(B)的像素16。当然,也可使用加入了红色(R)的像素的拜耳阵列等的通常的摄像元件,但不使用该红色(R)的像素。
在此,对使用了415nm的光(蓝色)和540nm的光(绿色)得到的光谱图像进行说明。首先,如图5所示,LED 10、11具有作为曲线Lb、Lg所示的发光光谱的LED放射亮度特性,各像素15、16具有作为曲线LB、LG所示的光接收光谱的摄像元件光谱灵敏度特性。
关于血液吸光特性水平,如图6所示,在415nm(蓝色)和540nm(绿色)处具有峰值,除此以外血液吸光特性水平都较低。而且,如图7所示,在体腔内壁中,在粘膜表层40处存在毛细血管43,并且在粘膜深部41处存在粗血管44。照射到体腔内壁的415nm(蓝色)的光由于波长较短而不能透射到组织内部,由于上述血液的吸光特性而被毛细血管43所吸收。另外,540nm(绿色)的光的波长比蓝色光的波长要长,因此能透射到粘膜深部41,由于上述血液的吸光特性而被粗血管44所吸收。另一方面,红色的光透射到内部组织42,绝大部分作为散射光而被反射。因此,只要仅具有415nm(蓝色)和540nm(绿色)的光接收灵敏度,就能够得到毛细血管43和粗血管44等的血管图像的对比度信息。
因此,通过向被摄体照射具有蓝色波长和绿色波长的光并使用具有蓝色波长和绿色波长的灵敏度特性的摄像元件,能够得到血管的对比度信息,从而能够得到作为血管图像的光谱图像。
但是,当生成将摄像元件14的像素15主要接收到的蓝色的图像和像素16主要接收到的绿色的图像合成而得到的合成图像时,由于各颜色的LED 10、11的配置位置不同,因此会成为产生颜色不均匀的图像。因此,如上所述那样在接收装置3内对光谱图像的颜色不均匀进行校正。
图8是表示安装在接收装置3内的图像处理部50的详细结构的框图。如图8所示,图像处理部50具有:白平衡调整部51,其对将无线发送过来的无线信号转换成基带信号后得到的图像数据进行白平衡调整;同时化处理部52,其对经白平衡调整后的图像数据进行像素间的颜色平衡校正;RGB/HLS转换部53,其将经同时化处理后的图像数据(作为RGB三基色的颜色空间数据的RGB数据)转换为作为色调、亮度、饱和度的颜色空间数据的HLS数据;存储部54,其具有校正表58;颜色不均匀校正部55,其使用校正表58对HLS数据的颜色不均匀进行校正;HLS/RGB转换部56,其将经颜色不均匀校正后的HLS数据逆转换为RGB数据;以及后处理部57,其根据需要对作为逆转换后的RGB数据的图像数据进行γ处理、结构增强处理等后处理并将其输出。
校正表58使校正数据(亮度值Lrev、色调值Hrev、饱和度值Srev)对应到所获取到的1帧的图像数据的每个x、y像素位置来将其保持,其中,该校正数据用于对亮度值L、色调值H、饱和度S的所有组合图像数据进行校正。在图8中,在各x、y像素位置上保持了亮度值L、色调值H、饱和度值S的所有组合图像数据、即组合了256个亮度值L、256个色调值H、256个饱和度值S的256×256×256个图像数据,并保持了256×256×256个校正数据。因此,在像素位置是320个的情况下,图像数据和校正数据的成对数量是256×256×256×320个。从而对所输入的HLS数据内的各x、y像素位置上的所有像素数据分别进行校正。
图9是表示没有进行颜色不均匀校正的图像数据的一例。在图9中,在与LED 10a~10c的配置位置对应的区域E10a~E10c上产生了颜色不均匀,并且在与LED 11a~11c的配置位置对应的区域E11a~E11c上产生了颜色不均匀。因此,校正表58的校正数据会变为对这些颜色不均匀在各x、y像素位置上独立地进行校正的值。而且,该校正表58的校正数据是预先独立地求出的。例如,对直线的轴60上的像素的饱和度值Srev的校正量如图10所示,在两端位置Pa、Pb附近进行大幅校正。根据亮度值L、色调值H、饱和度值S的各值对该饱和度值Srev的校正量进行调整。考虑了该校正量的值变为饱和度值Srev。相同的亮度值L、色调值H、饱和度值S的情况下的亮度值Lrev、色调值Hrev也以同样的方式来决定。该校正数据最终被校正为:蓝色的图像数据的各亮度值和绿色的图像数据的各亮度值之比固定。因此,在本实施方式1中,将RGB颜色空间转换为HLS空间,对各个区域的亮度值进行校正,并且随着该亮度值的变化对色调和饱和度也进行校正。
校正数据是预先求出的,作为获取校正数据的前提,该校正数据要在得到与图9几乎相同的图像的被摄体环境下使用。例如,各LED 10、11被配置成圆环状,因此,关于获取校正数据时的校正用被摄体面,考虑了与光学透镜13的光轴垂直的平面、相对于该光轴对称的平面、相对于该光轴对称的曲面、或者根据该光学透镜的空间频率特性设定的面等。
此外,在上述实施方式1中,将RGB颜色空间转换为HLS颜色空间,对该HLS颜色空间上的图像数据进行颜色不均匀校正,但是由于最终逆转换为RGB颜色空间,因此也可在RGB颜色空间内直接进行颜色不均匀校正。在这种情况下,不需要RGB/HLS转换部53和HLS/RGB转换部56的结构,而且能够省去转换处理时间。
另外,在上述实施方式1中,在HLS颜色空间内对全部颜色元素即亮度、色调、饱和度都进行了校正,但并不限于此,也可仅对一个以上的元素、例如仅对色调或者仅对饱和度进行校正。由此也能够得到对颜色不均匀进行校正的效果。
在本实施方式1中,能够对通过将不同波长域的发光元件配置在不同的位置上而得到的光谱图像进行颜色不均匀校正。
此外,在上述实施方式1中,将图像处理部的颜色不均匀校正部55、校正表58、RGB/HLS转换部53、HLS/RGB转换部56配置在接收装置3一侧,但并不限于此,例如也可配置在图像显示装置4一侧。
(实施方式2)
接着,对本发明的实施方式2进行说明。在发光元件的照射光像镜面一样进行镜面反射的情况下,在该镜面反射区域中亮度饱和,成为高亮度区域。在此,当将具有蓝色波长域和绿色波长域的不同波长域的发光元件配置在不同的位置上时,如图11所示,根据所获取的图像的区域,存在高亮度区域E20和伪色区域E21,该高亮度区域E20的蓝色信号水平和绿色信号水平都饱和,该伪色区域E21分布在该高亮度区域的周围,蓝色信号水平或绿色信号水平中只有某一方是饱和的。在图11中,在伪色区域E21中只有蓝色信号水平变为饱和状态。
因此,在本实施方式2中,颜色不均匀校正部55首先判定是否存在亮度值L超过阀值TH的区域,当存在亮度值L超过阀值TH的区域时,将其设为高亮度区域的候选,基于该候选区域的周边的色调值H等的颜色信息,进一步检测蓝色信号和绿色信号中的某一方未饱和的区域,将该区域判断为伪色区域E21,并将高亮度区域的候选的剩下的区域判断为高亮度区域E20。
在此,如实施方式1那样,当将多个不同的波长域的发光元件配置在多个不同的位置上时,伪色区域E21的颜色也存在多个。因此,为了容易与其它的被摄体图像区域E22相区别,颜色不均匀校正部55将颜色不同的伪色区域E21转换为相同颜色、相同亮度。同样地,为了容易与其它的被摄体图像区域相区别,颜色不均匀校正部55将高亮度区域E20也转换为共同的颜色和亮度。在这种情况下,颜色不均匀校正部55不进行基于实施方式1中示出的校正表58的颜色不均匀校正。
由此,生成易于将高亮度区域E20及伪色区域E21与其它的被摄体图像区域E22相区别的图像。此外,颜色不均匀校正部55对高亮度区域E20和伪色区域E21转换颜色和亮度,这其中也包含黑色显示,但并不限于此,例如也可以使区域进行闪烁显示等。
(实施方式3)
接着,对本发明的实施方式3进行说明。在本实施方式3中,使配置在不同位置上的蓝色波长域和绿色波长域的发光元件的配光特性、即发光的指向特性发生变化来进行配置,尽可能预先不发生颜色不均匀。
如图3所示,在各LED 10、11配置成圆环状时,如图9所示成为在多个区域内颜色不均匀的图像,该图像在外侧区域产生颜色不均匀。这是因为各LED是进行无指向性的发光的,且朝向径外方向的发光的水平较小。因此,通过如图12所示那样配置具有朝向径外方向发出的光的水平变大的发光指向性80的LED,所获取的图像的亮度分布变得平坦,从而能够预先减小颜色不均匀的大小。此外,圆周方向的发光指向性优选预先设为相同。为了消除圆周方向的颜色不均匀分布,需要进行将圆周方向的LED配置变密集的分散配置。在这种情况下,LED在纵长方向上的一端侧具有阳极,在另外一端具有阴极,阳极侧的发光指向性较大,因此仅通过将该阳极侧朝向径外方向配置就能够实现上述配光特性。
在本实施方式3中,使各发光元件的配光特性发生变化来进行配置以能够减轻所获取的图像的颜色不均匀,因此能够预先降低颜色不均匀校正对象的图像本身的颜色不均匀。特别是将LED用作发光元件的情况下,能够简单地减轻颜色不均匀。
此外,对本领域技术人员来说能够容易导出上述各个实施方式的进一步的效果和变形例。因此,本发明的更广泛的方式并不限定于以上表示和记述的特定的详细说明和具有代表性的实施方式。因此,在不脱离附加的权利要求书及其均等物所定义的总的发明概念的精神或范围的前提下,能够进行各种变更。
Claims (1)
1.一种摄像装置,其特征在于,具备:
第一光源,其具有第一频率特性;
第二光源,其具有与上述第一频率特性不同的第二频率特性,被配置在与上述第一光源不同的位置处;
摄像部,其接收来自被上述第一光源和上述第二光源照射的被摄体的反射光,来分别生成对象物的第一图像和第二图像;以及
图像校正部,其对高亮度区域和伪色区域进行检测,上述高亮度区域是上述第一图像和上述第二图像的各区域内具有规定值以上的亮度值的区域,上述伪色区域是上述第一图像和上述第二图像的各区域内某一方图像的亮度值为上述规定值以上而另一方图像的亮度值小于上述规定值的区域,
在检测到上述高亮度区域的情况下,将上述高亮度区域变更为共同的颜色和亮度,在检测到颜色不同的伪色区域的情况下,将上述伪色区域变更为相同颜色、相同亮度。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008-268895 | 2008-10-17 | ||
JP2008268895 | 2008-10-17 | ||
PCT/JP2009/068019 WO2010044483A1 (ja) | 2008-10-17 | 2009-10-19 | 撮像装置および撮像システム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102186400A CN102186400A (zh) | 2011-09-14 |
CN102186400B true CN102186400B (zh) | 2013-09-04 |
Family
ID=42106643
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009801414069A Active CN102186400B (zh) | 2008-10-17 | 2009-10-19 | 摄像装置以及摄像系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8018485B2 (zh) |
EP (1) | EP2338404B1 (zh) |
JP (1) | JP4589463B2 (zh) |
CN (1) | CN102186400B (zh) |
WO (1) | WO2010044483A1 (zh) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102869294B (zh) | 2010-04-28 | 2015-09-30 | 奥林巴斯株式会社 | 图像处理装置和荧光观察装置 |
JP5570373B2 (ja) * | 2010-09-29 | 2014-08-13 | 富士フイルム株式会社 | 内視鏡システム |
JP5244164B2 (ja) * | 2010-10-18 | 2013-07-24 | 富士フイルム株式会社 | 内視鏡装置 |
JP5258869B2 (ja) | 2010-12-13 | 2013-08-07 | 富士フイルム株式会社 | 内視鏡装置 |
JP5451802B2 (ja) * | 2011-04-01 | 2014-03-26 | 富士フイルム株式会社 | 電子内視鏡システム及び電子内視鏡システムの校正方法 |
JP5554288B2 (ja) * | 2011-06-13 | 2014-07-23 | 富士フイルム株式会社 | 内視鏡システム、プロセッサ装置及び画像補正方法 |
JP5973780B2 (ja) | 2011-06-17 | 2016-08-23 | キヤノン株式会社 | 色処理装置およびその方法 |
CN103533878B (zh) * | 2011-09-22 | 2016-01-20 | 奥林巴斯株式会社 | 医疗设备 |
CN103561630B (zh) * | 2012-03-06 | 2016-02-10 | 奥林巴斯株式会社 | 内窥镜系统 |
CN102629967B (zh) * | 2012-04-18 | 2014-03-19 | 山东神思电子技术股份有限公司 | 一种翻拍设备光照不均匀的校正方法 |
WO2014185172A1 (ja) * | 2013-05-13 | 2014-11-20 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
WO2015060347A1 (ja) * | 2013-10-25 | 2015-04-30 | オリンパスメディカルシステムズ株式会社 | 内視鏡装置 |
US20160249793A1 (en) * | 2013-12-27 | 2016-09-01 | Kang-Huai Wang | Capsule Camera Device with Multi-Spectral Light Sources |
DE102014208754A1 (de) * | 2014-05-09 | 2015-11-12 | Digital Endoscopy Gmbh | Endoskopkopf mit zumindest zwei lichtquellen und endoskop mit diesem |
JP2016016050A (ja) * | 2014-07-07 | 2016-02-01 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに内視鏡システム |
JP6556013B2 (ja) * | 2015-10-08 | 2019-08-07 | キヤノン株式会社 | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 |
CN107123093A (zh) * | 2016-12-07 | 2017-09-01 | 重庆微标科技股份有限公司 | 一种车辆图像的处理方法及装置 |
WO2018117912A1 (ru) * | 2016-12-23 | 2018-06-28 | Общество С Ограниченной Ответственностью "Научно-Исследовательский Центр "Прософт-Системы" | Устройство захвата изображения вен ладони |
JP6392486B1 (ja) * | 2017-02-01 | 2018-09-19 | オリンパス株式会社 | 内視鏡システム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1735129A (zh) * | 2004-07-21 | 2006-02-15 | 索尼株式会社 | 用户界面提供装置 |
CN1910431A (zh) * | 2004-01-23 | 2007-02-07 | 奥林巴斯株式会社 | 图像处理系统以及照相机 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4819077A (en) | 1986-05-14 | 1989-04-04 | Kabushiki Kaisha Toshiba | Color image processing system |
JPH0789672B2 (ja) * | 1986-05-14 | 1995-09-27 | 株式会社東芝 | 内視鏡装置 |
JPH06319042A (ja) * | 1993-05-10 | 1994-11-15 | Toshiba Eng Co Ltd | 画像処理装置 |
JPH0997363A (ja) | 1995-10-02 | 1997-04-08 | Oki Electric Ind Co Ltd | 硬貨撮像装置 |
JPH09138201A (ja) | 1995-11-15 | 1997-05-27 | Mitsubishi Electric Corp | 表面検査装置 |
US7728845B2 (en) * | 1996-02-26 | 2010-06-01 | Rah Color Technologies Llc | Color calibration of color image rendering devices |
JP3968533B2 (ja) * | 1996-04-17 | 2007-08-29 | 富士フイルム株式会社 | フイルム画像入力装置及び方法 |
JP3423532B2 (ja) * | 1996-05-24 | 2003-07-07 | キヤノン株式会社 | 画像読取装置 |
JP3995954B2 (ja) * | 2001-03-02 | 2007-10-24 | ペンタックス株式会社 | 自動調光機能を備えた電子内視鏡装置 |
IL155046A (en) | 2003-03-23 | 2013-12-31 | Given Imaging Ltd | Install in-body imaging capable of defining its location |
US20030117491A1 (en) | 2001-07-26 | 2003-06-26 | Dov Avni | Apparatus and method for controlling illumination in an in-vivo imaging device |
AU2003240213A1 (en) | 2002-06-24 | 2004-01-06 | Ranbaxy Laboratories Limited | Process for the preparation of robust formulations of valacyclovir hydrochloride tablets |
JP2004167008A (ja) * | 2002-11-20 | 2004-06-17 | Olympus Corp | 体内観察システム |
JP4410989B2 (ja) * | 2002-12-12 | 2010-02-10 | キヤノン株式会社 | 画像処理装置及び画像復号処理装置 |
EP1618835B1 (en) * | 2003-04-25 | 2013-08-28 | Olympus Corporation | Capsule endoscope and capsule endoscope system |
JP4363931B2 (ja) * | 2003-09-04 | 2009-11-11 | オリンパス株式会社 | カプセル型内視鏡 |
US7153259B2 (en) | 2003-09-01 | 2006-12-26 | Olympus Corporation | Capsule type endoscope |
JP4482021B2 (ja) | 2004-01-23 | 2010-06-16 | オリンパス株式会社 | カメラ |
JP2005211231A (ja) * | 2004-01-28 | 2005-08-11 | Olympus Corp | 信号処理装置及び内視鏡システム |
JP2006246199A (ja) * | 2005-03-04 | 2006-09-14 | Fuji Photo Film Co Ltd | 画像読取装置 |
JP2007244590A (ja) | 2006-03-15 | 2007-09-27 | Olympus Medical Systems Corp | 撮像システム |
ATE539553T1 (de) * | 2007-02-26 | 2012-01-15 | Olympus Medical Systems Corp | Kapselendoskop |
-
2009
- 2009-10-19 EP EP09820657.6A patent/EP2338404B1/en not_active Not-in-force
- 2009-10-19 WO PCT/JP2009/068019 patent/WO2010044483A1/ja active Application Filing
- 2009-10-19 JP JP2010515299A patent/JP4589463B2/ja not_active Expired - Fee Related
- 2009-10-19 CN CN2009801414069A patent/CN102186400B/zh active Active
-
2010
- 2010-04-15 US US12/760,853 patent/US8018485B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1910431A (zh) * | 2004-01-23 | 2007-02-07 | 奥林巴斯株式会社 | 图像处理系统以及照相机 |
CN1735129A (zh) * | 2004-07-21 | 2006-02-15 | 索尼株式会社 | 用户界面提供装置 |
Non-Patent Citations (2)
Title |
---|
JP特开2002-325729A 2002.11.12 |
JP特开2005-211231A 2005.08.11 |
Also Published As
Publication number | Publication date |
---|---|
JP4589463B2 (ja) | 2010-12-01 |
US20100265321A1 (en) | 2010-10-21 |
US8018485B2 (en) | 2011-09-13 |
CN102186400A (zh) | 2011-09-14 |
EP2338404B1 (en) | 2014-10-01 |
EP2338404A1 (en) | 2011-06-29 |
WO2010044483A1 (ja) | 2010-04-22 |
JPWO2010044483A1 (ja) | 2012-03-15 |
EP2338404A4 (en) | 2012-06-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102186400B (zh) | 摄像装置以及摄像系统 | |
CN102458215B (zh) | 胶囊型内窥镜装置 | |
JP5424570B2 (ja) | 電子内視鏡用プロセッサ、ビデオスコープ及び電子内視鏡装置 | |
EP2047792B1 (en) | Endoscope device | |
JP3869698B2 (ja) | 電子内視鏡装置 | |
US20110285895A1 (en) | Image Sensing Device and Processing System | |
CN105101862B (zh) | 图像处理装置和内窥镜系统的工作方法 | |
CN105101863B (zh) | 图像处理装置 | |
CN103533878B (zh) | 医疗设备 | |
US7898699B2 (en) | Electronic endoscope apparatus | |
CN104939791B (zh) | 医用图像处理装置及其工作方法 | |
CN105212885A (zh) | 医用图像处理装置及其工作方法、以及内窥镜系统 | |
CN105701792A (zh) | 医用图像处理装置以及其工作方法 | |
CN102186401B (zh) | 图像生成装置、内窥镜系统以及图像生成方法 | |
US20110080506A1 (en) | Image sensing device and system | |
JP2003126030A (ja) | 電子内視鏡装置 | |
TWI428108B (zh) | 影像感測裝置及其處理系統 | |
JP2003010113A (ja) | 電子内視鏡装置 | |
JP2003010114A (ja) | 電子内視鏡装置およびその制御方法 | |
US20060082645A1 (en) | Electronic endoscope apparatus | |
JP2003000535A (ja) | 電子内視鏡装置 | |
JP2003135392A (ja) | 電子内視鏡装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |