WO2010044483A1 - 撮像装置および撮像システム - Google Patents

撮像装置および撮像システム Download PDF

Info

Publication number
WO2010044483A1
WO2010044483A1 PCT/JP2009/068019 JP2009068019W WO2010044483A1 WO 2010044483 A1 WO2010044483 A1 WO 2010044483A1 JP 2009068019 W JP2009068019 W JP 2009068019W WO 2010044483 A1 WO2010044483 A1 WO 2010044483A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
light source
color
correction
imaging
Prior art date
Application number
PCT/JP2009/068019
Other languages
English (en)
French (fr)
Inventor
哲夫 薬袋
和昭 田村
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to EP09820657.6A priority Critical patent/EP2338404B1/en
Priority to CN2009801414069A priority patent/CN102186400B/zh
Priority to JP2010515299A priority patent/JP4589463B2/ja
Priority to US12/760,853 priority patent/US8018485B2/en
Publication of WO2010044483A1 publication Critical patent/WO2010044483A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/07—Endoradiosondes
    • A61B5/073—Intestinal transmitters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/041—Capsule endoscopes for imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0607—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for annular illumination
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661—Endoscope light sources
    • A61B1/0684—Endoscope light sources using light emitting diodes [LED]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1075—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions by non-invasive methods, e.g. for determining thickness of tissue layer

Definitions

  • the present invention relates to an imaging apparatus and an imaging system capable of capturing a spectral image generated based on a specific color component and correcting color unevenness of the spectral image.
  • capsule-type in-subject introduction apparatuses for example, capsule-type endoscopes
  • an imaging function and a wireless communication function have been proposed.
  • Intra-subject introduction systems have been developed that acquire images inside the subject.
  • a capsule endoscope In order to observe (examine) the inside of a subject, a capsule endoscope is swallowed from the subject's mouth and then spontaneously discharged, and then inside the body cavity, for example, inside an organ such as the stomach or small intestine. Move according to its peristaltic movement. Further, during movement, the capsule endoscope functions to capture images in the subject at intervals of 0.5 seconds, for example.
  • an image captured by the capsule endoscope is received by an external image display device via an antenna placed on the body surface of the subject.
  • This image display device has a wireless communication function and an image memory function for the capsule endoscope, and sequentially stores images received from the capsule endoscope in the subject in the memory.
  • the doctor or nurse can observe (examine) the inside of the subject and make a diagnosis by displaying the image accumulated in the image display device, that is, the image in the digestive tract of the subject on the display.
  • Patent Document 1 discloses an in-vivo imaging swallowable capsule that can be changed in intensity and / or duration according to the amount of illumination generated by the in-vivo imaging device and reflected back to the in-vivo imaging device. Is described.
  • a spectral image generated using specific color components of blue and green such as a clear blood vessel image of the inner wall of the body cavity.
  • a light emitting element having a light emitting element and a light emitting element having a peak in the green wavelength region are arranged at different positions to illuminate a subject, and a spectral image is acquired by one image pickup element.
  • the obtained image has color unevenness (including local white balance deviation and luminance unevenness). There was a point.
  • the present invention has been made in view of the above, and an imaging apparatus capable of removing color unevenness even when spectral images are obtained by arranging different light sources emitting different wavelength ranges at different positions. And it aims at providing an imaging system.
  • an imaging apparatus has a first light source having a first frequency characteristic and a second frequency characteristic different from the first frequency characteristic. And a second light source disposed at a position different from the first light source, and reflected light from the first light source and a subject irradiated from the second light source, and an image of the object Regions of the first image and the second image based on an imaging unit that generates the first image by the imaging unit and the first image by the first light source and the second image by the second light source. And an image correction unit that corrects color unevenness of the image captured by the imaging unit using correction data with a constant luminance ratio.
  • the image correction unit performs one or more color elements in which color unevenness correction is performed in advance for each combination data value of each color element data for each region of the image.
  • a correction table in which data is associated is provided, and each color element data for each area is corrected.
  • a color space conversion unit that converts each color element data of the color space output from the imaging unit into color element data of a different correction color space, and the correction color space
  • a color space reverse conversion unit that reversely converts color element data into the color space
  • the image correction unit corrects each color element data of the correction color space converted by the color space conversion unit
  • the color space reverse conversion unit performs reverse conversion on each color element data corrected by the image correction unit.
  • the color space is a space having three primary colors of red, green, and blue as color elements
  • the correction color space is a color having hue, saturation, and luminance. It is characterized by a space as an element.
  • the first light source has an emission spectrum centered on blue
  • the second light source has an emission spectrum centered on green. It is characterized by.
  • the imaging apparatus further includes an optical lens that forms an image of the subject on the imaging surface of the imaging unit in the above-described invention, and the optical lens can be coupled to the imaging surface.
  • a correction object plane that is uniform between the first frequency characteristic and the second frequency characteristic is set, and the correction data is generated based on an image obtained by imaging the correction object plane. It is characterized by that.
  • the correction subject surface is a plane perpendicular to the optical axis of the optical lens, a plane symmetrical to the optical axis, and a curved surface symmetrical to the optical axis. Or set based on the spatial frequency characteristics of the optical lens.
  • the image correction unit includes a high luminance region having a luminance value equal to or higher than a predetermined value in each region of the first image and the second image, and the first A false color region in which the luminance value of one of the images and the second image has a luminance value greater than or equal to the predetermined value and the luminance value of the other image is less than the predetermined value is detected, and the uneven color correction is performed.
  • the high luminance region and the false color region are changed to color element data or display mode indicating the high luminance region and the false color region, respectively.
  • the first light source and the second light source have the light sources so that the luminance of each region of the image received by the imaging unit is flat. It is characterized by setting and arranging directivity.
  • the first light source and the second light source are arranged in an annular shape on a flat plate, and light spreads in a vertical direction from one surface of the flat plate.
  • the directivity of light is set to be high in the radial direction, and the imaging unit is arranged at the center of the circle of the ring with the optical axis perpendicular to the flat plate.
  • the imaging system has a first light source having a first frequency characteristic, a second frequency characteristic different from the first frequency characteristic, and a position different from the first light source.
  • a second light source disposed on the imaging device, and an imaging unit that receives reflected light from the subject irradiated from the first light source and the second light source to generate an image of the object, and
  • a capsule endoscope that transmits an image captured by the imaging unit to the outside of the subject is provided.
  • the image correction unit is configured to use the first image and the second image based on the first image by the first light source and the second image by the second light source, which are previously captured by the imaging unit. Since the color unevenness correction of the image picked up by the image pickup unit is performed using correction data that makes the luminance ratio of each region of the image constant, different first and second light sources that emit light in different wavelength ranges Even in the case where spectral images are obtained by arranging the images at different positions, color unevenness can be removed.
  • FIG. 1 is a diagram showing an overall schematic configuration of a capsule endoscope system that is an imaging system according to Embodiment 1 of the present invention.
  • FIG. 2 is a plan view of the vicinity of the imaging unit and the illumination unit of the capsule endoscope according to the first embodiment of the present invention.
  • FIG. 3 is a cross-sectional view of the vicinity of the imaging unit and the illumination unit of the capsule endoscope according to the first embodiment of the present invention.
  • FIG. 4 is a diagram showing an example of a pixel array of the image sensor mounted on the capsule endoscope according to the first embodiment of the present invention.
  • FIG. 5 is a diagram showing the radiance characteristics of the light emitting element and the spectral sensitivity characteristics of the image sensor according to Embodiment 1 of the present invention.
  • FIG. 1 is a diagram showing an overall schematic configuration of a capsule endoscope system that is an imaging system according to Embodiment 1 of the present invention.
  • FIG. 2 is a plan view of the vicinity of the imaging unit
  • FIG. 6 is a diagram showing the wavelength dependence of the light absorption characteristic level of blood.
  • FIG. 7 is a schematic diagram showing the relationship between the ingress and reflection of light with respect to the inner wall of the body cavity and the blood vessel.
  • FIG. 8 is a block diagram showing a detailed configuration of the image processing unit mounted on the receiving apparatus according to Embodiment 1 of the present invention.
  • FIG. 9 is a diagram illustrating an example of an image having color unevenness.
  • FIG. 10 is a diagram showing the position dependency indicating the correction amount of the saturation correction data according to the first embodiment of the present invention.
  • FIG. 11 is a diagram showing an example of a high luminance area and a false color area according to the second embodiment of the present invention.
  • FIG. 12 is a diagram showing an example of light distribution characteristics for reducing color unevenness due to the arrangement of LEDs according to Embodiment 3 of the present invention.
  • FIG. 1 is a schematic diagram showing a configuration of a capsule endoscope system according to the first embodiment of the present invention.
  • the endoscope system according to the first embodiment includes a capsule endoscope 2 that captures an in-vivo image of a subject 1 and an image signal wirelessly transmitted by the capsule endoscope 2.
  • the recording medium 5 is provided.
  • the capsule endoscope 2 has an imaging function and a wireless communication function inside a capsule-type casing.
  • the capsule endoscope 2 is introduced into an organ of the subject 1 by oral ingestion or the like, and then moves inside the organ of the subject 1 by a peristaltic motion or the like while being moved at a predetermined interval (for example, an interval of 0.5 seconds).
  • a predetermined interval for example, an interval of 0.5 seconds.
  • in-vivo images of the subject 1 are sequentially taken. Specifically, the capsule endoscope 2 irradiates the subject with blue light and green light, for example, from blue light and green light emitting elements disposed at different positions, respectively, and illuminates with the illumination light.
  • An in-vivo image such as a spectroscopic image, which is a blood vessel image, is captured.
  • the capsule endoscope 2 wirelessly transmits an image signal of the in-vivo image of the subject 1 thus imaged to the external receiving device 3.
  • the capsule endoscope 2 sequentially repeats the in-vivo image capturing operation and the wireless transmission operation during a period from introduction into the organ of the subject 1 to discharge to the outside of the subject 1.
  • the receiving device 3 includes, for example, a plurality of receiving antennas 3a to 3h distributed on the body surface of the subject 1, and a capsule inside the subject 1 via at least one of the plurality of receiving antennas 3a to 3h.
  • a radio signal from the mold endoscope 2 is received.
  • the receiving device 3 extracts an image signal from the radio signal from the capsule endoscope 2 and acquires in-vivo image data included in the extracted image signal.
  • the receiving device 3 includes an image processing unit that performs image processing including color unevenness correction processing that corrects color unevenness of an image from acquired image data.
  • the receiving device 3 stores the in-vivo image group subjected to image processing in the recording medium 5 inserted in advance.
  • the receiving device 3 associates time data such as an imaging time or a reception time with each image in the in-vivo image group.
  • the receiving antennas 3a to 3h of the receiving device 3 may be arranged on the body surface of the subject 1 as shown in FIG. 1, or may be arranged on a jacket worn by the subject 1. Further, the number of receiving antennas of the receiving device 3 may be one or more, and is not particularly limited to eight.
  • the image display device 4 has a configuration like a workstation that captures various data such as the in-vivo image group of the subject 1 via the recording medium 5 and displays the various data such as the captured in-vivo image group. Specifically, the image display device 4 is inserted with the recording medium 5 removed from the receiving device 3 and takes in the data stored in the recording medium 5 to obtain various data such as the in-vivo image group of the subject 1. get.
  • the image display device 4 has a function of displaying the acquired in-vivo image on the display. Diagnosis and the like are performed by image display by the image display device 4.
  • the recording medium 5 is another recording medium that is portable for transferring data between the receiving device 3 and the image display device 4 described above.
  • the recording medium 5 is detachable from the receiving device 3 and the image display device 4 and has a structure capable of outputting and recording data when inserted into both. Specifically, when the recording medium 5 is inserted into the receiving device 3, the in-vivo image group subjected to image processing by the receiving device 3 and time data of each image are recorded.
  • the capsule endoscope 2 has various functions built in the capsule casing 21, one end is covered with the dome-shaped transparent cover 20, and an illumination unit and an imaging unit are disposed on the one end side.
  • a lens barrel 24 is provided at the center of a circle of a disk-shaped substrate 23, and an optical lens 13 in which the cylindrical axis of the capsule housing 21 is an optical axis.
  • the image pick-up element 14 is provided.
  • Three LEDs 11a to 11c (11) as light emitting elements exhibiting a wavelength spectrum are arranged in an annular shape at different positions.
  • a transparent fixing member 12 is provided on the top of each LED 10, 11.
  • the LED 11 may be provided with a fluorescent member on top of the LED 10, and this fluorescent member may be excited by 415 nm light emitted from the LED 10 to emit 540 nm fluorescence.
  • a green (G) pixel 15 and a blue (B) pixel 16 as shown in FIG. 4, only a green (G) pixel 15 and a blue (B) pixel 16 as shown in FIG.
  • a normal imaging device such as a Bayer array with red (R) pixels added may be used, but the red (R) pixels are not used.
  • the LEDs 10 and 11 have LED radiance characteristics that are emission spectra indicated by the curves Lb and Lg, and the pixels 15 and 16 are imaging that are light reception spectra indicated by the curves LB and LG. It has element spectral sensitivity characteristics.
  • the light absorption characteristic level of blood is low except for peaks at 415 nm (blue) and 540 nm (green).
  • capillary blood vessels 43 are present in the mucosal surface layer 40 on the inner wall of the body cavity, and thick blood vessels 44 are present in the deep mucosa 41. Since the light of 415 nm (blue) irradiated to the inner wall of the body cavity has a short wavelength, it does not pass through the inside of the tissue and is absorbed by the capillary blood vessel 43 due to the above-described light absorption characteristics of blood.
  • the wavelength of 540 nm (green) is longer than that of blue, the light passes through the deep mucosa 41 and is absorbed by the thick blood vessel 44 due to the above-described blood absorption characteristics.
  • red light is transmitted to the internal tissue 42 and is mostly reflected as scattered light. Therefore, if the light receiving sensitivity of only 415 nm (blue) and 540 nm (green) is provided, contrast information of blood vessel images such as the capillary blood vessels 43 and the thick blood vessels 44 can be obtained.
  • FIG. 8 is a block diagram showing a detailed configuration of the image processing unit 50 incorporated in the receiving device 3.
  • the image processing unit 50 includes a white balance adjustment unit 51 that performs white balance adjustment on image data that is converted from a wireless signal that is wirelessly transmitted to a baseband signal, and image data that is subjected to white balance adjustment.
  • a synchronization processing unit 52 that performs color balance correction between pixels, and the synchronized image data (RGB data which is color space data of the three primary colors of RGB) in color space data of hue, luminance, and saturation.
  • RGB data which is color space data of the three primary colors of RGB
  • An RGB / HLS conversion unit 53 for converting to certain HLS data a storage unit 54 having a correction table 58, a color unevenness correction unit 55 for correcting color unevenness of HLS data using the correction table 58, and color unevenness correction HLS / RGB conversion unit 56 that reversely converts HLS data to RGB data, and ⁇ processing for image data that is RGB data that has been reversely converted And a post-processing unit 57 for outputting carried out if necessary post-processing, such as the structure enhancement processing.
  • the correction table 58 corrects correction data (luminance value Lrev, hue value Hrev, luminance value L, hue value H, saturation S) for every combined xy pixel position of the acquired image data of one frame. Saturation value Srev) is held in association with each other.
  • Saturation value Srev is held in association with each other.
  • all combined image data of luminance value L, hue value H, and saturation value S that is, 256 luminance values L, 256 hue values H, and 256 saturation values.
  • 256 ⁇ 256 ⁇ 256 image data combined with S are held, and 256 ⁇ 256 ⁇ 256 correction data are held. Accordingly, when there are 320 pixel positions, the number of pairs of image data and correction data is 256 ⁇ 256 ⁇ 256 ⁇ 320.
  • Each of the pixel data at each xy pixel position in the input HLS data is individually corrected.
  • FIG. 9 shows an example of image data that has not been corrected for color unevenness.
  • color unevenness occurs in the areas E10a to E10c corresponding to the arrangement positions of the LEDs 10a to 10c, and color unevenness occurs in the areas E11a to E11c corresponding to the arrangement positions of the LEDs 11a to 11c.
  • the correction data of the correction table 58 is a value for individually correcting these color irregularities at each xy pixel position.
  • the correction data of the correction table 58 is obtained individually in advance. For example, the correction amount of the saturation value Srev for the pixels on the straight axis 60 is as shown in FIG. 10, and the vicinity of both end positions Pa and Pb is greatly corrected.
  • the correction amount of the saturation value Srev is adjusted by each value of the luminance value L, the hue value H, and the age value S.
  • a value to which the correction amount is added becomes a saturation value Srev.
  • the luminance value Lrev and the hue value Hrev in the case of the same luminance value L, hue value H, and age value S are determined in the same manner.
  • This correction data is finally corrected so that the ratio between each luminance value of the blue image data and each luminance value of the green pixel data is constant. Therefore, in the first embodiment, the RGB color space is converted to the HLS space, and the luminance value of each region is corrected, and the hue and saturation associated with the change in the luminance value are also corrected.
  • the correction data is obtained in advance, and the premise for acquiring the correction data is that it is used in a subject environment in which almost the same image as in FIG. 9 is obtained.
  • the correction subject surface at the time of acquiring correction data is a plane perpendicular to the optical axis of the optical lens 13, a plane symmetrical to the optical axis, and the light.
  • a curved surface symmetric with respect to the axis, or one set based on the spatial frequency characteristics of the optical lens can be considered.
  • the RGB color space is converted to the HLS color space, and color unevenness correction is performed on the image data in the HLS color space. Since inverse conversion is performed, color unevenness may be corrected directly in the RGB color space. In this case, the configurations of the RGB / HLS conversion unit 53 and the HLS / RGB conversion unit 56 are not necessary, and the conversion processing time can be eliminated.
  • all the color elements that is, all of the luminance, hue, and saturation are corrected in the HLS color space.
  • the present invention is not limited to this, and one or more elements, such as hue, are corrected. Or only the saturation may be corrected. Also by this, the effect of color unevenness correction can be obtained.
  • Embodiment 1 it is possible to correct color unevenness of a spectral image obtained by arranging light emitting elements of different wavelength ranges at different positions.
  • the color unevenness correction unit 55, the correction table 58, the RGB / HLS conversion unit 53, and the HLS / RGB conversion unit 56 of the image processing unit are provided on the receiving device 3 side.
  • the image display device 4 may be provided.
  • the color unevenness correction unit 55 first determines whether or not there is a region where the luminance value L exceeds the threshold value TH. If there is a region where the luminance value L exceeds the threshold value TH, a candidate for a high luminance region is determined. Then, based on the color information such as the hue value H around the candidate area, an area where either the blue signal or the green signal is not saturated is further detected, and this area is determined as the false color area E21. At the same time, the remaining area of the high brightness area candidate is determined as the high brightness area E20.
  • the color unevenness correction unit 55 converts the false color region E21 having a different color into the same color and luminance in order to easily distinguish it from the other subject image region E22. Similarly, the color unevenness correction unit 55 converts the high luminance region E20 into a common color and luminance so that it can be easily distinguished from other subject image regions. In this case, the color unevenness correction unit 55 does not perform color unevenness correction based on the correction table 58 shown in the first embodiment.
  • the color unevenness correction unit 55 converts the color and brightness of the high brightness area E20 and the false color area E21, this includes black display, and is not limited to this. May be performed.
  • the LED In order to eliminate the distribution of color unevenness in the circumferential direction, it is necessary to perform a distributed arrangement that densely arranges the LEDs in the circumferential direction.
  • the LED has an anode on one end side in the longitudinal direction, a cathode on the other end side, and has a large light emission directivity on the anode side.
  • the light distribution characteristics described above can be realized.
  • the light distribution characteristics of each light emitting element are changed and arranged so that the color unevenness of the acquired image can be reduced. It can be reduced. In particular, when an LED is used as the light emitting element, color unevenness can be easily reduced.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Optics & Photonics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Endoscopes (AREA)
  • Color Television Image Signal Generators (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

　撮像装置は、青色波長域である第１の周波数特性を有する第１の光源と、前記第１の周波数特性とは異なる第２の周波数特性を有し、前記第１の光源とは異なる位置に配置される第２の光源と、前記第１の光源および前記第２の光源から照射された被写体からの反射光を受光して対象物の画像を生成する撮像部と、予め前記撮像部が撮像した前記第１の光源による第１画像と前記第２の光源による第２画像とをもとに前記第１画像および前記第２画像の各領域の輝度比を一定とする補正データを格納した補正テーブル５８を用いて前記撮像部が撮像する前記画像の色むら補正を行う色むら補正部５５と、を備える。

Description

撮像装置および撮像システム
　この発明は、特定の色成分をもとに生成される分光画像を撮像するとともに、該分光画像の色むらを補正することができる撮像装置および撮像システムに関する。
　近年、内視鏡分野においては、撮像機能と無線通信機能とを設けたカプセル型の被検体内導入装置（例えばカプセル型内視鏡）が提案され、このカプセル型内視鏡を用いて被検体内の画像を取得する被検体内導入システムが開発されている。カプセル型内視鏡は、被検体内を観察（検査）するために、例えば被検体の口から飲込まれ、その後、自然排出されるまでの間、体腔内たとえば胃、小腸等の臓器の内部をその蠕動運動に従って移動する。また、移動中、カプセル型内視鏡は、例えば０．５秒間隔で被検体内の画像を撮像するように機能する。
　カプセル型内視鏡が被検体内を移動する間、このカプセル型内視鏡によって撮像された画像は、被検体の体表面に配置したアンテナを介して外部の画像表示装置に受信される。この画像表示装置は、カプセル型内視鏡に対する無線通信機能と画像のメモリ機能とを有し、被検体内のカプセル型内視鏡から受信した画像をメモリに順次格納する。医師または看護師は、かかる画像表示装置に蓄積された画像、すなわち被検体の消化管内の画像をディスプレイに表示することによって、被検体内を観察（検査）し、診断することができる。
　ここで、特許文献１には、生体内撮像装置が生成して、生体内撮像装置に再び反射された照明の量に従って、強度および／または持続時間を変化させることができる生体内撮像嚥下可能カプセルが記載されている。
特許第３７８２０９３号公報
　ところで、カプセル型内視鏡などでは、体腔内壁の鮮明な血管画像などを、青色および緑色の特定の色成分を用いて生成する分光画像を撮像したい場合があり、この場合、青色波長域にピークをもつ発光素子と緑色波長域にピークをもつ発光素子とをそれぞれ異なる位置に配置して被写体に照明し、１つの撮像素子によって分光画像を取得する。しかし、異なる波長域にピークをもつ異なる光源を異なる位置に配置された場合、取得される画像には、色むら（局所的なホワイトバランスのずれや輝度むらを含む）が発生してしまうという問題点があった。
　この発明は、上記に鑑みてなされたものであって、異なる波長域を発光する異なる光源を異なる位置に配置して分光画像を得る場合であっても、色むらを除去することができる撮像装置および撮像システムを提供することを目的とする。
　上述した課題を解決し、目的を達成するために、この発明にかかる撮像装置は、第１の周波数特性を有する第１の光源と、前記第１の周波数特性とは異なる第２の周波数特性を有し、前記第１の光源とは異なる位置に配置される第２の光源と、前記第１の光源および前記第２の光源から照射された被写体からの反射光を受光して対象物の画像を生成する撮像部と、予め前記撮像部が撮像した前記第１の光源による第１画像と前記第２の光源による第２画像とをもとに前記第１画像および前記第２画像の各領域の輝度比を一定とする補正データを用いて前記撮像部が撮像する前記画像の色むら補正を行う画像補正部と、を備えたことを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記画像補正部が、前記画像の各領域毎に各色要素データの組み合わせデータ値毎に、予め色むら補正を行った１以上の色要素データを対応づけた補正テーブルを備え、各領域毎の各色要素データを補正することを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記撮像部が出力する色空間の各色要素データを異なる補正色空間の色要素データに変換する色空間変換部と、前記補正色空間の色要素データを前記色空間に逆変換する色空間逆変換部と、を備え、前記画像補正部は、前記色空間変換部によって変換された補正色空間の各色要素データに対して補正し、前記色空間逆変換部が前記画像補正部によって補正された各色要素データを逆変換することを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記色空間が、赤色、緑色、青色の三原色を色要素とする空間であり、前記補正色空間が、色相、彩度、輝度を色要素とする空間であることを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記第１の光源が、青色を中心とする発光スペクトルを有し、前記第２の光源が、緑色を中心とする発光スペクトルを有することを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記被写体の画像を前記撮像部の撮像面に結像させる光学レンズを備え、前記光学レンズが前記撮像面に結合させることが可能な領域に前記第１の周波数特性および前記第２の周波数特性の間で均等な補正用被写体面を設定し、前記補正データが、前記補正用被写体面を撮像した画像をもとに生成したものであることを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記補正用被写体面が、前記光学レンズの光軸に対して垂直な平面、該光軸に対称な平面、該光軸に対称な曲面、あるいは該光学レンズの空間周波数特性をもとに設定されたものであることを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記画像補正部が、前記第１画像および前記第２画像の各領域で所定値以上の輝度値を有する高輝度領域と、前記第１画像および前記第２画像の各領域でいずれか一方の画像の輝度値が前記所定値以上で他方の画像の輝度値が前記所定値未満である偽色領域とを検出し、前記色むら補正に替えて、前記高輝度領域および前記偽色領域をそれぞれ前記高輝度領域および前記偽色領域を示す色要素データあるいは表示態様に変更することを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記第１の光源および前記第２の光源が、前記撮像部が受光する画像の各領域の輝度が平坦になるように、当該光源の指向性を設定配置することを特徴とする。
　また、この発明にかかる撮像装置は、上述した発明において、前記第１の光源および前記第２の光源が、平板上に円環状に配置され、該平板の一方の面から垂直な方向に広がる光を照射するとともに、径外方向に向かって光の指向性が高く設定され、前記撮像部が、光軸が前記平板に垂直で前記円環の円中心に配置されることを特徴とする。
　また、この発明にかかる撮像システムは、第１の周波数特性を有する第１の光源と、前記第１の周波数特性とは異なる第２の周波数特性を有し、前記第１の光源とは異なる位置に配置される第２の光源と、前記第１の光源および前記第２の光源から照射された被写体からの反射光を受光して対象物の画像を生成する撮像部と、を有し、前記撮像部が撮像した画像を被検体外部に送信するカプセル型内視鏡を備えたことを特徴とする。
　この発明によれば、画像補正部が、予め前記撮像部が撮像した前記第１の光源による第１画像と前記第２の光源による第２画像とをもとに前記第１画像および前記第２画像の各領域の輝度比を一定とする補正データを用いて前記撮像部が撮像する前記画像の色むら補正を行うようにしているので、異なる波長域を発光する異なる第１および第２の光源を異なる位置に配置して分光画像を得る場合であっても、色むらを除去することができる。
図１は、この発明の実施の形態１による撮像システムであるカプセル型内視鏡システムの全体概要構成を示す図である。 図２は、この発明の実施の形態１によるカプセル型内視鏡の撮像部および照明部近傍の平面図である。 図３は、この発明の実施の形態１によるカプセル型内視鏡の撮像部および照明部近傍の断面図である。 図４は、この発明の実施の形態１によるカプセル型内視鏡に搭載される撮像素子の画素配列の一例を示す図である。 図５は、この発明の実施の形態１による発光素子の放射輝度特性と撮像素子の分光感度特性とを示す図である。 図６は、血液の吸光特性レベルの波長依存性を示す図である。 図７は、体腔内壁と血管に対する光の進入と反射との関係を示す模式図である。 図８は、この発明の実施の形態１による受信装置に搭載される画像処理部の詳細構成を示すブロック図である。 図９は、色むらを有した画像の一例を示す図である。 図１０は、この発明の実施の形態１による彩度の補正データの補正量を示す位置依存性を示す図である。 図１１は、この発明の実施の形態２による高輝度領域および偽色領域の一例を示す図である。 図１２は、この発明の実施の形態３によるＬＥＤの配置による色むらを低減する配光特性の一例を示す図である。
　以下、図面を参照して、この発明にかかる撮像装置およびこれを用いた撮像システムの実施の形態を詳細に説明する。なお、以下の実施の形態では、カプセル型内視鏡システムを例に挙げて説明するが、これらの実施の形態によってこの発明が限定されるものではない。
（実施の形態１）
　図１は、この発明の実施の形態１にかかるカプセル型内視鏡システムの構成を示す模式図である。図１に示すように、この実施の形態１にかかる内視鏡システムは、被検体１の体内画像を撮像するカプセル型内視鏡２と、カプセル型内視鏡２によって無線送信された画像信号を受信する受信装置３と、カプセル型内視鏡２によって撮像された体内画像を表示する画像表示装置４と、受信装置３と画像表示装置４との間におけるデータの受け渡しを行うための可搬型の記録媒体５とを備える。
　カプセル型内視鏡２は、カプセル型の筐体内部に撮像機能と無線通信機能とを備える。カプセル型内視鏡２は、経口摂取等によって被検体１の臓器内部に導入され、その後、蠕動運動等によって被検体１の臓器内部を移動しつつ、所定の間隔（例えば０．５秒間隔）で被検体１の体内画像を順次撮像する。具体的には、カプセル型内視鏡２は、臓器内部において被写体に、たとえば異なる位置に配置された青色光および緑色光の発光素子からそれぞれ青色光および緑色光を照射し、この照明光によって照明された被写体の画像、具体的には血管画像である分光画像等の体内画像を撮像する。カプセル型内視鏡２は、このように撮像した被検体１の体内画像の画像信号を外部の受信装置３に無線送信する。カプセル型内視鏡２は、被検体１の臓器内部に導入されてから被検体１の外部に排出されるまでの期間、かかる体内画像の撮像動作および無線送信動作を順次繰り返す。
　受信装置３は、例えば被検体１の体表上に分散配置される複数の受信アンテナ３ａ～３ｈを備え、複数の受信アンテナ３ａ～３ｈのうちの少なくとも一つを介して被検体１内部のカプセル型内視鏡２からの無線信号を受信する。受信装置３は、カプセル型内視鏡２からの無線信号から画像信号を抽出し、この抽出した画像信号に含まれる体内画像の画像データを取得する。
　また、受信装置３は、取得した画像データから画像の色むら補正を行う色むら補正処理を含む画像処理を行う画像処理部を備える。受信装置３は、予め挿着された記録媒体５に、画像処理された体内画像群を蓄積する。また、受信装置３は、体内画像群の各画像に、撮像時刻または受信時刻等の時間データを各々対応付ける。
　なお、受信装置３の受信アンテナ３ａ～３ｈは、図１に示したように被検体１の体表上に配置してもよいし、被検体１に着用させるジャケットに配置されてもよい。また、受信装置３の受信アンテナ数は、１以上であればよく、特に８つに限定されない。
　画像表示装置４は、記録媒体５を介して被検体１の体内画像群等の各種データを取り込み、取り込んだ体内画像群等の各種データを表示するワークステーションのような構成を有する。具体的には、画像表示装置４は、受信装置３から取り外された記録媒体５を挿着され、この記録媒体５の保存データを取り込むことによって、被検体１の体内画像群等の各種データを取得する。画像表示装置４は、取得した体内画像をディスプレイに表示する機能を有する。この画像表示装置４による画像表示によって診断等が行われる。
　記録媒体５は、上述した受信装置３と画像表示装置４との間におけるデータの受け渡しを行うための可搬が他の記録メディアである。記録媒体５は、受信装置３および画像表示装置４に対して着脱可能であって、両者に対する挿着時にデータの出力および記録が可能な構造を有する。具体的には、記録媒体５は、受信装置３に挿着された場合、受信装置３によって画像処理された体内画像群および各画像の時間データ等を記録する。
　カプセル型内視鏡２は、カプセル型筐体２１内に各種機能が内蔵され、一端部がドーム型透明カバー２０に覆われ、この一端部側に照明部および撮像部が配置される。図２および図３に示すように、円板状の基板２３の円中央部に鏡筒２４が設けられ、この鏡筒２４内にカプセル型筐体２１の円筒軸が光軸となる光学レンズ１３および撮像素子１４が設けられる。基板２３の周縁側には、４１５ｎｍ（青色）付近にピークをもつ波長スペクトル（図５の曲線Ｌｂ）を呈する発光素子としての３つのＬＥＤ１０ａ～１０ｃ（１０）と、５４０ｎｍ（緑色）付近にピークをもつ波長スペクトル（図５の曲線Ｌｇ）を呈する発光素子としての３つのＬＥＤ１１ａ～１１ｃ（１１）とが交互に異なる位置に円環状に配置される。各ＬＥＤ１０，１１の上部には、透明の固定部材１２が設けられる。なお、ＬＥＤ１１は、ＬＥＤ１０の上部に蛍光部材を設け、この蛍光部材が、ＬＥＤ１０から発せられる４１５ｎｍの光によって励起して５４０ｎｍの蛍光を発光するようにしてもよい。
　撮像素子の複数の画素は、図４に示すように、図２に示すような緑（Ｇ）の画素１５および青（Ｂ）の画素１６のみが配置される。もちろん、赤（Ｒ）の画素を加えたベイヤー配列などの通常の撮像素子を用いてもよいが、この赤（Ｒ）の画素は用いられない。
　ここで、４１５ｎｍの光（青色）と５４０ｎｍの光（緑色）とを用いた分光画像について説明する。まず、図５に示すように、ＬＥＤ１０，１１は、曲線Ｌｂ，Ｌｇに示す発光スペクトルであるＬＥＤ放射輝度特性を有し、各画素１５，１６は、曲線ＬＢ，ＬＧに示す受光スペクトルである撮像素子分光感度特性を有する。
　血液の吸光特性レベルは、図６に示すように、４１５ｎｍ（青色）と５４０ｎｍ（緑色）とにピークがある以外は低い。そして、図７に示すように、体腔内壁には、粘膜表層４０に毛細血管４３が存在し、さらに粘膜深部４１には、太い血管４４が存在する。体腔内壁に照射される４１５ｎｍ（青色）の光は、波長が短いため、組織内部まで透過せず、上述した血液の吸光特性によって毛細血管４３に吸収される。また、５４０ｎｍ（緑色）の光は、青色よりも波長が長いため、粘膜深部４１まで透過し、上述した血液の吸光特性によって太い血管４４に吸収される。一方、赤色の光は、内部組織４２まで透過し、散乱光としてほとんどが反射される。したがって、４１５ｎｍ（青色）および５４０ｎｍ（緑色）のみの受光感度を持たせれば、毛細血管４３および太い血管４４などの血管画像のコントラスト情報を得ることができる。
　したがって、青色と緑色の波長をもつ光を被写体に照明し、青色と緑色の波長の感度特性をもつ撮像素子を用いることによって血管のコントラスト情報を得ることができ、血管画像である分光画像を得ることができる。
　ところが、撮像素子１４の画素１５が主として受光した青色の画像と画素１６が主として受光した緑色の画像とを合成した合成画像を生成すると、各色のＬＥＤ１０，１１の配置位置が異なるため、色むらが生じた画像となる。そこで、上述したように、受信装置３内で、分光画像の色むら補正を行うようにしている。
　図８は、受信装置３に組み込まれる画像処理部５０の詳細構成を示すブロック図である。図８に示すように画像処理部５０は、無線送信された無線信号からベースバンド信号に変換された画像データに対してホワイトバランス調整を行うホワイトバランス調整部５１と、ホワイトバランス調整された画像データに対して画素間の色バランス補正を行う同時化処理部５２と、同時化処理された画像データ（ＲＧＢ三原色の色空間データであるＲＧＢデータ）を、色相、輝度、彩度の色空間データであるＨＬＳデータに変換するＲＧＢ／ＨＬＳ変換部５３と、補正テーブル５８を有する記憶部５４と、補正テーブル５８を用いてＨＬＳデータの色むら補正を行う色むら補正部５５と、色むら補正されたＨＬＳデータをＲＧＢデータに逆変換するＨＬＳ／ＲＧＢ変換部５６と、逆変換されたＲＧＢデータである画像データに対してγ処理や構造強調処理などの後処理を必要に応じて行って出力する後処理部５７とを有する。
　補正テーブル５８は、取得された１フレームの画像データのｘｙ画素位置毎に、輝度値Ｌ、色相値Ｈ、彩度Ｓの全組み合わせ画像データを補正する補正データ（輝度値Ｌrev、色相値Ｈrev、彩度値Ｓrev）が対応づけて保持している。図８では、各ｘｙ画素位置には、輝度値Ｌ、色相値Ｈ、彩度値Ｓの全組み合わせ画像データ、すなわち２５６個の輝度値Ｌ、２５６個の色相値Ｈ、２５６個の彩度値Ｓが組み合わせられた２５６×２５６×２５６個の画像データが保持され、２５６×２５６×２５６個の補正データが保持されている。したがって、画素位置が３２０個である場合、画像データと補正データとの対は、２５６×２５６×２５６×３２０個となる。入力されるＨＬＳデータ内の各ｘｙ画素位置の画素データのすべてに対して個々に補正されることになる。
　図９は、色むら補正されていない画像データの一例を示している。図９では、ＬＥＤ１０ａ～１０ｃの配置位置に対応した領域Ｅ１０ａ～Ｅ１０ｃに色むらが発生しているとともに、ＬＥＤ１１ａ～１１ｃの配置位置に対応した領域Ｅ１１ａ～Ｅ１１ｃに色むらが発生している。このため、補正テーブル５８の補正データは、これらの色むらを各ｘｙ画素位置で個別に補正する値となっている。そして、この補正テーブル５８の補正データは、予め個別に求められている。たとえば、直線の軸６０上の画素に対する彩度値Ｓrevの補正量は、図１０に示すようになり、両端位置Ｐａ，Ｐｂ近傍が大きく補正されることになる。この彩度値Ｓrevの補正量は、輝度値Ｌ、色相値Ｈ、歳素値Ｓの各値によって調整される。この補正量が加味された値が彩度値Ｓrevとなる。同じ輝度値Ｌ、色相値Ｈ、歳素値Ｓの場合の輝度値Ｌrev、色相値Ｈrevも同様に決定される。この補正データは、最終的には、青色の画像データの各輝度値と緑色の画素データの各輝度値との比が一定となるように補正されることになる。したがって、この実施の形態１では、ＲＧＢ色空間をＨＬＳ空間に変換し、各領域の輝度値を補正するとともにこの輝度値変化に伴う色相および彩度も補正している。
　補正データは予め求められるものであり、補正データ取得の前提としては、ほとんど図９と同じ画像が得られる被写体環境で用いられることである。たとえば、各ＬＥＤ１０，１１が円環状に配置されることから、補正データ取得時の補正用被写体面は、光学レンズ１３の光軸に対して垂直な平面、該光軸に対称な平面、該光軸に対称な曲面、あるいは該光学レンズの空間周波数特性をもとに設定されたものなどが考えられる。
　なお、上述した実施の形態１では、ＲＧＢ色空間をＨＬＳ色空間に変換し、このＨＬＳ色空間上の画像データに対して色むら補正をするようにしていたが、最終的にＲＧＢ色空間に逆変換されるため、ＲＧＢ色空間内で直接色むら補正するようにしてもよい。この場合、ＲＧＢ／ＨＬＳ変換部５３およびＨＬＳ／ＲＧＢ変換部５６の構成が不要となり、しかも変換処理時間も無くすことができる。
　また、上述した実施の形態１では、ＨＬＳ色空間内において全ての色要素、すなわち輝度、色相、彩度の全てを補正するようにしていたが、これに限らず、１以上の要素、たとえば色相のみ、あるいは彩度のみを補正するようにしてもよい。これによっても、色むら補正の効果を得ることができる。
　この実施の形態１では、異なる波長域の発光素子が異なる位置に配置されたことによって得られる分光画像の色むら補正を行うことができる。
　なお、上述した実施の形態１では、画像処理部の色むら補正部５５、補正テーブル５８、ＲＧＢ／ＨＬＳ変換部５３、ＨＬＳ／ＲＧＢ変換部５６を受信装置３側に持たせるようにしているが、これに限らず、たとえば画像表示装置４側に持たせるようにしてもよい。
（実施の形態２）
　つぎに、この発明の実施の形態２について説明する。発光素子の照射光が鏡面のように正反射する場合、この正反射領域では、輝度が飽和し、高輝度領域となる。ここで、青色波長域および緑色波長域の異なる波長域をもつ発光素子が異なる位置に配置された場合、取得される画像の領域によっては、図１１に示すように、青色信号レベルと緑色信号レベルの双方が飽和する高輝度領域Ｅ２０と、この高輝度領域の周辺に分布し、青色信号レベルあるいは緑色信号レベルのいずれか一方のみが飽和している偽色領域Ｅ２１とが存在する。図１１では、偽色領域Ｅ２１において青色信号レベルのみが飽和した状態となっている。
　そこで、この実施の形態２では、色むら補正部５５が、まず輝度値Ｌが閾値ＴＨを超えた領域があるいか否かを判定し、閾値ＴＨを超える領域がある場合、高輝度領域の候補にし、この候補領域の周辺の色相値Ｈなどの色情報をもとに、青色信号と緑色信号とのいずれか一方が飽和していない領域をさらに検出し、この領域を偽色領域Ｅ２１と判定するとともに、高輝度領域の候補の残りの領域を高輝度領域Ｅ２０として判定する。
　ここで、実施の形態１のように、複数の異なる波長域の発光素子が異なる複数位置に配置される場合、偽色領域Ｅ２１の色も複数存在することになる。したがって、色むら補正部５５は、他の被写体画像領域Ｅ２２と区別しやすくするため、色の違う偽色領域Ｅ２１を同じ色、輝度に変換する。同様に、色むら補正部５５は、高輝度領域Ｅ２０も、他の被写体画像領域と区別しやすくするため、共通する色と輝度とに変換する。この場合、色むら補正部５５は、実施の形態１で示した補正テーブル５８に基づいた色むら補正は行わない。
　これによって、高輝度領域Ｅ２０および偽色領域Ｅ２１と、他の被写体画像領域Ｅ２２とを区別しやすい画像が生成されることになる。なお、色むら補正部５５が高輝度領域Ｅ２０および偽色領域Ｅ２１を色と輝度とを変換するとしたが、これには黒色表示も含まれ、さらにこれに限らず、たとえば、領域の点滅表示などを行わせるようにしてもよい。
（実施の形態３）
　つぎに、この発明の実施の形態３について説明する。この実施の形態３では、異なる位置に配置された青色波長域および緑色波長域の発光素子の配光特性、すなわち発光の指向特性を変化させて配置し、予め可能な限り色むらを発生しないようにしている。
　図３に示したように各ＬＥＤ１０，１１を円環状に配置した場合、図９に示したように複数領域に色むらのある画像となるが、この画像は、外側領域に色むらが発生している。これは、各ＬＥＤが無指向性の発光を行っているからであり、径外方向への発光レベルが小さいからである。このため、図１２に示すように、径外方向に対する発光が大きくなる発光指向性８０を持たせるＬＥＤ配置とすることによって、取得される画像の輝度分布が平坦になり、色むらの大きさを予め小さくしておくことができる。なお、周方向の発光指向性は、同じようにしておくことが好ましい。周方向の色むら分布を解消するためには、周方向のＬＥＤ配置を密にする分散配置を行う必要がある。この場合、ＬＥＤは、長手方向の一端側にアノードがあり、他端側にカソードがあり、アノード側の発光指向性が大きいことから、このアノード側を径外方向に向けて配置するのみで、上述した配光特性を実現することができる。
　この実施の形態３では、取得される画像の色むらを軽減できるように各発光素子の配光特性を変化させて配置するようにしているので、色むら補正対象の画像自体の色むらを予め低減しておくことができる。特に発光素子としてＬＥＤを用いる場合に、簡易に色むらを低減することができる。
　なお、序規格実施の形態のさらなる効果や変形例は、当業者によって容易に導き出すことができる。よって、本発明のより広範な態様は、以上のように表わしかつ記述した特定の詳細および代表的な実施の形態に限定されるものではない。したがって、添付のクレームおよびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。
　　１　被検体
　　２　カプセル型内視鏡
　　３　受信装置
　　３ａ～３ｈ　受信アンテナ
　　４　画像表示装置
　１０，１１　ＬＥＤ
　１２　透明カバー
　１３　光学レンズ
　１４　撮像素子
　１５，１６　画素
　２０　ドーム型透明カバー
　２１　カプセル型筐体
　２３　基板
　４０　粘膜表層
　４１　粘膜深部
　４２　内部組織
　４３　毛細血管
　４４　血管
　５０　画像処理部
　５１　ホワイトバランス調整部
　５２　同時化処理部
　５３　ＲＧＢ／ＨＬＳ変換部
　５４　記憶部
　５５　色むら補正部
　５６　ＨＬＳ／ＲＧＢ変換部
　５７　後処理部
　５８　補正テーブル
　８０　発光指向性
　Ｅ２０　高輝度領域
　Ｅ２１　偽色領域

Claims (11)

  1. 　第１の周波数特性を有する第１の光源と、
    　前記第１の周波数特性とは異なる第２の周波数特性を有し、前記第１の光源とは異なる位置に配置される第２の光源と、
    　前記第１の光源および前記第２の光源から照射された被写体からの反射光を受光して対象物の画像を生成する撮像部と、
    　予め前記撮像部が撮像した前記第１の光源による第１画像と前記第２の光源による第２画像とをもとに前記第１画像および前記第２画像の各領域の輝度比を一定とする補正データを用いて前記撮像部が撮像する前記画像の色むら補正を行う画像補正部と、
    　を備えたことを特徴とする撮像装置。
  2. 　前記画像補正部は、
    　前記画像の各領域毎に各色要素データの組み合わせデータ値毎に、予め色むら補正を行った１以上の色要素データを対応づけた補正テーブルを備え、
    　各領域毎の各色要素データを補正することを特徴とする請求項１に記載の撮像装置。
  3. 　前記撮像部が出力する色空間の各色要素データを異なる補正色空間の色要素データに変換する色空間変換部と、
    　前記補正色空間の色要素データを前記色空間に逆変換する色空間逆変換部と、
    　を備え、前記画像補正部は、前記色空間変換部によって変換された補正色空間の各色要素データに対して補正し、前記色空間逆変換部が前記画像補正部によって補正された各色要素データを逆変換することを特徴とする請求項１または２に記載の撮像装置。
  4. 　前記色空間は、赤色、緑色、青色の三原色を色要素とする空間であり、
    　前記補正色空間は、色相、彩度、輝度を色要素とする空間であることを特徴とする請求項３に記載の撮像装置。
  5. 　前記第１の光源は、青色を中心とする発光スペクトルを有し、
    　前記第２の光源は、緑色を中心とする発光スペクトルを有することを特徴とする請求項１～４のいずれか一つに記載の撮像装置。
  6. 　前記被写体の画像を前記撮像部の撮像面に結像させる光学レンズを備え、
    　前記光学レンズが前記撮像面に結合させることが可能な領域に前記第１の周波数特性および前記第２の周波数特性の間で均等な補正用被写体面を設定し、
    　前記補正データは、前記補正用被写体面を撮像した画像をもとに生成したものであることを特徴とする請求項１に記載の撮像装置。
  7. 　前記補正用被写体面は、前記光学レンズの光軸に対して垂直な平面、該光軸に対称な平面、該光軸に対称な曲面、あるいは該光学レンズの空間周波数特性をもとに設定されたものであることを特徴とする請求項６に記載の撮像装置。
  8. 　前記画像補正部は、前記第１画像および前記第２画像の各領域で所定値以上の輝度値を有する高輝度領域と、前記第１画像および前記第２画像の各領域でいずれか一方の画像の輝度値が前記所定値以上で他方の画像の輝度値が前記所定値未満である偽色領域とを検出し、前記色むら補正に替えて、前記高輝度領域および前記偽色領域をそれぞれ前記高輝度領域および前記偽色領域を示す色要素データあるいは表示態様に変更することを特徴とする請求項１に記載の撮像装置。
  9. 　前記第１の光源および前記第２の光源は、前記撮像部が受光する画像の各領域の輝度が平坦になるように、当該光源の指向性を設定配置することを特徴とする請求項１に記載の撮像装置。
  10. 　前記第１の光源および前記第２の光源は、平板上に円環状に配置され、該平板の一方の面から垂直な方向に広がる光を照射するとともに、径外方向に向かって光の指向性が高く設定され、
    　前記撮像部は、光軸が前記平板に垂直で前記円環の円中心に配置されることを特徴とする請求項９に記載の撮像装置。
  11. 　第１の周波数特性を有する第１の光源と、前記第１の周波数特性とは異なる第２の周波数特性を有し、前記第１の光源とは異なる位置に配置される第２の光源と、前記第１の光源および前記第２の光源から照射された被写体からの反射光を受光して対象物の画像を生成する撮像部と、を有し、前記撮像部が撮像した画像を被検体外部に送信するカプセル型内視鏡を備えたことを特徴とする撮像システム。
PCT/JP2009/068019 2008-10-17 2009-10-19 撮像装置および撮像システム WO2010044483A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP09820657.6A EP2338404B1 (en) 2008-10-17 2009-10-19 Imaging device and imaging system
CN2009801414069A CN102186400B (zh) 2008-10-17 2009-10-19 摄像装置以及摄像系统
JP2010515299A JP4589463B2 (ja) 2008-10-17 2009-10-19 撮像装置
US12/760,853 US8018485B2 (en) 2008-10-17 2010-04-15 Imaging device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008268895 2008-10-17
JP2008-268895 2008-10-17

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US12/760,853 Continuation US8018485B2 (en) 2008-10-17 2010-04-15 Imaging device

Publications (1)

Publication Number Publication Date
WO2010044483A1 true WO2010044483A1 (ja) 2010-04-22

Family

ID=42106643

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/068019 WO2010044483A1 (ja) 2008-10-17 2009-10-19 撮像装置および撮像システム

Country Status (5)

Country Link
US (1) US8018485B2 (ja)
EP (1) EP2338404B1 (ja)
JP (1) JP4589463B2 (ja)
CN (1) CN102186400B (ja)
WO (1) WO2010044483A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102833555A (zh) * 2011-06-17 2012-12-19 佳能株式会社 颜色处理设备和颜色处理方法
JP2013000175A (ja) * 2011-06-13 2013-01-07 Fujifilm Corp 内視鏡システム、プロセッサ装置及び画像補正方法
CN102869294A (zh) * 2010-04-28 2013-01-09 奥林巴斯株式会社 图像处理装置和荧光观察装置
WO2014185172A1 (ja) * 2013-05-13 2014-11-20 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法、及びプログラム
WO2015060347A1 (ja) * 2013-10-25 2015-04-30 オリンパスメディカルシステムズ株式会社 内視鏡装置

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5570373B2 (ja) * 2010-09-29 2014-08-13 富士フイルム株式会社 内視鏡システム
JP5244164B2 (ja) * 2010-10-18 2013-07-24 富士フイルム株式会社 内視鏡装置
JP5258869B2 (ja) * 2010-12-13 2013-08-07 富士フイルム株式会社 内視鏡装置
JP5451802B2 (ja) * 2011-04-01 2014-03-26 富士フイルム株式会社 電子内視鏡システム及び電子内視鏡システムの校正方法
JP5363680B2 (ja) * 2011-09-22 2013-12-11 オリンパスメディカルシステムズ株式会社 医療機器
JP5379930B1 (ja) * 2012-03-06 2013-12-25 オリンパスメディカルシステムズ株式会社 内視鏡システム
CN102629967B (zh) * 2012-04-18 2014-03-19 山东神思电子技术股份有限公司 一种翻拍设备光照不均匀的校正方法
US20160249793A1 (en) * 2013-12-27 2016-09-01 Kang-Huai Wang Capsule Camera Device with Multi-Spectral Light Sources
DE102014208754A1 (de) * 2014-05-09 2015-11-12 Digital Endoscopy Gmbh Endoskopkopf mit zumindest zwei lichtquellen und endoskop mit diesem
JP2016016050A (ja) * 2014-07-07 2016-02-01 ソニー株式会社 画像処理装置および方法、プログラム、並びに内視鏡システム
JP6556013B2 (ja) * 2015-10-08 2019-08-07 キヤノン株式会社 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体
CN107123093A (zh) * 2016-12-07 2017-09-01 重庆微标科技股份有限公司 一种车辆图像的处理方法及装置
US10660549B2 (en) 2016-12-23 2020-05-26 Obschestvo S Ogranichennoi Otvetstvennostyu “Nauchno-Issledovatelsky Tsentr Prosoft-Sistemy” Palm vein imaging device
WO2018142658A1 (ja) * 2017-02-01 2018-08-09 オリンパス株式会社 画像処理装置、画像処理装置の作動方法、及び画像処理装置の作動プログラム

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62266028A (ja) * 1986-05-14 1987-11-18 株式会社東芝 内視鏡装置
JPH06319042A (ja) * 1993-05-10 1994-11-15 Toshiba Eng Co Ltd 画像処理装置
JPH09321998A (ja) * 1996-05-24 1997-12-12 Canon Inc 画像読取装置及び画像読取ユニット及び制御装置
JPH1075354A (ja) * 1996-04-17 1998-03-17 Fuji Photo Film Co Ltd フイルム画像入力装置及び方法
JP2002325729A (ja) * 2001-03-02 2002-11-12 Asahi Optical Co Ltd 自動調光機能を備えた電子内視鏡装置
JP2004167008A (ja) * 2002-11-20 2004-06-17 Olympus Corp 体内観察システム
WO2004096029A1 (ja) * 2003-04-25 2004-11-11 Olympus Corporation カプセル内視鏡およびカプセル内視鏡システム
JP2005080713A (ja) * 2003-09-04 2005-03-31 Olympus Corp カプセル型内視鏡
WO2005071372A1 (ja) * 2004-01-23 2005-08-04 Olympus Corporation 画像処理システム、カメラ
JP2005211231A (ja) * 2004-01-28 2005-08-11 Olympus Corp 信号処理装置及び内視鏡システム
JP3782093B2 (ja) 2001-07-26 2006-06-07 ギブン・イメージング・リミテツド 生体内撮像のための嚥下可能カプセル
JP2006246199A (ja) * 2005-03-04 2006-09-14 Fuji Photo Film Co Ltd 画像読取装置
WO2008105370A1 (ja) * 2007-02-26 2008-09-04 Olympus Medical Systems Corp. 観察装置および観察方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4819077A (en) 1986-05-14 1989-04-04 Kabushiki Kaisha Toshiba Color image processing system
JPH0997363A (ja) 1995-10-02 1997-04-08 Oki Electric Ind Co Ltd 硬貨撮像装置
JPH09138201A (ja) 1995-11-15 1997-05-27 Mitsubishi Electric Corp 表面検査装置
US7728845B2 (en) * 1996-02-26 2010-06-01 Rah Color Technologies Llc Color calibration of color image rendering devices
IL155046A (en) 2003-03-23 2013-12-31 Given Imaging Ltd Install in-body imaging capable of defining its location
AU2003240213A1 (en) 2002-06-24 2004-01-06 Ranbaxy Laboratories Limited Process for the preparation of robust formulations of valacyclovir hydrochloride tablets
JP4410989B2 (ja) * 2002-12-12 2010-02-10 キヤノン株式会社 画像処理装置及び画像復号処理装置
US7153259B2 (en) 2003-09-01 2006-12-26 Olympus Corporation Capsule type endoscope
JP4482021B2 (ja) 2004-01-23 2010-06-16 オリンパス株式会社 カメラ
JP4403397B2 (ja) * 2004-07-21 2010-01-27 ソニー株式会社 ユーザインタフェース提供装置
JP2007244590A (ja) 2006-03-15 2007-09-27 Olympus Medical Systems Corp 撮像システム

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62266028A (ja) * 1986-05-14 1987-11-18 株式会社東芝 内視鏡装置
JPH06319042A (ja) * 1993-05-10 1994-11-15 Toshiba Eng Co Ltd 画像処理装置
JPH1075354A (ja) * 1996-04-17 1998-03-17 Fuji Photo Film Co Ltd フイルム画像入力装置及び方法
JPH09321998A (ja) * 1996-05-24 1997-12-12 Canon Inc 画像読取装置及び画像読取ユニット及び制御装置
JP2002325729A (ja) * 2001-03-02 2002-11-12 Asahi Optical Co Ltd 自動調光機能を備えた電子内視鏡装置
JP3782093B2 (ja) 2001-07-26 2006-06-07 ギブン・イメージング・リミテツド 生体内撮像のための嚥下可能カプセル
JP2004167008A (ja) * 2002-11-20 2004-06-17 Olympus Corp 体内観察システム
WO2004096029A1 (ja) * 2003-04-25 2004-11-11 Olympus Corporation カプセル内視鏡およびカプセル内視鏡システム
JP2005080713A (ja) * 2003-09-04 2005-03-31 Olympus Corp カプセル型内視鏡
WO2005071372A1 (ja) * 2004-01-23 2005-08-04 Olympus Corporation 画像処理システム、カメラ
JP2005211231A (ja) * 2004-01-28 2005-08-11 Olympus Corp 信号処理装置及び内視鏡システム
JP2006246199A (ja) * 2005-03-04 2006-09-14 Fuji Photo Film Co Ltd 画像読取装置
WO2008105370A1 (ja) * 2007-02-26 2008-09-04 Olympus Medical Systems Corp. 観察装置および観察方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2338404A4

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102869294A (zh) * 2010-04-28 2013-01-09 奥林巴斯株式会社 图像处理装置和荧光观察装置
US9198564B2 (en) 2010-04-28 2015-12-01 Olympus Corporation Image processing device and fluoroscopy device
JP2013000175A (ja) * 2011-06-13 2013-01-07 Fujifilm Corp 内視鏡システム、プロセッサ装置及び画像補正方法
CN102833555A (zh) * 2011-06-17 2012-12-19 佳能株式会社 颜色处理设备和颜色处理方法
US9020249B2 (en) 2011-06-17 2015-04-28 Canon Kabushiki Kaisha Color processing apparatus and color processing method
WO2014185172A1 (ja) * 2013-05-13 2014-11-20 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法、及びプログラム
JP5870231B2 (ja) * 2013-05-13 2016-02-24 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法、及びプログラム
WO2015060347A1 (ja) * 2013-10-25 2015-04-30 オリンパスメディカルシステムズ株式会社 内視鏡装置
JP5855795B2 (ja) * 2013-10-25 2016-02-09 オリンパス株式会社 内視鏡装置
US9629530B2 (en) 2013-10-25 2017-04-25 Olympus Corporation Endoscope apparatus with color-balance measuring and color-balance correcting

Also Published As

Publication number Publication date
CN102186400A (zh) 2011-09-14
JPWO2010044483A1 (ja) 2012-03-15
EP2338404B1 (en) 2014-10-01
JP4589463B2 (ja) 2010-12-01
US20100265321A1 (en) 2010-10-21
CN102186400B (zh) 2013-09-04
EP2338404A1 (en) 2011-06-29
EP2338404A4 (en) 2012-06-20
US8018485B2 (en) 2011-09-13

Similar Documents

Publication Publication Date Title
JP4589463B2 (ja) 撮像装置
US7347817B2 (en) Polarized in vivo imaging device, system and method
US8390679B2 (en) Capsule endoscope device
US20110285895A1 (en) Image Sensing Device and Processing System
US20030028078A1 (en) In vivo imaging device, system and method
US20070282169A1 (en) Capsule endoscopic system and image processing apparatus
EP2124710B1 (en) Narrow band in-vivo imaging device
US10299665B2 (en) Imaging device and capsule endoscope system
JP4589464B2 (ja) 画像生成装置、内視鏡システム、および画像生成方法
US20170276847A1 (en) Imaging system
US20110080506A1 (en) Image sensing device and system
CN101043838A (zh) 胶囊型内窥镜系统以及胶囊型内窥镜
US8830310B2 (en) Capsule endoscope
KR20100076186A (ko) 인체 내 조명 및 이미지 획득 시스템과 그 방법
KR100852920B1 (ko) 내시경 및 그 작동방법
JP2010075513A (ja) 狭帯域画像取得方法および狭帯域画像取得システム
EP2334084A1 (en) Image sensing device and system
JP2006305322A (ja) カプセル内視鏡システム
TWI428108B (zh) 影像感測裝置及其處理系統
CN114216561A (zh) 多光谱成像方法与多光谱成像系统
WO2017221468A1 (ja) 被検体内導入装置、送信方法及びプログラム
JP5896877B2 (ja) 調光装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980141406.9

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2010515299

Country of ref document: JP

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09820657

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2009820657

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE