JP6021462B2 - 撮像モジュールおよび撮像装置 - Google Patents
撮像モジュールおよび撮像装置 Download PDFInfo
- Publication number
- JP6021462B2 JP6021462B2 JP2012140082A JP2012140082A JP6021462B2 JP 6021462 B2 JP6021462 B2 JP 6021462B2 JP 2012140082 A JP2012140082 A JP 2012140082A JP 2012140082 A JP2012140082 A JP 2012140082A JP 6021462 B2 JP6021462 B2 JP 6021462B2
- Authority
- JP
- Japan
- Prior art keywords
- narrowband
- imaging
- image information
- wavelength
- rgb
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 141
- 230000009467 reduction Effects 0.000 claims description 17
- 230000003287 optical effect Effects 0.000 claims description 10
- 238000001228 spectrum Methods 0.000 claims description 9
- BJQHLKABXJIVAM-UHFFFAOYSA-N bis(2-ethylhexyl) phthalate Chemical compound CCCCC(CC)COC(=O)C1=CC=CC=C1C(=O)OCC(CC)CCCC BJQHLKABXJIVAM-UHFFFAOYSA-N 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 238000003786 synthesis reaction Methods 0.000 claims 1
- 238000000034 method Methods 0.000 description 9
- 239000000203 mixture Substances 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 239000002131 composite material Substances 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- XUMBMVFBXHLACL-UHFFFAOYSA-N Melanin Chemical compound O=C1C(=O)C(C2=CNC3=C(C(C(=O)C4=C32)=O)C)=C2C4=CNC2=C1C XUMBMVFBXHLACL-UHFFFAOYSA-N 0.000 description 2
- 208000017520 skin disease Diseases 0.000 description 2
- 102000001554 Hemoglobins Human genes 0.000 description 1
- 108010054147 Hemoglobins Proteins 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 210000002615 epidermis Anatomy 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000035699 permeability Effects 0.000 description 1
- 239000012466 permeate Substances 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
- G02B13/0055—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/1032—Determining colour for diagnostic purposes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0208—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using focussing or collimating elements, e.g. lenses or mirrors; performing aberration correction
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/36—Investigating two or more bands of a spectrum by separate detectors
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
- G01J3/51—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters
- G01J3/513—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters having fixed filter-detector pairs
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/10—Beam splitting or combining systems
- G02B27/1006—Beam splitting or combining systems for splitting or combining different wavelengths
- G02B27/1013—Beam splitting or combining systems for splitting or combining different wavelengths for colour or multispectral image sensors, e.g. splitting an image into monochromatic image components on respective sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/749—Circuitry for compensating brightness variation in the scene by influencing the pick-up tube voltages
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0233—Special features of optical sensors or probes classified in A61B5/00
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
- G01J2003/2826—Multispectral imaging, e.g. filter imaging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/047—Picture signal generators using solid-state devices having a single pick-up sensor using multispectral pick-up elements
Landscapes
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Color Television Image Signal Generators (AREA)
- Spectrometry And Color Measurement (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Studio Devices (AREA)
Description
本発明は、撮像モジュールおよび撮像装置に関するものである。
従来、１６バンドのマルチスペクトルカメラによって、皮膚疾患等の特定スペクトルを抽出する技術が知られている（例えば、特許文献１参照。）。この技術によれば、人の眼で判別しにくい微妙な色の変化を捉えることができる。
しかしながら、特許文献１の技術においては、ＲＧＢカラー撮影用のデジタルカメラを用いて広帯域画像および狭帯域画像の撮影を行っており、ＲＧＢ画像は容易に得られるが、狭帯域画像については、複数色の照明を順次照射する必要があるため、撮影に時間がかかるという不都合がある。すなわち、動く被写体を撮影する場合には、ＲＧＢ画像と狭帯域画像との間あるいは狭帯域画像間で、被写体の形態が変化してしまうので、良好な合成画像を得ることができないという不都合がある。
本発明は、上述した事情に鑑みてなされたものであって、ＲＧＢ画像と１以上の狭帯域画像とを同時に撮影することができる撮像モジュールおよび撮像装置を提供することを目的としている。
上記目的を達成するために、本発明は以下の手段を提供する。
本発明の一態様は、結像面において結像された被写体からの光を集光するマイクロレンズアレイと、該マイクロレンズアレイにより集光された光のうち特定の波長帯域の光を通過させるフィルタと、該フィルタを通過した光を撮影する撮像素子とを備え、該撮像素子が、互いに同一の大きさを有する複数の色波長取得領域および複数の狭帯域波長取得領域を備えるとともに、１以上の前記色波長取得領域と１以上の前記狭帯域波長取得領域とを含むｎ行ｎ列（ｎは２以上の整数）の撮像領域ユニットを２次元的に複数配列してなり、前記フィルタが、前記複数の色波長取得領域の各々に対応してそれぞれ配置され、対応する前記色波長取得領域へＲＧＢ波長帯域の光を通過する複数のＲＧＢフィルタ部と、前記複数の狭帯域波長取得領域の各々に対応してそれぞれ配置され、対応する前記狭帯域波長取得領域へＲＧＢ波長帯域より狭い狭帯域波長の光を通過する複数の狭帯域フィルタ部とを備え、前記複数のＲＧＢフィルタ部と前記複数の狭帯域フィルタ部とを２次元的に配列してなり、前記マイクロレンズアレイが、各前記色波長取得領域に対応してそれぞれ配置された複数の第１のマイクロレンズと、各前記狭帯域波長取得領域に対応してそれぞれ配置された複数の第２のマイクロレンズとを備えるとともに、各前記第１のマイクロレンズが、前記結像面に結像された前記被写体からの光を１以上の前記色波長取得領域に到達させるように配置され、前記複数の撮像領域ユニットは、互いに同一の前記色波長取得領域および前記狭帯域波長取得領域の配列を有し、前記第１のマイクロレンズが、ｎ以上の縮小倍率を有する撮像モジュールである。
本発明の他の態様は、結像面において結像された被写体からの光を集光するマイクロレンズアレイと、該マイクロレンズアレイにより集光された光のうち特定の波長帯域の光を通過させるフィルタと、該フィルタを通過した光を撮影する撮像素子とを備え、前記フィルタが、ＲＧＢ波長帯域の光を通過する複数のＲＧＢフィルタ部と、ＲＧＢ波長帯域より狭い狭帯域波長の光を通過する複数の狭帯域フィルタ部とを配列してなり、前記撮像素子が、前記ＲＧＢフィルタ部を通過した光を撮影する複数の色波長取得領域と、前記狭帯域フィルタ部を通過した光を撮影する複数の狭帯域波長取得領域とを備え、前記マイクロレンズアレイが、各前記色波長取得領域に対応してそれぞれ配置された複数の第１のマイクロレンズと、各前記狭帯域波長取得領域に対応してそれぞれ配置された複数の第２のマイクロレンズとを備えるとともに、各前記第１のマイクロレンズが、前記結像面に結像された前記被写体からの光を１以上の前記色波長取得領域に到達させるように配置され、各前記色波長取得領域が、各前記狭帯域波長取得領域より大きく形成され、各前記第１のマイクロレンズが、各前記第２のマイクロレンズより小さな縮小倍率を有する撮像モジュールである。
本発明の一態様は、結像面において結像された被写体からの光を集光するマイクロレンズアレイと、該マイクロレンズアレイにより集光された光のうち特定の波長帯域の光を通過させるフィルタと、該フィルタを通過した光を撮影する撮像素子とを備え、該撮像素子が、互いに同一の大きさを有する複数の色波長取得領域および複数の狭帯域波長取得領域を備えるとともに、１以上の前記色波長取得領域と１以上の前記狭帯域波長取得領域とを含むｎ行ｎ列（ｎは２以上の整数）の撮像領域ユニットを２次元的に複数配列してなり、前記フィルタが、前記複数の色波長取得領域の各々に対応してそれぞれ配置され、対応する前記色波長取得領域へＲＧＢ波長帯域の光を通過する複数のＲＧＢフィルタ部と、前記複数の狭帯域波長取得領域の各々に対応してそれぞれ配置され、対応する前記狭帯域波長取得領域へＲＧＢ波長帯域より狭い狭帯域波長の光を通過する複数の狭帯域フィルタ部とを備え、前記複数のＲＧＢフィルタ部と前記複数の狭帯域フィルタ部とを２次元的に配列してなり、前記マイクロレンズアレイが、各前記色波長取得領域に対応してそれぞれ配置された複数の第１のマイクロレンズと、各前記狭帯域波長取得領域に対応してそれぞれ配置された複数の第２のマイクロレンズとを備えるとともに、各前記第１のマイクロレンズが、前記結像面に結像された前記被写体からの光を１以上の前記色波長取得領域に到達させるように配置され、前記複数の撮像領域ユニットは、互いに同一の前記色波長取得領域および前記狭帯域波長取得領域の配列を有し、前記第１のマイクロレンズが、ｎ以上の縮小倍率を有する撮像モジュールである。
本発明の他の態様は、結像面において結像された被写体からの光を集光するマイクロレンズアレイと、該マイクロレンズアレイにより集光された光のうち特定の波長帯域の光を通過させるフィルタと、該フィルタを通過した光を撮影する撮像素子とを備え、前記フィルタが、ＲＧＢ波長帯域の光を通過する複数のＲＧＢフィルタ部と、ＲＧＢ波長帯域より狭い狭帯域波長の光を通過する複数の狭帯域フィルタ部とを配列してなり、前記撮像素子が、前記ＲＧＢフィルタ部を通過した光を撮影する複数の色波長取得領域と、前記狭帯域フィルタ部を通過した光を撮影する複数の狭帯域波長取得領域とを備え、前記マイクロレンズアレイが、各前記色波長取得領域に対応してそれぞれ配置された複数の第１のマイクロレンズと、各前記狭帯域波長取得領域に対応してそれぞれ配置された複数の第２のマイクロレンズとを備えるとともに、各前記第１のマイクロレンズが、前記結像面に結像された前記被写体からの光を１以上の前記色波長取得領域に到達させるように配置され、各前記色波長取得領域が、各前記狭帯域波長取得領域より大きく形成され、各前記第１のマイクロレンズが、各前記第２のマイクロレンズより小さな縮小倍率を有する撮像モジュールである。
本態様によれば、被写体からの光は、結像面において一旦結像された後に、マイクロレンズアレイに入射されて集光され、フィルタを通過して撮像素子により撮影される。マイクロレンズアレイの内、複数の第１のマイクロレンズにより集光された光は、それぞれＲＧＢフィルタ部を通過させられた後に撮像素子の色波長取得領域により撮影される。一方、複数の第２のマイクロレンズにより集光された光は、それぞれ狭帯域フィルタ部を通過させられた後に撮像素子の狭帯域波長取得領域により撮影される。
したがって、色波長取得領域により取得された情報に基づいて、被写体のＲＧＢ画像を生成することができ、狭帯域波長取得領域により取得された情報に基づいて、被写体の狭帯域画像を生成することが可能となる。すなわち、被写体のＲＧＢ画像と狭帯域画像とを同時に取得することができ、これらを合成する場合に、動きのある被写体であってもブレのない鮮明な画像を取得することができる。
この場合において、結像面に結像された光は、いずれかの第１のマイクロレンズを通過して、いずれかの色波長取得領域に入射されるので、情報の欠落のないＲＧＢ画像を取得することができる。
本発明によれば、ＲＧＢ画像と１以上の狭帯域画像とを同時に撮影することができるという効果を奏する。
本発明の一実施形態に係る撮像モジュール１および撮像装置１０について、図面を参照して以下に説明する。
本実施形態に係る撮像モジュール１は、図１に示されるように、マイクロレンズアレイ２と、フィルタ３と、撮像素子４とを備えている。
本実施形態に係る撮像モジュール１は、図１に示されるように、マイクロレンズアレイ２と、フィルタ３と、撮像素子４とを備えている。
撮像素子４は、図２に示されるように、ｍ×ｎ個の撮像領域ユニット（ＰｉＱｊ：ｉ＝１〜ｍ、ｊ＝１〜ｎ、ｍ，ｎは整数。）に分けられ、各撮像領域ユニットＰｉＱｊはさらに、図３に示されるように３×３＝９個の部分領域４ａ，４ｂに分けられている。各部分領域４ａ，４ｂには、これらの部分領域４ａ，４ｂに対応してマイクロレンズ（第１のマイクロレンズ２ａ、第２のマイクロレンズ２ｂ）が配置されている。
図３に示す例では、撮像素子４の全ての撮像領域ユニットＰｉＱｊにおいて、中央の部分領域４ａが、ＲＧＢ波長帯域の光を撮影する色波長取得領域（以下、色波長取得領域４ａとも言う。）であり、該色波長取得領域４ａの周囲の８個の部分領域４ｂが、ＲＧＢ波長帯域より十分に狭い８種類の波長帯域λ１〜λ８の光をそれぞれ撮影する狭帯域波長取得領域（以下、狭帯域波長取得領域４ｂとも言う。）である。なお、各撮像領域ユニットＰｉＱｊにおいて色波長取得領域４ａは中央に配置されている必要はなく、任意の位置に配置されていてもよい。
マイクロレンズアレイ２は、上述したように、撮像素子４の全ての部分領域４ａ，４ｂに対応して配列された同一の光学特性を有する複数のマイクロレンズ２ａ，２ｂを備えている。各部分領域４ａ，４ｂが、例えば、５０×５０画素により構成されているとすれば、１２００万画素の撮像素子４を用いる場合には、ｍ≒２６、ｎ＝２０となり、マイクロレンズ２ａ，２ｂの総数は、２６×２０×３×３＝４６８０個となる。
マイクロレンズアレイ２を構成する各マイクロレンズ２ａ，２ｂは、図１に示されるように、３倍の縮小倍率を有している。そして、後述する撮像レンズの結像面Ａと撮像素子４の撮像面Ｂとの間に、撮像面Ｂとの間の距離ｄ、結像面Ａとの距離３ｄをあけて配置されている。
フィルタ３は、撮像素子４の色波長取得領域４ａを覆うＲＧＢフィルタ部３ａと、他の８個の狭帯域波長取得領域４ｂの各々を覆う狭帯域フィルタ部３ｂ１〜３ｂ８とを備えている。
ＲＧＢフィルタ部３ａは、図５に示されるように、隣接する２×２個の画素に対して、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の色フィルタを配置した、いわゆるＲＧＢベイヤ配列のフィルタである。各色フィルタは、図４に示されるように、比較的広波長帯域にわたる光を透過させるように構成されている。
ＲＧＢフィルタ部３ａは、図５に示されるように、隣接する２×２個の画素に対して、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の色フィルタを配置した、いわゆるＲＧＢベイヤ配列のフィルタである。各色フィルタは、図４に示されるように、比較的広波長帯域にわたる光を透過させるように構成されている。
狭帯域フィルタ部３ｂ１〜３ｂ８は、平行間隔をあけて配置された２つの平面に反射膜（図示略）が設けられた、いわゆる、エタロンと呼ばれる分光フィルタであり、図４に示されるように、極めて狭い波長帯域λ１〜λ８の光を選択的に透過することができ、反射膜の間隔によって、透過する波長帯域を異ならせることができるようになっている。８個の狭帯域波長取得領域４ｂに配置される各狭帯域フィルタ部３ｂ１〜３ｂ８は、例えば、反射膜の間隔を異ならせることにより、波長帯域λ１〜λ８の異なる光をそれぞれ透過させるようになっている。
このように構成された本実施形態に係る撮像モジュール１の作用について、以下に説明する。
本実施形態に係る撮像モジュール１によれば、３×３個の部分領域４ａ，４ｂからなる撮像領域ユニットＰｉＱｊが行方向および列方向に繰り返して配列されているので、同一の波長帯域の光を透過させる同種のフィルタ部３ａ，３ｂ１〜３ｂ８は、いずれも、行方向および列方向のいずれに対しても３個毎の周期で配置されている。そして、マイクロレンズ２ａ，２ｂの縮小倍率が３倍に設定されているので、図１に示されるように、撮像レンズの結像面Ａに結像された被写体からの光は、全ての種類のフィルタ部３ａ，３ｂ１〜３ｂ８に対して、いずれかの波長取得領域４ａ，４ｂに到達する（図１では、波長帯域λ３，λ６およびＲＧＢについて表示し、他を省略している。）。
本実施形態に係る撮像モジュール１によれば、３×３個の部分領域４ａ，４ｂからなる撮像領域ユニットＰｉＱｊが行方向および列方向に繰り返して配列されているので、同一の波長帯域の光を透過させる同種のフィルタ部３ａ，３ｂ１〜３ｂ８は、いずれも、行方向および列方向のいずれに対しても３個毎の周期で配置されている。そして、マイクロレンズ２ａ，２ｂの縮小倍率が３倍に設定されているので、図１に示されるように、撮像レンズの結像面Ａに結像された被写体からの光は、全ての種類のフィルタ部３ａ，３ｂ１〜３ｂ８に対して、いずれかの波長取得領域４ａ，４ｂに到達する（図１では、波長帯域λ３，λ６およびＲＧＢについて表示し、他を省略している。）。
その結果、隣接する同種の波長取得領域４ａ，４ｂに結像される被写体の部分像に欠落が生ずることを防止することができる。すなわち、各色波長取得領域４ａにより取得された被写体の部分像を合成することにより、撮像レンズの結像面Ａに結像された被写体の像全体の欠落のないＲＧＢ画像信号を取得することができる。また、波長帯域λ１〜λ８の各狭帯域波長取得領域４ｂにより取得された被写体の部分像を合成することにより、撮像レンズの結像面Ａに結像された被写体の像全体の８種類の欠落のない狭帯域画像信号を取得することができる。
そして、本実施形態に係る撮像モジュール１によれば、撮像レンズの結像面Ａに結像された被写体の像をマイクロレンズアレイ２によって複数の部分像に分割し、撮像素子４の複数の波長取得領域４ａ，４ｂによって多重に取得するので、被写体のＲＧＢ画像と狭帯域画像とを同時に取得することができる、その結果、これらＲＧＢ画像と狭帯域画像とを合成する場合に、動きのある被写体であってもブレのない鮮明な画像を取得することができるという利点がある。
次に、上記実施形態に係る撮像モジュール１を備えた撮像装置１０について図面を参照して以下に説明する。
本実施形態に係る撮像装置１０は、図６に示されるように、被写体からの光を集光して結像面Ａに結像させる撮像レンズ１１と、上記撮像モジュール１と、画像処理部１２と、ファインダ１３と、モニタ１４と、観察条件設定部１５とを備えている。
本実施形態に係る撮像装置１０は、図６に示されるように、被写体からの光を集光して結像面Ａに結像させる撮像レンズ１１と、上記撮像モジュール１と、画像処理部１２と、ファインダ１３と、モニタ１４と、観察条件設定部１５とを備えている。
画像処理部１２は、撮像モジュール１の撮像素子４により取得されたアナログ信号からなる画像信号をデジタル信号に変換するＡ／Ｄ変換器１６と、撮像素子４の同種の波長取得領域４ａ，４ｂにより取得された画像信号を結合して、ＲＧＢ画像情報と、８個の狭帯域画像情報とを生成する画像結合処理部（ＲＧＢ画像情報生成部、狭帯域画像情報生成部）１７と、生成された画像情報を一時記憶するバッファ１８と、該バッファ１８に記憶された画像情報を用いて、表示用の画像情報を生成する表示画像生成部１９とを備えている。
表示画像生成部１９は、ＲＧＢ画像情報を処理するＲＧＢ画像処理部２０と、該ＲＧＢ画像処理部２０において処理されたＲＧＢ画像情報と狭帯域画像情報とを合成する狭帯域画像処理部２１とを備えている。
観察条件設定部１５は、撮像素子４による画角や露出等の撮影条件や、８個の狭帯域画像情報のうちのいずれの波長帯域λ１〜λ８の狭帯域画像情報を合成するか等の観察条件を観察者によって指定させるようになっている。
観察条件設定部１５は、撮像素子４による画角や露出等の撮影条件や、８個の狭帯域画像情報のうちのいずれの波長帯域λ１〜λ８の狭帯域画像情報を合成するか等の観察条件を観察者によって指定させるようになっている。
ＲＧＢ画像処理部２０は、図７に示されるように、バッファ１８から送られてきたＲＧＢ画像情報に対してホワイトバランス補正処理を行うホワイトバランス補正部２２と、デモザイキング処理を行うＲＧＢデモザイキング部２３と、階調補正処理を行う階調補正部２４と、色補正処理を行う色補正部２５と、ノイズ除去処理を行うノイズ除去処理部２６とを備えている。ＲＧＢ画像処理部２０において処理されたＲＧＢ画像情報は、ファインダ１３および狭帯域画像処理部２１に出力されるようになっている。
狭帯域画像処理部２１は、観察条件設定部１５によって指定された波長帯域の狭帯域画像情報を選択する波長選択部２７と、該波長選択部２７において選択された狭帯域画像情報とＲＧＢ画像処理部２０から入力されてきたＲＧＢ画像情報とを合成する画像合成部２８とを備えている。
画像合成部２８において生成された合成画像は、モニタ１４に出力されるようになっている。
画像合成部２８において生成された合成画像は、モニタ１４に出力されるようになっている。
ファインダ１３は、例えば、電子ビューファインダであって、図示しない接眼部に設けられていて、ＲＧＢ画像処理部２０から送られてきたＲＧＢ画像を観察者の眼に提示するようになっている。
このように構成された本実施形態に係る撮像装置１０の作用について以下に説明する。
本実施形態に係る撮像装置１０によれば、撮像レンズ１１によって集光された被写体からの光は、結像面Ａにおいて結像された後、撮像モジュール１のマイクロレンズアレイ２によって集光され、撮像素子４の複数の波長取得領域４ａ，４ｂによって、相互に重複した被写体の部分画像信号として取得される。
本実施形態に係る撮像装置１０によれば、撮像レンズ１１によって集光された被写体からの光は、結像面Ａにおいて結像された後、撮像モジュール１のマイクロレンズアレイ２によって集光され、撮像素子４の複数の波長取得領域４ａ，４ｂによって、相互に重複した被写体の部分画像信号として取得される。
撮像素子４により取得された被写体の部分画像信号は、Ａ／Ｄ変換器１６によってデジタル信号に変換された後、画像結合処理部１７において、該部分画像信号を取得した波長取得領域毎に結合されて、ＲＧＢ画像情報および８個の狭帯域画像情報が生成される。画像結合処理部１７において生成されたＲＧＢ画像情報は、表示画像生成部１９内のＲＧＢ画像処理部２０に送られて、種々の処理を施され、表示用のＲＧＢ画像情報が生成される。生成されたＲＧＢ画像情報はファインダ１３および狭帯域画像処理部２１に送られる。
一方、画像結合処理部１７において生成された狭帯域画像情報は、表示画像生成部１９内の狭帯域画像処理部２１に送られる。
ファインダ１３に送られたＲＧＢ画像情報がファインダ１３に表示されることにより、観察者が画角や露出等の撮影条件を調節することができる。また、観察者は、観察条件設定部１５を介して、ＲＧＢ画像に重畳して観察したい波長帯域λ１〜λ８のいずれかを選択する。
ファインダ１３に送られたＲＧＢ画像情報がファインダ１３に表示されることにより、観察者が画角や露出等の撮影条件を調節することができる。また、観察者は、観察条件設定部１５を介して、ＲＧＢ画像に重畳して観察したい波長帯域λ１〜λ８のいずれかを選択する。
観察条件設定部１５においては、ＲＧＢ画像に重畳して観察したい狭帯域画像の波長帯域の選択の他、狭帯域画像を重畳しないＲＧＢ画像を観察するか、ＲＧＢ画像を重畳することなく、選択した狭帯域画像のみを観察するか等を指定することができるようになっている。
観察条件設定部１５は、撮像モジュール１を制御する撮像制御部２９にも接続され、観察者が、観察条件設定部１５を介して観察条件を設定すると、撮像制御部２９が、設定された観察条件で被写体を撮影するように撮像モジュール１を制御し、ＲＧＢ画像信号および狭帯域画像信号が取得される。取得されたＲＧＢ画像信号および狭帯域画像信号は、Ａ／Ｄ変換器１６によってデジタル信号に変換された後、画像結合処理部１７においてＲＧＢ画像情報および８個の狭帯域画像情報が生成され、表示画像生成部１９に送られる。
表示画像生成部１９においては、ＲＧＢ画像処理部２０においてＲＧＢ画像情報が処理されてファインダ１３に送られるとともに、狭帯域画像処理部２１に送られる。また、狭帯域画像処理部２１においては、観察条件設定部１５において、重畳すべき狭帯域画像情報の波長帯域が指定されている場合には、指定された波長帯域に対応する狭帯域画像情報が波長選択部２７において選択される。
そして、画像合成部２８においては、波長選択部２７において選択された狭帯域画像情報に、例えば、強調のための着色処理が施されて、ＲＧＢ画像処理部２０から送られてきたＲＧＢ画像情報が合成される。画像合成部２８において合成された合成画像はモニタ１４に出力されて表示される。
図８（ａ）に、ＲＧＢ画像のみを表示した場合、図８（ｂ）にＲＧＢ画像に、所定の波長帯域（例えば、中心波長５５０ｎｍ、波長幅１０ｎｍ）の狭帯域画像を強調して重畳した場合のそれぞれの概念図を示す。図８（ａ）のＲＧＢ画像のみでは鮮明ではなかった手の甲の皮膚疾患が、図８（ｂ）では鮮明に可視化されている。
この場合において、本実施形態に係る撮像装置１０によれば、ＲＧＢ画像情報を構成しているＲＧＢ画像信号と、狭帯域画像情報を構成している狭帯域画像信号とが撮像モジュール１によって同時に取得されているので、これらの画像情報が重畳されても、画像間の位置ズレが発生せず、ブレのない鮮明な合成画像を得ることができるという利点がある。また、本実施形態に係る撮像装置１０によれば、上記撮像モジュール１によって、ＲＧＢ画像情報も狭帯域画像情報も欠落なく取得されているので、被写体の情報を見落とすことなく観察することができるという利点がある。
なお、本実施形態に係る撮像モジュール１においては、全てのマイクロレンズ２ａ，２ｂを同一の光学特性を有するものとして、縮小倍率を３倍に設定したが、これに代えて、図９に示されるように３より若干大きな縮小倍率、例えば、３．１倍（これに限定されるものではない。）としてもよい。このようにすることで、同種の波長取得領域４ａ，４ｂにより取得される被写体の像に相互に重複する部分を持たせることができ、さらに確実に像の欠落を防止することができる。
また、本実施形態に係る撮像装置１０においては、表示画像生成部１９に備えられる狭帯域画像処理部２１が、ＲＧＢ画像情報と、選択された狭帯域画像情報とを重畳するように合成する画像合成部２８を有するものを例示した。この画像合成部２８に代えて、ＲＧＢ画像情報と狭帯域画像情報とをモニタ１４に切り替えて出力する画像切替部（図示略）を有するものを採用してもよい。このようにすることで、動きのある被写体を撮影する場合であっても、切り替えた画像間で位置ズレを発生することなく観察することができる。
また、上記撮像装置１０においては、狭帯域画像処理部２１内の波長選択部２７が単一の狭帯域画像情報を選択することとしたが、これに代えて、複数の狭帯域画像情報を選択し、画像合成部２８において合成することにしてもよい。例えば、表皮のメラニン画像やヘモグロビン画像等を生成したい場合、複数種類の狭帯域画像を合成して生成することができる。
また、画像合成部２８として、ＲＧＢ画像情報と狭帯域画像情報とを重畳した合成画像を生成する場合を例示したが、並列に表示されるように合成するものを採用してもよい。
また、本実施形態においては、撮像モジュール１が８個の狭帯域画像を取得することとしたが、図１０に示されるように、狭帯域画像処理部２１が、取得された８個の波長帯域の狭帯域画像から各画素における他の波長帯域における画素値を推定するスペクトル推定部３０を有していてもよい。
また、本実施形態においては、撮像モジュール１が８個の狭帯域画像を取得することとしたが、図１０に示されるように、狭帯域画像処理部２１が、取得された８個の波長帯域の狭帯域画像から各画素における他の波長帯域における画素値を推定するスペクトル推定部３０を有していてもよい。
すなわち、スペクトル推定部３０は、各画素において、８個の異なる波長帯域の画素値を元に他の波長帯域における画素値を推定するので、波長選択部２７において、８個の波長帯域以外の波長帯域を指定しても、スペクトル推定部３０により推定された画素値を用いて、他の指定された波長帯域の狭帯域画像を選択することができる。
また、本実施形態においては、全てのマイクロレンズ２ａ，２ｂが同一の光学特性を有する場合を例示して説明したが、図１１に示されるように、４×４＝１６個の部分領域４ａ，４ｂからなる撮像領域ユニットＰｉＱｊを採用し、色波長取得領域４ａを狭帯域波長取得領域４ｂの４倍の広さとなるように設定し、色波長取得領域４ａに対応するマイクロレンズ（第１のマイクロレンズ）２ａと、狭帯域波長取得領域４ｂに対応するマイクロレンズ（第２のマイクロレンズ）２ｂとで異なる光学特性のものを採用してもよい。
このようにすることで、色波長取得領域４ａとして、撮像素子４全体の１／４の画素を使用することができ、図３の場合に撮像素子４全体の１／９の画素を使用していたのと比較して、取得されるＲＧＢ画像の解像度を向上することができる。すなわち、より高解像度のＲＧＢ画像を取得することが可能となる。
そして、この場合に、第１のマイクロレンズ２ａとしては、図１２に示されるように、２倍の縮小倍率を有するものを採用することで、欠落のないＲＧＢ画像を取得することができる。
そして、この場合に、第１のマイクロレンズ２ａとしては、図１２に示されるように、２倍の縮小倍率を有するものを採用することで、欠落のないＲＧＢ画像を取得することができる。
一方、第２のマイクロレンズ２ｂとして、２倍の縮小倍率を有するものを使用したのでは欠落が発生してしまうので、４倍の縮小倍率を有するものを採用する必要がある。このようにすると、図１２に示されるように、第１のマイクロレンズ２ａの焦点位置を撮像レンズ１１の結像面Ａに一致させると、ＲＧＢ画像としては被写体にピントの合った画像を取得することができるが、その場合には、第２のマイクロレンズ２ｂの焦点位置は結像面Ａからずれた他の平面Ｃに配置されてしまい、狭帯域画像はピントのずれたものとなってしまう。
このような構成も、蛍光観察のように高い解像度を要求されず、信号の有無を検出することが必要な場合には採用することができる。また、狭帯域波長取得領域４ｂは撮像素子４全体の１／１６となり、色波長取得領域４ａと比較して１／４の解像度となっているが、蛍光観察等の高い解像度が必要とされない用途では有効である。
しかし、狭帯域画像としてもピントの合った画像を取得することが好ましい場合には、図１３または図１４に示されるように、第１のマイクロレンズ２ａと第２のマイクロレンズ２ｂとで撮像素子４に対する光軸方向の位置関係を異ならせて、それぞれ、２倍と４倍の縮小倍率を達成しつつ、焦点位置を共通の撮像レンズ１１の結像面Ａに一致させることにすればよい。
すなわち、図１３に示す例では、第１，第２のマイクロレンズ２ａ，２ｂの光軸方向位置は揃えておき、撮像素子４の撮像面Ｂに段差を設け、色波長取得領域４ａと狭帯域波長取得領域４ｂとで光軸方向位置を異ならせることにしている。一方、図１４に示す例では、撮像素子４の撮像面Ｂの位置を揃えておき、第１のマイクロレンズ２ａと第２のマイクロレンズ２ｂの光軸方向位置を異ならせることにしている。
このようにすることで、縮小倍率が大きく焦点距離が短い第２のマイクロレンズを撮像面に近接させて、ピントのあった狭帯域画像を取得することが可能となる。また、図１３のようにマイクロレンズ２ａ，２ｂの光軸方向位置を揃えることにより製造を容易にすることができる。
また、上記各実施形態においては、狭帯域波長取得領域４ｂを覆う位置に配置された狭帯域フィルタ部３ｂ１〜３ｂ１２として、エタロンを例示したが、エタロンは光の入射角に応じて透過する波長が変化するので、可能な限り９０°に近い入射角で入射させることが好ましい。これを達成するために、図１５に示されるようにマイクロレンズ２ａ，２ｂと狭帯域フィルタ部３ｂ１〜３ｂ８との間に絞り３１を設け、フィルタ３に入射する光の入射角が９０°に近い光のみを入射させることにしてもよい。これにより、狭帯域フィルタ部３ｂ１〜３ｂ１２に入射する光の入射角度を９０°に近づけることができ、所望の波長帯域の光を精度よく通過させることが可能となる。
また、別の方法として、図１６に示されるように、マイクロレンズ２ａ，２ｂとして被写体からの光をコリメートして略平行光としてフィルタ３に入射させるものを採用してもよい。これによってもフィルタ３への光の入射角を略９０°に設定することができる。
また、本実施形態に係る撮像モジュール１においては、３×３の部分領域４ａ，４ｂからなる撮像領域ユニットＰｉＱｊおよび４×４の部分領域４ａからなる撮像領域ユニットＰｉＱｊを例示したが、一般的には、ｎ×ｎ（ｎは２以上の整数）の部分領域４ａ，４ｂからなる撮像領域ユニットＰｉＱｊを繰り返し配列することにしてもよい。そして、撮像素子４全体の１／ｎ２の大きさの部分領域４ａ，４ｂに対応するマイクロレンズ２ａ，２ｂを採用する場合には、マイクロレンズ２ａ，２ｂの縮小倍率としてｎ倍の縮小倍率を採用すれば、欠落のない画像を取得することができ、ｎより大きい縮小倍率のマイクロレンズ２ａ，２ｂを採用することで、隣接する同種の波長取得領域４ａ，４ｂによって取得される画像どうしを部分的に重複させて、さらに確実に画像の欠落防止を図ることができる。
また、本実施形態においては、ＲＧＢ画像信号および狭帯域画像信号の両方とも欠落のない信号を取得する場合について例示したが、ＲＧＢ画像信号のみの欠落防止を図り、狭帯域画像信号においては欠落の発生を容認してもよい。
また、本発明に係る撮像装置１０としては、図６および図７に示される全ての構成を有している必要はなく、撮像モジュール１と画像結合処理部１７と、画像合成部２８とを最低限備えていれば、本発明の作用効果を達成することができる。また、画像合成部２８に代えて、画像切替部を備えていても、本発明の作用効果を達成することができる。
Ａ 結像面
１ 撮像モジュール
２ マイクロレンズアレイ
２ａ 第１のマイクロレンズ
２ｂ 第２のマイクロレンズ
３ フィルタ
３ａ ＲＧＢフィルタ部
３ｂ１〜３ｂ１２ 狭帯域フィルタ部
４ 撮像素子
４ａ 色波長取得領域
４ｂ 狭帯域波長取得領域
１０ 撮像装置
１５ 観察条件設定部
１７ 画像結合処理部（ＲＧＢ画像情報生成部、狭帯域画像情報生成部）
２８ 画像合成部
３０ スペクトル推定部
３１ 絞り
１ 撮像モジュール
２ マイクロレンズアレイ
２ａ 第１のマイクロレンズ
２ｂ 第２のマイクロレンズ
３ フィルタ
３ａ ＲＧＢフィルタ部
３ｂ１〜３ｂ１２ 狭帯域フィルタ部
４ 撮像素子
４ａ 色波長取得領域
４ｂ 狭帯域波長取得領域
１０ 撮像装置
１５ 観察条件設定部
１７ 画像結合処理部（ＲＧＢ画像情報生成部、狭帯域画像情報生成部）
２８ 画像合成部
３０ スペクトル推定部
３１ 絞り
Claims (12)
- 結像面において結像された被写体からの光を集光するマイクロレンズアレイと、
該マイクロレンズアレイにより集光された光のうち特定の波長帯域の光を通過させるフィルタと、
該フィルタを通過した光を撮影する撮像素子とを備え、
該撮像素子が、互いに同一の大きさを有する複数の色波長取得領域および複数の狭帯域波長取得領域を備えるとともに、１以上の前記色波長取得領域と１以上の前記狭帯域波長取得領域とを含むｎ行ｎ列（ｎは２以上の整数）の撮像領域ユニットを２次元的に複数配列してなり、
前記フィルタが、前記複数の色波長取得領域の各々に対応してそれぞれ配置され、対応する前記色波長取得領域へＲＧＢ波長帯域の光を通過する複数のＲＧＢフィルタ部と、前記複数の狭帯域波長取得領域の各々に対応してそれぞれ配置され、対応する前記狭帯域波長取得領域へＲＧＢ波長帯域より狭い狭帯域波長の光を通過する複数の狭帯域フィルタ部とを備え、前記複数のＲＧＢフィルタ部と前記複数の狭帯域フィルタ部とを２次元的に配列してなり、
前記マイクロレンズアレイが、各前記色波長取得領域に対応してそれぞれ配置された複数の第１のマイクロレンズと、各前記狭帯域波長取得領域に対応してそれぞれ配置された複数の第２のマイクロレンズとを備えるとともに、各前記第１のマイクロレンズが、前記結像面に結像された前記被写体からの光を１以上の前記色波長取得領域に到達させるように配置され、
前記複数の撮像領域ユニットは、互いに同一の前記色波長取得領域および前記狭帯域波長取得領域の配列を有し、
前記第１のマイクロレンズが、ｎ以上の縮小倍率を有する撮像モジュール。 - 前記第１のマイクロレンズと前記第２のマイクロレンズとが同一の光学特性を有する請求項１に記載の撮像モジュール。
- 各前記撮像領域ユニットが、１個の前記色波長取得領域と、（ｎ２−１）個の前記狭帯域波長取得領域とをｎ行ｎ列に正方配列してなり、
前記第１のマイクロレンズと前記第２のマイクロレンズとが、１：（ｎ２−１）の割合で配列されている請求項１または請求項２に記載の撮像モジュール。
ここで、ｎは２以上の整数である。 - 前記第１のマイクロレンズが、ｎより大きい縮小倍率を有する請求項３に記載の撮像モジュール。
- 結像面において結像された被写体からの光を集光するマイクロレンズアレイと、
該マイクロレンズアレイにより集光された光のうち特定の波長帯域の光を通過させるフィルタと、
該フィルタを通過した光を撮影する撮像素子とを備え、
前記フィルタが、ＲＧＢ波長帯域の光を通過する複数のＲＧＢフィルタ部と、ＲＧＢ波長帯域より狭い狭帯域波長の光を通過する複数の狭帯域フィルタ部とを配列してなり、
前記撮像素子が、前記ＲＧＢフィルタ部を通過した光を撮影する複数の色波長取得領域と、前記狭帯域フィルタ部を通過した光を撮影する複数の狭帯域波長取得領域とを備え、
前記マイクロレンズアレイが、各前記色波長取得領域に対応してそれぞれ配置された複数の第１のマイクロレンズと、各前記狭帯域波長取得領域に対応してそれぞれ配置された複数の第２のマイクロレンズとを備えるとともに、各前記第１のマイクロレンズが、前記結像面に結像された前記被写体からの光を１以上の前記色波長取得領域に到達させるように配置され、
各前記色波長取得領域が、各前記狭帯域波長取得領域より大きく形成され、
各前記第１のマイクロレンズが、各前記第２のマイクロレンズより小さな縮小倍率を有する撮像モジュール。 - 各前記第１のマイクロレンズが、各前記第２のマイクロレンズより、前記撮像素子の撮像面から離間した位置に配置されている請求項５に記載の撮像モジュール。
- 各前記色波長取得領域に対応する前記撮像素子の撮像面と、各前記狭帯域波長取得領域に対応する前記撮像素子の撮像面との間に段差がある請求項６に記載の撮像モジュール。
- 前記狭帯域フィルタ部が、エタロンからなり、
各前記第２のマイクロレンズと各前記狭帯域フィルタ部との間に配置され、各前記狭帯域フィルタ部に入射する光の入射角度を略９０°に制限する絞りを備える請求項１から請求項７のいずれかに記載の撮像モジュール。 - 前記狭帯域フィルタ部が、エタロンからなり、
各前記第２のマイクロレンズが、被写体からの光を集光して、略平行光として前記狭帯域フィルタ部に入射させる請求項１から請求項８のいずれかに記載の撮像モジュール。 - 請求項１から請求項９のいずれかに記載の撮像モジュールと、
該撮像モジュールの複数の前記色波長取得領域によって取得された画像情報を合成してＲＧＢ画像情報を生成するＲＧＢ画像情報生成部と、
前記撮像モジュールの複数の前記狭帯域波長取得領域によって取得された画像情報を合成して狭帯域画像情報を生成する狭帯域画像情報生成部と、
該狭帯域画像情報生成部により生成された狭帯域画像情報と、前記ＲＧＢ画像情報生成部により生成されたＲＧＢ画像情報とを合成する画像合成部とを備える撮像装置。 - 請求項１から請求項９のいずれかに記載の撮像モジュールと、
該撮像モジュールの複数の前記色波長取得領域によって取得された画像情報を合成してＲＧＢ画像情報を生成するＲＧＢ画像情報生成部と、
前記撮像モジュールの複数の前記狭帯域波長取得領域によって取得された画像情報を合成して狭帯域画像情報を生成する狭帯域画像情報生成部と、
該狭帯域画像情報生成部により生成された狭帯域画像情報と、前記ＲＧＢ画像情報生成部により生成されたＲＧＢ画像情報とを切り替えて出力する画像切替部とを備える撮像装置。 - 前記狭帯域画像情報生成部が、前記撮像モジュールの前記狭帯域波長取得領域によって同一の画素に対して取得された複数の波長帯域の画像情報に基づいて各画素における画素値のスペクトルを推定するスペクトル推定部と、観察したい波長帯域を設定する観察条件設定部とを備え、該観察条件設定部において設定された波長帯域の画素値を、前記スペクトル推定部において推定されたスペクトルから各画素について選択することにより狭帯域画像情報を生成する請求項１０または請求項１１に記載の撮像装置。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012140082A JP6021462B2 (ja) | 2012-06-21 | 2012-06-21 | 撮像モジュールおよび撮像装置 |
| PCT/JP2013/063966 WO2013190938A1 (ja) | 2012-06-21 | 2013-05-20 | 撮像モジュールおよび撮像装置 |
| US14/549,315 US9494768B2 (en) | 2012-06-21 | 2014-11-20 | Image capturing module and image capturing apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012140082A JP6021462B2 (ja) | 2012-06-21 | 2012-06-21 | 撮像モジュールおよび撮像装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014006079A JP2014006079A (ja) | 2014-01-16 |
| JP6021462B2 true JP6021462B2 (ja) | 2016-11-09 |
Family
ID=49768543
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012140082A Active JP6021462B2 (ja) | 2012-06-21 | 2012-06-21 | 撮像モジュールおよび撮像装置 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9494768B2 (ja) |
| JP (1) | JP6021462B2 (ja) |
| WO (1) | WO2013190938A1 (ja) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104154996A (zh) * | 2014-07-10 | 2014-11-19 | 中国科学院西安光学精密机械研究所 | 便携式快照型阵列多光谱成像仪 |
| US9661193B2 (en) * | 2014-08-01 | 2017-05-23 | Panasonic Intellectual Property Management Co., Ltd. | Imaging apparatus and analyzing apparatus |
| JP6456983B2 (ja) * | 2015-02-03 | 2019-01-23 | 株式会社日立ハイテクノロジーズ | 多色検出装置 |
| WO2017026296A1 (ja) * | 2015-08-10 | 2017-02-16 | 株式会社リコー | 試料測定装置 |
| CN105675136B (zh) * | 2016-03-22 | 2018-10-16 | 深圳先进技术研究院 | 一种编码孔径光谱成像系统 |
| CN105852784A (zh) * | 2016-04-22 | 2016-08-17 | 深圳先进技术研究院 | 一种多谱医用内窥镜镜头及系统 |
| KR20190015378A (ko) * | 2016-06-03 | 2019-02-13 | 쓰리엠 이노베이티브 프로퍼티즈 컴파니 | 공간적으로 변하는 미세복제된 층을 갖는 광학 필터 |
| WO2017217261A1 (ja) * | 2016-06-15 | 2017-12-21 | シャープ株式会社 | 分光測定装置 |
| CN107271039B (zh) * | 2017-07-13 | 2019-04-12 | 西安交通大学 | 紧凑微型快照式光谱成像探测装置及探测方法 |
| CN109556719B (zh) * | 2018-12-14 | 2023-06-20 | 深圳先进技术研究院 | 一种光谱成像系统及光谱成像方法 |
| KR20210004229A (ko) * | 2019-07-03 | 2021-01-13 | 삼성전자주식회사 | 뉴럴 네트워크 프로세서를 구비하는 이미지 프로세싱 장치 및 이의 동작 방법 |
| DE102019211277A1 (de) * | 2019-07-30 | 2021-02-04 | OSRAM Opto Semiconductors Gesellschaft mit beschränkter Haftung | Optoelektronische Messvorrichtung zur frequenzaufgelösten Messung einer Intensität einer elektromagnetischen Strahlung |
| JP2021022894A (ja) * | 2019-07-30 | 2021-02-18 | セイコーエプソン株式会社 | 画像処理方法、画像処理装置および情報システム |
| TW202137749A (zh) * | 2020-02-26 | 2021-10-01 | 日商索尼半導體解決方案公司 | 攝像裝置、攝像方法及電子機器 |
| CN114449137A (zh) * | 2020-11-02 | 2022-05-06 | 北京小米移动软件有限公司 | 滤光片结构、拍摄方法、装置、终端及存储介质 |
| US11624656B2 (en) * | 2021-04-12 | 2023-04-11 | Viavi Solutions Inc. | Optical filter for an optical sensor device |
| CN117561721A (zh) * | 2021-08-30 | 2024-02-13 | Oppo广东移动通信有限公司 | 滤光器阵列、方法、图像传感器、装置及电子设备 |
| WO2023132137A1 (ja) * | 2022-01-06 | 2023-07-13 | ソニーセミコンダクタソリューションズ株式会社 | 撮像素子および電子機器 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001160973A (ja) * | 1999-12-02 | 2001-06-12 | Nikon Corp | 固体撮像素子及び電子カメラ |
| EP1107316A3 (en) | 1999-12-02 | 2004-05-19 | Nikon Corporation | Solid-state image sensor, production method of the same and digital camera |
| JP2002135796A (ja) * | 2000-10-25 | 2002-05-10 | Canon Inc | 撮像装置 |
| JP2003087806A (ja) * | 2001-09-12 | 2003-03-20 | Fuji Photo Film Co Ltd | マルチバンドカメラ用フィルターとその形成方法並びにこの方法のプログラム及びこれを記録した記録媒体 |
| JP2004228662A (ja) * | 2003-01-20 | 2004-08-12 | Minolta Co Ltd | 撮像装置 |
| JP4599520B2 (ja) | 2004-09-17 | 2010-12-15 | オリンパス株式会社 | マルチスペクトル画像処理方法 |
| SE0402576D0 (sv) * | 2004-10-25 | 2004-10-25 | Forskarpatent I Uppsala Ab | Multispectral and hyperspectral imaging |
| JP2006140767A (ja) | 2004-11-12 | 2006-06-01 | Nikon Corp | 撮像装置および撮像方法 |
| JP4291793B2 (ja) * | 2005-03-23 | 2009-07-08 | 富士フイルム株式会社 | 固体撮像素子および固体撮像装置 |
| US7505206B2 (en) * | 2006-07-10 | 2009-03-17 | Taiwan Semiconductor Manufacturing Company | Microlens structure for improved CMOS image sensor sensitivity |
| KR100832710B1 (ko) * | 2006-12-07 | 2008-05-28 | 동부일렉트로닉스 주식회사 | 이미지 센서 및 이의 제조 방법 |
| JP2009080356A (ja) | 2007-09-27 | 2009-04-16 | Toshiba Corp | カラーフィルターおよびカラーイメージセンサー |
| US8109634B2 (en) * | 2008-03-05 | 2012-02-07 | Tamir Gil | Snapshot spectral imaging of the eye |
| US8228417B1 (en) * | 2009-07-15 | 2012-07-24 | Adobe Systems Incorporated | Focused plenoptic camera employing different apertures or filtering at different microlenses |
| JP2011182237A (ja) * | 2010-03-02 | 2011-09-15 | Osaka Univ | 複眼撮像装置及び該装置における画像処理方法 |
| US8736733B2 (en) * | 2010-03-19 | 2014-05-27 | Invisage Technologies, Inc. | Dark current reduction in image sensors via dynamic electrical biasing |
| US8822897B2 (en) | 2010-03-19 | 2014-09-02 | Invisage Technologies, Inc. | Image sensors employing sensitized semiconductor diodes |
| EP2642260A4 (en) | 2010-11-16 | 2015-12-09 | Nikon Corp | MULTIBAND CAMERA AND MULTIBAND IMAGING PROCESS |
-
2012
- 2012-06-21 JP JP2012140082A patent/JP6021462B2/ja active Active
-
2013
- 2013-05-20 WO PCT/JP2013/063966 patent/WO2013190938A1/ja active Application Filing
-
2014
- 2014-11-20 US US14/549,315 patent/US9494768B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| WO2013190938A1 (ja) | 2013-12-27 |
| US20150077617A1 (en) | 2015-03-19 |
| JP2014006079A (ja) | 2014-01-16 |
| US9494768B2 (en) | 2016-11-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6021462B2 (ja) | 撮像モジュールおよび撮像装置 | |
| JP6455604B2 (ja) | 撮像装置、撮像プログラムおよび撮像方法 | |
| JP6524640B2 (ja) | プレノプティック・カラー撮像システム | |
| JP4483951B2 (ja) | 撮像装置 | |
| JP5959513B2 (ja) | 分光画像撮影装置 | |
| JP5804055B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP2012235444A5 (ja) | ||
| JP2009177727A (ja) | 撮像装置 | |
| JP6017276B2 (ja) | 撮像装置 | |
| JP2009117976A (ja) | 撮像装置 | |
| JP4968527B2 (ja) | 撮像装置 | |
| JP6045208B2 (ja) | 撮像装置 | |
| WO2013114895A1 (ja) | 撮像装置 | |
| WO2013057859A1 (ja) | 撮像素子 | |
| JP5874729B2 (ja) | 撮像装置 | |
| US20240069325A1 (en) | Method For Producing Images from a Medical Device with Split Images on Common Image Sensors | |
| JP5414369B2 (ja) | 眼底カメラ及び制御方法 | |
| JP5887845B2 (ja) | 画像処理方法および画像処理プログラム | |
| JP2020088684A (ja) | 複眼撮像装置 | |
| US9386207B2 (en) | Image-capturing apparatus | |
| KR20220116183A (ko) | 촬상 장치, 정보 처리 방법, 및 프로그램 | |
| JP2008306525A (ja) | 撮像装置、画像処理装置、画像処理方法およびプログラム | |
| JP6019611B2 (ja) | 撮像装置 | |
| RU2736780C1 (ru) | Устройство для формирования цветного изображения (варианты) | |
| WO2015194410A1 (ja) | 画像入力装置及び顕微鏡装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150430 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160301 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160422 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160913 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161004 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6021462 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |