JP4660777B2 - 撮影装置及び撮影方法 - Google Patents
撮影装置及び撮影方法 Download PDFInfo
- Publication number
- JP4660777B2 JP4660777B2 JP2007557751A JP2007557751A JP4660777B2 JP 4660777 B2 JP4660777 B2 JP 4660777B2 JP 2007557751 A JP2007557751 A JP 2007557751A JP 2007557751 A JP2007557751 A JP 2007557751A JP 4660777 B2 JP4660777 B2 JP 4660777B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- bandpass filters
- converted
- desired band
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 36
- 230000003595 spectral effect Effects 0.000 claims description 63
- 230000005540 biological transmission Effects 0.000 claims description 37
- 238000000034 method Methods 0.000 claims description 11
- 238000006243 chemical reaction Methods 0.000 claims description 8
- 239000002131 composite material Substances 0.000 claims description 5
- 230000002194 synthesizing effect Effects 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 description 20
- 230000003287 optical effect Effects 0.000 description 14
- 238000004364 calculation method Methods 0.000 description 11
- 238000001228 spectrum Methods 0.000 description 8
- 238000013500 data storage Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 239000010453 quartz Substances 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N silicon dioxide Inorganic materials O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/32—Investigating bands of a spectrum in sequence by a single detector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/36—Investigating two or more bands of a spectrum by separate detectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
Description
本発明は、撮影装置及び撮像方法にかかり、特に、狭いバンドパス特性を持つ複数の光学フィルタを備えたマルチスペクトルカメラ及びその撮影方法に関する。
マルチスペクトルカメラは、通常のカラーカメラが赤(R)、緑(G)、青(B) の3つの波長領域の画像を得るのに対し、更に細かい波長領域に分解した複数のバンドの画像を得るものである(例えば、特許文献1)。典型的なマルチスペクトルカメラは、CCD等の撮像素子の入射側に異なる狭いバンドパス特性を持つ複数の光学フィルタが順次挿入される構造を持ち、それぞれのフィルタ特性に対応する画像を得るものである。バンドパスフィルタとしては通常干渉フィルタが用いられている。
特開2002−185974号公報
しかしながら、マルチスペクトルカメラは、通常のカラーカメラより高いスペクトル分解能を得るためにバンド幅の狭い光学フィルタを使用している。そのため、フィルタを通過する光量が減少し、必然的に画像が暗くなる、という問題がある。このように画像が暗くなる結果、露光時間の増加を招き、短時間の計測等の撮影を困難にすることにもなる。
本発明は、上記問題を考慮して成されたもので、画像が暗くならないようにした撮影装置を提供する。
本発明の第一の態様は、撮影装置であって、スペクトル透過特性が各々異なる複数のバンドパスフィルタと、前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体を撮影し、受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力する第1の撮影部と、前記複数のバンドパスフィルタに対して前記第1の撮影部と対称の位置に配置されると共に、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光して前記第1の撮影部の撮影タイミングに同期して該被写体を撮影し、受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力する第2の撮影部と、前記複数のバンドパスフィルタの複数のスペクトル反射特性を所望のバンドのスペクトル透過特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶した記憶部と、前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する画像データに変換する変換部と、所望のバンドに対応する前記第1の画像データと前記複数の第2の画像データから変換された変換画像データとを合成した合成画像データを出力する出力部と、を含む。
本態様によれば、バンドパスフィルタを透過した光により得られる第1の画像データと、各バンドパスフィルタから反射された光により得られる複数の第2の画像データ及び複数の係数から得られる所望のバンドに対応する画像データとが合成される。そのため、明るい画像を得ることができ、画像が暗くなることはない。
合成画像データは、前記第1の画像データの誤差の分散の逆数に比例した値、及び前記変換画像データの誤差の分散の逆数に比例した値を重みとした前記第1の画像データと前記変換画像データとの重み付き平均値により求めることができる。
また、本発明の第二の態様は、撮影装置であって、複数のバンドを透過するスペクトル透過特性を備え、該スペクトル透過特性が各々異なる複数のバンドパスフィルタと、前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体を撮影し、受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力する第1の撮影部と、前記複数のバンドパスフィルタに対して前記第1の撮影部と対称の位置に配置されると共に、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光して前記第1の撮影部の撮影タイミングに同期して該被写体を撮影し、受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力する第2の撮影部と、前記複数のバンドパスフィルタの複数のスペクトル反射特性及び複数のスペクトル透過特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶した記憶部と、前記複数のバンドパスフィルタの各々に対応して得られた複数の第1の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第1の画像データを前記所望のバンドに対応する第1の変換画像データに変換すると共に、前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する前記複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する第2の変換画像データに変換する変換部と、所望のバンドに対応する前記第1の変換画像データと前記第2の変換画像データとを合成した合成画像データを出力する出力部と、を含む。
本態様は、複数のバンドを透過するスペクトル透過特性を備えた複数のバンドパスフィルタを用いる場合の撮影装置に関するものである。本態様においては、複数のバンドパスフィルタの複数のスペクトル反射特性及び複数のスペクトル透過特性を所望のバンドのスペクトル特性に変換するための複数の係数を用いる。これにより、上記第一の態様と同様に所望のバンドのスペクトル特性に対応する第1の変換画像データ及び第2の変換画像データが得られる。これら所望のバンドに対応する第1の変換画像データと第2の変換画像データとを合成することにより、明るい画像を表示できる合成画像データを得ることができる。
本発明は前記第一及び第二の態様に対応する撮影方法としても実現できる。
即ち、本発明の第三の態様は、スペクトル透過特性が各々異なる複数のバンドパスフィルタを用いて撮影を行う方法であって、前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体に対して第1の撮影を行い、受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力し、前記第1の撮影を行った位置の前記複数のバンドパスフィルタに対する対称の位置において、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光し、前記第1の撮影の撮影タイミングに同期して該被写体に対して第2の撮影を行い、受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力し、前記複数のバンドパスフィルタの複数のスペクトル反射特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶し、前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する画像データに変換し、所望のバンドに対応する前記第1の画像データと前記複数の第2の画像データから変換された変換画像データとを合成した合成画像データを出力することを含む。
本発明の第四の態様は、複数のバンドを透過するスペクトル透過特性を備え、該スペクトル透過特性が各々異なる複数のバンドパスフィルタを用いて撮影を行う方法であって、前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体に対して第1の撮影を行い、受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力し、前記第1の撮影を行った位置の前記複数のバンドパスフィルタに対する対称の位置において、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光して前記第1の撮影の撮影タイミングに同期して該被写体に対して第2の撮影を行い、受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力し、前記複数のバンドパスフィルタの複数のスペクトル反射特性及び複数のスペクトル透過特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶し、前記複数のバンドパスフィルタの各々に対応して得られた複数の第1の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第1の画像データを前記所望のバンドに対応する第1の変換画像データに変換し、前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する前記複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する第2の変換画像データに変換し、所望のバンドに対応する前記第1の変換画像データと前記第2の変換画像データとを合成した合成画像データを出力することを含む。
以上説明したように本発明によれば、バンドパスフィルタを透過した光により得られる画像データと、各バンドパスフィルタから反射された光により得られる画像データ及び複数の係数から得られる所望のバンドに対応する画像データとが合成される。そのため、明るい画像得ることができ、画像が暗くなることはない。
以下、図面を参照して本発明の実施の形態を詳細に説明する。
図1に示すように、本実施の形態のマルチスペクトルカメラは、駆動モータ10によって回転されるディスクで構成されたフィルタホルダ12の円周に沿って設けられた複数のバンドパスフィルタ(以下、単にフィルタという)141、142、・・・14Nを備えている。このフィルタは、例えば、12枚設けることが可能である。複数のフィルタ141、142、・・・14Nの各々は、ガラス、石英、またはシリコン等の光透過性の基板に、多層誘電体薄膜を蒸着して、各々異なるバンド幅の光を透過するように構成されている。1つのフィルタは、例えば、図3に示すスペクトル透過特性とすることができる。図3に示すスペクトル透過特性を持ったフィルタのスペクトル反射特性は、図4に示すようになる。従って、スペクトル透過特性及びスペクトル反射特性は、フィルタ毎に異なっている。
フィルタホルダ12に設けられたフィルタの被写体側には、図2に示すように、ズームレンズ等の撮影レンズで構成された光学系16が、光学系16の光軸を通る光線がフィルタ面に対して入射角θでフィルタの中心を通過するように配置されている。
また、フィルタホルダ12に設けられたフィルタの光透過側には、撮像素子18Aが配置されている。撮像素子18AはCCDで構成され、フィルタ141、142、・・・14Nの各々を透過した被写体からの光を受光して被写体を撮影し、受光した光量に応じた第1の画像データをフィルタに対応させて出力する。CCDには、光学系16の結像位置に受光部が位置するように多数の光電変換素子が2次元状に配列されている。光学系16及び撮像素子18Aの光軸は、一直線状に位置している。
フィルタ141に対して撮像素子18Aと対称の位置には、CCDで構成された撮像素子18Bが配置されている。撮像素子18Bは、フィルタ141、142、・・・14Nの各々から反射された被写体からの光を受光して撮像素子18Aの撮影タイミングに同期して被写体を撮影し、受光した光量に応じた第2の画像データをフィルタに対応させて出力する。
なお、撮像素子18A,18BとしてCCDに代えてCMOSを使用してもよい。
撮像素子18Aは、アナログ信号をデジタル信号に変換するアナログ/デジタル変換器(A/D変換器)20Aに接続され、撮像素子18Bは、A/D変換器20Bに接続されている。A/D変換器20A,20Bの各々は、データ格納部22に接続されている。データ格納部22は撮像素子18A,18Bで撮影されてデジタル信号に変換された第1の画像データ及び第2の画像データをフィルタ毎に一時的に格納する。
データ格納部22は、係数記憶部26が接続された演算部24に接続されている。係数記憶部26には、以下で説明する複数の係数aiからなる係数の組が所望のバンド毎、すなわちフィルタのバンド毎に記憶されている。演算部24は、演算部で演算した合成画像データを一時的に記憶するメモリ28を介してLCD等で構成された表示装置30に接続されている。
また、マルチスペクトルカメラには、駆動モータ10等を制御するマイクロコンピュータで構成された制御回路32が設けられている。制御回路32は、駆動モータ10、撮像素子18A,18B、A/D変換器20A,20B、データ格納部22、演算部24、メモリ28、及び表示装置30の各々に接続されている。制御回路32は、以下で説明する制御ルーチンに従って駆動モータ10及び撮像素子18A,18B等を制御する。
本実施の形態のマルチスペクトルカメラでは、光学系16を通った光は斜め方向からフィルタに入射する。撮像素子18Aでその透過光が画像化されて第1の画像データが出力されると共に、フィルタに対し対称の位置に配置された撮像素子18Bで反射光が画像化されて第2の画像データが出力される。
フィルタのフォルダ12を回転させることによって、順次異なったフィルタが図2に示したように光学系16と撮像素子18Aとの間に移動する。光学系16と撮像素子18Aの間に位置するフィルタの透過光による第1の画像データと反射光による第2の画像データとがフィルタに対応して得られる。
フォルダを1回転することにより得られた反射光による複数の第2の画像データは、演算により透過光による所望のバンドの第1の画像データと等価な画像データに変換される。その変換された画像データと所望のバンドの透過光による第1の画像データとの平均を求めることで、所望の画像を得ることができる。
なお、図2に示したように光線をフィルタに対して入射角θで入射させた場合、スペクトル特性は、入射角0でフィルタの正面から入射した場合の透過・反射スペクトル特性とは異なった特性となる。これは入射角θで入射させた場合の特性が適当になるようにフィルタを設計することで解決することができる。また、入射角が大きい場合には特性が偏光に依存するという問題も生じる。この問題を解決するためには、これが問題にならない程度の入射角(例えば、20°以内) とするか、あるいは多少光量は減少するが、偏光フィルタによって特定の偏光のみを選択するようにする。
バンドパスフィルタとして用いられる干渉フィルタの特徴として、通過しない波長の光は反射するという特性がある。例えば、図3に示すような通過特性を持っているフィルタの場合、反射光のスペクトルは図4に示すように、目的のスペクトルバンドの光だけが欠落した特性を持っている。従って、マルチスペクトルカメラで使用する複数のフィルタの反射光を観測した場合、その複数の反射光の画像から演算によって透過光と同じバンド特性を持った画像を合成することできる。本実施の形態では、透過光で撮影した画像に加え、このように複数の反射光から構成した画像を利用することで、よりS/N比の良い明るい画像を得るようにしている。
複数のバンドパスフィルタとして、図5に示す12個のバンドパス特性を持った12枚のフィルタを利用する場合を例として以下説明する。これらのフィルタのスペクトル反射特性は図6に示すようになる。これらの反射特性を、波長をλとして、fi(λ) (i=1、 ・ ・ ・ 、N)で表す。本実施の形態の場合、Nは12である。所望のバンドのスペクトル反射特性を持った一つの画像IRは、各反射光で撮影した複数の画像Ii の線形結合として、次式のように計算される。
次に、所望のバンドのスペクトル反射特性による画像IRを得るための係数aiの決定の仕方について説明する。
所望の画像のスペクトル特性をg(λ)とする。例えば、図3に示した透過によるスペクトル特性の画像を得たい場合には、このスペクトル特性をg(λ)とする。
各フィルタの反射特性fi(λ) を関数空間の基底と考えたときに、これらが張る線型空間の中に所望の特性g(λ)が存在すれば、これは以下の(2)式に示すように表現可能であり、このai がそのまま(1)式の係数aiとなる。
(8)式を解くためには、(9)式及び(10)式に示した各スペクトル特性の内積の値が必要である。これは実際の計算ではスペクトル特性を離散化し、総和として計算する。離散化の間隔をΔλとすれば、(9)式及び(10)式は次式で計算される。ただし、λ0は総和計算を始める波長、nは離散化した各波長の番号である。
次のステップ102では、駆動モータ10を所定角度回転させて次のフィルタ142を光軸上に位置させる。ステップ104において上記と同様にフィルタ142を通して撮像素子18A,18Bによって被写体が同時に撮影される。撮像素子18A,18Bによる撮影は、同期していればよく、必ずしも同時である必要はない。
次のステップ106では、フィルタ141〜フィルタ14Nの全てを使用して撮影が行なわれたか否かを判断する。フィルタの全てを使用した撮影が終了していない場合には、ステップ102に戻って駆動モータ10を所定角度回転させることにより次のフィルタを光軸上に位置させて順位撮影を継続し、全てのフィルタを使用した撮影を行う。
上記のようにして撮影されたフィルタの各々に対応する第1画像データ及び第2画像データの各々は、A/D変換器20A,20Bによりデジタルデータに変換されてデータ格納部22にフィルタ毎の画像データとして格納される。
次のステップ108では、図示しない操作部をユーザが操作することにより所望のバンドが指定されたか否かを判断する。バンドが指定されたと判断された場合には、ステップ110において係数記憶部26から指定されたバンドのバンド番号に対応するN個の係数aiを読み込む。ステップ112において読み込んだ係数aiを演算部24に入力して演算の指示を行なう。
演算部24では、データ格納部に格納されている複数(本実施の形態では12)の第2の画像データと読み込んで入力された複数の係数aiとを(1)式に従って積和演算することにより指定されたバンドに対応する画像データを生成して記憶する。以上のように決定された係数aiと(1)式とを用いて反射光による画像データIR が計算される。
演算部24では、以下の(13)式に示すように、この反射光による画像データIRと、撮像素子18Aにより撮像されると共に指定されたバンドに対応する透過光による画像データITとの重み付き平均を計算する。その結果、反射光による画像と透過光による画像とを合成することにより指定されたバンドに対応するS/N比の良い画像データIを得る。得られた画像データは、メモリ28に記憶される。
I = αIT+ βIR (13)
ここで、α及びβは、それぞれの画像データに対する重みである。この重みは、それぞれの画像データIR,ITに見積もられる誤差の分散の逆数に比例した値とするのが適当である。撮像素子の雑音の分散をσ2とすると、画像データITの誤差の分散はσ2であるが、画像データIRの誤差の分散σR 2は、(1)式より以下の(14)式のようになる。
ここで、α及びβは、それぞれの画像データに対する重みである。この重みは、それぞれの画像データIR,ITに見積もられる誤差の分散の逆数に比例した値とするのが適当である。撮像素子の雑音の分散をσ2とすると、画像データITの誤差の分散はσ2であるが、画像データIRの誤差の分散σR 2は、(1)式より以下の(14)式のようになる。
次のステップ114では、操作部を操作することによりユーザから画像を表示する指示が行なわれたか否かを判断し、画像を表示する指示なわれた場合には、指定されたバンドに対応する合成画像データを用いて画像を表示する。
以上では、所望のスペクトル特性g(λ) としてフィルタの透過特性と同一のものを用いた例について説明した。しかし、本発明はこれに限るものではなく、g(λ) として一般のスペクトル特性を用いることも可能である。この場合にはi番目のフィルタの透過特性をfN+iとして反射特性のそれに加え、(8)、(9)、(10)式のNを改めて2Nと置いて係数aiを計算する。ただし、この場合、(8)式の行列(Fij) のランクが原理的にはN+1になるので、(8)式 の解を求めるのに(Fij) の一般逆行列を用いる。目的の画像Iは(13)式によらず、次式で計算する。
次に、最もS/N比の良いフィルタ特性の実現について説明する。フィルタの特性を、例えば図5で示したような単一のバンドを透過するものに限定せず、複数のバンドを透過するように設計できる場合、結果として得られる各バンド画像のS/N比が最も良くなるように、各フィルタの透過バンドをアダマールのS行列の各行に対応するように設定することができる。アダマールのS行列については、M.Harwit,N.J.A.Sloane著,Hadamard Transform Optics,Academic Press出版(1979) に詳しい。ここでは計測すべきスペクトル領域を7バンドに分けた例を示す。大きさ7のS行列は以下の(19)式で与えられる。
α = 0.5039 (29)
β = 0.4961 (30)
となる。
β = 0.4961 (30)
となる。
以上ではバンド数が7の場合を示したが、それ以外のバンド数の場合、S行列は次の手順で求めればよい。まず、バンド数をNとし、サイズN+1のアダマール行列HN+1を求める。次に行列HN+1から第1行及び第1列を除いたサイズN×Nの行列を作り、その要素が−1の部分を1に、1の部分を0に変える。この結果得られた行列がサイズNのS行列である。
この最もS/N比の良いフィルタ特性を実現する場合についても、図8の処理と同様の処理によって合成画像データを演算、表示装置に表示することができる。
10 駆動モータ
18 CCD
24 演算部
18 CCD
24 演算部
Claims (8)
- スペクトル透過特性が各々異なる複数のバンドパスフィルタと、
前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体を撮影し、受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力する第1の撮影部と、
前記複数のバンドパスフィルタに対して前記第1の撮影部と対称の位置に配置されると共に、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光して前記第1の撮影部の撮影タイミングに同期して該被写体を撮影し、受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力する第2の撮影部と、
前記複数のバンドパスフィルタの複数のスペクトル反射特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶した記憶部と、
前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する画像データに変換する変換部と、
所望のバンドに対応する前記第1の画像データと前記複数の第2の画像データから変換された変換画像データとを合成した合成画像データを出力する出力部と、
を含む撮影装置。 - 前記第1の画像データの誤差の分散の逆数に比例した値、及び前記変換画像データの誤差の分散の逆数に比例した値を重みとした前記第1の画像データと前記変換画像データとの重み付き平均値を、前記合成画像データとする請求項1記載の撮影装置。
- 複数のバンドを透過するスペクトル透過特性を備え、該スペクトル透過特性が各々異なる複数のバンドパスフィルタと、
前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体を撮影し、受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力する第1の撮影部と、
前記複数のバンドパスフィルタに対して前記第1の撮影部と対称の位置に配置されると共に、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光して前記第1の撮影部の撮影タイミングに同期して該被写体を撮影し、受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力する第2の撮影部と、
前記複数のバンドパスフィルタの複数のスペクトル反射特性及び複数のスペクトル透過特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶した記憶部と、
前記複数のバンドパスフィルタの各々に対応して得られた複数の第1の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第1の画像データを前記所望のバンドに対応する第1の変換画像データに変換すると共に、前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する前記複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する第2の変換画像データに変換する変換部と、
所望のバンドに対応する前記第1の変換画像データと前記第2の変換画像データとを合成した合成画像データを出力する出力部と、
を含む撮影装置。 - 前記第1の変換画像データの誤差の分散の逆数に比例した値、及び前記第2の変換画像データの誤差の分散の逆数に比例した値を重みとした前記第1の変換画像データと前記第2の変換画像データとの重み付き平均値を、前記合成画像データとする請求項3記載の撮影装置。
- 前記係数は、スペクトル反射特性を所望のバンドのスペクトル透過特性に変換するための係数である請求項1に記載の撮影装置。
- 前記係数は、スペクトル反射特性を所望のバンドのスペクトル透過特性に変換するための係数である請求項3に記載の撮影装置。
- スペクトル透過特性が各々異なる複数のバンドパスフィルタを用いて撮影を行う方法であって、
前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体に対して第1の撮影を行い、
受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力し、
前記第1の撮影を行った位置の前記複数のバンドパスフィルタに対する対称の位置において、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光し、前記第1の撮影の撮影タイミングに同期して該被写体に対して第2の撮影を行い、
受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力し、
前記複数のバンドパスフィルタの複数のスペクトル反射特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶し、
前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する画像データに変換し、
所望のバンドに対応する前記第1の画像データと前記複数の第2の画像データから変換された変換画像データとを合成した合成画像データを出力する
ことを含む撮影方法。 - 複数のバンドを透過するスペクトル透過特性を備え、該スペクトル透過特性が各々異なる複数のバンドパスフィルタを用いて撮影を行う方法であって、
前記複数のバンドパスフィルタの各々を通して被写体からの光を受光して該被写体に対して第1の撮影を行い、
受光した光量に応じた第1の画像データを前記複数のバンドパスフィルタに対応して出力し、
前記第1の撮影を行った位置の前記複数のバンドパスフィルタに対する対称の位置において、前記複数のバンドパスフィルタの各々から反射された被写体からの光を受光して前記第1の撮影の撮影タイミングに同期して該被写体に対して第2の撮影を行い、
受光した光量に応じた第2の画像データを前記複数のバンドパスフィルタに対応して出力し、
前記複数のバンドパスフィルタの複数のスペクトル反射特性及び複数のスペクトル透過特性を所望のバンドのスペクトル特性に変換するための複数の係数を、複数のバンドについてバンド毎に記憶し、
前記複数のバンドパスフィルタの各々に対応して得られた複数の第1の画像データと所望のバンドに対応する複数の係数とを用いて、前記複数の第1の画像データを前記所望のバンドに対応する第1の変換画像データに変換し、
前記複数のバンドパスフィルタの各々に対応して得られた複数の第2の画像データと所望のバンドに対応する前記複数の係数とを用いて、前記複数の第2の画像データを前記所望のバンドに対応する第2の変換画像データに変換し、
所望のバンドに対応する前記第1の変換画像データと前記第2の変換画像データとを合成した合成画像データを出力する
ことを含む撮影方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006031187 | 2006-02-08 | ||
JP2006031187 | 2006-02-08 | ||
PCT/JP2006/324357 WO2007091368A1 (ja) | 2006-02-08 | 2006-12-06 | 撮影装置及び撮影方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2007091368A1 JPWO2007091368A1 (ja) | 2009-07-02 |
JP4660777B2 true JP4660777B2 (ja) | 2011-03-30 |
Family
ID=38344975
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007557751A Active JP4660777B2 (ja) | 2006-02-08 | 2006-12-06 | 撮影装置及び撮影方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP4660777B2 (ja) |
WO (1) | WO2007091368A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105791640B (zh) * | 2015-01-08 | 2020-07-10 | 松下知识产权经营株式会社 | 摄像装置 |
JP6575179B2 (ja) * | 2015-07-06 | 2019-09-18 | セイコーエプソン株式会社 | 光学モジュール及び撮像装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000258154A (ja) * | 1999-03-12 | 2000-09-22 | Nec Corp | 撮像装置 |
JP2003309856A (ja) * | 2002-04-17 | 2003-10-31 | Sony Corp | 撮像装置および方法、記録媒体、並びにプログラム |
-
2006
- 2006-12-06 JP JP2007557751A patent/JP4660777B2/ja active Active
- 2006-12-06 WO PCT/JP2006/324357 patent/WO2007091368A1/ja active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000258154A (ja) * | 1999-03-12 | 2000-09-22 | Nec Corp | 撮像装置 |
JP2003309856A (ja) * | 2002-04-17 | 2003-10-31 | Sony Corp | 撮像装置および方法、記録媒体、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2007091368A1 (ja) | 2007-08-16 |
JPWO2007091368A1 (ja) | 2009-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101246738B1 (ko) | 화상처리장치 및 화상처리방법, 및, 데이터 처리장치 및 데이터 처리 방법 | |
JP4699995B2 (ja) | 複眼撮像装置及び撮像方法 | |
JP2019220957A5 (ja) | ||
US9681057B2 (en) | Exposure timing manipulation in a multi-lens camera | |
EP2087725B1 (en) | Improved light sensitivity in image sensors | |
KR102224697B1 (ko) | 조도 측정을 위한 다중 카메라 이미징 | |
CN108780142A (zh) | 3d成像系统和方法 | |
US20020122124A1 (en) | Image sensing apparatus and its control method, control program, and storage medium | |
JP2005260480A (ja) | マルチスペクトル画像撮影装置及びアダプタレンズ | |
JPH09172649A (ja) | カラー画像記録再生システム | |
US9008412B2 (en) | Image processing device, image processing method and recording medium for combining image data using depth and color information | |
JPH10336686A (ja) | 撮像装置 | |
JP4729712B2 (ja) | 撮影装置 | |
JP4660777B2 (ja) | 撮影装置及び撮影方法 | |
JP2009153074A (ja) | 画像撮影装置 | |
JP2018040976A (ja) | フィルタ、画像撮影装置および画像撮影システム | |
JP2006292582A (ja) | マルチバンド画像処理装置及びその方法並びにマルチバンド画像撮像装置 | |
JP2006014315A (ja) | カラー画像記録再生システム及び表色ベクトルデータ生成方法 | |
JP2018195985A (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 | |
JP4344257B2 (ja) | 撮影装置及び色分解光学系 | |
JPH10142053A (ja) | 分光反射率測定装置における補正方法 | |
JP4460717B2 (ja) | 色調整装置 | |
JP2005167444A (ja) | 分光特性推定を行なう画像処理装置 | |
JP2007315808A (ja) | マルチスペクトル撮像装置 | |
JP7083912B2 (ja) | 撮像素子、撮像装置、撮像方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101207 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |