JP2018098623A - 撮像装置 - Google Patents

Abstract

【課題】 容易な信号処理により演算量を低減し、近距離の撮像において視野を拡大する薄型の撮像装置の技術を提供する。
【解決手段】
撮像装置であって、第１の複眼格子パターンを有し、第１の複眼格子パターンを透過させることで光の強度を変調する変調器と、変調器を透過した光を画像データに変換して出力する画像センサと、画像センサから出力される画像データを用いて像を復元する画像処理を行う画像処理部と、を備え、第１の複眼格子パターンは、複数の基本パターンを含んで構成され、それぞれの基本パターンは、同心円状である、ことを特徴とする。
【選択図】図１

Description

本発明は、撮像装置に関する。

本技術分野の背景技術として、特開２０１１−２０３７９２号公報(特許文献1)がある。この公報には、マイクロレンズアレイを用いることにより小型・薄型化を実現する撮像装置についての記載がある。

特開２０１１−２０３７９２号公報

上記特許文献１に記載された技術では、「前段のマイクロレンズアレイと絞りアレイとを対向させ、前段のマイクロレンズアレイの被写体からの光の焦点近傍に絞りアレイの絞りを設けて、更に後段のマイクロレンズアレイによって光の集束も同時に行う」ことで、「光学系を小さくし、小型・薄型の指静脈認証装置を実現することが出来る」撮像方式である。該撮像方式は、レンズを用いることにより画像センサ上への集光に距離が必要である点と、２つのレンズアレイを配置する空間が必要である点が、薄型化の限界となっている。

本発明の課題は、容易な信号処理により演算量を低減し、近距離の撮像において視野を拡大する薄型の撮像装置に係る技術を提供することである。

本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。上記課題を解決すべく、本発明の一態様に係る撮像装置は、第１の複眼格子パターンを有し、上記第１の複眼格子パターンを透過させることで光の強度を変調する変調器と、上記変調器を透過した光を画像データに変換して出力する画像センサと、上記画像センサから出力される画像データを用いて像を復元する画像処理を行う画像処理部と、を備え、上記第１の複眼格子パターンは、複数の基本パターンを含んで構成され、それぞれの上記基本パターンは、同心円状である。

本発明によれば、容易な信号処理により演算量を低減し、近距離の撮像において視野を拡大する薄型の撮像装置の技術を提供できる。上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。

本発明の第一の実施形態に係る撮像装置の構成を示す図である。 第一の実施形態に係る変調器の構成を示す図である。 第一の実施形態に係る別の変調器の構成を示す図である。 第一の実施形態に係る撮像装置による撮影状況の例を示す図である。 第一の実施形態に係る撮像処理フローの例を示す図である。 斜め入射平行光による格子基板表面から裏面への射影像が面内ずれを生じる例を示す図である。 格子基板両面の格子の軸がそろった場合のモアレ縞の生成と周波数スペクトルの例を示す図である（入射角ゼロ、＋θ、−θ）。 表面格子と裏面格子の軸をずらして配置する例を示す図である。 格子基板両面の格子をずらして配置する場合のモアレ縞の生成と周波数スペクトルの例を示す図である（入射角ゼロ、＋θ、−θ）。 格子パターンの例を示す図である。 格子パターンの別の例を示す図である。 格子パターンのさらに別の例を示す図である。 物体を構成する各点からの光がセンサに対してなす角を説明する図である。 物体が無限距離にある場合に表側格子パターンが投影される例を示す図である。 物体が無限距離にある場合に生成されるモアレ縞の例を示す図である。 物体が有限距離にある場合に表側格子パターンが拡大される例を示す図である。 物体が有限距離にある場合に生成されるモアレ縞の例を示す図である。 物体が有限距離にある場合に裏側格子パターンを補正したモアレ縞の例を示す図である。 裏側格子パターンを画像処理で代替する変形例を示す図である。 裏側格子パターンを画像処理で代替する変調器を示す図である。 裏側格子パターンを画像処理で代替する処理フローを示す図である。 時分割フリンジスキャンの変形例を示す図である。 時分割フリンジスキャンにおける格子パターンの例を示す図である（Φ_Ｆ, Φ＝０、Φ_Ｆ, Φ＝π／２、Φ_Ｆ, Φ＝π、Φ_Ｆ, Φ＝３π／２）。 時分割フリンジスキャンにおける変調器の例を示す図である（Φ_Ｆ, Φ＝０、Φ_Ｆ, Φ＝π／２、Φ_Ｆ, Φ＝π、Φ_Ｆ, Φ＝３π／２）。 時分割フリンジスキャンの処理フローの例を示す図である。 空間分割フリンジスキャンの変形例を示す図である。 空間分割フリンジスキャンにおける格子パターンの例を示す図である。 物体が近距離にある場合の格子パターンと視野の関係を示す図である。 複眼の格子パターンによる広視野化の構成例を示す図である。 複眼の格子パターンの例を示す図である。 複眼の格子パターンにおけるクロストーク発生の原理を示す図である。 クロストークを低減する構成の例を示す図である。 複眼の格子パターンにおける処理フローを示す図である。 遮光板によるクロストーク低減の原理を説明する図である。 遮光板によるクロストーク低減の変調器の構成例を示す図である。 偏光板によるクロストーク低減の原理を説明する図である。 偏光板によるクロストーク低減の変調器の構成例を示す図である。 時分割フリンジスキャンによるクロストークキャンセルの構成例を示す図である。 クロストークキャンセルを実現する表面側と裏面側の格子パターンの組合せを示す図である（Φ_Ｆ＝０,π／２、Φ_Ｆ＝π／２,π、Φ_Ｆ＝π,３π／２、Φ_Ｆ＝３π／２,０）。 時分割フリンジスキャンにおけるクロストークキャンセルの格子パターンの例を示す図である（Φ_Ｆ＝０,π／２、Φ_Ｆ＝π／２,π、Φ_Ｆ＝π,３π／２、Φ_Ｆ＝３π／２、０）。 空間分割フリンジスキャンにおけるクロストークキャンセルを実現する格子パターンの例を示す図である。 クロストークキャンセルと偏光板の併用によるクロストーク低減を実現する構成の例を示す図である。 クロストークキャンセルと偏光板の併用によるクロストーク低減を実現する偏光板の例を示す図である。 複眼の格子パターンを用いて近距離にある物体を撮像するときの視野の例を示す図である。 複眼の格子パターンを用いた指静脈撮像の利用状況の例を示す図である。

以下の実施の形態においては便宜上その必要があるときは、複数のセクションまたは実施の形態に分割して説明するが、特に明示した場合を除き、それらはお互いに無関係なものではなく、一方は他方の一部または全部の変形例、詳細、補足説明等の関係にある。

また、以下の実施の形態において、要素の数等（個数、数値、量、範囲等を含む）に言及する場合、特に明示した場合および原理的に明らかに特定の数に限定される場合等を除き、その特定の数に限定されるものではなく、特定の数以上でも以下でもよい。

さらに、以下の実施の形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。

同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは特に明示した場合および原理的に明らかにそうではないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。このことは、上記数値および範囲についても同様である。

また、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。以下、本発明の実施例について図面を用いて説明する。

一般に、車載カメラ、ウェアラブルデバイス、スマートフォンなどの情報機器に搭載するデジタルカメラには薄型化と低コスト化が求められることが多い。例えば、レンズを用いることなく物体像を得ることで薄型化と低コスト化を実現する撮像方式が提案されている。そのような技術では、画像センサの前に特殊な格子パターンを貼り付け、その画像センサにて受光される射影パターンから像を現像するための逆問題を解くことにより、物体の像を得る撮像方式がある。この方式では、信号処理により逆問題を解く際の演算が複雑になり、処理負荷が高いために、情報機器のハードウェア要求仕様が高くなってしまう。本発明は、処理負荷を低く抑えつつ、薄型化を可能とすることをねらいとしている。

〈無限遠物体の撮影原理〉図１は、本発明の第一の実施形態に係る撮像装置１０１の構成を示す図である。撮像装置１０１は、結像させるレンズを用いることなく、外界の物体の画像を取得するものであり、図１に示すように、変調器１０２、画像センサ１０３、および画像処理部１０６から構成されている。また、撮像装置１０１は、画像を表示するディスプレイ装置等を有する画像表示部１０７と接続され、画像処理部１０６により画像表示部１０７の表示情報は制御される。

図２に変調器１０２の一例を示す。変調器１０２は、画像センサ１０３の受光面に密着して固定されており、格子基板１０２ａに第１の格子パターン１０４、第２の格子パターン１０５がそれぞれ形成された構成からなる。格子基板１０２ａは、例えばガラスやプラスティックなどの透明な材料からなる。以降、格子基板１０２ａの画像センサ１０３側を裏面と呼び、対向する面すなわち撮影対象側を表面と呼ぶ。この格子パターン１０４、１０５は、外側に向かうほど中心からの半径に反比例して格子パターンの間隔、すなわちピッチが狭くなる同心円状の格子パターンからなる。格子パターン１０４，１０５は、例えば半導体プロセスに用いられるスパッタリング法などによってアルミニウム、クロムなどの金属を蒸着することによって形成される。金属が蒸着されたパターンと蒸着されていないパターンによって濃淡がつけられる。なお、格子パターン１０４，１０５の形成は、これに限定されるものでなく、例えばインクジェットプリンタなどによる印刷などによって濃淡をつけて形成してもよい。さらに、ここでは可視光を例に説明したが、例えば遠赤外線の撮影を行う際には、格子基板１０２ａは例えばゲルマニウム、シリコン、カルコゲナイドなどの遠赤外線に対して透明な材料とするなど、撮影対象となる波長に対して透明な材料、格子パターン１０４，１０５には金属等の遮断する材料を用いればよい。

なお、ここでは変調器１０２を実現するために、格子パターン１０４，１０５を格子基板１０２ａに形成する方法について述べたが、図３に示すように格子パターン１０４，１０５を薄膜に形成し、支持部材１０２ｂにより保持する構成などによっても実現できる。

格子パターン１０４，１０５を透過する光は、その格子パターンによって光の強度が変調され、透過した光は画像センサ１０３にて受光される。画像センサ１０３は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサまたはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサなどからなる。

画像センサ１０３の表面には、受光素子である画素１０３ａが格子状に規則的に配置されている。この画像センサ１０３は、画素１０３ａが受光した光画像を電気信号である画像信号に変換する。画像センサ１０３から出力された画像信号は、画像処理部である画像処理部１０６によって画像処理されて画像表示部１０７などに出力される。

図４は、図１の撮像装置１０１による撮影の一例を示す説明図である。この図４では、撮像装置１０１によって被写体４０１を撮影して画像表示部１０７に表示している例を示している。図示するように、被写体４０１を撮影する際には、被写体４０１に対して変調器１０２における表面、具体的には第１の格子パターン１０４が形成されている格子基板１０２ａの面が正対するようにして撮影が行われる。

続いて、画像処理部１０６による画像処理の概略について説明する。図５は、図１の撮像装置１０１が有する画像処理部１０６による画像処理の概略を示すフローチャートである。

まず、画像センサ１０３から出力されるモアレ縞画像に対して、カラーのＲＧＢ（Ｒｅｄ Ｇｒｅｅｎ Ｂｌｕｅ）成分ごとに高速フーリエ変換（ＦＦＴ：Ｆａｓｔ Ｆｏｕｒｉｅｒ Ｔｒａｎｓｆｏｒｍ）などの２次元フーリエ変換演算による現像処理で周波数スペクトルを求める（５０１）。続いて、ステップ５０１の処理による周波数スペクトルのうち必要な周波数領域のデータを切り出した後（５０２）、該周波数スペクトルの強度計算を行う（５０３）ことによって画像を取得する。そして、得られた画像に対してノイズ除去処理を行い（５０４）、続いてコントラスト強調処理（５０５）などを行う。その後、画像のカラーバランスを調整して（５０６）撮影画像として出力する。以上により、画像処理部１０６による画像処理が終了となる。

続いて、撮像装置１０１における撮影原理について説明する。まず、中心からの半径に対して反比例してピッチが細かくなる同心円状の格子パターン１０４，１０５は、以下のように定義する。レーザ干渉計などにおいて、平面波に近い球面波と参照光として用いる平面波とを干渉させる場合を想定する。同心円の中心である基準座標からの半径をｒとし、そこでの球面波の位相をΦ（ｒ）とするとき、これを波面の曲がりの大きさを決める係数βを用いて、
＜式１＞

と表せる。

球面波にもかかわらず、半径ｒの２乗で表されているのは、平面波に近い球面波のため、展開の最低次のみで近似できるからである。この位相分布を持った光に平面波を干渉させると、
＜式２＞

のような干渉縞の強度分布が得られる。これは、
＜式３＞

を満たす半径位置で明るい線を持つ同心円の縞となる。縞のピッチをｐとすると、
＜式４＞

が得られ、ピッチは、半径に対して反比例して狭くなっていくことがわかる。このような縞を持つプレートは、フレネルゾーンプレートやガボールゾーンプレートと呼ばれる。式２で定義される強度分布に比例した透過率分布をもった格子パターンを、図１に示した格子パターン１０４，１０５として用いる。

このような格子パターンが両面に形成された厚さｔの変調器１０２に、図６に示すように角度θ_０で平行光が入射したとする。変調器１０２中の屈折角をθとして幾何光学的には、表面の格子の透過率が乗じられた光が、δ＝ｔ・ｔａｎθだけずれて裏面に入射し、仮に２つの同心円格子の中心がそろえて形成されていたとすると、裏面の格子の透過率がδだけずれて掛け合わされることになる。このとき、
＜式５＞

のような強度分布が得られる。

この展開式の第４項が、２つの格子のずれの方向にまっすぐな等間隔の縞模様を重なり合った領域一面に作ることがわかる。このような縞と縞の重ね合わせによって相対的に低い空間周波数で生じる縞はモアレ縞と呼ばれる。このようにまっすぐな等間隔の縞は、検出画像の２次元フーリエ変換によって得られる空間周波数分布に鋭いピークを生じる。その周波数の値からδの値、すなわち光線の入射角θを求めることが可能となる。このような全面で一様に等間隔で得られるモアレ縞は、同心円状の格子配置の対称性から、ずれの方向によらず同じピッチで生じることは明らかである。このような縞が得られるのは、格子パターンをフレネルゾーンプレートまたはガボールゾーンプレートで形成したことによるものであるが、全面で一様に等間隔なモアレ縞が得られるのであればどのような格子パターンを使用してもよい。
ここで、式５から鋭いピークを持つ成分のみを
＜式６＞

のように取り出すと、そのフーリエスペクトルは、
＜式７＞

のようになる。ここで、Ｆはフーリエ変換の演算を表し、ｕ、ｖは、ｘ方向およびｙ方向の空間周波数座標、括弧を伴うδはデルタ関数である。この結果から、検出画像の空間周波数スペクトルにおいて、モアレ縞の空間周波数のピークがｕ＝±δβ／πの位置に生じることがわかる。

その様子を図７に示す。図７において、左から右にかけては、光線と変調器１０２の配置図、モアレ縞、および空間周波数スペクトルの模式図をそれぞれ示している。図７（ａ）は、垂直入射、図７（ｂ）は、左側から角度θで光線が入射する場合、図７（ｃ）は、右側から角度θで光線が入射する場合をそれぞれ示している。

変調器１０２の表面側に形成された第１の格子パターン１０４と裏面側に形成された第２の格子パターン１０５とは、軸がそろっている。図７（ａ）では、第１の格子パターン１０４と第２の格子パターン１０５との影が一致するのでモアレ縞は生じない。

図７（ｂ）および図７（ｃ）では、第１の格子パターン１０４と第２の格子パターン１０５とのずれが等しいために同じモアレが生じ、空間周波数スペクトルのピーク位置も一致して、空間周波数スペクトルからは、光線の入射角が図７（ｂ）の場合なのか、あるいは図７（ｃ）の場合なのかを判別することができなくなる。

これを避けるためには、例えば図８に示すように、変調器１０２に垂直に入射する光線に対しても２つの格子パターンの影がずれて重なるようあらかじめ２つの格子パターン１０４，１０５を光軸に対して相対的にずらしておくことが必要である。軸上の垂直入射平面波に対して２つの格子の影の相対的なずれをδ_０とするとき、入射角θの平面波によって生じるずれδは、
＜式８＞

のように表せる。このとき、入射角θの光線のモアレ縞の空間周波数スペクトルのピークは周波数のプラス側では
＜式９＞

の位置となる。画像センサの大きさをＳ、画像センサのｘ方向およびｙ方向の画素数を共にＮとすると、２次元フーリエ変換による離散画像の空間周波数スペクトルは、−Ｎ／（２Ｓ）から＋Ｎ／（２Ｓ）の範囲で得られる。このことから、プラス側の入射角とマイナス側の入射角を均等に受光することを考えれば、垂直入射平面波（θ＝０）によるモアレ縞のスペクトルピーク位置は、原点（ＤＣ：直流成分）位置と、例えば＋側端の周波数位置との中央位置、すなわち、
＜式１０＞

の空間周波数位置とするのが妥当である。したがって、２つの格子の相対的な中心位置ずれは、
＜式１１＞

とするのが妥当である。

図９は、第１の格子パターン１０４と第２の格子パターン１０５とをずらして配置した場合のモアレ縞の生成および周波数スペクトルを説明する模式図である。図７と同様にして、左側は光線と変調器１０２の配置図、中央列はモアレ縞、そして右側は空間周波数スペクトルを示す。また、図９（ａ）は、光線が垂直入射の場合であり、図９（ｂ）は、光線が左側から角度θで入射する場合であり、図９（ｃ）は、光線が右側から角度θで入射する場合である。

第１の格子パターン１０４と第２の格子パターン１０５とは、あらかじめδ_０だけずらして配置されている。そのため、図９（ａ）でもモアレ縞が生じ、空間周波数スペクトルにピークが現れる。そのずらし量δ_０は、上記したとおり、ピーク位置が原点から片側のスペクトル範囲の中央に現れるように設定されている。このとき図９（ｂ）では、ずれδがさらに大きくなる方向、図９（ｃ）では、小さくなる方向となっているため、図７と異なり、図９（ｂ）と図９（ｃ）との違いがスペクトルのピーク位置から判別できる。このピークのスペクトル像がすなわち無限遠の光束を示す輝点であり、図１の撮像装置１０１による撮影像にほかならない。

受光できる平行光の入射角の最大角度をθ_ｍａｘとすると、
＜式１２＞

より、撮像装置１０１にて受光できる最大画角は、
＜式１３＞

で与えられる。

一般的なレンズを用いた結像との類推から、画角θ_ｍａｘの平行光を画像センサの端で焦点を結んで受光すると考えると、レンズを用いない撮像装置１０１の実効的な焦点距離は、
＜式１４＞

に相当すると考えることができる。

ここで、式１３より画角は変調器１０２の厚さｔ、格子パターン１０４，１０５の係数βによって変更可能であることが判る。よって、例えば変調器１０２が図３の構成であり支持部材１０２ｂの長さを変更可能な機能を有していれば、撮影時に画角を変更して撮影することも可能となる。

なお、モアレ縞から空間周波数スペクトルを算出する方法として高速フーリエ変換を例に説明したが、これに限定されるものではなく、離散コサイン変換（ＤＣＴ：Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）などを使用しても実現可能であり、さらに演算量を削減することも可能である。

また、格子パターン１０４，１０５の透過率分布は、式２で示したように正弦波的な特性があることを想定して説明したが、格子パターンの基本周波数成分としてそのような成分があればよく、例えば図１０に示すように格子パターンの透過率を２値化することも可能であり、さらに図１１のように透過率が高い格子領域と低い領域のｄｕｔｙを変えて、透過率の高い領域の幅を広げて透過率を高めることも考えられる。これにより、格子パターンからの回折を抑圧するなどの効果も得られ、撮影像の劣化を低減可能である。

また、格子パターン１０４，１０５は透過率変調でなく、位相変調で実現してもよい。例えば図１２に示すように格子基板１０２ａをシリンドリカルレンズ１２０１とすることにより、画像センサ１０３上に図に示すような強度変調パターンを生じさせることができるため、今までの議論と同様に撮像が可能となる。これにより格子パターン１０４の遮蔽部による光量損失を低減でき、光利用効率を向上させることができる上、格子パターンからの回折を抑圧する効果も得られる。図１２ではレンズとして実現したが、同等の効果を持つ位相変調素子で実現することも可能である。

以上の説明では、いずれも入射光線は同時には１つの入射角度だけであったが、実際に撮像装置１０１がカメラとして作用するためには、複数の入射角度の光が同時に入射する場合を想定しなければならない。このような複数の入射角の光は、裏面側の格子パターンに入射する時点ですでに複数の表側格子の像を重なり合わせることになる。もし、これらが相互にモアレ縞を生じると、信号成分である第２の格子パターン１０５とのモアレ縞の検出を阻害するノイズとなることが懸念される。しかし、実際は、第１の格子パターン１０４の像どうしの重なりはモアレ像のピークを生じず、ピークを生じるのは裏面側の第２の格子パターン１０５との重なりだけになる。その理由について以下に説明する。

まず、複数の入射角の光線による表面側の第１の格子パターン１０４の影どうしの重なりは、積ではなく和であることが大きな違いである。１つの入射角の光による第１の格子パターン１０４の影と第２の格子パターン１０５との重なりでは、第１の格子パターン１０４の影である光の強度分布に、第２の格子パターン１０５の透過率を乗算することで、裏面側の第２の格子パターン１０５を透過したあとの光強度分布が得られる。

これに対して、表面側の第１の格子パターン１０４に複数入射する角度の異なる光による影どうしの重なりは、光の重なり合いなので、積ではなく、和になるのである。和の場合は、
＜式１５＞

のように、もとのフレネルゾーンプレートの格子の分布に、モアレ縞の分布を乗算した分布となる。したがって、その周波数スペクトルは、それぞれの周波数スペクトルの重なり積分で表される。そのため、たとえモアレのスペクトルが単独で鋭いピークをもったとしても、実際上、その位置にフレネルゾーンプレートの周波数スペクトルのゴーストが生じるだけである。つまり、スペクトルに鋭いピークは生じない。したがって、複数の入射角の光を入れても検出されるモアレ像のスペクトルは、常に表面側の第１の格子パターン１０４と裏面側の第２の格子パターン１０５との積のモアレだけであり、第２の格子パターン１０５が単一である以上、検出されるスペクトルのピークは１つの入射角に対して１つだけとなるのである。

ここで、これまで検出することを説明してきた平行光と、実際の物体からの光との対応について図１３を用いて模式的に説明する。図１３は、物体を構成する各点からの光が画像センサに対してなす角を説明する説明図である。被写体４０１を構成する各点からの光は、厳密には点光源からの球面波として、図１の撮像装置１０１の変調器１０２および画像センサ１０３（以下、図１３では格子センサ一体基板１３０１という）に入射する。このとき、被写体４０１に対して格子センサ一体基板が十分に小さい場合や、十分に遠い場合には、各点から、格子センサ一体基板を照明する光の入射角が同じとみなすことができる。

式９から求められる微小角度変位Δθに対するモアレの空間周波数変位Δｕが、画像センサの空間周波数の最小解像度である１／Ｓ以下となる関係から、Δθが平行光とみなせる条件は、
＜式１６＞

のように表せる。この条件下であれば、無限遠の物体に対して本発明の撮像装置で撮像が可能である。

〈有限距離物体の撮影原理〉ここで、これまで述べた無限遠の場合における表面側の第１の格子パターン１０４の裏面への射影の様子を図１４に示す。無限遠の物体を構成する点１４０１からの球面波は、十分に長い距離を伝搬する間に平面波となり表面側の第１の格子パターン１０４を照射し、その投影像１４０２が下の面に投影される場合、投影像は第１の格子パターン１０４とほぼ同じ形状である。結果、投影像１４０２に対して、裏面側の格子パターン（図２の第２の格子パターン１０５に相当）の透過率分布を乗じることにより、等間隔な直線状のモアレ縞を得ることができる（図１５）。

一方、有限距離の物体に対する撮像について説明する。図１６は、撮像する物体が有限距離にある場合に表面側の第１の格子パターン１０４の裏面への射影が第１の格子パターン１０４より拡大されることを示す説明図である。図１６に示すように、物体を構成する点１６０１からの球面波が表面側の第１の格子パターン１０４を照射し、その投影像１６０２が下の面に投影される場合、投影像はほぼ一様に拡大される。なお、この拡大率αは、第１の格子パターン１０４から点１６０１までの距離ｆを用いて、
＜式１７＞

のように算出できる。

そのため、平行光に対して設計された裏面側の格子パターンの透過率分布をそのまま乗じたのでは、等間隔な直線状のモアレ縞は生じなくなる（図１７）。しかし、一様に拡大された表面側の第１の格子パターン１０４の影に合わせて、第２の格子パターン１０５を拡大するならば、拡大された投影像１６０２に対して再び、等間隔な直線状のモアレ縞を生じさせることができる（図１８）。このためには、第２の格子パターン１０５の係数βをβ／α２とすることで補正が可能である。

これにより、必ずしも無限遠でない距離の点１６０１からの光を選択的に現像することができる。これによって、任意の位置に焦点合わせて撮影を行うことができる。

〈簡略化構成〉次に、変調器１０２の構成を簡略化する方法について説明する。変調器１０２では、格子基板１０２ａの表面および裏面にそれぞれ同一形状の第１の格子パターン１０４および第２の格子パターン１０５を互いにずらして形成することにより、入射する平行光の角度をモアレ縞の空間周波数スペクトルから検知して像を現像していた。この裏面側の第２の格子パターン１０５は、画像センサ１０３に密着して入射する光の強度を変調する光学素子であり、入射光に依らず同じ格子パターンである。そこで、図１９に示すように、第２の格子パターン１０５を除去した変調器１９０１を使用し、第２の格子パターン１０５に相当する処理を画像処理部１９０２内の強度変調部１９０３で実行してもよい。

この時の変調器１９０１の構成の詳細を図２０に示す。この構成によって、格子基板１０２ａに形成する格子パターンを１面減らすことができる。それにより、変調器の製造コストを低減することができ、さらに光利用効率を向上させることもできる。

図２１は、図１９の画像処理部１９０２による画像処理の概略を示すフローチャートである。この図２１におけるフローチャートが図５のフローチャートと異なるところは、ステップ２１０１の処理である。ステップ２１０１の処理では、前述した強度変調部１９０３により、画像センサ１０３から出力される画像に対して、裏面側の格子パターン１０５を透過したことに相当するモアレ縞画像を生成する。具体的には、式５に相当する演算が行われればよいので、強度変調部１９０３において裏面側の格子パターン１０５を生成し、画像センサ１０３の画像に対して乗算すればよい。さらに、裏面側の格子パターン１０５が図１０、１１に示すような２値化したパターンであれば、黒に相当する領域の画像センサ１０３の値を０にするだけでも実現可能である。これにより、乗算回路の規模を抑圧することが可能である。以降、図２１のステップ５０１〜５０６の処理は、図５の処理と同様であるので、ここでは説明を省略する。

なお、この場合、画像センサ１０３が有する画素１０３ａのピッチは、第１の格子パターン１０４のピッチを十分再現できる程度に細かいか、あるいは第１の格子パターン１０４のピッチが画素１０３ａのピッチにて再現できる程度に粗い必要がある。格子パターンを格子基板１０２ａの両面に形成する場合は、必ずしも格子パターンのピッチが画像センサ１０３の画素１０３ａにて解像できる必要はなく、そのモアレ像だけが解像できればよい。しかし、画像処理により格子パターンを再現する場合は、格子パターンと画像センサ１０３の解像度は同等である必要がある。

また、以上は強度変調部１９０３により第２の格子パターン１０５に相当する処理を実現したが、第２の格子パターン１０５はセンサに密着して入射する光の強度を変調する光学素子であるため、センサの感度を実効的に第２の格子パターン１０５の透過率を加味して設定することによっても実現できる。

〈ノイズキャンセル〉これまでの説明では、式５から鋭いピークを持つ成分のみを取り出した式６に着目して話を進めたが、実際には式５の第４項以外の項がノイズとなる。そこで、フリンジスキャンに基づくノイズキャンセルが効果的である。

まず、式２の干渉縞強度分布において、第１の格子パターン１０４の初期位相をΦ_Ｆ、第２の格子パターン１０５の初期位相をΦ_Ｂとすると、式５は
＜式１８＞

のように表せる。ここで、三角関数の直交性を利用し、
＜式１９＞

のように式１８をΦ_Ｆ、Φ_Ｂに関して積分すると、ノイズ項がキャンセルされ単一周波数の定数倍の項が残ることになる。前述の議論から、これをフーリエ変換すれば、空間周波数分布にノイズのない鋭いピークを生じることになる。

ここで式１９は積分の形で示しているが、実際にはΦ_Ｆ、Φ_Ｂの組合せの総和を計算することによっても同様の効果が得られる。Φ_Ｆ、Φ_Ｂは０〜２πの間の角度を等分するように設定すればよく、｛０、π／２、π、３π／２｝のように４等分、｛０、π／３、２π／３｝のように３等分してもよい。

さらに、式１９は簡略化できる。式１９では、Φ_Ｆ、Φ_Ｂを独立して変えられるように計算したが、Φ_Ｆ＝Φ_Ｂすなわち格子パターン１０４と１０５の初期位相に同じ位相を適用してもノイズ項をキャンセルできる。式１９においてΦ_Ｆ＝Φ_Ｂ＝Φとすれば、
＜式２０＞

となり、ノイズ項がキャンセルされ単一周波数の定数倍の項が残ることになる。また、Φは０〜２πの間の角度を等分するように設定すればよく、｛０、π／２、π、３π／２｝のように４等分すればよい。

また、等分せずとも、｛０、π／２｝の直交した位相を使用してもノイズ項をキャンセルでき、さらに簡略化できる。まず、図１９の構成のように第２の格子パターン１０５を画像処理部１９０２で実施すれば、格子パターン１０５に負値を扱えるため、式１８は
＜式２１＞

となる（Φ_Ｆ＝Φ_Ｂ＝Φ）。格子パターン１０５は既知であるため、この式２１から格子パターン１０５を減算し、Φ＝｛０、π／２｝の場合について加算すれば、
＜式２２＞

のようにノイズ項がキャンセルされ単一周波数の定数倍の項が残ることになる。

また、前述のように第１の格子パターン１０４と第２の格子パターン１０５とは、あらかじめδ_０ずらすことで空間周波数空間に生じる２つの現像画像を分離していた。しかし、この方法では現像画像の画素数が半分になる問題点がある。そこで、δ_０ずらさなくとも現像画像の重複を回避する方法について説明する。式１９のフリンジスキャンにおいて、ｃｏｓの代わりに
＜式２３＞

のようにｅｘｐを用い複素平面上で演算する。これによりノイズ項がキャンセルされ単一周波数の定数倍の項が残ることになる。式２３中のｅｘｐ（２ｉβδｘ）をフーリエ変換すれば、
＜式２４＞

となり、式７のように２つのピークを生じず、単一の現像画像を得られることが判る。このように、格子パターン１０４、１０５をずらす必要もなくなり、画素数を有効に使用可能となる。

以上のフリンジスキャンに基づくノイズキャンセル方法を行うための構成について図２２〜２７を用いて説明する。フリンジスキャンでは、少なくとも格子パターン１０４として初期位相の異なる複数のパターンを使用する必要がある。これを実現するには時分割でパターンを切り替える方法と、空間分割でパターンを切り替える方法がある。

図２２に時分割フリンジスキャンを実現する構成を示す。変調器２２０１は、例えば電気的に図２３に示す複数の初期位相を切り替えて表示することが可能な液晶表示素子などである。図２３（ａ）〜（ｄ）のパターンは、初期位相Φ_ＦもしくはΦがそれぞれ｛０、π／２、π、３π／２｝とする。これを実現する変調器２２０１の液晶表示素子における電極配置の例を図２４に示す。格子パターンの１周期を４分割するように同心円状電極が構成されており、内側から４本おきに電極が結線され、外周部から駆動端子として４本の電極が引き出されている。これら４つの電極に印加する電圧状態を“０”と“１”の２つの状態で時間的に切り替えることで、格子パターンの初期位相Φ_ＦもしくはΦを図２４（ａ）〜（ｄ）のように｛０、π／２、π、３π／２｝と切り替えることが可能となる。なお、図２４において、網掛けで示した“１”を印加した電極が光を遮蔽し、白で示した“０”を印加した電極が光を透過させることに対応している。

次に、図２５に画像処理部２２０３における画像処理の概略を示すフローチャートを示す。この図２５におけるフローチャートが図２１のフローチャートと異なるところは、ステップ２５０１〜２５０４の処理である。まず、フリンジスキャン演算の初めに加算結果をリセットする（２５０１）。次に、式２０に対応する場合には、撮影に使用した格子パターン１０４と同じ初期位相に設定し（２５０２）、その初期位相を持つ格子パターン１０５を生成、画像センサ１０３の画像に対して乗算する（２１０１）。この結果を各初期位相のパターン毎に加算する（２５０３）。以上のステップ２５０２〜２５０３の処理を全ての初期位相のパターン数繰り返す（２５０４）。以降の処理は、図２１の処理と同様であるので、ここでは説明を省略する。なお、上記フローは式２０を例に説明したが、式１９、２２、２３にも同様に適用することが可能である。

対して、図２６に空間分割フリンジスキャンを実現する構成を示す。変調器２６０１は、例えば図２７の初期位相Φ_ＦもしくはΦがそれぞれ｛０、π／２、π、３π／２｝のパターンように、複数の初期位相のパターンを２次元的に並べた構成である。画像分割部２６０２は、画像センサ１０３出力を変調器２６０１のパターン配置に応じた領域に分割し、画像処理部に順次伝送する。図２６の例では、画像センサ出力を縦２×横２の４領域に分割するということである。式２０に基づくフリンジスキャンでは４位相必要であるため変調器２６０１は縦２×横２であったが、式２２に基づくフリンジスキャンでは２位相で実現できるため変調器２６０１は縦１×横２のパターン配置でも実現可能であり、それに応じて画像センサ出力も縦１×横２の領域に分割する。以降の画像処理部２２０３の処理は時分割フリンジスキャンである図２２の処理と同等であるため説明を省略する。

この空間分割フリンジスキャンを用いれば、時分割フリンジスキャンの変調器２２０１のように電気的に切り替える必要がなく、安価に変調器を作製することができる。しかし、空間分割フリンジスキャンを用いると画像を分割するため解像度が実効的に低下する。よって、解像度を上げる必要がある場合には時分割フリンジスキャンが適している。

〈近接撮像における問題〉次に、近距離の物体に対する撮像時の問題点について説明する。ある光源からの光が物体に照射され、その散乱光を近距離から撮像する場合、その物体からの散乱角が問題となる。図２８は、撮像する物体が近距離にある場合に物体のある点からの光の拡がり角（散乱角）θ_ｓを示す説明図である。図２８に示すように、物体を構成する点２８０１からの散乱光が第１の格子パターン１０４を照射する場合、第１の格子パターン１０４における照射領域の直径Ｂは、散乱角θ_ｓを用いて、
＜式２５＞

となる。ｆは点２８０１から第１の格子パターン１０４までの距離である。このように、近接撮影時には第１の格子パターン１０４のうち照射領域しか使用することができない。なお、現実には散乱光強度は散乱角が大きくなるに従い徐々に減衰するものであるが、図２８では簡単化のため、照射領域のみ散乱光が到達しているとしている。

第１の格子パターン１０４は中心から端へ向かうほど縞のピッチが狭くなる同心円状の格子パターンからなるため、例えば点２８０３のように、第１の格子パターン１０４の中心から離れるほど、照射領域における縞のピッチは狭くなる。ピッチの狭い縞の投影像は回折等の影響により画像センサ１０３上でのコントラストが低下することからノイズに埋もれやすく、現像が困難となる。以上から、点２８０１、２８０２のように第１の格子パターン１０４の中心付近にある点の撮像は可能だが、点２８０３のように中心から離れるに従って撮像が困難となり、撮像可能な範囲（視野）が制限されることになる。

実験的に、散乱光が第１の格子パターン１０４の中心を通る場合に撮像できることが判っている。そのため、式１３で与えられる最大画角θ_ｍａｘを用いて、θ_ｓ≦θ_ｍａｘとなる場合には、視野角は散乱角θ_ｓとなり、視野の直径Ａ_ｓは
＜式２６＞

となる。

この視野を拡大するためには、第１の格子パターン１０４を形成する同心円状の格子パターンの係数βを小さくすることで縞のピッチを広くするという方法があるが、ピッチを広くすると解像度が劣化してしまう。

〈近接撮像における視野拡大方法〉そこで、近距離の物体に対する撮像において解像度を保ちながら視野を拡大する方法について説明する。

図２９は、複眼の格子パターンによる広視野化の構成例を示す図である。図２９は、近接撮像における視野を拡大可能な構成を示す。図２９が図１９と異なるところは、基本パターン２９０３を複数配列した第１の複眼格子パターン２９０２を第１の格子パターン１０４として用いる点と、画像分割部２９０４と画像処理部２９０５を有する点である。図３０に第１の複眼格子パターン２９０２の例を示す。同心円状の格子パターンからなる基本パターン２９０３を縦３つ×横３つ重なることなく撮像素子と平行する平面上に配列することで第１の複眼格子パターン２９０２を実現できる。このように基本パターンを複数配置する構成とすることで、単一の格子パターンの視野Ａ_ｓを複数配置することができるようになる。このように構成することで、格子パターンの係数βを変更することなく、照射領域の周辺部分の縞のピッチが狭くなりすぎることにより回折等の解像度低下の影響が強くなり視野を制限するという問題を抑圧可能となる。

なお、図２９では、第１の複眼格子パターン２９０２を、縦３つ×横３つに配列した基本パターンからなるパターンとしているが、これに限定するものではなく、撮影対象のサイズ、撮影対象までの距離などに合わせて適宜変更してもよい。

また、図３１に、複眼格子パターンによる視野を示す。複眼格子パターンによる視野Ａ_ｍは、隣接する基本パターンの同心円の中心間距離をｑ_ｍ、基本パターンの配置数をｎとして、
＜式２７＞

となる。

また、それぞれの基本パターン２９０３を構成する同心円状の格子パターンの初期位相Φは任意のもので良い。また、図２９の構成では単一の画像センサ１０３を用いているが、画像センサ１０３を複数並べて用いても良い。

〈クロストーク発生原理〉複眼格子パターンを用いることで、隣接する基本パターンから発生するクロストークが問題になりうる。図３１を用いて、第１の複眼格子パターン２９０２を用いた撮像におけるクロストークについて説明する。基本パターン３１０１の視野角をθ_ｓとすると、画像センサ１０３上では、
＜式２８＞

の直径をもつ範囲に散乱光が入射する。この範囲の情報が基本パターン３１０１の視野角θ_ｓの範囲の撮像に寄与する。

しかし、例えば点３１０３からの光線は隣接する基本パターン３１０２を通過してＣの範囲に入射する。基本パターン３１０１の現像において、隣接する基本パターン３１０２の情報はノイズとなる。このように、異なる基本パターンを通過して入射する光線によりクロストークが発生する。

（実施例１：変調器の形状）これに対して、図３２のように、Ｃ≦ｑ_ｍとなる場合には、クロストークは発生しない。つまりｔ≦ｑ_ｍ／（２・ｔａｎθ_ｓ）を満たすｔ（変調器１０２の厚さ）とｑ_ｍ（隣接する基本パターンの同心円の中心間距離）となるよう変調器１０２を構成することで、クロストークを防ぐことが可能である。

続いて、複眼格子パターン適用時の画像処理について説明する。図３３（ａ）および図３３（ｂ）は画像処理部２９０５による画像処理の概略を示すフローチャートである。図３３（ａ）におけるフローチャートが図２１と異なるところは、ステップ３３０１とステップ３３０２の処理である。

まず、画像分割部２９０４において、画像センサ１０３にて取得するセンサ画像を基本パターン２９０３の配列に従って分割する（３３０１）。以降、ステップ５０４まで図２１の処理と同様の処理を行い、ステップ３３０２にて、ステップ３３０１での分割に従ってステップ５０４の出力画像を並び替えて合成する。以降の処理は図２１の処理と同様である。なお、ステップ２１０１の処理において用いる裏面側の格子パターンは単一の基本パターン２９０３からなる単眼の第１の格子パターン、もしくは複眼の第１の複眼格子パターン２９０２と同様の複眼のパターンのどちらとしても良い。

図３３（ｂ）におけるフローチャートが図３３（ａ）と異なるところは、出力画像の分割のタイミングである。図３３（ｂ）では、図３３（ａ）のステップ３３０１を行わず、ステップ５０４の処理後の出力画像を基本パターン２９０３の配列に従って分割し（３３０３）、並び替えて合成する（３３０２）。

なお、図２９は図１９を基に説明したが、同様に図２２など他の構成にも適用することで、フリンジスキャンによるノイズキャンセルを行うことも可能である。

以上の構成によれば、近接撮像においても解像度を保ったまま視野を広げることが可能となる。

〈実施例２：遮光板によるクロストーク低減〉本実施例では、第１の複眼格子パターン２９０２における隣接する基本パターンから発生するクロストークを遮光板により低減する方法について説明する。

上述のとおり、実施例１では、ｔ（変調器１０２の厚さ）とｑ_ｍ（隣接する基本パターンの同心円の中心間距離）を適切に設定することでクロストークを低減したが、これでは変調器の設計自由度が制限される場合もある。クロストークは遮光板を挿入することでも低減可能である。図３４に、遮光板によるクロストーク低減の原理について示す。基本パターン３１０１による撮像に対してノイズとなる点３１０３からの光線は、遮光板３４０１を挿入することで除去することが出来る。

図３５は、遮光板によるクロストーク低減を実現する構成の説明図である。図３５では、変調器３５０１に遮光板３５０２を挿入している。遮光板は、撮影対象とする波長が透過しない材質とする必要があり、可視光では黒色のプラスティック板や金属板、遠赤外光ではアクリル板や金属板などを用いればよい。また、遮光板３５０２は図３４のように、基本パターン２９０３を単位とする領域Ｕ毎に区切るように配置する。このとき、視野角は式１３においてＳ＝Ｕとしたときのθ_ｍａｘとなり、視野角をθ_ｕとすると視野Ａ_ｕは、
＜式２９＞

となる。

以上の構成によれば、設計自由度を制限することなく、第１の複眼格子パターンにおける隣接する基本パターンから発生するクロストークを低減することが可能となる。

〈実施例３：偏光板によるクロストーク低減〉本実施例では、第１の複眼格子パターンにおける隣接する基本パターンから発生するクロストークを偏光板により低減する方法について説明する。

図３６に、偏光板によるクロストーク低減の原理について示す。変調器２９０１を偏光板３６０１乃至３６０４で挟む構成とする。また、偏光板３６０１と偏光板３６０２のように隣接する偏光板の偏光軸を直交させ、偏光板３６０１と偏光板３６０３のように対向する偏光板の偏光軸を揃えるように配置する。これにより、基本パターン３１０１による撮像対象である点３６０５からの光線は、偏光板３６０１ならびに偏光板３６０３を経由し、２つの偏光板の偏光軸は互いに並行であるため画像センサ１０３に光が到達する。それに対し、ノイズとなる点３１０３からの光線は、偏光板３６０２ならびに偏光板３６０３を経由するが、２つの偏光板の偏光軸は互いに直交しているため画像センサ１０３に光が到達しない。よって、クロストークを除去することができる。このとき、視野角はθｕとなり、視野Ａｕは式２９で与えられる。

図３７は、偏光板によるクロストーク低減を実現する構成の説明図である。図３７（ａ）に示すように、変調器２９０１を第１の偏光板３７０１および第２の偏光板３７０２で挟む構成とする。第１の偏光板３７０１は第１の複眼格子パターン２９０２に近接して配置し、第２の格子パターンは画像センサ１０３に近接して配置する。なお、図３７（ａ）では変調器２９０１の表面側に第１の偏光板３７０１を配置しているが、第１の複眼格子パターン２９０２の裏面側に配置しても良い。

図３７（ｂ）に偏光板３７０１、３７０２の例を示す。偏光板３７０１は複数の偏光板からなり、偏光板３６０１と偏光板３６０２のように隣接する偏光板の偏光軸を直交するように配置する。また、偏光板３６０１の大きさは第１の複眼格子パターン２９０２の基本パターン２９０３と同じサイズとし、基本パターン２９０３の配置に合わせて配置する。

以上の構成によれば、第１の複眼格子パターンにおける隣接する基本パターンから発生するクロストークを低減することが可能となる。

なお、図３７では、第１の複眼格子パターン２９０２を、縦３つ×横３つの基本パターンの配置からなるパターンとしているが、これに限定するものではなく、撮影対象のサイズ、撮影対象までの距離などに合わせて適宜変更してもよい。

また、液晶表示素子を用いて第１の複眼格子パターンを実現する場合には、液晶表示素子の偏光板を、上記第１の偏光板３６０１を構成する偏光板３６０３とすることもできる。

また、偏光板３６０１と偏光板３６０３のように対向する偏光板の偏光軸を揃えるように配置するものとしたが、これに限定するものではなく、変調器２９０１の素材によっては偏光面が旋回することもあるため、対向する偏光板を透過する光量が最も大きくなるように、またはクロストーク光量が最も小さくなるように、偏光軸の傾きを設定するものであってもよい。

〈実施例４：クロストークキャンセル〉本実施例では、第１の複眼格子パターンにおける隣接する基本パターンから発生するクロストークをフリンジスキャンに基づいてキャンセルする方法について説明する。

フリンジスキャンによるクロストークキャンセルでは、少なくとも第１の複眼格子パターンとして、基本パターンの初期位相が異なる複数のパターンを使用する必要がある。これを実現するには時分割フリンジスキャンを用いる方法と、空間分割フリンジスキャンスキャンを用いる方法がある。

まず、時分割フリンジスキャンを用いたクロストークキャンセルについて説明する。図３８に、時分割フリンジスキャンを用いてクロストークキャンセルを実現するための構成を示す。図３８が図２２と異なるところは、第１の格子パターンとして、第１の複眼格子パターン３８０２を用いる点と、画像分割部３８０６および画像処理部３８０５を有する点である。第１の複眼格子パターン３８０２は、上下左右に隣接する基本パターン３８０３、３８０４の初期位相Φが互いにπ／２ずれるように配置する。

ここで、初期位相差をπ／２とすることによるクロストークキャンセルの原理について説明する。図３９に、図３８における基本パターン３８０３、３８０４の組合せを示す。図４０では、基本パターン３８０３、３８０４をそれぞれ基本パターン３９０１、３９０２としている。基本パターン３９０１、３９０２は、それぞれの初期位相Φ_Ｆ１とΦ_Ｆ２の位相差がπ／２となるように、Φ_Ｆ１とΦ_Ｆ２を｛０、π／２｝、｛π／２、π｝、｛π、３π／２｝、｛３π／２、２π｝などの組合せとする。また、裏面側の複眼格子パターンを構成する基本パターン３９０３、３９０４の初期位相Φ_Ｂ１とΦ_Ｂ２も同様に、初期位相Φ_Ｂ１とΦ_Ｂ２の位相差がπ／２となるように、｛０、π／２｝、｛π／２、π｝、｛π、３π／２｝、｛３π／２、２π｝などの組合せとする。本組合せにおいて、式１９によるフリンジスキャン演算を行えばクロストークをキャンセルできる。

例えば、基本パターン３９０１の投影像は基本パターン３９０３により現像処理するが、このパターンの初期位相差（Φ_Ｆ１−Φ_Ｆ３）は０となり、式１９におけるｃｏｓの項は１となる。対して、クロストークとなる基本パターン３９０２の像を基本パターン３９０３により現像処理する場合、初期位相差（Φ_Ｆ１−Φ_Ｆ３）はπ／２となり、式１９におけるｃｏｓの項は０となることからキャンセルされる。よって、表面側の複眼格子パターンと裏面側の複眼格子パターンの初期位相の組合せにより、クロストークキャンセルが可能となる。

図４０に、第１の複眼格子パターン３８０２の例を示す。図４０（ａ）〜（ｂ）のように基本パターン３８０３、３８０４の初期位相が異なる第１の複眼格子パターン３８０２を切り替えて使用する。切り替え方法については、実施例１にて説明した時分割フリンジスキャンの方法と同様であるため説明を省略する。

次に、空間分割フリンジスキャンを用いたクロストークキャンセルについて説明する。図４１に、第１の複眼格子パターンの例を示す。第１の複眼格子パターン４１０１は空間分割フリンジスキャンを実現するため、基本パターン４１０２は４つの初期位相からなる分割パターン４１０３、４１０４からなる。さらに、クロストークキャンセルを実現するため、分割パターン４１０３と隣接する分割パターン４１０４のように、上下左右に隣接する分割パターンの初期位相がπ／２ずれるように配置する。本組合せにおいて、式１９によるフリンジスキャン演算を行えば、前述の説明の通りクロストークをキャンセルすることが可能となる。

以上の構成によれば、第１の複眼格子パターンにおける隣接する基本パターンから発生するクロストークを低減することが可能となる。
なお、実施例１乃至実施例３では、第１の複眼格子パターンを構成する基本パターンを、隣接するもの同士が重ならないように配置していたが、本実施例では隣接する基本パターンが重なり合っていても良い。

〈実施例５：クロストークキャンセルと偏光板の併用〉本実施例では、実施例４のクロストークキャンセルと、実施例３の偏光板によるクロストーク低減方法を併用し、第１の複眼格子パターンにおける隣接パターンから発生するクロストークを低減する方法について説明する。

実施例４に係るクロストークキャンセル方法では、上下左右に隣接する基本パターンの初期位相Φが互いにπ／２ずれるように配置することで、クロストークの影響をキャンセルした。しかし、この方法だと斜め方向に隣接する基本パターンからのクロストークをキャンセルしきれない場合がある。そこで、実施例４では、偏光板を併用する例を示す。

図４２は、時分割フリンジスキャンを用いたクロストークキャンセルと偏光板の併用によりクロストークを低減する方法について示した説明図である。図４２が図３８と異なるところは、第１の偏光板４２０１と第２の偏光板４２０２の２枚の偏光板を有する点である。第１の偏光板４２０１は第１の複眼格子パターン３８０２に近接して配置し、第２の偏光板４２０２は画像センサ１０３に近接して配置する。ここで、第２の偏光板４２０２は、第１の偏光板４２０１と同じものとし、偏光板の偏光の方向が揃うように配置する。なお、図４２では、変調器３８０１の表面側に第１の偏光板４２０１を配置しているが、第１の複眼格子パターン３８０２の裏面側に配置しても良い。

図４３に、偏光板４２０１および４２０２の例を示す。図４３が図３７にて説明した偏光板３７０１および３７０２と異なるところは、第１の偏光板４２０１および第２の偏光板４２０２を構成する偏光板４２０３のサイズを、基本パターン３８０３を並べた一列のサイズとする点である。図４３では、例として、第１の複眼格子パターン３８０２として、縦２×横２の基本パターンからなるパターンとしているため、偏光板４２０１、４２０２は、基本パターンの縦２枚×横１枚分のサイズとなる。また、隣接する偏光板４２０３の偏光軸は、偏光板４２０１、４２０２の偏光軸と直交させる。偏光軸が直交することで、クロストークが低減される。

なお、基本パターンを格子状に配置する構成を例に説明したが、これに限定するものではなく、ハニカム構造のように隣接する基本パターンが互いに６０度の位置関係となるように配置してもよい。このような場合においても、隣接する基本パターンの初期位相差をπ／２とする、または、隣り合う偏光板の偏光軸を直交させて配置することによりクロストークを低減することが可能となる。

以上の構成によれば、第１の複眼格子パターンにおける斜め方向の隣接する基本パターンから発生するクロストークをも低減することが可能となる。

なお、液晶表示素子を用いて第１の複眼格子パターンを実現する場合には、液晶表示素子の偏光板を、上記第１の偏光板４２０１を構成する偏光板４２０３とすることもできる。

また、上記２枚の偏光板４２０１および４２０２を用いて、空間分割フリンジスキャンを用いたクロストークキャンセルと偏光板の併用によるクロストークの低減も実現できる。

〈実施例６：静脈撮像への適用例〉本実施例では、指静脈認証装置への適用のための指静脈撮像方法について示す。

指静脈認証では、認証に十分な視野の撮像が必要となる。図４４は、指静脈認証に十分な視野を確保するための撮像装置の構成と光路を示した説明図である。ｑ_ｍを第１の複眼格子パターン４４０１を構成する基本パターンの中心間距離、ｎをある方向における基本パターンの数、ｆを被写体４４０２から第１の複眼格子パターン４４０１までの距離、とする。この時、被写体４４０２の撮像に必要な視野Ａ_ｍを得るために必要な、距離ｆと中心間距離ｑ_ｍの関係について説明する。

距離ｆが短いと、各基本パターンの視野が小さくなり、合成した視野Ａ_ｍに隙間が生じることになる。隙間が生じないためには、ｆが図４４におけるｆ_ｍｉｎ以上でなければならない。各基本パターンの視野Ａ_ｓは、式２６で示される。式２６における散乱角θ_ｓは、光源を指に照射した時に生じる透過光または反射光の散乱角であるので、Ａ_ｓ＝２ｆ・ｔａｎθ_ｓ≧ｑ_ｍであればよい。つまり、指を第１の複眼格子パターンに近づけられる限界となる距離ｆ_ｍｉｎは
＜式３０＞

となる。

次に、視野Ａ_ｍを得るために必要な、画像センサ１０３のサイズＤについて説明する。各基本パターン４４０３の視野内の光線は、画像センサ１０３上で式２７の関係を有するものとなる。よって、
＜式３１＞

のサイズがあれば、視野Ａ_ｍ内の情報を正しく撮像することが可能となる。

なお、画像センサ１０３は単一のセンサでなくても、複数のセンサを配列してセンササイズを広げることも可能である。

以上の条件を満たせば、指静脈認証に必要な視野を取得することができる。また、以上の方法ではクロストークが生じるが、前述のクロストーク低減方法を用いることで低減可能である。

続いて、図４５に指静脈認証装置の例を示す。図４５は、複眼格子パターン（表側）４５０１と、光源４５０３と、画像センサ４５０２とを有する。光源４５０３は、波長８５０ｎｍ付近の近赤外光を用い、指からの反射光を画像センサ４５０２で取得する構成としている。なお、透過光を画像センサ４５０２で取得する配置としてもよい。このような装置により指静脈撮像を実現できる。

以上の構成によれば、指静脈認証に必要な視野を確保し、かつ薄型の指静脈認証装置を実現することが可能となる。

なお、本発明は上記の実施の例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。

また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に格納しておき、実行時にＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等に読み出され、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等により実行することができる。

また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

また、上記した各構成、機能、処理部等は、それらの一部又は全部を、例えば別の装置で実行してネットワークを介して統合処理する等により分散システムで実現してもよい。

また、上記した実施形態の技術的要素は、単独で適用されてもよいし、プログラム部品とハードウェア部品のような複数の部分に分けられて適用されるようにしてもよい。

以上、本発明について、実施形態を中心に説明した。

１０１・・・撮像装置、１０２・・・変調器、１０２ａ・・・格子基板、１０２ｂ・・・支持部材、１０３・・・画像センサ、１０３ａ・・・画素、１０６・・・画像処理部、１０７・・・画像表示部、１０４・・・格子パターン（表側）、１０５・・・格子パターン（裏側）、４０１・・・被写体、１２０１・・・シリンドリカルレンズ、１３０１・・・格子センサ一体基板、１４０１・・・点、１４０２・・・投影像、１６０１・・・点、１６０２・・・投影像、１９０１・・・変調器、１９０２・・・画像処理部、１９０３・・・強度変調部、２２０１・・・変調器、２２０２・・・変調器制御部、２２０３・・・画像処理部、２６０１・・・変調器、２６０２・・・画像分割部、２８０１・・・点、２８０２・・・点、２８０３・・・点、２９０１・・・変調器、２９０２・・・複眼格子パターン（表側）、２９０３・・・格子パターン、２９０４・・・画像分割部、２９０５・・・画像処理部、３１０１・・・格子パターン、３１０２・・・格子パターン、３１０３・・・点、３４０１・・・遮光板、３５０１・・・変調器、３５０２・・・遮光板、３６０１・・・偏光板、３６０２・・・偏光板、３６０３・・・偏光板、３６０４・・・偏光板、３６０５・・・点、３７０１・・・偏光板、３７０２・・・偏光板、３８０１・・・変調器、３８０２・・・複眼格子パターン（表側）、３８０３・・・格子パターン、３８０４・・・格子パターン、３８０５・・・画像処理部、３８０６・・・画像分割部、３９０１・・・格子パターン、３９０２・・・格子パターン、３９０３・・・格子パターン、３９０４・・・格子パターン、４１０１・・・複眼格子パターン、４１０２・・・格子パターン、４１０３・・・格子パターン、４１０４・・・格子パターン、４２０１・・・偏光板、４２０２・・・偏光板、４２０３・・・偏光板、４４０１・・・複眼格子パターン（表側）、４４０２・・・被写体、４４０３・・・格子パターン、４５０１・・・複眼格子パターン（表側）、４５０２・・・画像センサ、４５０３・・・光源

Claims (12)

1. 第１の複眼格子パターンを有し、前記第１の複眼格子パターンを透過させることで光の強度を変調する変調器と、
   前記変調器を透過した光を画像データに変換して出力する画像センサと、
   前記画像センサから出力される画像データを用いて像を復元する画像処理を行う画像処理部と、
   を備え、
   前記第１の複眼格子パターンは、複数の基本パターンを含んで構成され、
   それぞれの前記基本パターンは、同心円状である、
   ことを特徴とする撮像装置。
2. 請求項１に記載の撮像装置であって、
   前記複数の基本パターンを構成する少なくとも２つ以上の基本パターンは、同一である、
   ことを特徴とする撮像装置。
3. 請求項１に記載の撮像装置であって、
   前記第１の複眼格子パターンと前記画像センサとの間に遮光板を備え、
   前記遮光板は前記基本パターンの配置に基づいて配置される、
   ことを特徴とする撮像装置。
4. 請求項１に記載の撮像装置であって、
   前記変調器は、第１の偏光板と第２の偏光板とを備え、
   前記第１の偏光板は、前記変調器の入力側の面である表面に近接して配置され、
   前記第２の偏光板は、前記変調器の出力側の面である裏面に近接して配置され、
   前記第１の偏光板および前記第２の偏光板は、前記基本パターンの配置に基づいて偏光軸が決定されている、
   ことを特徴とする撮像装置。
5. 請求項４に記載の撮像装置であって、
   前記第１の偏光板および前記第２の偏光板は、隣接する偏光板の偏光軸が互いに直交するように配置される、
   ことを特徴とする撮像装置。
6. 請求項１に記載の撮像装置であって、
   隣接する前記基本パターンは、前記同心円の初期位相が互いにπ／２ずつ異なる、
   ことを特徴とする撮像装置。
7. 請求項１に記載の撮像装置であって、
   前記変調器は、第１の偏光板と第２の偏光板を備え、
   前記第１の偏光板は、前記変調器の入力側の面である表面に近接して配置され、
   前記第２の偏光板は、前記変調器の出力側の面である裏面に近接して配置され、
   前記第１の偏光板および前記第２の偏光板は、前記基本パターンの配置に基づいて偏光軸が決定されており、
   隣接する前記基本パターンは、前記同心円の初期位相が互いにπ／２ずつ異なる、
   ことを特徴とする撮像装置。
8. 請求項１に記載の撮像装置であって、
   前記変調器から撮像対象物までの距離は、前記同心円の中心間の距離と、該撮像対象物からの光の散乱角に基づいて決定されている、
   ことを特徴とする撮像装置。
9. 請求項１に記載の撮像装置であって、
   前記画像センサのサイズは、前記同心円の中心間の距離と、撮像対象物からの光の散乱角に基づいて決定されている、
   ことを特徴とする撮像装置。
10. 請求項１に記載の撮像装置であって、
    前記基本パターンにおける前記同心円は、同心円の中心となる基準座標に対して同心円のピッチが前記基準座標からの距離に反比例して細かくなる、
    ことを特徴とする撮像装置。
11. 請求項１に記載の撮像装置であって、
    前記画像処理部は、前記画像データを、同心円から構成される第２の複眼格子パターンを示すデータを用いて変調することでモアレ縞画像を生成する、
    ことを特徴とする撮像装置。
12. 請求項１に記載の撮像装置であって、
    前記画像処理部は、前記画像データを、同心円から構成される第２の複眼格子パターンを示すデータを用いて変調することでモアレ縞画像を生成し、前記モアレ縞画像をフーリエ変換して周波数スペクトルを算出する、
    ことを特徴とする撮像装置。

Images