JP2022080901A - ３次元画像処理装置 - Google Patents

Abstract

【課題】水平方向全周囲の３次元センシングが可能であり、水平方向の角度によって距離精度が変化しないようにすること。【解決手段】３次元画像処理装置は、第１撮像部１０Ａから得られる撮像画像と第２撮像部１０Ｂから得られる撮像画像から距離情報を抽出する３次元画像処理装置である。第１撮像部１０Ａは、第１レンズ１１Ａ、第１センサ１２Ａを有している。第２撮像部１０Ｂは、第２レンズ１１Ｂ、第２センサ１２Ｂを有している。第１撮像部１０Ａと第２撮像部１０Ｂとを結ぶ略直線上に、第１センサ１２Ａ、第１レンズ１１Ａ、第２センサ１２Ｂ、第２レンズ１１Ｂが順次配置されている。第１撮像部１０Ａの撮像領域と第２撮像部１０Ｂの撮像領域とが重複する共通領域でステレオ視を行い距離画像を生成するステレオ処理部を備えている。【選択図】図２

Description

本発明は、３次元画像処理装置に関する。

天井に設置される監視カメラには、水平方向の周囲３６０度、かつ垂直方向に水平から真下までの広い視野が要求される。この視野範囲内において、信頼度の高い人物の追跡や、被写体の正確な寸法測定を行うためには、画像取得のみならず、距離測定に基づいた３次元センシングも必要となる。

一方、自動車の自動運転の実現においても、自動車の水平方向の周囲３６０度に存在する物体の画像による認識や、３次元センシングが必要である。また、自動車近傍の障害物や縁石、道路の白線等を認識するため、垂直方向には真下付近まで視野を確保する必要がある。

さらに、いずれの場合においても、水平方向の周囲３６０度において、均一な３次元センシング精度が必要である。

例えば特許文献１には、カメラ部とミラー部をＺ軸方向に配置して構成される光学系により、Ｚ軸の周囲の全方位空間を撮像し３次元センシングする装置が開示されている。特許文献２には、異なるＸ軸位置に同じＺ軸方向に向けて設置された２つの広視野の光学系によって、Ｚ軸の周囲の全方位空間を撮像し３次元センシングする装置が開示されている。非特許文献１には、異なるＺ軸位置に互いに逆のＺ軸方向に向けて設置された２つの広視野の光学系によって、Ｚ軸の周囲の全方位空間を撮像し３次元センシングする装置が開示されている。

特開２０１０－２５６２９６号公報 特開２０１７－１０２０７２号公報

W. Gao and S. Shen, "Dual-fisheye omnidirectional stereo," in Intelligent Robots and Systems (IROS), 2017 IEEE/RSJ International Conference on. IEEE, 2017, pp. 6715-6722.

特許文献１および非特許文献１に開示された技術では、水平方向全周囲の３次元センシングが可能である。しかし、垂直方向では、３次元センシングを行えるだけの十分な視野が得られないため、垂直方向における３次元センシングを行うことができない。

また、特許文献２に開示された技術では、水平方向全周囲の３次元センシングが可能であり、さらに下向きにカメラを設置することで、垂直下方向にも３次元センシングが可能である。しかし、水平方向に基線を持ち、その基線方向の近傍における距離の測定精度が低い。このため、水平方向全周囲の３次元センシングの精度が角度によって変化する。

本発明は、このような状況を鑑みてなされたものであって、垂直方向の水平から真下付近までの範囲において、水平方向全周囲の３次元センシングが可能であり、水平方向の角度によって距離精度が変化しない３次元画像処理装置を提供することを目的とする。

本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、以下のとおりである。

本発明の代表的な実施の形態による３次元画像処理装置は、第１撮像部から得られる撮像画像と第２撮像部から得られる撮像画像から距離情報を抽出する３次元画像処理装置である。第１撮像部は、第１レンズ、第１センサを有している。第２撮像部は、第２レンズ、第２センサを有している。第１撮像部と第２撮像部とを結ぶ略直線上に、第１センサ、第１レンズ、第２センサ、第２レンズが順次配置されている。第１撮像部の撮像領域と第２撮像部の撮像領域とが重複する共通領域でステレオ視を行い距離画像を生成するステレオ処理部を備えている。

本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。

すなわち、本発明の代表的な実施の形態によれば、水平方向全周囲の３次元センシングが可能であり、水平方向の角度によって距離精度が変化しないようにすることが可能となる。

本発明の実施の形態１に係る３次元画像処理装置の構成例を示すブロック図である。 本発明の実施の形態１に係る２つの撮像部の設置および撮像領域の例を説明する図である。 実施の形態１における垂直下方向に生じる死角の例を説明する図である。 実施の形態１および非特許文献１におけるステレオ視可能な範囲を比較して示す図である。 角度１８０度以上の角部に設置された３次元画像処理装置を、斜め上方向から見た斜視図である。 本発明の実施の形態３に係る非共通領域における３次元情報の取得方法を説明する図である。 規格化された像高と光の入射角との関係である像高特性の一例を示す図である。 本実施の形態に係る射影方式、および一般的な射影方式の例である等距離射影方式における、垂直方向の解像度の配分の例を示す図である。 本発明の実施の形態５に係る２つの撮像部等の設置および撮像領域の例を説明する図である。 従来技術を適用した場合の撮像方向および撮像領域の一例を説明する図である。 従来技術を適用した場合の撮像方向および撮像領域の他の例を説明する図である。 図１１に示す３次元画像処理装置が基線が鉛直方向となるように角部に設置された場合を、斜め上方向から見た斜視図である。

以下、本発明の実施の形態を、図面を参照しつつ説明する。以下で説明する各実施の形態は、本発明を実現するための一例であり、本発明の技術範囲を限定するものではない。なお、実施例において、同一の機能を有する部材には同一の符号を付し、その繰り返しの説明は、特に必要な場合を除き省略する。また、以下の実施の形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。また、「Ａからなる」、「Ａよりなる」、「Ａを有する」、「Ａを含む」と言うときは、特にその要素のみである旨明示した場合等を除き、それ以外の要素を排除するものでないことは言うまでもない。同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。

（実施の形態１）
図１は、本発明の実施の形態１に係る３次元画像処理装置の構成例を示すブロック図である。本実施の形態の３次元画像処理装置１は、例えば店舗や工場等の天井に設置される。３次元画像処理装置１は、少なくとも設置箇所の水平から垂直真下方向の全周囲の画像を撮影することができる。３次元画像処理装置１の設置箇所の水平から垂直真下方向の周囲とは、例えば、床から天井への高さ方向を垂直方向として、垂直方向の軸に直交する全方位である。

一般的に、監視カメラには、撮影の制御、パン・チルト・ズームの制御、対象物の検知等を制御する制御部が搭載されている。制御部は、例えばＣＰＵ（Central Processing Unit）等のコンピュータが制御プログラム実行することで実現される。３次元画像処理装置１は、制御部と直接あるいは通信ネットワークを介して通信可能に接続され、撮像画像、撮像画像を元に生成した距離画像等の情報を制御部へ出力する。

３次元画像処理装置１は、図１に示すように、第１撮像部１０Ａ、第２撮像部１０Ｂ、および画像処理部２０を備える。第１撮像部１０Ａは、単眼カメラであり、レンズ（第１レンズ）１１Ａ、およびイメージセンサ（第１センサ）１２Ａを備える。第２撮像部１０Ｂも、単眼カメラであり、レンズ（第２レンズ）１１Ｂ、およびイメージセンサ（第２センサ）１２Ｂを備える。

レンズ１１Ａ、１１Ｂは、例えば魚眼レンズ等の１８０度を超える画角を有する超広角レンズである。レンズ１１Ａ、１１Ｂの射影方式は、例えば、等立体角射影方式でもよいし、これ以外の方式でもよい。等立体角射影方式は、ｙ＝２ｆ・ｓｉｎθ／２で表される。なお、ｆはレンズの焦点距離、θは光の入射角である。

イメージセンサ１２Ａは、受光面でレンズ１１Ａを通過した光を受光する。イメージセンサ１２Ａは、受光した信号を撮像画像信号に変換し、撮像画像信号を画像処理部２０の入力Ｉ／Ｆ（インターフェイス）２１Ａへ出力する。イメージセンサ１２Ｂは、受光面でレンズ１１Ｂを通過した光を受光する。イメージセンサ１２Ｂは、受光した信号を撮像画像信号に変換し、撮像画像信号を画像処理部２０の入力Ｉ／Ｆ（インターフェイス）２１Ｂへ出力する。

画像処理部２０は、第１撮像部１０Ａ、第１撮像部１０Ｂから出力されるそれぞれの撮像画像信号に対して画像処理を行う機能ブロックである。画像処理部２０は、入力Ｉ／Ｆ２１Ａ、入力Ｉ／Ｆ２１Ｂ、補正部２２Ａ、補正部２２Ｂ、ステレオ処理部２３、および出力Ｉ／Ｆ２４を備える。

画像処理部２０の各構成要素は、回路により実現されてもよいし、少なくとも一部がプログラムを実行するＣＰＵ等のコンピュータおよびメモリにより実現されてもよい。

入力Ｉ／Ｆ２１Ａは、例えばＡ／Ｄ（アナログ／デジタル）変換器を備え、イメージセンサ１２Ａから出力される撮像画像信号をデジタル変換し、デジタル変換された撮像画像信号を後段の補正部２２Ａへ出力する。入力Ｉ／Ｆ２１Ｂは、例えばＡ／Ｄ（アナログ／デジタル）変換器を備え、イメージセンサ１２Ｂから出力される撮像画像信号をデジタル変換し、デジタル変換された撮像画像信号を後段の補正部２２Ｂへ出力する。

補正部２２Ａは、入力Ｉ／Ｆ２１Ａから出力されるデジタル変換された撮像画像信号に対する各種の画像処理を行うことで撮像画像の補正を行う。補正部２２Ａは、画像処理後の撮像画像信号をステレオ処理部２３へ出力する。補正部２２Ａ、２２Ｂが実行する画像処理は、例えば、汎用的な幾何学変換である。これにより、歪んだ撮像画像が所定の座標系（例えば、円筒座標系）の画像に変換することができる。補正部２２Ａ、２２Ｂが実行する画像処理は、これ以外にも、例えばデモザイキング処理等を含んでもよい。

ステレオ処理部２３は、補正部２２Ａ、２２Ｂからそれぞれ出力される補正後の撮像画像を用いてステレオ処理を実行し、処理結果を出力Ｉ／Ｆ２４へ出力する。

具体的には、ステレオ処理部２３は、第１撮像部１０Ａの撮像領域（視野）ＳＡと第２撮像部１０Ｂの撮像領域（視野）ＳＢとが重なる領域（共通視野）に対するステレオ処理を実行する。ステレオ処理部２３は、第１撮像部１０Ａの補正後の撮像画像、第２撮像部１０Ｂの補正後の撮像画像を用いて、公知のステレオ法により、共通視野の各位置の距離情報を抽出し、距離画像データを生成する。このように、ステレオ処理部２３は、共通視野を含む全方位について距離画像データを生成し、距離画像データを出力Ｉ／Ｆ２４へ出力する。また、ステレオ処理部２３は、第１撮像部１０Ａ、第２撮像部１０Ｂから出力された画像処理前の各撮像画像データ（撮像画像）も、出力Ｉ／Ｆ２４へ出力する。

出力Ｉ／Ｆ２４は、ステレオ処理部２３から出力された撮像画像データや距離画像データを、ＣＰＵやＥＣＵ等の制御部ＣＴＲへ出力する。

図２は、本発明の実施の形態１に係る２つの撮像部の設置および撮像領域の例を説明する図である。図２は、３次元画像処理装置１を水平方向から見た平面図である。図２（ａ）は、３次元画像処理装置１を拡大して示し、図２（ｂ）は、３次元画像処理装置１を縮小して示し、その垂直方向の視野を示している。

第１撮像部１０Ａの撮像方向は、例えば図２（ｂ）に示す鉛直下向きＤを向くように設定されている。同様に、第２撮像部１０Ｂの撮像方向も、例えば鉛直下向きＤを向くように設定されている。ここで、第１撮像部１０Ａと第２撮像部１０Ｂの位置関係は、レンズ１１Ａ、１１Ｂ、イメージセンサ１２Ａ、１２Ｂが略直線状に配置されるように設定される。具体的には、鉛直上方から、イメージセンサ１２Ａ、レンズ１１Ａ、イメージセンサ１２Ｂ、レンズ１１Ｂが順次並ぶように配置される。

ここで、第１撮像部１０Ａの撮像領域ＳＡを、周辺部ＳＡ１および中央部ＳＡ２に分け、第２撮像部１０Ｂの撮像領域ＳＢを、周辺部ＳＢ１および中央部ＳＢ２に分けて考える。周辺部ＳＡ１および周辺部ＳＢ１は、互いに重複し、３次元画像処理装置１の周囲をカバーする共通領域Ｓ１を形成する。

中央部ＳＡ２は、第２撮像部１０Ｂにより視野が遮られるため、第１撮像部１０Ａからは死角となる。したがって、中央部ＳＢ２は、３次元画像処理装置１の鉛直下方向Ｄをカバーする非共通領域Ｓ２を形成する。

ここで、ステレオ法による距離情報の取得において、２つの撮像部（第１撮像部１０Ａおよび第２撮像部１０Ｂ）を結ぶ直線である基線上とその周辺では、距離情報が取得できない、あるいは距離情報の精度が低下するという原理的な性質がある。そこで、本実施の形態では、ステレオ法で距離情報を取得できない領域と、死角のため距離情報を取得できない領域とを同一位置に配置することで、これらの影響を最小限に抑えている。

本実施の形態では、水平方向、垂直方向ともに広い範囲で距離情報を取得することができる。特に、第１撮像部１０Ａの視点と第２撮像部１０Ｂの視点とを結ぶ基線が、それぞれの撮像部の光軸と一致するように配置した場合、基線に垂直な水平方向は、全周囲においてステレオ法による距離精度を均一にすることができるという利点がある。

［従来技術との比較］
ここで、従来技術との比較を行う。図１０は、従来技術を適用した場合の撮像方向および撮像領域の一例を説明する図である。図１０は、非特許文献１における撮像方向及び撮像領域の例が示されている。ここでは、画角１８０度を超えるレンズ１１ａとレンズ１１ｂをそれぞれ有する第１撮像部１０ａ及び第２撮像部１０ｂを用い、第１撮像部１０ａの撮像方向は、鉛直上方向Ｕを向くように設定される。第２撮像部１０ｂの撮像方向は、鉛直下方向Ｄを向くように設定される。

ここで、第１撮像部１０ａの半球状の撮像領域Ｓａを、周辺部Ｓａ１および中央部Ｓａ２に分け、第２撮像部１０ｂの半球状の撮像領域Ｓｂを、周辺部Ｓｂ１および中央部Ｓｂ２に分ける。帯状の外側部Ｓａ１と外側部Ｓｂ１は、互いに重複し３次元画像処理装置の前後左右方向ＬＲＦＢをカバーする共通領域Ｓｃを形成する。ただし、図１０では、Ｆは紙面奥方向、Ｂは紙面手前方向である。

一方、中央部Ｓａ２は、３次元画像処理装置の上方向Ｕ及び左右前後方向ＬＲＦＢをカバーする非共通領域を形成する。中央部Ｓｂ２は、３次元画像処理装置の下方向Ｄ及び左右前後方向ＬＲＦＢをカバーする非共通領域を形成する。

図１０に示すように、曲面状の各撮像領域（中央部Ｓａ２、中央部Ｓｂ２、共通領域Ｓｃ）のうち、水平面周りの領域（共通領域Ｓｃ）のみで、３次元画像処理装置の水平方向周囲の視野がカバーされており、その範囲でステレオ法による距離情報の取得が可能である。

同様の視野範囲をカバーする３次元画像処理装置として、特許文献１では曲面ミラーを使用した技術が提示されている。ここでは、画角１８０度を超える曲面ミラーをそれぞれ有する第１撮像部１０ａ及び第２撮像部１０ｂを用いる。レンズ１１ａの方向は、３次元画像処理装置の鉛直下方向Ｄを向くように設定される。第１撮像部１０ａの曲面ミラーは、上方向Ｕを向いている。レンズ１１ｂの方向は、３次元画像処理装置の上方向Ｕを向くように設定される。第２撮像部１０ｂの曲面ミラーは、下方向Ｄを向いている。この場合においても、視野範囲は、図１０（ｂ）と同様となる。

これらの従来技術を監視カメラに適用する場合、通常考え得る設置方法として、第１撮像部１０ａおよび第２撮像部１０ｂからなる３次元画像処理装置を天井にぶら下げて設置する。このとき、床面やそこに存在する被写体を写す下半球の大部分は、非共通領域である中央部Ｓｂ２で占められるので、ステレオ法では距離情報を取得することができない。

次に、図１１は、従来技術を適用した場合の撮像方向および撮像領域の他の例を説明する図である。図１１は、特許文献２における撮像方向及び撮像領域の例が示されている。ここでは、広視野角のレンズ１１ａ’とレンズ１１ｂ’とをそれぞれ有する第１撮像部１０ａ’及び第２撮像部１０ｂ’を用い、第１撮像部１０ａ’および第２撮像部１０ｂ’の撮像方向は、ともに鉛直上方向Ｕを向くように設定される。ただし、図１１では、Ｕは紙面手前方向、Ｄは紙面奥方向である。

ここで、第１撮像部１０ａ’の半球状の撮像領域Ｓａ’を、右部Ｓａ１'、中央部Ｓａ２'、および左部Ｓａ３'に分け、第２撮像部１０ｂ’の半球状の撮像領域Ｓｂ’を、右部Ｓｂ１'、中央部Ｓｂ２'、および左部Ｓｂ３'に分ける。

曲面状の中央部Ｓａ２'と中央部Ｓｂ２'とは、互いに重複し３次元画像処理装置の上下前後方向ＵＤＦＢをカバーする共通領域Ｓｃ’を形成する。第１撮像部１０ａ’による撮像領域Ｓａ’のうち、第２撮像部１０ｂ’の影となる部分が右部Ｓａ１'を形成する。第２撮像部１０ｂ’による撮像領域Ｓｂ’のうち、右部Ｓａ１'と重なる部分が右部Ｓｂ１'を形成する。第２撮像部１０ｂ’による撮像領域Ｓｂ’のうち、第１撮像部１０ａ’の影となる部分が左部Ｓｂ３'を形成する。第１撮像部１０ａ’による撮像領域Ｓａ’のうち、左部Ｓｂ３'と重なる部分が左部Ｓａ３'を形成する。

図１１に示すように、曲面状の各撮像領域（共通領域Ｓｃ’、右部Ｓｂ１'、左部Ｓａ３'）のうち、前後方向（ＦＢ）の軸周りの領域により、３次元画像処理装置の前後上方向周囲の視野がカバーされている。

この従来技術を監視カメラに適用する場合、通常考え得る設置方法として、第１撮像部１０ａ’および第２撮像部１０ｂ’からなる３次元画像処理装置を天井に下向きに設置する。このとき、第１撮像部１０ａ’と第２撮像部１０ｂ’とを結ぶ基線方向では、お互いの撮像部が死角となるので、ステレオ法では距離情報を取得することができない。

また、左右方向（ＬＲ）に基線が配置されているため、垂直方向（ＵＤ）を軸とした水平方向の周囲において、角度によって距離情報の精度が変化してしまう。特に、基線方向に近い左右方向（ＬＲ）近傍においては、距離情報の精度が低くなる。

これらに対して、天井に設置する監視カメラに本実施の形態の技術を適用すれば、下半球においても距離情報が取得できるため、床面やそこに存在する被写体までの距離情報を取得することができる。また、本実施の形態では、垂直方向（ＵＤ）に基線が配置されているために、垂直方向（ＵＤ）を軸とした水平方向を考えたとき、距離情報の精度は水平方向の角度に依存せず、水平方向の距離情報の精度は均一となる。したがって、本実施の形態では、監視カメラ周囲の均一な３次元センシングが可能となる。

ここで、本実施の形態の説明に戻る。

次に、基線長と死角との関係について説明する。本実施の形態における基線長は、例えば以下に説明するように、死角の大きさの上限値と距離精度の上限値とによって制限される。図３は、実施の形態１における垂直下方向に生じる死角の例を説明する図である。ここで、第１撮像部１０Ａと第２撮像部１０Ｂとの間の基線長をＬ、第２撮像部１０Ｂの死角を生む大きさの半径をＣ、第１撮像部１０Ａと床面３０Ｂとの距離をＨ、床面３０Ｂでの死角の半径をＤ、第１撮像部１０Ａからの死角の見込み角の半分をθとする。第１撮像部１０Ａと第２撮像部１０Ｂの垂直方向の厚みを無視すると、図３より以下の式（１）が成り立つ。

死角の直径２Ｄは、想定する被写体の直径の半分程度以下にする必要がある。死角の半径Ｄがこれ以上大きい場合、被写体の認識や距離測定の精度が不十分となるおそれがある。この死角の半径Ｄの大きさの上限値をＤ_０とすると、基線長Ｌは以下の式（２）に示す条件で制限される。

例えば、監視カメラの場合、主な被写体は人物であるため、この死角の半径Ｄの大きさの上限値Ｄ_０は、１５ｃｍ程度である。Ｈを一般的な天井３０Ａの高さ２.５ｍとして、Ｃを一般的な魚眼レンズの半径２ｃｍとすれば、基線長Ｌは、３３．３ｃｍ以上の条件を満たす必要である。このとき、死角の見込み角の半分θは、３．４度である。

一方、例えば、第１撮像部１０Ａおよび第２撮像部１０Ｂの焦点距離が同一であり、ピクセル単位でｆであるとする。また、距離Ｈ離れた被写体までの距離の測定誤差の上限値がＸ％であるとする。このとき、基線長Ｌは、以下の式（３）の条件で制限される。

例えば、監視カメラへ適用した場合、Ｈを一般的な天井３０Ａの高さ２.５ｍとし、ｆを一般的な魚眼レンズのピクセル単位の焦点距離８００とし、距離測定の誤差の上限値Ｘを５％であるとする。このとき、基線長Ｌは、６．６ｃｍ以上の条件を満たす必要がある。

したがって、本実施の形態の基線長は、式（２）の条件および式（３）の条件を同時に満たす値のうち、最小のものを使うことができる。このように、基線長の条件が規定されることで、２つの撮像部を適切な間隔で設置することが可能となる。

また、店舗や工場に設置される場合、基線長の上限は、例えばその床面３０Ｂから天井３０Ａまでの距離とすることができ、車両に設置される場合は、例えばその車高とすることができる。

例えば、ここでは３つの条件で説明を行ったが、これには限定されない。例えば、基線長を短くし、共通領域を狭めることも可能である。また、検出対象によって基線長を大きくしてもよい。このように、使用形態や検出対象物に応じて条件を適宜変更可能である。

図４は、実施の形態１および非特許文献１におけるステレオ視可能な範囲を比較して示す図である。図４の縦軸はステレオ視可能な範囲の立体角であり、図４の横軸は撮像部の画角である。ここで、実施の形態１における２つの撮像部（第１撮像部１０Ａおよび第２撮像部１０Ｂ）と、非特許文献１における２つの撮像部（第１撮像部１０ａおよび第２撮像部１０ｂ）とにおいて、画角等の特性は同一とした。死角の見込み角の半分θは３.４度とした。

図４に示すように、撮像部の画角が１８０度以下の場合、非特許文献１の技術では、ステレオ視可能な範囲が存在しない。一方、本実施の形態では、撮像部の画角が１８０度以下であっても、ステレオ視が可能である。

また、撮像部の画角が１８０度以上の場合においては、本実施の形態は、非特許文献１と比較して、ステレオ視可能な範囲を大きく広げることが可能である。例えば、一般に入手が容易な画角２２０度の撮像部を利用した場合、本実施の形態では、視野範囲を従来の約２倍に広げることが可能である。

ところで、監視カメラ等には、高い解像度の画像と、低い解像度の距離情報が要求される場合がある。この場合、例えば第２撮像部１０Ｂの撮像領域ＳＢの解像度を高めるため、レンズ１１Ｂおよびイメージセンサ１２Ｂに解像度の高いものを利用し、第１撮像部１０Ａのレンズ１１Ａおよびイメージセンサ１２Ａに解像度の低いものを利用することができる。このようにすることで、コストを低減しつつ、必要な距離情報を得ることが可能である。

また、イメージセンサ１２Ａに解像度の低いものを利用する場合、センササイズが小さいものを利用してもよい。この場合、同じレンズ１１Ａを使用すると、撮像領域ＳＡが減少してしまう。そこで、センササイズが小さいものを利用する場合、レンズ１１Ａの焦点距離を短くすることで、同様の撮像領域ＳＡを確保することができる。また、同時に、後述の実施の形態４で説明する像高特性の調整を併用することで、解像度の低下を低減させることも可能である。

例えば、画像の解像度に対して必要な距離情報の解像度が１/４の場合、イメージセンサ１２Ａの解像度をイメージセンサ１２Ｂの解像度の１/４としても必要な情報を得ることができる。また、画像のデータ量が小さくなるため、画像処理の負荷を軽減することができる。なお、具体例として、イメージセンサ１２Ａの解像度とイメージセンサ１２Ｂの解像度との比率が１：４となる場合を例に挙げたが、解像度の比率の具体的な数値については特に限定されない。

［変型例］
次に、本実施の形態の変形例を説明する。図５は、角度１８０度以上の角部に設置された３次元画像処理装置を、斜め上方向から見た斜視図である。図５（ａ）は、拡大した３次元画像処理装置１を示し、図５（ｂ）は、上方から見た３次元画像処理装置１およびその水平方向の撮像領域ＳＡ、ＳＢを示している。

図５に示す第１撮像部１０Ａおよび第２撮像部１０Ｂは、角度１８０度以上の角部４０に、鉛直下向きに設置されている。３次元画像処理装置１は、水平方向に周囲３６０度の撮像領域ＳＡ、ＳＢを持つため、角度１８０度以上の角部４０に３次元画像処理装置１を設置した場合においても、その全周囲を撮像することができる。

一方、前述した通り、図１０に示す非特許文献１の技術や特許文献１の技術のように、通常考え得る基線が鉛直方向となるような場合、水平方向に周囲３６０度の撮像領域Ｓａ、Ｓｂを持つが、垂直方向に広いステレオ視野を得ることができない。また、図１１に示す特許文献２の技術のように基線が水平方向となるような場合、垂直方向に広いステレオ視野が得られるが、水平方向の角度によって距離情報の精度が変化してしまう。

図１２は、図１１に示す３次元画像処理装置が基線が鉛直方向となるように角部に設置された場合を、斜め上方向から見た斜視図である。図１２には、特許文献２の技術を用いた場合が示されている。図１２では、左側に拡大した３次元画像処理装置が示され、右側に上方から見た３次元画像処理装置およびその水平方向の撮像領域Ｓａ’およびＳｂ'が示されている。

この場合、図１２の右側に示すとおり、角部４０の角度が第１撮像部１０ａ’および第２撮像部１０ｂ’の画角を超えた場合、撮像できない領域が発生することがわかる。また、垂直方向に角度が変わると、第１撮像部１０ａ’と第２撮像部１０ｂ’とで得られる像の拡大率が変わるため、画像の解像度および距離情報の精度が変化してしまう。

なお、図５に示す本実施の形態の例では、３次元画像処理装置１において、角部４０による死角になる部分を最小化しつつ、撮像領域ＳＡ、ＳＢを最大化するように、イメージセンサ１２Ａ、１２Ｂをずらして配置することも可能である。例えば、イメージセンサ１２Ａ、１２Ｂの中心を、レンズ１１Ａ、１１Ｂの光軸とずらして角部４０側に寄せて配置することで、角部４０によって死角になる部分を最小化することが可能である。

＜本実施の形態による主な効果＞
本実施の形態によれば、第１撮像部１０Ａと第２撮像部１０Ｂとを結ぶ略直線上に、イメージセンサ１２Ａ、レンズ１１Ａ、イメージセンサ１２Ｂ、レンズ１１Ｂが順次配置されている。また、ステレオ処理部２３は、第１撮像部１０Ａの撮像領域と第２撮像部１０Ｂの撮像領域とが重複する共通領域でステレオ視を行い距離画像を生成する。この構成によれば、水平方向全周囲、かつ垂直方向には水平から真下付近までの範囲の３次元センシングが可能となる。さらに、水平方向の角度によっても距離精度が変化しない。

ここでは、レンズ１１Ａ、１１Ｂの射影方式として、等立体角射影方式を例に挙げたが、射影方式については特に限定されない。監視カメラに適用する例として、第１撮像部１０Ａの一部が天井３０Ａに埋め込まれ、第２撮像部１０Ｂが天井３０Ａからぶら下がる例を例示したが、構成はこの限りではなく、第２撮像部１０Ｂも天井３０Ａに埋め込まれている場合や、第１撮像部１０Ａの全てが天井３０Ａに埋め込まれている場合、第１撮像部１０Ａの全てが天井３０Ａからぶら下がった配置も可能である。さらに、第１撮像部１０Ａや第２撮像部１０Ｂは、天井に固定されているのではなく、床面３０Ｂや壁面３０Ｄから延びる支持具に固定されてもよい。

本実施の形態では、監視カメラが主に店舗や工場等に設置される場合を前提として説明を行ったが、設置箇所の他の例としては、例えば自動車や二輪車等の車両やドローン等挙げられる。この場合、撮像部は、少なくとも車両の水平から垂直真下方向の周囲を撮像する。車両の水平から垂直真下方向の周囲とは、例えば、車両の高さ方向を垂直方向とした場合に垂直方向の軸に直交する全方位である。つまり、この水平方向の周囲は、車両の前後左右を含む３６０度全方位である。

車両の四隅に設置する車載カメラに本技術を適用すれば、下半球においても距離情報が取得できるため、路面や近傍の障害物までの距離情報を取得することができる。また、垂直方向（ＵＤ）に基線が配置されているため、垂直方向（ＵＤ）を軸とした水平方向を考慮すれば、距離情報の精度は、水平方向の角度に依存しない。このため、車両周囲に対する均一な３次元センシングが可能となる。

また、本実施の形態によれば、第１撮像部１０Ａは、第２撮像部１０Ｂの略中心を撮像する。この構成によれば、例えば図２に示すように、非共通領域Ｓ２を左右から挟む２つの共通領域Ｓ１を均等に配分することが可能となる。

また、本実施の形態によれば、レンズ１１Ａ、１１Ｂの少なくともいずれかを、１８０度を超える画角を有する魚眼レンズとすることができる。この構成によれば、撮像部の撮像方向を、垂直下方向あるいは垂直上方向に設定することにより、水平方向全周の撮像画像を取得することが可能となる。

また、本実施の形態によれば、第１撮像部１０Ａおよび第２撮像部１０Ｂは、天井に設置され、第１撮像部１０Ａの撮像方向および第２撮像部１０Ｂの撮像方向は、床面を向くように設定される。この構成によれば、天井に設置される監視カメラに３次元画像処理装置１を好適に適用可能である。

（実施の形態２）
次に、実施の形態２について説明する。実施の形態１では、非共通領域Ｓ２（図２を参照）において距離情報を抽出することができなかった。本実施の形態では、非共通領域Ｓ２の距離情報を算出する点が実施の形態１と異なる。

すでに述べた通り、共通領域Ｓ１（図２を参照）に対してはステレオ法を用いて距離情報を取得することができる。一方、非共通領域Ｓ２に対しては、３次元画像処理装置１が車両などの移動体に設置されている場合には、例えば以下の方法で距離情報を抽出する。

ステレオ処理部２３は、車両の移動中に異なる位置・時刻で取得された２つの画像に基づき、公知のモーションステレオ法により距離情報を抽出し、距離画像データを生成する。モーションステレオ法とは、１台のカメラを移動して２つの位置・時刻で得られる画像を使ってステレオ視するものであり、移動視差法ともいう。ただし、一般的に、モーションステレオ法による距離情報は、ステレオ法による距離情報よりも精度が低いため、モーションステレオ法による距離情報は補完的に用いることが望ましい。

なお、本実施の形態では、非共通領域Ｓ２に対してモーションステレオ法を用いて距離情報を抽出したが、距離情報の算出方式についてはこれに限定されるものではない。例えば、ＡＩ(Artificial Intelligence)技術を用いて物体までの距離を計算してもよい。

本実施の形態によれば、共通領域Ｓ１に対しては、ステレオ法を用いて距離情報が得られ、非共通領域Ｓ２に対しては、モーションステレオ法を用いて距離情報が得られる。これらの距離情報を組み合わせることで、３次元画像処理装置１の水平から垂直真下方向の全周囲の視野の距離情報が取得可能となる。

（実施の形態３）
次に、実施の形態３について説明する。実施の形態２では、３次元画像処理装置１が移動体に設置されていない場合は、非共通領域Ｓ２に対する距離情報を取得することができなかった。本実施の形態では、３次元画像処理装置１が、天井等の非移動体に設置されている場合において、移動する被写体の非共通領域Ｓ２に対する距離情報を取得する方法について説明する。

本実施の形態においても、実施の形態２と同様、非共通領域Ｓ２に対しては、モーションステレオ法を用いて距離情報が抽出される。ただし、３次元画像処理装置１が天井等の非移動体に設置されている場合、２つの時刻間での３次元画像処理装置１と被写体との間の相対的な移動距離を算出することができない。相対的な移動距離が算出できないと、モーションステレオ法を用いた距離情報を抽出することができない。

そこで、本実施の形態では、被写体の高さＴを算出した後、３次元画像処理装置１と被写体との間の相対的な移動距離を算出する。

図６は、本発明の実施の形態３に係る非共通領域における３次元情報の取得方法を説明する図である。図６には、非共通領域の距離情報を計算する際のパラメータが示されている。まず、撮像部１０Ａから床面３０Ｂまでの距離Ｈが取得される。なお、距離Ｈは、３次元画像処理装置１を設置する際に測定したものでもよいし、周囲の共通領域Ｓ１で算出された３次元情報の値を内挿して取得したものでもよい。

ある時刻（撮像時刻）に取得された撮像画像に写る被写体を被写体４０Ａ、それより後の異なる時刻に取得された撮像画像に写る同じ被写体を被写体４０Ｂとする。まず算出したい距離情報は、被写体４０Ａ、４０Ｂの高さＴである。床面３０Ｂにおける、被写体４０Ａと４０Ｂとの距離をＤｓとする。被写体４０Ａが床面３０Ｂと接する点が撮像面３０Ｃに投影された位置をｂ_０とする。被写体４０Ｂが床面３０Ｂと接する点が撮像面３０Ｃに投影された位置をｂ_１とする。被写体４０Ａの高さ位置（高さＴの位置）の点が撮像面３０Ｃに投影された位置をｔ_０とする。被写体４０Ｂの高さ位置の点が撮像面３０Ｃに投影された位置をｔ_１とする。

距離Ｈ、位置ｂ_０、ｂ_１から、以下の式（４）が得られる。

また、以下の式（５）の関係も成り立つ。

これら２つの式（４）、（５）から、高さＴは以下の式（６）の関係を満たす。

ステレオ処理部２３は、これらの式を用いて被写体の高さＴを算出した後、３次元画像処理装置１（被写体を撮像した撮像部）と被写体との間の相対的な距離を算出する。その後、ステレオ処理部２３は、算出された相対距離から非共通領域の距離画像を生成する。

このようにして、本実施の形態では、共通領域Ｓ１に対しては、ステレオ法を用いて距離情報が得られ、非共通領域Ｓ２に対しては、式（６）に従って距離情報が得られる。これらの距離情報を組み合わせることで、３次元画像処理装置１の水平から垂直真下方向の全周囲の視野の距離情報が取得可能となる。

（実施の形態４）
次に実施の形態４について説明する。例えば、車載カメラのように、水平方向に高い距離精度が要求される場合、垂直下方向付近やステレオ視ができない非共通領域Ｓ２の範囲の解像度を落とし、代わりに水平方向近傍やステレオ視の可能な共通領域Ｓ１の解像度を上げることが効果的な場合がある。また、ステレオ視ができない非共通領域Ｓ２で撮像画像を取得する必要がなければ、非共通領域Ｓ２に配分される解像度が無駄になってしまう。そこで、本実施の形態では、垂直方向の入射角に対する解像度の配分を変更する。

実施の形態１では、レンズ１１Ａ、１１Ｂの射影方式は、例えば等立体角射影方式（２ｆ・ｓｉｎθ／２）であるとして説明した。一方、この射影方式を変更すれば、垂直方向の入射角に対する解像度の配分を変更することが可能である。

図７は、規格化された像高と光の入射角との関係である像高特性の一例を示す図である。図７には、本実施の形態で説明する射影方式、等立体角射影方式（２ｆ・ｓｉｎθ／２）、等距離射影方式（ｆθ）のそれぞれ像高特性が示されている。等立体角射影方式、および等距離射影方式では、ステレオ視ができない非共通領域Ｓ２にも解像度が配分されている。また、等距離射影方式では、入射角に対して均等に解像度が配分されている。

一方、本実施の形態の射影方式では、垂直下方向付近や非共通領域Ｓ２の解像度が削減され、削減された解像度が水平方向に配分される。本実施の形態の射影方式では、入射角０度から２０度までの光は撮像画像として描画せず、それ以上の入射角の光のみを水平方向の解像度を高くして描画する。

図８は、本実施の形態に係る射影方式、および一般的な射影方式の例である等距離射影方式における、垂直方向の解像度の配分の例を示す図である。図８は、動径方向の線分の間隔が狭いほど解像度が高く、動径方向の線分の間隔が広いほど解像度が低いことを示している。図８に示すように、等距離射影方式では、解像度が角度に依存しないが、本実施の形態の射影方式では、水平方向の解像度が高く、さらに垂直下方に視野を持たない。本実施の形態の射影方式を実現するには、例えば、光軸付近で大きな曲率を持ったレンズが用いられる。すなわち、本実施の形態では、レンズ１１Ａ、１１Ｂの分解能は、水平方向付近で高く、垂直下方向付近では水平方向付近より低い。言い換えると、レンズ１１Ａ、１１Ｂの分解能は、非共通領域より共通領域の方が高い。また、言い換えると、レンズ１１Ａ、１１Ｂの分解能は、中央より周辺の方が高くなっている。

なお、本実施の形態では、レンズ１１Ａ、１１Ｂの射影方式として、図７に示す射影方式を例にあげたが、射影方式の具体的な特性について特に限定されるものではない。

本実施の形態によれば、第１撮像部１０Ａの撮像方向および第２撮像部１０Ｂの撮像方向が、床面を向くように設定された場合、レンズ１１Ａ、１１Ｂの分解能は、垂直下方向付近の領域より、水平方向付近の領域の方が高い。すなわち、レンズ１１Ａ、１１Ｂの分解能は、非共通領域より共通領域の方が高い。この構成によれば、水平方向の解像度を向上させることができる。

また、死角の大きさの半分が大きい場合、イメージセンサの解像度を有効活用して、ステレオ視の可能な共通領域Ｓ１に対して高い解像度を確保することができる。

（実施の形態５）
次に、実施の形態５について説明する。例えば、屋内で天井の形状から空間を把握しつつ稼働するロボットに３次元画像処理装置１を搭載する場合など、垂直上方向にもより広い視野が必要となる場合がある。そこで、本実施の形態では、垂直上方向にも３次元センシングを行う方法について説明する。

図９は、本発明の実施の形態５に係る２つの撮像部等の設置および撮像領域の例を説明する図である。図９は、３次元画像処理装置１を水平方向から見た平面図である。図９に示すように、本実施の形態では、第１撮像部１０Ａと第２撮像部１０Ｂとの間にミラーが設けられる。図９（ａ）は、拡大した３次元画像処理装置１を示し、図９（ｂ）は、縮小した３次元画像処理装置１及びその垂直方向の視野を示す。

ミラー１３は、第１撮像部１０Ａおよび第２撮像部１０Ｂが扱う波長の光を反射し、第１撮像部１０Ａと第２撮像部１０Ｂの中間に設置される。

第１撮像部１０Ａは、ミラー１３が反射した第１撮像部１０Ａの逆側の領域からの光を受光し、第１撮像部１０Ａの逆側の領域の撮像画像を生成することができる。例えば、第１撮像部１０Ａおよび第２撮像部１０Ｂの撮像方向が、垂直下向きＤを向くように設定されている場合、垂直上方向Ｕからの光は、ミラー１３に反射され、レンズ１１Ａを通してイメージセンサ１２Ａで受光される。これにより、垂直上方向Ｕの撮像画像を生成することが可能となる。

例えば、撮像領域ＳＡの中央部ＳＡ２の見込み角に収まるようにミラー１３が設置された場合、第２撮像部１０Ｂによる死角となっていた中央部ＳＡ２を、垂直上方向Ｕの撮影範囲として有効活用することができる。

ミラー１３は、例えば、焦点１４を下側に持つ双曲面ミラーとすることができる。このようにすれば、ミラー１３による撮像領域ＳＭの撮影において、焦点１４を視点とした撮像画像が得られる。

ここで、ミラー１３による撮像領域ＳＭを周辺部ＳＭ１と中央部ＳＭ２とに分け、撮像部１０Ａ、１０Ｂによる撮像領域ＳＡ、ＳＢと撮像領域ＳＭとが重なる部分を周辺部ＳＭ１とする。

このとき、周辺部ＳＭ１において、第１撮像部１０Ａ、第２撮像部１０Ｂおよびミラー１３の焦点１４の３つの視点からの撮像画像が得られる。このため、例えば第２撮像部１０Ｂおよび焦点１４を視点としたそれぞれの撮像画像を用いたステレオ視も可能となる。

この場合、第１撮像部１０Ａおよび第２撮像部１０Ｂを用いたステレオ視に比べ基線長が短くなるため、２つの画像の視点が近づき、ステレオ視可能な領域を増加させることが可能となる。

なお、本実施の形態では、ミラー１３が焦点を下側に持つ双曲面の場合を例にあげたが、双曲面の向きや曲面の形状については特に限定されない。

本実施の形態によれば、第１撮像部１０Ａは、ミラー１３が反射した第１撮像部１０Ａの逆側の領域からの光を受光し、第１撮像部１０Ａの逆側の領域の撮像画像を生成する。この構成によれば、垂直上方向にも視野を広げることが可能となる。

以上、本発明について複数の実施の形態を用いて説明した。もちろん、本発明は上記の実施の形態に限定されるものではなく、様々な変形例が含まれる。

また、３次元画像処理装置の各構成要素の配置、寸法、形状等の構成は、本発明の目的を達成できれば、上記に説明あるいは図示した例に限られない。また、「水平」、「垂直」、「鉛直」、「直交」、「平面」などの構成要素の関係、位置、方向などを表す言葉は、本発明の目的及び効果を達成できるのであれば、言葉どおりの厳密な意味に限られず、その意味と実質的に同一な場合も含むことができる。

また、上記した実施の形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施の形態の構成の一部を他の実施の形態の構成に置き換えることが可能であり、また、ある実施の形態の構成に他の実施の形態の構成を加えることも可能である。また、各実施の形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。

また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）等の記録媒体に置くことができる。

また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

本発明は、３次元画像処理装置に限られず、３次元画像処理方法、コンピュータ読み取り可能なプログラム、３次元画像処理装置を搭載した車両、などの様々な態様で提供できる。

１…３次元画像処理装置、１０Ａ…第１撮像部、１０Ｂ…第２撮像部、１１Ａ…レンズ（第１レンズ）、１１Ｂ…レンズ（第２レンズ）、１２Ａ…イメージセンサ（第１センサ）、１２Ｂ…イメージセンサ（第２センサ）、１３…ミラー、１４…焦点、２０…画像処理部、２１Ａ、２１Ｂ…入力Ｉ／Ｆ、２２Ａ、２２Ｂ…補正部、２３…ステレオ処理部、２４…出力Ｉ／Ｆ、３０Ａ…天井、３０Ｂ…床面、３０Ｃ…撮像面、３０Ｄ…壁面、４０…角部、Ｓ…撮像領域（視野）、Ｌ…基線長、Ｈ…天井高、Ｔ…被写体の高さ、Ｃ…撮像部の半径、θ…死角の見込み角の半分。

Claims (14)

1. 第１撮像部から得られる撮像画像と第２撮像部から得られる撮像画像から距離情報を抽出する３次元画像処理装置であって、
   前記第１撮像部は、第１レンズ、第１センサを有し、
   前記第２撮像部は、第２レンズ、第２センサを有し、
   前記第１撮像部と前記第２撮像部とを結ぶ略直線上に、前記第１センサ、前記第１レンズ、第２センサ、前記第２レンズが順次配置され、
   前記第１撮像部の撮像領域と前記第２撮像部の撮像領域とが重複する共通領域でステレオ視を行い距離画像を生成するステレオ処理部を備えている、
   ３次元画像処理装置。
2. 請求項１に記載の３次元画像処理装置において、
   前記第１撮像部は、前記第２撮像部の略中心を撮像する、
   ３次元画像処理装置。
3. 請求項１に記載の３次元画像処理装置において、
   移動体に設置され、
   前記ステレオ処理部は、前記第２撮像部の撮像領域の中央部に対して、モーションステレオ処理を実行して前記距離画像を生成する、
   ３次元画像処理装置。
4. 請求項１に記載の３次元画像処理装置において、
   前記第１レンズおよび前記第２レンズの少なくともいずれかは、１８０度を超える画角を有する魚眼レンズである、
   ３次元画像処理装置。
5. 請求項１に記載の３次元画像処理装置において、
   前記第１撮像部の撮像方向および前記第２撮像部の撮像方向が、床面を向くように設定され、
   前記第１レンズおよび前記第２レンズの分解能は、垂直下方向付近の領域より、水平方向付近の領域の方が高い、
   ３次元画像処理装置。
6. 請求項１に記載の３次元画像処理装置において、
   前記第１撮像部の撮像方向および前記第２撮像部の撮像方向が、床面を向くように設定され、
   前記第１レンズおよび前記第２レンズの分解能は、水平方向近傍の領域より、垂直下方向の領域の方が高い、
   ３次元画像処理装置。
7. 請求項１に記載の３次元画像処理装置において、
   前記第１レンズおよび前記第２レンズの分解能は、前記第２撮像部により前記第１撮像部の視野が遮られ死角となる非共通領域より、前記共通領域の方が高い、
   ３次元画像処理装置。
8. 請求項１に記載の３次元画像処理装置において、
   前記第１撮像部および前記第２撮像部は、天井に設置され、
   前記第１撮像部の撮像方向および前記第２撮像部の撮像方向は、床面を向くように設定される、
   ３次元画像処理装置。
9. 請求項１に記載の３次元画像処理装置において、
   前記第１撮像部および前記第２撮像部は、移動体に設置され、
   前記第１撮像部の撮像方向およびと前記第２撮像部の撮像方向は、前記移動体の下方向を向くように設定される、
   ３次元画像処理装置。
10. 請求項８または９に記載の３次元画像処理装置において、
    前記ステレオ処理部は、前記第２撮像部の撮像領域の中央部に対して、外部から入力された、あるいは前記共通領域で算出された３次元情報を内挿して取得した床面までの距離情報に基づいて、モーションステレオ処理を実行して前記距離画像を生成する、
    ３次元画像処理装置。
11. 請求項１０に記載の３次元画像処理装置において、
    前記ステレオ処理部は、ある撮像時刻に取得された撮像画像に写る被写体と、前記撮像時刻それより後の異なる時刻に取得された撮像画像に写る前記被写体とから、前記被写体の高さを算出し、前記被写体を撮像した撮像部との相対距離を算出し、前記第２撮像部により前記第１撮像部の視野が遮られ死角となる非共通領域の距離画像を生成する、
    ３次元画像処理装置。
12. 請求項８または９に記載の３次元画像処理装置において、
    前記第１撮像部と前記第２撮像部との間の基線長をＬ、前記第１撮像部と床面との距離をＨ、前記第２撮像部の半径をＣ、許容される死角の半径の最大値をＤ_０としたとき、
    前記基線長ＬがＨ・Ｃ／Ｄ_０以下の条件を満たす、
    ３次元画像処理装置。
13. 請求項１に記載の３次元画像処理装置において、
    前記第１撮像部と前記第２撮像部との中間に、前記第１撮像部および前記第２撮像部が扱う波長を反射するミラーが設置され、
    前記第１撮像部は、前記ミラーが反射した前記第１撮像部の逆側の領域からの光を受光し、第１撮像部１０Ａの逆側の領域の撮像画像を生成する、
    ３次元画像処理装置。
14. 請求項１３に記載の３次元画像処理装置において、
    前記ミラーは、双曲面ミラーである、
    ３次元画像処理装置。

Images