JP2004120600A

JP2004120600A - デジタル双眼鏡

Info

Publication number: JP2004120600A
Application number: JP2002283817A
Authority: JP
Inventors: Tatsuhide Tsuyuki; 露木　竜秀; Shuji Ono; 小野　修司; Shigeaki Miura; 三浦　栄朗
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 2002-09-27
Filing date: 2002-09-27
Publication date: 2004-04-15

Abstract

【課題】複数の撮像素子による撮影によって得られた画像を立体視可能かつ高画質に表示する。
【解決手段】デジタル双眼鏡の一対の対物レンズを介して入射された光を一対の撮像素子３０Ａ，３０Ｂによって撮影することで、両眼視差に相当する相違が生じている一対の画像（ステレオ画像）を取得し、各種の補正を経てメモリ４６Ａ，４６Ｂに記憶された一対の画像に対し、両眼視差に相当する像構造の幾何学的な相違を認識した後に、認識した像構造の幾何学的な相違以外の相違（例えば撮像素子３０Ａ，３０Ｂによって一対の画像に各々重畳されているランダムなノイズの相違）を減少させるノイズ低減処理を行う。そして、ノイズ低減処理後の画像を表示デバイス３４Ａ，３４Ｂに表示させる。表示デバイス３４Ａ，３４Ｂに表示された画像は、接眼レンズを介してユーザにより視認（立体視）される。
【選択図】　　　　　図３

Description

【０００１】
【発明の属する技術分野】
本発明はデジタル双眼鏡に係り、特に、一対の撮像手段によって被写体を撮影し撮影によって得られた画像を立体視可能に表示するデジタル双眼鏡に関する。
【０００２】
【従来の技術】
双眼鏡は遠景を両眼で同時に拡大して見ることができ、見易いために疲れにくく、対象物を立体的に認識可能であるという特長を有しており、従来より広範に普及しているが、近年、ユーザの利便性向上等を目的として、付加機能を搭載した双眼鏡が見受けられるようになってきている。
【０００３】
例えば映像増倍管装置を搭載し、暗闇等でも対象物を認識可能な双眼鏡タイプの暗視スコープが市販されている（例えば非特許文献１参照）。
【０００４】
また、例えばデジタルスチルカメラの機能を搭載した双眼鏡も市販されている（例えば非特許文献２参照）。
【０００５】
一方、光学像を撮像素子により光電変換し、該光電変換によって得られた画像信号をデジタルデータへ変換することで得られるデジタル画像のノイズ低減としては、従来より種々の手法が知られており、例えば原画像を複数の小ブロックに分割し、各小ブロック毎に、ブロック内の画像データの特徴を代表的に表すテンプレートプロファイルを算出し、算出したテンプレートプロファイルを用いて当該ブロック内の元の画像データプロファイルを近似し、該近似によって得られた元の画像データを置換することで画像データのノイズを除去する手法がある（例えば特許文献１参照）。
【０００６】
また、例えば原画像データに対して平滑化・エッジ検出を行い、平滑化画像データから被写体のエッジとノイズが混在する混在画像データを求め、エッジ検出で求めたエッジ強度データからノイズの重み付け係数を求め、ノイズの重み付け係数と混在画像データからノイズデータを求める一方、ノイズ抑制の広がりを表すノイズ抑制分布関数を設定し、この関数とノイズデータとの畳み込み積分を行ってノイズ抑制分布を算出し、ノイズデータにノイズ抑制分布を乗じてノイズ抑制成分を求め、このノイズ抑制成分を変倍して画像データから減算することでノイズを抑制する手法もある（例えば特許文献２参照）。
【０００７】
更に、例えばフィルム原稿を光電的に読み取って得られた入力画像信号を高周波成分とそれ以外の成分に分解し、高周波成分を強調すると共に、フィルム原稿がアンダーネガ又は高感度フィルムの少なくとも一方である場合には、最も低い周波数成分の帯域がより狭くなるように、高周波成分以外の成分を２以上の成分に分解し、高周波成分及び最も低い周波数成分以外の周波数成分を抑制することで粒状（ノイズ）を抑制する手法もある（例えば特許文献３参照）。
【０００８】
【特許文献１】
特開２００１−１４４９６４公報
【特許文献２】
特開平２００１−２８５６４０公報
【特許文献３】
特開平１１−２７５３５０号公報
【非特許文献１】
（株）ケンコー、”スーパーナイト　シリーズ”、［ｏｎｌｉｎｅ］、［平成１４年８月１９日検索］、インターネット＜ＵＲＬ：ｈｔｔｐ：／／ｗｗｗ．ｋｅｎｋｏ−ｔｏｋｉｎａ．ｃｏ．ｊｐ／ｏｐｔｉｃａｌ／４９６１６０７１４５４２５．ｈｔｍｌ＞
【非特許文献２】
旭光学（株）、”Ｄｉｇｉｔａｌ　Ｂｉｎｏｃｕｌａｒｓ　−ＤＩＧＩＢＩＮＯ−”、［ｏｎｌｉｎｅ］、
［平成１４年８月１９日検索］、インターネット＜ＵＲＬ：ｈｔｔｐ：／／
ｗｗｗ．ｐｅｎｔａｘ．ｃｏ．ｊｐ／ｊａｐａｎ／ｐｒｏｄｕｃｔ／＞
【０００９】
【発明が解決しようとする課題】
対象物を立体的に認識可能という特長を損なうことなく、双眼鏡を使用するユーザの利便性を向上させるには、各々が撮影した画像に両眼視差に相当する相違が生じるように複数の撮像素子を双眼鏡に搭載し、被写体を複数の撮像素子によって各々撮影し、撮影によって得られた複数の画像（ステレオ画像）に所定の画像処理を施した後に、画像処理後の画像を立体視可能に表示することが有効である。上記構成を採用することで、表示する画像を画像処理によって自由に加工することができるので、ユーザの利便性向上に寄与する種々の機能を付加することが可能となる。
【００１０】
本願発明者等は、上記構成の双眼鏡を想定し、２台のデジタルスチルカメラ（ＤＳＣ）を用いてステレオ画像を撮影し、撮影したステレオ画像をフィルム等の記録材料に記録し、立体視して画質を評価する実験を行った。その結果、ステレオ画像の左右の画像に両眼視差に相当する相違以外の相違が生じている場合、当該ステレオ画像を立体視すると、前記両眼視差に相当する相違以外の相違が、非常に顕著な画質欠陥として視認されることが明らかになった。
【００１１】
例えばＤＳＣによる撮影によって得られた画像は、撮像素子として内蔵されているＣＣＤの特性により、特に高濃度の部分（撮影したシーン全体のうち撮影時の入射光量の低い部分）に視認可能なノイズが生ずる。このノイズは単一の画像を目視している限りはそれ程目立たないが、ランダムなノイズであるため、ステレオ画像の左右の画像に異なるパターンのノイズとして現れることになり、このようなノイズが生じているステレオ画像を立体視すると、鑑賞者には、ノイズのパターンが空間上に浮いており、且つちらついているように見え、単一の画像を目視している場合と比較してノイズが顕著に視認されることになる。
【００１２】
上記の現象は、人間の視覚が、両眼で知覚した左右像のうちの相違している部分に感度が高い特性を有しており、左右像のうちの相違している部分を認識した鑑賞者の脳が、過去の経験から金属等の光沢と解釈して処理することが原因ではないかと推察される。
【００１３】
これに対し、先に述べたデジタル画像のノイズ低減の手法は、何れも単一の画像を対象としたものであり、双眼鏡に搭載した複数の撮像素子によって撮像されたステレオ画像の個々の画像に前記各手法を適用したとしても、ステレオ画像を立体視する場合に顕著に視認される画質欠陥を軽減又は解消することは困難であった。
【００１４】
本発明は上記事実を考慮して成されたもので、複数の撮像素子による撮影によって得られた画像を立体視可能かつ高画質に表示することができるデジタル双眼鏡を得ることが目的である。
【００１５】
【課題を解決するための手段】
上記目的を達成するために請求項１記載の発明に係るデジタル双眼鏡は、各々が撮影した画像に両眼視差に相当する相違が生ずるように配置された一対の撮像手段と、前記一対の撮像手段によって撮影された一対の画像における、前記両眼視差に相当する像構造の幾何学的な相違以外の相違を減少させる画像処理を行う画像処理手段と、前記画像処理手段によって画像処理が行われた一対の画像を立体視可能に各々表示する表示手段と、を備え、これらが一体化されて構成されている。
【００１６】
請求項１記載の発明に係るデジタル双眼鏡には、一対の撮像手段が、各々が撮影した画像に両眼視差に相当する相違が生ずるように配置されており、該一対の撮像手段によって撮影された一対の画像における、両眼視差に相当する像構造の幾何学的な相違以外の一対の画像における相違を減少させる処理を行う。これにより、一対の撮像手段によって撮影された一対の画像における両眼視差に相当する像構造の幾何学的な相違以外の相違、すなわち一対の画像を立体視した場合に顕著な画質欠陥として認識される相違が減少されることになる。そして、請求項１記載の発明に係る表示手段は、画像処理手段によって画像処理が行われた一対の画像を立体視可能に各々表示するので、複数の撮像素子による撮影によって得られた画像を立体視可能かつ高画質に表示することができる。
なお、請求項１記載の発明において、両眼視差に相当する像構造の幾何学的な相違以外の相違としては、例えば一対の画像に各々重畳されているノイズ成分の相違や、一対の画像における色味の相違が挙げられ、画像処理手段は、重畳されているノイズ成分の相違や色味の相違を減少させる処理を行うように構成することができるが、一対の画像における両眼視差に相当する像構造の幾何学的な相違の影響により、一対の画像におけるノイズ成分や色味の相違が容易には認識できないことも多い。
【００１７】
これを考慮すると、請求項１記載の発明において、画像処理手段は、例えば請求項２に記載したように、一対の撮像手段によって撮影された一対の画像における、前記両眼視差に相当する像構造の幾何学的な相違を認識し、認識した前記像構造の幾何学的な相違以外の相違を減少させる画像処理を行うように構成することが好ましい。
【００１８】
請求項２記載の発明において、画像処理手段による像構造の幾何学的な相違の認識は、具体的には、例えば一対の画像のマッチングを行うことによって実現できる。上記のマッチングには、例えば一対の画像上の対応する点対を求めるポイントパターン・マッチングや、一対の画像上の対応する線セグメント対を求めるラインパターン・マッチング等を適用できる。これにより、一対の画像における両眼視差に相当する像構造の幾何学的な相違を精度良く認識することができる。そして請求項２記載の発明に係る画像処理手段は、両眼視差に相当する像構造の幾何学的な相違の認識結果に基づき、一対の画像における前記像構造の幾何学的な相違以外の相違を減少させる処理を行うので、複数の撮像素子による撮影によって得られた画像を立体視可能かつ更に高画質に表示することができる。
【００１９】
また、本発明に係る一対の画像における両眼視差に相当する像構造の幾何学的な相違以外の典型的な相違としては、例えば画像にノイズ成分が重畳されることによる相違が挙げられるが、像構造の幾何学的な相違以外の相違を生じさせるノイズ成分の重畳には、詳しくは、一対の画像のうちの一方の画像にのみノイズ成分が重畳される場合と、一対の画像に相互に異なるノイズ成分が重畳される場合がある。例えば、一対の撮像手段のうちの一方の撮像手段に、撮像素子の画素欠陥や入射光学系への塵埃の付着等があれば、一対の画像のうちの一方の画像にのみノイズ成分（明瞭に視認可能な欠陥部として現れることも多い）が重畳されることで一対の画像に相違が生じ、一対の撮像手段の各々の撮像素子でランダムなノイズが発生される等の場合には、一対の画像に相互に異なるノイズ成分が各々重畳されることで一対の画像に相違が生ずる。
【００２０】
このため、請求項２記載の発明において、画像処理手段は、例えば請求項３に記載したように、画像処理として、一対の画像のうちの一方の画像にのみ重畳しているノイズ成分を一方の画像から除去する処理、及び、一対の画像上の対応する領域に各々重畳している相互に異なるノイズ成分の相違が解消又は減少するように一対の画像のうちの少なくとも一方を補正する処理、の少なくとも一方を行うことが好ましい。これにより、ノイズ成分の重畳により一対の画像に生じている相違を低減することができる。
【００２１】
また、本発明に係る一対の画像には像構造の幾何学的な相違が生じていることを考慮すると、請求項３記載の発明において、画像処理手段は、例えば請求項４に記載したように、一対の画像を各々部分領域に分割し、認識した一対の画像における像構造の幾何学的な相違に基づいて、一方の画像における特定の部分領域と対応する他方の画像の部分領域を判断し、対応する領域であると判断した部分領域同士を比較することを、個々の部分領域について各々行うことで、像構造の幾何学的な相違以外の相違を生じさせているノイズ成分を判断することが好ましい。これにより、本発明に係る一対の画像に顕著な画質欠陥として認識される相違を生じさせているノイズ成分（一方の画像にのみ重畳しているノイズ成分や、一対の画像上の対応する領域に各々重畳している相互に異なるノイズ成分）を正確に判断することができる。
【００２２】
また、撮像手段を複数設けた場合、個々の撮像手段に、例えば撮像素子の感度等の特性のばらつきが生じている可能性もある。これを考慮すると、請求項１記載の発明において、画像処理手段は、例えば請求項５に記載したように、一対の撮像手段によって撮影された一対の画像に対し、一対の撮像手段の特性のばらつきに起因するばらつきを補正する補正処理も行うことが好ましい。これにより、撮像手段の特性のばらつきが顕著な画質欠陥として認識されることを防止することができる。
【００２３】
また、請求項１記載の発明において、例えば請求項６に記載したように、デジタル双眼鏡の姿勢変化を検出する検出手段を更に備え、画像処理手段は、一対の撮像手段によって撮影された一対の画像から所定サイズの領域を各々切り出して出力すると共に、検出手段によって検出された姿勢変化に応じて前記領域の切り出し位置を変化させる手振れ補正も行うことが好ましい。これにより、本発明に係るデジタル双眼鏡を把持しているユーザの手振れ等により、個々の撮像手段による撮影範囲が一時的に変動した場合にも、デジタル双眼鏡の姿勢変化に応じて一対の画像からの所定サイズの領域の切り出し位置が変化されることで、該所定サイズの領域に対応する撮影範囲の変動が抑制されるので、手振れ等に起因する撮影範囲の変動による影響を軽減することができる。
【００２４】
なお、手振れ補正は、例えば入射光学系にバリアングルプリズム等の光学部品を設け、この光学部品の光軸をデジタル双眼鏡の姿勢変化に応じて制御することで行うことも可能であるが、上記のように、一対の画像からの領域の切り出し位置を変化させることで、手振れ補正をより低コストに実現することができる。
【００２５】
また、請求項１記載の発明において、例えば請求項７に記載したように、撮像手段による撮影によって得られた画像のデータ又は画像処理手段によって画像処理が行われた画像のデータを、記録媒体に記録するか又は記録媒体に記録するための処理（例えば画像データを記録媒体に記録する機能を備えた装置への画像データの転送等の処理）を行う記録手段を備えることが好ましい。これにより、撮像手段による撮影によって得られた画像をデータとして保存しておき、例えば写真プリントの作成等を依頼する等の利用を行うことも可能となる。なお、記録媒体に記録する画像データは、一対の撮像手段によって撮影された一対の画像のうちの一方のみでもよいし、一対の画像のデータを各々記録媒体に記録するようにしてもよい。
【００２６】
また、記録媒体に記録する画像データは、動画像のデータであってもよいが、静止画像のデータであってもよい。請求項７記載の発明において、静止画像のデータを記録する場合には、例えば請求項８に記載したように、一対の撮像手段は各々常時撮影を行うと共に、画像処理手段はリアルタイムで画像処理を行い、記録手段は、一対の撮像手段又は画像処理手段から順次出力される画像データのうち最新の所定数の画像データを記憶する記憶手段を備え、指示手段を介して画像データの記録が指示された場合に、指示のタイミングを基準として記憶手段に記憶されている画像データの中から記録対象の画像データを選択し、選択した記録対象の画像データを記録媒体に記録するか又は前記選択した記録対象の画像データを記録媒体に記録するための処理を行うことが好ましい。
【００２７】
これにより、例えば指示手段を介して画像データの記録が指示されてから、該指示に応じて画像データの記録が行われる迄に若干のタイムラグがある等の場合にも、このタイムラグの影響を受けることなく、画像データの記録が指示されたタイミングと略同一のタイミングで撮影された画像データを記録対象の画像データとして選択することが可能となり、画像データの記録が指示されたタイミングと略同一のタイミングで撮影された画像データを記録媒体に記録することが可能となる。
【００２８】
請求項９記載の発明は、請求項１記載の発明において、被写体からの光を屈折させる対物光学系と、前記被写体を目視可能なように前記対物光学系からの光を屈折させるための接眼光学系と、前記対物光学系と前記接眼光学系の間に配置され、前記対物光学系を介して入射された光を接眼光学系及び前記撮像手段の撮像素子の少なくとも一方へ向けて射出すると共に、接眼光学系及び撮像素子への光の射出割合を変更可能な第１の光学部品と、前記第１の光学部品と前記接眼光学系の間に配置され、前記画像処理手段によって画像処理が行われた画像を表示するための前記表示手段の表示デバイスから射出された光も入射され、第１の光学部品からの光及び前記表示デバイスからの光の少なくとも一方を接眼光学系へ射出すると共に、第１の光学部品からの光及び前記表示デバイスからの光の接眼光学系への射出割合を変更可能な第２の光学部品と、前記第１の光学部品及び前記第２の光学部品における前記射出割合を制御する制御手段と、を備えたことを特徴としている。
【００２９】
請求項９記載の発明では、対物光学系を介して入射された光を接眼光学系及び撮像手段の撮像素子の少なくとも一方へ向けて射出すると共に、接眼光学系及び撮像素子への光の射出割合を変更可能な第１の光学部品が設けられており、接眼光学系及び撮像素子への光の射出割合は制御手段によって制御される。また、第１の光学部品と接眼光学系の間には第２の光学部品が配置されており、この第２の光学部品には、画像処理手段によって画像処理が行われた画像を表示するための表示デバイスからの光が入射され、第１の光学部品からの光及び表示デバイスからの光の少なくとも一方を接眼光学系へ射出すると共に、第１の光学部品からの光及び表示デバイスからの光の接眼光学系への射出割合を変更可能とされている。そして、第１の光学部品からの光及び表示デバイスからの光の接眼光学系への射出割合も制御手段によって制御される。
【００３０】
これにより、制御手段が、例えば対物光学系を介して第１の光学部品へ入射された光が撮像素子へのみ射出されるように第１の光学部品を制御すると共に、表示手段の表示デバイスから第２の光学部品へ入射された光のみが第２の光学部品から接眼光学系へ射出されるように第２の光学部品を制御した場合は、画像処理手段による画像処理を経た画像が、接眼光学系を介してユーザに視認されることになる。また、制御手段が、例えば対物光学系を介して第１の光学部品へ入射された光が接眼光学系へのみ射出されるように第１の光学部品を制御すると共に、第１の光学部品からの光のみが第２光学部品から接眼光学系へ射出されるように第２の光学部品を制御した場合には、通常の双眼鏡と同様に、対物光学系及び接眼光学系によって形成される被写体の光学像が接眼光学系を介してユーザに視認されることになる。
【００３１】
更に、制御手段が、例えば対物光学系を介して第１の光学部品へ入射された光が接眼光学系及び撮像素子へ各々所定の射出割合で第１の光学部品から射出されるように第１の光学部品を制御すると共に、第１の光学部品からの光及び表示デバイスからの光からの光が第２光学部品から接眼光学系へ各々所定の射出割合で射出されるように第２の光学部品を制御した場合には、画像処理手段による画像処理を経た画像に被写体の光学像が合成された画像が接眼光学系を介してユーザに視認されることになる。このように、請求項９記載の発明によれば、ユーザに多様な画像（光学像）を提示することが可能となり、本発明に係るデジタル双眼鏡を利用するユーザの利便性を向上させることができる。
【００３２】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態の一例を詳細に説明する。図１には、本発明に係るデジタル双眼鏡１０が示されている。デジタル双眼鏡１０は、人間の両眼の間隔と略同じ距離を隔てて軸線が互いに平行となるように配置された２個の筒体１２Ａ，１２Ｂが連結されると共に、正面から見て左側に、本体の把持を容易とするための突起（把持部）１２Ｃが形成された形状とされている。なお、筒体１２Ａ，１２Ｂの間隔を調整可能とする機構（眼幅調整機構）が設けられていてもよい。
【００３３】
筒体１２Ａ，１２Ｂの上方には、低照度での撮影等の場合に補助光を発するためのストロボ１４が取付けられており、デジタル双眼鏡１０本体の上面には、別体のストロボを取り付けるためのブラケット１６が設けられている。また、把持部１２Ｃの上面にはシャッタボタン１８が各々設けられており、図示は省略するが、把持部１２Ｃの側面には、スマートメディア（Ｒ）、コンパクトフラッシュ（Ｒ）、メモリスティック（Ｒ）等の各種記録メディアの何れかを装填可能なスロットが設けられている。
【００３４】
なお、以下では筒体１２Ａ，１２Ｂ内に収納された光学系、及び該光学系に対応して設けられた電気系の構成を順に説明するが、筒体１２Ａ，１２Ｂ内に収納された光学系は同一の構成であり、これらの光学系に対応して各々設けられた電気回路も同一の構成とされている。このため、以下では筒体１２Ａに対応する光学系及び電気系と、筒体１２Ｂに対応する光学系及び電気系を区別せずに説明するが、必要に応じて、筒体１２Ａに対応する光学系及び電気系の構成要素には符号「Ａ」、筒体１２Ａに対応する光学系及び電気系の構成要素には符号「Ｂ」を付して区別する。
【００３５】
筒体１２Ａ，１２Ｂには筒体の正面側の開口を閉止するように対物レンズ２０Ａ，２０Ｂが各々取付けられている。図２には筒体１２Ａ，１２Ｂ内に設けられた光学系の構成を示す。なお、筒体１２Ａ，１２Ｂ内に設けられた光学系は互いに同一の構成であるので、図２は筒体１２Ａ，１２Ｂの一方に設けられた光学系のみを示す。図２にも示すように、対物レンズ２０は、詳しくは複数枚のレンズから成るズームレンズ（焦点距離可変レンズ）であり、オートフォーカス（ＡＦ）機構を備えている。対物レンズ２０の光学倍率（ズーム倍率）は、筒体１２Ａ，１２Ｂの外周に設けられた操作リング１３を回動させることで調節可能とされている。なお、モータの駆動力で光学倍率（ズーム倍率）を調節する構成を採用してもよい。また、対物レンズ２０としてＡＦ機構のみを備えた焦点距離固定レンズを用いてもよい。
【００３６】
対物レンズ２０の光射出側には第１プリズム２２、第２プリズム２４、接眼レンズ２６が順に設けられている。なお、図２では接眼レンズ２６を単一枚のレンズとして示しているが、実際には複数枚のレンズから成り、左右の接眼レンズ２６Ａ，２６Ｂには視度調節機構が各々設けられている。また、第１プリズム２２に入射された光が反射面２２Ａで射出されたときの射出方向下流側には、レンズ２８、エリアＣＣＤ等から成る撮像素子３０が順に配置されている。第１プリズム２２は、対物レンズ２０を介して入射された光を撮像素子３０側及び第２プリズム２４側の少なくとも一方へ射出すると共に、撮像素子３０側及び第２プリズム２４側への光の射出割合を変更可能とされている。
【００３７】
また、第２プリズム２４の側方にはレンズ３２、表示デバイス３４が順に配置されている。なお、表示デバイス３４はカラー画像を所定値以上の輝度で表示可能な表示デバイスであればよく、例えばバックライト付きのカラーＬＣＤや、Ｒ，Ｇ，Ｂ各色のＬＥＤがマトリクス状に配置されて成るＬＥＤディスプレイ等で構成することができる。なお、左右の撮像素子３０Ａ，３０Ｂは、各々に対応して設けられたレンズ２８と共に本発明に係る一対の撮像手段に対応しており、左右の表示デバイス３４Ａ，３４Ｂは、各々に対応して設けられたレンズ３２と共に本発明に係る表示手段に対応している。
【００３８】
表示デバイス３４及びレンズ３２は、表示デバイス３４から射出された光がレンズ３２を介して第２プリズム２４へ入射され、反射面２４Ａで反射された場合には接眼レンズ２６側へ射出されるように配置位置が調整されている。第２プリズム２４は、表示デバイス３４からの光及び第１プリズム２４からの光の少なくとも一方を接眼レンズ２６へ射出すると共に、表示デバイス３４からの光及び第１プリズム２４からの光を接眼レンズ２６へ射出する割合を変更可能とされている。
【００３９】
なお、接眼レンズ２６を凸レンズで構成すると共に、対物レンズ２０と第１プリズム２２の間、或いは第１プリズム２２と第２プリズム２４の間にポロプリズム等のプリズムを設けることで、対物レンズ２０Ａ．２０Ｂの光軸の間隔を人間の両眼の間隔（瞳孔間隔）よりも広くしてもよい。これにより、対物レンズ２０及び接眼レンズ２６によって形成された被写体の光学像を目視した際の被写体の遠近感を更に拡大することができる。
なお、対物レンズ２０Ａ，２０Ｂは請求項９に記載の対物光学系に、接眼レンズ２６Ａ，２６Ｂは請求項９に記載の接眼光学系に、第１プリズム２２は請求項９に記載の第１の光学部品に、第２プリズム２４は請求項９に記載の第２の光学部品に各々対応している。
【００４０】
次に、デジタル双眼鏡１０の電気系の構成について図３を参照して説明する。デジタル双眼鏡１０は駆動回路３６を備えており、対物レンズ２０のＡＦ機構及びズーム機構は駆動回路３６によって駆動される。また、撮像素子３０は、詳しくは対物レンズ２０及びレンズ２８から成る光学系の焦点位置に相当する位置に配置されており、第１プリズム２２が入射光の一部又は全部を撮像素子３０側へ反射する状態に制御されている場合、被写体を反射して対物レンズ２０に入射された光は、第１プリズム２２の反射面２２Ａで反射され、レンズ２８を介して撮像素子３０の受光面に結像される。撮像素子３０は、駆動回路３６が内蔵しているタイミング発生回路（図示省略）によって発生されたタイミング信号に同期したタイミングで駆動され、画像信号（受光面上にマトリクス状に配列された多数個の光電変換セルの各々における受光量を表す信号）を所定周期で出力する。
【００４１】
レンズ２８と撮像素子３０との間にはシャッタ／絞り３８が配置されている。シャッタ及び絞りも駆動回路３６によって駆動される。シャッタは撮像素子３０から画像信号が出力されるときに、撮像素子３０の受光面に光が入射することでスミアが発生することを防止するためのものであり、撮像素子３０の構成によっては省略可能である。また絞りは、絞り量を連続的に変更可能な単一の絞りで構成してもよいし、絞り量が異なる複数の絞りを切替える構成であってもよい。
【００４２】
また、デジタル双眼鏡１０はストロボ駆動回路３８を備えており、ストロボ駆動回路３８はストロボ１４に接続されている。ストロボ１４は、低照度であることが検出された場合や、ユーザによって発光が指示された場合に、ストロボ駆動回路３８によって発光される。
【００４３】
撮像素子３０の信号出力端にはアナログ信号処理部４０、Ａ／Ｄ変換器４２、デジタル信号処理部４４、メモリ４６、内蔵メモリ４８が順に接続されている。アナログ信号処理部４０は、撮像素子３０から出力された画像信号を増幅すると共に、増幅した画像信号に対してホワイトバランス等の補正を行う。アナログ信号処理部４０から出力された画像信号は、Ａ／Ｄ変換器４２によってデジタルの画像データに変換されてデジタル信号処理部４４へ入力される。デジタル信号処理部４４では、入力された画像データに対して色補正・γ補正・Ｙ／Ｃ変換等の各種処理を行う。デジタル信号処理部４４から出力された画像データは、ＲＡＭ等で構成されたメモリ４６に一時記憶される。
【００４４】
また、メモリ４６にはＦＩＦＯ（Ｆｉｒｓｔ　Ｉｎ　Ｆｉｒｓｔ　Ｏｕｔ）メモリから成り複数フレーム分の画像データを記憶可能な記憶容量を有する内蔵メモリ４８が接続されている。被写体からの光が対物レンズ２０、第１プリズム２２及びレンズ２８を介して撮像素子３０に入射されている間、撮像素子３０からは所定周期で画像信号が出力されるので、メモリ４６にも所定周期で画像データが入力され、メモリ４６に一時記憶される画像データは所定周期で更新されると共に、メモリ４６に一時記憶された画像データは順次内蔵メモリ４８に記憶される。従って、内蔵メモリ４８には、常に最新の複数フレーム分の画像データが記憶される。なお、内蔵メモリ４８は請求項８に記載の記憶手段に対応している。
【００４５】
また、メモリ４６には表示デバイス３４が接続されている。表示デバイス３４には、入力された画像データを、該画像データが表す画像を表示デバイス３４に表示させるための表示制御信号へ変換する信号処理回路と、信号処理回路によって生成された表示制御信号に応じて表示デバイス３４を駆動することで、入力された画像データが表す画像を表示デバイス３４に表示させる駆動回路が付加されており、メモリ４６に記憶された画像データは表示デバイス３４にも出力され、表示デバイス３４に画像（動画像）として表示される。
【００４６】
駆動回路３６、ストロボ駆動回路３８，アナログ信号処理部４０、Ａ／Ｄ変換器４２、デジタル信号処理部４４、メモリ４６、内蔵メモリ４８及び圧縮伸張部５０（後述）はバス５２に接続されており、このバス５２には、ＣＰＵ５４が接続されている。図示は省略するが、ＣＰＵ５４はＲＯＭ、ＲＡＭ、不揮発性メモリ（記憶内容を書替え可能なメモリ：例えばＥＥＰＲＯＭ等）、入出力ポート等の周辺回路を含んで構成されており、ＲＯＭには、後述するノイズ低減処理を行うためのノイズ低減プログラムが予め書き込まれている。
【００４７】
またバス５２には、各種のスイッチ類（例えば電源スイッチや動作モード切替スイッチ等：図１では図示省略）から成る操作スイッチ５６、シャッタボタン１８が操作されることでオンオフされるシャッタスイッチ５８、ジャイロセンサ等から成りデジタル双眼鏡１０の姿勢変化を検出する姿勢角センサ６０が各々接続されており、第１プリズム２２及び第２プリズム２４も接続されている。第１プリズム２２及び第２プリズム２４の光の射出割合はＣＰＵ５４によって制御される。このように、ＣＰＵ５４は請求項９に記載の制御手段としての機能を備えている。
【００４８】
また、圧縮伸張部５０Ａ，５０Ｂにはスロットに装填された記録メディア６２が接続される。シャッタボタン１８が操作されてシャッタスイッチ５８がオンされた等により、スロットに装填された記録メディア６２への画像データの書き込みが指示されると、ＣＰＵ５４は内蔵メモリ４８Ａ，４８Ｂから画像データを読み出して圧縮伸張部５０Ａ，５０Ｂへ転送する。これにより、圧縮伸張部５０Ａ，５０Ｂへ転送された画像データは、圧縮伸張部５０Ａ，５０Ｂで圧縮された後に所定の形式（例えばＥＸＩＦ形式）の画像ファイルとして記録メディア６２に書き込まれる。
【００４９】
なお、記録メディア６２へ書き込まれる画像データの画素数は、記録画素数の設定に応じて相違すると共に、画像データに対する圧縮率も画質モードとして予め設定されたモードによって相違しており、画質モードによっては画像データが圧縮されることなく記録メディア６２に書き込まれる場合もある。
【００５０】
また、スロットに装填された記録メディア６２に格納されている画像データが表す画像の再生（表示）が指示された場合には、記録メディア６２から画像データが読み出され、読み出された画像データが圧縮されて格納されていた場合には、該被圧縮画像データが圧縮伸張部５０Ａ，５０Ｂで伸張（解凍）された後にメモリ４６Ａ，４６Ｂへ転送される。そして、メモリ４６Ａ，４６Ｂに一時記憶された画像データを用いて表示デバイス３４Ａ，３４Ｂへの画像の表示（再生）が行われる。
【００５１】
次に本実施形態の作用を説明する。本実施形態に係るデジタル双眼鏡１０には、動作モードとして、対物レンズ２０及び接眼レンズ２６によって形成された被写体の光学像を目視するための光学像目視モード、撮像素子３０によって撮影され表示デバイス３４に表示された画像を目視するための撮影画像目視モード、及び、対物レンズ２０及び接眼レンズ２６によって形成された被写体の光学像に、表示デバイス３４Ａ，３４Ｂに表示された画像が合成された画像を目視するための合成画像目視モードが設けられている。これらの動作モードの選択は、デジタル双眼鏡１０本体に設けられた動作モード切替スイッチ（図示省略）を操作することでユーザが選択可能とされている。
【００５２】
動作モードとして光学像目視モードが選択された場合、ＣＰＵ５４は、対物レンズ２０を介して第１プリズム２２に入射された光が第２プリズム２４側へのみ射出されるように第１プリズム２２からの光の射出割合を変更すると共に、第１プリズム２４から第２プリズム２４へ入射された光のみが接眼レンズ２６へ射出されるように第２プリズム２４からの光の射出割合を変更する。これにより、通常の双眼鏡と同様に、接眼レンズ２６Ａ，２６Ｂを両眼で覗いたユーザに、対物レンズ２０及び接眼レンズ２６によって形成された被写体の光学像が視認（立体視）されることになる。
【００５３】
この光学像目視モードでは、ユーザが操作リング１３を回動操作することで、対物レンズ２０の光学倍率（ズーム倍率）を調節することも可能とされている。なお、光学像目視モードにおけるピント調節については、例えばユーザが操作可能なピント調節機構を設けておき、このピント調節機構をユーザに操作させることでユーザに行わせるようにしてもよいが、これに代えて、対物レンズ２０を介して第１プリズム２２に入射された光が撮像素子３０側へも射出されるように第１プリズム２２からの光の射出割合を変更し、撮像素子３０による撮影によって得られた画像に基づき、駆動回路３６Ａ，３６Ｂを介して対物レンズ２０Ａ，２０ＢのＡＦ機構を駆動する（例えば画像の鮮鋭度を演算し鮮鋭度が最大となるようにＡＦ機構を駆動する等）ことで自動的に行うようにしてもよい。
【００５４】
また、動作モードとして撮影画像目視モードが選択された場合には、ＣＰＵ５４は、対物レンズ２０を介して第１プリズム２２に入射された光が撮像素子３０側へのみ射出されるように第１プリズム２２からの光の射出割合を変更すると共に、表示デバイス３４から第２プリズム２４へ入射された光のみが接眼レンズ２６へ射出されるように第２プリズム２４からの光の射出割合を変更し、更に、撮像素子３０Ａによる撮影によって得られた画像を表示デバイス３４Ａに表示させ、撮像素子３０Ｂによる撮影によって得られた画像を表示デバイス３４Ｂに表示させる。
【００５５】
これにより、接眼レンズ２６Ａ，２６Ｂを両眼で覗いたユーザに、表示デバイス３４Ａ，３４Ｂに表示された画像が視認されることになる。撮像素子３０Ａ，３０Ｂは、被写体から人間の両眼の間隔と略同じ距離だけ光軸が隔てられた対物レンズ２０Ａ，２０Ｃを介して入射された光を光電変換するので、撮像素子３０Ａ，３０Ｂによる撮影によって得られる一対の画像には、少なくとも両眼視差に相当する像構造の幾何学的な相違が生じている（ステレオ画像）。従って、表示デバイス３４Ａ，３４Ｂに表示された前記一対の画像を接眼レンズ２６Ａ，２６Ｂを介して両眼で視認したユーザが被写体を立体的に認識することができる（所謂立体視）。
【００５６】
また、上記の撮影画像目視モードのように撮像素子３０Ａ，３０Ｂによって撮影が行われている間、デジタル双眼鏡１０では以下で説明する画像処理が行われる。
【００５７】
すなわち、本実施形態ではデジタル双眼鏡１０に搭載される撮像素子３０Ａ，３０Ｂの感度特性（入射光量−出力特性）が個々の画素を単位として事前に測定され、測定された感度特性に基づいて、Ａ／Ｄ変換器４２Ａ，４２Ｂから入力される画像データを、均一な感度特性の一対の撮像素子で撮像したに等しい画像データへ補正するための補正データが撮像素子３０Ａ，３０Ｂの個々の画素を単位として設定されている。デジタル信号処理部４４Ａ，４４Ｂには上記の補正データが記憶されており、デジタル信号処理部４４Ａ，４４Ｂは記憶されている補正データに基づき、個々の画素を単位として画像データの補正を行う。これにより、撮像素子３０Ａ，３０Ｂの感度特性のばらつきを補正することができる。
【００５８】
表示デバイス３４Ａ，３４Ｂには撮像素子３０Ａ，３０Ｂの感度特性のばらつきが補正された画像（動画像）が表示されるので、表示デバイス３４Ａ，３４Ｂに表示された前記一対の画像を接眼レンズ２６Ａ，２６Ｂを介して両眼で視認したユーザに、撮像素子３０Ａ，３０Ｂの感度特性のばらつきが顕著な画質欠陥として認識されることを防止することができる。
【００５９】
なお、上記の補正処理は請求項５記載の発明に係る画像処理手段に対応しており、デジタル信号処理部４４Ａ，４４Ｂは本発明に係る画像処理手段の一部を構成している。
【００６０】
また、本実施形態に係るデジタル双眼鏡１０では、Ａ／Ｄ変換器４２Ａ，４２Ｂから入力された画像データから、デジタル信号処理部４４Ａ，４４Ｂにより、前記画像データが表す画像のうち所定サイズの部分領域に相当する画像データが切り出され、該部分領域の画像データが表示デバイス３４Ａ，３４Ｂへの画像の表示等に用いられるようになっている。撮像素子３０Ａ，３０Ｂによる撮影が行われている間、ＣＰＵ５４は姿勢角センサ６０によって検出されるデジタル双眼鏡１０の姿勢変化を監視し、デジタル双眼鏡１０の姿勢が変化した場合に、デジタル双眼鏡１０の姿勢変化に伴う撮像素子３０Ａ，３０Ｂによる全撮影範囲の変化に拘らず前記部分領域に対応する撮影範囲の変化が抑制されるように、デジタル双眼鏡１０の姿勢変化に応じて部分領域の新たな切り出し位置を演算し、演算した切り出し位置をデジタル信号処理部４４Ａ，４４Ｂへ通知することを繰り返す。
【００６１】
また、デジタル信号処理部４４Ａ，４４Ｂは、ＣＰＵ５４から通知された切り出し位置に応じて、Ａ／Ｄ変換器４２から入力された画像データが表す画像上での部分領域の位置が変化するように、前記画像データからの部分領域に相当する画像データの切り出しを行う。これにより、デジタル双眼鏡１０を把持しているユーザの手振れ等により撮像素子３０Ａ，３０Ｂによる全撮影範囲が一時的に変動した場合にも、部分領域に対応する撮影範囲の変動を抑制することができる。そして、表示デバイス３４Ａ，３４Ｂには上記の手振れ補正が行われた画像（動画像）が表示されるので、接眼レンズ２６Ａ，２６Ｂを介してユーザに視認される画像が、ユーザの手振れ等により撮影範囲が変動する見苦しい画像となることを防止することができる。
【００６２】
なお、姿勢角センサ６０は請求項６に記載の検出手段に対応している。また、ＣＰＵ５４及びデジタル信号処理部４４Ａ，４４Ｂによる上述した処理は請求項６に記載の手振れ補正処理に対応しており、デジタル信号処理部４４Ａ，４４Ｂ及びＣＰＵ５４は本発明に係る画像処理手段の一部を構成している。
【００６３】
また、ＣＰＵ５４は撮像素子３０Ａ，３０Ｂによって撮影が行われている間、ＲＯＭに書き込まれているノイズ低減プログラムを実行することで、デジタル信号処理部４４Ａ，４４Ｂにおける各種の処理を経てメモリ４６Ａ，４６Ｂに記憶された画像（データ）を対象としてノイズ低減処理を行う。以下、このノイズ低減処理について、図４のフローチャートを参照して説明する。
【００６４】
このノイズ低減処理は本発明に係る画像処理手段（詳しくは、請求項２に記載の画像処理手段及び請求項３に記載の「一対の画像上の対応する領域に各々重畳している相互に異なるノイズ成分の相違が解消又は減少するように一対の画像のうちの少なくとも一方を補正する処理」を行う画像処理手段）に対応しており、ノイズ低減プログラムを実行するＣＰＵ５４は本発明に係る画像処理手段として機能する。なお、以下では便宜的に、メモリ４６Ａに記憶された画像を左チャンネルの画像、メモリ４６Ｂに記憶された画像を右チャンネルの画像と称する。
【００６５】
ステップ１００では、左チャンネルの画像と右チャンネルの画像の像構造の幾何学的な相違を認識するために、左右チャンネルの画像のマッチング処理を行う。このマッチング処理としては、例えば左右チャンネルの画像における対応する点である可能性のある候補（対応点候補）を左右チャンネルの画像から各々抽出し、弛緩法により対応点を決定する処理を適用することができる。
【００６６】
具体的には、対応点候補としては、全ての方向で濃淡レベルの大きな変化が生じている点であることが望ましく、また、対応点候補が密に存在していると対応点の決定が困難となる。このため、まず対応点候補の抽出対象の画像ｇ（ｘ，ｙ）の各画素について水平・垂直・右斜め・左斜め方向の濃淡レベルの変動ｇ’_１，ｇ’_２，ｇ’_３，ｇ’_４を次式に従って求める。
【００６７】
ｇ’_１（ｘ，ｙ）＝［２・ｇ（ｘ，ｙ）−（ｇ（ｘ−１，ｙ）＋ｇ（ｘ＋１，ｙ））］^２
ｇ’_２（ｘ，ｙ）＝［２・ｇ（ｘ，ｙ）−（ｇ（ｘ，ｙ−１）＋ｇ（ｘ，ｙ＋１））］^２
ｇ’_３（ｘ，ｙ）＝［２・ｇ（ｘ，ｙ）−（ｇ（ｘ＋１，ｙ−１）＋ｇ（ｘ−１，ｙ＋１））］^２
ｇ’_４（ｘ，ｙ）＝［２・ｇ（ｘ，ｙ）−（ｇ（ｘ−１，ｙ−１）＋ｇ（ｘ＋１，ｙ＋１））］^２
次に、適当な大きさのウインドウＷを１画素ずつ動かしながら、ウインドウの中心画素（ｘ，ｙ）の値として、次式のオペレータ出力値ｇ”を求める。
【００６８】
【数１】

【００６９】
続いて、画素（ｘ，ｙ）を中心とする（２ｗ＋１）×（２ｗ＋１）画素の大きさの局所領域毎にオペレータ出力値ｇ”の最大値ｇ＊を抽出する。そして、画像中の最大のｇ＊から順次大きなｇ＊をもつ画素をｎ個抽出し、これを対応点候補とする。上記処理を左右チャンネルの画像に対して各々行うことで、例えば図５（Ａ）に示す左チャンネルの画像からは例として図５（Ｃ）に示すような対応点候補が抽出され、例えば図５（Ｂ）に示す右チャンネルの画像からは例として図５（Ｄ）に示すような対応点候補が抽出されることになる。
【００７０】
次に、抽出された対応点候補に基づいて対応点を決定する。左チャンネルの画像から抽出された対応点候補の集合をＬ＝［Ｌ_１，Ｌ_２，…，Ｌ_ｎ］、右チャンネルの画像から抽出された対応点候補の集合をＲ＝［Ｒ_１，Ｒ_２，…，Ｒ_ｎ］とし、左チャンネルの画像から抽出された対応点候補Ｌ_ｉ（ｉ＝１，２，…，ｎ）に対し、Ｌ_ｉを中心とする（２ｒ＋１）×（２ｒ＋１）画素の大きさの矩形領域内に存在する右チャンネルの画像の対応点候補Ｒ_ｉを対応点対候補とする。ここで、Ｌ_ｉを始点としＲ_ｉを終点とするベクトルを相違ベクトルと称する。
【００７１】
対応点の決定は、対応点候補Ｌ_ｉに対して得られている対応点対候補（相違ベクトル候補）と、対応点候補Ｌ_ｊ（ｉ≠ｊ）に対して得られている対応点対候補（相違ベクトル候補）が互いに矛盾しないように候補を絞っていくことにより成され、具体的には弛緩法（対象Ｌ_ｉに局所的矛盾が少なくなるようにラベルλｋを与える）を適用し、ラベルλｋとして相違ベクトルのｘ，ｙ方向の成分Δｘ，Δｙを用いることで実現できる。これにより、例として図５（Ｅ）に示すようなマッチング結果（対応点対及び相違ベクトル）が得られ、左チャンネルの画像と右チャンネルの画像の像構造の幾何学的な相違を認識することができる。
【００７２】
次のステップ１０２では、ステップ１００におけるマッチング処理の結果に基づき、左右チャンネルの画像の互いに対応する位置（例えば対応点対の存在している位置）を境界として、左右チャンネルの画像を各々多数個の処理ブロックに分割する。なお、この多数個の処理ブロックへの分割は、一方のチャンネルの画像の特定の処理ブロックに対応する他方のチャンネルの画像の処理ブロックが判別可能に分割できればよく、他の分割方法を適用してもよい。また、処理ブロックの形状も矩形状に限られるものではない。上記の処理ブロックは請求項４に記載の部分領域に対応している。
【００７３】
ステップ１０４では、左チャンネルの画像から未処理の処理ブロックのデータを取り出し、次のステップ１０６では、左チャンネルの画像から取り出した処理ブロック（：処理ブロックＬ）に対応する右チャンネルの画像の処理ブロックを認識し、認識した処理ブロック（：処理ブロックＲ）のデータを取り出す。そしてステップ１０８では、左右チャンネルの画像から取り出した処理ブロックＬ，Ｒのデータに基づき、処理ブロックＬ，Ｒ内の全ての画素列ｊ（ｊ＝１，２，…，ｊｍａｘ）を対象として、左右チャンネルの画像の平均データ関数ｆａｖｅ（ｊ）を次式に従って演算する。
【００７４】
【数２】

【００７５】
但し、ｄａｔａ_Ｌ（ｉ，ｊ）：処理ブロックＬ内のｉ行目ｊ列目の画素
ｄａｔａ_Ｒ（ｉ，ｊ）：処理ブロックＲ内のｉ行目ｊ列目の画素
ｎ：処理ブロックＬ，Ｒ内の画素の行の総数
【００７６】
ステップ１１０では変数ｉに１を代入する。ステップ１１２では、処理ブロックＬのｉ行目のデータ関数を
ｆＬｉ（ｊ）＝ｄａｔａ_Ｌ（ｉ，ｊ）
と表したときに、このデータ関数ｆＬｉ（ｊ）とｆａｖｅ（ｊ）＋ｋＬｉとの残差が最小になるときの定数ｋＬｉを最小自乗法により演算する。そしてステップ１１４では、処理ブロックＬのｉ行目のデータ関数を次式により設定する。
ｆＬｉ（ｊ）←ｆａｖｅ（ｊ）＋ｋＬｉ
【００７７】
また、ステップ１１６では、処理ブロックＲのｉ行目のデータ関数を
ｆＲｉ（ｊ）＝ｄａｔａ_Ｒ（ｉ，ｊ）
と表したときに、このデータ関数ｆＲｉ（ｊ）とｆａｖｅ（ｊ）＋ｋＲｉとの残差が最小になるときの定数ｋＲｉを最小自乗法により演算する。そしてステップ１１８において、処理ブロックＲのｉ行目のデータ関数を次式により設定する。
ｆＲｉ（ｊ）←ｆａｖｅ（ｊ）＋ｋＲｉ
【００７８】
次のステップ１２０では、変数ｉが処理ブロックＬ，Ｒ内の画素の行の総数ｎに一致しているか否か判定する。判定が否定された場合にはステップ１２２へ移行し、変数ｉを１だけインクリメントしてステップ１２２へ戻る。これにより、ステップ１０４，１０６で取り出した処理ブロックＬ，Ｒの全ての画素の行について、ステップ１１２〜ステップ１１８の処理が各々行われることになる。
【００７９】
ステップ１２０の判定が肯定されるとステップ１２４へ移行し、左右チャンネルの画像の全ての処理ブロックに対してステップ１０４以降の処理を行ったか否か判定する。判定が否定された場合にはステップ１０４に戻る。これにより、左右チャンネルの画像の全ての処理ブロックに対してステップ１０４以降の処理が行われることになる。ステップ１２４の判定が肯定されるとノイズ低減処理を終了する。
【００８０】
上記のノイズ低減処理では、左右チャンネルの画像を同一の平均データ関数ｆａｖｅ（ｊ）に基づいて補正しているので、左右チャンネルの画像のうち、ステップ１００で認識した像構造の幾何学的な相違以外の相違、詳しくは撮像素子３０Ａ，３０Ｂ等を原因として左右チャンネルの画像に各々重畳されているランダムなノイズの相違が減少されることになる。なお、上記では平均データ関数ｆａｖｅ（ｊ）として、左右チャンネルの画像の平均に相当するデータ関数を用いていたが、これに代えて左右チャンネルの画像のうちの何れか一方の画像の平均に相当するデータ関数を用いてもよい。
【００８１】
上記のノイズ低減処理は、所定周期でメモリ４６に入力・記憶される画像データに対して各々行われ、表示デバイス３４Ａ，３４Ｂには、ノイズ低減処理が行われた画像（動画像）が表示されるので、表示デバイス３４Ａ，３４Ｂに表示された前記一対の画像を接眼レンズ２６Ａ，２６Ｂを介して両眼で視認したユーザに、左右チャンネルの画像に重畳されているランダムなノイズが顕著な画質欠陥として認識されることを防止することができる。
【００８２】
また、撮影画像目視モードにおいて、表示デバイス３４Ａ，３４Ｂに表示されている動画像を接眼レンズ２６Ａ，２６Ｂを介して両眼で視認しているユーザが、視認している画像を静止画像として保存することを所望した場合には、シャッタボタン１８が操作されることで、スロットに装填された記録メディア６２への画像データの書き込みが指示される。シャッタスイッチ５８がオンすることで、シャッタボタン１８が操作されたことを検知すると、ＣＰＵ５４は、内蔵メモリ４８Ａ，４８Ｂから画像データを読み出して圧縮伸張部５０Ａ，５０Ｂへ転送する。
【００８３】
詳しくは、シャッタボタン１８が操作されてから、シャッタスイッチ５８がオンしたことを検知して画像データを読み出す迄に若干の時間がかかることを考慮し、ＣＰＵ５４は、内蔵メモリ４８Ａ，４８Ｂに最新の複数フレーム分の画像データが記憶されていることを利用して、内蔵メモリ４８Ａ，４８Ｂからの画像データの読み出し時に、撮像素子３０Ａ，３０Ｂによって前記時間差分だけ前に撮像された画像データを読み出して圧縮伸張部５０Ａ，５０Ｂへ転送する。これにより、シャッタボタン１８が操作されたタイミングと略同一のタイミングで撮像された画像データを記録メディア６２に書き込むことができる。なお、上記の処理は請求項７（詳しくは請求項８）に記載の記録手段に対応している。
【００８４】
一方、動作モードとして合成画像目視モードが選択された場合には、ＣＰＵ５４は、対物レンズ２０を介して第１プリズム２２に入射された光が第２プリズム２４側及び撮像素子３０側へ各々所定の射出割合で射出されるように第１プリズム２２からの光の射出割合を変更すると共に、第１プリズム２２から第２プリズム２４へ入射された光及び表示デバイス３４から第２プリズム２４へ入射された光が各々所定の射出割合で接眼レンズ２６へ射出されるように第２プリズム２４からの光の射出割合を変更し、更に、表示デバイス３４Ａ，３４Ｂに各々画像を表示させる。これにより、対物レンズ２０及び接眼レンズ２６によって形成された被写体の光学像に、表示デバイス３４Ａ，３４Ｂに表示された画像が合成された合成画像が、接眼レンズ２６Ａ，２６Ｂを両眼で覗いたユーザに視認（立体視）されることになる。
【００８５】
合成画像目視モードにおいて、表示デバイス３４Ａ，３４Ｂには任意の画像を表示可能であり、例えば撮像素子３０Ａ，３０Ｂによる撮像によって得られた画像を解析して画像中の動体等を認識し、認識した動体等を指し示したり、或いは強調する図形を生成して表示デバイス３４Ａ，３４Ｂに表示することで、被写体の光学像に前記図形を合成した画像をユーザに視認させるようにしてもよい。
【００８６】
なお、この態様においては、対物レンズ２０及び接眼レンズ２６によって形成された被写体の光学像と、表示デバイス３４Ａ，３４Ｂに表示された画像の位置ずれを回避するために、前述の手振れ補正（部分領域の切り出し位置を変更することによる手振れ補正）の実行を停止するか、或いは、前述の手振れ補正に代えて、第１プリズム２２よりも被写体側の光路上に、バリアングルプリズム等の角度を変更可能なプリズムを設けておき、姿勢角センサ６０によって検出されたデジタル双眼鏡１０の姿勢変化に基づき、該姿勢変化を打ち消すようにプリズムの光軸を制御することで手振れ補正を行うことが好ましい。
【００８７】
また、合成画像目視モードにおいて、被写体の光学像に合成する画像は、例えばＣＧ（Ｃｏｍｐｕｔｅｒ　Ｇｒａｐｈｉｃｓ）等の技術を用いて生成した架空の世界の画像（仮想現実画像）であってもよい。この仮想現実画像はデジタル双眼鏡１０に予め画像データとして記憶しておくようにしてもよいが、無線等の通信手段を介して外部（例えばインターネット等）と通信する機能をデジタル双眼鏡１０に搭載しておき、インターネットに接続されたサーバから受信するようにしてもよい。上記のように、光学像に合成する画像が被写体と無関係な画像（撮像素子３０Ａ，３０Ｂによる撮像によって得られた画像を利用せずに生成された画像）である場合には、撮像素子３０Ａ，３０Ｂによって撮像を行う必要がなくなるので、対物レンズ２０を介して第１プリズム２２に入射された光が第２プリズム２４側へのみ射出されるように第１プリズム２２からの光の射出割合を変更するようにしてもよい。また、撮像素子３０Ａ，３０Ｂによる撮像によって得られた画像、或いは姿勢角センサ６０による検出結果に基づいて、デジタル双眼鏡１０の姿勢角（視野方向）の変化を認識し、認識した姿勢角（視野方向）の変化に応じて、表示デバイス３４に表示する仮想現実画像を変化させるようにしてもよい。また、光学像に合成する画像は文字画像等であってもよい。
【００８８】
このように、本実施形態に係るデジタル双眼鏡１０では、ユーザによって選択された動作モードに応じて多様な画像（光学像）がユーザに提示されるので、ユーザの利便性を向上させることができる。
【００８９】
なお、上記では左右チャンネルの画像上の対応する領域に各々重畳しているランダムなノイズの相違を低減させる処理として平均データ関数ｆａｖｅ（ｊ）を用いる処理を説明したが、これに限られるものではなく、左右チャンネルの画像に重畳しているランダムなノイズ成分を各々抽出し、抽出したノイズ成分を平均化し、抽出したノイズ成分を各々除去した左右チャンネルの画像に、平均化したノイズ成分を各々加算することで、ランダムなノイズ成分の相違を解消するようにしてもよいし、上記の平均化したノイズ成分に代えて、左右チャンネルの画像の一方から抽出したノイズ成分を適用するようにしてもよい。
【００９０】
また、上記では本発明に係る画像処理手段による画像処理の一例として、左右チャンネルの画像上の対応する領域に各々重畳しているランダムなノイズ（一対の画像上の対応する領域に各々重畳している相互に異なるノイズ成分）の相違を低減させる処理（ノイズ低減処理）を説明したが、これに限定されるものではなく、左右チャンネルの画像のうちの一方の画像にのみ重畳しているノイズ成分を一方の画像から除去するノイズ成分除去処理も併せて行うようにしてもよいし、例えば撮像素子３０Ａ，３０Ｂとして低ノイズの高性能な撮像素子を用いる等の場合には、上記のノイズ成分除去処理のみを行うようにしてもよい。
【００９１】
ノイズ成分除去処理としては、例えば左右チャンネルの画像のマッチング処理を行うことで左右チャンネルの画像の像構造の幾何学的な相違を認識した後に、左右チャンネルの画像の対応する領域同士を比較し、対物レンズ２０に塵埃等が付着した場合に画像上に生ずる欠陥部の規模と同程度の規模の欠陥部が一方の画像に生じていることを検知した場合に、検知した欠陥部の周囲の画像部に基づいて補間するか、又は他方の画像の対応する画像部のデータで埋めることで、検知した欠陥部を消去する処理等を適用することができる。
【００９２】
また、上記では本発明に係るノイズ低減処理をＣＰＵ５４が実行する例を説明したが、これに限定されるものではなく、ノイズ低減処理を実行するための専用ハードウェアを設け、このハードウェアによってノイズ低減処理を実行するようにしてもよい。これによりＣＰＵ５４の負荷を低減することができる。
【００９３】
更に、上記では撮像手段（撮像素子３０等）が２個（一対）のみ設けられている場合を例に説明したが、これに限られるものではなく、３個以上の多数個の撮像手段を設けてもよい。
【００９４】
また、上記では本発明に係る表示手段として、ＬＣＤ等から成る一対の表示デバイス３４Ａ，３４Ｂを例に説明したが、画像を立体視可能に表示するものであればよく、例えば立体表示用の特殊レンズ面（レンチキュラー等）を有する表示デバイスを用いてもよい。
【００９５】
また、上記では記録メディア６２に静止画像の画像データを記録する場合を説明したが、これに限定されるものではなく、動画像の画像データも記録可能としてもよい。
【００９６】
【発明の効果】
以上説明したように本発明は、撮影した画像に両眼視差に相当する相違が生ずるように配置された一対の撮像手段、撮影された一対の画像における両眼視差に相当する像構造の幾何学的な相違以外の相違を減少させる画像処理を行う画像処理手段、及び画像処理が行われた一対の画像を立体視可能に各々表示する表示手段が一体化されて構成されているので、複数の撮像素子による撮影によって得られた画像を立体視可能かつ高画質に表示することができる、という優れた効果を有する。
【図面の簡単な説明】
【図１】本実施形態に係るデジタル双眼鏡の外観を示す斜視図である。
【図２】デジタル双眼鏡の光学系の概略図である。
【図３】デジタル双眼鏡の電気系の概略ブロック図である。
【図４】ノイズ低減処理の内容を示すフローチャートである。
【図５】左右チャンネルの画像のマッチング処理を説明するためのイメージ図である。
【符号の説明】
１０　　デジタル双眼鏡
２０　　対物レンズ
２２　　第１プリズム
２４　　第２プリズム
２６　　接眼レンズ
３０　　撮像素子
３４　　表示デバイス
４４　　デジタル信号処理部
４６　　メモリ
４８　　内蔵メモリ
５４　　ＣＰＵ
６０　　姿勢角センサ
６２　　記録メディア

Claims

各々が撮影した画像に両眼視差に相当する相違が生ずるように配置された一対の撮像手段と、
前記一対の撮像手段によって撮影された一対の画像における、前記両眼視差に相当する像構造の幾何学的な相違以外の相違を減少させる画像処理を行う画像処理手段と、
前記画像処理手段によって画像処理が行われた一対の画像を立体視可能に各々表示する表示手段と、
を備え、
これらが一体化されて成るデジタル双眼鏡。
前記画像処理手段は、前記一対の撮像手段によって撮影された一対の画像における、前記両眼視差に相当する像構造の幾何学的な相違を認識し、認識した前記像構造の幾何学的な相違以外の相違を減少させる画像処理を行うことを特徴とする請求項１記載のデジタル双眼鏡。
前記画像処理手段は、前記画像処理として、前記一対の画像のうちの一方の画像にのみ重畳しているノイズ成分を前記一方の画像から除去する処理、及び、前記一対の画像上の対応する領域に各々重畳している相互に異なるノイズ成分の相違が解消又は減少するように前記一対の画像のうちの少なくとも一方を補正する処理、の少なくとも一方を行うことを特徴とする請求項２記載のデジタル双眼鏡。
前記画像処理手段は、前記一対の画像を各々部分領域に分割し、前記認識した一対の画像における像構造の幾何学的な相違に基づいて、一方の画像における特定の部分領域と対応する他方の画像の部分領域を判断し、対応する領域であると判断した部分領域同士を比較することを、個々の部分領域について各々行うことで、前記像構造の幾何学的な相違以外の相違を生じさせているノイズ成分を判断することを特徴とする請求項３記載のデジタル双眼鏡。
前記画像処理手段は、前記一対の撮像手段によって撮影された一対の画像に対し、前記一対の撮像手段の特性のばらつきに起因するばらつきを補正する補正処理も行うことを特徴とする請求項１記載のデジタル双眼鏡。
デジタル双眼鏡の姿勢変化を検出する検出手段を更に備え、前記画像処理手段は、前記一対の撮像手段によって撮影された一対の画像から所定サイズの領域を各々切り出して出力すると共に、前記検出手段によって検出された姿勢変化に応じて前記領域の切り出し位置を変化させる手振れ補正も行うことを特徴とする請求項１記載のデジタル双眼鏡。
前記撮像手段による撮影によって得られた画像のデータ又は前記画像処理手段によって画像処理が行われた画像のデータを、記録媒体に記録するか又は記録媒体に記録するための処理を行う記録手段を備えたことを特徴とする請求項１記載のデジタル双眼鏡。
前記一対の撮像手段は各々常時撮影を行うと共に、前記画像処理手段はリアルタイムで前記画像処理を行い、
前記記録手段は、前記一対の撮像手段又は前記画像処理手段から順次出力される画像データのうち最新の所定数の画像データを記憶する記憶手段を備え、指示手段を介して画像データの記録が指示された場合に、前記指示のタイミングを基準として前記記憶手段に記憶されている画像データの中から記録対象の画像データを選択し、選択した記録対象の画像データを記録媒体に記録するか又は前記選択した記録対象の画像データを記録媒体に記録するための処理を行うことを特徴とする請求項７記載のデジタル双眼鏡。
被写体からの光を屈折させる対物光学系と、
前記被写体を目視可能なように前記対物光学系からの光を屈折させるための接眼光学系と、
前記対物光学系と前記接眼光学系の間に配置され、前記対物光学系を介して入射された光を接眼光学系及び前記撮像手段の撮像素子の少なくとも一方へ向けて射出すると共に、接眼光学系及び撮像素子への光の射出割合を変更可能な第１の光学部品と、
前記第１の光学部品と前記接眼光学系の間に配置され、前記画像処理手段によって画像処理が行われた画像を表示するための前記表示手段の表示デバイスから射出された光も入射され、第１の光学部品からの光及び前記表示デバイスからの光の少なくとも一方を接眼光学系へ射出すると共に、第１の光学部品からの光及び前記表示デバイスからの光の接眼光学系への射出割合を変更可能な第２の光学部品と、
前記第１の光学部品及び前記第２の光学部品における前記射出割合を制御する制御手段と、
を備えたことを特徴とする請求項１記載のデジタル双眼鏡。