JPWO2016171190A1 - 暗視装置、暗視方法およびプログラム - Google Patents

Abstract

暗視装置は、第１領域を可視光に基づいて撮像する第１撮像部と、第２領域を赤外線に基づいて撮像する第２撮像部と、第２領域を撮像した画像から対象物を抽出する抽出部と、第１領域を撮像した画像とともに、対象物を示す情報を出力する出力部と、を備えている。暗視装置において広い視野で熱源の存在を把握できるようにする。

Description

［関連出願についての記載］
本発明は、日本国特許出願：特願２０１５−０８７２９７号（２０１５年４月２２日出願）に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
本発明は、暗視装置、暗視方法およびプログラムに関し、特に、微光暗視用の暗視装置、暗視方法およびプログラムに関する。

屋内の暗い場所や夜間の犯罪捜査、救助活動等において、十分な照明を利用できない状況下において、暗視装置が用いられる。

特許文献１には、光電子倍増管と対物レンズ、接眼レンズとを束ねることにより、広い視野を確保した暗視ゴーグルが記載されている。

また、特許文献２には、光電子倍増管の画像に対して、赤外の映像を重畳して表示する融合型暗視（Fusion Night Vision）システムが記載されている。

さらに、特許文献３には、光電子倍増管の画像と近赤外カメラの映像を光学的に重畳表示するヘッドマウント型の暗視装置が記載されている。

米国特許第６４６９８２８号明細書 米国特許第７３０７７９３号明細書 米国特許第４４６８１０１号明細書

上記特許文献１ないし３の全開示内容は、本書に引用をもって繰り込み記載されているものとする。以下の分析は、本発明者によってなされたものである。

特許文献１に記載された技術のように、光電子倍増管を複数用いて広い視野を確保する場合、暗視装置が大型化し、重量が増大する。これにより、暗視装置を装着したユーザの首が疲れるなどの身体的負荷が増大するという問題がある。特に、光電子倍増管を用いた暗視装置は、対物レンズ、光電子倍増管、接眼レンズを光学的に同軸に並べる必要がある。このとき、重量が増大するとともに、長さが伸びることで慣性モーメントも増大する。また、広い視野をカバーするために、複数セットを並べた構成を採用した場合には、セット数に応じて慣性モーメントがさらに増大する。

また、特許文献１に記載された技術のように、光電子倍増管を用いた暗視装置においては、反射光の多寡のみを明暗情報として表示する。このとき、視野内に存在する静止物体と、動きを止めている生き物（人、動物等）との識別が困難となる。その理由は、反射光の多寡のみを明暗情報として表示するため、温度の差異が検出できないからである。したがって、例えば、犯罪捜査等において潜在的リスクの検出が必ずしも容易ではないという問題がある。

さらに、特許文献２、３のように、光電子倍増管および赤外線カメラから得られる映像を融合した暗視装置においては、光電子倍増管の光軸と赤外線カメラの視野が同一となる。かかる構成に基づいて広視野を確保した場合、暗視装置が大型化するとともに重量が増大し、ユーザが装着して行動しうる実用的な体積、重量にならないという問題がある。なぜなら、光電子倍増管の追加による装置の増大化に加えて、赤外線カメラの追加により、さらに体積および重量が増し、これらによって撮像された画像を融合するための回路部品も追加されることになるからである。

以上より、特許文献１ないし３に記載された技術によると、暗視装置において、装置の増大化を防ぎつつ、潜在的なリスクを実効的に広い視野で認識することが困難となる。

そこで、暗視装置において広い視野で熱源の存在を把握できるようにすることが課題となる。本発明の目的は、かかる課題解決に寄与する暗視装置、暗視方法およびプログラムを提供することにある。なお、その他の課題および解決手段は、後述の発明を実施するための形態の記載に基づいて明らかにされる。

本発明の第１の態様に係る暗視装置は、第１領域を可視光に基づいて撮像する第１撮像部と、第２領域を赤外線に基づいて撮像する第２撮像部と、前記第２領域を撮像した画像から対象物を抽出する抽出部と、前記第１領域を撮像した画像とともに、前記対象物を示す情報を出力する出力部と、を備えている。

本発明の第２の態様に係る暗視方法は、第１領域を可視光に基づいて撮像するステップと、第２領域を赤外線に基づいて撮像するステップと、前記第２領域を撮像した画像から対象物を抽出するステップと、前記第１領域を撮像した画像とともに、前記対象物を示す情報を出力するステップと、を含む。

本発明の第３の態様に係るプログラムは、第１領域を可視光に基づいて撮像する処理と、第２領域を赤外線に基づいて撮像する処理と、前記第２領域を撮像した画像から対象物を抽出する処理と、前記第１領域を撮像した画像とともに、前記対象物を示す情報を出力する処理と、をコンピュータに実行させる。なお、プログラムは、非一時的なコンピュータ可読記録媒体（non-transitory computer-readable storage medium）に記録されたプログラム製品として提供することもできる。

本発明に係る暗視装置、暗視方法およびプログラムによると、暗視装置において広い視野で熱源の存在を把握することが可能となる。

一実施形態に係る暗視装置の構成を例示するブロック図である。 第１の実施形態に係る暗視装置の構成を例示するブロック図である。 第１の実施形態に係る暗視装置の装着状態を例示する図である。 第１の実施形態に係る暗視装置による撮像範囲を例示する図である。 第１の実施形態に係る暗視装置によって取得された画像を例示する図である。 （ａ）は第１の実施形態に係る暗視装置の微光暗視部およびＩＲ（Infrared）カメラのそれぞれの取得画像（その１）を例示する図である。（ｂ）は第１の実施形態に係る暗視装置の表示部による表示例（その１）を示す図である。（ｃ）は第１の実施形態に係る暗視装置による表示画像（その１）を例示する図である。 （ａ）は第１の実施形態に係る暗視装置の微光暗視部およびＩＲカメラのそれぞれの取得画像（その２）を例示する図である。（ｂ）は第１の実施形態に係る暗視装置による表示画像（その２）を例示する図である。 第１の実施形態（変形例３）に係る暗視装置による撮像範囲を例示する図である。 第２の実施形態に係る暗視装置の構成を例示するブロック図である。

はじめに、一実施形態の概要について説明する。なお、この概要に付記する図面参照符号は、専ら理解を助けるための例示であり、本発明を図示の態様に限定することを意図するものではない。

図１は、一実施形態に係る暗視装置１の構成を例示するブロック図である。図１を参照すると、暗視装置１は、第１領域（例えば、図６（ａ）の微光暗視部視野１５）を可視光に基づいて撮像する第１撮像部２と、第２領域（例えば、図６（ａ）のＩＲカメラ視野１４、１６）を赤外線に基づいて撮像する第２撮像部（例えば、赤外線カメラ）３と、第２領域を撮像した画像から対象物（例えば、所定の温度領域の対象物）を抽出する抽出部４と、第１領域を撮像した画像とともに、前記抽出された対象物を示す情報を出力する（例えば、対象物の存在を存在表示１８〜２０として表示する）出力部５と、を備えている。

かかる暗視装置１によると、広い視野で熱源（例えば、人、動物等）の存在を把握することが可能となる。なぜなら、暗視装置１によると、可視光に基づいて撮像される第１領域とは異なる第２領域を赤外線で撮像し、第２領域に熱源として存在する対象物を抽出して出力することにより、可視光で撮像される領域に限定されない広い領域に関して、熱源の存在を示唆することができるからである。

特許文献１に記載された技術のように広視野を有する暗視装置を実現した場合、暗視装置が大型化し、重量および慣性モーメントがいずれも増大することで、装着者の肉体的負担が増大する。また、かかる技術によると、高価な光電子増倍管や高開口率の高価レンズ等を複数セット備え、相互の角度調整をして束ねる必要があり、暗視装置の製造コストが増大するという問題もある。

一実施形態に係る暗視装置１では、例えば、図６（ａ）に示すように、中心視野（微光暗視部視野１５）のみを可視光で撮像する第１撮像部２でカバーし、周辺視野（ＩＲカメラ視野１４、１６）を廉価な小型、低解像度の第２撮像部３（例えば、複数の小型のＩＲカメラ７、８）でカバーする。これにより、熱源に対して広い視野をカバーすることが可能となる。

また、第２撮像部３（例えば、赤外線カメラ）からの出力をそのまま出力せず、抽出部４により一定温度範囲に入る画素の画素数をカウントし、その発生位置および画素数に応じた情報（例えば、図６（ｂ）の画素数に応じたサイズの存在表示１８〜２０）を、第１撮像部２によって撮像された画像に重畳して表示する（図６（ｃ））ようにしてもよい。

一実施形態によると、暗視装置１の重量および体積の大部分を占める可視光による第１撮像部２を最小限にとどめつつ、小型で軽量な第２撮像部３（例えば、複数の赤外線カメラ）を設けることにより、必要最小限の微光暗視視野を確保しつつ、潜在的なリスクとなり得る熱源の存在を広視野に検出することが可能となる。すなわち、一実施形態によると、小型、軽量、省電力、低価格でありながら、熱源に対して実効的に広視野をカバーする暗視装置を提供することができる。

＜実施形態１＞
次に、本発明の第１の実施形態について図面を参照して詳細に説明する。

［構成］
図２は、本実施形態の暗視装置１の構成を例示するブロック図である。図２を参照すると、暗視装置１は、図１の第１撮像部２に相当する微光暗視部６と、第２撮像部３に相当するＩＲカメラ７、８と、抽出部４に相当する処理部９、１０と、出力部５に相当する表示部１１、融合部１２、および、リレーレンズ１３と、を備えている。

図３は、図２に示した暗視装置１を装着した状態を例示する図である。図２の各機能ブロックは、一例として、図３のように配置される。図３においては、表示部１１および融合部１２は、微光暗視部６と一体化して配置されている。また、図３において図示しないリレーレンズ１３は、微光暗視部６と観察者の間に配置されている。なお、図３の実装は例示に過ぎず、本実施形態の暗視装置１の構成は図示の態様に限定されない。

微光暗視部６は、可視光から近赤外の波長による視野像を捉え、人の目で視認できるレベルまで明るさを増幅して出力する。

ＩＲカメラ７は、３次元の温度情報を２次元の遠赤外線画像として撮影して処理部９に出力する。

処理部９は、ＩＲカメラ７から入力した２次元の遠赤外線画像を参照し、予め設定された温度範囲に含まれる画素を選択して画素数をカウントする。また、処理部９は、２次元の赤外線画像の中で、設定された温度範囲に入る画素が検出された位置（または、画素の集合の重心位置）と、画素数の情報を表示部１１に出力する。

表示部１１は、処理部９から入力した位置と画素数の情報を表示する。

同様に、ＩＲカメラ８は、２次元の遠赤外線画像を撮像して処理部１０に出力する。

処理部１０は、ＩＲカメラ８から取得した２次元赤外線画像を参照し、予め設定された温度範囲に入る画素が検出された位置と画素数の情報に変換して、表示部１１に出力する。

表示部１１は、処理部９の出力と同様に、処理部１０からの出力についても、位置と画素数の情報を表示する。

融合部１２は、表示部１１に表示される画面と、微光暗視部６から得られる画面を融合して、融合画像を生成する。融合部１２は、例えばハーフミラー等により構成される。

融合部１２で生成された融合画像は、リレーレンズ１３を経由して、観測者によって視認される。

［動作例］
次に、具体的な動作例に従って、本実施形態の暗視装置１の動作を説明する。

ここでは、図３のＩＲカメラ７、８は、微光暗視部６の視野と重複しない左右両サイドの視野を捉えるように配置されているものとする。微光暗視部６およびＩＲカメラ７、８の視野角は、特に限定されないが、一例として４０°としてもよい。

このとき、図４に示す状況において、微光暗視部６が捉える視野は微光暗視部視野１５に対応する。一方、ＩＲカメラ７、８が捉える視野は、それぞれＩＲカメラ視野１４、１６に対応する。

ＩＲカメラ７、８は赤外線を撮像する素子であるため、可視光で見た視野とは異なる見え方となる。しかし、ＩＲカメラ７、８として遠赤外線カメラを使用することにより、人体の発する熱を２次元の映像情報として捉えることができる。

したがって、図４に示した風景は、微光暗視部６およびＩＲカメラ７、８により、図５に示すイメージとして捉えられることになる。なお、図５のＩＲカメラ視野１４、１６および微光暗視部視野１５以外の領域は視野外であるため、観測者の視野外となる。

処理部９、１０は、それぞれＩＲカメラ７、８の出力信号に対して、所定の下限値と上限値の間に収まる信号のみを出力する処理を施して、表示部１１に出力する。一例として、下限値を３０℃に設定し、上限値を４５℃に設定した場合、火炎等の熱源に邪魔されることなく、人体のみを抽出することが可能となる。

また、処理部９、１０は、視野内に占める所定の下限値・上限値の間に収まる信号に基く画素数が所定の閾値を超過した場合に、表示部１１に当該画素の集まりに相当する対象物の位置と画素数を出力するようにしてもよい。これにより、観測者に近接する熱源（例えば、人物）の存在を選択的に抽出することが可能となる。すなわち、対象物が画像において一定以上の領域を占有する場合に、表示部１１に対象物を表示させることにより、より高いリスクとなり得る近傍に存在する対象物のみを観測者に知らせることが可能となる。

ここで、表示部１１は、少なくとも、処理部９、１０によって抽出された対象物の位置を、画素数に応じた大きさで表示する。具体的には、表示部１１は、対象物が存在する方向（例えば、微光暗視部視野１５に対する相対的な方向、例えば、左右の別）を表示する。

図６（ａ）に示す状況では、表示部１１は、図６（ｂ）に示す表示部画面１７のように、存在表示１８〜２０を矢印（▼）で表示する。なお、存在表示１８〜２０の表示態様は、図示の態様に限定されない。

ここで、表示部１１は、対象物の画素数に応じて（すなわち、対象物の暗視装置１からの距離に基づいて）、存在表示１８〜２０の矢印（▼）の大きさを変更してもよい。具体的には、表示部１１は、対象物の画素数が多い（暗視装置１からの距離が近い）場合、矢印（▼）を相対的に大きく表示する。一方、対象物の画素数が少ない（暗視装置１からの距離が遠い）場合には、表示部１１は矢印（▼）を相対的に小さく表示してもよい。さらに、表示部１１は、画面上において、対象物を構成する画素の重心位置と同一の高さに矢印（▼）を表示してもよい。

融合部１２は、表示部１１によって生成された表示部画面１７と、微光暗視部６から得られる微光暗視部視野１５の映像を融合する。観測者には、リレーレンズ１３を経由して、暗視装置１の表示画像として、図６（ｃ）に示す融合表示画面２１が提供される。

本実施形態の暗視装置１では、実視野は微光暗視部６によって取得される視野のみである。しかしながら、小型軽量、廉価、かつ、画素数の少ないＩＲカメラ７、８を複数設置して組み合わせることで、人体に相当する潜在的リスクの存在を広視野で察知することが可能となる。

微光暗視部６によると、潜んでいる人物を例えばモノクロで表示することができるが、観測者には認識し難い場合もある。かかる場合においても、ＩＲカメラ７、８で赤外線を検出し、処理部９、１０で所定の下限値と上限値の間に収まる信号のみを出力する処理を施した結果を、例えばカラーで表示することで、人物の視認性を大幅に改善することができる。

暗闇の未知の場所に突入するような状況では、人間の認識は前方の狭い視野に注意を集中しがちである。このような状況にあって、本発明によれば、視野外にある潜在的リスクのみを検出して選別的に表示することができる。このとき、観測者は前方へ意識を集中しつつ、潜在的リスクを早期に発見して回避、対処行動に繋げることができる。したがって、本実施形態の暗視装置１によると、例えば、犯罪捜査等における作戦行動の成功率を高めることが可能となる。

以下、本実施形態の暗視装置１によってもたらされる効果について、さらに詳述する。

ます、暗視装置１によると、小型・軽量化と実効的な広視野とを両立した暗視装置が実現される。その理由は、潜在的なリスクとなり得る熱源の存在を赤外線カメラ（ＩＲカメラ７、８）で広視野を捉えることによる。

微光暗視部６は、可視光から近赤外領域の照明光が乏しい状況で、光を増幅して人間の目で認知し易いレベルまで拡大して表示するため、通常の明るい場所での景観に近く、人間の空間認識を容易にして、活動し易くするための映像を提供する。一方で、広視野を確保するために、光電子倍増管を複数束ねたパノラミック・ナイトビジョン・ゴーグルのような形態を採用すると、装置の重量が増し、サイズも増大してしまう。本実施形態の暗視装置１では、微光暗視部６の数を最小に抑えつつ、最低限必要とされる中心視野については、通常の明るい場所での景観に近く認識し易い映像を確保する。これにより、微光暗視部６の数が少なくて済むため、大幅な小型化、軽量化が可能となる。

また、本実施形態の暗視装置１では、赤外線カメラ（ＩＲカメラ７、８）によって広視野をカバーする。これにより、雰囲気よりも高温または低温の対象物を検出し易くし、広視野にわたる潜在的リスクの検出力を高めることが可能となる。なお、赤外線カメラの映像に基づいて、特定の温度範囲にある対象物の有無と、対象物が存在する方向を検出することを目的とする場合には、赤外線カメラとして画素数の少ない小型・軽量のものを採用すれば十分である。

さらに、単一の赤外線カメラ・レンズで広視野を確保する場合、画像が歪み、画面が暗くなり、レンズが大型化し重量が増大する等の問題が生じる。しかしながら、本実施形態の暗視装置１のように画素数の少ない小型、軽量の赤外線カメラを複数設置して、合成の視野角として実効視野を確保することにより、小型・軽量化の効果がもたらされる。

以上のように、暗視装置１では、中心視野を最小限の微光暗視部６によって確保し、広い視野を複数台のＩＲカメラ７、８でカバーすることにより、小型化・軽量化と実効的広視野を両立した暗視装置が実現される。

さらに、本実施形態の暗視装置１によると、実効的に広視野な暗視装置を廉価に実現することができる。その理由は、微光暗視部６の台数を最小限としつつ、廉価な赤外線カメラを複数台設けたことによる。

一般に、微光暗視部６はイメージ管などの高価な部品と、僅かな光を損失最小で伝達・処理するレンズで構成されるため、広視野を確保する場合、非常に高価となる。しかしながら、本実施形態の暗視装置１によれば、最も高価な微光暗視部６の個数を最小限（通常、１台で足りる）としつつ、広視野を複数の赤外線カメラによって確保する。これにより、同様の視野を微光暗視部のみで実現した場合と比較して、暗視装置を非常に廉価に実現することができる。

なお、特定の温度範囲にある対象物の有無と、その方向を検出することを目的とした場合、赤外線カメラとして画素数の少ない廉価なものを採用すれば十分であり、レンズも小型・軽量で済む。したがって、赤外線カメラの光学素子にも、廉価なものを採用することが可能となる。

以上のように、本実施形態の暗視装置１によると、最小限の微光暗視部と、廉価な赤外線カメラ・赤外線用レンズを複数台組み合わせることで、廉価かつ実効的に広視野な暗視装置を実現することができる。

＜実施形態１の変形例１＞
第１の実施形態では、図３、４に示すように、中央の微光暗視部視野１５を微光暗視部６によって確保し、当該視野の左右のＩＲカメラ視野１４、１６を２台のＩＲカメラ７、８によって確保する構成を例示した。

ただし、微光暗視部視野とＩＲカメラ視野との相対的な位置関係は、図示の態様に限定されない。すなわち、ＩＲカメラによって撮像する領域は、微光暗視部によって撮像される領域に対して、左右方向に限定されず、上下方向であってもよいし、奥行き方向について異なる領域をカバーするようにしてもよいし、さらに、これらの複数を組み合わせた領域をカバーするようにしてもよい。

＜実施形態１の変形例２＞
第１の実施形態では、図３、４に示すように、中央の微光暗視部視野１５を微光暗視部６によって確保し、当該視野の左右のＩＲカメラ視野１４、１６を２台のＩＲカメラ７、８によって確保する構成を例示した。

かかる構成の変形例として、第３のＩＲカメラ（非図示）を図３のＩＲカメラ７、８の間に配置し、第３のＩＲカメラと微光暗視部６によって、微光暗視部視野１５を重複してカバーするようにしてもよい。

このとき、ＩＲカメラ７、８と第３のＩＲカメラの視野角をそれぞれ４０°とし、３台のＩＲカメラによって水平方向について１２０°の合成視野角を実現してもよい。

なお、第３のＩＲカメラを設けた場合、第３のＩＲカメラによる映像を図示しない第３の処理部によって処理して輪郭情報のみを抽出し、表示部１１に表示させるとともに融合部１２で微光暗視画像に重畳して観測者に提供してもよい。

かかる変形例によると、第１の実施形態の暗視装置１と比較して、微光暗視部視野１５における対象物の視認性をさらに向上させることが可能となる。

＜実施形態１の変形例３＞
第１の実施形態では、図３、４に示すように、微光暗視部６による微光暗視部視野１５と、ＩＲカメラ７、８によるＩＲカメラ視野１４、１６とが互いに重ならないようにした構成について説明した。

かかる構成の変形例として、図８に示すように、微光暗視部６による微光暗視部視野２３とＩＲカメラ７、８によるＩＲカメラ視野２２、２４とが互いに重複する部分を有する構成を採用してもよい。図８に例示した構成では、微光暗視部視野２３と、ＩＲカメラ視野２２、２４との間には、重複する領域と、ＩＲカメラ７、８のみによってカバーされる領域とが存在する。

図８のように視野を配置した場合、微光暗視部視野２３と、ＩＲカメラ視野２２、２４の間で重複する部分については、処理部９、１０は、ＩＲカメラ視野２２、２４について得られた赤外線画像から輪郭情報のみを取り出し、表示部１１に表示させる。さらに、融合部１２は、微光暗視部６から得られる映像の上に赤外線の輪郭情報を重畳表示する。

また、ＩＲカメラ視野２２、２４のみによってカバーされる領域に関しては、処理部９、１０は、所定の下限値と上限値の間に収まる信号のみを出力する処理を施し、表示部１１に（例えば、図６（ｂ）の存在表示１８〜２０のように）表示させる。さらに、融合部１２は、微光暗視部視野２３に対する画像に対して、表示部１１による表示を重畳して表示する。

かかる変形例においても、第１の実施形態と同様の効果がもたらされる。また、ＩＲカメラ視野２２、２４と微光暗視部視野２３とが重なる領域については、上記変形例２と同様の効果を奏することが可能となる。

＜実施形態２＞
第１の実施形態では、ＩＲカメラ７、８によって得られた赤外線画像から対象物の有無と、対象物の相対的な位置を抽出し、微光暗視部６によって得られた画像に対して、対象物の存在を示す情報（図６（ｃ）の存在表示１８〜２０）を重ねて表示する構成について説明した。

本実施形態では、赤外線画像から抽出した、対象物の有無と、対象物の相対的な位置を表示する代わりに、音声として出力する。

図９は、本実施形態の暗視装置１の構成を例示するブロック図である。図９を参照すると、本実施形態の暗視装置１は、図２に示す第１の実施形態の暗視装置１と同様の構成を有する。ただし、本実施形態の暗視装置１は、図２の表示部１１の代わりに、音声出力部２５を備え、融合部１２を削除した構成を有する。

第１の実施形態の暗視装置１と同様に、処理部９、１０は、それぞれ、ＩＲカメラ７、８から入力した２次元の遠赤外線画像を参照し、予め設定された温度範囲に入る画素を選択して画素数をカウントする。また、処理部９、１０は、２次元の赤外線画像の中で、設定された温度範囲に入る画素が検出された位置（または、連なった画素の集合の重心位置）と、画素数の情報を音声出力部２５に出力する。

音声出力部２５は、処理部９、１０から受信した、対象物の画素数の情報と、対象物の位置に関する情報に基づいて、対象物の位置を音声出力する。

ここでは、一例として、図３、図４に示すように、ＩＲカメラ７、８によるＩＲカメラ視野１４が微光暗視部６による微光暗視部視野１５の左右に設けられている場合を想定する。この場合、対象物がＩＲカメラ視野１６において観測されたときには、音声出力部２５は右側に対象物が存在する旨を音声で出力し、一方、対象物がＩＲカメラ視野１４において観測されたときには、音声出力部２５は左側に対象物が存在する旨を音声で出力する。

さらに、音声出力部２５は、対象物の画素数に応じて（すなわち、対象物の暗視装置１からの距離に基づいて）、音声出力の態様を変更してもよい。具体的には、音声出力部２５は、対象物の画素数が多い（暗視装置１からの距離が近い）場合、相対的に大きい音量で音声出力し、一方、対象物の画素数が少ない（暗視装置１からの距離が遠い）場合には、相対的に小さい音量で音声出力するようにしてもよい。

また、音声出力部２５は、暗視装置１の外部への音声の漏れが問題となる場合には、観測者の両耳に装着可能なヘッドフォンまたはイヤホンに対して音声出力を行うようにしてもよい。かかる場合、対象物がＩＲカメラ視野１６において観測されたときには、音声出力部２５は右側のヘッドフォンまたはイヤホンに対して対象物が存在する旨（または、画素数に応じた音量の音声）を出力してもよい。一方、対象物がＩＲカメラ視野１４において観測されたときには、音声出力部２５は左側のヘッドフォンまたはイヤホンに対して対象物が存在する旨、または、画素数に応じた音量の音声を出力してもよい。

本実施形態の暗視装置によると、第１の実施形態の暗視装置と同様の効果がもたらされる。さらに、本実施形態、潜在的なリスクと成り得る熱源の存在については音声によって観測者に通知する。かかる構成によると、観測者は視覚と聴覚という複数の感覚器官を用いて観測を行うことができ、夜間等の状況においても、対象物（人など）の発見が容易となり、リスクを回避する行動も取り易くなる。

以上、実施形態に従って本発明の暗視装置について説明したが、上記実施形態に係る暗視装置は、さまざまな用途に活用することができる。

一例として、上記実施形態の暗視装置は、暗闇の中で照明を用いることができない状況、または、十分な照度で照明できない状況の中で、活動をする必要がある場合に特に有効となる。また、人が夜間や暗闇の中を歩行する場面で、視野の中心において可視光の視界に近い映像を得つつ、人、高温物体、低温物体等の雰囲気温度とは異なる温度の対象物が存在することを広い視野で検知することが有用な場面での利用が可能である。具体的には、犯罪捜査、人質救出、夜間の被災地救助活動、消火活動終了後の夜間の現場検証、山岳、森林での捜索活動等おいて、有効に活用することができる。

なお、本発明において、下記の形態が可能である。
［形態１］
上記第１の態様に係る暗視装置のとおりである。
［形態２］
前記抽出部は、前記対象物の位置を抽出し、
前記出力部は、抽出された前記対象物の位置が前記第１領域外である場合、前記第１領域に対する前記対象物の相対的な方向を示す情報を出力する、
形態１に記載の暗視装置。
［形態３］
前記出力部は、前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する、
形態２に記載の暗視装置。
［形態４］
前記出力部は、前記対象物の方向を示す情報を音声で出力する、
形態２または３に記載の暗視装置。
［形態５］
前記出力部は、抽出された前記対象物の位置が前記第１領域内である場合、前記対象物の位置を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する、
形態２ないし４のいずれか一に記載の暗視装置。
［形態６］
前記抽出部は、所定の温度領域内の対象物を抽出する、
形態２ないし５のいずれか一に記載の暗視装置。
［形態７］
前記抽出部は、前記所定の温度領域内の対象物の画素数を抽出し、
前記出力部は、前記画素数が所定の閾値以上である場合、前記対象物を出力する、
形態６に記載の暗視装置。
［形態８］
前記出力部は、前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて前記画素数に応じて表示し、かつ／または、前記対象物の方向を示す情報を前記画素数に応じた音量で出力する、
形態７に記載の暗視装置。
［形態９］
上記第２の態様に係る暗視方法のとおりである。
［形態１０］
前記対象物の位置を抽出するステップを含み、
前記出力するステップにおいて、抽出された前記対象物の位置が前記第１領域外である場合、前記第１領域に対する前記対象物の相対的な方向を示す情報を出力する、
形態９に記載の暗視方法。
［形態１１］
前記出力するステップにおいて、前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する、
形態１０に記載の暗視方法。
［形態１２］
前記出力するステップにおいて、前記対象物の方向を示す情報を音声で出力する、
形態１０または１１に記載の暗視方法。
［形態１３］
前記出力するステップにおいて、抽出された前記対象物の位置が前記第１領域内である場合、前記対象物の位置を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する、
形態１０ないし１２のいずれか一に記載の暗視方法。
［形態１４］
前記抽出するステップにおいて、所定の温度領域内の対象物を抽出する、
形態１０ないし１３のいずれか一に記載の暗視方法。
［形態１５］
前記所定の温度領域内の対象物の画素数を抽出するステップを含み、
前記出力するステップにおいて、前記画素数が所定の閾値以上である場合、前記対象物を出力する、
形態１４に記載の暗視方法。
［形態１６］
前記出力するステップにおいて、前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて前記画素数に応じて表示し、かつ／または、前記対象物の方向を示す情報を前記画素数に応じた音量で出力する、
形態１５に記載の暗視方法。
［形態１７］
第３の態様に係るプログラムのとおりである。
［形態１８］
前記対象物の位置を抽出する処理と、
抽出された前記対象物の位置が前記第１領域外である場合、前記第１領域に対する前記対象物の相対的な方向を示す情報を出力する処理と、を前記コンピュータに実行させる、
形態１７に記載のプログラム。
［形態１９］
前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する処理を、前記コンピュータに実行させる、
形態１８に記載のプログラム。
［形態２０］
前記対象物の方向を示す情報を音声で出力する処理を、前記コンピュータに実行させる、
形態１８または１９に記載のプログラム。
［形態２１］
抽出された前記対象物の位置が前記第１領域内である場合、前記対象物の位置を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する処理を、前記コンピュータに実行させる、
形態１８ないし２０のいずれか一に記載のプログラム。
［形態２２］
所定の温度領域内の対象物を抽出する処理を前記コンピュータに実行させる、
形態１８ないし２１のいずれか一に記載のプログラム。
［形態２３］
前記所定の温度領域内の対象物の画素数を抽出する処理と、
前記画素数が所定の閾値以上である場合、前記対象物を出力する処理と、を前記コンピュータに実行させる、
形態２２に記載のプログラム。
［形態２４］
前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて前記画素数に応じて表示し、かつ／または、前記対象物の方向を示す情報を前記画素数に応じた音量で出力する処理を、前記コンピュータに実行させる、
形態２３に記載のプログラム。

なお、上記特許文献１ないし３の全開示内容は、本書に引用をもって繰り込み記載されているものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態の変更・調整が可能である。また、本発明の全開示の枠内において種々の開示要素（各請求項の各要素、各実施形態の各要素、各図面の各要素等を含む）の多様な組み合わせ、ないし、選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。

１ 暗視装置
２ 第１撮像部
３ 第２撮像部
４ 抽出部
５ 出力部
６ 微光暗視部
７、８ ＩＲカメラ
９、１０ 処理部
１１ 表示部
１２ 融合部
１３ リレーレンズ
１４、１６、２２、２４ ＩＲカメラ視野
１５、２３ 微光暗視部視野
１７ 表示部画面
１８〜２０ 存在表示
２１ 融合表示画面
２５ 音声出力部

Claims (10)

1. 第１領域を可視光に基づいて撮像する第１撮像部と、
   第２領域を赤外線に基づいて撮像する第２撮像部と、
   前記第２領域を撮像した画像から対象物を抽出する抽出部と、
   前記第１領域を撮像した画像とともに、前記対象物を示す情報を出力する出力部と、を備える、
   ことを特徴とする暗視装置。
2. 前記抽出部は、前記対象物の位置を抽出し、
   前記出力部は、前記位置が前記第１領域外である場合、前記第１領域に対する前記対象物の相対的な方向を示す情報を出力する、
   請求項１に記載の暗視装置。
3. 前記出力部は、前記第１領域に対する前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する、
   請求項２に記載の暗視装置。
4. 前記出力部は、前記第１領域に対する前記対象物の相対的な方向を示す情報を、音声で出力する、
   請求項２または３に記載の暗視装置。
5. 前記出力部は、前記対象物の位置が前記第１領域内である場合、前記対象物の位置を示す情報を、前記第１領域を撮像した画像に重ね合わせて表示する、
   請求項２ないし４のいずれか１項に記載の暗視装置。
6. 前記抽出部は、所定の温度領域に含まれる対象物を抽出する、
   請求項２ないし５のいずれか１項に記載の暗視装置。
7. 前記抽出部は、前記所定の温度領域に含まれる対象物の画素数を抽出し、
   前記出力部は、前記画素数が所定の閾値以上である場合、前記対象物を出力する、
   請求項６に記載の暗視装置。
8. 前記出力部は、前記第１領域に対する前記対象物の相対的な方向を示す情報を、前記第１領域を撮像した画像に重ね合わせて前記画素数に応じて表示し、かつ／または、前記第１の領域に対する前記対象物の相対的な方向を示す情報を前記画素数に応じた音量で出力する、
   請求項７に記載の暗視装置。
9. 第１領域を可視光に基づいて撮像するステップと、
   第２領域を赤外線に基づいて撮像するステップと、
   前記第２領域を撮像した画像から対象物を抽出するステップと、
   前記第１領域を撮像した画像とともに、前記対象物を示す情報を出力するステップと、を含む、
   ことを特徴とする暗視方法。
10. 第１領域を可視光に基づいて撮像する処理と、
    第２領域を赤外線に基づいて撮像する処理と、
    前記第２領域を撮像した画像から対象物を抽出する処理と、
    前記第１領域を撮像した画像とともに、前記対象物を示す情報を出力する処理と、をコンピュータに実行させる、
    ことを特徴とするプログラム。