JP4450464B2 - Infrared imaging device - Google Patents

Infrared imaging device Download PDF

Info

Publication number
JP4450464B2
JP4450464B2 JP2000005476A JP2000005476A JP4450464B2 JP 4450464 B2 JP4450464 B2 JP 4450464B2 JP 2000005476 A JP2000005476 A JP 2000005476A JP 2000005476 A JP2000005476 A JP 2000005476A JP 4450464 B2 JP4450464 B2 JP 4450464B2
Authority
JP
Japan
Prior art keywords
subject
focus
temperature range
infrared
evaluation value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000005476A
Other languages
Japanese (ja)
Other versions
JP2001194579A (en
Inventor
俊浩 園田
淳 河合
亮一 佐藤
康寿 畠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2000005476A priority Critical patent/JP4450464B2/en
Publication of JP2001194579A publication Critical patent/JP2001194579A/en
Application granted granted Critical
Publication of JP4450464B2 publication Critical patent/JP4450464B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、赤外線撮像装置に関し、詳しくはオートフォーカス機能を有する赤外線撮像装置に関する。
【0002】
【従来の技術】
被写体からの可視光線を用いる通常のビデオカメラでは、種々のオートフォーカス方式が提案され、製品化されている。例えば、カメラから被写体に向けて光(赤外線)を発射し、被写体で反射してカメラに戻ってきた光を受光して被写体までの距離を測定するアクティブ方式、被写体からの可視光の位相差を利用するパッシブ方式等がある。また、近年急激に普及してきたディジタルカメラでは、撮像素子から得られた映像信号の演算処理によりフォーカスが合った状態を検出するインナーフォーカス方式が多く用いられている。
【0003】
インナーフォーカス方式は、例えば特開平3−2685858号公報に開示されているように、映像信号の輝度情報を高域通過フィルタ(HPF)に通し、得られた高域成分からエッジ成分を抽出し、これを評価することによりフォーカスが合っているか否かを判断する。このインナーフォーカス方式は、撮像素子から得られた映像信号を利用してフォーカスの合否を検出するので、特別なセンサを必要とせず、しかもパララックス(視差)が少ないといった利点を有する。
【0004】
【発明が解決しようとする課題】
しかしながら、上記のインナーフォーカス方式は、映像信号の輝度情報を用いてフォーカスの合否を判断するので、得られる映像のコントラストが少ない場合はさほど有効ではない。また、赤外線ビデオカメラは輝度情報ではなく温度情報を抽出して映像化するものであるから、上記のインナーフォーカス方式をそのまま赤外線ビデオカメラに適用することはできない。
【0005】
輝度情報に代えて温度情報を用いることにより、インナーフォーカス方式を赤外線ビデオカメラに適用することが考えられる。しかし、赤外線ビデオカメラの精度上の問題があり、このため、フォーカスの合否に関して、温度境界におけるコントラスト(温度差)が、可視光線の輝度の場合ほど明確でないという問題がある。
【0006】
そこで、本発明は、上記のような従来の問題を解決し、簡単な構成によって赤外線撮像装置のオートフォーカスを実現することを目的とする。
【0007】
被写体を含む撮像対象からの赤外線をフォーカスレンズを介して赤外線検出センサに集光し、赤外線検出センサから得られた赤外線撮像情報を処理装置で処理して得られたイメージを表示画面に表示する赤外線撮像装置であって、前記フォーカスレンズを光軸方向に駆動するフォーカスレンズ駆動装置が設けられ、前記処理装置が、前記フォーカスレンズ駆動装置を制御することによって前記フォーカスレンズを光軸方向に所定ピッチで移動させながら、前記フォーカスレンズ位置のそれぞれの評価値として、当該位置における前記赤外線撮像情報に含まれる全画素または特定の領域の画素のうち、所定の温度範囲内にある温度の情報を有する画素の総数を算出し前記各位置のうち、前記評価値が極大又は極小となる位置をベストフォーカスの位置と判定する、ことを特徴とする。このような構成により、赤外線撮像装置におけるインナーオートフォーカスが可能となる。
【0008】
えば被写体にフォーカスが合っていない状態では、被写体の周囲に被写体とほぼ同じ温度情報を有する画素で構成されたオーラ部が形成されるので、所定の温度範囲内にある温度の情報を有する画素の総数がベストフォーカス時より多くなる。したがって、所定の温度範囲内にある温度の情報を有する画素の総数(評価値)が極小となる位置をベストフォーカスの位置と判定することができる。
【0009】
また、赤外線撮像情報の全領域のうちの特定の領域を設定する手段が赤外線撮像装置に備えられる。前記処理装置は、設定された前記特定の領域に含まれる全画素のうち、所定の温度範囲内にある温度の情報を有する画素の総数を前記評価値として算出し、該評価値が極大又は極小となる位置をベストフォーカスの位置と判定する。この構成によれば、画面の全領域ではなく、その一部、例えば中央部を評価値算出の対象領域として設定することができる。
【0010】
更に好ましい構成として、所定の温度範囲として、フォーカスの対象となる被写体(例えば人体)の予測可能な温度範囲を設定する。
また、所定の温度範囲として、フォーカスの対象となる被写体(例えば人体)の予測可能な温度範囲を含まず、かつ、フォーカスの対象とならない非被写体(例えば背景となる物体)の予測可能な温度範囲を含まない温度範囲を設定する。
【0011】
また、所定の温度範囲として、フォーカスの対象とならない非被写体の予測可能な温度範囲を設定する。前述のように、例えば被写体にフォーカスが合っていない状態では、被写体の周囲に被写体とほぼ同じ温度情報を有する画素で構成されたオーラ部が形成される。この結果、背景となる非被写体の温度範囲内にある温度の情報を有する画素の総数がベストフォーカス時より少なくなる。したがって、非被写体の予測可能な温度範囲を所定の温度範囲として設定した場合は、この温度範囲内にある温度の情報を有する画素の総数(評価値)が極大となる位置をベストフォーカスの位置と判定すればよい。
【0012】
また、前記評価値が極大又は極小となる位置が複数得られたとき、それら複数の位置の中からベストフォーカスの位置を1つ選択する手段を備えている構成が好ましい。
【0013】
また、処理装置が、画面を複数の領域に分割し、各領域ごとに所定の温度範囲内にある温度の情報を有する画素の総数を算出し、該算出結果に基づいて、フォーカスを合わせるべき領域を決定するフォーカス領域自動決定処理を更に実行することが好ましい。
【0014】
更に好ましくは、所定の温度範囲として、フォーカスの対象となる被写体の予測可能な温度範囲を設定し、前記処理装置が、所定の温度範囲内にある温度の情報を有する画素の総数が最も多い領域を、フォーカスを合わせるべき領域として決定する。
【0015】
また、処理装置が、所定の温度範囲内にある温度の情報を有する画素の総数を算出し、該算出結果に基づいて、フォーカスを合わせるべき複数の領域を選定して表示し、使用者が複数の領域の中から1つを決定するように構成してもよい。
【0016】
【発明の実施の形態】
以下、本発明の実施形態を図面に基づいて説明する。
図1は、本発明の実施形態に係る赤外線撮像装置の全体構成を示すブロック図である。
赤外線撮像装置10は、フォーカスレンズ11、赤外線検出センサ12、A/D変換器13、ディジタル信号処理回路14、フォーカスレンズ駆動装置15、表示装置16を備えている。被写体の情報を含む赤外線がフォーカスレンズ11を通って赤外線検出センサ(イメージセンサ)12に結像する。赤外線検出センサ12は、受光した赤外線情報を電気信号(アナログ信号)に変換しA/D変換器13に与える。A/D変換器13はアナログ信号をディジタル信号に変換してディジタル信号処理回路14に与える。
【0017】
ディジタル信号処理回路14はコンピュータ等で構成され、入力された赤外線撮像信号(ディジタル信号)から被写体のイメージを再現し、映像信号として表示装置16へ出力する。表示装置16は、CRT、LCD等で構成され、ディジタル信号処理回路14から与えられる映像信号にしたがって被写体の赤外線によるイメージを画面に表示する。また、ディジタル信号処理回路14は、A/D変換器13から入力されたディジタル信号(被写体の赤外線撮像信号)に基づいて、フォーカスレンズ駆動装置15を介してフォーカスレンズ11を駆動するオートフォーカス制御をも実行する。
【0018】
図2は、赤外線撮像装置のオートフォーカス時の動作を示すブロック図である。デジタル信号処理回路14は、フォーカスを合わせるために、フォーカスレンズを少しずつ移動させる指令21をフォーカスレンズ駆動装置15に与える。フォーカスレンズ駆動装置15は与えられた指令にしたがって、フォーカスレンズ11を光軸方向(矢印参照)に移動させる。フォーカスレンズ11が移動すると、その結果、フォーカスレンズ11を通って赤外線検出センサ12に結像する被写体の赤外線撮像情報が変化する。この変化はA/D変換器13を介してディジタル信号処理回路14に与えられるディジタル信号に反映される。
【0019】
デジタル信号処理回路14は、与えられたディジタル信号(赤外線撮像情報)に基づいて以下に述べる評価値を計算する。フォーカスレンズの移動可能範囲又は指定された移動範囲内において、所定のピッチでフォーカスレンズ11を移動させながら、各位置での評価値を計算する。その結果得られるフォーカスレンズの位置に対する評価値の変化から、例えば評価値が極大又は極小なる位置をベストフォーカス位置として求める。
【0020】
上記の評価値として、例えば所定の温度範囲内にある画素の総数を求める。赤外線撮像情報は、被写体の各点(イメージの画素に対応する)の温度情報の集合として二次元のイメージを形成するものである。そこで、被写体の注目温度近傍において下限温度Tlower及び上限温度Tupperを設定し、この温度範囲内にある画素数の総和を評価値として下式(数1)から求める。
【0021】
【数1】

Figure 0004450464
【0022】
式(数1)において、E(p)はフォーカスレンズの位置(以下、レンズ位置という)pでの評価値、Xは映像の幅(横方向サイズ)、Yは映像の高さ(縦方向サイズ)、d(x,y)は画素(x,y)での温度(に相当する値)である。関数f(t)は、温度tがTlower≦t≦Tupperのときf(t)=1、それ以外のときはf(t)=0となる。
【0023】
したがって、上式(数1)によれば、温度が下限温度Tlowerから上限温度Tupperrの間にある画素の総数である評価値E(p)が算出される。この評価値E(p)が極小となる位置pをベストフォーカス位置とする。フォーカスがずれていると、図3に示すように、被写体31の周りに被写体31の温度に近いドーナッツ状のオーラ部32が感知されやすくなる。このとき、下限温度Tlowerから上限温度Tupperrの温度範囲に対応する部分が被写体31の輪郭内から、オーラ部32の外縁まで広がり、この温度範囲内にある画素の総数が多くなる。それゆえ、上述のように、温度が下限温度Tlowerから上限温度Tupperrの間にある画素の総数である評価値E(p)が極小となる位置pをベストフォーカスとすることにより、オートフォーカスが実行される。
【0024】
上記の実施形態において、フォーカスがずれていると被写体の画素が他の部分(すなわち非被写体部)に分散すると考えることもできる。逆に非被写体部の画素が被写体に分散して現れる可能性も考えられ、この場合は式(数1)による簡単な計算のみでは、正確なフォーカスが得られないことになる。そこで、次式(数2)のように、注目温度の分散を考慮した評価値を計算することが望ましい。
【0025】
【数2】
Figure 0004450464
【0026】
式(数2)では、注目温度の画素(x,y)と他の注目温度の画素(w,z)との距離が考慮されている。フォーカスが合えば被写体温度の分散が小さくなり、評価値E(p)は一層小さくなる。したがって、評価値E(p)が最小となる位置pをベストフォーカスとすることにより、オートフォーカスが実行される。
【0027】
また、上記の実施形態は得られた赤外線映像の全体を対象として、各画素の情報から評価値を求めているが、評価値を求める対象領域を絞ってもよい。例えば図4に示すように、赤外線映像の全体のうち、左上のコーナ位置Pstart(xstart,ystart)及び右下のコーナ位置Pend(xend,yend)で規定される矩形領域を評価値を求める対象領域とすれば、上式(数2)は下式(数3)のようになる。
【0028】
【数3】
Figure 0004450464
【0029】
を評価式とすることができる。この場合も上述の処理と同じ処理によってオートフォーカスが実行される。
また、フォーカスの対象である被写体の温度範囲だけでなく、フォーカスの対象とならない非被写体(例えば背景となる物体)の温度範囲も分かっている場合は、更に精密な評価値の算出による正確なオートフォーカスが可能となる。すなわち、被写体の温度範囲をTlower≦t≦Tupperに設定し、非被写体の温度範囲をRlower≦t≦Rupperに設定した場合、下式(数4)から評価値E(p)を求める。
【0030】
【数4】
Figure 0004450464
【0031】
式(数4)において、関数O(t)は、温度tが被写体の温度範囲にも非被写体の温度範囲にも含まれない場合、すなわち、t<Tlower又はTupper<tで、かつ、t<Rlower又はRupper<tのときにO(t)=1となり、それ以外の場合(被写体の温度範囲又は非被写体の温度範囲に含まれる場合)はO(t)=0となる。したがって、式(数4)はフォーカスが合えば実存しないはずの温度情報を有する画素の総数を算出していることになる。この算出結果である評価値E(p)が極小となる位置pをベストフォーカスとすることにより、オートフォーカスが実行される。
【0032】
また、非被写体の温度範囲のみが分かっている場合は、非被写体の温度範囲のみを設定して評価値を求め、オートフォーカスを実行することが可能である。つまり、非被写体の温度範囲をRlower≦t≦Rupperに設定した場合、式(数1)、式(数2)又は式(数3)におけるf(t)を値tがRlower<t<Rupperのときf(t)=1、それ以外のときはf(t)=0として、評価値E(p)を求める。この場合、フォーカスが合えば図3に示したオーラ部32が小さくなり、その分だけ非被写体(被写体31の背景部分)が広くなる。したがって、評価値E(p)が極大となる位置pをベストフォーカスとすることにより、オートフォーカスが実行される。
【0033】
例えば、面状の背景に対して被写体を含む複数の物体が撮像範囲に含まれる場合、上述のようにして求めた評価値の極小値又は極大値が、フォーカスレンズの光軸方向での移動に伴って複数現れることがある。この場合は、評価値E(p)が極小値又は極大値になる複数の位置のうち、例えば撮像装置に最も近い物体に対応する位置をベストフォーカスとして決定するようにあらかじめ決めておく。あるいは、複数の位置をベストフォーカスの候補として画面に表示し、使用者がその時点で入力する条件(例えば撮像装置に最も近い、又は最も遠い物体を選択)にしたがってベストフォーカスの位置を選択するように構成してもよい。
【0034】
次に、画面上のどの部分にフォーカスを合わせるかを決定するためのフォーカス領域自動決定方法の実施形態について説明する。
図5は、本発明によるフォーカス領域自動決定方法の一例を示している。画面51を複数の領域(図5では16個の領域)に分割する。そして、それぞれの領域内において、上述のような計算により所定温度範囲にある画素の総数を算出し、所定の温度範囲にある画素の総数が最も多い領域を、フォーカスを合わせるべき領域と決定する。図5の例では、被写体52が主としてハッチングされた領域53に存在している。したがって、被写体52の温度が既知の場合は、その温度を含む範囲を上記の所定温度範囲として設定することにより、領域53がフォーカスを合わせるべき領域と決定されることになる。
【0035】
ただし、画面を分割する数、領域の形及び大きさは上記の例に限らず任意に決めることができる。中心領域に重みを与える方法を併用しても良い。
また、フォーカスの対象である被写体の温度範囲だけでなく、フォーカスの対象とならない非被写体(例えば背景となる物体)の温度範囲も分かっている場合は、オートフォーカス方法の実施形態で述べたのと同様に、被写体の温度範囲及び非被写体の温度範囲を指定してもよい。この場合、被写体の温度範囲にある画素の総数が最も多く、かつ、非被写体の温度範囲にある画素の総数が最も少ない領域を、フォーカスを合わせるべき領域と決定する。
【0036】
更に、被写体の温度範囲内の温度情報を有する画素の総数が多い領域が画面内に複数存在する場合が考えられる。例えば図6に示すように、被写体52の温度に近い温度の他の物体54が画面内に存在する場合である。この場合は、領域53のみならず領域55も所定温度範囲(被写体の温度範囲)内の温度情報を有する画素の総数が多くなる。そして、上記の画素の総数が最も多い領域を選択したとき、領域53が選択されずに領域55が選択される可能性もある。このような場合は、フォーカスを合わせるべき領域を1つの領域まで自動的に絞り込むのではなく、複数の候補領域を画面上に提示し、使用者がポインティングデバイス等の入力装置を用いて最終的に1つの領域を選択するように構成することが好ましい。
【0037】
以上、本発明の実施形態を説明したが、本発明は上記の実施形態に限らず、種々の形態で実施することが可能である。
【0038】
【発明の効果】
以上に説明したように、本発明の赤外線撮像装置によれば、処理装置が、フォーカスレンズ駆動装置を制御することによってフォーカスレンズを光軸方向に所定ピッチで移動させながら、各フォーカスレンズ位置において赤外線撮像情報から温度に関する評価値を算出し、得られたフォーカスレンズ位置と評価値との関係からベストフォーカスを判定するので、特別な付加機構を設けることなくオートフォーカスが実現する。
【0039】
特に、フォーカスの対象となる被写体の予測可能な温度範囲を設定し、この範囲内にある温度の情報を有する画素の総数を評価値として算出することにより、オートフォーカスが簡単な構成で実現される。
【0040】
更に、フォーカスの対象とならない非被写体の温度範囲を予測可能である場合は、この温度範囲も設定することにより、オートフォーカスの精度を上げることができる。
【0041】
また、画面を複数の領域に分割し、各領域ごとに所定の温度範囲内にある温度の情報を有する画素の総数を算出し、該算出結果に基づいて、フォーカスを合わせるべき領域を決定するフォーカス領域自動決定処理をも実行することができる。
【図面の簡単な説明】
【図1】本発明の実施形態に係る赤外線撮像装置の全体構成を示すブロック図である。
【図2】赤外線撮像装置のオートフォーカス時の動作を示すブロック図である。
【図3】フォーカスが合っていないときに、被写体の周りに現れるドーナッツ状のオーラ部を示す図である。
【図4】赤外線映像の全体のうちの評価値を求める対象として設定される矩形領域を例示する図である。
【図5】本発明によるフォーカス領域自動決定方法の一例を示す図である。
【図6】被写体の温度に近い温度の他の物体が画面内に存在する状態を示す図である。
【符号の説明】
10 赤外線撮像装置
11 フォーカスレンズ
12 赤外線検出センサ
13 A/D変換器
14 ディジタル信号処理回路(処理装置)
15 フォーカスレンズ駆動装置
16 表示装置[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an infrared imaging device, and more particularly to an infrared imaging device having an autofocus function.
[0002]
[Prior art]
For ordinary video cameras using visible light from a subject, various autofocus methods have been proposed and commercialized. For example, an active method that emits light (infrared rays) from the camera toward the subject, receives light reflected from the subject and returns to the camera, and measures the distance to the subject. There are passive methods to use. In recent years, digital cameras that have been rapidly spreading have often used an inner focus method for detecting a focused state by arithmetic processing of a video signal obtained from an image sensor.
[0003]
In the inner focus method, as disclosed in, for example, JP-A-3-2858858, the luminance information of the video signal is passed through a high-pass filter (HPF), and an edge component is extracted from the obtained high-frequency component, By evaluating this, it is determined whether or not the subject is in focus. This inner focus method has an advantage that a special sensor is not required and the parallax (parallax) is small because the focus signal is detected by using a video signal obtained from the image sensor.
[0004]
[Problems to be solved by the invention]
However, since the above inner focus method determines whether or not the focus is acceptable using the luminance information of the video signal, it is not very effective when the contrast of the obtained video is small. In addition, since the infrared video camera extracts temperature information instead of luminance information and visualizes it, the above inner focus method cannot be applied to the infrared video camera as it is.
[0005]
It is conceivable to apply the inner focus method to an infrared video camera by using temperature information instead of luminance information. However, there is a problem in the accuracy of the infrared video camera. For this reason, there is a problem that the contrast (temperature difference) at the temperature boundary is not as clear as in the case of the luminance of visible light with regard to whether the focus is good or bad.
[0006]
SUMMARY OF THE INVENTION Accordingly, an object of the present invention is to solve the above-described conventional problems and realize autofocus of an infrared imaging apparatus with a simple configuration.
[0007]
Infrared rays that focus infrared rays from an imaging target including a subject on an infrared detection sensor via a focus lens, and display an image obtained by processing infrared imaging information obtained from the infrared detection sensor with a processing device on a display screen An imaging device is provided, wherein a focus lens driving device that drives the focus lens in the optical axis direction is provided, and the processing device controls the focus lens driving device to move the focus lens at a predetermined pitch in the optical axis direction. while moved, as respective evaluation value of the position of the full Okasurenzu, among the pixels of all pixels or specific areas included in the infrared imaging information at the position, having a temperature information within a predetermined temperature range calculates a total number of pixels, of the respective positions, Best for the position where the evaluation value is the maximum or minimum Scan position and determines, characterized in that. With such a configuration, inner autofocus in the infrared imaging apparatus is possible.
[0008]
In a state where no object focus fits For example, the Aura section consisting of a pixel having substantially the same temperature information as the object around the subject is formed, a pixel having a temperature information within a predetermined temperature range The total number of will be greater than at the time of best focus. Therefore, a position where the total number (evaluation value) of pixels having temperature information within a predetermined temperature range is minimized can be determined as the best focus position.
[0009]
Also, it means for setting a specific region in the whole area of the infrared imaging information is provided to the infrared imaging apparatus. The processing device calculates, as the evaluation value, the total number of pixels having temperature information within a predetermined temperature range among all the pixels included in the set specific region, and the evaluation value is maximum or minimum Is determined as the best focus position. According to this configuration, not a whole area of the screen but a part thereof, for example, the central part can be set as a target area for evaluation value calculation.
[0010]
As a more preferable configuration, a predictable temperature range of a subject to be focused (for example, a human body) is set as the predetermined temperature range.
Further, the predetermined temperature range does not include a predictable temperature range of a subject (for example, a human body) to be focused, and a predictable temperature range of a non-subject (for example, a background object) that is not to be focused. Set the temperature range not including.
[0011]
Further, a predictable temperature range of a non-subject that is not a focus target is set as the predetermined temperature range. As described above, for example, when the subject is not in focus, an aura portion composed of pixels having substantially the same temperature information as the subject is formed around the subject. As a result, the total number of pixels having temperature information within the temperature range of the non-subject that becomes the background is smaller than that during the best focus. Therefore, when the predictable temperature range of the non-subject is set as the predetermined temperature range, the position where the total number (evaluation value) of pixels having temperature information within this temperature range is maximized is the best focus position. What is necessary is just to judge.
[0012]
Further, it is preferable that the apparatus includes a means for selecting one of the best focus positions from the plurality of positions when a plurality of positions where the evaluation value is maximized or minimized are obtained.
[0013]
Further, the processing device divides the screen into a plurality of regions, calculates the total number of pixels having temperature information within a predetermined temperature range for each region, and based on the calculation result, the region to be focused It is preferable to further execute a focus area automatic determination process for determining.
[0014]
More preferably, as the predetermined temperature range, a predictable temperature range of the subject to be focused is set, and the processing device has the largest total number of pixels having temperature information within the predetermined temperature range. Is determined as an area to be focused.
[0015]
Further, the processing device calculates the total number of pixels having temperature information within a predetermined temperature range, selects and displays a plurality of areas to be focused based on the calculation result, and allows a plurality of users to One of the regions may be determined.
[0016]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing the overall configuration of an infrared imaging apparatus according to an embodiment of the present invention.
The infrared imaging device 10 includes a focus lens 11, an infrared detection sensor 12, an A / D converter 13, a digital signal processing circuit 14, a focus lens driving device 15, and a display device 16. Infrared rays including subject information pass through the focus lens 11 and form an image on an infrared detection sensor (image sensor) 12. The infrared detection sensor 12 converts the received infrared information into an electrical signal (analog signal) and supplies it to the A / D converter 13. The A / D converter 13 converts the analog signal into a digital signal and supplies it to the digital signal processing circuit 14.
[0017]
The digital signal processing circuit 14 is composed of a computer or the like, reproduces the image of the subject from the input infrared imaging signal (digital signal), and outputs it to the display device 16 as a video signal. The display device 16 is composed of a CRT, LCD or the like, and displays an infrared image of the subject on the screen according to the video signal supplied from the digital signal processing circuit 14. The digital signal processing circuit 14 performs autofocus control for driving the focus lens 11 via the focus lens driving device 15 based on the digital signal (infrared imaging signal of the subject) input from the A / D converter 13. Also execute.
[0018]
FIG. 2 is a block diagram illustrating the operation of the infrared imaging apparatus during autofocus. The digital signal processing circuit 14 gives a command 21 for moving the focus lens little by little to the focus lens driving device 15 in order to adjust the focus. The focus lens driving device 15 moves the focus lens 11 in the direction of the optical axis (see arrow) in accordance with a given command. When the focus lens 11 moves, as a result, the infrared imaging information of the subject that forms an image on the infrared detection sensor 12 through the focus lens 11 changes. This change is reflected in the digital signal supplied to the digital signal processing circuit 14 via the A / D converter 13.
[0019]
The digital signal processing circuit 14 calculates an evaluation value described below based on the given digital signal (infrared imaging information). An evaluation value at each position is calculated while moving the focus lens 11 at a predetermined pitch within a movable range of the focus lens or a designated movement range. From the change in the evaluation value with respect to the position of the focus lens obtained as a result, for example, a position where the evaluation value is maximum or minimum is obtained as the best focus position.
[0020]
As the evaluation value, for example, the total number of pixels in a predetermined temperature range is obtained. The infrared imaging information forms a two-dimensional image as a set of temperature information of each point of the subject (corresponding to the pixel of the image). Therefore, a lower limit temperature T lower and an upper limit temperature T upper are set in the vicinity of the target temperature of the subject, and the total number of pixels within the temperature range is obtained as an evaluation value from the following equation (Equation 1).
[0021]
[Expression 1]
Figure 0004450464
[0022]
In Expression (1), E (p) is an evaluation value at a focus lens position (hereinafter referred to as a lens position) p, X is a video width (horizontal size), and Y is a video height (vertical size). ) And d (x, y) are temperatures (values corresponding to) at the pixel (x, y). The function f (t) is f (t) = 1 when the temperature t is T lower ≦ t ≦ T upper , and f (t) = 0 otherwise.
[0023]
Therefore, according to the above equation (Equation 1), the evaluation value E (p) that is the total number of pixels whose temperature is between the lower limit temperature T lower and the upper limit temperature T upperr is calculated. The position p at which the evaluation value E (p) is minimized is taken as the best focus position. When the focus is shifted, as shown in FIG. 3, a donut-shaped aura portion 32 close to the temperature of the subject 31 is easily detected around the subject 31. At this time, a portion corresponding to the temperature range from the lower limit temperature T lower to the upper limit temperature T upperr extends from the contour of the subject 31 to the outer edge of the aura portion 32, and the total number of pixels in this temperature range increases. Therefore, as described above, by setting the position p where the evaluation value E (p), which is the total number of pixels between the lower limit temperature T lower and the upper limit temperature T upperr , as a minimum, is the best focus, Is executed.
[0024]
In the above embodiment, it can be considered that when the focus is shifted, the pixels of the subject are dispersed in other portions (that is, non-subject portions). On the other hand, there is a possibility that pixels in the non-subject portion appear dispersedly in the subject. In this case, an accurate focus cannot be obtained only by a simple calculation using the equation (Equation 1). Therefore, it is desirable to calculate an evaluation value in consideration of dispersion of the temperature of interest, as in the following equation (Equation 2).
[0025]
[Expression 2]
Figure 0004450464
[0026]
In the equation (Equation 2), the distance between the pixel (x, y) of the target temperature and the pixel (w, z) of another target temperature is considered. If focus is achieved, the dispersion of the subject temperature is reduced, and the evaluation value E (p) is further reduced. Therefore, autofocus is executed by setting the position p at which the evaluation value E (p) is minimum as the best focus.
[0027]
Moreover, although said embodiment calculates | requires evaluation value from the information of each pixel for the whole obtained infrared image | video, you may narrow down the object area | region which calculates | requires evaluation value. For example, as shown in FIG. 4, a rectangular area defined by the upper left corner position P start (x start , y start ) and the lower right corner position P end (x end , y end ) of the entire infrared image is displayed. Assuming that the evaluation value is a target area, the above equation (Equation 2) becomes the following equation (Equation 3).
[0028]
[Equation 3]
Figure 0004450464
[0029]
Can be an evaluation formula. Also in this case, autofocus is executed by the same process as described above.
If the temperature range of the non-subject (for example, the background object) that is not the focus target is known, as well as the temperature range of the subject that is the focus target, an accurate auto calculation can be performed by calculating a more accurate evaluation value. Focus is possible. That is, when the temperature range of the subject is set to T lower ≦ t ≦ T upper and the temperature range of the non-subject is set to R lower ≦ t ≦ R upper , the evaluation value E (p) is calculated from the following equation (Equation 4). Ask.
[0030]
[Expression 4]
Figure 0004450464
[0031]
In the equation (Equation 4), the function O (t) is obtained when the temperature t is not included in the temperature range of the subject or the temperature range of the non-subject, that is, t <T lower or T upper <t, and O (t) = 1 when t <R lower or R upper <t, and O (t) = 0 otherwise (when included in the temperature range of the subject or the non-subject temperature range). Therefore, Expression (Equation 4) calculates the total number of pixels having temperature information that should not exist if the focus is achieved. Auto focus is executed by setting the position p at which the evaluation value E (p), which is the calculation result, to a minimum, as the best focus.
[0032]
If only the temperature range of the non-subject is known, it is possible to set only the temperature range of the non-subject, obtain an evaluation value, and execute autofocus. That is, when the temperature range of the non-subject is set to R lower ≦ t ≦ R upper , f (t) in Expression (Expression 1), Expression (Expression 2), or Expression (Expression 3) is a value t of R lower <t The evaluation value E (p) is obtained with f (t) = 1 when <R upper , and with f (t) = 0 otherwise. In this case, if the focus is achieved, the aura part 32 shown in FIG. 3 becomes smaller, and the non-subject (the background portion of the subject 31) becomes wider accordingly. Therefore, autofocus is executed by setting the position p at which the evaluation value E (p) is maximum as the best focus.
[0033]
For example, when a plurality of objects including a subject with respect to a planar background are included in the imaging range, the minimum value or the maximum value of the evaluation value obtained as described above is used to move the focus lens in the optical axis direction. Several may appear with it. In this case, among the plurality of positions where the evaluation value E (p) becomes the minimum value or the maximum value, for example, a position corresponding to the object closest to the imaging apparatus is determined in advance to be determined as the best focus. Alternatively, a plurality of positions are displayed on the screen as best focus candidates, and the best focus position is selected in accordance with conditions (for example, selecting an object closest to or farthest from the imaging device) input by the user at that time. You may comprise.
[0034]
Next, an embodiment of a focus area automatic determination method for determining which part on the screen is to be focused will be described.
FIG. 5 shows an example of a focus area automatic determination method according to the present invention. The screen 51 is divided into a plurality of areas (16 areas in FIG. 5). In each region, the total number of pixels in the predetermined temperature range is calculated by the above-described calculation, and the region having the largest total number of pixels in the predetermined temperature range is determined as the region to be focused. In the example of FIG. 5, the subject 52 exists mainly in the hatched area 53. Therefore, when the temperature of the subject 52 is known, the region 53 is determined as the region to be focused by setting the range including the temperature as the predetermined temperature range.
[0035]
However, the number of divided screens and the shape and size of the area are not limited to the above example and can be arbitrarily determined. You may use together the method of giving a weight to a center area | region.
In addition, when the temperature range of a non-subject (for example, a background object) that is not a focus target is known as well as the temperature range of the subject that is a focus target, it is described in the embodiment of the autofocus method. Similarly, the temperature range of the subject and the temperature range of the non-subject may be specified. In this case, an area where the total number of pixels in the temperature range of the subject is the largest and the total number of pixels in the temperature range of the non-subject is the smallest is determined as an area to be focused.
[0036]
Further, there may be a case where there are a plurality of areas on the screen where the total number of pixels having temperature information within the temperature range of the subject is large. For example, as shown in FIG. 6, another object 54 having a temperature close to the temperature of the subject 52 exists in the screen. In this case, not only the region 53 but also the region 55 increases the total number of pixels having temperature information within a predetermined temperature range (subject temperature range). Then, when the region having the largest total number of pixels is selected, the region 55 may be selected without selecting the region 53. In such a case, instead of automatically narrowing down the area to be focused to one area, a plurality of candidate areas are presented on the screen, and the user finally uses an input device such as a pointing device. It is preferable that one area is selected.
[0037]
As mentioned above, although embodiment of this invention was described, this invention is not restricted to said embodiment, It is possible to implement with a various form.
[0038]
【The invention's effect】
As described above, according to the infrared imaging device of the present invention, the processing device controls the focus lens driving device to move the focus lens at a predetermined pitch in the direction of the optical axis while moving the infrared light at each focus lens position. Since an evaluation value related to temperature is calculated from the imaging information and the best focus is determined from the relationship between the obtained focus lens position and the evaluation value, autofocus is realized without providing a special additional mechanism.
[0039]
In particular, by setting a predictable temperature range of a subject to be focused and calculating the total number of pixels having temperature information within this range as an evaluation value, autofocus is realized with a simple configuration. .
[0040]
Furthermore, when the temperature range of a non-subject that is not a focus target can be predicted, the accuracy of autofocus can be improved by setting this temperature range as well.
[0041]
In addition, the screen is divided into a plurality of areas, the total number of pixels having temperature information within a predetermined temperature range is calculated for each area, and the area to be focused is determined based on the calculation result An area automatic determination process can also be executed.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an overall configuration of an infrared imaging apparatus according to an embodiment of the present invention.
FIG. 2 is a block diagram showing an operation during autofocus of the infrared imaging apparatus.
FIG. 3 is a diagram illustrating a donut-shaped aura portion that appears around a subject when the subject is out of focus.
FIG. 4 is a diagram illustrating a rectangular area set as a target for obtaining an evaluation value in the entire infrared video image;
FIG. 5 is a diagram illustrating an example of a focus area automatic determination method according to the present invention.
FIG. 6 is a diagram illustrating a state in which another object having a temperature close to the temperature of the subject exists in the screen.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10 Infrared imaging device 11 Focus lens 12 Infrared detection sensor 13 A / D converter 14 Digital signal processing circuit (processing device)
15 Focus lens drive device 16 Display device

Claims (1)

被写体を含む撮像対象からの赤外線をフォーカスレンズを介して赤外線検出センサに集光し、赤外線検出センサから得られた赤外線撮像情報を処理装置で処理して得られたイメージを表示画面に表示する赤外線撮像装置であって、
前記フォーカスレンズを光軸方向に駆動するフォーカスレンズ駆動装置が設けられ、
前記処理装置が、
前記フォーカスレンズ駆動装置を制御することによって前記フォーカスレンズを光軸方向に所定ピッチで移動させながら、前記フォーカスレンズ位置のそれぞれの評価値として、当該位置における前記赤外線撮像情報に含まれる全画素または特定の領域の画素のうち、所定の温度範囲内にある温度の情報を有する画素の総数を算出し
前記各位置のうち、前記評価値が極大又は極小となる位置をベストフォーカスの位置と判定する、
ことを特徴とする赤外線撮像装置。
Infrared rays that focus infrared rays from the imaging target including the subject on the infrared detection sensor via the focus lens, and display the image obtained by processing the infrared imaging information obtained from the infrared detection sensor on the display screen An imaging device,
A focus lens driving device for driving the focus lens in the optical axis direction;
The processing device is
While moving at a predetermined pitch in the optical axis direction the focus lens by controlling the focus lens driving device, as respective evaluation value of the position of the full Okasurenzu, all the pixels included in the infrared imaging information at the position Alternatively, among the pixels in a specific area, calculate the total number of pixels having temperature information within a predetermined temperature range ,
Among the above positions, the position at which the evaluation value is maximum or minimum is determined as the best focus position
An infrared imaging device.
JP2000005476A 2000-01-14 2000-01-14 Infrared imaging device Expired - Fee Related JP4450464B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000005476A JP4450464B2 (en) 2000-01-14 2000-01-14 Infrared imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000005476A JP4450464B2 (en) 2000-01-14 2000-01-14 Infrared imaging device

Publications (2)

Publication Number Publication Date
JP2001194579A JP2001194579A (en) 2001-07-19
JP4450464B2 true JP4450464B2 (en) 2010-04-14

Family

ID=18534141

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000005476A Expired - Fee Related JP4450464B2 (en) 2000-01-14 2000-01-14 Infrared imaging device

Country Status (1)

Country Link
JP (1) JP4450464B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5993133B2 (en) * 2011-11-24 2016-09-14 株式会社キーエンス Image processing sensor, focus adjustment method, and computer program
JP6797070B2 (en) * 2017-04-28 2020-12-09 日本アビオニクス株式会社 Infrared photography device
JP7187221B2 (en) * 2018-09-04 2022-12-12 アズビル株式会社 Focus adjustment support device and focus adjustment support method
KR102450595B1 (en) * 2020-10-26 2022-10-07 삼성전기주식회사 Infrared light image sensor and Infrared light camera module

Also Published As

Publication number Publication date
JP2001194579A (en) 2001-07-19

Similar Documents

Publication Publication Date Title
KR101173471B1 (en) Photographing device with auto focusing function
JP3925513B2 (en) Auto focus adjustment of projector
US7725019B2 (en) Apparatus and method for deciding in-focus position of imaging lens
JP2010093422A (en) Imaging apparatus
CN111698417A (en) Image pickup apparatus, image pickup control method, and storage medium
JP7424521B2 (en) Electronic equipment and programs
JP6635764B2 (en) Imaging device, control method thereof, and control program
KR101590334B1 (en) Image photographing device and control method for the same
JP2006058431A (en) Autofocusing system
JP7152557B2 (en) IMAGING DEVICE, IMAGING METHOD, PROGRAM, AND RECORDING MEDIUM
JP2007133301A (en) Autofocus camera
JP4450464B2 (en) Infrared imaging device
US8358847B2 (en) Display apparatus and display method
JP6684168B2 (en) Image processing apparatus and image processing method
JP2021027584A (en) Image processing device, image processing method, and program
JP2003075713A (en) Autofocusing device and method, and camera
JP5965654B2 (en) TRACKING DEVICE, IMAGING DEVICE, TRACKING METHOD USED FOR IMAGING DEVICE
JP2580516B2 (en) Real-time three-dimensional motion measuring apparatus and method
JP2006324727A (en) Imaging apparatus and image processing method thereof
US11800245B2 (en) Image pickup apparatus capable of keeping focus on subject even when moving direction of subject changes in time series, control method for image pickup apparatus, and storage medium
JP7210388B2 (en) IMAGE PROCESSING DEVICE, IMAGING DEVICE, CONTROL METHOD AND PROGRAM FOR IMAGE PROCESSING DEVICE
US20220264024A1 (en) Image pickup apparatus capable of setting focus detection area to area that user wants to set for detectable subject, image processing apparatus, control method for image processing apparatus, control method for image pickup apparatus, and storage medium
JPH06233165A (en) Semi-automatic focusing method and device therefor
JP7463078B2 (en) Imaging device
JP5094561B2 (en) camera

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091224

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100126

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100126

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130205

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130205

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140205

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees