JP4147456B2

JP4147456B2 - Infrared image signal processor

Info

Publication number: JP4147456B2
Application number: JP2002094521A
Authority: JP
Inventors: 伸司宮崎; 正洋中川; 孝和柴田
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 2002-03-29
Filing date: 2002-03-29
Publication date: 2008-09-10
Anticipated expiration: 2022-03-29
Also published as: JP2003296728A

Description

【０００１】
【発明の属する技術分野】
本発明は、赤外線検知器を用いた赤外線撮像装置による赤外線画像信号を処理して、赤外線画像の背景内の観測物体等を識別可能とするように表示できる赤外線画像信号処理装置に関する。
【０００２】
【従来の技術】
赤外線撮像装置は、その視野内の温度に対応した放射レベルの赤外線を検出して、赤外線画像を表示可能とするものである。従って、可視光線を検出して画像表示を行う通常のテレビカメラとは異なり、夜間等に於ける撮像視野内の画像も表示可能である。従って、監視カメラ，暗視カメラ，サーモグラフィ，リモートセンシング，前方監視装置等の広い分野で利用されており、例えば、移動体に搭載して走行中又は飛行中の前方監視等にも利用されている。
【０００３】
又赤外線撮像装置に用いる赤外線検知器は、例えば、３〜５μｍ帯用として、ＰｔＳｉ，ＩｎＳｎ，ＨｇＣｄＴｅが主として使用され、８〜１２μｍ帯用として、ＨｇＣｄＴｅが主として使用されている。なお、ＨｇＣｄＴｅは、組成比によって広い波長範囲に於ける感度を有するものである。このように、赤外線検知器の波長感度に対応して光学系も構成されるもので、何れかの帯域用、又は両方の帯域用として光学系と検知器とを切替える構成等も知られている。
【０００４】
又赤外線検知器は、極低温から極高温までの幅広い温度範囲にわたる赤外線検知が可能である。従って、赤外線検知器により赤外線を検知して電気信号に変換したアナログの赤外線画像信号をディジタル信号に変換して処理し、温度分解能を高くする為に、通常は１２ビット以上のディジタル信号に変換するものである。これに対して、表示装置に表示した場合の人間の目による分解能は２５６階調程度である。そこで、１２ビットの赤外線画像信号を８ビットに変換して表示する構成が採用されている。このようなｎビット（例えば、１２ビット）のディジタル赤外線画像信号をｍビット（例えば、８ビット）のディジタル赤外線画像信号へ変換することを階調変換と称するものである。
【０００５】
このような階調変換の機能を含む従来の赤外線画像信号処理装置は、例えば、図１８に示すように、赤外線透過レンズや光学走査機構等を含む光学系１０１を介して赤外線検知器１０２に観測領域から放射される赤外線を入射し、その出力信号を増幅器１０３により増幅し、Ａ／Ｄ変換器１０４により前述の１２ビット構成のディジタル赤外線画像信号に変換してフレームメモリ１０５に入力し、又ヒストグラム作成部１０７により信号レベル対画素数のヒストグラムを作成し、ヒストグラム変換部１０８により、ヒストグラムによる画素数が、予め設定した一定値の閾値より少ないものをカットして、信号レベル数の割当てを変更し、この変更に従ってフレームメモリ１０４の読出制御を行うことにより、前述の１２ビット構成のディジタル赤外線画像信号を８ビット構成のディジタル赤外線画像信号に変換し、Ｄ／Ａ変換器１０６によりアナログ赤外線画像信号に変換して、図示を省略したモニタに入力し、赤外線画像を表示する。
【０００６】
この場合のヒストグラムと階調変換について図１９を参照して説明する。同図の（Ａ）は原画像のヒストグラム、即ち、ｎビット構成の場合の２ⁿ−１の信号レベル（ｎ＝１２の場合は、４０９５レベル）を横軸に、それぞれの信号レベル対応のＰｉｘｅｌ（画素数）を縦軸としたヒストグラムを示す。このようなヒストグラムをヒストグラム作成部１０７に於いて作成すると、ヒストグラム変換部１０８は、予め設定した一定値の閾値と比較し、画素数が閾値以下の信号レベルをカットして並べ直すもので、その結果、（Ｂ）に示すものとなる。なお、Ｎは前述のカットにより残存した信号レベル数を示す。
【０００７】
この並べ直した信号レベルを、表示レベル（例えば、２５６階調の８ビット）へ均等に割当てる。即ち、（Ｃ）に示すように、並べ直したＮ個の信号レベルを横軸に、割当てる階調レベル（例えば、８ビットによる２５６階調）を縦軸とする。そして、この変換関係を基に１２ビット構成の赤外線画像信号を８ビット構成に変換する為の変換データを作成する。この変換データは（Ｄ）に示すものとなる。即ち、原画像の信号レベル（例えば４０９５レベル）を横軸に、変換後の信号レベル（例えば２５５レベル）を縦軸に、原画像と、処理後の濃度値（信号レベル）との関係を示すものとなる。従って、変換後のヒストグラムは、（Ｅ）に示すとものとなる。即ち、（Ｂ）に示すヒストグラムと類似したヒストグラムとなり、原画像を忠実に処理した画像として表示することができる。
【０００８】
前述のように階調変換を行って赤外線画像を表示する場合に、背景内に高温又は低温の物体が移動した時、その撮像画面内であれば、ヒストグラムは変化しないから、その物体を背景と区別できるように表示することができる。しかし、高温又は低温の物体が撮像画面内を高速で通り過ぎる場合又は赤外線撮像装置側が高速で移動する場合、１画面内の赤外線のレベル及び分布が変化するから、ヒストグラムも変化する。このヒストグラムの変化により、階調変換の変換データが変化するから、高温又は低温の物体と背景との表示関係が変化して、その観測すべき物体の視認性が劣化する。
【０００９】
そこで、このような問題を解決する為に、前述のヒストグラムを予め定めた一定値の閾値と画素数とを比較し、閾値以下の画素数の信号レベルをカットして、複数の温度領域毎のヒストグラムを作成し、分割温度領域の信号レベル数に応じて、階調変換後の信号レベル数を割当てる手段により、高温又は低温の物体が高速で横切った場合でも、その物体を背景とは区別できるように表示し、又フレーム毎に赤外線レベルの分布が変化する場合に、ヒストグラムを複数フレームについて平均化することにより、ヒストグラムのフレーム毎の変化に基づく表示画面の変動を抑制し、又フレーム間のヒストグラムの差分に基づいて階調変換を行う手段が提案されている（例えば、特開２００１−１５４６４６号公報参照）。
【００１０】
【発明が解決しようとする課題】
赤外線撮像装置の視野内に、例えば、空と地上とを含み、飛翔物体又は地上走行物体を観測物体とする場合、地上は常温付近であり、空はそれより低温である。従って、低温部分と高温部分とに分けることができる。例えば、赤外線撮像装置の視野内に空を含まない場合、図２０の２０１に示すような地上のみを撮像した赤外線画像信号についてのヒストグラムが得られる。これを基に階調変換すると、２０２に示すものとなる。これに対して、赤外線撮像装置の視野内に空と地上とを含む場合は、図２０の２１１に示すようなヒストグラムが得られる。即ち、空は低温領域であり、地上はそれより高温の領域を形成している。そして、所定の閾値を設定して、閾値以下の画素数の信号レベルをカットし、残った信号レベルを並べ直して階調変換すると、２１２に示すヒストグラムが得られる。
【００１１】
赤外線撮像装置による観測物体としての飛行機等のの飛翔物体は、通常高温を含むから、低温領域の空の部分に於いて明瞭に表示することができる。これに対して、地上に於ける走行車両等の観測物体は、地上の温度に比較して極端な温度差がない場合もあるから、これを明瞭に表示して、視認性を高くことが望ましいものである。又地上に於ける観測物体の位置は、地形や建造物等を目標にして確認することができるが、飛翔物体の場合、その位置は、例えば、雲等を目標にして確認することができる。従って、空の部分を総て同一信号レベルとすると、同一輝度の表示内容となり、高温の飛翔物体を撮像した場合に、それを表示できるが、その位置の確認は困難となる。その為に、空の部分にも所定の信号レベル数を割当てて雲等も表示可能とする必要がある。
【００１２】
又空の部分の信号レベルは、四季に応じて又は天候に応じて変化するものであり、その場合も、前述の従来例に於いては、ヒストグラムと、一定の閾値とを比較し、閾値以下の画素数の信号レベルをカットして、階調変換を行うものであるから、空と地上との部分に対する信号レベルの割当数が変化し、観測物体の表示状態が変化して視認性が低下する問題がある。
【００１３】
本発明は、原画像のヒストグラムの性質に応じて閾値を変化させ、低温領域に比較してそれより高温の領域に対する信号レベル数の割当てを多くして、観測物体の視認性を向上することを目的とする。
【００１４】
【課題を解決するための手段】
本発明の赤外線画像信号処理装置は、図１を参照して説明すると、赤外線検知器２による赤外線画像信号を処理して赤外線画像を表示する赤外線画像信号処理装置であって、赤外線検知器２による赤外線画像信号をディジタル信号に変換して処理する画像信号処理部５を有し、この画像信号処理部５は、赤外線画像信号をディジタル信号に変換して入力するフレームメモリ部１０と、赤外線画像信号の信号レベルに対する画素数を示すヒストグラムを作成するヒストグラム作成部１１と、このヒストグラム作成部１１により作成したヒストグラムの変曲点を求め、この変曲点により温度領域を分け、且つ変曲点に於ける画素数を閾値とし、この閾値以下の画素数の信号レベルをカットして、残りの信号レベルを並べ直し、各温度領域対応に信号レベルを割当てて階調変換用データを作成し、この階調変換用データに従って、フレームメモリ部から読出した赤外線画像信号の階調を変換するヒストグラム演算部１２とを含む構成を有するものである。
【００１５】
又画像信号処理部５は、ヒストグラム作成部により作成したヒストグラムに含まれる高調波成分をローパスフィルタにより除去して微分して変曲点を求める微分処理部と、変曲点に於ける画素数を閾値として、ヒストグラムを構成する信号レベル対応の画素数と比較する閾値比較部と、この閾値比較部により閾値以下の画素数の信号レベルをカットして並べ直す順序付け処理部と、変曲点により空部分等の低温部分と地上部分等の高温部分との温度領域に分けて、低温部分に対する信号レベルの割当処理を行う低温部分ヒストグラム演算部と、高温部分に対する信号レベルの割当処理を行う高温部分ヒストグラム演算部と、低温部分ヒストグラム演算部と高温部分ヒストグラム演算部とによる階調変換データを合成して、フレームメモリ部から読出した赤外線画像信号の階調を変換する信号レベル変換部とを有するものである。又ヒストグラム作成部１１により作成したヒストグラムの変曲点を求め、この変曲点により温度領域を分け、ヒストグラムの変曲点を境界として分けた高温部分に対する閾値より、低温部分に対する閾値を大きい値に設定し、この閾値以下の画素数の信号レベルをカットして、残りの信号レベルを並べ直し、各温度領域対応に信号レベルを割当てて階調変換用データを作成し、この階調変換用データに従ってフレームメモリ部から読出した赤外線画像信号の階調を変換するヒストグラム演算部１２を含む構成とすることができる。
【００１６】
又画像信号処理部５は、ヒストグラム作成部１１により作成したヒストグラムの画素数と閾値とを比較する閾値比較部と、ヒストグラムの信号レベルに対応して信号レベルが少なくともヒストグラムの変曲点以下の信号レベルについて、信号レベルが小さくなる程、大きい値に設定した閾値を格納し、ヒストグラムの信号レベルに対応して閾値比較部に入力する閾値テーブルと、閾値比較部によりヒストグラムの画素数が閾値以下の信号レベルをカットして並べ直す順序付け処理部と、この順序付け処理部により並べ直した信号レベルに対して階調変換の信号レベルを割当てる階調変換データを生成するヒストグラム演算部と、このヒストグラム演算部による階調変換データに基づいてフレームメモリ部からの赤外線画像信号の階調を変換する信号レベル変換部とを有することとができる。又画像信号処理部５は、ヒストグラム作成部１１により作成したヒストグラムの変曲点を求めて、この変曲点を境界とした低温部分と高温部分とに分け、変曲点に於ける画素数を高温部分に対する閾値とし、低温部分に於ける閾値を、信号レベルが小さい程、大きい値に変化する値として設定した閾値テーブルを設け、この閾値テーブルからヒストグラムの信号レベルに対応した閾値を読出して閾値比較部に入力する構成を有することができる。
【００１７】
【発明の実施の形態】
図１は本発明の実施の形態の説明図であり、１は赤外線透過レンズや光学走査系を含む光学系、２は赤外線検知器、３は増幅器、４はＡＤ変換器（Ａ／Ｄ）、５は画像信号処理部、６はＤＡ変換器（Ｄ／Ａ）、７はモニタ、１０はフレームメモリ部、１１はヒストグラム作成部、１２はヒストグラム演算部、１３，１４はセレクタ（ＳＥＬ）、１５，１６，１７はフレームメモリ（ＲＡＭ）、１８は加算器、１９はヒストグラム作成用メモリ（ＲＡＭ）、２０はバッファ回路、２１はヒストグラム変換用メモリ（ＤＰ−ＲＡＭ）、２２はヒストグラム格納用兼ＤＳＰ作業用メモリ（ＲＡＭ）、２３はＤＳＰプログラム格納用メモリ（ＲＯＭ）、２４はプロセッサ（ＤＳＰ；ディジタル・シグナル・プロセッサ）を示す。又各メモリに対するＡはアドレス、Ｄはデータを示す。
【００１８】
観測領域（赤外線撮像視野内）から放射される赤外線を光学系１を介して赤外線検知器２に入射し、赤外線レベル（観測領域内の温度）に対応したレベルの信号を出力し、増幅器３により増幅し、ＡＤ変換器４により例えば１２ビット構成のディジタル赤外線画像信号に変換する。このディジタル赤外線画像信号を画像信号処理部５に入力して階調変換を行い、例えば８ビット構成のディジタル赤外線画像信号に変換してＡＤ変換器６に入力し、アナログ赤外線画像信号に変換してモニタ７に入力し、例えば２５６階調で赤外線画像を表示する。
【００１９】
画像信号処理部５は、フレームメモリ部１０と、ヒストグラム作成部１１と、ヒストグラム演算部１２とを有し、フレームメモリ部１０は、複数のフレームメモリ１５，１６，１７と、それらを切替えるセレクタ１３，１４とを含み、フレームメモリ１５，１６，１７は、それぞれ赤外線画像信号の１フレーム分を書込むことができる容量のメモリであり、セレクタ１３，１４により、赤外線画像信号を書込むフレームメモリと、読出すフレームメモリとをフレーム毎に順次切替える場合を示し、３面構成の場合を示す。即ち、ヒストグラム作成に１フレーム、階調変換に１フレーム、階調変換後のヒストグラム算出に１フレームの合計３フレーム分の時間が必要となるから、フレームメモリを３面構成としている。なお、制御構成によっては２面構成とすることも可能である。
【００２０】
又ヒストグラム作成部１１は、加算器１８とヒストグラム作成用メモリ１９とバッファ回路２０とを含む構成を有し、ＡＤ変換器４により変換した１２ビット構成の赤外線画像信号をアドレスＡとしてヒストグラム作成用メモリ１９をアクセスし、読出したデータＤに対して加算器１８により１を加算して書込むものである。従って、信号レベルをアドレスとした画素数を示す内容となり、フレーム毎のヒストグラムを作成することができる。
【００２１】
又ヒストグラム演算部１２は、ヒストグラム変換用メモリ２１と、ヒストグラム格納用兼ＤＳＰ作業用メモリ２２と、ＤＳＰプログラム格納用メモリ２３と、プロセッサ（ディジタル・シグナル・プロセッサＤＳＰ）２４とを含む構成を有し、ヒストグラム変換用メモリ２１は、デュアルポートメモリの構成の場合を示し、一方のポートにプロセッサ２４から変換用データ（８ビット構成）を書込み、フレームメモリ部１０からの例えば１２ビット構成の赤外線画像信号の信号レベルをアドレスとして、デュアルポートメモリの他方のポートから変換用データを読出すことにより、階調変換を行うことができる。又ヒストグラム格納用兼ＤＳＰ作業用メモリ２２は、ヒストグラム作成部１１のヒストグラム作成用メモリ１９の内容を転送して格納するもので、プロセッサ２４は、このヒストグラムを基に階調変換の為のデータを作成し、ヒストグラム変換用メモリ２１に書込むものである。
【００２２】
本発明は、プロセッサ２４に於けるヒストグラムの処理に於いて、一定の閾値を設定するものではなく、ヒストグラムの性質に従って設定するものである。例えば、図２に示すように、横軸を２ⁿ−１（ｎ＝１２ビットの場合、４０９５）の信号レベルとし、縦軸を画素数とした原画像のヒストグラムを（Ａ１）とすると、従来は、一定の閾値以下の画素数の信号レベルをカットして並べ直し、信号レベルを割当てることにより階調変換を行うもので、横軸を２^m−１（ｍ＝８ビットの場合、２５５）の信号レベルとし、縦軸を画素数とした（Ａ２）に示すヒストグラムとなる。この場合、地上部分に対してはＮａの信号レベル数を割当てることになる。
【００２３】
これに対して、本発明の一実施の形態に於いては、図２の（Ｂ１）に示すように、原画像のヒストグラムの曲線に於ける変曲点Ａを求め、この変曲点Ａを低温部分の空部分と高温部分の地上部分との境界とする。又この変曲点Ａの画素数を閾値に設定する。そして、この閾値以下の画素の信号レベルをカットし、階調変換に於いて信号レベルＢを設定して、空部分に割当てる信号レベル数と、地上部分に割当てる信号レベル数とを定める。それにより、空部分にも信号レベル数を割当てると共に、地上部分に割当てる信号レベル数Ｎｂを、Ｎｂ＞Ｎａの関係として、地上の観測物体の視認性を維持できるように、階調変換を行うことができる。又赤外線撮像装置側の高速移動或いは高温物体の高速移動によるフレーム毎の赤外線信号レベルの分布の変化に従って原画像のヒストグラムが変化しても、階調変換によるヒストグラムの変化が抑制されるから、観測物体の視認性を改善できる。
【００２４】
図３は本発明の一実施の形態の要部説明図であり、３１はフレームメモリ部、３２は信号レベル変換部、３３は原画像ヒストグラム作成部、３４は閾値比較部、３５は順序付け処理部、３６はローパスフィルタ、３７は微分処理部、３８はセレクタ（ＳＥＬ）、３９は空部分のヒストグラム演算部、４０は地上部分のヒストグラム演算部、４１はヒストグラム合成部を示し、図１の画像信号処理部５の機能を示す。
【００２５】
フレームメモリ部３１は、図１のフレームメモリ部１０の機能に相当し、原画像ヒストグラム作成部３３は、図１のヒストグラム作成部１１の機能に相当し、他の構成は図１のヒストグラム演算部１２の機能に相当する。原画像ヒストグラム作成部３３により作成したヒストグラムは、図２の（Ａ１），（Ｂ１）に示すような滑らかな曲線からなるものではなく、細かな凹凸、即ち、高調波成分を含むものであるから、ローパスフィルタ３６により、この高調波成分を除去し、微分処理部３７により微分する。それによって、滑らかなヒストグラム曲線となり、微分処理部３７による微分処理によって、図２の（Ｂ１）に示す変曲点Ａを求めることができる。この変曲点Ａは、低温部分の空部分と、高温部分の地上部分との境界を示すものとなる。又変曲点Ａに於ける画素数は零でない場合が一般的であり、従って、この変曲点Ａに於ける画素数を閾値として設定する。
【００２６】
又原画像のヒストグラムを閾値比較部３４に於いて前述の閾値と比較し、閾値以下の画素数の信号レベルをカットし、残った信号レベルを順序付け処理部３５に於いて再配置する。又微分処理部３７の微分出力信号、即ち、変曲点を空部分と地上部分との境界として、セレクタ３８を制御する。空部分のヒストグラム演算部３９と地上部分のヒストグラム演算部４０とに於いてそれぞれヒストグラムを作成し、ヒストグラム合成部４１に於いて合成し、例えば、図２の（Ｂ２）に示すヒストグラムを形成して、信号レベル変換部３２に於いて階調変換を行う。前述の閾値比較部３４に加える閾値は、前述のように、変曲点Ａに於ける画素数を基に設定するもので、四季に応じて、又天候に応じて変曲点Ａの信号レベルが変化しても、空部分と地上部分との温度領域に対応した処理が可能となる。
【００２７】
図４，図５及び図６は本発明の一実施の形態のフローチャートであり、図１及び図３を参照して説明する。ヒストグラム作成部１１のヒストグラム作成用メモリ１９をフレーム毎にリセットし（ａ１）、ＡＤ変換器４により変換したデータ（１２ビット構成の赤外線画像信号の信号レベル）をメモリアドレスＡとして、加算器１８により１を加算する（ａ２）。即ち、信号レベル対応の画素数をカウントアップすることになる。そして、全画素のデータ（１フレーム分）終了か否かを判定し（ａ３）、終了していない場合はステップ（ａ１）に移行し、１フレーム分について終了した場合は、信号レベルに対する画素数を示す１フレーム分についてのヒストグラムが作成されるから、このヒストグラム作成用メモリ１９の内容を、ヒストグラム演算部１２のヒストグラム格納用兼ＤＳＰ作業用メモリ２２に転送する（ａ４）。
【００２８】
この原画像ヒストグラムに対してローパスフィルタ３６（図３参照）により、前述のようにヒストグラム曲線に含まれる高調波成分を除去し（ａ５）、微分処理部３７により微分して、分布の谷の信号レベルＳ１を算出する。即ち、変曲点Ａの信号レベルを求める（ａ６）。この変曲点Ａの信号レベルが、空部分と地上部分との境界の信号レベルを示すものとなる。この場合の変曲点Ａの画素数を閾値とする。
【００２９】
そして、信号レベル０〜Ｓ１、即ち、空部分に於ける閾値以下の画素数の信号レベルをカットし（ａ７）、残った信号レベルを並べ直して、その総数Ｎ１を求める（ａ８）。この時の割当レベルをｉ１’とする。そして、０〜１まで、１／Ｎ１のステップで増加する関数Ｂ１〔ｉ１〕を定義する。即ち、Ｂ１〔ｉ１〕＝ｉ１×１／Ｎ１とする（ａ９）。次に、割当レベルを、表示レベル＝Ｓ２（Ｂ〔ｉ１’〕−１／Ｎ）により変換する（ａ１０）。この変換した値をヒストグラム変換用メモリ２１に保存する（ａ１１）。以上の処理は、空部分の画像データのヒストグラム変換処理を示す。
【００３０】
又信号レベルＳ１〜４０９５に対して、即ち、地上部分に対して、閾値以下の画素数の信号レベルをカットする（ａ１２）。残った信号レベルを並べ直して、その総数Ｎ２を求める。この時の割当レベルをｉ２’とする（ａ１３）。そして、０〜１まで、１／Ｎ２のステップで増加する関数Ｂ２〔ｉ２〕を定義し（ａ１４）、割当レベルを、表示レベル＝（２５６−Ｓ２）×（Ｂ〔ｉ１’〕−１／Ｎ）＋Ｓ２として、８ビットに変換する（ａ１５）。この変換した値を、ヒストグラム変換用メモリ２１に保存する（ａ１６）。以上の処理は、地上部分の画像データのヒストグラム変換処理を示す。
【００３１】
そして、フレームメモリから順次データ（１２ビット）を読出して、ヒストグラム変換用メモリ２１のアドレスＡとし、このアドレスＡによりヒストグラム変換用メモリ２１から階調変換したデータＤ（８ビット）を読出す（ａ１７）。即ち、ヒストグラム変換用メモリ２１に、階調変換データを書込み、フレームメモリから読出した１２ビット構成の赤外線画像信号の信号レベルをアドレスとして、階調変換データの８ビット構成の赤外線画像信号を読出すことになる。そして、階調変換した８ビット構成の赤外線画像信号をＤＡ変換器６によりアナログの２５６階調の赤外線画像信号に変換してモニタ７に入力する（ａ１８）。
【００３２】
図７は本発明の一実施の形態の処理説明図であり、（Ａ）は原画像のヒストグラムを示し、変曲点のレベルＳ１により空部分と地上部分とに分け、閾値以下の画素数の信号レベルをカットし、空部分の信号レベル数Ｎ１と、地上部分の信号レベル数Ｎ２とについて、空部分の順序付けを行うと、（Ｂ）に示すものとなり、地上部分の順序付けを行うと、（Ｆ）に示すものとなる。
【００３３】
そして、（Ｃ），（Ｇ）に示すように濃度値変換を行う。即ち、空部分に対しては、（Ｃ）に示すように、信号レベル数Ｎ１の信号レベルに対して、０〜Ｓ２の信号レベルを割当て、地上部分に対しては、（Ｇ）に示すように、信号レベル数Ｎ２の信号レベルに対して、Ｓ２〜２^m−１の信号レベルを割当てる。従って、原画像と変換する濃度値（信号レベル）との関係は、（Ｄ）に示すように、０〜Ｓ１の信号レベルを０〜Ｓ２のレベルとし、Ｓ１〜２ⁿ−１の信号レベルをＳ２〜２^m−１のレベルに変換することになる。従って、階調変換後のヒストグラムは、（Ｅ）に示すものとなり、空部分にも０〜Ｓ２の信号レベルを割当てることにより、雲の様子等を表示可能とし、且つ地上部分にはＳ２〜２^m−１の信号レベルを割当てることにより、地上部分の観測物体の視認性を維持して表示することができる。
【００３４】
図８は本発明の他の実施の形態の要部説明図であり、５１はフレームメモリ部、５２は信号レベル変換部、５３は原画像ヒストグラム作成部、５４は閾値比較部、５５は順序付け処理部、５６はローパスフィルタ、５７は微分処理部、５８はセレクタ（ＳＥＬ）、５９は空部分のヒストグラム演算部、６０は地上部分のヒストグラム演算部、６１はヒストグラム合成部、６２はセレクタ（ＳＥＬ）を示し、図１の画像信号処理部５の機能を示す。
【００３５】
又図３に示す実施の形態の構成に対して、閾値ＴＡ，ＴＢを切替えて、閾値比較部５４に入力するセレクタ６２を設けた構成に相当するもので、図３に於ける各部の名称と同一名称の部分は同一の機能を有するものであり、重複した説明は省略する。
【００３６】
図９は閾値切替えによる処理説明図であり、（Ｃ１），（Ｃ２）は、図２に於ける（Ａ１），（Ａ２）と同一の原画像のヒストグラムと、変換後のヒストグラムとを示し、（Ｄ１），（Ｄ２）は図８に示す構成による原画像のヒストグラムと、変換後のヒストグラムとを示す。
【００３７】
この実施の形態に於いては、原画像ヒストグラム作成部５３により作成したヒストグラムに含まれる高調波成分をローパスフィルタ５６により除去し、微分処理部５７により変曲点Ａを求め、この変曲点Ａ以下の信号レベルを空部分とし、セレクタ６２を制御して閾値ＴＡを選択し、この閾値ＴＡを閾値比較部５４に入力する。又変曲点Ａ以上の信号レベルを地上部分とし、セレクタ６２を制御して閾値ＴＢ（＜ＴＡ）を選択し、この閾値ＴＢを閾値比較部５４に入力する。
【００３８】
従って、図９の（Ｄ１）に示す原画像のヒストグラムに於いて、閾値ＴＡを超えた部分に対してはそれぞれ信号レベルを割当て、又斜線を施して示す閾値ＴＡを超えない部分は、それぞれの０信号レベル近傍及び変曲点Ａの信号レベル近傍にまとめるように信号レベルを割当てる。それにより、地上部分に対して、従来は図９の（Ｃ２）に示すように信号レベル数Ｎａを割当てるものであるが、この実施の形態に於いては、図９の（Ｄ２）に示すように、信号レベル数Ｎｂ（＞Ｎａ）を割当てることができる。それにより、地上部分の観測物体を識別できるように表示し、且つ空部分に於ける雲の形状等も表示することができる。
【００３９】
図１０及び図１１は本発明の他の実施の形態のフローチャートであり、ステップ（ｂ１）〜（ｂ６）は、図４に示すフローチャートのステップ（ａ１）〜（ａ６）と同一であるから重複した説明は省略する。この実施の形態の図１１に示すステップ（ｂ７）に於いて、信号レベル０〜Ｓ１（原画像のヒストグラムの変曲点Ａの信号レベルＳ１）に対して、閾値ＴＡの画素数以下の信号レベルをカットして、空部分の原画像のヒストグラムに対する処理を行う。
【００４０】
又信号レベルＳ１〜４０９５（１２ビット構成の信号レベル）に対して、閾値ＴＢ以下の信号レベルをカットし、地上部分の原画像のヒストグラムに対する処理を行う（ｂ８）。そして、残った信号レベルを並べ直し、割当レベルをｉ’とし、その総数Ｎを求める（ｂ９）。そして、０〜１まで１／Ｎのステップで増加する関数Ｂ〔ｉ〕を、Ｂ〔ｉ〕＝ｉ×１／Ｎと定義する（ｂ１０）。次に、割当レベルを、表示レベル＝２５６（Ｂ〔ｉ〕−１／Ｎ）として、８ビットに変換する（ｂ１１）。この変換した値をヒストグラム変換用メモリ２１（図１参照）に保存し（ｂ１２）、そして、フレームメモリから順次データ（１２ビット）を読出して、ヒストグラム変換用メモリ２１のアドレスＡとし、このヒストグラム変換用メモリ２１から階調変換したデータＤ（８ビット）を読出す（ｂ１３）。そして、ＤＡ変換器６によりアナログの赤外線画像信号に変換してモニタ７に入力する（ｂ１４）。
【００４１】
図１２は本発明の他の実施の形態の処理説明図であり、（Ａ）は原画像のヒストグラムを示し、このヒストグラムの変曲点を境界として空部分と地上部分とに分け、空部分について、閾値ＴＡの以下の画素数の信号レベルをカットし、地上部分について、閾値ＴＢ（＜ＴＡ）以下の画素数の信号レベルをカットする。そして、残った信号レベルに対して順序付けを行うことにより、空部分は（Ｂ）に、地上部分は（Ｆ）にそれぞれ示すものとなる。
【００４２】
そして、（Ｃ），（Ｇ）に示すように濃度値変換（階調変換）を行う。即ち、空部分に対しては、（Ｃ）に示すように、信号レベル数Ｎ１の信号レベルに対して、０〜Ｓ２のレベルを割当て、地上部分に対しては、（Ｇ）に示すように、信号レベル数Ｎ２の信号レベルに対して、Ｓ２〜２^m−１のレベルを割当てる。従って、原画像と変換する濃度値（信号レベル）との関係は、（Ｄ）に示すように、０〜Ｓ１の信号レベルを、０〜Ｓ２の信号レベルとし、Ｓ１〜２ⁿ−１の信号レベルを、Ｓ２〜２^m−１の信号レベルに変換することになる。従って、階調変換後のヒストグラムは、（Ｅ）に示すものとなり、空部分にも０〜Ｓ２の信号レベルを割当てることにより、雲の様子等を表示可能とし、且つ地上部分にはＳ２〜２^m−１の信号レベルを割当てることにより、地上部分の観測物体の視認性を維持して表示することができる。
【００４３】
図１３は本発明の更に他の実施の形態の要部説明図であり、７１はフレームメモリ部、７２は信号レベル変換部、７３は原画像ヒストグラム作成部、７４は閾値比較部、７５は順序付け処理部、７６はヒストグラム演算部、７７は閾値テーブルを示し、図１の画像信号処理部５の機能を示す。
【００４４】
閾値テーブル７７は、原画像ヒストグラム作成部７３に於いて作成したヒストグラムの信号レベルをアドレスとし、その信号レベルが小さい程、大きい値の閾値を読出す構成とする。この場合の信号レベルと閾値との関係を、前述の地上部分についてはほぼ一定とし、空部分については一次関数や二次関数等に従って、信号レベルが小さい程、大きい値となるように構成して、閾値テーブル７７に格納することができる。又ヒストグラムの変曲点の画素数を地上部分に対する閾値とし、空部分に対する閾値を前述のように変化する値とし、変曲点の画素数が変動した場合に、閾値テーブル７７に格納した閾値に対して、その差分について加減算し、閾値比較部７４に入力する閾値とすることもできる。又同様に、変曲点の信号レベルが変動し、信号レベルに対応して読出す閾値が変動する場合は、閾値テーブル７４から閾値を読出す為のアドレス（信号レベル）に対して、変曲点の変動分を加減算してアドレスを生成する構成とすることも可能である。
【００４５】
この閾値テーブル７７から読出した信号レベル対応の閾値と、原画像ヒストグラム作成部７３からの信号レベル対応の画素数とを比較し、閾値以下の画素数の信号レベルをカットし、順序付け処理部７５により残った信号レベルを並べ直し、ヒストグラム演算部７６により、空部分と地上部分とに割当てる信号レベルを求め、信号レベル変換部７２に於いて、階調変換する。例えば、１２ビット構成の赤外線画像信号を８ビット構成に変換する。
【００４６】
図１４は閾値設定説明図であり、（Ｅ１），（Ｅ２）は、図２に於ける（Ａ１），（Ａ２）及び図９に於ける（Ｃ１），（Ｃ２）と同様に、従来の原画像のヒストグラムと、変換後のヒストグラムとを示し、（Ｆ１），（Ｆ２）は、この実施の形態の原画像のヒストグラムと閾値テーブル７７による閾値との関係及び変換後のヒストグラムとを示す。この（Ｆ１）に示すように、地上部分に対する閾値を例えば従来と同様の値とし、空部分に対しては、信号レベルが小さい程、大きい値となる閾値とする。
【００４７】
従って、（Ｆ１）に於ける空部分の斜線を施した部分の画素数の信号レベルはカットされ、変換後のヒストグラムは、（Ｆ２）に示すように、空部分に割当てる信号レベル数より地上部分に割当てる信号レベル数Ｎｂが多くなる。それにより、表示した地上部分に於ける観測物体の視認性を向上し、且つ空部分に於ける雲等の形状も表示可能とすることができる。
【００４８】
図１５及び図１６は本発明のその他の実施の形態のフローチャートを示し、ステップ（ｃ１）〜（ｃ４）は、図４に示すフローチャートのステップ（ａ１）〜（ａ４）及び図１０に示すフローチャートのステップ（ｂ１）〜（ｂ４）と同一であるから重複した説明は省略する。この実施の形態の図１５に於けるステップ（ｃ５）に於いて、閾値テーブル７７からの閾値による画素数以下の信号レベルをカットする。そして、残った信号レベルを並べ直して、その総数Ｎを求める。その場合の割当レベルをｉ’とする（ｃ６）。
【００４９】
そして、０〜１まで１／Ｎのステップで増加する関数Ｂ〔ｉ〕を、Ｂ〔ｉ〕＝ｉ×１／Ｎ、と定義する（ｃ７）。次に、割当レベルを、表示レベル＝２５６（Ｂ〔ｉ〕−１／Ｎ）として、８ビットに変換する（ｃ８）。この変換した値をヒストグラム変換用メモリ２１（図１参照）に保存し（ｃ９）、フレームメモリから順次データ（１２ビット）を読出して、ヒストグラム変換用メモリ２１のアドレスＡとし、このアドレスＡによりヒストグラム変換用メモリ２１から階調変換したデータＤ（８ビット）を読出して（ｃ１０）、１２ビットから８ビットに階調変換し、ＤＡ変換器６によりアナログの赤外線画像信号に変換してモニタ７に入力する（ｃ１１）。
【００５０】
図１７は本発明の更に他の実施の形態の処理説明図であり、（Ａ）は原画像のヒストグラムを示し、このヒストグラムの変曲点Ａを境に空部分と地上部分とに分け、空部分については、閾値を信号レベルが小さい程、直線状に大きくなる値とし、地上部分については、一定の閾値とした場合を示す。従って、閾値を超えた画素数の空部分の信号レベル数はＮ１、地上部分の信号レベル数はＮ２となる。この場合、前述の各実施の形態と同様に、変曲点Ａを求めて、その変曲点Ａに於ける画素数を地上部分に対する閾値とし、空部分については、直線状又は曲線状に信号レベルに対応して変化する閾値とすることができる。
【００５１】
このような閾値と比較して、閾値以下の信号レベルをカットして並べ直すと、空部分については（Ｂ）、地上部分については（Ｆ）にそれぞれ示すものとなる。そして、空部分に対しては（Ｃ）に示す濃度値（信号レベル）変換の特性とし、地上部分に対しては（Ｇ）に示す濃度値変換の特性とする。従って、原画像と変換後の濃度値の関係は（Ｄ）に示すものとなる。そして、変換後のヒストグラムは（Ｅ）に示すものとなる。この場合の閾値は、空部分に対して二次曲線等の曲線状に、信号レベルが小さくなる程、大きくなる値とし、地上部分に対しては、変曲点Ａの画素数を基にした一定の値、又は信号レベルが大きい程、小さくなる値に設定することも可能である。又地上部分に対して小さい値で、空部分に対して大きい値となる連続した曲線状に、信号レベルに対する閾値を閾値テーブル７７に設定することも可能である。
【００５２】
【発明の効果】
以上説明したように、本発明は、赤外線撮像装置の撮像領域（視野内）に空部分等の低温部分と、これより温度が高い地上部分等の高温部分とを含む場合に、赤外線画像信号の信号レベルと画素数とによるヒストグラムを作成し、そのヒストグラムの変曲点を、低温部分と高温部分との境界とし、且つこの変曲点に於ける画素数を閾値として、この閾値以下の画素数の信号レベルをカットして並べ直して、低温部分と高温部分とに対する信号レベルの割当てを行って階調変換を行うものであり、低温部分と高温部分との境界に於ける画素数を閾値とし、又は低温部分に対する閾値を高温部分に対する閾値より大きい値とし、又は低温部分に対する閾値を、信号レベルが小さい程、大きい値とすることにより、春夏秋冬等の四季に応じ、或いは、天候による赤外線レベルの変化に対しても、地上部分等の高温部分に対して十分な信号レベル数を割当てることができるから、表示した赤外線画像の中の観測物体を明確に表示可能とすることができる。又低温部分に対しても、或る程度の観測目標が得られる赤外線画像の表示を可能とすることができる利点がある。従って、空と地上とを視野内に含む赤外線画像に於いて、特に地上部分に含まれる観測物体の視認性を向上して表示することができる。又空部分のように、観測物体を表示した時の雲等の観測目標も表示可能とすることができるから、各種の用途に適用することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態の説明図である。
【図２】閾値設定処理の説明図である。
【図３】本発明の一実施の形態の要部説明図である。
【図４】本発明の一実施の形態のフローチャートである。
【図５】本発明の一実施の形態のフローチャートである。
【図６】本発明の一実施の形態のフローチャートである。
【図７】本発明の一実施の形態の処理説明図である。
【図８】本発明の他の実施の形態の要部説明図である。
【図９】閾値切替えを行う処理説明図である。
【図１０】本発明の他の実施の形態のフローチャートである。
【図１１】本発明の他の実施の形態のフローチャートである。
【図１２】本発明の他の実施の形態の処理説明図である。
【図１３】本発明の更に他の実施の形態の要部説明図である。
【図１４】閾値設定説明図である。
【図１５】本発明の更に他の実施の形態のフローチャートである。
【図１６】本発明の更に他の実施の形態のフローチャートである。
【図１７】本発明の更に他の実施の形態の処理説明図である。
【図１８】従来例の説明図である。
【図１９】従来例の処理説明図である。
【図２０】ヒストグラムの説明図である。
【符号の説明】
１光学系
２赤外線検知器
３増幅器
４ＡＤ変換器（Ａ／Ｄ）
５画像信号処理部
６ＤＡ変換器（Ｄ／Ａ）
７モニタ
１０フレームメモリ部
１１ヒストグラム作成部
１２ヒストグラム演算部
１３，１４セレクタ（ＳＥＬ）
１５，１６，１７フレームメモリ（ＲＡＭ）
１８加算器
１９ヒストグラム作成用メモリ（ＲＡＭ）
２０バッファ回路
２１ヒストグラム変換用メモリ（ＤＰ−ＲＡＭ）
２２ヒストグラム格納用兼ＤＳＰ作業用メモリ（ＲＡＭ）
２３ＤＳＰプログラム格納用メモリ（ＲＯＭ）
２４プロセッサ（ＤＳＰ）[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an infrared image signal processing apparatus capable of processing an infrared image signal by an infrared imaging device using an infrared detector and displaying it so that an observation object or the like in the background of the infrared image can be identified.
[0002]
[Prior art]
The infrared imaging device is capable of displaying an infrared image by detecting infrared rays having a radiation level corresponding to the temperature in the field of view. Therefore, unlike a normal television camera that detects visible light and displays an image, it is also possible to display an image in an imaging field at night or the like. Therefore, it is used in a wide range of fields such as surveillance cameras, night vision cameras, thermography, remote sensing, and forward monitoring devices. For example, it is also used for forward monitoring while mounted on a moving body or traveling. .
[0003]
For example, PtSi, InSn, and HgCdTe are mainly used for an infrared detector used in an infrared imaging device, and HgCdTe is mainly used for an 8 to 12 μm band. HgCdTe has sensitivity in a wide wavelength range depending on the composition ratio. As described above, the optical system is also configured corresponding to the wavelength sensitivity of the infrared detector, and a configuration in which the optical system and the detector are switched for any one band or both bands is also known. .
[0004]
The infrared detector can detect infrared rays over a wide temperature range from extremely low temperature to very high temperature. Therefore, the analog infrared image signal, which is detected by the infrared detector and converted into an electrical signal, is converted into a digital signal and processed, and usually converted into a digital signal of 12 bits or more in order to increase the temperature resolution. Is. On the other hand, the resolution by human eyes when displayed on the display device is about 256 gradations. Therefore, a configuration is adopted in which a 12-bit infrared image signal is converted into 8-bit and displayed. Such conversion of an n-bit (for example, 12 bits) digital infrared image signal to an m-bit (for example, 8 bits) digital infrared image signal is referred to as gradation conversion.
[0005]
For example, as shown in FIG. 18, a conventional infrared image signal processing apparatus including such a gradation conversion function is observed by an infrared detector 102 via an optical system 101 including an infrared transmission lens and an optical scanning mechanism. An infrared ray radiated from the region is incident, an output signal thereof is amplified by an amplifier 103, converted into a digital infrared image signal having the above 12-bit configuration by an A / D converter 104, and input to the frame memory 105, or a histogram. The creation unit 107 creates a histogram of the signal level vs. the number of pixels, and the histogram conversion unit 108 changes the assignment of the number of signal levels by cutting out the number of pixels by the histogram that is less than a predetermined threshold value. By performing the reading control of the frame memory 104 according to this change, the above-mentioned 12-bit digital The infrared image signals into digital infrared image signals of 8 bits, to an analog infrared image signal by a D / A converter 106, and input to the monitor, not shown, to display the infrared image.
[0006]
The histogram and gradation conversion in this case will be described with reference to FIG. (A) in the figure is the histogram of the original image, that is, 2 in the case of the n-bit configuration. ⁿ A histogram is shown with the signal level of −1 (4095 level when n = 12) on the horizontal axis and the Pixel (number of pixels) corresponding to each signal level on the vertical axis. When such a histogram is created in the histogram creation unit 107, the histogram conversion unit 108 compares the preset threshold value with a preset threshold value, cuts and rearranges the signal level with the number of pixels equal to or less than the threshold value, and The result is as shown in (B). N indicates the number of signal levels remaining after the above-described cut.
[0007]
This rearranged signal level is evenly assigned to the display level (for example, 256 bits of 8 bits). That is, as shown in (C), the rearranged N signal levels are on the horizontal axis, and the assigned gradation level (for example, 256 gradations by 8 bits) is the vertical axis. Based on this conversion relationship, conversion data for converting an infrared image signal having a 12-bit configuration into an 8-bit configuration is created. This converted data is shown in (D). That is, the horizontal axis indicates the signal level (for example, 4095 level) of the original image, and the vertical axis indicates the signal level after conversion (for example, 255 level), indicating the relationship between the original image and the density value (signal level) after processing. It will be a thing. Therefore, the converted histogram is as shown in (E). That is, it becomes a histogram similar to the histogram shown in (B), and can be displayed as an image obtained by faithfully processing the original image.
[0008]
When an infrared image is displayed with gradation conversion as described above, if a hot or cold object moves in the background, the histogram will not change if it is within the imaging screen. It can be displayed so that it can be distinguished. However, when a high-temperature or low-temperature object passes through the imaging screen at a high speed or when the infrared imaging device side moves at a high speed, the level and distribution of infrared rays in one screen change, so the histogram also changes. Since the conversion data of the gradation conversion changes due to the change in the histogram, the display relationship between the high-temperature or low-temperature object and the background changes, and the visibility of the object to be observed deteriorates.
[0009]
Therefore, in order to solve such a problem, the above-mentioned histogram is compared with a predetermined threshold value and the number of pixels, the signal level of the number of pixels equal to or less than the threshold value is cut, and a plurality of temperature regions By creating a histogram and assigning the number of signal levels after gradation conversion according to the number of signal levels in the divided temperature region, even if a hot or cold object crosses at high speed, the object can be distinguished from the background If the distribution of the infrared level changes from frame to frame, the histogram is averaged over a plurality of frames, thereby suppressing fluctuations in the display screen based on changes in the histogram from frame to frame and between frames. Means for performing gradation conversion based on histogram differences has been proposed (see, for example, Japanese Patent Application Laid-Open No. 2001-154646).
[0010]
[Problems to be solved by the invention]
In the field of view of the infrared imaging device, for example, when the sky and the ground are included and a flying object or a ground traveling object is used as an observation object, the ground is near room temperature and the sky is cooler than that. Therefore, it can be divided into a low temperature part and a high temperature part. For example, when the sky of the infrared imaging device does not include the sky, a histogram for an infrared image signal obtained by imaging only the ground as shown by 201 in FIG. 20 is obtained. When tone conversion is performed based on this, 202 is obtained. On the other hand, when the sky and the ground are included in the visual field of the infrared imaging device, a histogram as indicated by 211 in FIG. 20 is obtained. That is, the sky is a low temperature region, and the ground forms a higher temperature region. Then, when a predetermined threshold is set, the signal level of the number of pixels equal to or less than the threshold is cut, the remaining signal levels are rearranged, and gradation conversion is performed, a histogram 212 is obtained.
[0011]
Since a flying object such as an airplane as an observation object by an infrared imaging device usually includes a high temperature, it can be clearly displayed in an empty portion in a low temperature region. On the other hand, an observation object such as a traveling vehicle on the ground may not have an extreme temperature difference compared to the temperature on the ground, so it is desirable to display this clearly and to increase visibility. Is. In addition, the position of the observation object on the ground can be confirmed with the topography or building as a target, but in the case of a flying object, the position can be confirmed with a cloud or the like as a target. Therefore, if all the sky parts have the same signal level, the display content has the same luminance, and when a high-temperature flying object is imaged, it can be displayed, but it is difficult to confirm the position. For this purpose, it is necessary to assign a predetermined number of signal levels to the sky and display a cloud or the like.
[0012]
In addition, the signal level of the sky part changes according to the four seasons or according to the weather. In this case as well, in the above-described conventional example, the histogram is compared with a certain threshold value, and is below the threshold value. The signal level of the number of pixels is cut and gradation conversion is performed, so the number of signal levels assigned to the sky and the ground changes, the display state of the observation object changes, and visibility decreases There is a problem to do.
[0013]
The present invention improves the visibility of an observation object by changing the threshold value according to the nature of the histogram of the original image and increasing the number of signal levels assigned to the higher temperature region than the low temperature region. Objective.
[0014]
[Means for Solving the Problems]
Referring to FIG. 1, the infrared image signal processing apparatus of the present invention is an infrared image signal processing apparatus that processes an infrared image signal by an infrared detector 2 and displays an infrared image. An image signal processing unit 5 that converts an infrared image signal into a digital signal and processes the image signal processing unit 5, the image signal processing unit 5 converts a infrared image signal into a digital signal, and inputs the frame memory unit 10. A histogram creation unit 11 for creating a histogram indicating the number of pixels with respect to the signal level of the signal, an inflection point of the histogram created by the histogram creation unit 11, dividing a temperature region by the inflection point, and at the inflection point The threshold is the number of pixels to be cut, the signal level of the number of pixels below this threshold is cut, the remaining signal levels are rearranged, and the signal is sent to each temperature region. Create a gradation conversion data assigned level, in accordance with the gradation conversion data, and has a configuration including a histogram calculation unit 12 for converting the gradation of the infrared image signal read out from the frame memory unit.
[0015]
The image signal processing unit 5 also includes a differentiation processing unit that obtains an inflection point by removing a harmonic component included in the histogram created by the histogram creation unit using a low-pass filter, and calculates the number of pixels at the inflection point. As a threshold value, a threshold value comparison unit that compares the number of pixels corresponding to the signal level constituting the histogram, an ordering processing unit that cuts and rearranges the signal level of the number of pixels equal to or less than the threshold value by the threshold value comparison unit, and an empty inflection point. A low-temperature part histogram calculation unit that performs signal level assignment processing for a low-temperature part and a high-temperature partial histogram that performs signal level assignment processing for a high-temperature part, divided into temperature regions of a low-temperature part such as a part and a high-temperature part such as the ground part The tone conversion data from the calculation unit, the low-temperature partial histogram calculation unit, and the high-temperature partial histogram calculation unit are combined to create a frame memory unit. Those having a signal level converter for converting a gradation of the read-out infrared image signal. Further, the inflection point of the histogram created by the histogram creation unit 11 is obtained, the temperature region is divided by the inflection point, and the threshold value for the low temperature portion is set larger than the threshold value for the high temperature portion obtained by dividing the inflection point of the histogram as a boundary. Set, cut the signal level of the number of pixels below this threshold, rearrange the remaining signal levels, assign the signal level corresponding to each temperature region, create gradation conversion data, this gradation conversion data Accordingly, the configuration may include a histogram calculation unit 12 that converts the gradation of the infrared image signal read from the frame memory unit.
[0016]
Further, the image signal processing unit 5 includes a threshold value comparison unit that compares the number of pixels of the histogram created by the histogram creation unit 11 with a threshold value, and a signal whose signal level is at least equal to or lower than the inflection point of the histogram corresponding to the signal level of the histogram. For the level, the threshold value set to a larger value is stored as the signal level becomes smaller, and the threshold value table is input to the threshold value comparison unit corresponding to the signal level of the histogram, and the number of pixels of the histogram is less than or equal to the threshold value by the threshold value comparison unit. An ordering processing unit that cuts signal levels and rearranges them, a histogram calculation unit that generates tone conversion data that assigns signal levels for tone conversion to the signal levels rearranged by the ordering processing unit, and the histogram calculation unit Converts the gradation of the infrared image signal from the frame memory based on the gradation conversion data by Can a have a signal level conversion unit. Further, the image signal processing unit 5 obtains the inflection point of the histogram created by the histogram creation unit 11, divides it into a low temperature part and a high temperature part with the inflection point as a boundary, and determines the number of pixels at the inflection point. A threshold table is provided in which a threshold value is set for a high temperature portion, and a threshold value for a low temperature portion is set such that the threshold value changes to a larger value as the signal level decreases, and the threshold value corresponding to the signal level of the histogram is read from this threshold table. It can have the structure which inputs into a comparison part.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 1 is an explanatory diagram of an embodiment of the present invention. 1 is an optical system including an infrared transmission lens and an optical scanning system, 2 is an infrared detector, 3 is an amplifier, 4 is an AD converter (A / D), 5 is an image signal processing unit, 6 is a DA converter (D / A), 7 is a monitor, 10 is a frame memory unit, 11 is a histogram creation unit, 12 is a histogram calculation unit, 13 and 14 are selectors (SEL), 15 , 16 and 17 are frame memories (RAM), 18 is an adder, 19 is a histogram creation memory (RAM), 20 is a buffer circuit, 21 is a histogram conversion memory (DP-RAM), and 22 is a histogram storage / DSP. A working memory (RAM), 23 is a DSP program storage memory (ROM), and 24 is a processor (DSP; digital signal processor). A for each memory indicates an address, and D indicates data.
[0018]
Infrared radiation radiated from the observation region (in the infrared imaging field of view) is incident on the infrared detector 2 via the optical system 1 and outputs a signal having a level corresponding to the infrared level (temperature in the observation region). Amplified and converted into a digital infrared image signal having a 12-bit configuration, for example, by the AD converter 4. The digital infrared image signal is input to the image signal processing unit 5 to perform gradation conversion. For example, the digital infrared image signal is converted into an 8-bit digital infrared image signal, input to the AD converter 6, and converted into an analog infrared image signal. The image is input to the monitor 7 and an infrared image is displayed with, for example, 256 gradations.
[0019]
The image signal processing unit 5 includes a frame memory unit 10, a histogram creation unit 11, and a histogram calculation unit 12. The frame memory unit 10 includes a plurality of frame memories 15, 16, and 17, and a selector 13 for switching them. The frame memories 15, 16, and 17 are memories having a capacity capable of writing one frame of the infrared image signal, and the frame memories for writing the infrared image signal by the selectors 13 and 14, respectively. The case where the frame memory to be read is sequentially switched for each frame is shown, and the case of a three-plane configuration is shown. That is, a total of 3 frames are required for creating a histogram, 1 frame for gradation conversion, and 1 frame for calculating the histogram after gradation conversion. Note that, depending on the control configuration, a two-surface configuration may be used.
[0020]
The histogram creating unit 11 has a configuration including an adder 18, a histogram creating memory 19, and a buffer circuit 20. The histogram creating memory 11 uses a 12-bit infrared image signal converted by the AD converter 4 as an address A. 19 is accessed, and 1 is added to the read data D by the adder 18 and written. Therefore, the content indicates the number of pixels with the signal level as an address, and a histogram for each frame can be created.
[0021]
The histogram calculation section 12 includes a histogram conversion memory 21, a histogram storage / DSP work memory 22, a DSP program storage memory 23, and a processor (digital signal processor DSP) 24. The histogram conversion memory 21 shows a case of a dual-port memory configuration, in which conversion data (8-bit configuration) is written from one processor 24 to one port, and for example, a 12-bit infrared image signal from the frame memory unit 10 The grayscale conversion can be performed by reading the conversion data from the other port of the dual port memory using the signal level as an address. The histogram storage / DSP work memory 22 transfers and stores the contents of the histogram creation memory 19 of the histogram creation section 11, and the processor 24 stores data for gradation conversion based on the histogram. It is created and written into the histogram conversion memory 21.
[0022]
The present invention does not set a fixed threshold value in the processing of the histogram in the processor 24, but sets it according to the nature of the histogram. For example, as shown in FIG. ⁿ -1 (4095 in the case of n = 12 bits), and the histogram of the original image with the vertical axis representing the number of pixels is (A1), conventionally, the signal level of the number of pixels below a certain threshold is cut. The tone is converted by assigning the signal level to the horizontal axis. ^m The histogram is shown in (A2) with a signal level of −1 (255 when m = 8 bits) and the vertical axis representing the number of pixels. In this case, the number of signal levels of Na is assigned to the ground portion.
[0023]
On the other hand, in one embodiment of the present invention, as shown in FIG. 2 (B1), an inflection point A in the curve of the histogram of the original image is obtained, and this inflection point A is obtained. The boundary between the empty part of the cold part and the ground part of the hot part. The number of pixels at the inflection point A is set as a threshold value. Then, the signal level of pixels below this threshold is cut, and the signal level B is set in the gradation conversion to determine the number of signal levels assigned to the sky portion and the number of signal levels assigned to the ground portion. Accordingly, the number of signal levels is assigned to the sky portion, and the gradation level conversion is performed so that the visibility of the observation object on the ground can be maintained by setting the number of signal levels Nb assigned to the ground portion as Nb> Na. Can do. In addition, even if the histogram of the original image changes according to the change in the distribution of the infrared signal level for each frame due to the high-speed movement of the infrared imaging device or the high-speed movement of the high-temperature object, the change in the histogram due to the gradation conversion is suppressed. The visibility of the object can be improved.
[0024]
FIG. 3 is an explanatory view of the main part of an embodiment of the present invention, 31 is a frame memory unit, 32 is a signal level conversion unit, 33 is an original image histogram creation unit, 34 is a threshold comparison unit, and 35 is an ordering processing unit. , 36 is a low-pass filter, 37 is a differentiation processing unit, 38 is a selector (SEL), 39 is a histogram calculation unit for the sky portion, 40 is a histogram calculation unit for the ground portion, and 41 is a histogram synthesis unit. The function of the processing unit 5 is shown.
[0025]
The frame memory unit 31 corresponds to the function of the frame memory unit 10 in FIG. 1, the original image histogram creation unit 33 corresponds to the function of the histogram creation unit 11 in FIG. 1, and the other configuration is the histogram calculation unit in FIG. This corresponds to 12 functions. The histogram created by the original image histogram creation unit 33 does not consist of smooth curves as shown in FIGS. 2A1 and 2B1, but includes fine irregularities, that is, harmonic components. The harmonic component is removed by the filter 36 and differentiated by the differentiation processing unit 37. As a result, a smooth histogram curve is obtained, and the inflection point A shown in FIG. This inflection point A shows the boundary between the empty part of the low temperature part and the ground part of the high temperature part. In general, the number of pixels at the inflection point A is not zero. Therefore, the number of pixels at the inflection point A is set as a threshold value.
[0026]
Further, the histogram of the original image is compared with the above-mentioned threshold value in the threshold value comparison unit 34, the signal level of the number of pixels equal to or less than the threshold value is cut, and the remaining signal level is rearranged in the ordering processing unit 35. The selector 38 is controlled with the differential output signal of the differential processing unit 37, that is, the inflection point as the boundary between the sky part and the ground part. Histogram calculation unit 39 for the sky portion and histogram calculation unit 40 for the terrestrial portion respectively create a histogram and synthesize it in histogram synthesis unit 41 to form, for example, a histogram shown in FIG. The signal level conversion unit 32 performs gradation conversion. As described above, the threshold value applied to the threshold value comparison unit 34 is set based on the number of pixels at the inflection point A. The signal level at the inflection point A depends on the seasons and the weather. Even if changes, processing corresponding to the temperature region of the sky portion and the ground portion can be performed.
[0027]
4, 5 and 6 are flow charts of an embodiment of the present invention, which will be described with reference to FIGS. The histogram creation memory 19 of the histogram creation unit 11 is reset for each frame (a1), and the data converted by the AD converter 4 (the signal level of the 12-bit infrared image signal) is set as the memory address A by the adder 18. 1 is added (a2). That is, the number of pixels corresponding to the signal level is counted up. Then, it is determined whether or not the data of all the pixels (for one frame) is finished (a3). If not finished, the process proceeds to step (a1). If finished for one frame, the number of pixels with respect to the signal level Is generated, the contents of the histogram creation memory 19 are transferred to the histogram storage / DSP work memory 22 of the histogram calculation unit 12 (a4).
[0028]
The harmonic component contained in the histogram curve is removed from the original image histogram by the low-pass filter 36 (see FIG. 3) as described above (a5), differentiated by the differentiation processing unit 37, and the valley signal of the distribution is obtained. Level S1 is calculated. That is, the signal level of the inflection point A is obtained (a6). The signal level at the inflection point A indicates the signal level at the boundary between the sky portion and the ground portion. In this case, the number of pixels at the inflection point A is set as a threshold value.
[0029]
Then, the signal levels 0 to S1, that is, the signal level of the number of pixels equal to or less than the threshold value in the empty portion are cut (a7), and the remaining signal levels are rearranged to obtain the total number N1 (a8). The allocation level at this time is i1 ′. Then, a function B1 [i1] that increases in steps of 1 / N1 from 0 to 1 is defined. That is, B1 [i1] = i1 × 1 / N1 (a9). Next, the allocation level is converted by display level = S2 (B [i1 ′] − 1 / N) (a10). The converted value is stored in the histogram conversion memory 21 (a11). The above processing shows the histogram conversion processing of the image data of the sky part.
[0030]
Further, the signal level of the number of pixels equal to or less than the threshold is cut with respect to the signal levels S1 to 4095, that is, the ground portion (a12). The remaining signal levels are rearranged to determine the total number N2. The allocation level at this time is set to i2 ′ (a13). Then, a function B2 [i2] that increases in steps of 1 / N2 from 0 to 1 is defined (a14), and the allocation level is set to display level = (256-S2) × (B [i1 ′] − 1 / N ) + S2 and converted to 8 bits (a15). The converted value is stored in the histogram conversion memory 21 (a16). The above processing shows the histogram conversion processing of the image data of the ground part.
[0031]
Then, the data (12 bits) is sequentially read from the frame memory to be used as the address A of the histogram conversion memory 21, and the gradation conversion data D (8 bits) is read from the histogram conversion memory 21 by this address A (a17). ). That is, the gradation conversion data is written in the histogram conversion memory 21, and the 8-bit infrared image signal of the gradation conversion data is read using the signal level of the 12-bit infrared image signal read from the frame memory as an address. It will be. The gradation-converted 8-bit infrared image signal is converted into an analog 256-gradation infrared image signal by the DA converter 6 and input to the monitor 7 (a18).
[0032]
FIG. 7 is an explanatory diagram of processing according to an embodiment of the present invention. FIG. 7A shows a histogram of an original image, which is divided into an empty portion and a ground portion according to an inflection point level S1, and has a pixel number equal to or less than a threshold value. When the signal level is cut and the empty part is ordered with respect to the signal level number N1 of the empty part and the signal level number N2 of the ground part, the result is as shown in (B). F).
[0033]
Then, density value conversion is performed as shown in (C) and (G). That is, as shown in (C) for the empty portion, the signal level of 0 to S2 is assigned to the signal level of the signal level number N1, and as shown in (G) for the ground portion. In addition, S2-2 for the signal level of the signal level number N2. ^m Assign a signal level of -1. Therefore, as shown in (D), the relationship between the original image and the density value (signal level) to be converted is such that the signal level of 0 to S1 is 0 to S2, and S1 to S2 ⁿ -1 signal level S2-2 ^m The level is converted to -1. Therefore, the histogram after gradation conversion is as shown in (E), and by assigning a signal level of 0 to S2 to the sky part, it is possible to display the state of clouds and the like, and to the ground part, S2-2. ^m By assigning a signal level of −1, the visibility of the observation object on the ground part can be maintained and displayed.
[0034]
FIG. 8 is an explanatory diagram of the main part of another embodiment of the present invention, in which 51 is a frame memory unit, 52 is a signal level conversion unit, 53 is an original image histogram creation unit, 54 is a threshold value comparison unit, and 55 is an ordering process. , 56 is a low-pass filter, 57 is a differentiation processing unit, 58 is a selector (SEL), 59 is a histogram calculation unit for the sky portion, 60 is a histogram calculation unit for the ground portion, 61 is a histogram synthesis unit, and 62 is a selector (SEL). And shows the function of the image signal processing unit 5 of FIG.
[0035]
3 corresponds to a configuration in which a selector 62 for switching the threshold values TA and TB and inputting to the threshold value comparison unit 54 is provided in the configuration of the embodiment shown in FIG. Parts having the same name have the same function, and redundant description is omitted.
[0036]
FIG. 9 is an explanatory view of processing by threshold switching. (C1) and (C2) show the same original image histogram as (A1) and (A2) in FIG. (D1) and (D2) show the histogram of the original image having the configuration shown in FIG. 8 and the histogram after conversion.
[0037]
In this embodiment, harmonic components included in the histogram created by the original image histogram creation unit 53 are removed by the low-pass filter 56, the inflection point A is obtained by the differentiation processing unit 57, and the inflection point A is obtained. The following signal levels are set as empty portions, the selector 62 is controlled to select a threshold value TA, and this threshold value TA is input to the threshold value comparison unit 54. The signal level above the inflection point A is the ground part, the selector 62 is controlled to select the threshold value TB (<TA), and this threshold value TB is input to the threshold value comparison unit 54.
[0038]
Accordingly, in the histogram of the original image shown in (D1) of FIG. 9, signal levels are respectively assigned to portions that exceed the threshold TA, and portions that do not exceed the threshold TA indicated by hatching are respectively The signal levels are assigned so as to be combined in the vicinity of the 0 signal level and in the vicinity of the signal level at the inflection point A. As a result, a signal level number Na is conventionally assigned to the ground portion as shown in FIG. 9 (C2). In this embodiment, as shown in FIG. 9 (D2). Can be assigned a signal level number Nb (> Na). Thereby, it is possible to display the observation object on the ground part so that it can be identified, and it is also possible to display the shape of the cloud in the sky part.
[0039]
10 and 11 are flowcharts of another embodiment of the present invention, and steps (b1) to (b6) are the same as steps (a1) to (a6) of the flowchart shown in FIG. Description is omitted. In the step (b7) shown in FIG. 11 of this embodiment, the signal level equal to or lower than the number of pixels of the threshold TA with respect to the signal level 0 to S1 (the signal level S1 at the inflection point A in the histogram of the original image). Is cut and processing is performed on the histogram of the original image in the empty area.
[0040]
Further, the signal level below the threshold value TB is cut with respect to the signal levels S1 to 4095 (signal level of 12-bit configuration), and the process for the histogram of the original image of the ground portion is performed (b8). Then, the remaining signal levels are rearranged, the allocation level is set to i ′, and the total number N is obtained (b9). A function B [i] that increases from 0 to 1 in steps of 1 / N is defined as B [i] = i × 1 / N (b10). Next, the allocation level is converted to 8 bits with the display level = 256 (B [i] −1 / N) (b11). The converted value is stored in the histogram conversion memory 21 (see FIG. 1) (b12), and the data (12 bits) are sequentially read out from the frame memory and used as the address A of the histogram conversion memory 21. Data D (8 bits) subjected to gradation conversion is read from the memory 21 (b13). Then, it is converted into an analog infrared image signal by the DA converter 6 and input to the monitor 7 (b14).
[0041]
FIG. 12 is an explanatory diagram of processing according to another embodiment of the present invention. FIG. 12A shows a histogram of an original image, which is divided into an empty portion and a ground portion with an inflection point of this histogram as a boundary. The signal level of the number of pixels below the threshold TA is cut, and the signal level of the number of pixels below the threshold TB (<TA) is cut for the ground portion. Then, by ordering the remaining signal levels, the sky part is shown in (B) and the ground part is shown in (F).
[0042]
Then, density value conversion (gradation conversion) is performed as shown in (C) and (G). That is, as shown in (C) for the empty part, 0 to S2 levels are assigned to the signal level of the signal level number N1, and as shown in (G) for the ground part. , S2 to 2 for the signal level number N2 ^m Assign a level of -1. Therefore, as shown in (D), the relationship between the original image and the density value (signal level) to be converted is such that the signal level of 0 to S1 is the signal level of 0 to S2, and S1 to S2 ⁿ −1 signal level, S2-2 ^m The signal level is converted to -1. Therefore, the histogram after gradation conversion is as shown in (E), and by assigning a signal level of 0 to S2 to the sky part, it is possible to display the state of clouds and the like, and to the ground part, S2-2. ^m By assigning a signal level of −1, the visibility of the observation object on the ground part can be maintained and displayed.
[0043]
FIG. 13 is an explanatory view of the main part of still another embodiment of the present invention, in which 71 is a frame memory unit, 72 is a signal level conversion unit, 73 is an original image histogram creation unit, 74 is a threshold comparison unit, and 75 is an ordering unit. The processing unit, 76 is a histogram calculation unit, 77 is a threshold value table, and shows the function of the image signal processing unit 5 of FIG.
[0044]
The threshold value table 77 has a configuration in which the signal level of the histogram created in the original image histogram creation unit 73 is used as an address, and a threshold value with a larger value is read as the signal level is lower. In this case, the relationship between the signal level and the threshold is set to be substantially constant for the above-described ground portion, and the sky portion is configured to have a larger value as the signal level is smaller according to a linear function or a quadratic function. Can be stored in the threshold table 77. Further, the number of pixels at the inflection point of the histogram is set as a threshold value for the ground portion, the threshold value for the sky portion is set to a value that changes as described above, and the threshold value stored in the threshold value table 77 is changed when the number of pixels at the inflection point changes. On the other hand, the difference may be added or subtracted to be a threshold value input to the threshold value comparison unit 74. Similarly, when the signal level at the inflection point varies and the threshold value to be read varies in accordance with the signal level, the inflection point corresponds to the address (signal level) for reading the threshold value from the threshold table 74. It is also possible to adopt a configuration in which the address is generated by adding and subtracting the fluctuation of the point.
[0045]
The threshold corresponding to the signal level read from the threshold table 77 is compared with the number of pixels corresponding to the signal level from the original image histogram creation unit 73, the signal level of the number of pixels equal to or less than the threshold is cut, and the ordering processing unit 75 The remaining signal levels are rearranged, the signal level assigned to the sky portion and the ground portion is obtained by the histogram calculation unit 76, and the tone conversion is performed by the signal level conversion unit 72. For example, an infrared image signal having a 12-bit configuration is converted into an 8-bit configuration.
[0046]
FIG. 14 is an explanatory diagram of threshold setting, and (E1) and (E2) are the same as those of (A1) and (A2) in FIG. 2 and (C1) and (C2) in FIG. The histogram of the original image and the histogram after conversion are shown, and (F1) and (F2) show the relationship between the histogram of the original image and the threshold value by the threshold value table 77 of this embodiment, and the histogram after conversion. As shown in (F1), the threshold value for the ground portion is set, for example, to a value similar to the conventional value, and the empty portion is set to a threshold value that increases as the signal level decreases.
[0047]
Accordingly, the signal level of the number of pixels of the hatched portion of the empty portion in (F1) is cut, and the converted histogram shows the ground portion from the number of signal levels assigned to the empty portion as shown in (F2). The number Nb of signal levels to be assigned to increases. Thereby, the visibility of the observed object in the displayed ground portion can be improved, and the shape of a cloud or the like in the sky portion can be displayed.
[0048]
15 and 16 show flowcharts of other embodiments of the present invention, and steps (c1) to (c4) are steps (a1) to (a4) of the flowchart shown in FIG. 4 and the flowchart shown in FIG. Since it is the same as steps (b1) to (b4), a duplicate description is omitted. In step (c5) in FIG. 15 of this embodiment, the signal level equal to or less than the number of pixels according to the threshold value from the threshold value table 77 is cut. Then, the remaining signal levels are rearranged to determine the total number N. In this case, the allocation level is i ′ (c6).
[0049]
A function B [i] that increases from 0 to 1 in 1 / N steps is defined as B [i] = i × 1 / N (c7). Next, the allocation level is converted to 8 bits with the display level = 256 (B [i] −1 / N) (c8). The converted value is stored in the histogram conversion memory 21 (see FIG. 1) (c9), data (12 bits) is sequentially read out from the frame memory, and used as the address A of the histogram conversion memory 21. The gradation conversion data D (8 bits) is read from the conversion memory 21 (c10), converted from 12 bits to 8 bits, converted to an analog infrared image signal by the DA converter 6, and sent to the monitor 7. Input (c11).
[0050]
FIG. 17 is an explanatory diagram of processing according to still another embodiment of the present invention. FIG. 17A shows a histogram of an original image. The histogram is divided into an empty portion and a ground portion with an inflection point A as a boundary. For the portion, the threshold value is set to a value that increases linearly as the signal level is small, and for the ground portion, a constant threshold value is shown. Therefore, the number of signal levels in the sky portion of the number of pixels exceeding the threshold is N1, and the number of signal levels in the ground portion is N2. In this case, as in the above-described embodiments, the inflection point A is obtained, the number of pixels at the inflection point A is set as a threshold value for the ground portion, and the empty portion is signaled linearly or curvedly. It can be a threshold value that changes according to the level.
[0051]
When compared with such a threshold value, signal levels below the threshold value are cut and rearranged, the sky portion is shown in (B), and the ground portion is shown in (F). Then, the density value (signal level) conversion characteristic shown in (C) is used for the sky part, and the density value conversion characteristic shown in (G) is used for the ground part. Therefore, the relationship between the original image and the converted density value is as shown in (D). The converted histogram is as shown in (E). The threshold value in this case is a curve such as a quadratic curve with respect to the sky part, and becomes a value that increases as the signal level decreases. It is also possible to set a constant value or a value that decreases as the signal level increases. It is also possible to set the threshold value for the signal level in the threshold value table 77 in a continuous curve having a small value for the ground portion and a large value for the sky portion.
[0052]
【The invention's effect】
As described above, the present invention includes an infrared image signal in the case where the imaging region (in the field of view) of the infrared imaging device includes a low temperature part such as a sky part and a high temperature part such as a ground part having a higher temperature. Create a histogram based on the signal level and the number of pixels, use the inflection point of the histogram as the boundary between the low temperature part and the high temperature part, and use the number of pixels at this inflection point as a threshold value. The signal level is cut and rearranged, and the signal level is assigned to the low temperature portion and the high temperature portion to perform gradation conversion. The threshold value is the number of pixels at the boundary between the low temperature portion and the high temperature portion. Or by setting the threshold value for the low temperature portion to a value larger than the threshold value for the high temperature portion, or setting the threshold value for the low temperature portion to a larger value as the signal level is smaller, A sufficient number of signal levels can be assigned to high-temperature parts such as the ground even when the infrared level changes due to the weather, so that the observed object in the displayed infrared image can be clearly displayed. it can. In addition, there is an advantage that it is possible to display an infrared image from which a certain observation target can be obtained even in a low temperature part. Therefore, in the infrared image including the sky and the ground in the field of view, the visibility of the observation object included in the ground portion can be improved and displayed. Moreover, since the observation target such as a cloud when the observation object is displayed can be displayed like the sky part, it can be applied to various uses.
[Brief description of the drawings]
FIG. 1 is an explanatory diagram of an embodiment of the present invention.
FIG. 2 is an explanatory diagram of a threshold setting process.
FIG. 3 is an explanatory diagram of relevant parts of an embodiment of the present invention.
FIG. 4 is a flowchart of an embodiment of the present invention.
FIG. 5 is a flowchart of an embodiment of the present invention.
FIG. 6 is a flowchart of an embodiment of the present invention.
FIG. 7 is a process explanatory diagram of an embodiment of the present invention.
FIG. 8 is an explanatory diagram of a main part of another embodiment of the present invention.
FIG. 9 is an explanatory diagram of processing for performing threshold switching.
FIG. 10 is a flowchart of another embodiment of the present invention.
FIG. 11 is a flowchart of another embodiment of the present invention.
FIG. 12 is an explanatory diagram of processing according to another embodiment of the present invention.
FIG. 13 is an explanatory diagram of relevant parts of still another embodiment of the present invention.
FIG. 14 is an explanatory diagram of threshold setting.
FIG. 15 is a flowchart of still another embodiment of the present invention.
FIG. 16 is a flowchart of still another embodiment of the present invention.
FIG. 17 is a process explanatory diagram of still another embodiment of the present invention.
FIG. 18 is an explanatory diagram of a conventional example.
FIG. 19 is a process explanatory diagram of a conventional example.
FIG. 20 is an explanatory diagram of a histogram.
[Explanation of symbols]
1 Optical system
2 Infrared detector
3 Amplifier
4 AD converter (A / D)
5 Image signal processor
6 DA converter (D / A)
7 Monitor
10 frame memory
11 Histogram creation part
12 Histogram calculator
13, 14 Selector (SEL)
15, 16, 17 Frame memory (RAM)
18 Adder
19 Histogram creation memory (RAM)
20 Buffer circuit
21 Memory for histogram conversion (DP-RAM)
22 Histogram storage and DSP work memory (RAM)
23 DSP program storage memory (ROM)
24 processor (DSP)

Claims

In an infrared image signal processing apparatus for processing an infrared image signal by an infrared detector to display an infrared image,
An image signal processing unit for converting an infrared image signal from the infrared detector into a digital signal and processing the digital signal;
The image signal processing unit converts the infrared image signal into a digital signal and inputs the frame memory unit;
A histogram creating unit that creates a histogram indicating the number of pixels with respect to the signal level of the infrared image signal;
A histogram inflection point created by the histogram creation unit is obtained, a temperature region is divided with the inflection point as a boundary, and a threshold value for a low temperature portion is larger than a threshold value for a high temperature portion divided with the inflection point of the histogram as a boundary And cut the signal level of the number of pixels equal to or less than the threshold, rearrange the remaining signal levels, assign the signal level corresponding to the temperature region, and create gradation conversion data . An infrared image signal processing apparatus comprising: a histogram calculation unit that converts a gradation of an infrared image signal read from the frame memory unit according to data.

The image signal processing unit includes a threshold value comparison unit that compares the number of pixels of the histogram created by the histogram creation unit with a threshold value, and the signal level corresponding to the signal level of the histogram is at least equal to or lower than the inflection point of the histogram. A threshold value table that stores a threshold value set to a larger value as the signal level decreases, and inputs the threshold value to the threshold value comparison unit corresponding to the signal level of the histogram; An ordering processing unit that cuts and rearranges signal levels having a number of pixels equal to or less than the threshold, and a histogram that generates gradation conversion data that assigns a signal level of gradation conversion to the signal levels rearranged by the ordering processing unit The frame memory unit based on the gradation conversion data by the calculation unit and the histogram calculation unit. Infrared image signal processing apparatus according to claim 1, characterized in that it comprises a signal level converter for converting a gradation of the infrared image signal.

The image signal processing unit obtains an inflection point of the histogram created by the histogram creation unit, divides the inflection point into a low temperature part and a high temperature part, and determines the number of pixels at the inflection point. The threshold value is set for the high temperature portion, and the threshold value for the low temperature portion is set as a value that changes to a larger value as the signal level is smaller, and a threshold value corresponding to the signal level of the histogram is set from the threshold value table. The infrared image signal processing apparatus according to claim 1, wherein the infrared image signal processing apparatus is configured to read and input to the threshold comparison unit .