JP2001157113A - 画像補正装置および画像補正装置付き追尾システム - Google Patents
画像補正装置および画像補正装置付き追尾システムInfo
- Publication number
- JP2001157113A JP2001157113A JP33453999A JP33453999A JP2001157113A JP 2001157113 A JP2001157113 A JP 2001157113A JP 33453999 A JP33453999 A JP 33453999A JP 33453999 A JP33453999 A JP 33453999A JP 2001157113 A JP2001157113 A JP 2001157113A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- infrared sensor
- circuit
- image
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Photometry And Measurement Of Optical Pulse Characteristics (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
(57)【要約】
【課題】 本発明は、従来に比べてより正確に目標を探
し出すことができる画像補正装置および画像補正装置付
き追尾システムを提供することを課題とする。 【解決手段】 本来動作していない赤外線センサ画素に
画素レベルを代入する際に、当該本来動作していない赤
外線センサ画素の周辺で正常に動作する画素レベルを参
照してその値を当該本来動作していない赤外線センサ画
素に代入する構成を有する。
し出すことができる画像補正装置および画像補正装置付
き追尾システムを提供することを課題とする。 【解決手段】 本来動作していない赤外線センサ画素に
画素レベルを代入する際に、当該本来動作していない赤
外線センサ画素の周辺で正常に動作する画素レベルを参
照してその値を当該本来動作していない赤外線センサ画
素に代入する構成を有する。
Description
【０００１】
【発明の属する技術分野】本発明は、撮像素子の画素補
正技術に係り、特に本来動作していない赤外線センサ画
素に画素レベルを代入する際に、当該本来動作していな
い赤外線センサ画素の周辺で正常に動作する画素レベル
を参照してその値を当該本来動作していない赤外線セン
サ画素に代入することで、従来に比べてより正確に目標
を探し出すことができる画像補正装置および画像補正装
置付き追尾システムに関する。
正技術に係り、特に本来動作していない赤外線センサ画
素に画素レベルを代入する際に、当該本来動作していな
い赤外線センサ画素の周辺で正常に動作する画素レベル
を参照してその値を当該本来動作していない赤外線セン
サ画素に代入することで、従来に比べてより正確に目標
を探し出すことができる画像補正装置および画像補正装
置付き追尾システムに関する。
【０００２】
【従来の技術】セルの白色または黒色欠陥を内部で補償
する欠陥補償器を備えた固体撮像デバイス（ＣＣＤ）の
従来技術としては、例えば、特開平９−４６６０１号公
報（第１従来技術）に記載のものがある。すなわち、第
１従来技術は、欠陥補償をＣＣＤ内部で行ってシステム
の規模を小さくし、かつより精密な欠陥補償を実現して
ウェーハの収率を増加させることを目的とするものであ
って、光の映像信号を検出して信号電荷を生成する複数
個の光検出器から信号電荷を垂直方向に転送するＶＣＣ
Ｄ領域と、ＶＣＣＤ領域の画素情報を複数個の走査線単
位で順次に格納するバッファ部と、バッファ部の画素情
報から中心画素を除外した周辺画素の合算値を算出する
マトリックス形態の複数個のサブウィンドウと、そのサ
ブウィンドウにより算出された合算値を再び複数個にブ
ロック化して平均値を算出する複数個のサムウィンドウ
と、その平均値と中心画素値を比較してその結果に基づ
いて欠陥の可否を判断する欠陥判断部と、サブウィンド
ウから任意の周辺画素値を入力して該当サムウィンドウ
により算出された平均値と比較して欠陥補償値を決定す
る補償画素値決定部とを有する欠陥検出および補償部
と、欠陥検出および補償部の出力信号に基づいて欠陥が
補償された画素情報または補償前の画素情報のいずれか
１つを選択出力するマルチプレクサを備えた固体撮像デ
バイスの欠陥補償器である。このような固体撮像デバイ
スの欠陥補償器によれば、従来の欠陥補正過程がＣＣＤ
素子外部で行われていたことに比べてＣＣＤ内部で欠陥
補償による信号処理過程を行うので全体システムの規模
を最小化することができ、ピクセルウィンドウを使用す
ることにより欠陥検出を効果的にしてウェーハの収率を
向上できるといった効果が開示されている。
する欠陥補償器を備えた固体撮像デバイス（ＣＣＤ）の
従来技術としては、例えば、特開平９−４６６０１号公
報（第１従来技術）に記載のものがある。すなわち、第
１従来技術は、欠陥補償をＣＣＤ内部で行ってシステム
の規模を小さくし、かつより精密な欠陥補償を実現して
ウェーハの収率を増加させることを目的とするものであ
って、光の映像信号を検出して信号電荷を生成する複数
個の光検出器から信号電荷を垂直方向に転送するＶＣＣ
Ｄ領域と、ＶＣＣＤ領域の画素情報を複数個の走査線単
位で順次に格納するバッファ部と、バッファ部の画素情
報から中心画素を除外した周辺画素の合算値を算出する
マトリックス形態の複数個のサブウィンドウと、そのサ
ブウィンドウにより算出された合算値を再び複数個にブ
ロック化して平均値を算出する複数個のサムウィンドウ
と、その平均値と中心画素値を比較してその結果に基づ
いて欠陥の可否を判断する欠陥判断部と、サブウィンド
ウから任意の周辺画素値を入力して該当サムウィンドウ
により算出された平均値と比較して欠陥補償値を決定す
る補償画素値決定部とを有する欠陥検出および補償部
と、欠陥検出および補償部の出力信号に基づいて欠陥が
補償された画素情報または補償前の画素情報のいずれか
１つを選択出力するマルチプレクサを備えた固体撮像デ
バイスの欠陥補償器である。このような固体撮像デバイ
スの欠陥補償器によれば、従来の欠陥補正過程がＣＣＤ
素子外部で行われていたことに比べてＣＣＤ内部で欠陥
補償による信号処理過程を行うので全体システムの規模
を最小化することができ、ピクセルウィンドウを使用す
ることにより欠陥検出を効果的にしてウェーハの収率を
向上できるといった効果が開示されている。
【０００３】また、画像内の不良画像を補間する従来の
画像処理装置としては、例えば、特開平９−２１８９４
０号公報（第２従来技術）に記載のものがある。すなわ
ち、第２従来技術は、欠損が存在する光ファイバを用い
た内視鏡装置において、不良画像を補間し、良好な出力
画像を得ることを目的とするものであって、複数の画素
からなる有効画像領域が複数散在する画像を入力する画
像入力手段と、不良画像が存在する有効画像領域を特定
する領域特定手段と、不良画像が存在する有効画像領域
の周辺にある少なくとも１つの有効画像領域を含む周辺
領域から得られる画像をもって不良画像を補間する補間
手段を備えた画像処理装置である。画像入力手段は、複
数の有効画像領域が配列構造をなした画像を入力する。
周辺領域は不良画像が存在する有効画像領域に隣接して
配列された複数の有効画像領域を含んでいる。補間手段
は、周辺領域に含まれる有効画像領域を抽出する抽出手
段を有し、抽出した有効画像領域の画像に基づいて補間
画像を生成する。補間手段は、抽出手段により抽出した
有効画像領域の画像の平均画素値を算出する平均値算出
手段をさらに有し、算出した平均画素値に基づいて補間
画像を生成する。補間手段は、周辺領域の画像の平均画
素値を算出する平均値算出手段を有し、その平均画素値
に基づいて補間画像を生成する。補間手段は、周辺領域
に含まれる有効画像領域の画像に相応する画素値を有す
る補間画像を生成すべく、平均画素値を補正する補正手
段をさらに有する。領域特定手段は、不良画像が存在す
る領域を示す領域情報を保持するメモリ手段を有し、該
領域情報に基づいて不良画像が存在する有効画像領域を
特定する。領域特定手段は、領域情報を更新する更新手
段をさらに有する。画像入力手段は、束状の光ファイバ
の先端部と後端部とにレンズを有する映像伝達手段と、
後端部において映像信号を光信号から電気信号に変換す
る信号変換手段とを有する。映像伝達手段は、先端部を
体腔または血管内に挿入可能である画像処理装置であ
る。このような画像処理装置によれば、不良画像が複数
の画素に跨って存在する画像における当該不良画像を補
間することにより、良好な出力画像を得ることができる
といった効果が開示されている。
画像処理装置としては、例えば、特開平９−２１８９４
０号公報（第２従来技術）に記載のものがある。すなわ
ち、第２従来技術は、欠損が存在する光ファイバを用い
た内視鏡装置において、不良画像を補間し、良好な出力
画像を得ることを目的とするものであって、複数の画素
からなる有効画像領域が複数散在する画像を入力する画
像入力手段と、不良画像が存在する有効画像領域を特定
する領域特定手段と、不良画像が存在する有効画像領域
の周辺にある少なくとも１つの有効画像領域を含む周辺
領域から得られる画像をもって不良画像を補間する補間
手段を備えた画像処理装置である。画像入力手段は、複
数の有効画像領域が配列構造をなした画像を入力する。
周辺領域は不良画像が存在する有効画像領域に隣接して
配列された複数の有効画像領域を含んでいる。補間手段
は、周辺領域に含まれる有効画像領域を抽出する抽出手
段を有し、抽出した有効画像領域の画像に基づいて補間
画像を生成する。補間手段は、抽出手段により抽出した
有効画像領域の画像の平均画素値を算出する平均値算出
手段をさらに有し、算出した平均画素値に基づいて補間
画像を生成する。補間手段は、周辺領域の画像の平均画
素値を算出する平均値算出手段を有し、その平均画素値
に基づいて補間画像を生成する。補間手段は、周辺領域
に含まれる有効画像領域の画像に相応する画素値を有す
る補間画像を生成すべく、平均画素値を補正する補正手
段をさらに有する。領域特定手段は、不良画像が存在す
る領域を示す領域情報を保持するメモリ手段を有し、該
領域情報に基づいて不良画像が存在する有効画像領域を
特定する。領域特定手段は、領域情報を更新する更新手
段をさらに有する。画像入力手段は、束状の光ファイバ
の先端部と後端部とにレンズを有する映像伝達手段と、
後端部において映像信号を光信号から電気信号に変換す
る信号変換手段とを有する。映像伝達手段は、先端部を
体腔または血管内に挿入可能である画像処理装置であ
る。このような画像処理装置によれば、不良画像が複数
の画素に跨って存在する画像における当該不良画像を補
間することにより、良好な出力画像を得ることができる
といった効果が開示されている。
【０００４】
【発明が解決しようとする課題】しかしながら、上記従
来技術を赤外線センサに適用した場合、赤外線センサ内
に反応しない、もしくは反応が過敏な不良画素が存在し
たときにおいては、その近傍の１画素のみの情報だけに
頼って当該１画素をそのままコピーしていたため不良画
素が多いセンサには適さないという問題点があった。
来技術を赤外線センサに適用した場合、赤外線センサ内
に反応しない、もしくは反応が過敏な不良画素が存在し
たときにおいては、その近傍の１画素のみの情報だけに
頼って当該１画素をそのままコピーしていたため不良画
素が多いセンサには適さないという問題点があった。
【０００５】本発明は斯かる問題点を鑑みてなされたも
のであり、その目的とするところは、本来動作していな
い赤外線センサ画素に画素レベルを代入する際に、当該
本来動作していない赤外線センサ画素の周辺で正常に動
作する画素レベルを参照してその値を当該本来動作して
いない赤外線センサ画素に代入することで、従来に比べ
てより正確に目標を探し出すことができる画像補正装置
および画像補正装置付き追尾システムを提供する点にあ
る。
のであり、その目的とするところは、本来動作していな
い赤外線センサ画素に画素レベルを代入する際に、当該
本来動作していない赤外線センサ画素の周辺で正常に動
作する画素レベルを参照してその値を当該本来動作して
いない赤外線センサ画素に代入することで、従来に比べ
てより正確に目標を探し出すことができる画像補正装置
および画像補正装置付き追尾システムを提供する点にあ
る。
【０００６】
【課題を解決するための手段】請求項１に記載の発明の
要旨は、赤外線センサ内に反応しない不良画素もしくは
反応が過敏な不良画素が存在する場合に、前記赤外線セ
ンサとしての出力に適さない画素に周辺画素の平均値を
入力して前記赤外線センサの全ての画素を活かすことに
より、画素情報を補正する構成を有することを特徴とす
る画像補正装置に存する。また、請求項２に記載の発明
の要旨は、赤外線センサ内の反応しない不良画素もしく
は反応が過敏な不良画素を特定する手段と、前記赤外線
センサ内に反応しない不良画素もしくは反応が過敏な不
良画素が存在する場合に、前記赤外線センサとしての出
力に適さない画素に周辺画素の平均値を入力して前記赤
外線センサの全ての画素を活かす処理を実行して画素情
報を補正する手段を有することを特徴とする画像補正装
置に存する。また、請求項３に記載の発明の要旨は、前
記赤外線センサは、センサ基板上に赤外線センサ画素が
２次元に配置されている抵抗変化型赤外線アレイセンサ
であることを特徴とする請求項１または２に記載の画像
補正装置に存する。また、請求項４に記載の発明の要旨
は、赤外線センサ内に反応しない不良画素もしくは反応
が過敏な不良画素が存在する場合に、前記赤外線センサ
としての出力に適さない画素に周辺画素の平均値を入力
して前記赤外線センサの全ての画素を活かすことによ
り、画素情報を補正する構成を有することを特徴とする
画像補正装置付き追尾システムに存する。また、請求項
５に記載の発明の要旨は、赤外線センサ内の反応しない
不良画素もしくは反応が過敏な不良画素を特定する手段
と、前記赤外線センサ内に反応しない不良画素もしくは
反応が過敏な不良画素が存在する場合に、前記赤外線セ
ンサとしての出力に適さない画素に周辺画素の平均値を
入力して前記赤外線センサの全ての画素を活かす処理を
実行して画素情報を補正する画像補正装置を有すること
を特徴とする画像補正装置付き追尾システムに存する。
また、請求項６に記載の発明の要旨は、前記画像補正装
置は、処理前のデータをメモリする第１記憶回路と、前
記第１記憶回路からのデータを処理するための演算回路
と、前記演算回路での処理後のデータをメモリする第２
記憶回路と、周辺画素の平均値を算出するための計算式
を記憶するための第４記憶回路を有することを特徴とす
る請求項５に記載の画像補正装置付き追尾システムに存
する。また、請求項７に記載の発明の要旨は、固定パタ
ーンノイズを除去するためのＦＰＮ補正回路と、あらか
じめ設定されたしきい値を境に白と黒に画像処理する二
値化回路と、前記二値化回路で用いるしきい値を決定す
るスレッシュホルド設定回路と、前記スレッシュホルド
設定回路で設定されたしきい値を境に前記二値化回路で
白と黒に画像処理されて生成された白色部分の面積重心
アドレスを算出する追尾計算を実行するための面積重心
追尾処理回路と、前記面積重心追尾処理回路で算出した
白色部分の面積重心アドレスを参照して本来の目標と不
良画素を正確に捕らえる確率を向上させるジンバル指令
回路と、画素毎の固定パターンノイズをあらかじめ書き
込んでおく第３記憶回路と、前記赤外線センサが所有す
る不良画素のアドレスと全画素の固定パターンノイズを
取得するための画素特性検出回路を有することを特徴と
する請求項４乃至６のいずれか一項に記載の画像補正装
置付き追尾システムに存する。また、請求項８に記載の
発明の要旨は、前記赤外線センサは、センサ基板上に赤
外線センサ画素が２次元に配置されている抵抗変化型赤
外線アレイセンサであることを特徴とする請求項４乃至
７のいずれか一項に記載の画像補正装置付き追尾システ
ムに存する。
要旨は、赤外線センサ内に反応しない不良画素もしくは
反応が過敏な不良画素が存在する場合に、前記赤外線セ
ンサとしての出力に適さない画素に周辺画素の平均値を
入力して前記赤外線センサの全ての画素を活かすことに
より、画素情報を補正する構成を有することを特徴とす
る画像補正装置に存する。また、請求項２に記載の発明
の要旨は、赤外線センサ内の反応しない不良画素もしく
は反応が過敏な不良画素を特定する手段と、前記赤外線
センサ内に反応しない不良画素もしくは反応が過敏な不
良画素が存在する場合に、前記赤外線センサとしての出
力に適さない画素に周辺画素の平均値を入力して前記赤
外線センサの全ての画素を活かす処理を実行して画素情
報を補正する手段を有することを特徴とする画像補正装
置に存する。また、請求項３に記載の発明の要旨は、前
記赤外線センサは、センサ基板上に赤外線センサ画素が
２次元に配置されている抵抗変化型赤外線アレイセンサ
であることを特徴とする請求項１または２に記載の画像
補正装置に存する。また、請求項４に記載の発明の要旨
は、赤外線センサ内に反応しない不良画素もしくは反応
が過敏な不良画素が存在する場合に、前記赤外線センサ
としての出力に適さない画素に周辺画素の平均値を入力
して前記赤外線センサの全ての画素を活かすことによ
り、画素情報を補正する構成を有することを特徴とする
画像補正装置付き追尾システムに存する。また、請求項
５に記載の発明の要旨は、赤外線センサ内の反応しない
不良画素もしくは反応が過敏な不良画素を特定する手段
と、前記赤外線センサ内に反応しない不良画素もしくは
反応が過敏な不良画素が存在する場合に、前記赤外線セ
ンサとしての出力に適さない画素に周辺画素の平均値を
入力して前記赤外線センサの全ての画素を活かす処理を
実行して画素情報を補正する画像補正装置を有すること
を特徴とする画像補正装置付き追尾システムに存する。
また、請求項６に記載の発明の要旨は、前記画像補正装
置は、処理前のデータをメモリする第１記憶回路と、前
記第１記憶回路からのデータを処理するための演算回路
と、前記演算回路での処理後のデータをメモリする第２
記憶回路と、周辺画素の平均値を算出するための計算式
を記憶するための第４記憶回路を有することを特徴とす
る請求項５に記載の画像補正装置付き追尾システムに存
する。また、請求項７に記載の発明の要旨は、固定パタ
ーンノイズを除去するためのＦＰＮ補正回路と、あらか
じめ設定されたしきい値を境に白と黒に画像処理する二
値化回路と、前記二値化回路で用いるしきい値を決定す
るスレッシュホルド設定回路と、前記スレッシュホルド
設定回路で設定されたしきい値を境に前記二値化回路で
白と黒に画像処理されて生成された白色部分の面積重心
アドレスを算出する追尾計算を実行するための面積重心
追尾処理回路と、前記面積重心追尾処理回路で算出した
白色部分の面積重心アドレスを参照して本来の目標と不
良画素を正確に捕らえる確率を向上させるジンバル指令
回路と、画素毎の固定パターンノイズをあらかじめ書き
込んでおく第３記憶回路と、前記赤外線センサが所有す
る不良画素のアドレスと全画素の固定パターンノイズを
取得するための画素特性検出回路を有することを特徴と
する請求項４乃至６のいずれか一項に記載の画像補正装
置付き追尾システムに存する。また、請求項８に記載の
発明の要旨は、前記赤外線センサは、センサ基板上に赤
外線センサ画素が２次元に配置されている抵抗変化型赤
外線アレイセンサであることを特徴とする請求項４乃至
７のいずれか一項に記載の画像補正装置付き追尾システ
ムに存する。
【０００７】
【発明の実施の形態】本発明の特徴は、赤外線センサ内
に反応しない不良画素もしくは反応が過敏な不良画素が
存在する場合に、赤外線センサとしての出力に適さない
画素に周辺画素の平均値を入力して赤外線センサの全て
の画素を活かすことにより、画素情報を補正する構成を
有する点にある。これにより、従来に比べてより正確に
目標を探し出すことができる画像補正装置および画像補
正装置付き追尾システムを実現できるようになるといっ
た効果を奏する。以下、本発明の実施の形態を図面に基
づいて詳細に説明する。
に反応しない不良画素もしくは反応が過敏な不良画素が
存在する場合に、赤外線センサとしての出力に適さない
画素に周辺画素の平均値を入力して赤外線センサの全て
の画素を活かすことにより、画素情報を補正する構成を
有する点にある。これにより、従来に比べてより正確に
目標を探し出すことができる画像補正装置および画像補
正装置付き追尾システムを実現できるようになるといっ
た効果を奏する。以下、本発明の実施の形態を図面に基
づいて詳細に説明する。
【０００８】図１は本発明の一実施の形態に係る画像補
正装置付き追尾システム３０を説明するためのブロック
図である。図１において、１は赤外線センサ、２はセン
サ・バイアス回路、３はＦＰＮ補正回路、４はＲＡＭ
（第１記憶回路）、５はＣＰＵ（演算回路）、６はＲＡ
Ｍ（第２記憶回路）、７は二値化回路、８はスレッシュ
ホルド設定回路、９は面積重心追尾処理回路、１０はジ
ンバル指令回路、１１はＲＯＭ（第３記憶回路）、１２
はＲＯＭ（第４記憶回路）、１３は画素特性検出回路、
１４は面光源、２０は画像補正装置、３０は画像補正装
置付き追尾システムを示している。
正装置付き追尾システム３０を説明するためのブロック
図である。図１において、１は赤外線センサ、２はセン
サ・バイアス回路、３はＦＰＮ補正回路、４はＲＡＭ
（第１記憶回路）、５はＣＰＵ（演算回路）、６はＲＡ
Ｍ（第２記憶回路）、７は二値化回路、８はスレッシュ
ホルド設定回路、９は面積重心追尾処理回路、１０はジ
ンバル指令回路、１１はＲＯＭ（第３記憶回路）、１２
はＲＯＭ（第４記憶回路）、１３は画素特性検出回路、
１４は面光源、２０は画像補正装置、３０は画像補正装
置付き追尾システムを示している。
【０００９】図１を参照すると、本実施の形態の画像補
正装置付き追尾システム３０は、センサ基板上に赤外線
センサ画素が２次元に配置されている抵抗変化型赤外線
アレイセンサである赤外線センサ１と、センサ・バイア
ス回路２と、ＦＰＮ（Ｆｌａｔ Ｐａｔｔｅｒｎ Ｎｏ
ｉｓｅ：固定パターンノイズ）を除去するためのＦＰＮ
補正回路３と、あらかじめ設定されたしきい値を境に白
と黒に画像処理する二値化回路７と、二値化回路７で用
いるしきい値を決定するスレッシュホルド設定回路８
と、スレッシュホルド設定回路８で設定されたしきい値
を境に二値化回路７で白と黒に画像処理されて生成され
た白色部分の面積重心アドレスを算出する追尾計算を実
行するための面積重心追尾処理回路９と、ジンバル指令
回路１０と、画素毎の固定パターンノイズ（ＦＰＮ）を
あらかじめ書き込んでおくＲＯＭ１１（第３記憶回路）
と、赤外線センサ１が所有する不良画素のアドレスと全
画素の固定パターンノイズ（ＦＰＮ）を取得するための
画素特性検出回路１３と、面光源１４と、画像補正装置
２０を備えている。画像補正装置２０は、処理前のデー
タをメモリするＲＡＭ４（第１記憶回路）と、ＲＡＭ４
（第１記憶回路）からのデータを処理するためのＣＰＵ
５（演算回路）と、ＣＰＵ５（演算回路）での処理後の
データをメモリするＲＡＭ６（第２記憶回路）と、ＲＯ
Ｍ１２（第４記憶回路）を備えている。
正装置付き追尾システム３０は、センサ基板上に赤外線
センサ画素が２次元に配置されている抵抗変化型赤外線
アレイセンサである赤外線センサ１と、センサ・バイア
ス回路２と、ＦＰＮ（Ｆｌａｔ Ｐａｔｔｅｒｎ Ｎｏ
ｉｓｅ：固定パターンノイズ）を除去するためのＦＰＮ
補正回路３と、あらかじめ設定されたしきい値を境に白
と黒に画像処理する二値化回路７と、二値化回路７で用
いるしきい値を決定するスレッシュホルド設定回路８
と、スレッシュホルド設定回路８で設定されたしきい値
を境に二値化回路７で白と黒に画像処理されて生成され
た白色部分の面積重心アドレスを算出する追尾計算を実
行するための面積重心追尾処理回路９と、ジンバル指令
回路１０と、画素毎の固定パターンノイズ（ＦＰＮ）を
あらかじめ書き込んでおくＲＯＭ１１（第３記憶回路）
と、赤外線センサ１が所有する不良画素のアドレスと全
画素の固定パターンノイズ（ＦＰＮ）を取得するための
画素特性検出回路１３と、面光源１４と、画像補正装置
２０を備えている。画像補正装置２０は、処理前のデー
タをメモリするＲＡＭ４（第１記憶回路）と、ＲＡＭ４
（第１記憶回路）からのデータを処理するためのＣＰＵ
５（演算回路）と、ＣＰＵ５（演算回路）での処理後の
データをメモリするＲＡＭ６（第２記憶回路）と、ＲＯ
Ｍ１２（第４記憶回路）を備えている。
【００１０】次に画像補正装置付き追尾システム３０の
動作について説明する。赤外線センサ１は、抵抗変化型
赤外線アレイセンサであって、センサ基板上に赤外線セ
ンサ画素が２次元に配置されている。赤外線センサ１の
各画素は、照射される赤外線の強度に応じて温度変化を
生成することで、その温度変化に対応した抵抗値の変化
を生成・出力する。このような赤外線センサ１は、製造
ばらつき等により固定パターンノイズ（ＦＰＮ）が各画
素によって異なることがあり、また、赤外線センサ１と
して適さない不良画素が含まれることがある。
動作について説明する。赤外線センサ１は、抵抗変化型
赤外線アレイセンサであって、センサ基板上に赤外線セ
ンサ画素が２次元に配置されている。赤外線センサ１の
各画素は、照射される赤外線の強度に応じて温度変化を
生成することで、その温度変化に対応した抵抗値の変化
を生成・出力する。このような赤外線センサ１は、製造
ばらつき等により固定パターンノイズ（ＦＰＮ）が各画
素によって異なることがあり、また、赤外線センサ１と
して適さない不良画素が含まれることがある。
【００１１】画素特性検出回路１３は、システム作動前
にあらかじめ一様な赤外線を放出する面光源１４の温度
を＋２５℃と＋３５℃に設定し、固定パターンノイズデ
ータ（ＦＰＮデータ）を取得し、ＲＯＭ１１（第３記憶
回路）に不良画素アドレスとして書き込み、計算式をＲ
ＯＭ１２（第４記憶回路）に書き込む。
にあらかじめ一様な赤外線を放出する面光源１４の温度
を＋２５℃と＋３５℃に設定し、固定パターンノイズデ
ータ（ＦＰＮデータ）を取得し、ＲＯＭ１１（第３記憶
回路）に不良画素アドレスとして書き込み、計算式をＲ
ＯＭ１２（第４記憶回路）に書き込む。
【００１２】ＲＯＭ１１（第３記憶回路）に書き込まれ
た固定パターンノイズデータ（ＦＰＮデータ）を赤外線
センサ１で取り込んだデータからＦＰＮ補正回路３で減
算し、当該減算結果を補正データとしてＲＡＭ４（第１
記憶回路）に書き込む。
た固定パターンノイズデータ（ＦＰＮデータ）を赤外線
センサ１で取り込んだデータからＦＰＮ補正回路３で減
算し、当該減算結果を補正データとしてＲＡＭ４（第１
記憶回路）に書き込む。
【００１３】このＲＡＭ４（第１記憶回路）に書き込ま
れた補正データを、ＣＰＵ５（演算回路）とＲＯＭ１２
（第４記憶回路）を使用して、ＲＡＭ４（第１記憶回
路）に書き込まれたデータの中で不良画素と判断された
画素アドレスを基にＲＡＭ６（第２記憶回路）へ書き込
む。
れた補正データを、ＣＰＵ５（演算回路）とＲＯＭ１２
（第４記憶回路）を使用して、ＲＡＭ４（第１記憶回
路）に書き込まれたデータの中で不良画素と判断された
画素アドレスを基にＲＡＭ６（第２記憶回路）へ書き込
む。
【００１４】図２は本発明による不良画素（図２中の
ａ）に対する計算例を示している。本発明による不良画
素に対する計算は図２に示す通り、３つのパターンが考
えられる。ａは不良な赤外線センサ画素（不良画素）を
示し、ｂ，ｃ，ｄ，ｅ，ｆ，ｇ，ｈ，ｉは正常な赤外線
センサ画素（正常画素）を示している。
ａ）に対する計算例を示している。本発明による不良画
素に対する計算は図２に示す通り、３つのパターンが考
えられる。ａは不良な赤外線センサ画素（不良画素）を
示し、ｂ，ｃ，ｄ，ｅ，ｆ，ｇ，ｈ，ｉは正常な赤外線
センサ画素（正常画素）を示している。
【００１５】計算式は、以下のようになる。
【００１６】 パターン１：ａ＝（ｂ＋ｃ＋ｄ＋ｅ＋ｆ＋ｇ＋ｈ＋ｉ）／８・・・（図２（ａ ）参照） パターン２：ａ＝（ｂ＋ｃ＋ｄ）／３・・・・・・・・・・・・・（図２（ｂ ）参照） パターン３：ａ＝（ｂ＋ｃ＋ｄ＋ｅ＋ｆ）／５・・・・・・・・・（図２（ｃ ）参照）
【００１７】ＲＡＭ６（第２記憶回路）に書き込まれた
データは、スレッシュホルド設定回路８で設定されたし
きい値を境に二値化回路７で白と黒に画像処理される。
その処理画像の白色部分の面積重心アドレスを面積重心
追尾処理回路９で算出する。
データは、スレッシュホルド設定回路８で設定されたし
きい値を境に二値化回路７で白と黒に画像処理される。
その処理画像の白色部分の面積重心アドレスを面積重心
追尾処理回路９で算出する。
【００１８】ジンバル指令回路１０は、本来動作してい
ない赤外線センサ画素に画素レベルを代入する際に、こ
の面積重心追尾処理回路９で算出した白色部分の面積重
心アドレスを参照することにより、当該本来動作してい
ない赤外線センサ画素の周辺で正常に動作する画素レベ
ルを参照してその値を当該本来動作していない赤外線セ
ンサ画素に代入する。これにより、本来の目標と不良画
素を正確に捕らえる確率を向上させることができる。
ない赤外線センサ画素に画素レベルを代入する際に、こ
の面積重心追尾処理回路９で算出した白色部分の面積重
心アドレスを参照することにより、当該本来動作してい
ない赤外線センサ画素の周辺で正常に動作する画素レベ
ルを参照してその値を当該本来動作していない赤外線セ
ンサ画素に代入する。これにより、本来の目標と不良画
素を正確に捕らえる確率を向上させることができる。
【００１９】以上説明したように本実施の形態によれ
ば、本来動作していない赤外線センサ１画素に画素レベ
ルを代入する際に、当該本来動作していない赤外線セン
サ１画素の周辺で正常に動作する画素レベルを参照して
その値を当該本来動作していない赤外線センサ１画素に
代入することで、従来に比べてより正確に目標を探し出
すことができる画像補正装置付き追尾システム３０を実
現できるようになるといった効果を奏する。
ば、本来動作していない赤外線センサ１画素に画素レベ
ルを代入する際に、当該本来動作していない赤外線セン
サ１画素の周辺で正常に動作する画素レベルを参照して
その値を当該本来動作していない赤外線センサ１画素に
代入することで、従来に比べてより正確に目標を探し出
すことができる画像補正装置付き追尾システム３０を実
現できるようになるといった効果を奏する。
【００２０】なお、本発明が上記実施の形態に限定され
ず、本発明の技術思想の範囲内において、各実施の形態
は適宜変更され得ることは明らかである。また上記構成
部材の数、位置、形状等は上記実施の形態に限定され
ず、本発明を実施する上で好適な数、位置、形状等にす
ることができる。また、各図において、同一構成要素に
は同一符号を付している。
ず、本発明の技術思想の範囲内において、各実施の形態
は適宜変更され得ることは明らかである。また上記構成
部材の数、位置、形状等は上記実施の形態に限定され
ず、本発明を実施する上で好適な数、位置、形状等にす
ることができる。また、各図において、同一構成要素に
は同一符号を付している。
【００２１】
【発明の効果】本発明は、本来動作していない赤外線セ
ンサ画素に画素レベルを代入する際に、当該本来動作し
ていない赤外線センサ画素の周辺で正常に動作する画素
レベルを参照してその値を当該本来動作していない赤外
線センサ画素に代入することで、従来に比べてより正確
に目標を探し出すことができる画像補正装置および画像
補正装置付き追尾システムを実現できるようになるとい
った効果を奏する。
ンサ画素に画素レベルを代入する際に、当該本来動作し
ていない赤外線センサ画素の周辺で正常に動作する画素
レベルを参照してその値を当該本来動作していない赤外
線センサ画素に代入することで、従来に比べてより正確
に目標を探し出すことができる画像補正装置および画像
補正装置付き追尾システムを実現できるようになるとい
った効果を奏する。
【図１】本発明の一実施の形態に係る画像補正装置付き
追尾システムを説明するためのブロック図である。
追尾システムを説明するためのブロック図である。
【図２】本発明による不良画素に対する計算例を示して
いる。
いる。
１…赤外線センサ ２…センサ・バイアス回路 ３…ＦＰＮ補正回路 ４…ＲＡＭ（第１記憶回路） ５…ＣＰＵ（演算回路） ６…ＲＡＭ（第２記憶回路） ７…二値化回路 ８…スレッシュホルド設定回路 ９…面積重心追尾処理回路 １０…ジンバル指令回路 １１…ＲＯＭ（第３記憶回路） １２…ＲＯＭ（第４記憶回路） １３…画素特性検出回路 １４…面光源 ２０…画像補正装置 ３０…画像補正装置付き追尾システム
Claims (8)
- 【請求項１】 赤外線センサ内に反応しない不良画素も
しくは反応が過敏な不良画素が存在する場合に、前記赤
外線センサとしての出力に適さない画素に周辺画素の平
均値を入力して前記赤外線センサの全ての画素を活かす
ことにより、画素情報を補正する構成を有することを特
徴とする画像補正装置。 - 【請求項２】 赤外線センサ内の反応しない不良画素も
しくは反応が過敏な不良画素を特定する手段と、 前記赤外線センサ内に反応しない不良画素もしくは反応
が過敏な不良画素が存在する場合に、前記赤外線センサ
としての出力に適さない画素に周辺画素の平均値を入力
して前記赤外線センサの全ての画素を活かす処理を実行
して画素情報を補正する手段を有することを特徴とする
画像補正装置。 - 【請求項３】 前記赤外線センサは、センサ基板上に赤
外線センサ画素が２次元に配置されている抵抗変化型赤
外線アレイセンサであることを特徴とする請求項１また
は２に記載の画像補正装置。 - 【請求項４】 赤外線センサ内に反応しない不良画素も
しくは反応が過敏な不良画素が存在する場合に、前記赤
外線センサとしての出力に適さない画素に周辺画素の平
均値を入力して前記赤外線センサの全ての画素を活かす
ことにより、画素情報を補正する構成を有することを特
徴とする画像補正装置付き追尾システム。 - 【請求項５】 赤外線センサ内の反応しない不良画素も
しくは反応が過敏な不良画素を特定する手段と、 前記赤外線センサ内に反応しない不良画素もしくは反応
が過敏な不良画素が存在する場合に、前記赤外線センサ
としての出力に適さない画素に周辺画素の平均値を入力
して前記赤外線センサの全ての画素を活かす処理を実行
して画素情報を補正する画像補正装置を有することを特
徴とする画像補正装置付き追尾システム。 - 【請求項６】 前記画像補正装置は、 処理前のデータをメモリする第１記憶回路と、 前記第１記憶回路からのデータを処理するための演算回
路と、 前記演算回路での処理後のデータをメモリする第２記憶
回路と、 周辺画素の平均値を算出するための計算式を記憶するた
めの第４記憶回路を有することを特徴とする請求項５に
記載の画像補正装置付き追尾システム。 - 【請求項７】 固定パターンノイズを除去するためのＦ
ＰＮ補正回路と、 あらかじめ設定されたしきい値を境に白と黒に画像処理
する二値化回路と、 前記二値化回路で用いるしきい値を決定するスレッシュ
ホルド設定回路と、 前記スレッシュホルド設定回路で設定されたしきい値を
境に前記二値化回路で白と黒に画像処理されて生成され
た白色部分の面積重心アドレスを算出する追尾計算を実
行するための面積重心追尾処理回路と、 前記面積重心追尾処理回路で算出した白色部分の面積重
心アドレスを参照して本来の目標と不良画素を正確に捕
らえる確率を向上させるジンバル指令回路と、 画素毎の固定パターンノイズをあらかじめ書き込んでお
く第３記憶回路と、 前記赤外線センサが所有する不良画素のアドレスと全画
素の固定パターンノイズを取得するための画素特性検出
回路を有することを特徴とする請求項４乃至６のいずれ
か一項に記載の画像補正装置付き追尾システム。 - 【請求項８】 前記赤外線センサは、センサ基板上に赤
外線センサ画素が２次元に配置されている抵抗変化型赤
外線アレイセンサであることを特徴とする請求項４乃至
７のいずれか一項に記載の画像補正装置付き追尾システ
ム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33453999A JP2001157113A (ja) | 1999-11-25 | 1999-11-25 | 画像補正装置および画像補正装置付き追尾システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33453999A JP2001157113A (ja) | 1999-11-25 | 1999-11-25 | 画像補正装置および画像補正装置付き追尾システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001157113A true JP2001157113A (ja) | 2001-06-08 |
Family
ID=18278551
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP33453999A Pending JP2001157113A (ja) | 1999-11-25 | 1999-11-25 | 画像補正装置および画像補正装置付き追尾システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001157113A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112465707A (zh) * | 2019-09-06 | 2021-03-09 | 浙江宇视科技有限公司 | 红外图像条纹噪声的处理方法、装置、介质及电子设备 |
-
1999
- 1999-11-25 JP JP33453999A patent/JP2001157113A/ja active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112465707A (zh) * | 2019-09-06 | 2021-03-09 | 浙江宇视科技有限公司 | 红外图像条纹噪声的处理方法、装置、介质及电子设备 |
| CN112465707B (zh) * | 2019-09-06 | 2024-03-26 | 浙江宇视科技有限公司 | 红外图像条纹噪声的处理方法、装置、介质及电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7719580B2 (en) | Method and apparatus for compensating for fixed pattern noise in an imaging system | |
| JP4230967B2 (ja) | 撮像装置、撮像装置の制御方法、ｃｍｏｓイメージセンサ | |
| JP4640338B2 (ja) | 撮像装置、撮像結果の処理方法及び集積回路 | |
| US8582005B2 (en) | Method, apparatus and system providing adjustment of pixel defect map | |
| JP2010057114A (ja) | 欠陥検出補正装置及び欠陥検出補正方法 | |
| US20030184666A1 (en) | Image sensor having pixel array and method for automatically compensating black level of the same | |
| CN102870404A (zh) | 摄像设备及其暗电流校正方法 | |
| JP5302511B2 (ja) | ２波長赤外線画像処理装置 | |
| US8203630B2 (en) | Method for correcting image sensor control circuitry having faulty output values and structure therefor | |
| JP2008048246A (ja) | 物理量検出装置、物理量検出装置の駆動方法、固体撮像装置、固体撮像装置の駆動方法、及び撮像装置 | |
| JP2001157113A (ja) | 画像補正装置および画像補正装置付き追尾システム | |
| JP2012070319A (ja) | 画像処理方法、画像処理装置及び画像処理プログラム | |
| JP2008288723A (ja) | 撮像装置、撮像方法、プログラムおよび集積回路 | |
| JP2017076875A (ja) | 撮像装置及び撮像装置の補正方法 | |
| JP2021122106A (ja) | 撮像装置、学習装置、撮像装置の制御方法、学習方法、学習済みモデルおよびプログラム | |
| JP2000101924A (ja) | 画像入力装置における欠陥検出補正装置 | |
| JP2007181064A (ja) | 撮像装置およびその欠陥画素補正方法 | |
| JPH06268922A (ja) | スミア補正装置 | |
| WO2018124056A1 (ja) | 撮像装置及びその制御方法 | |
| US11962923B2 (en) | Image processing system and method of operating the same | |
| US20230262328A1 (en) | Image processing system and operating method thereof | |
| JP2003234966A (ja) | 固体撮像素子 | |
| JP5164726B2 (ja) | 撮像装置 | |
| JP2016220008A (ja) | 撮像装置 | |
| JP5515320B2 (ja) | 撮像装置 |