JP5762525B2 - 画像処理方法および熱画像カメラ - Google Patents

画像処理方法および熱画像カメラ Download PDF

Info

Publication number
JP5762525B2
JP5762525B2 JP2013501661A JP2013501661A JP5762525B2 JP 5762525 B2 JP5762525 B2 JP 5762525B2 JP 2013501661 A JP2013501661 A JP 2013501661A JP 2013501661 A JP2013501661 A JP 2013501661A JP 5762525 B2 JP5762525 B2 JP 5762525B2
Authority
JP
Japan
Prior art keywords
image
vis
region
processing method
new
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013501661A
Other languages
English (en)
Other versions
JP2013524590A (ja
Inventor
シュミーダー マティアス
シュミーダー マティアス
シュトラートマン マーティン
シュトラートマン マーティン
Original Assignee
テスト アクチエンゲゼルシャフト
テスト アクチエンゲゼルシャフト
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by テスト アクチエンゲゼルシャフト, テスト アクチエンゲゼルシャフト filed Critical テスト アクチエンゲゼルシャフト
Publication of JP2013524590A publication Critical patent/JP2013524590A/ja
Application granted granted Critical
Publication of JP5762525B2 publication Critical patent/JP5762525B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/248Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/20Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
    • H04N23/23Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Radiation Pyrometers (AREA)

Description

本発明は、第1の時点に対応する少なくとも1つの第1のIR画像と、それより後の第2の時点に対応する少なくとも1つの第2のIR画像とを含む、複数のIR画像のシーケンスの画像処理方法に関する。
本発明はさらに、画像処理手段を有する熱画像カメラにも関する。
横方向に経過していく過程を記録するため、または長時間測定を行うために、1シーンから複数のIR画像のシーケンスをたとえば映画の形態で作成するのが通常になっている。
手持ち式熱画像カメラの場合、とりわけ小さいオブジェクトを正確に捉えて比較的長時間にわたって検出するのは困難であることが知られている。それゆえ、測定期間中は手持ち式熱画像カメラを三脚等に取り付けるのが望ましい。
本発明の課題は、比較的長い測定期間に及ぶ、熱画像カメラを用いた測定を簡略化することである。
前記課題を解決するため、本発明では、冒頭に述べた形式の画像処理方法において、第1の時点において1つのシーンから第1の画像を作成し、第2の時点において当該シーンから第2の画像を作成し、該第1の画像中で第1の画像領域を選択し、該第1の画像領域に関して該第1の画像から少なくとも1つの特徴を抽出し、該第2の画像中で選択される第2の画像領域に関して抽出される少なくとも1つの特徴と、該第1の画像領域に関して抽出された前記少なくとも1つの特徴との一致が最大限になるように、特徴認識アルゴリズムおよび/またはパターン認識アルゴリズムを用いて該第2の画像中で該第2の画像領域を決定および選択し、該第1の画像における該第1の画像領域の画像位置と該第2の画像における該第2の画像領域の画像位置とを比較することにより、該第1のIR画像中の少なくとも1つの画素と該第2のIR画像中の少なくとも1つの画素とを対応づける並進ベクトルを求める。このような画像処理方法により、本発明では、撮像されたIR画像上で撮像機器すなわち熱画像カメラ自体の制御不能な動きによって動いているように見えるシーン、または本当に動いているシーンを、複数のIR画像にわたって追跡できるという利点が奏される。このことにより、求められた並進ベクトルを用いてこのような動きを補償することができ、このように動きが補償されることにより、数秒またはそれより比較的長い時間にわたる長時間測定を簡単に実現することができる。
構造が特に簡単な実施形態では、前記第1の画像として第1のIR画像を使用し、前記第2の画像として第2のIR画像を使用することができる。
使用される熱画像カメラがさらにVISカメラを備えている場合、前記第1の画像と前記第2の画像とが可視スペクトル領域で撮像されるように構成することもできる。このような構成により、本発明は、VIS画像の特徴抽出をより簡単に行えるようになるという認識を利用することができる。
前記第1の画像ないしは前記第2の画像としてIR画像を使用しない場合、前記並進ベクトルを求めるために、1つの時点において作成された画像の画素(ピクセル)と、該1つの時点に対応するIR画像の画素(ピクセル)との間の所定の対応関係が適用されるように構成することができる。その際にはこの所定の対応関係が、前記IR画像と、各対応する画像とをどのように一致させることができるかの規則を定義する。
特徴の一致が最大限であることを判定できるようにするためには、確率関数を定義して設けることができる。その際には、この確率関数が所定の閾値を超えた場合に、一致が最大限であると判定される。
本発明の画像処理方法はとりわけ、1映像シーケンスの複数のフレームから成る複数のIR画像のシーケンスに適用することができる。
処理時間を可能な限り短くするためには、前記第2の画像領域の選択を、前記シーケンスのさらなる別のIR画像の撮像と同時に行うことができる。
一般的に、選択される前記画像領域の次元は、点状または面状とすることができる。
1つの映像シーケンスの複数のIR画像にわたってオブジェクトを測定および/または観察を行えるようにするためには、該映像シーケンスが、前記第2の時点より時間的に後の第3の時点に対応する第3のIR画像を含み、該第3の時点においてシーンから第3の画像を作成し、前記第2の画像中で、前記第2の画像のすでに求められた前記第2の画像領域から導出された新たな第1の画像領域を選択し、該新たな第1の画像領域に関して少なくとも1つの特徴を前記第2の画像から抽出し、該第3の画像において選択される新たな第2の画像領域に関する少なくとも1つの特徴と前記新たな第1の画像領域に関して抽出された少なくとも1つの特徴との一致が最大限になるように、特徴認識アルゴリズムおよび/またはパターン認識アルゴリズムを用いて該第3の画像において該新たな第2の画像領域を決定および選択し、前記第2の画像における前記新たな第1の画像領域の画像位置と前記第3の画像における前記新たな第2の画像領域の画像位置とを比較することにより、前記第2のIR画像の少なくとも1つの画素と前記第3のIR画像中の少なくとも1つの画素とを対応づける新たな並進ベクトルを求めることができる。有利には、前記第2の画像中の前記新たな第1の画像領域は、第1のステップにおける前記第2の画像中の第2の画像領域と同一であるように選択されるか、または、新たな第2の画像領域は、最初に求められた並進ベクトルを考慮して、とりわけオブジェクトの動きを考慮して選択される。このことにより、映像シーケンスの各画像においてそれぞれ選択および評価される画像領域を飛ばすことができ、このことにより、複数の画像の流れにわたってオブジェクトを連続的に検出することが可能になる。
また、並進ベクトルによって相互に対応づけられる、2つのIR画像の2つの画素間の温度変化を考慮して、すでに求められた前記第2の画像領域から前記新たな第1の画像領域を導出することも可能である。このことの利点は、オブジェクトの温度が時間の経過とともに変化し、この温度変化に起因して形状および/または輝度および/またはコントラストが変化する場合でも、該オブジェクトの動きないしは展開を追跡できることである。
長時間温度測定を実施するためには、並進ベクトルによって相互に対応づけられた、複数の各IR画像の画素に対応する少なくとも2つの温度値のシーケンスを求めて出力することができる。前記少なくとも2つの温度値はとりわけ少なくとも3つである。この実施形態の代わりに択一的に、または付加的に、並進ベクトルによって相互に対応づけられた、複数の各IR画像の画素に対応する少なくとも1つの温度差値のシーケンスを求めて出力することもできる。前記少なくとも1つの温度差値は、とりわけ少なくとも2つである。
透視歪みを補償するためには、前記第1の画像および前記第2の画像ないしは前記IR画像を歪み除去することができる。有利にはこの歪み除去は、特徴抽出および/または画像領域選択の前に実施される。ここで歪み除去とは、実際には平面であるシーンのイメージの透視歪みを補正する画像処理プロセスを指す。この歪み除去を行うことの利点は、歪み除去を行うと、特徴の最大限の一致をより簡単かつより低誤差で求められることである。
第1のIR画像と、該第1のIR画像に対して前記並進ベクトルだけ相対的に移動している第2のIR画像との重なり部分を生成および/または出力することができる。この実施形態により、複数のIR画像における撮像されたオブジェクトの時間的変化を簡単に表現ないしは表示することができる。
冒頭に述べた形式の熱画像カメラでは、前記課題を解決するために、前記画像処理手段が本発明の画像処理方法を実施するように構成されている。このように構成するためには、前記画像処理手段は、動作プログラムを有するデータ処理装置を備えることができる。この動作プログラムは、該動作プログラムを用いて本発明の画像処理方法が実行されるようにプログラミングされている。
特に有利には、前記熱画像カメラは手持ち式熱画像カメラとして構成されており、および/または、前記IR画像および/またはVIS画像を出力するための表示ユニットを有する。
以下、実施例に基づいて本発明を説明するが、本発明はこの実施例に限定されることはない。特許請求の範囲のいずれか1つの特徴または複数の特徴を相互に組み合わせ、および/または、特許請求の範囲の特徴と前記実施例の1つの特徴または複数の特徴とを組み合わせることにより、別の実施例も導き出すことができる。
図面の一部は簡略化されている。
本発明の熱画像カメラの前面を示す斜視図である。 図1の熱画像カメラの後面を示す斜視図である。 本発明の画像処理方法によって処理される第1のIR画像を示す図である。 図3の画像処理方法によって処理される第2のIR画像を示す図である。 本発明の別の画像処理方法を用いて処理される第1の画像と第1のIR画像とを示す図である。 図5の画像処理方法を用いて処理される第2の画像と第2のIR画像とを示す図である。
図1および図2に示された本発明の熱画像カメラ1はIR光学系2を有する。このIR光学系2の後方に、IR画像を撮像するための、詳細に図示されていないIRセンサシステム3が配置されていることは自明である。
前記熱画像カメラ1はさらに、VIS画像を撮像するために構成されたVISカメラ4を有する。
ディスプレイとして構成された表示ユニット5上に、撮像された複数のIR画像ないしはVIS画像を個別に表示するか、または相互に重ねるかないしはフェードイン/フェードアウトさせて表示することができる。この表示形態は、制御エレメント6によって選択ないしは変化させることができる。表示される画像中に、対応する画像位置において測定された温度値をフェードインさせることができる。
前記熱画像カメラ1は、把持部7を有する手持ち式機器として構成されており、この把持部7の把持領域には、IR画像ないしはVIS画像を撮像するためのシャッターボタン8が配置および設置されている。
前記熱画像カメラ1を動作させるために必要なエネルギーは、把持部7または一般的に該熱画像カメラ1に組み込まれたエネルギー供給ユニットによって供給される。
熱画像カメラ1には、図中に詳細に示されていない画像処理手段9が設けられており、該画像処理手段9はデータ処理ユニットを含む。
前記データ処理ユニットには動作プログラムが格納されており、該動作プログラムのプログラムステップが本発明の画像処理方法を実現する。以下、この画像処理方法を詳細に説明する。
図3および図4は、本発明の基本的思想を分かりやすくするため、非常に概略的に、IRセンサシステム3によって撮像された複数のIR画像のシーケンスのうち第1のIR画像10と第2のIR画像11とを示す。これら2つのIR画像10および11はそれぞれ、1シーンの1オブジェクトの異なるイメージ12および13を含む。ここでは、本発明の基本的思想を分かりやすくするため、第2のIR画像11中に、第1のIR画像10中のイメージ12を再度示す。
このように図3と図4とを比較すると、これらの撮像画像間において、前記熱画像カメラ1と、前記オブジェクトを含むシーンとが、相対的に動いたことが明らかである。
この動きを補償または追跡できるようにするためには、第1のIR画像10において第1の画像領域14を選択し、該第1の画像領域14において、該第1のIR画像10の特徴を抽出する。この特徴は、図中には詳細に示されていない。この選択は、たとえば制御エレメント6を使用して手動で行うか、または有意な特徴を同定することによって自動的に行うことができる。その際には、前記特徴として、画像処理において使用できる特徴または既知の特徴のうち任意の特徴を抽出することができ、たとえばエッジや他の幾何学的構造、輝度分布ないしは色分布、または画像内容等を抽出することができる。
次に、第2のIR画像11において選択される第2の画像領域15に関する少なくとも1つの抽出される特徴と、前記第1の画像領域14に関して抽出された少なくとも1つの特徴との一致が最大限となるように、第2のIR画像11において第2の画像領域15を決定および選択する。
その際にはまず、第2のIR画像について、多数の画像領域から多数の特徴を抽出し、前記第1のIR画像10から抽出された特徴との一致が最大限となる特徴を探索する。このようにして、この特徴が抽出された元となる画像領域を第2の画像領域15として選択する。
その際には、確率関数を使用して、複数の前記特徴を評価することができる。その際には、前記確率関数が所定の閾値を超えると、特徴の一致が最大限であることが指示される。
その後、前記第1の画像領域14に対応する画像位置16と前記第2の画像領域15に対応する画像位置17とを比較することにより、とりわけ差分を形成することにより、並進ベクトル18が求められる。
この並進ベクトル18は、両画像10,11の画素16,17を相互に対応付け、また両画像10,11の他の画素も相互に対応づけることにより、両IR画像10,11を相互に前記並進ベクトル18だけ移動させることによって、前記イメージ12,13を近似的または正確に一致させることができるようにする。
ここで両画像位置16,17に対応する温度値を、前記IR画像10,11から導出することができる。これは、撮像された前記オブジェクトの温度の時間的変化を表す。
図中に詳細に示されていない第3のIR画像を使用し、前記第2のIR画像11の第2の画像領域15を新たな第1の画像領域として使用して、本発明の画像処理方法を継続することができる。
求められた前記並進ベクトル18を使用して、さらに、両イメージ12,13が一致するように、両IR画像10,11を相互に移動させてフェードイン/フェードアウトまたは重畳させて前記表示ユニット5に表示することもできる。
図5および図6は、本発明の別の方法の基本的思想を非常に簡略化させて示す図である。ここでは、上述の方法の構成要件と同じ構成要件には同じ符号を付しており、この構成要件については再度改めて説明を行わない。
上述の方法との相違点として、図5および6の方法では、第1のIR画像10と同時またはほぼ同時に第1のVIS画像19を撮像し、第2のIR画像11と同時またはほぼ同時に第2のVIS画像20を撮像する。
これら2つのVIS画像19,20は、可視スペクトル領域で撮像されたオブジェクトないしはシーンのVISイメージ21,22を含む。このオブジェクトないしはシーンは、前記IR画像10,11中のイメージ12,13によっても再生される。
ここでも、本発明の基本的思想を分かりやすくするために、第2のVIS画像20中に前記VIS画像19のVISイメージ21を示すが、このVISイメージ21は、必ず第2のVIS画像20中に含まれるわけではない。
次に、第1のVIS画像19において第1の画像領域14を選択し、この第1の画像領域14に関し、前記第1のVIS画像19から特徴を導出する。
本発明では前記第1の画像領域14の選択は、手動によって行うか、または、最も適している画像領域を特定することにより自動的に行うことができる。
次に、図3,4でもすでに説明したが、第2のVIS画像20において、抽出される特徴と第1の画像領域14に関して抽出された特徴との一致が最大限となる第2の画像領域15を選択する。
最後に、両画像領域14,15の画像位置16,17を比較することにより、これら2つの画像位置16,17を相互に対応づける並進ベクトル18を求める。
求められた並進ベクトル18を、相互に対応付けされるIR画像10,11に当てはめられるようにするためには、熱画像カメラ1内に、第1のVIS画像19の画素と第1のIR画像10の画素との対応関係23、ないしは第2のVIS画像20と第2のIR画像11との対応関係23が格納されている。この対応関係23を用いて、前記並進ベクトル18をIR画像10,11の対応する並進ベクトルに換算することができる。
上述のようにして求められた並進ベクトルだけ、前記第1のIR画像10が第2のIR画像11に対して相対的に移動したことにより、両イメージ12,13を相互に、上述のようにして、完全または近似的に一致させることができる。
グリッド線24によって示されているように、本発明の画像処理方法では、測定誤差の原因となり得る透視歪みを補正するため、両IR画像10,11ないしはVIS画像19,20を歪み除去する。
本発明の画像処理方法は、上述の熱画像カメラ1において連続的に実施される。この連続的な実施では、すでに撮像された画像を評価および処理する間に新たなIR画像10,11ないしは新たなVIS画像19,20を撮像して処理部へ供給する。
このようにして、IR画像10,11の映像シーケンスを実時間で処理し、表示ユニット5において出力することができる。
本発明の熱画像カメラ1では、前記表示ユニット5をタッチパネルディスプレイとして構成することにより、該タッチパネルディスプレイ上でマーキングして前記第1の画像領域14を手動で選択できるようにすることが可能である。
精度を改善するため、前記タッチパネルディスプレイおよび/または前記制御エレメント6を用いて、IR画像10,11において検査対象である画像領域をさらに限定することができる。
前記熱画像カメラ1では、少なくとも2つのIR画像10,11のシーケンスないしは該少なくとも2つのIR画像10,11に対応付けられるVIS画像19,20のシーケンスから、特徴分析によって特徴を抽出し、前記画像9,10,19,20から抽出された特徴の相互間の最大限の一致を決定し、相互間で一致する特徴の画像位置16,17に関し、第1のIR画像10の画素と第2のIR画像11の画素とを対応付ける並進ベクトル18を求める。

Claims (9)

  1. 熱画像カメラ(1)によって撮像された複数のIR画像(10,11)を含む1シーケンスの画像処理方法であって、
    前記シーケンスは少なくとも1つの第1のIR画像(10)と1つの第2のIR画像(11)とを含み、
    前記第1のIR画像(10)は第1の時点に対応し、前記第2のIR画像(11)は、それより後の第2の時点に対応する、画像処理方法において、
    前記第1の時点において、1つのシーンから、付加的なVISカメラ(4)によって撮像される可視スペクトル領域内の第1のVIS画像(19)を作成し、前記第2の時点において、前記シーンから、前記VISカメラ(4)によって撮像される可視スペクトル領域内の第2のVIS画像(20)を作成し、ただし、前記第1のVIS画像(19)は前記第1のIR画像(10)と同時またはほぼ同時に撮像され、かつ、前記第2のVIS画像(20)は前記第2のIR画像(11)と同時またはほぼ同時に撮像され、
    前記第1のVIS画像(19)において第1の画像領域(14)を選択し、
    前記第1の画像領域(14)に関し、少なくとも1つの特徴を前記第1のVIS画像(19)から抽出し、
    前記第2のVIS画像(20)において選択される第2の画像領域(15)に関して抽出される少なくとも1つの特徴と、前記第1の画像領域(14)に関して抽出された少なくとも1つの特徴との一致が最大限となるように、前記第2のVIS画像(20)において前記第2の画像領域(15)を特徴認識アルゴリズムおよび/またはパターン認識アルゴリズムによって決定および選択し、
    前記第1のVIS画像(19)における前記第1の画像領域(14)の画像位置(16)と前記第2のVIS画像(20)における前記第2の画像領域(15)の画像位置(17)とを比較することにより、VIS並進ベクトル(18)を求め、
    前記第1のIR画像(10)の少なくとも1つの画素と前記第2のIR画像(11)の少なくとも1つの画素とを対応付ける相応のIR並進ベクトル(18)に前記VIS並進ベクトルを換算するために、前記第1のVIS画像(19)の画素と前記第1のIR画像(10)の画素との格納された対応関係、ないしは、前記第2のVIS画像(20)の画素と前記第2のIR画像(11)の画素との格納された対応関係を使用し、
    前記IR並進ベクトルによって相互に対応付けられる、複数の各IR画像(10,11)の画素に関し、少なくとも2つの温度値および/または少なくとも1つの温度差値のシーケンスを求めて出力し、
    前記第1のIR画像(10)のイメージ(12)と前記第2のIR画像(11)のイメージ(13)とが相互に一致するように、前記第1のIR画像(10)を前記第2のIR画像(11)に対して相対的に、前記IR並進ベクトルだけ移動させる
    ことを特徴とする、画像処理方法。
  2. 確率関数が所定の閾値を超えた場合に、一致が最大限であると判定する、
    請求項1記載の画像処理方法。
  3. 前記シーケンスの複数のIR画像(10,11)は、1映像シーケンスの複数のコマから形成され、
    および/または、
    前記第2の画像領域(15)の選択を、前記シーケンスのさらなる別のIR画像(10,11)の撮像と同時に行う、
    請求項1または2記載の画像処理方法。
  4. 前記シーケンスは、前記第2の時点より時間的に後の第3の時点に対応する第3のIR画像を含み、
    前記第3の時点において、シーンから第3のVIS画像を作成し、
    前記第2のVIS画像(20)において、前記第2のVIS画像(20)のすでに求められた前記第2の画像領域(15)から導出される新たな第1の画像領域を選択し、
    前記新たな第1の画像領域に関し、前記第2のVIS画像(20)から少なくとも1つの特徴を抽出し、
    前記第3のVIS画像において選択される新たな第2の画像領域に関する少なくとも1つの特徴と、前記新たな第1の画像領域に関して抽出された少なくとも1つの特徴との一致が最大限となるように、前記第3の画像において前記新たな第2の画像領域を特徴認識アルゴリズムおよび/またはパターン認識アルゴリズムによって決定および選択し、
    前記第2のVIS画像(20)における前記新たな第1の画像領域の画像位置と前記第3のVIS画像における前記新たな第2の画像領域の画像位置とを比較することにより、前記第2のIR画像(11)の少なくとも1つの画素と前記第3のIR画像の少なくとも1つの画素とを対応付ける新たなIR並進ベクトルを求める、
    請求項1から3までのいずれか1項記載の画像処理方法。
  5. 前記第2のVIS画像(20)における前記新たな第1の画像領域は、前記第2のVIS画像(20)においてすでに求められた前記第2の画像領域(15)と同一である、
    請求項1から4までのいずれか1項記載の画像処理方法。
  6. 記少なくとも2つの温度値はとりわけ少なくとも3つであり、前記少なくとも1つの温度差値はとりわけ少なくとも2つである、
    請求項1から5までのいずれか1項記載の画像処理方法。
  7. とりわけ前記特徴の抽出の前に、前記第1の画像(19)および前記第2の画像(20)、および/または、前記IR画像(10,11)を歪み除去する、
    請求項1から6までのいずれか1項記載の画像処理方法。
  8. 前記第1のIR画像(10)と、前記第1のIR画像(10)に対して前記IR並進ベクトルだけ相対的に移動した第2のIR画像(11)との重なり部分を生成および/または出力する、
    請求項1から7までのいずれか1項記載の画像処理方法。
  9. 請求項1から8までのいずれか1項記載の画像処理方法を実施するように構成された画像処理手段(9)を備えていることを特徴とする、熱画像カメラ(1)。
JP2013501661A 2010-03-30 2011-03-12 画像処理方法および熱画像カメラ Active JP5762525B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102010013377.9 2010-03-30
DE102010013377A DE102010013377B4 (de) 2010-03-30 2010-03-30 Bildverarbeitungsverfahren und Wärmebildkamera
PCT/EP2011/001229 WO2011124309A1 (de) 2010-03-30 2011-03-12 Bildverarbeitungsverfahren und wärmebildkamera

Publications (2)

Publication Number Publication Date
JP2013524590A JP2013524590A (ja) 2013-06-17
JP5762525B2 true JP5762525B2 (ja) 2015-08-12

Family

ID=44317730

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013501661A Active JP5762525B2 (ja) 2010-03-30 2011-03-12 画像処理方法および熱画像カメラ

Country Status (7)

Country Link
US (1) US9100595B2 (ja)
JP (1) JP5762525B2 (ja)
CN (1) CN102823233B (ja)
DE (1) DE102010013377B4 (ja)
RU (1) RU2580076C2 (ja)
SE (1) SE537484C2 (ja)
WO (1) WO2011124309A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2817587B1 (de) * 2012-02-21 2018-12-19 Testo AG Messverfahren und messvorrichtung zur herstellung eines 3d-ortaufgelösten messergebnisses in einem nicht-sichtbaren spektralbereich
US9282259B2 (en) 2012-12-10 2016-03-08 Fluke Corporation Camera and method for thermal image noise reduction using post processing techniques
US10602082B2 (en) * 2014-09-17 2020-03-24 Fluke Corporation Triggered operation and/or recording of test and measurement or imaging tools
WO2016065261A1 (en) 2014-10-24 2016-04-28 Fluke Corporation Imaging system employing fixed, modular mobile, and portable infrared cameras with ability to receive, communicate, and display data and images with proximity detection
US10116885B2 (en) 2015-04-05 2018-10-30 Hema Imaging Llc Systems and approaches for repeated thermal imaging determinations
US20170078544A1 (en) 2015-09-16 2017-03-16 Fluke Corporation Electrical isolation for a camera in a test and measurement tool
WO2017070629A1 (en) 2015-10-23 2017-04-27 Fluke Corporation Imaging tool for vibration and/or misalignment analysis
US10506193B2 (en) * 2016-07-19 2019-12-10 Snap-On Incorporated Methods and systems for displaying a thermal image and information related to servicing a vehicle
DE102016219391A1 (de) * 2016-10-06 2018-04-12 Robert Bosch Gmbh Verfahren zu einer Rauschoptimierung einer Kamera, insbesondere einer handgehaltenen Wärmebildkamera
US20230175958A1 (en) * 2021-12-06 2023-06-08 Honeywell International Inc. Vibration correction methods and systems for gas detecting apparatuses

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0672327A4 (en) * 1992-09-08 1997-10-29 Paul Howard Mayeaux VISION CAMERA AND VIDEO PRETREATMENT SYSTEM.
RU2140720C1 (ru) * 1994-09-28 1999-10-27 Кариженский Евгений Яковлевич Способ получения изображений и устройство для реализации способа
US6985172B1 (en) * 1995-12-01 2006-01-10 Southwest Research Institute Model-based incident detection system with motion classification
DE19715983C1 (de) * 1997-04-17 1998-09-24 Aeg Infrarot Module Gmbh Verfahren zum Korrigieren der Grauwerte von Bildern einer digitalen Infrarot-Kamera
US7035475B1 (en) * 1999-06-17 2006-04-25 Raytheon Company Non-traditional adaptive non-uniformity compensation (ADNUC) system employing adaptive feedforward shunting and operating methods therefor
JP2001007987A (ja) * 1999-06-24 2001-01-12 Fuji Photo Film Co Ltd 画像処理方法、画像読み取り装置およびその調整方法
KR100725192B1 (ko) * 1999-12-28 2007-06-08 소니 가부시끼 가이샤 신호 처리 장치 및 방법, 및 기록 매체
JP4491965B2 (ja) * 1999-12-28 2010-06-30 ソニー株式会社 信号処理装置および方法、並びに記録媒体
JP2004520878A (ja) * 2000-12-15 2004-07-15 オムニコーダー テクノロジーズ インコーポレイテッド 赤外線検知器を用いた生理機能測定方法及び装置
SG96681A1 (en) * 2001-02-20 2003-06-16 Inventio Ag Method of generating hoistway information to serve an elevator control
US7016550B2 (en) * 2002-04-19 2006-03-21 Lockheed Martin Corporation Scene-based non-uniformity offset correction for staring arrays
JP3886769B2 (ja) * 2001-10-26 2007-02-28 富士通株式会社 補正画像生成装置および補正画像生成プログラム
JP2005229494A (ja) * 2004-02-16 2005-08-25 Matsushita Electric Ind Co Ltd 撮像装置
JP2005286656A (ja) * 2004-03-29 2005-10-13 Fuji Photo Film Co Ltd 撮像装置、車両、および運転支援方法
EP1831657B1 (en) * 2004-12-03 2018-12-05 Fluke Corporation Method for a visible light and ir combined image camera
WO2006105541A2 (en) * 2005-03-30 2006-10-05 Sarnoff Corporation Object identification between non-overlapping cameras without direct feature matching
US7622715B2 (en) * 2005-04-11 2009-11-24 Fluke Corporation Method and apparatus for capturing and analyzing thermo-graphic images of a moving object
JP2006333133A (ja) * 2005-05-26 2006-12-07 Sony Corp 撮像装置、撮像方法、プログラム、プログラム記録媒体並びに撮像システム
JP4719553B2 (ja) 2005-11-04 2011-07-06 キヤノン株式会社 撮像装置、撮像方法、コンピュータプログラム、及びコンピュータ読み取り可能な記憶媒体
EP1811771B1 (en) * 2006-01-20 2009-04-29 Fluke Corporation Camera with visible light and infrared image blending
JP2007334625A (ja) * 2006-06-15 2007-12-27 Sony Corp 画像処理方法、画像処理方法のプログラム、画像処理方法のプログラムを記録した記録媒体及び画像処理装置
US7805020B2 (en) * 2006-07-25 2010-09-28 Itt Manufacturing Enterprises, Inc. Motion compensated image registration for overlaid/fused video
US20100157056A1 (en) * 2007-05-20 2010-06-24 Rafael Advanced Defense Systems Ltd. Tracking and imaging data fusion
JP4872829B2 (ja) * 2007-06-28 2012-02-08 ソニー株式会社 撮像装置
US20090086027A1 (en) * 2007-10-01 2009-04-02 Benjamin Antonio Chaykin Method And System For Providing Images And Graphics
US8018649B2 (en) * 2008-01-22 2011-09-13 Flir Systems Ab IR camera
US7995859B2 (en) * 2008-04-15 2011-08-09 Flir Systems, Inc. Scene based non-uniformity correction systems and methods
US8203606B2 (en) * 2008-11-07 2012-06-19 Toyota Motor Engineering & Manufacturing North America, Inc. Gradient image processing
DE102009050474B4 (de) * 2009-10-23 2013-08-29 Testo Ag Bildgebende Inspektionsvorrichtung
DE102010008456A1 (de) * 2010-02-18 2011-08-18 Testo AG, 79853 Verfahren zur Extraktion eines IR-Bildes und Wärmebildkamera

Also Published As

Publication number Publication date
US20130028477A1 (en) 2013-01-31
US9100595B2 (en) 2015-08-04
RU2580076C2 (ru) 2016-04-10
WO2011124309A1 (de) 2011-10-13
RU2012145033A (ru) 2014-05-10
JP2013524590A (ja) 2013-06-17
SE537484C2 (sv) 2015-05-19
CN102823233A (zh) 2012-12-12
SE1251032A1 (sv) 2012-10-17
DE102010013377A1 (de) 2011-10-06
CN102823233B (zh) 2015-09-30
DE102010013377B4 (de) 2012-02-02

Similar Documents

Publication Publication Date Title
JP5762525B2 (ja) 画像処理方法および熱画像カメラ
WO2018061925A1 (ja) 情報処理装置、長さ測定システム、長さ測定方法およびプログラム記憶媒体
JP5538667B2 (ja) 位置姿勢計測装置及びその制御方法
US8179448B2 (en) Auto depth field capturing system and method thereof
JP2017528731A5 (ja)
JP2014178957A (ja) 学習データ生成装置、学習データ作成システム、方法およびプログラム
JP2008286756A (ja) 位置姿勢計測装置及びその制御方法
JP2011209815A (ja) 三次元モデリング装置、三次元モデリング方法、ならびに、プログラム
JP7489960B2 (ja) 画像の合成のための方法及びデータ処理システム
JP6638723B2 (ja) 画像解析装置、画像解析方法、及び、画像解析プログラム
US8340398B2 (en) Correlation extract method for generating 3D motion data, and motion capture system and method for easy composition of humanoid character on real background image using the same
TW201225658A (en) Imaging device, image-processing device, image-processing method, and image-processing program
KR20110071854A (ko) 입체 영상 시스템에서 영상 데이터의 색상 보정 장치 및 방법
KR101801100B1 (ko) 몰입형 콘텐츠 제작 지원용 영상 제공 장치 및 방법
KR102096576B1 (ko) 영상 합성 방법 및 장치
KR100916588B1 (ko) 3차원 모션 데이터 생성을 위한 상관 관계 추출 방법과이를 이용한 실사 배경 영상에 인체형 캐릭터의 용이한합성을 위한 모션 캡쳐 시스템 및 방법
US8736706B1 (en) Method and system for generating high resolution composite images
JP2005063041A (ja) 3次元モデリング装置、方法、及びプログラム
JP2008128771A (ja) 分光情報および形状情報同時取得装置及び情報取得方法
JP2008067093A (ja) カメラシステム、画像処理装置、および画像処理プログラム
KR20190082129A (ko) 동영상을 이용하여 3차원 이미지를 렌더링하는 장치 및 방법
CN112422848B (zh) 一种基于深度图和彩色图的视频拼接方法
Gamage et al. A 3D Impression acquisition system for forensic applications
KR101326095B1 (ko) 영상융합장치 및 그 방법
CN111199203A (zh) 一种基于手持设备的动作捕捉方法及系统

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140829

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140929

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141205

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150609

R150 Certificate of patent or registration of utility model

Ref document number: 5762525

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250