JP2011150733A - 非均一分解能で合成イメージを用意する方法 - Google Patents

非均一分解能で合成イメージを用意する方法 Download PDF

Info

Publication number
JP2011150733A
JP2011150733A JP2011103276A JP2011103276A JP2011150733A JP 2011150733 A JP2011150733 A JP 2011150733A JP 2011103276 A JP2011103276 A JP 2011103276A JP 2011103276 A JP2011103276 A JP 2011103276A JP 2011150733 A JP2011150733 A JP 2011150733A
Authority
JP
Japan
Prior art keywords
image
given
scene
intensity
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011103276A
Other languages
English (en)
Other versions
JP5329601B2 (ja
Inventor
Gene A Grindstaff
エー. グリンドスタッフ ジェネ
Sheila G Whitaker
ジー. ウィタカー シーラ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intergraph Corp
Original Assignee
Intergraph Software Technologies Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intergraph Software Technologies Co filed Critical Intergraph Software Technologies Co
Publication of JP2011150733A publication Critical patent/JP2011150733A/ja
Application granted granted Critical
Publication of JP5329601B2 publication Critical patent/JP5329601B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Image Processing (AREA)
  • Studio Circuits (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】非均一分解能で合成イメージを用意する好適な方法を提供すること。
【解決手段】a.第一の一連のイメージを提供することであって、各イメージが第一シーンの部分に対応し、少なくとも二つのイメージが該第一シーンの重複領域を含むことと、b.該第一シーンの該少なくとも二つのイメージを整列させることと、c.該第一シーンの該少なくとも二つのイメージの重複の領域を平均化することと、d.該第一シーンの該少なくとも二つのイメージの非重複部分と、該第一シーンの該少なくとも二つのイメージの該平均化された重複部分とから第一合成イメージを形成すること、を含む、該第一シーンの該第一合成イメージを用意する方法であって、それによって、該一連のイメージの分解能よりも該合成イメージの部分に対してより高い分解能を提供する方法。
【選択図】なし

Description

本発明は一般にイメージ分析と関連し、より具体的には、本発明はイメージ・データの比較に関連する。
航空写真からイメージを用意することは、高価で時間のかかるプロセスである。航空写真からのイメージ・データは、下向きに見下ろす高分解能航空写真を撮影し、フイルムを現像し、写真をモザイク・パターンに集めて登録し、合成写真をデジタル化することによって、用意される。このプロセスは高価で時間がかかる。
モーション・ピクチャまたはビデオ・データ・ストリームから安価で素早くシーンの高分解能合成イメージを用意する方法が必要である。
本発明の様々な実施形態で、装置と方法は、地勢風景のようなシーンの合成イメージを、ビデオ・データ・ストリームから用意する。ビデオ・ストリームは、一連のイメージを含んでおり、そのうちのいくつかのイメージはシーンの重複範囲を含む。イメージは、変換され、整列され、そして、イメージの重複範囲は平均化される。重複するイメージの平均化は、より高い明白な分解能を有利に提供する。シーンの合成イメージの部分が生成されたので、これらの部分はすぐに、同じシーンの以前に取得したイメージからの有意な差の識別を含むリアルタイム処理に利用できる。シーンの合成イメージは、その後の処理と比較とのために保存され得る。
本発明の一局面にしたがって、装置と方法はシーンの二つの合成イメージの差を識別できる。例えば、二つのイメージは、ある風景のアーカイブされた合成イメージと、同じ風景のリアルタイム・イメージ・データ・ストリームから用意された合成イメージとであり得る。第二の合成イメージが用意されている間に、比較がリアルタイムで行われ得る。実施形態は、首尾一貫した差の結果を生み出すために、比較は季節の変化に対して実質的に不変であることを保証するような技術(例えば、光)を使用し得る。
本発明の説明的な実施形態は、コンピュータ読み込み可能なプログラム・コードを有するコンピュータ使用可能な媒体を有するコンピュータ・プログラム製品としてインプリメントされる。コンピュータ読み込み可能なコードは、コンピュータ・システムによって、従来のプロセスにしたがって読み込まれ、かつ、利用され得る。
(項目1)
a.第一の一連のイメージを提供することであって、各イメージが第一シーンの部分に対応し、少なくとも二つのイメージが該第一シーンの重複領域を含むことと、
b.該第一シーンの該少なくとも二つのイメージを整列させることと、
c.該第一シーンの該少なくとも二つのイメージの重複の領域を平均化することと、
d.該第一シーンの該少なくとも二つのイメージの非重複部分と、該第一シーンの該少なくとも二つのイメージの該平均化された重複部分とから第一合成イメージを形成すること、
を含む、該第一シーンの該第一合成イメージを用意する方法であって、
それによって、該一連のイメージの分解能よりも該合成イメージの部分に対してより高い分解能を提供する方法。
(項目2)
前記第一の一連のイメージを提供することが、ビデオ・カメラでビデオ・シーケンスを取り込むことを含む、項目1に記載の方法。
(項目3)
前記第一シーンが地勢風景である、項目1に記載の方法。
(項目4)
前記第一の一連のイメージを提供することが、該第一の一連のイメージを変換することを含む、項目1に記載の方法。
(項目5)
前記第一の一連のイメージを変換することが、該第一の一連のイメージを二次元表面に射影することを含む、項目4に記載の方法。
(項目6)
前記少なくとも二つのイメージを整列させることが、 該少なくとも二つのイメージの部分を相関させることを含む、項目1に記載の方法。
(項目7)
前記第一合成イメージと第二シーンの第二合成イメージとを比較するための項目1に記載の方法であって、該方法が、
e.該第一合成イメージを保存することと、
f.該第二合成イメージを用意することであって、
i.第二の一連のイメージを提供することであって、各イメージが該第二シーンの部分に対応し、少なくとも二つのイメージが該第二シーンの重複領域を含むことと、
ii.該第二シーンの該少なくとも二つのイメージを整列させることと、
iii.該第二シーンの該少なくとも二つのイメージの重複の領域を平均化することと、
iv.該第二シーンの該少なくとも二つのイメージの非重複部分と、該第二シーンの該少なくとも二つのイメージの該平均化された重複部分とから該第二合成イメージを形成することと
を含む、ことと、
g.該第一合成イメージと該第二合成イメージとの重複部分を、ほぼ等しい平均強度まで調節することと、
h.該強度が調節されたイメージの重複部分間の差を計算すること、および、該強度が調節されたイメージの重複部分の領域であって、該差が閾値を超えている、領域を識別することと、
を含む、方法。
(項目8)
前記強度が調節されたイメージの重複部分の領域であって、差が閾値を超えている、領域を識別することが、前記第二合成イメージを用意することが完了する前に始まる、項目7に記載の方法。
(項目9)
前記イメージ間の差を計算することの前に、前記合成イメージからエッジが除去される、項目7に記載の方法。
(項目10)
第一シーンの第一合成イメージを用意するためコンピュータ・システム上で使われるコンピュータ・プログラム製品であって、該コンピュータ・プログラム製品が、コンピュータ読み取り可能プログラム・コードを有するコンピュータ使用可能媒体を備え、該コンピュータ読み取り可能プログラム・コードは、
a.第一の一連のイメージを提供するためのプログラム・コードであって、各イメージが該第一シーンの部分に対応し、少なくとも二つのイメージが該第一シーンの重複領域を含む、プログラム・コードと、
b.該第一シーンの該少なくとも二つのイメージを整列させるためのプログラム・コードと、
c.該第一シーンの該少なくとも二つのイメージの重複の領域を平均化するためのプログラム・コードと、
d.該第一シーンの該少なくとも二つのイメージの非重複部分と、該第一シーンの該少なくとも二つのイメージの該平均化された重複部分とから第一合成イメージを形成するためのプログラム・コードと
を含み、
それによって、該一連のイメージの分解能よりも該合成イメージの部分に対してより高い分解能を提供する、コンピュータ・プログラム製品。
(項目11)
前記第一の一連のイメージを提供することが、ビデオ・カメラでビデオ・シーケンスを取り込むことを含む、項目10に記載のコンピュータ・プログラム製品。
(項目12)
前記第一シーンが地勢風景である、項目10に記載のコンピュータ・プログラム製品。
(項目13)
前記第一の一連のイメージを提供するためのプログラム・コードが、該第一の一連のイメージを変換するためのプログラム・コードを含む、項目10に記載のコンピュータ・プログラム製品。
(項目14)
前記第一の一連のイメージを変換するためのプログラム・コードが、該第一の一連のイメージを二次元表面に射影するためのプログラム・コードを含む、項目13に記載のコンピュータ・プログラム製品。
(項目15)
前記第一シーンの前記少なくとも二つのイメージを整列させるためのプログラム・コードが、該少なくとも二つのイメージの部分を相関させるためのプログラム・コードを含む、項目10に記載のコンピュータ・プログラム製品。
(項目16)
前記第一合成イメージと第二シーンの第二合成イメージとを比較するための項目10に記載のコンピュータ・プログラム製品であって、該コンピュータ・プログラム製品が、
e.該第一合成イメージを保存するためのプログラム・コードと、
f.該第二合成イメージを用意するためのプログラム・コードであって、
i.第二の一連のイメージを提供するためのプログラム・コードであって、各イメージが該第二シーンの部分に対応し、少なくとも二つのイメージが該第二シーンの重複領域を含む、プログラム・コードと、
ii.該第二シーンの該少なくとも二つのイメージを整列させるためのプログラム・コードと、
iii.該第二シーンの該少なくとも二つのイメージの重複の領域を平均化するためのプログラム・コードと、
iv.該第二シーンの該少なくとも二つのイメージの非重複部分と、該第二シーンの該少なくとも二つのイメージの該平均化された重複部分とから該第二合成イメージを形成するためのプログラム・コードと
を含む、プログラム・コードと、
g.該第一合成イメージと該第二合成イメージとの重複部分を、ほぼ等しい平均強度まで調節するためのプログラム・コードと、
h.該強度が調節されたイメージの間の差を計算すること、および、差が閾値を超えたイメージの領域を識別することのためのプログラム・コードと
を備えるコンピュータ・プログラム製品。
(項目17)
前記差が閾値を超えたイメージの領域を特定するためのプログラム・コードが、前記第二イメージの合成イメージを用意するためのプログラム・コードが完了する前に実行されるように構成されている、項目16に記載のコンピュータ・プログラム製品。
(項目18)
前記プログラム・コードが、前記イメージ間の差を計算することの前に、前記合成イメージからエッジが検出され除去されるように構成されている、項目16に記載のコンピュータ・プログラム製品。
本発明の前述の特徴は、添付図面を参照と共に、以下に続く詳細な記述を参照することのよって、より容易に理解できる。
図1は、本発明の一実施形態にしたがって、ビデオ・データ・ストリーム・イメージを2D図面に変換するプロセスのフロー・ダイアグラムである。 図2は、本発明の一実施形態にしたがって、ビデオ・データ・ストリーム・フレームを前に処理したフレームへ整列させるプロセスを示したフロー・ダイアグラムである。 図3は、本発明の一実施形態にしたがって、イメージ・タイル・データの平均化を示したフロー・ダイアグラムである。 図4は、本発明の一実施形態にしたがって、有意な差を決定するように二つの合成イメージを比較するプロセスを説明したフロー・ダイアグラムである。
本発明の様々な実施形態で、装置と方法は、地勢風景のようなシーンの合成イメージを、ビデオ・データ・ストリームから用意する。ビデオ・ストリームは、一連のイメージを含んでおり、そのうちのいくつかのイメージはシーンの重複範囲を含む。イメージは、変換され、整列され、そして、イメージの重複範囲は平均化される。重複するイメージの平均化は、より高い明白な分解能を有利に提供する。シーンの合成イメージの部分が生成されたので、これらの部分はすぐに、同じシーンの以前に取得したイメージからの有意な差の識別を含むリアルタイム処理に利用できる。シーンの合成イメージは、その後の処理と比較のために保存され得る。
本発明のもう一つの局面にしたがって、装置と方法は、リアルタイムにビデオ・データ・ストリームの差を識別できる。シーンの一つのイメージは保存されたイメージであり得、もう一つの別のイメージはリアルタイムに処理されたイメージであり得る。または、両方のイメージが保存されたイメージであり得る。違うときに取得された同じシーンの合成イメージは、本発明の前に記述された実施形態にしたがって用意される。シーンの二つのイメージは、同じ場所に対応する各イメージのサブタイルを同じ平均強度へ調整することによって、比較される。そして、サブタイル間の絶対的な差は、計算され、特定の閾値と比較される。タイルのいずれかの領域の差が閾値より高い場合は、その特定の領域の平均強度は二つのイメージの間で等しくさせられ得る。差がまだ閾値より高い場合は、その領域はさらなる精査のために印を付けられる。必要に応じて、結果として差のイメージは、当該技術分野で公知であるように、前に規定されたパターンを認識する、分析パッケージに引き渡され得る。結果は、次のビデオ・データ・ストリームにおける所定の変化やイベントの自動的かつリアルタイムでの認識である。
本発明の説明的な実施形態は、コンピュータ読み込み可能なプログラム・コードを有するコンピュータ使用可能な媒体を有するコンピュータ・プログラム製品としてインプリメントされ得る。コンピュータ読み込み可能なコードは、コンピュータ・システムによって、従来のプロセスにしたがって読み込まれ、かつ、利用され得る。例証となる実施形態の詳細は以下で議論される。
(イメージ合成器)
本発明の一実施形態では、装置と方法は、一連のビデオ・イメージからシーンの合成イメージを用意する。イメージ合成器は、イメージ変換モジュール、イメージ整列モジュール、および、イメージ平均化モジュールを含む。
イメージがアーカイブされ、および/または、もう一つのイメージと比較得るように、フィルターは、連続してリアルタイムで動作する。イメージ合成器の目的は、シーンの細切れの時間不変イメージを生成することである。
(A.イメージ変換)
図1に示されるように、イメージ変換モジュール100は、110でGPS,ポインティング・ベクトル、範囲、および、平面マップに射影され得るようにビデオを変換するためにビデオ・ストリームが提供されるカメラ・ビュー・コーン情報を使用する。変換情報は110で、ユーザー定義ビュー・コーンのような他の源、または、イメージ整合のための自動的に定義されたモニュメント点から、来ることができる。単純な3D変換行列が、ビデオ・イメージを線形な形式で平らな表面上に射影するように、120で計算される。結果となるイメージは130で、カメラの遠近画法が補償されるように、多重座標軸に関してスケールおよび回転される。各ピクセルは行列操作によって掛け合わされる。変換は140で非正方形ピクセルに対して補償し、またスケーリング・プロセスの一部として双立法補間法を使い得る。
(B.イメージ整列)
図2で示されるように、イメージの一部分は200で整列される。一度、イメージが平面上に射影されたら、補償された後、イメージは、ピクセルが正方形となるように、ほぼビデオ分解能の大きさであるタイルに分割される。各タイルは、それから、210で、九つのサブタイルに再分される。各サブタイルは、220で、重複する、前に保存されたタイルと比較される。プロセスは、現在の位置にあるタイルを他の四つの隣接する位置と比較することから成る。隣接する位置は、サブタイルの上、下、左、および、右のサブタイルの中心から50パーセントのオフセットである。オフセット・イメージは、存在する重複イメージと、単純な相関技術を使って比較される。回転およびスケーリング行列は230で、タイル全体が0.1ピクセルまでの精度で隣接する重複されたイメージと正確に整合するように、タイル全体を調整するために計算される。サブタイルは、相関が最大になるまで、または、繰り返しの最大数が生じるまで、反復プロセスにおいて240で変換される。重複するイメージがない場合は、タイルは合成イメージとして保存される。イメージが相関しない場合は、それが有効なイメージかチェックして検証される。それが有効なイメージの場合、イメージ平均化モジュール250に渡される。
(C.イメージ平均化)
図3で説明されるように、イメージ平均化モジュールは300でタイルがどこで存在するタイルと重複するかを、イメージ・データの値を310で比較することで決定する。320で有効なデータが新しいタイルに存在する場合、および、存在する合成イメージ・タイルがその領域で有効なデータを有する場合、重複するイメージは、改良された動作平均化技術を使って330で平均化される。各タイルはサブピクセル整列に調節されているので、結果となる平均化された合成イメージは、ビデオ・データ・ストリームから利用できる、より高い明白な分解能を有する。
新しいタイルの部分が340で合成タイルの中に存在するデータを有しない場合、350のように、新しい情報が合成イメージの中に加えられる。合成イメージの一部がデータを有するが、360で新しいタイルは有しない場合、合成イメージの中の存在するデータは370のように残存する。
一度イメージタイルが合成領域の範囲の外へ動いたら、それはアーカイブされ得る。本発明の特定の実施形態では、アーカイバ・モジュールは、改良されたクアド木(quad−tree)ファイル保存システムにアーカイブするためにタイルの幾何学的位置を使い得る。木は、幾何学的位置によってイメージへ極めて早くアクセスすることを許すように見出し付けが成されている。木の頂上は木全体の範囲を保存している。木は幾何学的に、全領域の部分領域を表す枝に再分されている。新しいイメージが木に挿入されるにしたがって、木の全範囲は細切れに成長し得る。問い合わせが来ると、木の登録されていない枝がヌルの値を返し、それによって空の領域が素早く決定され得る。
(イメージ比較器)
図4で示されるように、イメージ比較器モジュールは、イメージ合成器に組み込まれたタイルまたはイメージの一部を取り込み、400でタイルと、保存されたイメージであり得るシーンの第二イメージの対応する位置と比較する。重複する領域(すなわち、シーンにおいて同じ位置に対応する領域)は410で調節され、それによって、各イメージの一部は同じ平均強度となる。二つの重複するイメージの部分の間の絶対的な差が420で計算される。いずれかの領域の差が430でユーザー定義閾値を超えている場合、入力合成イメージは有意な差の存在する領域で調べられる。その領域の平均強度が440で補償されて、それによって第二イメージの対応する領域と等しくなる。その領域に対して、絶対的な差が再度計算される。その差が依然として450でユーザー定義閾値を超えている場合、460でコントラストと強度がユーザーに対して強調され得るように印を付けられる。必要に応じて、結果として差のイメージは、当該技術分野で公知であるように、前に規定されたパターンを認識する、分析パッケージに引き渡され得る。イメージ比較器は、470で、次のビデオ・データ・ストリームにおける所定の変化やイベントの自動的かつリアルタイムでの認識を有利に提供し得る。
本発明のこの局面の特定の実施形態では、イメージ中の対象のエッジは、二つのイメージが比較される前に、検出され消去される。対象は、見る角度のわずかな違いによって、しばしば異なる。これらのエッジが消去された場合、対象の内部だけが比較される。この手順は、わずかな誤りの明確な比較しか結果として引き起こさない。
次の点に注意する。ビデオ・データ・ストリームは例示的なもので、全実施形態の範囲を制限することを意図していない。むしろ、様々な実施形態が、図表を用いて表され何らかの媒体に記録され得るイメージ・データに適用される。説明的な実施形態では、イメージ・データは2Dで記録可能である。同様にして、環境の対象(例えば、風景)の議論は例示的である。例えば、説明的な実施形態が、興味のある特定のアイテムの変化を検出するために、室内(例えば、銀行を含むビル、または、飛行機の格納庫)で使われ得る。
本発明の様々な実施形態が、いかなる従来のコンピュータ・プログラミング言語で少なくとも部分的にインプリメントされ得る。例えば、いくつかの実施形態は、手続きプログラミング言語(例えば「C」)、または、オブジェクト指向プログラミング言語(例えば「C++」)でインプリメントされ得る。本発明の他の実施形態は、予めプログラムされたハードウェア要素(例えば、特定用途向け集積回路、FPGA、および、デジタル信号プロセッサ)、または、他の関係する部品として、インプリメントされ得る。
いくつかの実施形態では、開示された装置と方法が、コンピュータ・システムと共に使用するコンピュータ・プログラム製品として、インプリメントされ得る。このようなインプリメンテーションは、コンピュータ読み込み可能媒体(例えば、ディスケット、CD−ROM,ROM、または、固定ディスク)のような実体のある媒体、または、媒体を介してネットワークに接続された通信アダプタのような、モデムまたは他のインターフェイス・デバイスを通じての、コンピュータ・システムへ送信可能なものの、どちらかに固定された、一連のコンピュータ命令を含み得る。媒体は、実体のある媒体(例えば、光学的またはアナログ通信ライン)、または、無線技術でインプリメントされた媒体(例えば、WIFI、マイクロ波、赤外線またはその他の送信技術)の、どちらかであり得る。一連のコンピュータ命令は、システムに関してここで前に記述された機能の全部または一部を具体化し得る。
当業者は、このようなコンピュータ命令が、多くのコンピュータ・アーキテクチャまたはオペレーティング・システムを共に使用することで、いくつものプログラミング言語に書き下せ得ることを理解すべきである。さらには、このような命令は、半導体、磁気的、光学的、または他のメモリ・デバイスのような、どのようなメモリ・デバイスにも保存され得、また、光学的、赤外線、マイクロ波、または他の送信技術のような、どのような通信技術を使っても送信され得る。
その他の方法の中で、このようなコンピュータ・プログラム製品が、印刷された文書または電子文書を添えた取り外し可能媒体(例えば、収縮包装されたソフトウェア)、コンピュータ・システムに予めロードされたもの(例えば、システムROMまたは固定されたディスク上で)として配布され得、または、ネットワーク上のサーバまたは電子公報ボード(例えば、インターネットまたはWorld Wide Web)から配布され得る。当然、本発明のいくつかの実施形態は、ソフトウェア(例えば、コンピュータ・プログラム製品)とハードウェアとの両方の組み合わせとしてインプリメントされ得る。本発明のさらに他の実施形態が、完全にハードウェアとしてまたは完全にソフトウェアとしてインプリメントされる。
上の議論は本発明の様々な例示的実施形態を開示しているが、当業者が、本発明の真の範囲から逸脱せずに本発明のいくつかの有利さに到達する様々な改良を加えることができることは、明らかである。

Claims (14)

  1. コンピュータ化された方法であって、前記コンピュータ化された方法は、シーンの第一イメージと前記シーンの第二イメージとを比較する方法であり、
    前記方法は、
    a.前記シーンの第一イメージと前記シーンの第二イメージとを提供することと、
    b.前記第一イメージの所与の領域の強度を、前記所与の領域の平均強度が前記第二イメージの所与の領域の平均強度とほぼ等しくなるように調節することであって、前記第一イメージの所与の領域および前記第二イメージの所与の領域は、前記シーンにおいて同じ位置に対応する、ことと、
    c.調節後の前記第一イメージの所与の領域の各部分と、前記第二イメージの所与の領域の各対応する部分との間の強度における絶対的な差を計算すること、および、前記第一イメージの所与の領域のうちの選択された部分であって、前記絶対的な差が閾値を超えている部分を識別することと、
    d.前記第一イメージの所与の領域のうちの前記選択された部分の強度を、前記第一イメージの所与の領域のうちの前記選択された部分の平均強度が前記第二イメージの所与の領域の対応する部分の平均強度とほぼ等しくなるように調節すること、および、前記第一イメージの所与の領域のうちの前記選択された部分であって、前記第一イメージの所与の領域のうちの前記選択された部分と前記第二イメージの中の対応する領域との間の前記絶対的な差が前記閾値を超えている部分に印を付けることと
    を含む、方法。
  2. 前記第一イメージを提供することが、ビデオ・カメラでビデオ・シーケンスを取り込むことを含む、請求項1に記載の方法。
  3. 前記シーンが地勢風景である、請求項1に記載の方法。
  4. 前記第一イメージを提供することが、コンピュータを用いて第一の一連のイメージを変換することを含む、請求項1に記載の方法。
  5. 前記第一の一連のイメージを変換することが、前記第一の一連のイメージを二次元表面に射影することを含む、請求項4に記載の方法。
  6. 前記シーンの前記第二イメージを提供することが完了する前に、前記第一イメージの所与の領域を調節することが実行を始める、請求項1に記載の方法。
  7. 調節後の前記第一イメージの所与の領域と、前記第二イメージの所与の領域との間の強度における絶対的な差を計算することの前に、前記第一イメージから、および前記第二イメージからエッジが除去される、請求項1に記載の方法。
  8. プログラムを記録したコンピュータ読み取り可能な格納媒体であって、前記プログラムは、コンピュータにより実行されたときに、前記コンピュータに、シーンの第一イメージと前記シーンの第二イメージとを比較する方法を実行させ、
    前記方法は、
    a.前記第一イメージの所与の領域の強度を、前記所与の領域の平均強度が前記第二イメージの所与の領域の平均強度とほぼ等しくなるように調節することであって、前記第一イメージの所与の領域および前記第二イメージの所与の領域は、前記シーンにおいて同じ位置に対応する、ことと、
    b.調節後の前記第一イメージの所与の領域の各部分と、前記第二イメージの所与の領域の各対応する部分との間の強度における絶対的な差を計算すること、および、前記第一イメージの所与の領域のうちの選択された部分であって、前記絶対的な差が閾値を超えている部分を識別することと、
    c.前記第一イメージの所与の領域のうちの前記選択された部分の強度を、前記第一イメージの所与の領域のうちの前記選択された部分の平均強度が前記第二イメージの所与の領域の対応する部分の平均強度とほぼ等しくなるように調節すること、および、前記第一イメージの所与の領域のうちの前記選択された部分であって、前記第一イメージの所与の領域のうちの前記選択された部分と前記第二イメージの中の対応する領域との間の前記絶対的な差が前記閾値を超えている部分に印を付けることと
    を含む、コンピュータ読み取り可能な格納媒体。
  9. 前記シーンが地勢風景である、請求項8に記載のコンピュータ読み取り可能な格納媒体。
  10. 前記方法は、調節後の前記第一イメージの所与の領域の各部分と、前記第二イメージの所与の領域の各対応する部分との間の強度における絶対的な差を計算することの前に、前記第一イメージから、および前記第二イメージからエッジを除去することを含む、請求項8に記載のコンピュータ読み取り可能な格納媒体。
  11. シーンの第一イメージと前記シーンの第二イメージとを比較する動作を実行するように動作可能な一つ以上のプロセッサを備えたシステムであって、
    前記動作は、
    a.前記第一イメージの所与の領域の強度を、前記所与の領域の平均強度が前記第二イメージの所与の領域の平均強度とほぼ等しくなるように調節することであって、前記第一イメージの所与の領域および前記第二イメージの所与の領域は、前記シーンにおいて同じ位置に対応する、ことと、
    b.調節後の前記第一イメージの所与の領域の各部分と、前記第二イメージの所与の領域の各対応する部分との間の強度における絶対的な差を計算すること、および、前記第一イメージの所与の領域のうちの選択された部分であって、前記絶対的な差が閾値を超えている部分を識別することと、
    c.前記第一イメージの所与の領域のうちの前記選択された部分の強度を、前記第一イメージの所与の領域のうちの前記選択された部分の平均強度が前記第二イメージの所与の領域の対応する部分の平均強度とほぼ等しくなるように調節すること、および、前記第一イメージの所与の領域のうちの前記選択された部分であって、前記第一イメージの所与の領域のうちの前記選択された部分と前記第二イメージの中の対応する領域との間の前記絶対的な差が前記閾値を超えている部分に印を付けることと
    を含む、システム。
  12. 前記シーンが地勢風景である、請求項11に記載のシステム。
  13. 前記一つ以上のプロセッサは、調節後の前記第一イメージの所与の領域の各部分と、前記第二イメージの所与の領域の各対応する部分との間の強度における絶対的な差を計算することの前に、前記第一イメージから、および前記第二イメージからエッジが除去されるように構成される、請求項11に記載のシステム。
  14. 本明細書に記載のシステム。
JP2011103276A 2004-08-04 2011-05-02 非均一分解能で合成イメージを用意する方法 Expired - Fee Related JP5329601B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US59873804P 2004-08-04 2004-08-04
US60/598,738 2004-08-04

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2007524996A Division JP4824022B2 (ja) 2004-08-04 2005-08-03 非均一分解能で合成イメージを用意する方法

Publications (2)

Publication Number Publication Date
JP2011150733A true JP2011150733A (ja) 2011-08-04
JP5329601B2 JP5329601B2 (ja) 2013-10-30

Family

ID=35395871

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2007524996A Expired - Fee Related JP4824022B2 (ja) 2004-08-04 2005-08-03 非均一分解能で合成イメージを用意する方法
JP2011103276A Expired - Fee Related JP5329601B2 (ja) 2004-08-04 2011-05-02 非均一分解能で合成イメージを用意する方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2007524996A Expired - Fee Related JP4824022B2 (ja) 2004-08-04 2005-08-03 非均一分解能で合成イメージを用意する方法

Country Status (9)

Country Link
US (2) US7961216B2 (ja)
EP (1) EP1779061B1 (ja)
JP (2) JP4824022B2 (ja)
CN (1) CN101002069B (ja)
AU (1) AU2005271385B2 (ja)
BR (1) BRPI0514078A (ja)
IL (1) IL181071A (ja)
NZ (1) NZ552920A (ja)
WO (1) WO2006017670A1 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050285947A1 (en) * 2004-06-21 2005-12-29 Grindstaff Gene A Real-time stabilization
WO2007031947A2 (en) * 2005-09-12 2007-03-22 Carlos Tapang Frame and pixel based matching of model-generated graphics images to camera frames
WO2008118886A1 (en) 2007-03-23 2008-10-02 Bioimagene, Inc. Digital microscope slide scanning system and methods
US8497905B2 (en) 2008-04-11 2013-07-30 nearmap australia pty ltd. Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8675068B2 (en) * 2008-04-11 2014-03-18 Nearmap Australia Pty Ltd Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8537181B2 (en) * 2009-03-09 2013-09-17 Ventana Medical Systems, Inc. Modes and interfaces for observation, and manipulation of digital images on computer screen in support of pathologist's workflow
US20100226926A1 (en) * 2009-03-09 2010-09-09 Bioimagene, Inc Method of Detection of Fluorescence-Labeled Probes Attached to Diseased Solid Tissue
US8396269B2 (en) 2010-04-08 2013-03-12 Digital Pathco LLC Image quality assessment including comparison of overlapped margins
JP2013540563A (ja) 2010-10-25 2013-11-07 メドトロニック アーディアン ルクセンブルク ソシエテ ア レスポンサビリテ リミテ 腎臓神経調節のための多電極アレイを有するカテーテル装置、ならびに関連するシステムおよび方法
US8193909B1 (en) * 2010-11-15 2012-06-05 Intergraph Technologies Company System and method for camera control in a surveillance system
CN102890840B (zh) * 2012-08-22 2016-03-23 山东新北洋信息技术股份有限公司 纸币鉴别方法和装置
US20140316614A1 (en) * 2012-12-17 2014-10-23 David L. Newman Drone for collecting images and system for categorizing image data
JP2014149381A (ja) * 2013-01-31 2014-08-21 Sony Corp 画像取得装置および画像取得方法
US10088658B2 (en) * 2013-03-18 2018-10-02 General Electric Company Referencing in multi-acquisition slide imaging
CN104125410B (zh) * 2014-07-02 2017-04-12 深圳英飞拓科技股份有限公司 一种全景视频多镜头曝光补偿方法及其装置
CN104853097B (zh) * 2015-04-30 2018-03-27 广东欧珀移动通信有限公司 一种全景模式拍摄方法和装置
CN105608716B (zh) * 2015-12-21 2020-12-18 联想(北京)有限公司 一种信息处理方法及电子设备
US10212359B2 (en) * 2015-12-30 2019-02-19 Cerner Innovation, Inc. Camera normalization
US20200311886A1 (en) * 2019-03-28 2020-10-01 Carl Zeiss Microscopy Gmbh Method for determining an image recording aberration

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01125680A (ja) * 1987-11-11 1989-05-18 Hitachi Ltd センサ画像の処理方法
JPH1091765A (ja) * 1996-09-10 1998-04-10 Canon Inc 画像合成装置及びその方法
JPH10214328A (ja) * 1997-01-30 1998-08-11 Hitachi Software Eng Co Ltd 画像情報解析装置及び画像情報解析プログラムを有する記憶媒体
JPH11112790A (ja) * 1997-10-06 1999-04-23 Canon Inc 画像合成装置および方法
JPH11331696A (ja) * 1998-03-10 1999-11-30 Canon Inc 画像処理方法、装置および記録媒体
JP2002208005A (ja) * 2001-01-12 2002-07-26 Minolta Co Ltd 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2003173438A (ja) * 2001-12-06 2003-06-20 Minolta Co Ltd 画像処理装置
JP2003281664A (ja) * 2002-03-26 2003-10-03 Fujitsu Ltd 災害発生予測方法及び災害発生予測装置
JP2004171413A (ja) * 2002-11-21 2004-06-17 Hitachi Software Eng Co Ltd デジタル画像処理装置
WO2004057531A1 (ja) * 2002-12-20 2004-07-08 Jicoux Datasystems, Inc. 画像合成装置、及びプログラム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IE61778B1 (en) 1989-01-04 1994-11-30 Emyville Enterprises Image processing
JP2766316B2 (ja) * 1989-06-09 1998-06-18 株式会社東芝 X線診断装置
US5251037A (en) * 1992-02-18 1993-10-05 Hughes Training, Inc. Method and apparatus for generating high resolution CCD camera images
US5270756A (en) 1992-02-18 1993-12-14 Hughes Training, Inc. Method and apparatus for generating high resolution vidicon camera images
US6205259B1 (en) * 1992-04-09 2001-03-20 Olympus Optical Co., Ltd. Image processing apparatus
US5325449A (en) * 1992-05-15 1994-06-28 David Sarnoff Research Center, Inc. Method for fusing images and apparatus therefor
JP3227478B2 (ja) * 1995-05-17 2001-11-12 シャープ株式会社 静止画撮像装置
US6044181A (en) * 1997-08-01 2000-03-28 Microsoft Corporation Focal length estimation method and apparatus for construction of panoramic mosaic images
DE69833302T2 (de) * 1997-10-06 2006-11-02 Canon K.K. Verfahren und Vorrichtung zur Bildsynthese
JP2000105813A (ja) * 1998-09-28 2000-04-11 Nikon Corp 画像連接システム、および画像連接プログラムを記録した記録媒体
EP1223083B1 (en) * 1999-09-20 2004-03-17 Matsushita Electric Industrial Co., Ltd. Device for assisting automobile driver
US7019777B2 (en) * 2000-04-21 2006-03-28 Flight Landata, Inc. Multispectral imaging system with spatial resolution enhancement
JP2002094849A (ja) * 2000-09-12 2002-03-29 Sanyo Electric Co Ltd 広視野画像撮像装置
AU2002308651A1 (en) * 2001-05-04 2002-11-18 Leberl, Franz, W. Digital camera for and method of obtaining overlapping images
JP2003317081A (ja) * 2002-04-25 2003-11-07 Sony Corp 3次元モデル生成システム及び方法、並びにコンピュータ・プログラム
JP4572583B2 (ja) * 2004-05-31 2010-11-04 パナソニック電工株式会社 撮像装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01125680A (ja) * 1987-11-11 1989-05-18 Hitachi Ltd センサ画像の処理方法
JPH1091765A (ja) * 1996-09-10 1998-04-10 Canon Inc 画像合成装置及びその方法
JPH10214328A (ja) * 1997-01-30 1998-08-11 Hitachi Software Eng Co Ltd 画像情報解析装置及び画像情報解析プログラムを有する記憶媒体
JPH11112790A (ja) * 1997-10-06 1999-04-23 Canon Inc 画像合成装置および方法
JPH11331696A (ja) * 1998-03-10 1999-11-30 Canon Inc 画像処理方法、装置および記録媒体
JP2002208005A (ja) * 2001-01-12 2002-07-26 Minolta Co Ltd 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2003173438A (ja) * 2001-12-06 2003-06-20 Minolta Co Ltd 画像処理装置
JP2003281664A (ja) * 2002-03-26 2003-10-03 Fujitsu Ltd 災害発生予測方法及び災害発生予測装置
JP2004171413A (ja) * 2002-11-21 2004-06-17 Hitachi Software Eng Co Ltd デジタル画像処理装置
WO2004057531A1 (ja) * 2002-12-20 2004-07-08 Jicoux Datasystems, Inc. 画像合成装置、及びプログラム

Also Published As

Publication number Publication date
IL181071A0 (en) 2007-07-04
BRPI0514078A (pt) 2008-05-27
WO2006017670A1 (en) 2006-02-16
JP4824022B2 (ja) 2011-11-24
CN101002069B (zh) 2010-09-08
AU2005271385A1 (en) 2006-02-16
EP1779061A1 (en) 2007-05-02
US20110188762A1 (en) 2011-08-04
JP5329601B2 (ja) 2013-10-30
US8228378B2 (en) 2012-07-24
CN101002069A (zh) 2007-07-18
NZ552920A (en) 2009-12-24
AU2005271385B2 (en) 2010-02-11
IL181071A (en) 2013-03-24
EP1779061B1 (en) 2013-11-06
JP2008509481A (ja) 2008-03-27
US7961216B2 (en) 2011-06-14
US20060028549A1 (en) 2006-02-09

Similar Documents

Publication Publication Date Title
JP5329601B2 (ja) 非均一分解能で合成イメージを用意する方法
AU2007289120B2 (en) Mosaic oblique images and methods of making and using same
EP2791868B1 (en) System and method for processing multi-camera array images
US20200118242A1 (en) Post capture imagery processing and deployment systems
CA2402929A1 (en) Method and apparatus for performing geo-spatial registration of imagery
Peña-Villasenín et al. 3-D modeling of historic façades using SFM photogrammetry metric documentation of different building types of a historic center
Agisoft Metashape python reference
Pavelka et al. New Low-cost Automated Processing of Digital Photos for Documentation and Visualisation of the Cultural Heritage
CN113012084A (zh) 无人机影像实时拼接方法、装置及终端设备
Kochi et al. Development of 3D image measurement system and stereo‐matching method, and its archaeological measurement
Alsadik Crowdsource and web-published videos for 3D documentation of cultural heritage objects
US10776928B1 (en) Efficient egomotion estimation using patch-based projected correlation
CN114549650A (zh) 相机标定方法、装置、电子设备及可读存储介质
Cléry et al. An ergonomic interface to compute 3D models using photogrammetry
Kim et al. Multi-modal big-data management for film production
WO2020220827A1 (zh) 实现投影画面叠加的方法、装置及投影系统
Phan et al. Create 3D Models from Photos Captured by Sony Alpha 7 Mark 2 Digital Camera
Lorenz Wendt et al. Markerless outdoor localisation based on sift descriptors for mobile applications
Shragai et al. Automatic tie-point extraction using advanced approaches
Barazzetti High dynamic range photography without a tripod: A linear formulation for image fusion
Wild et al. AUTOGRAF—AUTomated Orthorectification of GRAFfiti Photos. Heritage 2022, 5, 2987–3009
Phogat et al. Automatic Registration of Satellite Images
CN115272076A (zh) 一种面向林区的无人机图像拼接方法
Wu et al. Automatic registration of high-resolution multispectral imageries released by low-altitude unmanned airship
Ameri et al. High resolution digital surface model (DSM) generation using multi-view multi-frame digital airborne images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110502

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120419

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121126

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130724

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees