JP2013198154A - 画像安定化および追跡システム - Google Patents

画像安定化および追跡システム Download PDF

Info

Publication number
JP2013198154A
JP2013198154A JP2013048936A JP2013048936A JP2013198154A JP 2013198154 A JP2013198154 A JP 2013198154A JP 2013048936 A JP2013048936 A JP 2013048936A JP 2013048936 A JP2013048936 A JP 2013048936A JP 2013198154 A JP2013198154 A JP 2013198154A
Authority
JP
Japan
Prior art keywords
image
tracking
stabilization
detector
optical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013048936A
Other languages
English (en)
Inventor
J Dopilka David
デーヴィッド・ジェイ・ドピルカ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honeywell International Inc
Original Assignee
Honeywell International Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honeywell International Inc filed Critical Honeywell International Inc
Publication of JP2013198154A publication Critical patent/JP2013198154A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/64Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
    • G02B27/646Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
    • G02B27/648Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake for automatically maintaining a reference alignment, e.g. in self-levelling surveying instruments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Adjustment Of Camera Lenses (AREA)

Abstract

【課題】画像を追跡し安定化させるためのシステムを提供すること。
【解決手段】画像安定化および追跡システムは、主撮像検出器と、安定化および追跡検出器と、画像処理および補正コマンド制御装置と、適応光学デバイスとを含む。主撮像検出器は、視野内で、光学像における主対象の画像を検出するように構成される。安定化および追跡検出器は、視野の外側に配置され、光学像における追跡対象の画像を検出するように構成される。画像処理および補正コマンド制御装置は、画像を受け取るように結合され、追跡対象の相対的な動きを検出するように構成される。適応光学デバイスは、補正コマンドを受け取るように結合され、この補正コマンドに応答して、移動し、それによって光学像の位置を変えるように構成される。
【選択図】図1

Description

[0001]本発明は、一般に画像安定化に関し、より詳細には画像を追跡し安定化させるためのシステムに関する。
[0002]撮像デバイスを使用して、(スチル画像であろうとビデオ画像であろうと)画像を取り込むとき、撮像デバイス、被写体、またはその両方が動いている場合は、取り込み画像がぼける可能性がある。撮像デバイスおよび被写体の動きは、広い周波数範囲にわたる多くの成分から構成され得る。例えば、機械システムの比較的高い周波数の振動から、撮像デバイスと被写体間の相対的な幾何学的な動きなどの比較的低い周波数の動きなどがある。
[0003]そうした動きに関連する画像のぼけを除去する、または少なくとも低減するために、画像安定化技術が開発された。現在のリアルタイム画像安定化技術は、光学的な画像安定化とデジタル的な画像安定化の2つに概ね分類される。光学的な画像安定化は、その高画質ゆえに高性能システムにとって好ましい手法である。現在の光学的な画像安定化技術は、撮像システムに対する外乱を検出して補正するために速度センサを使用するが、対象そのもののいかなる動きをも検出して補償するようには構成されていない。したがって、被写体が動いている場合、画像のぼけが依然として生じることがある。デジタル的な画像安定化技術は、通常、画像そのものの一部分に対してデジタル変換を実施する。これらの技術は、ビデオ画像の振動を低減し、またはスチル画像の品質を改善することはできるが、取り込み画像のノイズを増加させる可能性がある。また、現在の画像安定化技術は、対象指定および追跡機能を提供するレーダまたはレーザ追跡装置に依存する場合がある。これらの追跡装置は、かなり複雑で、重く、高価になる場合がある。
[0004]ミサイル、航空機、宇宙船、周回する宇宙船からの惑星表面、および天体などの移動対象を追跡および撮像しようとする場合、またはスポーツイベント写真および法執行撮像などのより多くの地球上での用途では、これは問題である。このことは、撮像システムそのものが移動して、他の静止対象または移動対象を追跡し撮像している場合、等しく問題である。
[0005]上記の問題は、フィルタに依存する撮像用途では、悪化する可能性がある。いくつかの例示的な用途には、偏光、RGB、測光、UV、IR、および狭帯域フィルタ撮像が含まれる。安定化および/または追跡がフィルタ撮像と共に使用される場合、安定化および追跡検出器(複数可)に当たる光の強さが減少する可能性がある。これは、安定化および追跡検出器(複数可)が主撮像検出器とフィルタされる照明領域を共有する場合があるからである。これにより、信号対雑音比が低下し、安定化および追跡性能が劣化する可能性がある。この問題を軽減しようとするために、一部のシステムは、別個の追跡光学部品および撮像装置を含むことがあり、このため全体的なシステムの複雑さおよびコストが増加する可能性がある。
[0006]したがって、フィルタされる、およびフィルタされない両方の撮像用途に対して、相当に複雑で、重くおよび/もしくは高価な追跡装置、ならびに/または、別個の追跡光学部品もしくは撮像装置に依存しない、画像安定化および追跡システムが必要である。撮像デバイスおよび被写体の両方に対して、(すべてではないにしても)ほとんどの周波数で動き成分すべてを同時に補償する画像安定化および追跡システムが必要である。本発明は、少なくともこれらの必要性に対処する。
[0007]一実施形態において、画像安定化および追跡システムは、主撮像検出器、安定化および追跡検出器、画像処理および補正コマンド制御装置、ならびに適応光学デバイスを含む。主撮像検出器は、視野を有し、視野内で、光学像における主対象の画像を検出するように構成される。安定化および追跡検出器は、主撮像検出器の視野の外側に配置され、光学像における追跡対象の画像を検出するように構成される。画像処理および補正コマンド制御装置は、安定化および追跡検出器から追跡対象の画像を受け取るように結合され、追跡対象の相対的な動きを検出し、補正コマンドを供給するように構成される。適応光学デバイスは、補正コマンドを受け取るように結合され、このコマンドに応答して、移動し、それによって光学像の位置を変えるように構成される。
[0008]別の実施形態において、画像安定化および追跡システムは、主撮像検出器、安定化および追跡検出器、光学フィルタ、画像処理および補正コマンド制御装置、適応光学デバイス、ならびにデカップリング焦点距離縮小光学系を含む。主撮像検出器は、視野を有し、視野内で、光学像における主対象の画像を検出するように構成される。安定化および追跡検出器は、主撮像検出器の視野の外側に配置され、光学像における追跡対象の画像を検出するように構成される。光学フィルタは、主撮像検出器と安定化および追跡検出器との間に配置され、光学像の一部をフィルタするように構成される。画像処理および補正コマンド制御装置は、安定化および追跡検出器から追跡対象の画像を受け取るように結合され、追跡対象の相対的な動きを検出し、補正コマンドを供給するように構成される。適応光学デバイスは、補正コマンドを受け取るように結合され、この補正コマンドに応答して、移動し、それによって光学像の位置を変えるように構成される。デカップリング焦点距離縮小光学系は、適応光学デバイスと安定化および追跡検出器との間に配置される。デカップリング焦点距離縮小光学系は、(i)主撮像検出器の視野内の第1の焦点距離、および(ii)主撮像検出器の視野の外側の第2の焦点距離であって、第1の焦点距離とは異なる第2の焦点距離を提供するように構成される。
[0009]さらに別の実施形態において、画像安定化および追跡システムは、撮像光学部品、多自由度のプラットホーム、主撮像検出器、複数の安定化および追跡検出器、画像処理および補正コマンド制御装置、ならびに適応光学デバイスを含む。撮像光学部品は、電磁放射を受け取るようになされ、電磁放射を受け取ると、光学像を形成するように構成される。多自由度のプラットホームは、位置調整コマンドを受け取るようになされ、位置調整コマンドを受け取ると、移動するように構成される。主撮像検出器は、視野を有し、視野内で、光学像における主対象の画像を検出するように構成される。複数の安定化および追跡検出器は、多自由度のプラットホーム上に取り付けられ、主撮像検出器の視野の外側に配置される。安定化および追跡検出器はそれぞれ、光学像における1つまたは複数の追跡対象の画像を検出するように構成される。画像処理および補正コマンド制御装置は、安定化および追跡検出器から、1つまたは複数の追跡対象の画像を受け取るように結合され、追跡対象の1つの相対的な動きを検出し、多自由度のプラットホームへ位置調整コマンドを、および補正コマンドを供給するように構成される。適応光学デバイスは、補正コマンドを受け取るように結合され、補正コマンドに応答して、移動し、それによって光学像の位置を変えるように構成される。
[0010]さらに、画像安定化および追跡システムの他の望ましい特徴および特性は、添付の図面および前述の背景と併せて得られる、以降の詳細な説明および添付された特許請求の範囲から明らかになるであろう。
[0011]以降、本発明は、以下の図面と共に説明され、同様の数字は、同様の要素を指す。
[0012]画像安定化および追跡システムの一実施形態を示す概略図である。 [0013]矢印2−2によって規定された方向から見た、図1に示されたシステムの一部を示す図である。 [0014]フィルタ撮像用途に使用することができる画像安定化および追跡システムの別の実施形態を示す概略図である。 [0015]矢印4−4によって規定された方向から見た、図3に示されたシステムの一部を示す図である。
[0016]以下の詳細な説明は、本来、単に例示であって、本発明、または、本発明の用途および使用を限定することは意図されていない。本明細書で使用されるように、「例示的」という用語は「例、事例または実例として役立つ」ことを意味する。したがって、「例示的」として本明細書に記載されるいかなる実施形態も、他の実施形態に対して好ましい、または有利であると、必ずしも解釈されるべきではない。本明細書に記載される実施形態はすべて、当業者が本発明を行い、または使用することができるように提供される例示的な実施形態であって、特許請求の範囲で規定される本発明の範囲を限定するものではない。さらに、前述の技術分野、背景、概要または以下の詳細な説明において提示される、いかなる明示される、または暗示される理論によっても束縛される意図はない。
[0017]まず、図1を参照すると、画像安定化および追跡システム100の一実施形態の概略図が示されており、撮像光学部品102、主撮像検出器104、複数の安定化および追跡検出器106(106−1、106−2、106−3、106−4)、画像処理および補正制御装置108、ならびに適応光学デバイス110が含まれる。撮像光学部品102は、電磁放射を受け取るようになされ、電磁放射を受け取ると、光学像を、焦点面に、および画定された光学フィールド202内に形成する(図2を参照されたい)。図示された実施形態では、撮像光学部品102は、レンズを用いて実施されている。しかし、撮像光学部品102は、対象から受け取るおよび/または対象に送る電磁放射を収集し、拡大し/縮小し、集束し/発散し、補正し、または修正し、対象の光学像を形成する数多くのデバイス、またはそれらの組合せのいずれか1つであってよいことを理解されよう。
[0018]図2において、より明確に示されるように、主撮像検出器104は、視野を画定する感光性領域204を含む。主撮像検出器104は、取付け表面112上に取り付けられ、焦点面に、および画定された光学フィールド202内に配置されている。焦点面が、撮像光学部品102に面している主撮像検出器104の表面に位置づけられていることに留意されたい。主撮像検出器104は、その視野内で、撮像光学部品102によって形成される光学像における主対象の画像を検出するように構成される。主撮像検出器104は、様々に実施され得て、主撮像検出器の視野204をカバーする1つまたは複数の(アレイ状の)検出器を備えてよいことを理解されよう。例えば、この主撮像検出器104は、電磁放射を受け取り、それを観測器または計器によって読み出し可能な信号に変換するように構成されたCCD(電荷結合デバイス)、CMOS(相補型金属酸化膜半導体)デバイス、または未知のもしくは将来開発される数多くの他のデバイスのいずれか1つを使用して、実施されてよい。
[0019]また、図2で最も明確に示されているように、安定化および追跡検出器106は、それぞれ、主撮像検出器104の視野の外側に配置されているが、少なくとも、図示される実施形態においては、取付け表面112上にも取り付けられ、焦点面に、および画定された光学フィールド202内に配置されている。また、安定化および追跡検出器106のそれぞれは、視野を画定する感光性領域206を含む。以下でより詳細に説明されるように、安定化および追跡検出器106は、それぞれの視野内で、撮像光学部品102によって形成される光学像における1つまたは複数の追跡対象の画像を検出するようにそれぞれ構成される。
[0020]安定化および追跡検出器106は、その感光性領域206が光学系軸芯116に垂直に配置されるように取り付けられてよい。この取付け構成によって、追跡および安定化検出器106は、主撮像検出器104の視野の外側の1つまたは複数の目標対象を検出することができる。この取付け構成は、望遠鏡星追跡用途にとって有利となり得る。あるいは、図1に示されるように、安定化および追跡検出器106は、感光性領域206が光学系軸芯116に向かって内向きに配置されるように取り付けられてよい。この取付け構成によって、追跡および安定化検出器106は、主撮像検出器104によって検出されるのと同じ主対象を検出して追跡対象として用いることができる。この取付け構成は、撮像フレーム内で注目する対象を中心に置き、安定化させるのが望ましい場合がある、ミサイル追跡あるいはスポーツ写真用途に有利となり得る。安定化および追跡検出器106は、多自由度(DOF)(例えば、6DOFまで)のプラットホーム上に取り付けられて、安定化および追跡検出器106の位置調整をリアルタイムで行うことができることをさらに理解されよう。
[0021]図示されたシステム100は、4つの安定化および追跡検出器106を使用して実施されているが、システム100は、この数よりも多いまたは少ない安定化および追跡検出器106を使用して実施され得ることを理解されよう。主撮像検出器104と同様に、安定化および追跡検出器106は、様々に実施されてよい。例えば、安定化および追跡検出器106はそれぞれ、電磁放射を受け取り、この電磁放射を観測器または計器によって読取り可能な信号に変換するよう構成されたCCD(電荷結合デバイス)、CMOS(相補型金属酸化膜半導体)デバイス、または未知のもしくは将来開発される数多くの他のデバイスのいずれか1つを使用して実施することができる。安定化および追跡検出器106がどのように取り付けられ実施されようとも、それぞれは、検出した画像を画像処理および補正コマンド制御装置108に提供する。
[0022]画像処理および補正コマンド制御装置108は、安定化および追跡検出器106から1つまたは複数の追跡対象の画像を受け取るように結合されている。画像処理および補正制御装置108は、追跡対象の1つまたは複数の相対的な動きを検出し、適応光学デバイス110に補正コマンドを供給するように構成される。また、画像処理および補正コマンド制御装置108は、ユーザが1つまたは複数の追跡対象を選択することができるよう構成されるのが好ましい。さらに、安定化および追跡検出器106が多自由度のプラットホーム上に取り付けられているこれらの実施形態に対して、画像処理および補正コマンド制御装置108は、安定化および追跡検出器106の事前位置調整またはリアルタイム位置調整を制御するようにさらに構成される。画像処理および補正コマンド制御装置108は、1つまたは複数のプログラムされたプロセッサ、デジタル信号処理装置(DSP)、マイクロコントローラ、および/または特定用途デバイスを使用して実施されてよいことを理解されよう。
[0023]適応光学デバイス110は、画像処理および補正コマンド制御装置108によって供給される補正コマンドを受け取るように結合される。適応光学デバイス100は、補正コマンドに応答して、移動し、それによって撮像光学部品102によって形成される光学像の位置を変えるよう構成される。適応光学デバイス110は、この機能を実行するために様々に構成され、実施されてよい。しかし、図示された実施形態では、適応光学デバイス110は、複数のアクチュエータ118−1、118−2および光学デバイス122、例えばチップ/チルト光学デバイスを備える。アクチュエータ118−1、118−2は、数多くの知られている駆動デバイスのいずれか1つを使用して実施されてよく、画像処理および補正コマンド制御装置108からの補正コマンドを受け取るように結合されている。アクチュエータ118−1、118−2は、補正コマンドに応答して、光学デバイス122に駆動力を供給し、この駆動力により、光学デバイス122を移動させ光学像の位置を変えさせる。光学デバイス122は、光学的に透過するデバイスまたは光学的に反射するデバイスを使用して実施されてよい。
[0024]上で指摘したように、図1に示されるシステム100に関して、1つまたは複数の安定化および追跡検出器106は、主撮像検出器104の視野の外側ではあるが、画定された光学フィールド202の内部に配置される。1つまたは複数の安定化および追跡検出器106は、主撮像検出器104の視野内部の、主撮像検出器104の視野の外側の、またはその両方の組合せの、1つまたは複数の目標像を検出するようにさらに配置されてよい。この構成により、1つまたは複数の安定化および追跡検出器106は、画像安定化および追跡の目的のために、主撮像検出器106の視野の内部であろうが外側であろうが、画定された光学フィールド202の内側の任意の1つまたは複数の対象を使用することができる。
[0025]上記の画像安定化および追跡システム100によって、レーダまたはレーザをベースとしたシステムなどの高価で複雑な追跡システムを必要とせず、比較的簡単な小型のパッケージで、ユーザ規定の対象に関し比較的高性能の光学像安定化および追跡が実現される。また、説明したシステム100によって、撮像システムの外乱および動き、ならびに対象の外乱および動きを同時に補償し、撮像デバイスおよび被写体の両方に対して(すべてではないにしても)ほとんどの周波数で動き成分すべてを同時に補償する能力が提供される。
[0026]上で指摘したように、安定化および/または追跡の性能は、フィルタ撮像用途において実施される場合、問題を抱える可能性がある。図3に示される画像安定化および追跡システム300は、この性能劣化を、排除しないにしても、緩和する。図示されるシステム300は、撮像光学部品102、主撮像検出器104、複数の安定化および追跡検出器106(106−1、106−2、106−3、106−4)、画像処理および補正制御装置108、ならびに適応光学デバイス110を含む。図示されるシステム300は、光学フィルタ302およびデカップリング焦点距離縮小光学系304をさらに含む。撮像光学部品102、主撮像検出器104、安定化および追跡検出器(複数可)106、画像処理および補正制御装置108、ならびに適応光学デバイス110は、図1に示されるものと全く同一にではないにしても、同様に実施され得る。したがって、その詳しい説明は繰り返さない。しかし、1つまたは複数の安定化および追跡検出器106が、主撮像検出器104と同じ焦点面ではなく、画定された光学フィールド202内に配置されていることに留意されたい。この理由は、以降の説明から明らかになるであろう。
[0027]光学フィルタ302は、主撮像検出器104と1つまたは複数の安定化および追跡検出器106との間に配置され、撮像光学部品102によって形成される光学像の一部をフィルタするように構成される。光学フィルタ302は、現在知られている、または将来開発される数多くの光学フィルタデバイスのいずれか1つを使用して実施されてよい。システム300および光学フィルタ302は、様々なタイプの光学フィルタ302を相互に交換できるように構成されるのが好ましい。
[0028]デカップリング焦点距離縮小光学系304は、適応光学デバイス110と1つまたは複数の安定化および追跡検出器106との間に配置される。デカップリング焦点距離縮小光学系304は、主撮像検出器104の視野内部に第1の焦点距離(f)、および主撮像検出器104の視野の外側に第2の焦点距離(f)を提供するように構成される。図3から容易に明らかとなり得るように、第2の焦点距離は、第1の焦点距離とは異なり、より具体的には第1の焦点距離よりも短い。デカップリング焦点距離縮小光学系304は、様々に構成され、実施されてよいが、図示された実施形態において、および図4においてより明確に示されるように、デカップリング焦点距離縮小光学系304は、その一部402が除去された焦点距離縮小光学系を使用して実施される。除去部分402は、主撮像検出器104の感光性領域204と同じ形状であるのが好ましい。除去部分402は、主撮像検出器104に第1の焦点距離(f)を提供し、残りの部分が、1つまたは複数の安定化および追跡検出器106に第2の焦点距離(f)を提供する。
[0029]図3に示される実施形態などの一部の実施形態では、撮像光学部品102は、第1のハウジング306内部に配置され、1つまたは複数の安定化および追跡検出器106、画像処理および補正制御装置108、適応光学デバイス110、光学フィルタ202、ならびにデカップリング焦点距離縮小光学系304は、第2のハウジング308内部に配置されてよく、主撮像検出器104は、第3のハウジング312内部に配置されてよい。ハウジングのこの数により、実用性、構成可能性およびモジュール性を最大化することができる。他の実施形態において、最大限小型化をはかり、重量を最小限にするために単一のハウジング内に構成要素すべてを配置することが可能であることを理解されよう。
[0030]図3で示し、上記したシステム300は、画定された光学フィールド202を、主撮像検出器104に専用の部分と、1つまたは複数の安定化および追跡検出器106に専用の部分とに分割する。したがって、フィルタされた光学像は、主撮像検出器104に提供され得て、フィルタされない光学像が、1つまたは複数の安定化および追跡検出器106に提供される。これにより、単一の比較的小さい、小型のパッケージ内で、最大の信号対雑音比および高い安定化および追跡性能が同時に実現される。また、画像安定化および追跡システム300によって、レーダまたはレーザをベースとしたシステムなどの高価で複雑な追跡システムを必要とすることなく、比較的簡単な小型のパッケージで、ユーザ規定の対象に関し比較的高性能の光学像安定化および追跡が実現される。説明したシステム300により、撮像システムの外乱および動き、ならびに対象の外乱および動きを同時に補償する能力がさらに提供され、撮像デバイスおよび被写体の両方に対して、(すべてではないにしても)ほとんどの周波数で動き成分すべてが同時に補償される。
[0031]当業者は、本明細書に記載した実施形態に関連して説明された様々な例示的な論理ブロック、モジュール、回路、およびアルゴリズムステップが、電子ハードウェア、コンピュータソフトウェアまたはその両方の組合せとして実施されてもよいことを理解されよう。実施形態および実施態様の一部は、機能、および/または論理ブロック構成要素(もしくはモジュール)ならびに様々な処理ステップの点から上で説明されている。しかし、そうしたブロック構成要素(もしくはモジュール)は、指定された機能を実行するように構成された任意の数のハードウェア、ソフトウェア、および/またはファームウェア構成要素よって実現され得ることを理解されたい。ハードウェアおよびソフトウェアのこの互換性を明瞭に示すために、様々な例示的な構成要素、ブロック、モジュール、回路およびステップが、全体としてそれらの機能性の点から上で説明された。そうした機能性がハードウェアまたはソフトウェアとして実施されるかどうかは、具体的な用途および全体のシステムに課された設計制約に依存する。当業者は、それぞれの特定の用途に対して様々な方法で説明された機能性を実施することができるが、そうした実施の決定が、本発明の範囲からの逸脱をもたらすと解釈されるべきでない。例えば、システムまたは構成要素の実施形態は、様々な集積回路部品、例えばメモリ素子、デジタル信号処理素子、論理素子、ルックアップテーブルなどを用いることができ、これらは1つまたは複数のマイクロプロセッサあるいは他の制御デバイスの制御の下で様々な機能を実行することができる。加えて、当業者は、本明細書で説明された実施形態が単に例示的な実施態様であることを理解されよう。
[0032]本明細書で開示される実施形態に関連して説明された様々な例示的な論理ブロック、モジュールおよび回路は、汎用プロセッサ、デジタル信号処理装置(DSP)、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)もしくは他のプログラマブルロジックデバイス、ディスクリートゲートもしくはトランジスタロジック、ディスクリートハードウェア部品、または本明細書に記載された機能を実行するように設計されたこれらの任意の組合せを用いて、実施または実行され得る。汎用プロセッサは、マイクロプロセッサであってよいが、代わりに、プロセッサは任意の従来のプロセッサ、コントローラ、マイクロコントローラ、またはステートマシンであってよい。また、プロセッサは、コンピュータデバイスの組合せ、例えばDSPとマイクロプロセッサの組合せ、複数のマイクロプロセッサ、DSPコアと連動する1つまたは複数のマイクロプロセッサ、あるいは他の任意のそうした構成として実施されてよい。
[0033]本明細書では、例えば第1のおよび第2のなどの関係語は、ある要素および行為を、そうした要素間または行為間のいかなる実際のそうした関係または順序を必ずしも必要とせずにまたは意味することなく、別の要素および行為と単に区別するために使用されることがある。例えば、「第1の」、「第2の」、「第3の」など数の序数は、単に複数のうちの様々な単数を示しており、請求項の文言によって具体的に規定されていなければ、いかなる順番または順序をも意味しない。特許請求の範囲のいずれかにおける文章の順序は、請求項の文言によって具体的に規定されていなければ、処理のステップが、そうした順序に従って一時的または論理的な順番で行われなければならないということを意味しない。処理のステップは、交換が請求項の文言と矛盾せず、論理的に無意味でない限り、本発明の範囲から逸脱せずに、任意の順番で交換されてよい。
[0034]さらに、文脈に応じて、様々な要素間の関係を説明するのに使用された「接続する」または「に結合されている」などの言葉は、これらの要素間で、直接物理的な接続がなされなければならないということを意味しない。例えば、2つの要素が、1つまたは複数の追加要素を介して、互いに物理的に、電子的に、論理的にまたは他の方法で接続されてよい。
[0035]少なくとも1つの例示的な実施形態を本発明の前述の詳細な説明において提示したが、膨大な数の変形形態が存在することを理解されたい。また、例示的な実施形態は、単に例であって、本発明の範囲、適用性または構成を限定することは決して意図されてないことを理解されたい。むしろ、前述の詳細な説明は、本発明の例示的な実施形態を実施するために当業者に便利なロードマップを提供するであろう。添付された特許請求の範囲で説明されるような本発明の範囲から逸脱せずに、例示的な実施形態において説明された要素の機能および構成において、様々な変更がなされ得ることを理解されたい。
100 画像安定化および追跡システム
102 撮像光学部品
104 主撮像検出器
106 安定化および追跡検出器
106−1 安定化および追跡検出器
106−2 安定化および追跡検出器
106−3 安定化および追跡検出器
106−4 安定化および追跡検出器
108 画像処理および補正制御装置
110 適応光学デバイス
112 取付け表面
116 光学系軸芯
118−1 アクチュエータ
118−2 アクチュエータ
122 光学デバイス
202 光学フィールド
204 感光性領域
206 感光性領域
300 追跡システム
302 光学フィルタ
304 デカップリング焦点距離縮小光学系
306 ハウジング
308 ハウジング
312 ハウジング
402 除去部分
第1の焦点距離
第2の焦点距離

Claims (3)

  1. 視野を有し、前記視野内で、光学像における主対象の画像を検出するように構成された主撮像検出器と、
    前記主撮像検出器の前記視野の外側に配置された安定化および追跡検出器であって、前記光学像における追跡対象の画像を検出するように構成された安定化および追跡検出器と、
    前記安定化および追跡検出器から前記追跡対象の前記画像を受け取るように結合された画像処理および補正コマンド制御装置であって、前記追跡対象の相対的な動きを検出し、補正コマンドを供給するように構成された画像処理および補正コマンド制御装置と、
    前記補正コマンドを受け取るように結合され、前記補正コマンドに応答して、移動し、それによって前記光学像の位置を変えるように構成された適応光学デバイスと
    を備える、画像安定化および追跡システム。
  2. 視野を有し、前記視野内で、光学像における主対象の画像を検出するように構成された主撮像検出器と、
    前記主撮像検出器の前記視野の外側に配置された安定化および追跡検出器であって、前記光学像における追跡対象の画像を検出するように構成された安定化および追跡検出器と、
    前記主撮像検出器と前記安定化および追跡検出器との間に配置された光学フィルタであって、前記光学像の一部をフィルタするように構成された光学フィルタと、
    前記安定化および追跡検出器からの前記追跡対象の前記画像を受け取るように結合された画像処理および補正コマンド制御装置であって、前記追跡対象の相対的な動きを検出し、補正コマンドを供給するように構成された画像処理および補正コマンド制御装置と、
    前記補正コマンドを受け取るように結合され、前記補正コマンドに応答して、移動し、それによって前記光学像の位置を変えるように構成された適応光学デバイスと、
    前記適応光学デバイスと前記安定化および追跡検出器との間に配置されたデカップリング焦点距離縮小光学系であって、(i)前記主撮像検出器の前記視野内の第1の焦点距離、および(ii)前記主撮像検出器の前記視野の外側の第2の焦点距離であって、第1の焦点距離と異なる第2の焦点距離を提供するように構成されたデカップリング焦点距離縮小光学系と
    を備える、画像安定化および追跡システム。
  3. 電磁放射を受け取るようになされ、この電磁放射を受け取ると、光学像を形成するように構成された撮像光学部品と、
    位置調整コマンドを受け取るようになされ、この位置調整コマンドを受け取ると、移動するように構成された多自由度のプラットホームと、
    視野を有し、前記視野内で、前記光学像における主対象の画像を検出するように構成された主撮像検出器と、
    前記多自由度のプラットホーム上に取り付けられ、前記主撮像検出器の前記視野の外側に配置された複数の安定化および追跡検出器であって、それぞれが前記光学像における1つまたは複数の追跡対象の画像を検出するように構成された複数の安定化および追跡検出器と、
    前記安定化および追跡検出器から、前記1つまたは複数の追跡対象の前記画像を受け取るように結合された画像処理および補正コマンド制御装置であって、前記追跡対象の1つの相対的な動きを検出し、(i)前記多自由度のプラットホームへ位置調整コマンドを、および(ii)補正コマンドを供給するように構成された画像処理および補正コマンド制御装置と、
    前記補正コマンドを受け取るように結合され、前記補正コマンドに応答して、移動し、それによって前記光学像の位置を変えるように構成された適応光学デバイスと
    を備える、画像安定化および追跡システム。
JP2013048936A 2012-03-15 2013-03-12 画像安定化および追跡システム Pending JP2013198154A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/421,345 2012-03-15
US13/421,345 US9402028B2 (en) 2012-03-15 2012-03-15 Image stabilization and tracking system

Publications (1)

Publication Number Publication Date
JP2013198154A true JP2013198154A (ja) 2013-09-30

Family

ID=47998149

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013048936A Pending JP2013198154A (ja) 2012-03-15 2013-03-12 画像安定化および追跡システム

Country Status (3)

Country Link
US (1) US9402028B2 (ja)
EP (1) EP2640062A1 (ja)
JP (1) JP2013198154A (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016013974A1 (en) * 2014-07-21 2016-01-28 Tinymos Private Limited Image capturing device and method
US10438326B2 (en) 2017-07-21 2019-10-08 The Boeing Company Recursive suppression of clutter in video imagery
US10453187B2 (en) 2017-07-21 2019-10-22 The Boeing Company Suppression of background clutter in video imagery
CN107680100A (zh) * 2017-10-20 2018-02-09 重庆信络威科技有限公司 一种图像检测与跟踪并行协同工作的方法和装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4181408A (en) * 1977-12-05 1980-01-01 Senders John W Vision compensation
US5012270A (en) * 1988-03-10 1991-04-30 Canon Kabushiki Kaisha Image shake detecting device
US5162641A (en) * 1991-02-19 1992-11-10 Phoenix Laser Systems, Inc. System and method for detecting, correcting and measuring depth movement of target tissue in a laser surgical system
JP3450449B2 (ja) * 1994-07-18 2003-09-22 キヤノン株式会社 撮像装置およびその撮像方法
US6714240B1 (en) 1998-06-23 2004-03-30 Boeing North American, Inc. Optical sensor employing motion compensated integration-device and process
US8553113B2 (en) * 2003-08-20 2013-10-08 At&T Intellectual Property I, L.P. Digital image capturing system and method
US7742077B2 (en) 2004-02-19 2010-06-22 Robert Bosch Gmbh Image stabilization system and method for a video camera
US20060018643A1 (en) 2004-07-21 2006-01-26 Stavely Donald J Magnet configuration for image stabilization
FR2882160B1 (fr) 2005-02-17 2007-06-15 St Microelectronics Sa Procede de capture d'images comprenant une mesure de mouvements locaux
US7656428B2 (en) * 2005-05-05 2010-02-02 Avago Technologies General Ip (Singapore) Pte. Ltd. Imaging device employing optical motion sensor as gyroscope
US9298014B2 (en) * 2005-07-01 2016-03-29 Flir Systems, Inc. Image stabilization system
JP2008026802A (ja) * 2006-07-25 2008-02-07 Canon Inc 撮像装置
US20080118104A1 (en) * 2006-11-22 2008-05-22 Honeywell International Inc. High fidelity target identification and acquisition through image stabilization and image size regulation
WO2009002004A1 (en) * 2007-06-28 2008-12-31 Ewha University-Industry Collaboration Foundation An optical module including a plurality of detectors for an optical signal

Also Published As

Publication number Publication date
US9402028B2 (en) 2016-07-26
US20130242112A1 (en) 2013-09-19
EP2640062A1 (en) 2013-09-18

Similar Documents

Publication Publication Date Title
KR100804719B1 (ko) 촬상 모듈
US10261337B2 (en) Apparatus for driving optical-reflector
US20210389551A1 (en) Camera actuator and camera module comprising same
US11700451B2 (en) Image pickup apparatus capable of capturing images with proper exposure, control method, and memory medium
JP2006503299A (ja) 可変視野を提供するために有向妨害(directedcountermeasure)システム内で光学的歪みを使用する方法及び装置
US10171737B2 (en) Imaging device
JP2013198154A (ja) 画像安定化および追跡システム
KR102179981B1 (ko) 곡면 광학 센서에 대한 흔들림 방지 보정 시스템
TWI587001B (zh) 紅外線成像系統
US20220244621A1 (en) Optical unit
US20190222763A1 (en) Image stabilization control apparatus, image capturing system, control method, and recording medium
US20220080902A1 (en) Vehicle-mounted camera
US12007619B2 (en) Imaging lens system, image capturing unit and electronic device
US20100128164A1 (en) Imaging system with a dynamic optical low-pass filter
JP6250446B2 (ja) 画像処理システム、画像処理装置、画像処理方法及びプログラム
US20140293054A1 (en) Optical device for a vehicle
EP2613191A1 (en) Imaging device
JP6442114B1 (ja) 検出器照明の組合せ及び選択のための回転ビームスプリッタ光学的スイッチングメカニズム
KR20200014204A (ko) 제어장치, 촬상장치, 및 기억매체
JP2021060468A (ja) 撮像装置、移動体、および撮像装置の製造方法
CN109891872B (zh) 用于成像设备的图像稳定化控制设备
US9588260B2 (en) Microlens substrate and imaging apparatus
JP2011095467A (ja) 像ブレ補正装置、レンズ鏡筒、撮像装置本体、及び、撮像装置
US9667869B2 (en) Camera apparatus for automatically maintaining horizontality and method for the same
KR20090089234A (ko) 촬상 렌즈 시스템