JPH10501386A - 可動プラットフォームから移動物体を表示するビデオ技術 - Google Patents

可動プラットフォームから移動物体を表示するビデオ技術

Info

Publication number
JPH10501386A
JPH10501386A JP8501074A JP50107495A JPH10501386A JP H10501386 A JPH10501386 A JP H10501386A JP 8501074 A JP8501074 A JP 8501074A JP 50107495 A JP50107495 A JP 50107495A JP H10501386 A JPH10501386 A JP H10501386A
Authority
JP
Japan
Prior art keywords
image data
scene
time
imaging
imaging device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP8501074A
Other languages
English (en)
Inventor
ピーター, ジェフリー バート,
Original Assignee
デイヴィッド サーノフ リサーチ センター インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by デイヴィッド サーノフ リサーチ センター インコーポレイテッド filed Critical デイヴィッド サーノフ リサーチ センター インコーポレイテッド
Publication of JPH10501386A publication Critical patent/JPH10501386A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/254Analysis of motion involving subtraction of images
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • G08B13/1963Arrangements allowing camera rotation to change view, e.g. pivoting camera, pan-tilt and zoom [PTZ]
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19641Multiple cameras having overlapping views on a single scene
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19647Systems specially adapted for intrusion detection in or around a vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/221Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0085Motion estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

(57)【要約】 2台の空間的に離れて固定された撮像装置、例えばビデオカメラ、を進行方向に1直線上に並べて載せるか、その代わりに、この2台の固定されたカメラが占める位置に相当する2つの位置のどちらにでも動かせるような1台のカメラ(100)を載せて移動するロボット車両(102)による監視装置に適した映像処理技術で、移動物体表示モードでは、第1の時刻における撮影情景の第1の画像データを車両に対する第1の位置から取得し、第2の時刻における撮影情景の第2の画像データを車両に対する第2の位置から取得することができる。この第2の位置は、第2画像データによって描写された撮影情景に対する空間位置が第1画像データによって描写された撮影情景に対する空間位置と少なくとも近似するように、第1の位置から所定の距離だけ空間的に離れている。移動車両が遭遇する運転上の危険を検知する目的で、この映像処理技術はまた立体視モードで作動させることができ、この場合は、第1及び第2の画像データは、同時に同じ撮影情景の視線角度から取得される。

Description

【発明の詳細な説明】 可動プラットフォームから移動物体を表示するビデオ技術 現在のビデオ画像フレームの各画素の強度から、これに対応する記憶された以 前のビデオ画像フレームの各画素強度を単純に差し引くことによって動作し、静 止プラットフォームから移動物体を表示するビデオ技術がよく知られている。こ れは、ビデオ画像画素中の静止物体を表す画素を実質的に除去することになる。 このフレーム差分アプローチにおいて使用することのできるデジタル画像処理技 術は、米国特許4,692,806号及びアンダースンらの論文「ピラミッド変換技術を 用いた検出及び追跡の変更(Change Detection and Tracking Using Pyramid Tr ansform Techniques)」(知能ロボット工学及びコンピュータビジョンSPIE会議 、マサチューセッツ州ボストン、1985年、SPIE Vo1.579)に開示されており、こ れらの双方は参考文献とすることによりここに組み込まれる。 参考文献とすることによりここに組み込まれるものとしてまた、バートら著の 論文「移動カメラを用いた物体の追跡、力学的運動分析の応用(Object Trackin g With A Moving Camera,An Application Of Dynamic Motion Ana1ysis)」( IEEEヴィジュアルモーション・ワークショップ、カリフォルニア州アーヴィン、 1989年3月)の開示内容がある。この論文は、カメラが動いている場合は、連続 する画像フレームを電子的にシフトし回転することによって、結果として得られ る画像の動きを、フレーム差分を計算する前に整列(alignment)する補償がしば しば可能であることを開示する。このような電子整列(electronicalignment)は 、単純な画像の変形(warp)に基づいている(例えば、アフィン変換に基づいてい る)。この変形は、ある情景の動きが比較的小さな視差を含んでいるとき、例え ば、カメラが回転しているが平行移動していないときや、整列が行われるカメラ の視野範囲中にある物体が比較的狭い深度(depth)範囲にある場合には効果的で ある。 さらに、参考文献としてここに組み込まれるものとしてハンナの論文「運動か らの自己運動及び構造の直接多重分割評価(Direct Mu1ti-Resolution Estimati on Of Ego-Motion And Structure From Motion)」(IEEEヴィジュアルモーショ ン・ワークショップ、ニュージャージー州プリンストン、1991年10月)の開示内 容がある。この論文には、電子整列が、観察された動きに基づく1情景中の物体 への距離の評価を回復する画像処理ステップを含めることによって視差の動きを 補償することに一般化できることが教示されている。評価された距離は、カメラ 自体の動きに対する評価とともに、この後視差の動きの予測と補償に用いられる 。 深度回復と視差補償のためのこれら既存の画像処理技術は実用上の限界を有し ており、計算に費用がかかる。さらに、これらは、画像中の近くの物体とより遠 くの物体の間の境界に沿った深度の評価で重大な誤差を生じる場合がある。本発 明はこれらの問題を克服するためのものである。 この発明は、移動プラットフォームから情景を撮影する装置を有する。そして この装置は、(1)この移動プラットフォームに配置されて、情景の第1の画像 データを第1の時刻にこの移動プラットフォームに対する第1の位置から取得し 、この情景の第2の画像データを第2の時刻にこの移動プラットフォームに対す る第2の位置から取得する装置であって、この第2位置は、第2画像データによ って描写された撮影情景に対する空間位置が第1画像データによって描写された 撮影情景に対する空間位置と少なくとも近似するように、この第1位置から所定 の距離だけ空間的に離れているようなカメラ手段を有する手段と、(2)第1及 び第2画像データに応答し、そこから特定の情報を抽出する画像処理手段と、を 備えている。この装置は、移動物体表示モードでも立体視モードでも動作させる ことができる。 この発明は、また、移動プラットフォームから撮影した情景中の移動物体を静 止物体から識別するイメージング方法に関する。この方法は、第1の時刻におけ る情景の第1の画像データを移動プラットフォームに対する第1の位置から取得 するとともに、第2の時刻におけるこの情景の第2の画像データを移動プラット フォームに対する第2の位置から取得するステップを備えている。この第2位置 は、この第1位置と空間的に所定の距離だけ離れており、第2画像データにより 描写される撮影情景に対する空間位置が第1画像データにより描写される撮影情 景の空間位置と少なくとも近似するようになっている。 図面において、 図1及び1aは、異なる深度の静止物体及び移動物体の両方を含む情景を、移 動車両に固定された1台のビデオカメラにより撮影したときの視差によって発生 する移動物体表示器の問題点を示している。 図2は、1台の移動車両に共に固定された2台の空間的に離された撮像装置(i mager)を使用する本発明の第1の実施形態を示している。 図2a及び2bは、1台の移動車両において位置を移動できる1台の撮像装置 を使用する本発明の第2の他の実施形態を示している。 図3は、図2の第1の実施形態又は図2a、2bの第2の実施形態から得られ たビデオ信号を処理することが可能な移動物体画像処理装置のブロック図である 。 図4a及び4bは、図4aに示される位置にあるときの移動物体表示モードと 図4bに示される位置にあるときの立体視モードのいずれかを選択して動作する ために、移動車両における位置を移動できる2台の撮像装置を使用する本発明の 第3の実施形態を示す。 図5は、図4bに示された立体視モードにあるときの第3の実施形態から得ら れたビデオ信号を処理することが可能な立体画像処理装置のブロック図である。 静止撮像装置、例えば前述の米国特許4,692,806号で開示された監視装置で使 用されるビデオカメラ、によって撮られた情景の画像中に検出された任意の動き は、この情景中の一個以上の移動物体のみによるものに違いない。しかしながら 、図1に示されるように、ある情景を撮っている撮像装置100、例えばビデオ カメラ、が可動プラットフォーム、例えば前進速度Vで左から右へ動いている車 両102、に設置されている場合は、これはもはや真実ではない。更に詳しくい うと、それ自体速度Vで移動している撮像装置100は、撮像装置100の比較 的近くに位置する静止容器104と、撮像装置100から比較的遠くに位置する 静止した木106と、容器104と木106の間に位置し、車両102が動くの とほぼ同じ方向に歩いている移動人物108とを含む情景を撮っている。図1a は、撮像装置100によって撮られたこの情景の画像を示している。図1aに示 される進行中の画像の矢印の相対的な長さと方向により示されるように、視差の ために、より近くにある静止容器104aは、より離れた木106aよりも高速 で画像中を右から左へ動き、一方、移動人物108aは、比較的低速で画像中を 左から右へ動く。 ある環境中の移動物体を、自身もまたこの環境中を移動するプラットフォーム に設置された撮像装置を用いて検出する画像処理技術に対する需要がある。その ような機能を用いる実用例として、(1)侵入者をその動きに基づいて検知するた めに、工場や他の保安地域をパトロールする警備員の任に当たるロボット車両や 、(2)運転中の危険を検知する目的で、道路をふさぐ移動物体と静止物体とを識 別する自動車またはトラックの自律視覚システムや、(3)戦場の移動物体を検知 するための移動監視プラットフォームにおける標的検知システム、のような例が 含まれる。しかしながら、図1の1台の移動撮像装置100を用いる前述の米国 特許4,692,806号で開示されたタイプの監視装置は、1台の移動撮像装置100 からのビデオ画像中の移動物体を識別できない。というのは、この情景中で実際 に動いている物体と、撮像装置の動きによってこのビデオ画像中では動いている ように見えるこの情景中の静止物体とがあるためである。本発明は、この撮影情 景中のこれらの静止物体、例えば図1の静止容器104と木106、を、この画 像中での見かけの動きにかかわらずに取り除いて、この撮影情景中にある全ての 移動物体、例えば移動人物108、を検出することが可能な技術を提供する。 より詳細に説明すると、図2は、1台の可動プラットフォーム、例えば前進速 度Vで左から右へ動いている1台の自動制御(運転手のいない)車両202、に 設置されたビデオカメラ等の2台の撮像装置200F及び200Rを備える監視 装置の第1の実施形態の構成を示す。図示のように、撮像装置200F及び20 0Rは、ある情景(例えば、図1に示されるようなもの)を撮るために双方とも ほぼ同じ方向に向けられており、前進速度Vの方向とほぼ一直線上に並んだ一定 の距離dだけ互いに離されている。図2a及び2bは、監視装置の第2の他の実 施形態を示しており、この実施形態では、車両202の屋根に取り付けられたレ ール210の上に載った1台の撮像装置200は、その位置を図2aに示すよう なレール210の前部から、図2bに示すようなレール210の後部まで前後に 動かされることができる。したがって、この実施形態では、図2aに示す位置に ある撮像装置200は、図2の撮像装置200Fに相当し、一方、図2bに示す 位置にある撮像装置200は、図2の撮像装置200Rに相当する。 同じ瞬間において撮像装置200R及び200Fは異なる空間上の位置を占め るが、車両202の前進速度Vの値に依存する所定の時間間隔の後、撮像装置2 00Rは、撮像装置200Fが以前に占めていたのとほぼ同一の空間位置を占め るのは明らかである。同様に、このような所定の時間間隔後、図2bに示す位置 にある撮像装置200は、以前に図2aに示す位置にあった撮像装置200が占 めていたのとほぼ同じ空間位置を占めることになる。 図3は、移動ビデオ撮像装置により撮影されている情景中で実際に動いている 物体のみを検出するデジタル画像処理手段の図である。第1のケースでは、この 処理手段は、2つの撮像装置300−1及び300−2を備えている。これらは 各々、自身が設置された車両202と共に前方へ速度Vで動いている図2のカメ ラ200R及び200Fに相当し、画像フレームを定める信号(通常はアナログ だが、場合によってはデジタルのビデオ信号)を得るためのものである。第2の ケースでは、これらの信号は、図2a及び2bの対応する位置の各々における撮 像装置200に対応した1台の撮像装置300−1のみから得られる。ビデオレ ートの異なる信号を、異なるレートで動作する撮像装置やフレーム記憶装置と共 に等しく使用できることが理解できるだろう。 第1と第2の両方のケースにおいて、撮像装置300−1からのアナログ信号 はアナログ−デジタル変換器(A/DC)302−1によりデジタル信号に変換 される。規則的な時間間隔を置いて、A/DC302−1からの1画像フレーム のデジタル信号が、フレーム記憶メモリ304に記憶され、その画像フレームに 対して所定の時間遅延を与える。この所定時間遅延の終了時に、その記憶された 画像フレームによって定められる画像はメモリ304から読み出され、変形手段 (warp means)306によって、残差評価手段(estimate residual means)3 08の出力により制御された量だけ変形される(このような変形手段と残差評価 手段は前述のバートらの論文に開示されている)。手段306からの変形画像出 力は、第1の入力として評価手段308に印加され、被減数入力として減算手段 310に印加される。 第1ケースでは、撮像装置300−2からのアナログ信号は、A/DC302 −2によりデジタル信号に変換される。そして、A/DC302−2からのデジ タル出力は、評価手段308への第1入力印加及び手段310への被減数入力の 印加と同時に、第2の入力として残差評価装置308へ直接印加され、減数入力 として減算装置310へ直接印加される。ある実施形態では、手段310からの 1画素ずつのデジタル差分出力は、エネルギーの局所的変化(local change in energy)を評価するガウスピラミッド手段(Gaussian pyramid means)312( 米国特許4,692,806号及びアンダースン他の論文で開示するされている)への入 力として印加される。この差分値はガウス・ピラミッドの構築の前に(2乗値か 絶対値のいずれかに)修正されなければならない。ピラミッド手段312からの 出力は、米国特許4,692,806号に開示された監視装置において使用されたフォビ エーション(foveation)技術を実行するのに使用することができる。 第2ケースでは、A/DC302−1からの1画像フレームのデジタル信号は 、ビデオ撮像装置300−1が図2aの撮像装置200の位置に相当する比較的 前方の位置にある場合のみにメモリ304に記憶される。A/DC302−1か らの1画像フレームのデジタル信号は、図3において破線で示すように、撮像装 置300−1が図2bの撮像装置200の位置に相当する比較的後方の位置にあ るときに、手段308への第1入力の印加及び手段310への被減数入力の印加 と同時に、第2の入力として手段308に直接印加され、減数入力として手段3 10へ直接印加される。他の全ての点では、この第2ケースのデジタル画像処理 手段は、上述した第1ケースのものと同一である。 図3のこのデジタル画像処理手段は、実際上後ろを移動する撮像装置で取得し た画像の各々を、実際上前を移動する撮像装置で事前に取得した対応する画像と 比較する動作を行う。対応する画像は、異なる時刻に取得されたものであるが、 この後方移動撮像装置は前方移動撮像装置の後を追って移動するので、空間中の 大まかに同じ位置で取得されたものである。同じ方向を向いている2台の移動撮 像装置を用いて、所定の空間位置から得られた時間的に隔てられた1対の画像は 、1台の静止撮像装置を用いてその場所から得られた1対とほぼ同一である。 図2の配置並びに図2a及び図2bの配置の両方に対応したこの実際上後ろを 移動する撮像装置と実際上前を移動する撮像装置との間の距離をdとし、移動プ ラットフォーム、例えば車両202、の速度をVとすると、メモリ304によっ て与えられる時間遅延tは、t=d/vとなる。画像フレームは規則的な間隔Dで得ら れるので、時刻tF(n)=tO+nDに得られるこの前方のカメラからのn番目のフレー ムは、時刻tR(n)=tO+nD+tに得られる後方の撮像装置からのn番目の画像と比較 される。さらにまた、これらの撮像装置が情景を走査するために車両が動くのに つれて進行方向に対して回転する場合、この後方撮像装置の向きΘRは、前方撮 像装置 の向きΘFを同じ時間遅延でもって追随する。すなわち、ΘR(t)=ΘF(t)である。 実際問題として、前の画像と後ろの画像の対が厳密に同じ空間位置から取得さ れることを保証するのは不可能である。このため、図3のデジタル画像処理手段 は、画像の差と変更の検出に先立って電子的な画像の整列を行う変形手段及び残 差評価手段を有する。実際上前と後ろを移動する撮像装置を使用しても、車両の 動きに起因する画像間の実際上のずれを1台しか撮像装置を用いない場合に比べ てずっと小さくすること及び視差の動きに起因するいかなる相対的なずれも相応 じて減少させることが保証される。さらに述べると、この効率的な2台の撮像装 置によるアプローチが用いられるときは、簡単な画像整列(例えばアフィン)で 通常充分であり、一方、例えば図1で使用されているような1台の撮像装置によ るアプローチを用いると深度回復を用いたより複雑な電子整列が必要になる。 本発明の監視装置は、工場や他の保安地域を、侵入者をその動きにより検出す るためにパトロールする警備員の任に当たるロボット車両の形態をとっても良い 。この適用例では、他の適用例と同様に、走行中の障害物を回避する目的で立体 視機能を車両に与え、さらに、監視中に侵入者を検出する目的で前述した動き検 出機能を車両に与えることが好ましい。図4aと4bは、いかにすればこの同じ 2台の撮像装置を使用して、これらの機能の双方を実現することができるのかを 示している。 図4a及び図4bに示されるように、撮像装置400−1及び400−2は、 バー414の両端に取り付けられており、バー414の中央は、垂直軸のまわり を回転できるように車両402の屋根に取り付けられている。さらにまた、バー 414の長さ方向に対して、撮像装置400−1及び400−2の向いている角 度は調整可能である。車両402は速度vで前方に移動している。動き検出モー ドで動作しているときは、図4aに示すように、バー414の長さ方向と移動車 両402の前方への移動方向が一直線に並んでおり、立体視モードで動作してい るときは、図4bに示すように、バー414の長さ方向とカメラ400−1及び 400−2の視線方向とはほぼ垂直に配置されている。 図5において、撮像装置500−1及び500−2は、図4bに示される立体 視モードで動作するときの撮像装置400−1及び400−2にそれぞれ相当す る。図5に示されるように、撮像装置500−1からの出力を形成するこのアナ ログ信号は、A/DC502−1によりデジタル信号に変換され、それから立体 画像プロセッサ(stereo image processor)504への第1入力として印加され る。一方、撮像装置500−2からの出力を形成するアナログ信号は、A/DC 502−2によりデジタル信号に変換され、プロセッサ504への第2入力とし て印加される。撮像装置500−1又は撮像装置500−2のいずれの出力にも 時間遅延は挿入されないので、プロセッサ504への第1及び第2の入力として 印加される各々のビデオ信号は、互いに同時に印加される。前述したハンナの論 文の開示は、プロセッサ504を実現する際に使用することができる。プロセッ サ504からの出力は、その後ステアリングを制御して、車両402の進路上の 障害物を回避するために用いることができる。 したがって、本発明の重要な利点のひとつは、単一の画像取得装置を立体及び 動きの検出の両方に用いることができる点である。さらにまた、図3に示す動き 検出画像プロセッサとプロセッサ504は、同様に計算モジュールを共有するこ とができる。 上述した本発明の好適な実施形態では、2台の撮像装置を使用しているが、2 台を超える数の撮像装置をそのいくつかが他の装置に追随して動くように配置さ れた本発明の実施形態もまた企図していることも理解されるべきである。さらに また、画像処理は、この移動プラットフォーム自体で行ってもよいし、代わりに 、画像処理に必要な入力データを移動プラットフォームから離れた位置に転送し て、この離れた位置で画像処理を行ってもよい。

Claims (1)

  1. 【特許請求の範囲】 1. 移動プラットフォームから3次元の情景を撮影する装置であって、前記3 次元情景は前記移動プラットフォームから異なる距離離れた複数の物体を含んで いても良く、 前記移動プラットフォームに設置されたイメージング手段を有し、前記移動プ ラットフォームに対する第1の位置から第1の時刻における前記情景の第1の画 像データを取得するために前記イメージング手段を前記情景に向かう所定の方向 に向け、前記移動プラットフォームに対する第2の位置から後続の第2の時刻に おける前記情景の第2の画像データを取得するために前記イメージング手段を前 記情景に向かうほぼ同一の所定方向に向ける手段であって、この第2位置は、前 記第2画像データによって描写される前記撮影情景に対する空間位置が前記第1 画像データにより描写される前記被写画面に対する空間位置と少なくとも近似す るように、前記第1位置から所定の距離だけ空間的に離れている手段と、 前記撮影情景中の静止物体に対して動いている前記撮影情景中の物体を表示し 、前記撮影情景中の静止物体のいかなる表示をも実質的に除去する情報を、前記 第1及び第2の画像データに応答して、これらから抽出する画像処理手段と、 を備える装置。 2. 前記移動プラットフォームは、所定の移動方向に所定の速度で動いており 、 イメージング手段を有する前記手段は、前記先行の第1時刻に前記第1位置に 配置される撮像装置と、前記後続の第1時刻に前記第2位置に配置される撮像装 置と、を有し、前記第2位置は、前記移動方向とほぼ一直線に並んだ所定の距離 だけ前記第1位置から離れており、 前記後続の第2時刻と前記先行の第1時刻との時間差は、前記所定速度を前記 所定距離で割った商にほぼ等しい請求項1記載の装置。 3. イメージング手段を有する前記手段は、第1及び第2の別個の撮像装置を 有しており、前記第1カメラは、前記第1位置で前記移動プラットフォームに固 定されており、前記第2カメラは、前記第2位置で前記移動プラットフォームに 固定されている請求項1記載の装置。 4. イメージング手段を有する前記手段は、前記移動プラットフォームに対し て前記第1位置と前記第2位置との間を動くことのできる単一の撮像装置を有し ており、前記単一の撮像装置は、前記先行時刻において前記第1位置を占め、前 記後続時刻において前記第2位置を占めるようになっている請求項2記載の装置 。 5. イメージング手段を有する前記手段は、前記第1画像データ及び前記第2 画像データを画像フレームとして取得し、 前記画像処理手段は、前記アナログ−デジタル変換手段からの第1のデジタル 出力に応答して前記第1画像データを前記後続第2時刻と前記先行第1時刻との 時間差の分だけ時間遅延させるフレーム記憶メモリ手段と、変形手段(warp mea ns)及び残差変位評価手段(residual displacement estimation means)を有す る手段であって、前記フレーム記憶メモリからの出力を変形して、変形された前 記時間遅延第1画像データにより描写される静止物体と前記第2画像データを定 める第2のデジタル出力により描写される静止物体との位置をほぼ一致させる手 段と、計算手段と、減算手段及びガウスピラミッド(Gaussian pyramid)を有す る手段であって、変形及び時間遅延された前記第1画像データと前記第2画像デ ータとの差における局所変化エネルギー評価(local change energy estimation )を算出する手段と、を備えている請求項1記載の装置。 6. 前記画像フレームはアナログ形式であり、 前記画像処理手段は、前記第1及び第2画像データの各々をアナログ形式から デジタル形式に変換するアナログ−デジタル変換手段を有している請求項5記載 の装置。 7. イメージング手段を有する前記手段は、第1の撮像装置から前記第1画像 データを取得し、第2の撮像装置から前記第2画像データを取得し、 前記アナログ−デジタル変換手段は、前記第1画像データをアナログ形式から デジタル形式に変換する第1のアナログ−デジタル変換器と、前記第2画像デー タをアナログ形式からデジタル形式に変換する第2のアナログ−デジタル変換器 と、を備えている請求項5記載の装置。 8. イメージング手段を有する前記手段は、前記先行第1時刻において単一の 撮像装置から前記第1画像データを取得し、前記後続第2時刻において同じ単一 の撮像装置から前記第2画像データを取得し、 前記アナログ−デジタル変換手段は、前記先行第1時刻に前記第1画像データ をアナログ形式からデジタル形式に変換し、前記後続第2時刻に前記第2画像デ ータをアナログ形式からデジタル形式に変換する単一のアナログ−デジタル変換 器を備えている請求項5記載の装置。 9. 移動プラットフォームから3次元情景を撮影する手段であって移動プラッ トフォームに配置されたイメージング手段を有している撮影手段と、前記撮影手 段からの画像データに応答する画像処理手段と、を備える装置において、 前記移動プラットフォームは、所定の移動方向に移動可能な車両を備えており 、 イメージング手段を有する前記手段は、水平面上にほぼ配されたバーを備えて おり、前記バーは、ほぼ垂直方向を軸として回転できるように前記バーの両端間 の所定の点で前記車両に取り付けられており、第1及び第2の撮像装置は、前記 所定の点のいずれかの側において前記バーの対向する端部の方でそれぞれ取り付 けられており、前記第1撮像装置が前記第1位置を占め、前記第2撮像装置が前 記第2位置を占めるようになっている装置。 10. イメージング手段を有する前記手段は、前記所定の移動方向に対して前 記第1撮像装置が前記第2撮像装置より前方に位置して、前記所定の移動方向と ほぼ一直線に並ぶような位置に前記バーを回転する手段をさらに備えており、 前記第1撮像装置が先行の第1時刻における前記情景の前記第1画像データを 前記車両に対する前記第1位置から取得し、前記第2撮像装置が後続の第2時刻 における前記情景の前記第2画像データを前記車両に対する前記第2位置から取 得する移動物体表示モードであって、前記第2位置が、前記第2画像データによ り描写される前記撮影情景に対する空間位置が前記第1画像データにより描写さ れる前記撮影情景に対する空間位置と少なくとも近似するように前記バーによっ て前記第1位置から所定距離だけ離されている移動物体表示モードで動作できる ようになっている請求項9記載の装置。 11. イメージング手段を有する前記手段は、前記所定の移動方向から所定の 視線角度だけ角度変位した位置に前記バーを回転する手段をさらに備えており、 前記第1撮像装置が前記車両に対する前記第1位置から前記所定の視線角度で 前記情景の前記第1画像データを取得すると同時に、前記第2撮像装置が前記車 両に対する前記第2位置から前記所定の視線角度で前記情景の前記第2画像デー タを取得する立体視モードで動作できるようになっている請求項9記載の装置。 12. 移動プラットフォームから撮影した3次元情景中の移動物体を静止物体 から識別するイメージング方法であって、前記3次元情景は前記移動プラットフ オームから異なる距離にある複数の物体を含んでも良く、 前記情景に向かう所定の方向にイメージング手段を向けることにより第1の時 刻における前記情景の第1の画像データを前記移動プラットフォームに対する第 1の位置から取得し、前記情景に向かうほぼ同一の方向にイメージング手段を向 けることにより第2の時刻における前記情景の第2の画像データを前記プラット フォームの第2の位置から取得し、前記第2位置は、前記第2画像データにより 描写される撮影情景に対する空間位置が前記第1画像データにより描写される撮 影情景に対する空間位置と少なくとも近似するように前記第1の位置から空間的 に離れているステップを備えており、 前記第1及び第2画像データが前記移動プラットフォームの動きによって生じ た前記3次元情景中の比較的近くの物体と比較的遠くの物体との間の視差の描写 を最小限に抑えるイメージング方法。
JP8501074A 1994-06-03 1995-06-02 可動プラットフォームから移動物体を表示するビデオ技術 Pending JPH10501386A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US08/253,512 1994-06-03
US08/253,512 US5473364A (en) 1994-06-03 1994-06-03 Video technique for indicating moving objects from a movable platform
PCT/US1995/006709 WO1995034171A1 (en) 1994-06-03 1995-06-02 Video technique for indicating moving objects from a movable platform

Publications (1)

Publication Number Publication Date
JPH10501386A true JPH10501386A (ja) 1998-02-03

Family

ID=22960586

Family Applications (1)

Application Number Title Priority Date Filing Date
JP8501074A Pending JPH10501386A (ja) 1994-06-03 1995-06-02 可動プラットフォームから移動物体を表示するビデオ技術

Country Status (3)

Country Link
US (1) US5473364A (ja)
JP (1) JPH10501386A (ja)
WO (1) WO1995034171A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003271045A (ja) * 2002-03-15 2003-09-25 Sony Corp 画像処理装置及び画像処理方法、印刷物製造装置及び印刷物製造方法、並びに印刷物製造システム
JP2004514384A (ja) * 2000-11-29 2004-05-13 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング 車両の周囲を監視するための方法及び装置

Families Citing this family (86)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69518128T2 (de) * 1994-09-21 2001-03-29 Kabushiki Kaisha Toshiba, Kawasaki Bilddatenverarbeitungsvorrichtung mit Bilddatenteilungsfunktion und Verfahren zur Verarbeitung von Bilddaten
US6414709B1 (en) * 1994-11-03 2002-07-02 Synthonics Incorporated Methods and apparatus for zooming during capture and reproduction of 3-dimensional images
US6028626A (en) 1995-01-03 2000-02-22 Arc Incorporated Abnormality detection and surveillance system
US5666157A (en) 1995-01-03 1997-09-09 Arc Incorporated Abnormality detection and surveillance system
US5777690A (en) * 1995-01-20 1998-07-07 Kabushiki Kaisha Toshiba Device and method for detection of moving obstacles
US6049619A (en) * 1996-02-12 2000-04-11 Sarnoff Corporation Method and apparatus for detecting moving objects in two- and three-dimensional scenes
US6192145B1 (en) * 1996-02-12 2001-02-20 Sarnoff Corporation Method and apparatus for three-dimensional scene processing using parallax geometry of pairs of points
US6693666B1 (en) * 1996-12-11 2004-02-17 Interval Research Corporation Moving imager camera for track and range capture
US5898459A (en) * 1997-03-26 1999-04-27 Lectrolarm Custom Systems, Inc. Multi-camera programmable pan-and-tilt apparatus
US6124864A (en) * 1997-04-07 2000-09-26 Synapix, Inc. Adaptive modeling and segmentation of visual image streams
US6084590A (en) * 1997-04-07 2000-07-04 Synapix, Inc. Media production with correlation of image stream and abstract objects in a three-dimensional virtual stage
US6160907A (en) * 1997-04-07 2000-12-12 Synapix, Inc. Iterative three-dimensional process for creating finished media content
JP3103045B2 (ja) * 1997-07-10 2000-10-23 三菱電機株式会社 画像撮影再生方式及び方法並びに画像再生プログラムを記録した記録媒体
US6115651A (en) * 1998-01-15 2000-09-05 Cruz; Diogenes J. Large vehicle blindspot monitor
US7280134B1 (en) 1998-01-26 2007-10-09 Thales Avionics, Inc. Landscape camera system with electronic field of view switching
US6266053B1 (en) 1998-04-03 2001-07-24 Synapix, Inc. Time inheritance scene graph for representation of media content
US6249285B1 (en) 1998-04-06 2001-06-19 Synapix, Inc. Computer assisted mark-up and parameterization for scene analysis
US6297825B1 (en) 1998-04-06 2001-10-02 Synapix, Inc. Temporal smoothing of scene analysis data for image sequence generation
EP1115250B1 (en) * 1998-07-31 2012-06-06 Panasonic Corporation Method and apparatus for displaying image
US6501515B1 (en) * 1998-10-13 2002-12-31 Sony Corporation Remote control system
JP2000161915A (ja) * 1998-11-26 2000-06-16 Matsushita Electric Ind Co Ltd 車両用単カメラ立体視システム
US7124427B1 (en) * 1999-04-30 2006-10-17 Touch Technologies, Inc. Method and apparatus for surveillance using an image server
US6668327B1 (en) 1999-06-14 2003-12-23 Sun Microsystems, Inc. Distributed authentication mechanisms for handling diverse authentication systems in an enterprise computer system
JP3349121B2 (ja) * 1999-09-22 2002-11-20 富士重工業株式会社 ステレオカメラの取付構造
US6548982B1 (en) 1999-11-19 2003-04-15 Regents Of The University Of Minnesota Miniature robotic vehicles and methods of controlling same
CA2392652A1 (en) * 1999-11-26 2001-05-31 Amnon Shashua System and method for estimating ego-motion of a moving vehicle using successive images recorded along the vehicle's path of motion
EP1727089A3 (en) * 1999-11-26 2007-09-19 MobilEye Technologies, Ltd. System and method for estimating ego-motion of a moving vehicle using successive images recorded along the vehicle's path of motion
US6747666B2 (en) * 2000-01-26 2004-06-08 New York University Method and system for facilitating wireless, full-body, real-time user interaction with digitally generated text data
AU2001253619A1 (en) * 2000-04-14 2001-10-30 Mobileye, Inc. Generating a model of the path of a roadway from an image recorded by a camera
US7082209B2 (en) * 2000-08-31 2006-07-25 Hitachi Kokusai Electric, Inc. Object detecting method and object detecting apparatus and intruding object monitoring apparatus employing the object detecting method
US20030202097A1 (en) * 2000-10-26 2003-10-30 Autoliv Development Ab Night vision arrangement
SE520042C2 (sv) * 2000-10-26 2003-05-13 Autoliv Dev Anordning för förbättring av mörkersikten hos ett fordon såsom en bil
US7423666B2 (en) * 2001-05-25 2008-09-09 Minolta Co., Ltd. Image pickup system employing a three-dimensional reference object
DE10131196A1 (de) * 2001-06-28 2003-01-16 Bosch Gmbh Robert Vorrichtung zur Detektion von Gegenständen, Personen oder dergleichen
US6911995B2 (en) * 2001-08-17 2005-06-28 Mitsubishi Electric Research Labs, Inc. Computer vision depth segmentation using virtual surface
US7995095B2 (en) * 2001-10-18 2011-08-09 Autoliv Development Ab Night vision device for a vehicle
KR100486709B1 (ko) * 2002-04-17 2005-05-03 삼성전자주식회사 객체기반 대화형 동영상 서비스 시스템 및 그 방법
US6860346B2 (en) * 2002-04-19 2005-03-01 Regents Of The University Of Minnesota Adjustable diameter wheel assembly, and methods and vehicles using same
DE10246067B4 (de) * 2002-10-02 2008-01-03 Robert Bosch Gmbh Verfahren und Vorrichtung zur Kalibrierung eines Bildsensorsystems in einem Kraftfahrzeug
US20040152486A1 (en) * 2003-02-03 2004-08-05 Masaharu Sano Capture, edit and distribution method of image and sound information
US7388598B2 (en) * 2003-02-14 2008-06-17 Image Ensemble, Inc. 3D camera system and method
US20040196369A1 (en) * 2003-03-07 2004-10-07 Canon Kabushiki Kaisha Monitoring system
JP2005103680A (ja) * 2003-09-29 2005-04-21 Toshiba Corp 監視システムおよび監視ロボット
JP4052650B2 (ja) * 2004-01-23 2008-02-27 株式会社東芝 障害物検出装置、方法及びプログラム
US7559385B1 (en) 2004-03-10 2009-07-14 Regents Of The University Of Minnesota Ruggedized robotic vehicles
US7671916B2 (en) * 2004-06-04 2010-03-02 Electronic Arts Inc. Motion sensor using dual camera inputs
BRPI0514755B1 (pt) * 2004-08-30 2017-10-17 Commonwealth Scientific And Industrial Research Organisation Method for automated 3d image formation
US8724891B2 (en) * 2004-08-31 2014-05-13 Ramot At Tel-Aviv University Ltd. Apparatus and methods for the detection of abnormal motion in a video stream
KR100677252B1 (ko) * 2004-09-23 2007-02-02 엘지전자 주식회사 로봇 청소기를 이용한 원격 감시시스템 및 방법
US7802802B2 (en) * 2004-10-12 2010-09-28 Cambotics Inc. Camera dolly
FR2883382A1 (fr) * 2005-03-21 2006-09-22 Giat Ind Sa Dispositif et procede de localisation et de perception d'un objet ou d'un evenement
DE102005036782A1 (de) * 2005-08-02 2007-02-15 Magna Donnelly Gmbh & Co. Kg Verfahren zum Betrieb eines Bildauswertesystems zur Entfernungsmessung an einem Fahrzeug
US7504965B1 (en) 2005-08-05 2009-03-17 Elsag North America, Llc Portable covert license plate reader
US7611293B2 (en) * 2005-08-30 2009-11-03 Image Ensemble, Inc. 3D rover camera system and method
US7786898B2 (en) 2006-05-31 2010-08-31 Mobileye Technologies Ltd. Fusion of far infrared and visible images in enhanced obstacle detection in automotive applications
ATE422185T1 (de) * 2006-08-24 2009-02-15 Harman Becker Automotive Sys Verfahren zum abbilden der umgebung eines fahrzeugs und system dafür
US7813529B1 (en) * 2006-11-24 2010-10-12 The United States Of America As Represented By The Secretary Of The Navy Optical 3-d surface tomography using depth from focus of partially overlapping 2-d images
US7865285B2 (en) 2006-12-27 2011-01-04 Caterpillar Inc Machine control system and method
JP2008203992A (ja) * 2007-02-16 2008-09-04 Omron Corp 検出装置および方法、並びに、プログラム
TWI355615B (en) * 2007-05-11 2012-01-01 Ind Tech Res Inst Moving object detection apparatus and method by us
WO2009019695A2 (en) * 2007-08-07 2009-02-12 Visionmap Ltd. Method and system to perform optical moving object detection and tracking over a wide area
TWI353778B (en) * 2007-12-21 2011-12-01 Ind Tech Res Inst Moving object detection apparatus and method
CA2714492C (en) * 2008-02-08 2014-07-15 Google, Inc. Panoramic camera with multiple image sensors using timed shutters
US8260459B2 (en) * 2008-05-08 2012-09-04 Regents Of The University Of Minnesota Robotic vehicle system
DE102009031809B4 (de) * 2009-07-03 2019-12-12 Volkswagen Ag Verfahren und Vorrichtung zur Vermessung des Umfeldes eines Kraftfahrzeugs
JP2011119785A (ja) * 2009-11-30 2011-06-16 Fujitsu Ltd カメラ制御装置及びカメラ制御方法
TWI476632B (zh) * 2009-12-08 2015-03-11 Micro Star Int Co Ltd 運動物體辨識方法及基於運動物體辨識之指令輸入方法
DE102010037100A1 (de) * 2010-08-23 2012-02-23 Vorwerk & Co. Interholding Gmbh Selbsttätig verfahrbares Gerät
US8675072B2 (en) * 2010-09-07 2014-03-18 Sergey G Menshikov Multi-view video camera system for windsurfing
EP2495980A1 (en) * 2011-03-02 2012-09-05 Thomson Licensing System and method for capturing a stereoscopic dataset
US20130106990A1 (en) 2011-11-01 2013-05-02 Microsoft Corporation Planar panorama imagery generation
US8860789B1 (en) * 2011-12-09 2014-10-14 Vic G. Rice Apparatus for producing three dimensional images
US10008021B2 (en) * 2011-12-14 2018-06-26 Microsoft Technology Licensing, Llc Parallax compensation
FR3007176B1 (fr) * 2013-06-18 2016-10-28 Airbus Operations Sas Dispositif, systeme et procede d’escorte pour un aeronef au sol
CN104299284B (zh) * 2014-08-20 2017-02-15 深圳供电局有限公司 一种自动定位抓取设备图像的室内变电站轨道巡检系统、主机及方法
US10019805B1 (en) * 2015-09-29 2018-07-10 Waymo Llc Detecting vehicle movement through wheel movement
CN107128255B (zh) * 2017-03-08 2020-10-23 北京百度网讯科技有限公司 传感器组合装置
WO2019035913A1 (en) 2017-08-15 2019-02-21 Reconrobotics, Inc. MAGNETIC LATCH FOR ROBOT THAT CAN BE LAUNCHED
US10589430B2 (en) 2017-08-15 2020-03-17 Reconrobotics, Inc. Throwable robot with improved drive system
US10828973B2 (en) 2017-08-15 2020-11-10 Reconrobtics, Inc. Two wheel robot with convertibility and accessories
EP3668687B1 (en) 2017-08-15 2022-11-09 Reconrobotics, Inc. Two wheeled robot with convertibility and accessories
CN109982062A (zh) * 2017-12-28 2019-07-05 深圳市优必选科技有限公司 基于机器人的3d图片拍摄方法、系统及机器人
US10782689B2 (en) * 2018-08-10 2020-09-22 Pony Ai Inc. Systems and methods for selectively capturing sensor data of an autonomous vehicle using a sensor guide rail
JP7153194B2 (ja) * 2018-12-17 2022-10-14 トヨタ自動車株式会社 遠隔監視システム及び監視サーバ
DE102019213525B3 (de) * 2019-09-05 2020-10-08 Continental Automotive Gmbh Ausweichsystem für einen Kameraarm zum Beobachten eines rückwärtigen Verkehrs eines Fahrzeugs
CN111249728B (zh) * 2020-01-22 2021-08-31 荣耀终端有限公司 一种图像处理方法、装置及存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB8518803D0 (en) * 1985-07-25 1985-08-29 Rca Corp Locating target patterns within images
JP2626152B2 (ja) * 1990-04-12 1997-07-02 日本電気株式会社 撮像信号処理装置
CA2083203C (en) * 1991-11-19 1996-10-29 Riichi Nagura Image data transmission system capable of obtaining a high resolution stereo image with reduced transmission data
US5270756A (en) * 1992-02-18 1993-12-14 Hughes Training, Inc. Method and apparatus for generating high resolution vidicon camera images

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004514384A (ja) * 2000-11-29 2004-05-13 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング 車両の周囲を監視するための方法及び装置
US7362215B2 (en) 2000-11-29 2008-04-22 Robert Bosch Gmbh System and method for monitoring the surroundings of a vehicle
JP2003271045A (ja) * 2002-03-15 2003-09-25 Sony Corp 画像処理装置及び画像処理方法、印刷物製造装置及び印刷物製造方法、並びに印刷物製造システム
US7565003B2 (en) 2002-03-15 2009-07-21 Sony Corporation Image processing apparatus and method, printed matter production apparatus and method, and printed matter production system

Also Published As

Publication number Publication date
US5473364A (en) 1995-12-05
WO1995034171A1 (en) 1995-12-14

Similar Documents

Publication Publication Date Title
JPH10501386A (ja) 可動プラットフォームから移動物体を表示するビデオ技術
US7321386B2 (en) Robust stereo-driven video-based surveillance
CN108111818B (zh) 基于多摄像机协同的运动目标主动感知方法和装置
CN108171733B (zh) 使两个或更多个三维3d点云配准的方法
Senior et al. Acquiring multi-scale images by pan-tilt-zoom control and automatic multi-camera calibration
US8189051B2 (en) Moving object detection apparatus and method by using optical flow analysis
US5212547A (en) Image processing device and method for sensing moving objects and rangefinder employing the same
Koyasu et al. Recognizing moving obstacles for robot navigation using real-time omnidirectional stereo vision
KR100938195B1 (ko) 스테레오 매칭을 이용한 거리 추정 장치 및 추정 방법
KR20090103165A (ko) 모노큘러 모션 스테레오 기반의 주차 공간 검출 장치 및방법
EP1560160A2 (en) A multiple camera system for obtaining high resolution images of objects
KR20140002401A (ko) 카메라 장치 및 상기 카메라 장치에서의 물체 추적 방법
JP6865064B2 (ja) 移動体の位置推定装置及び方法
JP5445069B2 (ja) 3次元位置計測装置および3次元位置計測方法
JP2005217883A (ja) ステレオ画像を用いた道路平面領域並びに障害物検出方法
JP4256992B2 (ja) 障害物検出装置
WO2020174916A1 (ja) 撮影システム
KR102065337B1 (ko) 비조화비를 이용하여 대상체의 이동 정보를 측정하는 장치 및 방법
JP3631541B2 (ja) ステレオ画像による物体の移動追跡方法
WO2021124657A1 (ja) カメラシステム
JP3615909B2 (ja) 移動物体検出装置
JP2000175101A (ja) 自動追尾装置
JPH09259282A (ja) 移動障害物検出装置及びその方法
WO2007072370A2 (en) Method and apparatus for estimating object speed
JP3855796B2 (ja) 映像補正装置