JPH07505966A - 物体モニタシステム - Google Patents

物体モニタシステム

Info

Publication number
JPH07505966A
JPH07505966A JP5516114A JP51611493A JPH07505966A JP H07505966 A JPH07505966 A JP H07505966A JP 5516114 A JP5516114 A JP 5516114A JP 51611493 A JP51611493 A JP 51611493A JP H07505966 A JPH07505966 A JP H07505966A
Authority
JP
Japan
Prior art keywords
image
monitoring device
vehicle
camera
object monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5516114A
Other languages
English (en)
Inventor
オウティ グレン ウィリアム
コーク ピーター イアン
ダン ポール アレクサンダー
マッキンタイア イアン バリー
ミルス デニス チャールズ
サイモンス ベンジャミン フランシス
ジャンセン マーリー ジョン
ナイト ロドニー ラヴィス
ピアース デヴィッド ステュアート
バラクマル ポナムパラム
Original Assignee
コモンウエルス サイエンティフィック アンド インダストリアル リサーチ オーガナイゼーション
テルストラ コーポレイション リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コモンウエルス サイエンティフィック アンド インダストリアル リサーチ オーガナイゼーション, テルストラ コーポレイション リミテッド filed Critical コモンウエルス サイエンティフィック アンド インダストリアル リサーチ オーガナイゼーション
Publication of JPH07505966A publication Critical patent/JPH07505966A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P3/00Measuring linear or angular speed; Measuring differences of linear or angular speeds
    • G01P3/36Devices characterised by the use of optical means, e.g. using infrared, visible, or ultraviolet light
    • G01P3/38Devices characterised by the use of optical means, e.g. using infrared, visible, or ultraviolet light using photographic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/174Segmentation; Edge detection involving the use of two or more images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/254Analysis of motion involving subtraction of images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/255Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/54Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/052Detecting movement of traffic to be counted or controlled with provision for determining speed or overspeed
    • G08G1/054Detecting movement of traffic to be counted or controlled with provision for determining speed or overspeed photographing overspeeding vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Power Engineering (AREA)
  • Electromagnetism (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Geophysics And Detection Of Objects (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるため要約のデータは記録されません。

Description

【発明の詳細な説明】 物体モニタシステム イV明の技術分野 本発明は物体モニタノスΣ−18、特に自動車をモニュタする/スー′i□−1 、に関ずzlものである。
イこ明の庁既 2通管理および自動り」の使用1を統制する法律(−χ1処する機関(官庁)は 交通を連続してモニタし得るとともに違反行7一時に(r在する人件費を心安と することなく法律違反を検出し得るシステムを必要とする。多数の場所をモニタ し、違反を検知し、違反告知書を発行するし得るかかるシステムは特に有利であ る。その理由はこれらシステムによって警察のように交通管理の仕事から人(’ l″tRを軽減し、彼等を他の仕事につかせることかできるからである。また、 かかるシステムは1つの場11rを連続してモニタづることにより違反抑止とし ても作用するとともに道路の事故化を生じる不慮の出来事およびその原因を軽減 する手助けとなる。
道路′;5III用のスピードカメラおよびレッドライトカメラのような多数の 交通管理システムか現在用いられている。既知のシステムでは、違反検出時にト リガされるカメラを用いている。自動車のγr在を検出し、違反を検知するため には道路の側部に設置された光学センサ、道路の下側に設置された圧力センサお よび自動車から反射されるレーダの信号が用いられている。これらセンサおよび レーダの信号を用いてトリが信号を発生させてカメラを作動させ、ディテールを 含み、これからす7ハープレー1へのような自動車を確認し得る自動車の写真を 取る。道路の下側に設置したセンサを用いる場合には、設置のために道路に穴を 掘る必要があるか、または道路の側部に設置する場合にはセンサを容易に見つけ られ、且破壊されi!するようになる欠点がある。また、電気ケーブルを設置し てセンサとカメラとの観を接続する必要がある。さらに、レーダ信号のように自 動車に伝送し且つ反射した電磁波信号を用いて自動車の存在および違反を検出す る場所には、これら信号か自動車に設けた逆検知装置によって検知されこれをド ライバに報知され1!)る欠屯かある。
従って電磁波信号を同等伝送することなく、または道路の下側にセンサを設置す ることなく自動車の存在および違反を検知しi)るシステt、を提供するのか有 利である。
現在用いられているカメラで写真フィルt1を使用する場合には、カメラの設置 lJ4+4iてフィルl、を連続的に入換える必要かある。従ってメト+7ボリ タ7区域の多数のし71−ライトカメラは′小時フィルムか装填されてはなく、 しかも関連する交ご1□′1.を連続してモニタJるらのでしない。
カメラのみを用いるスピード検知システムは多数の刊行物に記載されて(する。
これらの7ステL、は交通の流れをモニタしjワるとともに瞬時スピード違反を 検知いするか、これらシステムはモニタ時に自動車で得られ得る情報に対し相対 的体こ制■され、しかもこれらシステムは特定の自動車の形式の情報を選択的− 得ることはできtjい。
また、カメラによってi)た写■゛↓または像は通1;’+担当職員により検査 してti’l報を取出し「自動車を識別し違反名を決める必要かあり、苔しく時 間を要する。像画(1シ較的短時間内に処理できる場合には、例えば情報か盗難 車であることを確認しtこ場合に自動車を探し且つ確保する領域の機関にt1意 を促す証拠としてこの像を用いることかできる。従って、人を介在させるt要な く自動車の詳細な情報を得るとともに警吉情報および違反告知阿を発行するため に像をリアルタイムで処理しく!事る/ステt、を提供するのかず1刊である。
長距離運転時、自動車のユーザ、特にトラックのトライlくは運転時間を短縮す るためにスピード制限を違反し得る傾向にあり、運転中モの速度が制限速度範囲 から制限速度を越える範囲に変化し得るようになる。スピード違反を検知する既 知のシステムは特定の場所での自動車の瞬時速度を検知し従って検出装置力(設 置された場所に依存することに集約されるか、長距離に亘って散発的に違反する ユーザを検知することはできない。また、休息停車を避けて推奨運転時間を越え 、運?jDrを不正に完成させりようにしたトラックおよび/<スのドライノく も検出することはできない。従って、相対的に長距離に亘る自動車の平均速度を 検知し得る/ステ1、を提供するのかfi fllである。また、多重走行帯の 1つ以上の走?1帯の自9カ巾をモニタしく’Jるシステムを提0+するのが有 利である。
発明の概□用 本発明によれは物体の像をt”Jる必要のある像取得時間を決めるために物体の 移動をモニタするカメラ手段を具え市電時間に像を得るようにした物体モニタシ ステムを提11jする。
また、本発明によれば、移動物体をモニタするカメラ手段と、このカメラ手段に 応答する像処理手段とを具え、池の移動物体および静止物体から11定の移動物 体を検知する物体モニタシステムを提供する。
さらに、本発明によれば、物体を識別する情報を自動的に抽出する移動物体の像 を追跡してiT:#るカメラ手段を具える物体モニタシステムを提供する。
好適には、かかるシステムはデフタル通信回線網を経て像を伝送する手段を含む 。
また、本発明によれば、多重走行帯上の移動自動車を連続的に検知して追跡する カメラ手段を■え、自動車の確認情報を抽出し得る多重走+1帯の情報取得区域 の11r定の〔1勤車の像を得るようにした自動中モニタンステt・を提供する 。
さらに、本発明によれば、6区域にχ1する所定の移動自動車の像を1口跡して 得る複数のカメラ手段と、これら区域から得た像データを処理して自動車を識別 するとともにこれら区域間の自動車の移動に関する情報を得る手段とを具える自 動車モニタシステムを提供する。
また、本発明によれば、移動自動車をモニタして自動車か所定の形式であるかと うかを決め、これに応答して所定の形式の自動車の像を得るカメラ手段を具える 口!1+iLFモニタンステムを(是114する。
さらに、本発明によれば、自動車をモニタして法律違反を検知するとともに所定 の時間を測定して自動車の像を得、且つ違反の検知に応答して所定の時間の自動 車の像をi)るようにしたカメラ手段を具える自動車モニタシステムを提供する 。
また、本発明によれば、道路上の11動車をモニタして道路上のトラックおよび ハスのような大型自動車と乗用車のような小型自動車との識別を行い、自動車情 報かイリられる大型自動車のみの像を得るようにしたカメラ手段を具える自動車 モニタシステムを1是(共する。
内面の筒中な説明 図1乃至図3は自動車をモニタするに好適なシステムの使用状態を示す側面図: 図4は自動車をモニタづるに好適なシステムの使用状態を示す前面ネ1視図。
図5は自動車モニタ/ステムの好適な例を示すブロック図;図6は2つのカメラ 設置?1箇所および自動車モニタシステムの中央サーバのデジタル通信回線網の 接続を示すブロック回路図。
lA7は11動車モニタシステムの多数の設置箇所の接続を示す説明図;図8は 自動車モニタシステムの自動車検知および偶数得回路を示すブロック図;図9は 自動itモニタシステムの検知カメラによって発生した像から自動車検知回路に より形成した像を71<ず前面斜視図;図10はセグメント化処理を1tう自動 車検知回路の回路板の制御を示すブロック回路図。
図11は自動車検知回路に記憶した静止背景像を示す前面斜視図;図12は1″ 1勤申検知回路により発生した池の像を示す前面斜視図。
図13は自動車検知回路によりi!’)た像からフィルタ処理した陰影の領域を 示す像のn1hlii*1現図。
図1 l+は自動車検知回路により取出したセグメノト化像を示す前面斜視図; 図15は画素グレイレベルのヒストダラムを示す説明図;図IGは自動車モニタ システムにより発生したリアルタイt1状態表示を示す説明図。
図17は自動車モニタ/ステムのソフトウェアタスク間の流れを説明する流れ図 を示す説明図。
図18は自動車モニタ/ステムの処理窓の“ブランクトライアングル”の形成状 聾を示す説明図。
図19は自動1LモニタンステI、により発生したボルブ領域の適用転回の測定 状態を示す説明図。
図20は集団をな4゛ポルブ領域の水平方向の拡大を示す説明図;図21は自動 1【モニタシステムのルックアップテーブルに記憶された拡大量を小1説明図。
図22はボルブ領域の幅に基づく拡大を示す説明図。
図23は自動車モニタシステムにより発生した集団に対する重なり検知を行う説 明図: 図24は自動車モニタ/ステムにより行うラベル付は方法を示す説明図;図25 は自動ルモニタンステt、により用いられる道路座標を示す斜視図;図26は集 団の軌跡を示す説明図。
図27は道路座標に対し変換された集団の軌跡を示す説明図;図28は自動車モ ニタンステt、の軌跡ソフトウェアによりtnたデータ値を示す説明図。
図29は自動車モニタシステムのタイミング制御板を示すブロック図;図30は 自動車モニタシステムの偶数得カメラおよび赤外線フラソンユの動作特性を示す 説明図: 図31および図32は自動車モニタシステムにより得た像を示す前面斜視図。
図33は偶数得カメラの構成部品および像捕捉回路のカメラに対するインターフ ェース部の関係を示ブロック図: 図34は自動1Lモニタンステムのカメラ設置箇所の通信部品およびデジタル通 信回線全体に亘り接続された自動11(モニタシステムの取得像処理装置の部品 を示すブロック図; 図35は像捕捉回路のバッファボードに対するメモリレイアウトを示す説明図; 図36は取得像処理システムのソフトウェアモジュールおよびカメラ設置箇所の 通信モジュールを説明する流れ図そ示ず説明図。
図37は自動車モニタシステムのナンバープレート識別装置を示すブロック図: 図38はナノバープレート識別装置の偶数得手順を説明する流れ図を示す説明図 。
図39はナンバープレート識別装置のソフトウェアモジュールを説明する流れ図 を示す説明図; 図40はナンバープレート識別装置のロケートプレートモジュールを説明する流 れ図を示す説明図。
図41はナンバープレート識別装置の光学特性識別モジュールを説明する流れ図 を示4゛説明図である。発明を実施するだめの最良の形態図1乃至図7に示4− ロ3hIlfモニタノステt、は図1乃至図3に示す自動車交通上のブリツノま たはパイ【]ン4に設置したカメラ装置2を含む。このカメラ装置2には1−1 動中検知ブノメラ6と、偶数iリカメラ8とカメラ装置制御装置lOとを設ける うこれら自動11T検知カメラGおよび偶数iひカメラHの双方は11色CCL )カメラとし、偶数(リカメラ8は高解代度カメラとする。
検出カメラ6はカメラ装置2によりモニタずべき車道1Gの部分の広い視野12 を(rL−ている。検出カメラ6は視野12内の自動車をモニタし、制御ユニッ ト10は検出カメラ6かとらえた像を処理して検出し、自動車を視野12内の他 の物体と識別する。自動車I8か視野I2内に入り、カメラ装置2の方へと動く と、カメラ装置2は検出カメラ6か発生ずる像を分析して、先ずは自動車18を 視野12内の他の移動物体又は静止背景とは別の移動物体として検出し、その自 動車18か、その高解像度の像を縁取11カメラ8によって得るべき対象物であ るかどうかを決定する。偶数i1ノノメラ8は、自動車I8か車道1Gの予定し た位ti1122に達したときに、この[1動11「の前部を含む限られた視野 20を有するように橋梁又は鉄塔4に取付ける。前記T一定位置22及び限定視 野20は、動いている自動中が図3に示すように検出カメラ6の視野12を離れ る個所の近くとする。自動車18か、その像をとらえなければならない対象物で あることか判ったら、カメラ装置2は検出カメラ6がモニタした自動車の動きに 基づいて自動車18が偶数イ)カメラ8の視野に入る時間を推定する。カメラ装 置2は偶数得カメラ8に関連する制御回νδにトリガ情報を1ノ(給して、前記 推定時間にカメラ8をトリガさせるようにする。こうして、自動車18の前部の 高解像度の像を得て、この像から後にその像をディ/タル的に電子処理すること により自動車の車種及び認可プレートのディテールの如きかなりの識別情報を取 出すことかできる。
カメラ装置2は自動車18を識別し、且つ偶数得カメラ8をトリガさせる時間を 推定することに加えて、検出カメラ6からの像を用いて、大きさの如き多数の特 徴に基ついて複数の自動11(を区別し、これらの自動車のうちの高解像度の像 をとらえるべき自動車かとれであるのかを決めることができる。例えば本例のン ステl、は、トラック及びハスの如き大型自動車と、乗用車及びオートパイの如 き視野I2内の他の移動物体とを区別することができる。カメラ装置2は検出カ メラ6かとらえた像から自動中18の現11速度をめたり、運転古か前の甲に近 付き過きて運転していたり、違法のレーン変更をしたりするような交通違反又は 池の違反を犯しているかどうかを確かめることができる。又、このシステムは盗 難自動車を検出するのに用いることもできる。
検出カメラ6及び制御ユニットlOは視野12内の走行中の自動車18を全てモ ニタすることができると共に予定位置22にて選択自動車の像を取得することか できる。図4に示すように多数レーンの車道21の場合には、検出カメラ6の視 野12を広げて、車道のレーン23及び25の全てを網羅するようにし、偶数得 カメラ8を6レーン23及び25に設ける。従って、カメラ装rIi2は走行中 の自動車18をモニタして、その自動車が偶数得位置22に連する時にどのレー ンを走行しているのかをめて、必要に応じてレーン23又は25に対応する偶数 i)カメラ8を作動させることができる。
図5に示すように制御ユニット10は、検出カメラ6が発生ずる像を処理して、 ハス32で偶数i)カメラ8にトリガ信号を供給する自動Q【検出回路30をn えているっ縁取11カメラ8は検出回路30によって決められたタイミング情報 に基づいて像をとらえるべくトリガされ、このカメラ8はそれぞれに隣接して取 付けである対応する赤外線フラッシュ40のフラツンユトリガ回路38にライン 36にてトリガ信号を供給する。偶数得カメラ8によって得られた像は偶数得回 路34により受取られる。検出回路30は、偶数得カメラ8に対する正しい露光 レベルを決めるように、検出カメラ6の視野12内の光強度をめ、次いでフラッ シュ40を正しいエネルギーレベルで放電させて所望な露光レベルを達成する。
この場合、IRフラッシュを用いると、その動作が可視的に検出され難いので有 利である。フラッシュにより発生される可視波長の光はIR帯域通過フィルタに より除去する。
自動車モニタシステムはカメラ6がとらえた像を受信し、それを処理して、それ から自動車情報を抽出する制御ユニットIOに接続した取得像処理装置142を 具えている。この取得像処理装W42はカメラ装置2の一部とするか、又はカメ ラ装置から離して位置させ、偶数得回路34からの電気通信ライン44により制 fl−i、、、= −r l・に接続することかできる。処理装置42は認可ブ レーI・のディテール50の如き、像からの必要な情報を自動的に抽出すべく構 成した処理局43を具えている。
図(jに示すように、遠隔中央個所に設置した場合の取il像処理装r!142 は、公J1、のディジタル電気通信ネットワーク45に接続した通信コントロー ラ55及び中央コンピュータ→)”−ハ47を只えており、サーバ47は取11 像データベース4!J + 3+可プレート認識システム51及び遠隔地ユーザ インタフェース53を構成する古フンピユータを接続するローカルエリアネット ワーク(L A N )としての働きをする。通信コツト【]−ラ55は像を処 理装置42に送る凸カメラ装置2に設ける。各カメラ装置2は、縁取得回路によ って得られた像を記憶し、且つ中央の像処理装置42の通信コン]・ローラ55 と通信して、統合サービスディジタルオノトワーク(IsDN)45を介して中 央のサーバ47に像を送る像バッファ兼通信コントローラ57を具えている。通 信コン1−ローラ55はI 5DN45での高速像転送を管理すると共にハウス キーピングや、誤り検出や、カメラ装置2と中央サーバ・17との間の像転」ヱ を補正したりする。中央サーバ47はコントローラ55と通信して、カメラ装置 2がサーl〈47により維持されているLANの延長部として作用するようにす る。像処理は各カメラ装置2にて行なうこともでき、例えば品カメラ装置2に認 可プレート認識装置51を設け、これにより取得像を光学的に文字認識(OCR )して、認可プレートのディテールの如き自動車情報を抽出することかできる。
図7に示すように、自動車モニタシステムは車道における多数の位置52〜60 に取付けた複数のカメラ装r!12を具えている。カメラ装置2は他のカメラ装 置と通信するために[5DN45の電気通信ラインにより接続したり、及び/又 は中央制御局62に接続して、各カメラ装置2にて集めた情報を比較するように する。中央制御局62は取In像処理装置42を具えている。カメラ装置2及び 中央制御局62は、自動車識別情報以外に、像をとらえた日時及び位置情報を含 むカメラ装置2が集めた情報を用いて車道16に沿う自動車の進行をモニタする ことかできる。これは、上述したような情報を用いて自動車が2つのカメラ装置 !2間を走行した平均速度をめることができるので特に有利である。自動車が2 つのカメラ′A置2間を制限走ij速度を越して走iγ(7tこことを平均速度 が示した場合に、権限のある機関の青は自動車を止めるようにコンタクトをとる ことができる。或いは中央局によって自動車の登録所有名に違反通知を発行する こともできる。中央局62及び/又はカメラ装置2には盗難車に関するIn報も 含めて、盗難車が検出される場合に権限のある機関かそれにコンタクトをとるこ とができる。長い距離を通り(々ける運転りは、2つのカメラ装置の設置側β1 52と54との間をあまりに速く走行したことにより止められたり、又は違反通 知を発行されることになると気付く場合に、選定個n1で速度制限直を瞬時的に 越さないようにする。カメラ装置間の間隔は比較的大きくして、これらカメラ装 置間の許容走行時間を許容平均速度にχj応させるようにづる。本発明のンスデ ムにより平均速度をモニタできることはかなりの進展を表わし、これは幹線道路 における1−ラック及びバスの如き大型の自動車か過剰速度で走ifシているの を検出するのに用いることができ、又予定した停止をしない運転者を検出するこ ともできる。
検出カメラ6は312本と313本の水平操作ラインから成る各ビデオフィール ドを発生し、これらのフィールドか合成されて625ラインの完全なビデオフレ ーl、を形成する。これらのフィールドは20 o+ sのビデオフィールド期 間に発生する5 12X512画素の8ビツト量子化デイジタル像に変換される 。検出カメラ6の垂直方向の解像度は、カメラ6が車道を水平方向に見ることが できる最大距離に対して、512画素にディジタル化される約300エレメント の垂直フィールドラインの解像度に17c nする。n;I記最大距離りは次式 にて表される。
D=h Lan [arcLan (Dmla /h)+Φ (1)ここに、D −カメラ視野が網羅する道路に沿う距離l]−道路上方のカメラの高さ D m1n−車道に沿うカメラ視野の最も近い位置までの距離Φ=レンズの視野 角 車道を横切る視野は次式にて表わされる。
ここに、〜■=車道を横切る視野 w??セ/すの幅 〔−レンズの用意距離 り一カメラから対象物体までの距離 カメラは12mmのレンズ及び8゜8nunXG、6m口1のCCDセンサを具 えており、これは自動i1Tを適当な大きさに撮像し、しかし縁取iすν4所2 2にてそれぞれ35メートルつつの4つのレーンをカバーする。カメラにはアン チブルーミノグ皮びアンヂスミャセンサを設けて、自動車のライトによる像のブ ルーミング又はスミヤリングを防止する。カメラの赤外線フィルタは’150n mまでの赤外波長の光を通し、これにより検出カメラ6が自動車ライトの赤外成 分を受光できるようにして、自動車を検出し、且つモニタするのに一層多くの情 報を掛るようにする。検出カメラ6は+40d[3の利得範囲を有し、露光時間 はフィールド期間の20 In Sに固定する。
検出カメラGの露光制御により、カメラに当る光の強度を制御して、ビデオ信号 の品質を絶えず一定に保ち、自動車を予想再現できるようにする。センサの許容 露光度は、センサ感度に適切に整合し、且つ式(3)に示すように、センサに当 たる電磁波の強度又はパ「ノーを適りJに制御して適切な露光値に維持すること ができる。
Eα(11Δ)T (3) ここに、E−センサの露光値 It = l cm2当りの入射(!、 In、I’、パワー(放射照度)A= lcr内の画素の面積 T4、即ちe、 m、r、パワーがセンサに当る時間(秒)トリガカメラに光か 当る時間Tは、20 m sのビデオフィールド速度の一定値に保持される。こ れは多数レーンの車道の比較的大きな視野12内の自動車の動きを「静止見する 」のに1・分短い時間である。電子シャ・ツタ−又は短い露光制御は、露光時間 を短くすると、太陽光の反射や、自動車のへラドライトによる像のスミャ又はブ ルーミングにより悪影響を受けるので、検出カメラ6にはンヤノターを設けない 。センサ画素を十分に露光するのに必要な入射光の放射照度は特定成長の光に対 する感度に依存する。センサ画素はビデオ信号の信号対雑音比を満)?させる最 小限の光感度を有し、又センサ画素か飽和する前の最大光レベルを有している。
センサに対して単一露光で撮像し得る放射照度のレンジは約100=1とする。
24時間中カメラ6に当てるごとのできる光の放射照度のレンジはlO゛′ l の2fr5だけ変えることかできる。従って、露光制御系は、例えば24時間中 カメラに当る照明によりセンサか飽Ill LないようにIIの値をセンサのダ イナミノフレツノ内に維持するのに十分な値に制限する。露光制御系は、レンズ 開口に基ついて露光調整すべく設31され、且つレンズ開口が減少すると光のニ ュートラルフィルター処理を進めるfl、8〜rtoooの自動アイリスレンズ 系とする。露光制御の変更レート、即ちIIが変化する割合は、走行中の自動車 が後に詳述するように、カメラ6によって得られるゆっくり変化する背景像とは 相違している像により位置決めされるように限定する。露光制御の変更レートは 、センサの露光時間の変更が背景像の変化を見まちがえて、自動車の検出及びモ ニタリングに悪影響を及はずことになるので制限する。自動アイリスの応答時間 は、背景像を現行像から差引く割合に整合ずへくセットされる。露光制御の遅い 変更レートはアイリスが光の過渡的な変化、例えばカメラ6に近付いてくる自動 車の屋根からの反射光に対して速く応答し過ぎるのを防止する。変化レートは充 放Q、I照度l(を1/2又は2倍にするためにlO妙に限定する。
露光制御系は、過渡的な極めて明るい反射光や、ヘッドライトがセンサ画素を胞 用しないように、センサの露光度を視野12内に入る光のピーク強度に対するセ ンサの飽f′l]レベル以下に保つように制限する。カメラ6から得られるピー クビデオレベルを後述するようにモニタし、これをアイリスの絞りの設定を制御 する根拠として用いる。
夕闇及び夜明けの照度レベル中にヘットライトを用いていない自動車の背景を差 引くことのできるビデオ信号を発生させるためにセンサの感度を選択する。セン サは近赤外光にも応答して、大型自動車の側部及び周囲光からの信号を最大にす るも、その応答性はブルーミングが自動車のヘッドライトから生ずるしきい値以 下とする必要かある。カメラのレンズは夜明は及び夕闇の期間中にヘッドライト なして走行している自動車に対してセンサを十分露光すべく制御することができ る。最大レンズ開口は車道から反射する。約10cd/+a2の照度値に対して f4にIl、Q ;+E iる。車道の照度レベルがこのレベルの約25%以下 に一旦落ちたら、後述するように自動車のセグメンテーションを自動車のへノド ライトに基づいてi j f=っ。明度レベルを表わす制御信号レベルは後述す るようにlit−画素に対重るビデ1信号レヘルの照度ヒストグラムから導出さ れる。
図8に示すカメラノート2の制御ユニットlOは、モト【コーラG3030CP Ll 64、検出カメラ6からの画像を受信するよう接続された検出前トリガザ ブシステI・ら6及び捕捉カメラ8からの画像を受信4゛るよう接続された捕捉 サブ/ステム68をaむ。サブ/ステI、6G及び68は浚数個のDaLacu l+eパイプライン画素レートLデオ処理し路ボードを含み、これらの回路ボー ドはC1)U64により制御される。これらの回路ボート及びCI’UO4はV  EM(Vcrsa Module Eu+ope)ハスにより相互接続す゛る 。CPU64及びサブシステム66及び68の回路ボー(・はリアルタイI2マ ルヂタスクンステt、であるVxWorksとして既知のソフトつ工了オヘly −ティングンステt、を実itする。検出サブシステ1.66、CPUG4及び 制御ソフトウェアか検出回路30を構成し、捕捉(ノブンステト68、CPU6 4境び制御゛ソフトウェアか捕捉回路;34を構成する。イメージバッファ兼通 信」ノドD−ラ57を捕捉回路に接続してl5DN45へのアクセスを与えるこ とかできる。
検出→Vブ、システム66は検出カメラ6により得られたδビデオフィールドの 512 X 512画素の画像を処理し、このサブ/ステムは中間記憶なしの画 像データバイブライノ処F!I!ヲ用いで視野12の変化の間で低いラデンン− を達成4゛るように設計されている。〜IAX[3USとして既知のパイプライ ンのビデオデータバスのデータレートはlXl0’画素/秒である。ビデオフィ ールI・を個別に千手的解像度の2つの連続フレームとして処理することにより 5011zのザンブルレートを達成し2、フルフレーム処理に必要とされるデー タレートを除去する。
検出→Jブンステム66は検出カメラ6から出力されるフィールドを受信し、こ れを512X512画素表示に変換するビデオディノタイザボード74を含む。
ディ/9イザホート74はDalacubc Digimaxボートてあり、各 画素が0−127の2の補数の正範囲(0か黒、127か白を表す)内の値を有 するグレースケール画像表現を発生ずる。512X512画素は図9に示すライ ブ画像表示を発生しうる。ディジタイザボード74により発生された画像は背景 差分ボード7Gに人力する。この差分ボードは、図10に示すように、図11に 示す背景画像を現又はライブ画像から差し引いて図12に示す一次差分画像を発 生させる。この差分画像は視野12内の移動物体のグレーレベル表示を構成する 。画像差分処理により両車画像レンジが−128から127へ広がる。背景差分 ボード76はDatacubPMaxS+’ボードである。
背景画像は検出カメラ6により観察される静止背景を表し、背」画像ス)・アボ ート70 (DaLacube FramcsLorc)の2つのフレームスド ア71の一方に記憶される。背景画像は背景更新ポー172(別のDaLacu bc MaxSP)により連続的に更新し、2つのフレームスドアの一方に検出 カメラ6の視野12内の静止背景を正確に表す画像か保持されるようにする。更 新ボード72はフレームスドア71bの−,1からの現背景画像を受信し、−次 差分画像をフィルタ処理したものと合成して新しい背醍画像を発生し1これを更 新ボード72から他方のフレームスドア71aに出力する。次に制御ソフトウェ アか他方のフレームスドア71aにスイッチし、背景画像を差分ボード7Gへ供 給するとともに次の更新画像を第1フレー7、ストア711)に供給する。1! 景史新ボードは一次差分画像を、図10に示すようにフィルタ特性73(RAM に保持されている)に従−〕でフィルタ処理し、−次差分画像の画素のグレーレ ベルをプログラマブルレンツ、例えば−2〜+2のレンツに制限する。この制限 機能は、現背景画像が制限フィルタ処理73に要する時間たけ遅延素子74で遅 延されたのちに差分画像と合成される際に現背景画像に対しiチオつれる補正を 小さくする。この制限機能は、フレーム毎に背景画像に月し行われる補正を極僅 かにして、移動物体により発生ずるような過渡差が画像ス1−アボート70内に 保持される記憶背景画像を大きく変更しないようにする。
フィルタ関数73の形状は、背景画像に加えられるグレーレベル差をtより大き い全ての差レベルに対してはレベル【に限定し、−1より小さい全ての差レベル にり1しては−(に限定することを示している。ここで、[は2のような低いし きい値である。背景更新ボート72の状態は背景画像の更新をディセーブルする 状態に変化させることもできる。背景画像の変化速度は検出カメラ6のレンズ開 口の変化によるンーン露光の変化速度より速くなるようにセットする。制限関数 により決まるレート変化は重要である。その理由は、速度か遅すぎる場合には照 明変化か不正確な差分画像を発生しうるとともに、速度か速すぎる場合には移動 物体か背景画像内にはけとして現れつるためである。
背景差分ボート7Gにより発生された一次差分画像は第3 DaLacue M axSPボーl−(影除去ボード)77に出力される。差分画像に現れる中両の 影(図12)はΦ両タイプの決定のために処理される画像に重大な問題を生ずる 。影は車両をその実際の大きさより大きく見せ、トラックやハスのような大型i 1(両と乗用車やバイクのようfj小型1(両とを区別する場合に、乗用車の影 により乗用11(が大型車両に分類されることか起こりうる。このため、影除去 ボード77を用いて差分画像内の、影を表す全てのグレーレベルを除去する。こ れは図1Oに示1ようにRAhi内にグレーレベルウイ/トウレ/]79を定め ることにより行われ、−次差分画像をウィン)・つ79内のグレーレベルを有す る全ての画素か零にセットされるように処理する。その結果を用いて一次差分画 像をマスクして除去ボード77が9二し7ノ79内のグレーレ・\ルを′rrJ るずべての画素か除去され影が濾波された差分画像を出力するようにする。図1 3は緑色で示ずウィンドつ79のレンジ内のグ1/−レベルをf[する全ての画 素をffするライブ画像を示す。ウィンドウ79により決定されるレンジは後述 するように検出カメラ6の視野12内の照明状態に応して調整する。
影か濾波された画像はしきい値及びメジアンフィルタボート78 (DaLac ube 511aIIボート)に出力される。フィルタボート78は差分画像を バイナリ画像処理して移動物体のグレーレベル表示を検出サブ/ステム66の後 続の処理のために白黒表示に対応する2値表示に変換する。フィルタボード78 はしきい値を用いて−128〜+127のレン/内のグレーレベルを有する全て の画素0又は255のいずれかの値を有する画素に変換する。従って、フィルタ ボード78により発生される最終差分画像は、リアルタイム表示で見ると、図1 4に示すように、視野12内を移動する物体を白画素ブロックのクラスタとして 示す。白ブロックは日光を反射する移動車両の部分に対応し、夜間では車両の外 部光により発生する尤に2.1応する。一画素以上のノイズ領域は隣接する3X 3画素をバイナリメジアンフィルタリングを実行するボード78により除去され る。
検出カメラ6の視野12内の照明状態はCI’UG4により発生されるグレーレ ベルのヒストグラム150(図15)に基づいて決定される。CI”’UG4は 記憶背景画像(約300X400画素)のウィンドウを10秒ごとに処理する。
CPU64は古グレーレベルを打するウィンドウ内の画素の数をR1算し、その 結果を縦軸152か画素数及び横軸154がグレーレベル値を表ずヒストグラム 150として表にする。ヒストグラl、150を表示して視野12内の光のリア ルタイム表示を与えることができる。メジアン15Gの位置を表すグレーレベル 値から、lJ中、夕IXれ、又は夜間の3つの照明状態の一つを瞬時に決定する ことができる。夜明けは夕暮れと同一の照明状態とみなせる。ビーク155、メ ジアン156伎び最小値158の位置を用いて影除去ボード77で使用するウィ ンドウ79のレンジを決定する。日中状態に対しては、影ウィンドウ79はαX Xビークルビーク→メツアン)I2のレンジに決定する(αは代表的には0.  5)。夕暮れ状態に対しては、影ウィンドウ79は最小値〜(ビーク+メジアン )I2のレンジに決定する。夜間状態中は影画素を除去する必要がないこと勿論 である。影画素しンンの(1(定は、視野I2内に木や高架橋の影のような永久 的な影の領域がある場合に、これに基つく近似技術である。
フィルタボード78により発生されたセグメント化された画像はエリア周囲アク セレレータ(APA)ボード80に供給される。このボードはビデオシーン内の 物体のエリアパラメータの処理を加速するよう設計された、アトランチク マイ クロンステム社(オーストリア国、アゾレード所在)により製造されているAP Δ512ボードである。ボード80は制御ソフトウェアとともに、ヒストグラム 150を発生するウィンドウに対応する300X400画素ウィンドウ内の白画 素ブロックの分析を実行する。APAボード80及びそのソフトウェアは画素ブ ロックについて分類及び特徴抽出処理をリアルタイムで実行して移動車両に対応 する画素ブロックのクラスタの形成を促進する。APAボード80は白画素ブロ ックの特徴を計算し、その特徴を用いてクラスタリングソフトウェアにより、規 則及び分類コードに基づいて、それがトラック又はバスのような大型車両に対応 するのか、乗用車のような小型車両に対応するのか決定する。ラベリングソフI ・ウェアを用いて画素ブロックのクラスタの順次のフィールドに亘る移動をモニ タし、そのクラスタか同一の車両に関するものであるとみなせる場合にそのクラ スタにユニークラベルをδ11り当てる。
屯フ旧6が検出カメラ6により夜間観察されているのがE]中観察されているの かにに二じて異なる考察を適応し、使用する規則及び分類を、ヒストグラム15 0によりりえられるデータに基づいて、移動車両に異なる対応画素ブロックを発 生ずる1ν間状曹、山及び荒天状態を4慮に入れて調整する。例えば、規則及び 分類二J−1;を夜間状嬰においては道路上の車両のライトにより生ずる反射を 考慮して調整Aる必要かある。
画素ブロックのクラスタか形成されたら、その移動をモニタしてその瞬時速度綬 びその位置をカルマノフィルタ技術を月1いて道路側縁上の一点に対し決定する 。画素ブロックのクラスタかカメラ6及び8の方向に移動するときは遠近法によ り補正を行う。クラスタの移動をモニタして得られた情報を用いて、CPU64 により、クラスタが捕捉カメラ8の視野2oに入る時間、特に車両が車両の像を 捕らえる位置22に到達する時間を予測する。予測時間推定は検出カメラ6によ り発生されるIij (少50I!!lのフィールド毎に更新される。T−副時 間は、CI’UG4かクラスタの移動を、これか視野に入る十分な10〜20  +n sに亘ってモニタするので、連続的に補正される。CPUG4はクラスタ が視野2oに入る前にカメラ6か走査しなければならない走査ラインの数を規定 することにより時間を予測する。
制御ユニノh 10の動作はエラー及びイベン]・ロギング用プリンタ94、リ アルタイt、ステータスディスプレイ98及び制御ワークステーション+00に よりモニタ及び制御することかてき、これらは全てCI)UC2及び制御ユニッ トIOのボートに直接或いはローカルエリアネットワークlお2により接続する ことができる。リアルタイムステータスディスプレイ98の表示を図16に示し 、この表示はディノタイザボード74により発生されたライブ画像にクラスタマ ーク及びその他のデータを重畳したちのである。ヒストグラム150はスクリー ンの左に表示される。車両を囲むボックスか形成されたクラスタである。各クラ スタのラベル番号か各クラスタの右下コーナに示され、クラスタをモニタして得 られた車両の予測速度がラベル番号の下に表示される。車両を囲む大きなボック スは、ヒストダラムソフトウエアに加えて、クラスタリング、ラベリング及びト ラツキフグソフトウェアか動作する処理ウィンドウを示す。ウィンドウを横切る 線は高解像度画像を捕捉カメラ8によりIJ捉すべき位it!22に対応する捕 捉ラインである。診断グラフィックスポート82 (DaLacube Max grapl+ボード)を用いてリアルタイムステータスディスプレイ98のため のグラフィック画像を構成する。
CI)U64及び車両分類用AI’Aボード80により行われる画像処理は特徴 抽出、クラスタリング、ラベリング及びトラッキングソフトウェアる。ノフI・ ウェアの動作は、ソフトウェアのχ1話形ノニルにより変更しうる又は制御ワー クスチー/gン100のXウィンドウの下で実行するグラフィック対話へ1コマ ンドツールからのりモートプロ/−ジャコールにより変更しうるパラメータ変数 により大きく制御される。
APAボート80は2値画像画素をその画像内のブロック又は領域を表ず特徴ベ クトルのスI・リームに低減する。APAにより31算しうる特徴の小さなサブ セットのみか、器ブロック又は領域に対する面積、周囲及び境界ボックスの決定 に必要とされる。各領域は1Gバイトの生データにより表され、視野12は20 領域をaみ、データレ−1・はIGkバイト/Sであり、これは2値画像のデー タレートの0.2!’6以下であり、CPU(i4により処理するソフトウェア に対し妥当である。
図17に示したように、原速度パラメーターはAPAハードウェアからAPAタ スク170によって読み取られる。各プロブに対してタイムスタンプが与えられ 、ある種の初期スクリーニングが遂行され、以後[ブラック]・ライアングル」 と呼ぶ領域の位置か示され取り除かれる。とりわけ、タイムスタンプは、測定さ れ補償されるシステムにおいてどのような峙ち時間をも可能にする。成る面積に 拘束されるホワイトプロブに対応するンーズはVxワークスメツセージバイブを 経てノートタスク172に達する。シードタスクは原シードパラメーター即ち構 造を解体し、後に記載するように、凸領域の高さと幅の比、[円形J、領域及び 「適用範囲」に基ついて領域の分類を遂1テする。ヘッドライト及び道路の反射 のように不要の範囲は除かれ、各分類領域は他のメツセージパイプを経てクラス タタスク174に送られる。
クラスタタスクは5つのサブセクション17G、即ち、領域分類、領域拡張、ク ラスター化、領域非拡張及びクラスタ分類に分割される。一旦領域がクラスター 化され個々の自動車に対応するように分類されたクラスタになると、クラスタの 1・V−は1つのメツセーフパイプによってラベルタスク+78に送られる。ラ ベルタスクはJψ「定の期間にわたって呂クラスタを監視し、クラスタが前のビ デオフレーI、からクラスター化を行ったとほぼ回し場所に現れた場合は、ラベ ルタスクはそれらか同しクラスタであると判断する。この場合、新しいクラスタ は111rのクラスタからラベルを受け継ぐ。他方一致かiすられない場合は、 新しいクラスタには新しいラベルか写えられる。クラスタの座標はそのラベルと 共に他のメツセーフパイプを経てトランエフトリタスク+80に送られる。トラ ンエフトリタスク180は、例えは大型自動車のように選択された分類のクラス タにりjして捕捉カメラ8を1−リガーする時刻を決める。投入クラスタボック スタスク182、移動クラスタボックスタスタ184、投入ラベルタスク18G 、移動ラベルタスク188及びヒストグラムタスク+90は、図16に示1よう に、診断のため、ビデオ映像に重ねてグラフィックスを発生させるために用いら れるタスクである。
APAタスク170及びノートタスク+72で遂行されたプロブ形状分析は、昼 間区分の間は全てのプロブか汀効と尋えられるので多くはない。しか【、なから 、薄暗い時伎ひ夜間の区分の間は、プロブが自動車のヘットライトこり得るので あり、これらのプロブか真実の自動車のプロブと一緒になった場合は、自動車前 部座禅はクラスタボックスの底部から取られるので不正確になる。
品タラスタ1′ノクスが品目動車の1111部に正しく位置するためには、ヘッ ドライトの反11.1によると認められるプロブを確認し、プロブか集められる 前にこれを取りr?かなければならない。他の問題は道路のレーン標識に′iI iするプロブである。
これは捕IMカメラ6のマウントか振動したときに現われる。カメラが振動して いる間、入力されるビデオ映像はもはや記憶されている静止背景映像と正確に一 致し一jくなり、従って背景映像の削除から得られる結果は除かれるべき道路標 識の映像ということになる。更に、カメラの振動によって生しるプロブを確認し 、クラスター化か始まる前に取り除かなければならない。次の問題は[ブラック トライアングル」である。へPAボート80はプロブの極性か不正確に認識され る原因となるハードウェア欠陥を有する。黒領域がビクセル処理窓の右側で終わ る場合は、AIIAボート80によりときに白領域とラベル付けされることがあ り得る。この白領域はシードタスク172によ1て取り除かれなければクラスタ ー化の一文補者になりi)る。通常、レーン標識1’llOがビクセル処理窓1 92の右側に現われたときは、[4j8に示すようにブラックトライアングルプ ロブ194、即ち「ブラックトライアングルJを生成し、これはときに右上の隅 に白ピクセルによって表示される。トライアングルプロブ104は確認し取り除 く。便利な極性欠陥の側方効果は、通割は他の形状特性によって認識され取り除 かれなければならない道路レーンライン標識190か、AI’Aボー]・80に よってラベル付けされ、自動的に取り除かれることである。
領域は次の型の1つに分類される。
(1)ヘットライト (2)道路の人工物,カメラか振動したときに現れる道路レーン標識等(3)光 、及び (1)その他,昼間区分の間、道路の人工物として分類されない6fI域の大部 分は[その他」に分類される。
昼間及び薄暗い状態の間、点灯されたヘッドライトは動いている自動車の他の区 分された部分から区分されて現れず、従って光は分類されない。しかしながら、 夜間は観点12の分野における円形の領域の面積と位置によって[ヘッドライト Jか「スモールライト」のいずれかに分類される。通常背景映像から1つの結合 領域として区分される離れたヘッドライトの対は、[結合ヘッドライト」として 分類される。正確な初期クラスタをir#るために、離れた結合ヘンドライドは 大きい自動車の小さい周辺町と区別する必要かある。
薄暗い間伎び夜間の処理に用いられる主形状測定は「円形率」である。これはプ ロブの領域と視野計とを比較して各プロブか円形にどの程度近いかを計量する測 定である。円の場合、 面積−πr’ (4) 視野計−2πr (5) である。
半径項は円にのみ関係するので、視野81の式を2乗し2つの項の商をとること 1こよりこれをl肖すことができる。
面積/(視野計)’ =yrr” / (2πr)” =1/4π (6)円の 場合はlに等しくなる固形率測定を行うために、単に弐〇に定数の逆数を掛ける 。これは次のようにプロブに適用して円形プロブが測定1dlを有する円形′f ′測定を与える。
円形率=4π×4πx(視野l1l) ” = 1. O(7)単位面積の四角 プロブについては、面積=1、視野計=4であり、固形率測定は次のようになる 。
円形ドー4πXI/(4)”−π/4=、0.785 (8)側辺か単位長の二 等辺三角形については、面積−f3/4、視野計−3であり、円形゛♀゛測定は 次のようになる。
円形率−4πx(3/4 x l/ (3)” =4πv’3/3t3=0.  6 (9)次の測定は道路ライン櫻識の検出に特に有用な「カバリッジ」測定で ある。カバリツノはプロブの面積と境界ボックスの面積との測定1/(の比であ る。境界ボノタス200は図19に示ずようにΔPΔ処理窓軸であるAI)Δボ ード座標軸に整列している。APA軸はプロブ自身の主軸と整列する必要はない 。例えば、APA座欅軸と整列している長方形プロブ202は高いカバリッジ値 を有する筈である。
しかし、軸と整列していない長方形プロブ204は中間のカバリッジ値を有する 筈である。凹型206は中間のカバリツノ値を有し、APA座標軸201に対し て斜めのライ/208は低いカバリッジ値を有する筈である。道路レーン標識は 低いカバリツノ値を持つので単純に検出できる。レーン標識力係1めではなく垂 直の場合は測定は不充分てあり、この場合はその代わりとしてプロブの主軸長と その短軸長との比の測定を利用できる。
夜間の区分の間、結合ヘッドライトの凝固したプロブはその高さと幅との比が1 つのヘットライトの場合の面積の2倍になる傾向があり、これによって認識され る。各クラスタのヘッドライトカウントトライトを検出する必要かある。
ヘットライト反1]jは大きく拡大したプロブとして現れ、最初にその大きさと その特性的な形状に基づいて検出する。プロブを垂直に拡大してヘッドライト領 域から伸びているか否かを決定することにより、そのプロブがヘッドライト反射 に関するものであることをliiI認する。
自動重監硯/ステムが連続的に自動的に動作することが可能なように、領域のク ラスター化では異なる光の状態を考慮する。niI記のような静止背景の削除の 技術は、捕捉カメラ6によって得られたビデオ映像から動く対象を区分する。し かし、区分処理から得られた領域はその口のその時間の周囲の光の状態に依存す る。昼間区分の間は通常大きな領域が得られるが、夜間ではヘッドライト及びト ラックの小さい側面灯か区分されるに過ぎない。薄暗い状態では点灯しているヘ ッドライトか動いている自動車の池の見える部分との区別がつかない。しかし、 前に述べたようにヘッドライトによる道路の表面上の反射は除去しなければなら ない。
クラスター化処理は、図12に示すように、区分された領域即ちプロブに作用し 、3自動車は通常複数個の分離した領域に区分される。例えばしばしば1台の自 動車がフロントガラスで屋根部分とボンネッ!・部分とに分かれて現れる。大き い自動車は通゛畠もっと多くの領域に区分される。クラスタタスクはこれらの領 域を「論理的自動車」にグループ化し、これを追跡することができる。離れた自 動車は映像の水平線に自動車を閉し込めるため、1つの領域にまとめて区分され る傾向にある。この距離で区分された領域は追跡できるが、しかし確実に個別の 自動車にクラスター化することはできない。アキジンヨンライン22に近い低い 領域を正しくクラスター化することが強調されている。その結果、クラスター化 処理は各映像中で低い領域から高い領域へ走査する。
2台の自動車か同一の領域に区分された場合は一緒にクラスター化される。クラ スタタスクは1つの領域に一緒に区分された複数の自動車を分離しない。各クラ スタの座標はラベルタスク178に送られ、ラベルタスク178が連続した複数 のビデオフィールドにわたって組合せ及び分離を行う。クラスタタスク及びラベ ルタスクは分類データに基づいてクラスタを分類する。トラジエクトリタスク1 80に送られた座標は路面レベルでの自動車の前部であるか否かの判断に供され る。
全ての自動車のクラスタ情報がトラジエクトリタスクに準備されており、そこで クラスタを追跡し必要な自動車の映像を選択する。
f1ウフノなクラスター化は「オーバークラスター化Jと[アンダークラスター 化」の間の中間へて遂行される。極端なオーバークラスター化においては全ての 領域か1つのクラスタにクラスター化され、そのクラスタの中の最も低い自動車 のみか」口跡される。これは古クラスタの最も低い−、がラベルタスクによって トラノエ71ーリタスクに送られるからである。その高さと幅に基づくクラスタ の分類は不正確にtiる。極端なアンダークラスター化においては、−緒にクラ スター化される領域かIxい場合、即ち3領域かその領域に固nのクラスタ及び ラベルを取得する場合は、トランエクトリタスクは凸領域を」口跡しようとして 過負荷になり、自動車の分類は多くの場合に失敗し、映像は偶然に得られたり得 られなかったりする。自動+ljの映像を得るためには、自動車屋根に対する自 動車前部を見過ごすよりは、自動車前部にχ1する自動小屋(艮を見過ごした方 かよい。そうして、それを他のクラスタの後に加えることによって追跡する。こ れは自動車前部を追跡しないことになる.、、従って、クラスタタスクはオーバ ークラスター化よりもアンダークラスター化に近いnfJ中間点を使用Jるよう に町かれている。
クラスタタスクは本り的に区分された凸領域の境界を適当量拡張し、オーバーラ ツプする領域を合体することによってクラスター化を遂行する。オーバーラツプ する領域は「クラスター化」される。しかしなから、クラスタタスクは凸領域に 適用するべき拡張の大きさを正確に決定する。昼間区分の間は拡張領域は極めて 小さいことか必要であり、一方夜間においてはクラスター化処理は小さい希薄t Jn域を生じ、このためオーバーラツプを達成するために大きい皿の拡張を必要 とする。
クラスタの構成において重要な観点は、δクラスタの底部領域か自動車の前部で なければならないことである。ヘットライトの反射による領域のように無効な領 域はクラスター化されてはならず、従って拡張されない。映像中の極めて有効な 自動車領域が適当量拡張された後で、映像中の最低領域からクラスター化処理か 始まる。捕捉カメラ8をトリガするのに最も好都合な領域は先ず最低領域である と考えられる。
最低領域の座標はクラスタ構造を初期設定するために用いられる。続いて初期領 域の上に拡張された全ての領域についてオーバーラツプを試験する。どの領域で もクラスタの座標とのオーバーラツプがない場合は、クラスタ座標はその領域を aむように更新され、この領域はクラスター化されたものとして標識が付けられ る。t+iLい領域かクラスタに(1加されたときは、全ての他のまだクラスタ ー化されていtぽい領域は再びクラスタ候補名になる。従って、領域のリストが 再び映像の底部から調べられる。既にクラスター化されたものの標識が付けられ たリスト中の領域はスキ7・プされるとしても、これは次善の策である。領域の 全てのリストか調へられオーバーラツプがないことが分かると、次のクラスタは 残りの領域の最低部分から始められる。クラスター化処理はこのようにしてクラ スター化されない領域がなくなるまで続けられる。ここにおいては、クラスタの リストは拡張されず、ラベルタスクに送られる。
領域拡大を行うに当たり、領域は、AI)A座標軸に基づいて、垂直方向では変 数量で拡大されるが、水星方向では一定量で拡大される。水平拡大は、車両のプ ロブか車両の全幅に亘って接続される傾向にある日中の分割中には不要である。
垂直方向では、同一の車両か原因のプロブの切り離しが現れる。例えば、一般に 自動車に(7(Eする二つのプロブは、ボンネットとルーフが原因となる。これ ら二つのプロブは車両の全幅に亘って広がり、一方が他方の上に現れる。さらに 、凸車両に対する一つのプロブが車両の全幅に亘って広がる間は、クラスタ座標 は、群生されるべき水平拡大か他に必要となりつるあらゆるプロブと一体とする のに十分な幅となる。全幅のプロブにより拡大が規定される。図20に示された 例を0昭すると、クラスタ214か始まると、領域210に右側の領域212が 加えられる。その理由は、単に上側の全幅領域216が領域212に加えられて クラスタ2I4を形成したからである。領域リストがリストの開始から連続的に 調査されない場合、予め検査された領域210の重複部分を見つけない。このた めに、クラスタのタスクは上述したように、領域を加えた後にクラスタされてい ない全ての領域を再考する。
クラスタタスクは二つの拡大法のうちの一つを行うことができる。第1の方法で は、入力としての領域の水平すなわちY座標を、加えるべき拡大の量を特定する 検索表に保持する。拡大の量したがってクラスタの程度はこの場合明るさの状筈 に応じて修正される。外部の明るさのレンズが減少し、領域が一1法方向で減少 すると、領域に加えられる拡大の量か除々に増加されうる。さらに、像の眺めを 、検索表に記憶された値を眺めに応して調整することにより補償することができ 、すなわちカメラ像よりも高い遠くの領域を、カメラ像よりも低い近くの領域よ りも小さく拡大することかできる。検索表に記憶された拡大値の例を、図21に 示す拡大1v及びY座標のグラフ218によって図示する。全ての拡大量は画素 数でLjえられる。第2の拡大法では、領域の幅に比例した量で36n域を拡大 する。この方法は、Lj中の分割中に得られる領域の形状の観察に土に基ついて いる。
−G的に遠くにある小さい領域はできるだけ小さく拡大され、一般的に近くにあ り、四ftl形で、車両ごとに発生ずる大きな車両本体の領域はできるだけ小さ く拡大され、車両の前に頻繁に発生ずる広くて短い領域は大幅に拡大される。実 際には図22に示すように、この結束領域の境界220及び222はほぼ四角形 となる。図22において、円領域224及び22Gの境界220及び222は少 なくとしこれらの領域の幅に等しく垂直に拡大されている。したかって、幅が広 くて−い領域224は、広くて四角形の領域22Gに比べてA’WIに大きく拡 大されている。領域224は、jlt両本棒本体域226の下に位置した車両の 前部である。
したかって、一つの領域224及び226を非常に大きく拡大することなく組み 合わせることかできる。広い領域22Gか過度に拡大された場合、領域226を 連続する車両の前方に重ね合わせることができる。好適例では、拡大の計算に用 いられる拡大係数を夜間使用のために拡大することができることを考察しても、 夜間の処理には非常に大きい領域の拡大が要求されるので、この方法は日中の分 割中にのみ用いられる。
夜間のクラスタ中には、クラスタすべき全ての領域は十分少さい円であり、例え ばトラッククラスタを、各ライトが記憶されたトラックテンプレートに適合する ことかできるか否か考察することにより構成することかできる。クラスタの第1 の領域に′i1シては、トラックテンプレート内で適合させるために、超えるこ とかできないライトか分離された最大間隔となる。
領域の巾復部分は、領域の座禅とクラスタの座標とを比較することにより検出さ れる。ここで、領域及びクラスタの両方の左上の座標(xl、y +)及び右下 の座標(x)、y2)は既知であるとする。像平面座標に対して、Xは左から右 に増加し、yは上から下に増加する。先ず、図23に示すように水平に、xBi m、領域R1,R2、Rs 、R4,Rs及びR7の重複部分を考えると、クラ スタC1を用いた重複部分の検りは次式のようになる。
R,(xI)<C,(X! ) (l O)C,(x+ ) <R,(xt )  (l I)二つの式かともに真である場合、水平方向に重複部分が存在する。
したがって、水平方向の重複部分は領域R+ 、Rs −R1及びR6に対して は真であるが、領域R1は式1oが真でないので検査できず、また、領域R8は 弐8が真でないので検査できない。同様な検査が垂直方向で次式のように行われ る:R,(yt)<C−(yt) (12)R,(y l)に対する補5i的な ta杏を行う必要はない。その理由は、領域が上から下の順序でA I) Aボ ード8oがら出力されるがらである。また、クラスタタスクかりス1−中の全て の領域を下から上へ処理すると、補足的な検査C,(yt)利<、<y 、)は 、この式が全て真であるので不要である。
日中の明るさの状態でのクラスタは、上述したffl復部分の検査に基づいてい るか、夕暮れ及び夜中のクラスタは、不明確さが増大し、がっ、同一の車両の領 域間の分離か大きくなるのか主な原因で追加の規則を考察することが必要となる 。
ヘットライトの反射や上述した検出カメラ6の振動が原因の背景像の区域からの ノイズのような成る領域もクラスタされるべきではない。したがってクラスタも 上述した種々の領域の分類に基づいた一連の規則を考察することが必要となる。
これらの規則は次の通りである・ (i)拡大された領域を、クラスタに加えるべきクラスタに空間的に重ね合わせ る必要かある。
(ii)領域か一つ以上のクラスタに重なり合う場合、この領域をもっとも低い クラスタに加える。
(ii )クラスタされるべき領域を、クラスタにもはや加えることができない 。
(iv) 「結合されたヘッドライト」の領域を存在するクラスタに加えること ができないっこのタイプの領域はクラスタを始めるだけである。
(v)i−め設定された数の「ヘットライト」領域のみをクラスタに加えること かできる。この予め設定された数は、ユーザインタフェースから調整することが できる/ステムパラメータである。
(〜I)空間的に許された多数の「他υ月及び「小さい光の」の領域をクラスタ に1」えることかできる。
(vi)処理ウィンドウのm点の部分に接触するすなわちこの部分を含む領域は クラスタを始めることかできるか、クラスタを加えることができない。
(vi)クラスタにj」えるへき別の「ヘッドライト」領域を、クラスタ中の他 の「ヘットライト 座欅間の距離に基ついて決定される。
(ix)f反射」及び「左上の道路」の領域はあらゆるクラスタに加えられない 。
道路をモニタするために、クラスタを3つのクラス、即ち、乗用車、小型トラッ ク(小型・ド坦な実用トラック)およびトラックに分類する。従って、バスおよ び連結式千両のような全ての大型1(をトラックとして分類する。この車の分類 は古クラスタボックスの高さおよび幅並びに1り間運転時のクラスタ内のライト の数にぬついてiテう。各分類の高さおよび幅は、明るさの状筈か昼間から夕方 、次いて夜間等と変化するため、ヒストグラムタスク190と称される手順を経 て修正する。クラスタの幅はクラスタの高さと同様に重要である。その理由は例 えばトレーラのトーイングの大型4輪駆動車かトランクの車高臨界値を越えるが トラックやハスの車幅と同程度でないクラスタを発生ずるからである。モータ車 両のクラスタ高さおよび幅のヒストダラムは種々の車両クラスに対応し、且つ記 憶された分類臨界値を自動的にセットする個別のピーク値を有する。このこの高 さおよび幅のヒストダラムを図16の表示に示す。例えば次の条件の1つを満足 する場合には、クラスタはトラックとして分類する。
(1)クラスタの高さおよび幅かトラックの高さおよび幅の臨界値を以上となる 。
(11)明るさの条件か夜間であり、クラスタかトラック幅の臨界値以上となる 。
(iii)明るさの条件か夜間てあり、スモールライトの数かトラックのスモー ルライトの臨界値以上となる。
(iv)クラスタの高さがトラックの車高臨界V1の所定範囲内にあり、クラス タのスモールライト領域の数がトランクのスモールラ(1−臨界値以」二となる 。
周囲の明るさか低壬するにつれて、トラッククラスタの;j法が減少し、従って 高さおよび幅の臨界値が、ヒストグラムタスク+90により決まるように、明る さの条f′1に1衣(lて減少する。8クラスタの分類はクラスタ処理されたデ ータ構体にクラスタの座禅および時間スタンプとともに記憶する。次いでクラス タ処理されたデータをラベルタスク+78に通過させる。
ラベルタスク178は6持定のクラスタにラベルをつけるとともに前に見たクラ スタのアレイをクラスタの3次のビデオフィールドに整合させることにより時問 いっばいにクラスタを追跡する。1つのクラスタがn;1のフィールドからのク ラスタと同一箇所に粗く現われる場合にはラベルタスク17gがこれらを同一の クラスタであるとみなす。整合が行われ111場合には新たなりラスタが前に見 たクラスタの特定のラベルを受け継ぐ。クラスタが整合し得ない場合にはこのク ラスタに対し新たなラベルをつける。クラスタは数フィールドに亘って消失させ ることかでき、これか、クラスタか実際に新たなものであるが、またはある消失 期間後に再び現われたしのであるかを決めるラベルタスク+78の目的となる。
クラスタの整合は設置箇所に基づくものである。クラスタの一1法は余分の整合 パラメータとして用いることかでき、現在の設置箇所で充分であることを確かめ た。クラスタは前のフィールドの位置から左程移動しないものとする。現在のク ラスタフレームの境界座標か前のフレームからの境界座標と重なり合わない程度 にクラスタか移動する場合には前のラベルは転送しない。クラスタはこれらがフ ィールドからフィールドに探索される際に垂直方向および水平方向の双方に分割 およびKDすることができる。2つのラベルっけ方法が開示されているが後者の 方法か現在使用されており、好適である。
第1のラベルつけ方法は、新たなりラスタか受け継ぐべきものであるが、古いク ラスタのラベルであるかを決める2つの相互テストを含んでいる。第1のテス1 はラベルリストと称される前のクラスタのリストの図24に示すような任意のク ラスタ232および234の境界内に新たなりラスタ230の中心がくるがどう かを決めるようにする。クラスタ230に対してはテストは失敗したが、新たな りラスタ236および238に対してはその中心が前のクラスタ240内にあり 、従って最低の新たなりラスタ236が前のクラスタ240のラベルを受け継ぎ 、」−…りの新たなりラスタ23Gか新たなラベルを割当てられる。第1のテス トか失敗した際に実行される第2のテストはラベルリストのクラスタの任意の中 心か現在のビデオフィールドからのクラスタの境界内にあるかどうかを決めるよ うにする。従って前の古いクラスタ232および234の中心か新たなりラスタ 230の境界内にある際に整合か検出され、新たなりラスタ230が下側の古い クラスタ234のラベルを受け継ぐ。第2テストを新たなりラスタ23Gおよび 2′38に適用した結果は失敗となる。その理由は古いクラスタ240の中心が 新たなりラスタ236および238に何れ内にもなく、従って、このテストをこ れらクラスタに適用することによって新たなりラスタ236および238の双方 に新たなラベルが割当てられるようになる。
第2のラベルつけ方法は前述したクラスタ処理重ね合わせ技術に基づくものであ る。本質的には現在のフィールドからの名クラスタの境界ボックスはクラスタリ ストのクラスタとの重なり合いに対してテストする。このクラスタリストは重j ヱリ臼い領域を検知する前述した撞木方法の場合と同様に底部から頂部に探索す る。斯[1にして、2つのクラスタか単一のクラスタになる場合には第1の重な り合いか下側のクラスタと重なり合うようになる。整合か見いだされると探索か 終了し、転送されたラベルがマークされて新たなりラスタに適用されるようにな る。これかため、1つのラベルは新たなビデAフレームの1回の探索中2回転送 することはできない。第2のラベルっけ方法か好適である理由は第1のラベルっ け方法のテスト回数の半分の回数でよいからであり、しかも1つのクラスタをそ のラベルかいまだ受け継かれている順次のフレーム間でさらに移動させることか できるからである。中Jし・か境界と整合する第1のラベルつけ方法では、フィ ールド間で行われる最大変位かクラスタの幅(または高さ)の半分であるが、境 界が重なり合いに対してチェックされる第2のラベルっけ方法では、最大変位は クラスタの全幅(または高さ)となる。従って、第2のラベルっけ方法によって クラスタを第1のラベルつけ方法の距離の2倍移動させるようにする。
クラスタか順次のフィールドを時間的に移動するため、ごれらクラスタは分割ま たは結合するようになり、且つ1つのクラスタが分割されると、ラベルは2つの クラスタのうちの下側のクラスタに転送されるとともに代表的には下側のクラス タの背後の他の車両である上側のクラスタには新たなラベルが付されるようにな る。或は又、2つのクラスタが結合される場合には古い下側のクラスタのラベル は新たな結合ラベルに転送され、他のクラスタのラベルは消失する。2つのクラ スタの下側のラベルは分割または結合後に転送される。その理由は最下側のクラ スタが殆ど車両の前部を含むようになり、従ってクラスタラベルの維持に対する 優先順位を与えるようになる。
バウノディングボソクス座標の記録は、それのラベル、ラベル巴代及びこのクラ スタが最後に何時見られたかと一緒に、クラスタ表内に、各クラスタに対して維 持されている。ラベルが受け継がれた時は何時でも、それの財代が増大し、且つ それの情景値かりセントされる。ラベルが一つのフィールドの進行内で伝達され ない場合には、それの最後の情景値が増加される。それの最後の情景値がラベル 保有しきい値を超過した場合には、ラベルがクラスタ表から除去される。クラス タラベル、座標及び類別は軌道体ff1180へ渡される。
この軌道体ffi+80は、連続するビデオフィールド上のクラスタを探り出す ために受け取られたクラスタデータを用いる。クラスタボックスを探り出すため に用いられる座標は、そのボックスの基底の中心の座標であり、且つ適用される 道路1Gに対する座標系が図25に図解されている。道路座標系のデータ300 はその道路上の任育の点であり、それはカメラ6と8とを支持する横断橋の縁の 下側で左側のフォグランプの光線の中心として選ばれた。車両302はこの道路 16上で正のY軸に移動し、その距離における負の値で出発する。映像平面座標 (X+−Yi)内のクラスタボックスの軌道は、図26のグラフに示されたよう に、透視画法の効果により時間によって線型でない。それ故に映像平面座標を実 世界三次元座標に変換するようにカメラ変換か適用される。マトリックス形状で は、全体カメラ変換は次の通りである。
α、はmm当たりの画素でのX軸換W係数(本質的)、(1,はmm当たりの画 素でのY輔換算係数(本質的)、Xoは画素での映像平面オフセット(本質的) 、Y、は画素での映像平面オフセット(本質的)、[は11゛占、距離(本質的 ) 0TCAMはけ界圧挿における検出カメラ6の位置である(非本質的)。
本質的tJパラメータはカメラとセンサとの生来の特徴であり、一方非本質的な パラメータはカメラの位置と方向とのみの特徴である。映像平面の根源点は座標 <Xn、Yn)における、光軸とその透面との交点である。式13はと書き換え ることができる。
ここで、Cは換算と変換及び透視画法修正を実行する3×4均質変化の、カメラ 校正7トリノクスである。映像平面座標はこの時として、均質圧挿の語で表現さ れる。
一般の透視画法変換は映像平面上の点へ三次元空間での光線を写像する。検出カ メラ6により見られたような映像平面における車両座標に対しては、その車両の 独特な三次元位置は決定されi!′)ず、それでラベル作業から受けたクラスタ ボックスの底は道路上、すなわち2=0であると考えられ、且つそれ故にそのボ ックスは道路X及びy座標を参照して探り出され得る。映像平面座標及び2を与 えられた式14.15及び16は、車両の位置を特定するために道路座標X及び yに対して同時に解かれt)る。コンピュータ代数パッケージM A I) L  Eを用いてこれらの式は解かれ、且つC表示においては、その解は次の通りで ある。
dcn=(−Xi”C3ドC22+Xi”C32”C211(Yi″’C21− C21)”C12+(−Yi”C321C22)”C11)G y=−(−Xi°C31’C24+Xi°C34”C21+(Yi°C21−C 21)”CI4+(XビC33”C21−Xi”C31”C23)”zlYi” c31−C21”z”CI3+(−Yi”C341C24+(−Yi”C331 C23)”z)@C11)/den;x=(−C2−1°Xi”C32fC22 ”Xi”C34t(Yi”C32−C22)”C14+(C22”Xi@C33 −C23”Xi”C32)”z+(Yi”C32−C22)”z”c13+(− Yi’″C34+C241(−Yi@C33+C23)”z)”Cl2)/de n;この解は明らかに道路上の高さ2を含んでおり、それは昼間の動作、あるい は道路上のある境界の距離に対しては零に設定されてもよいのに対して、夜には クラスタボックスの底が一般に道路上のヘッドライトの高さに対応し、且つそれ 故にZが概算のヘッドライト高さに設定される。図27は軌道が道路座標X及び yへ写像された後に、図26におけるのと同じ車両軌道のグラフを図解している 。この軌道は車両か一定速度で且つ左側車線内を移動していることを図解してい る。
車両302か捕捉線22に到達するであろう時、及びその車両302の将来の位 置はこのシステムにおける待ち時間によって、予報される必要がある。きっかけ の要求と捕捉カメラ8による映像捕捉との間にには、相当の待ち時間が存在し、 且つ1↑加的な待ち時間か画素転送、映像処理1?1報ルートの遅延及びソフト ウェア処理の遅延により起こされる。検出カメラ6により必要な映像に基づいて 得られた情報か、実際の車両位置の遅延した表現を与え、且つそれ故に車両30 2の将来の位置と速度とを概算することが必要である。
上述の逆透視画法により得られた位置概算は、特に車両が遠距離にある場合には 、量子化効果により極めて雑音が多く、それ故に車両の速度概算のために単純な 微分は用いられ得ず、且つそれ故にこのソフトウェアは車両位置の雑音の多い観 察に基ついて、車両の横方向及び縦方向位置と速度状態とを復元するためにカル マンフィルタを用いる。縦方向及び横軸の各々に対する車両状態は、車両の位置 ωと速度ωとを含み、次のように表現される。
状態空間形では、一定速度運動と仮定して、車両の動態はここで、Yはこの車両 の横又は縦方向位置である、この座標系の観察できる出力であり、Φは状態変遷 7トリノクスで、且っCは観察マI・リソクスである。−lと速度運動にχ1し てはこの7トリノクスは次の通りである。
ここで、Tは20m5であるビデオフィールド間隔と等しい、づンプリング間隔 である。1軸に対するカルマンフィルタ式はに一ΦP CT(CI’ C”」l へ)−1(22)■〕−ΦI)ΦT→R,I、−KCPΦT(24)このフィル タは千切的であり、Xは次のサンプル間隔に対する車両状態の予想値である。K は利得で、Pは誤差共分散マトリックスであり、1.は2X2恒等行列である。
R1とR2とは入力及び出力共分散概算であり、且つこのフィルタの動態を調節 するために用いられる。
カルマンフィルタ式22.23及び24はマトリックス形式で実行するためには 複雑であり且つ時間かかかるので、コンピュータ代数パッケージMΔPLEが、 C表示で、次のように、スカラー形に式を低減するために用いられた。
5パフィルタ利i)を計算0/ den = kll −” pH+ ”R2、kl= (kp−”pH+T”  kp→p12)/dcnk2=kp−1+I2/den; 7・“状態ベクトルを更新6/ xl=kp−=xl+T” kp−4x21−kl”(”y −kp−”xl) ;x2=kl+−x2+に2”(”y −ttp−xl):5/ゝ共分散マトリ ックスを更新(3要素のみを対象に保持ン 0/pH= ’R1+に9−=Dl l +2.0°T′″kp→p12 +T” T” kp→p22−に1″″h p−41111−kl” kp−4pH°T:p12 = kp =p12 + T@kp−p22−kl” kp−hp12;p22 = ’R11−kp=1 ン22−に2°kp−・p12;kp−pH,=pH: kp”T112=III2; itp→p22=p22; 車の状態に対する概*taとフィルタに幻する誤差の共分散が式を用いて計算さ れ、データストラクチュア“K、に蓄積される。R1とR2に対する最適値は経 験的に決定される。図28は、1つの軸に対する概算値、すなわち、各ビデオフ ィールドか受信される都度、車の概算位置と車の概算スピード、およびカメラの フィルタ計算に関連した概算誤差からプロットされるグラフを示している。概算 1i1捉時間は概算の車の状態データを用いて計算される。生じるべき捕捉が知 られている位置22のように、概算の捕捉時間は、概算位置と捕捉位置間の差を とり、その結果を車の概算速度で除算することによって計算される。概算の捕捉 時間か、捕捉か次のビデオフィールドの時間内に生じることを示す値以下になる とき、概算時間積れJはトリガーボート84に供給される。X方向にスjする概 算の月1の10きはマルチレーン車道のとのカメラ8か1−リガされるべきかを 示している。
式11のスケーリングマI・リタスCは道路1Gに沿ってあらかしめ定められた 位置に石かれた道路マーノJ−または好ましくは望遠鏡で見えるくいを用いて較 正される。くいは、道路データ300に関してくい上の異なった位置に対するX 。
き・およびl座標を得るために倹3jされ、それから除去される。式14は次の ように展開される。
C,、x * Cuy+ CI、z + C,4−C,、X’X −C,、X’ y −C,X’z −C,tX’ = 0 (25)C8,z + Cc+ C ,z −C,−C3,Y’X −C,、Y’y −チY’z −C,Y’ =  O(26)そしてそれは、画像千面康1f(X′、Y’)を実世界の座標(x、 y、z)に関(fつける。
1〕の天測に′lIL、これは次のようfSマトリクスの形状で表現される。
式は同次であり、それ故C71−リクスのオーバーオールのスケーリングは簡単 に運はれ、その結果C,,−1と/jす、そしてこのパラメータは同−硯されな い。
ノこ27は11個の未知数をイエし、そして解のために(X’ 、 ’1″)と (x、y。
2)の7jの少fi<とし55の天測を要する。式のシステムは通常オーバー( OVcr)決定され、そして最小自乗解は特異値の分解技術を用いて得られる。
解のために較正占x、y、zは共通平面」二にあってはならない。大財界の座標 は検リナ結果から()られ、そして画像の平面座−(X′、Y′)は、カーソル ブロノテイ/グのソフトウエアパノケーノを用いて検討用くいの検出されたカメ ラ画像の表示からflられる。
捕捉カメラ8の正しいトリガを達成するために、システムのタイミングは次のT IT項を巧1.ljすることを必要とする。
(i)システムタイミング、正確な画像の捕捉を容易にするために、システムは 十分な時間方向の解像度を持たねばならず、ずなオ〕ち、システムは道路上の車 の脱落を避けるために、秒あたり2台の車のような十分な車の捕捉レートを有さ なけれはらない。
(11)1測 車の画像か捕捉される時間を決定し、0うして画像の捕捉を始め る。
(iii )捕捉のデータフロー 捕捉のカメラと、凸画像捕捉と蓄積のために 前任を負っている捕捉サブシステム681L’lの物理的インターフェースを行 うべきタイミング。
/ステムのタイミングは、24時間より大きな期間からスタートすることを考え る荒いレベルと高い解像度の細かいレベルの2つのレベルに分解される。荒い1 ノベルのタイミングは、図29に示されるように、トリガーボード84の実時間 のマスタークロック354によって維持される。捕捉カメラ8の幾何図形的配列 は遠近法の効果を制限するために選ばれ、画像がぼんやりするのを制限し、そし て利用できるフィールドの深さの制限によって課せられる他の制約を考慮する。
そしてブリッジマウンティングを渡るために、画像捕捉点22がカメラ8から1 7と20メートルの間にあり、そしてカメラは道路に15°より大きくほぼ24 0の角度にある。目標の車は名目上100 km/hの車速で捕捉窓であるほぼ 40m秒の視野内の捕捉点22を横切る。実時間クロック354は20m秒間隔 に降下のタイミングをlJj給する。セグメンティンヨン、クラスタリングおよ びトラノエクトリのタスク中に蓄積された目標車の位置についての不確定さのた めに、捕捉窓中の1またはそれ以上のタイミングの事象は信頼できる画像捕捉を 許すためには十分でなく、それ放鳥分解のタイミングはほぼ64u秒の水平ビデ オライン走査時間に分解される。
上述したように、CPU64は区域分析とクラスタリング手続中に車を区分する ことかでき、特に、クラスタの大きさを基礎として大きい車と小さい車を見分け ることかできる。画像か捕捉されるべき車をクラスタか表すことを、ししCPU 6・1か決定するならば、]・ラノエクi・りのタスクによって決定された最終 の概算捕捉時間が、図27に示されるように、VMEバスインターフェース35 0を経由してトリガボード84に供給される。CPUG4は概算時間を31ビツ ト値としてI+?給し、その概算時間は次のフィールド中の水平走査ラインの数 を表し、それは達したとき捕捉カメラ8がトリガされるべきであることを示して いる。■h+Eハスは、捕捉か生している走査ラインの数をボード84の捕捉ラ インレジスタ;352に書き込むために1史用され得る。マルヂレーン車道に対 して、C1’U(i4はまた、車の水平位置データによって決定されたように、 動作されるべき正しい捕捉カメラ8を示すデータを提供する。捕捉ラインレジス タ352とマスタークロック354に加えて、トリガボード84は比較器356 と、ラインカウント値を蓄積する係数レジスタを含んでいる走査ラインカウンタ 358を含んでいるうマスタークロックはバソテリバノクアノブ360を有し、 正確にビデオフィールドのトランクを維持し、各フィールドの終りにおいてライ ンカウンタ38をリセットし、そしてAPΔボード80によって処理される未加 工のンードパラメータへの配分のために時間のスタンプ情報が発生させられる基 礎として使われるように検出カメラGの水平同期に同IJI Lでいる。捕捉ラ インの数が捕捉ラインレジスタ352に読み込まれた後に、ラインカウンタ35 8はレジスタボード74からttt給されるパルスに基ついて水平走査ラインを 旧敵する。カウンタ358のウィンス1数と捕捉ラインレジスタ352に保持さ れた数は比較器で比較され、そして2つの数か同しであるとき、比較器は捕捉カ メラ8に対してライン32に捕捉パルスを出す。また、捕捉カメラ8をトリガす るトリガボード84を設けることは、CI”’UG4か妨害に対して開放である ようにソフトウェア制御に依存するよりもっと正確であり、そしてそれ故実時間 事象の信号を正確に制御することに依(rい)ない。
画像獲得カメラ8はIiUされた詳細な電子スチールまたはlookm/hまで のスピードでカメラ8の正面に向って来る車両の結像へと発展されてきた。フレ ームレ−1・はイノターレース走査されないモードを使用した少なくとも毎秒2 枚の画像である。車両の駆動光や太陽の反射光かカメラ8を照射する時は、標準 のカメラ構成は不十分な解像度、画像のにしみおよび画像センサのブルーミング に起因する望ましくない影響の故にその限界に苦しんだ。ブルーミングは許容し 難い画像の異常と考えられ、特に、ナンバープレートの文字の自動あるいは手動 読取りをきびしく制■する画像のナンバープレートの読取り分野で表われる時そ うである。他の許容し難い画像光″帛は画像のにじみで、それは標準のカメラ構 成では高いコントラス]・の領域て発生しがちで、その高いコントラスト領域は 最も大きな車両かナンバープレートの近傍に積載されたヘッドライI・を有する 時にはそのナンバープレート領域を含む。画像のにじみの影響はセンサの露光が 減少するはと増大する傾向にあり、標4■のカメラ構成にとって画像のにじみは Imsの露光時間で許容し易い損傷であった。
画像獲得カメラ8は1280XI024画素のNMO3白黒シリコン電荷結合卑 子(CCDCセンサを有する高解像度、前面照射の全フレームカメラ構成である 。画像をよぎる像のにじみまたはブルーミングを防止するために、カメラ8は1 、000 Xの反ブルーミング指標(対数の)を提供する横方向のオーバーフロ ウドレイン(lateral overflow drain)のセンサ構成を 有している。この構成は各画素に関し過剰の電子を4JF出する場n「を提供し 、イーストマン コダック社はこの構成を組込んだセンサの1つを開発してきて いる。1. 1μ腸まで拡張された赤外感度と組合わされたカメラは車両の近赤 外線結像を可能とし、画像中の車輌のナノハープレートの明確さを劣化させるこ となく許容し得る画像までブルーミングを削減する。
カメラ8の画素は16μm2の面積をイイし、充填率は70%で、800−90 0旧ηの画像露出波長で0.25エレクトロン/フオトンの量子効率を有する。
これは動く車輌をコマ化めするに必要なImsの露光時間でカメラが動作するの を適切にする。このセンサはImsの露光時間での低い照射結像能力を有するが 、実際には赤外線フラノツユ40が大ていの動作条件で極端な照明比力咄現され た時、補助光線を提供するよう要求される。このことは、例えば、車両に影がは いる時または結像か夜間になされた時に発生ずる。CCDセンサの同期のとれた 開閉が機械的シャッタで達成され、カメラシャッタは電子的にImsでトリガさ れるロボット、ンヤーマニイ(Robot、 Ger+eany)によってなさ れた。シャッタはまた以下にのべる電子フラノツユ40の同期に基づいたもので ある。
画像センサからのアナログ出力はカメラ8により直接ディジタルデータに変換さ れ、そのディノタル画像データは8ビツトのグレイレベル形式か標準のJl’E G両像圧縮を用いた圧縮形式かのいずれかで出力される。
フラノツユ40は鏡面反Q1器の背後に積載された空冷のキセノン短期間(=5 001)s)フラノツユ管を含むフラソ/ユヘノトをイ1している。鏡面反射器 はl−〕のレーン35の111射用に狭いビー1、幅を発生ずる。フラツノユ用 のバワーパ・ツクは毎秒2フラノツユの1ノイクル時間を有する空冷の100− 1500ジユールの可変用カバ「ツー容量パックからなっている。フラノツユ4 0はGO5nm−1500r口nの波長領域を有する。赤外のバンドパスフィル タがフラノツユ管のnII面に置かれ、それは人間の可視領域のすぐ外側の電磁 波を透過し、それによって近つくl・ライムの°フラッシュ幻惑”を防止し、フ ラノツユ40の不愉快さを排除する。
フィルタか伝達を許す波長は、トライバの“フラソンユ幻惑゛排除を釣合いよく し、さらに後方へ反射するナンバープレート用に許容し得るコントラストが得ら れるよう選択される。後方へ反射する特性を有する文字と背景の両者を有するナ ンバープレートは相対的に結像か困難で、CCDセンサスペクトル感度、フラノ ツユのバッドバスフィルタとカメラ8用のし/ズフィルタとの間の選択されたH ′B:;いは図30のグラフに示されている。露出制御回路がロボ・ノド ツヤ ・ツタおよびカメラ8のレンズのアイリスアパーチャ機構に接続されて0る。前 記回路番よ回路によって検知される周囲光のレベルに従ってそのアパーチャ位置 を制御する。
i+11記回路は赤外フラノツユ40の電力とトリガーを制御するためライン3 6にフィードバック信号を供給する。獲得カメラ8のアパーチャが周囲光の増大 につれ閉じていくと、フラノツユ電力は周囲光とフラ・ノンユによる“補助光線 ゛としての照Q、f光との間の釣合いを保持するために増加される。前記回路は また遅延要素を含み、それによって、白いトラックの通過とか太陽光が車両の窓 スクリーンからカメラ8上に直接反射された時、ひきおこされる大きな一時的な 揺動中にフラノツユ電力の平均化を維持する。前記回路は標準の露出制御回路を 基礎としたもので、遅延要素に加うるに、周囲光を測定することかできる赤外セ ンサを含んでいる。フラノツユの電力はフラノツユ40用の環カバ・ツクの容量 を調整することにより制御される。
赤外線フラノツユ(ランプ)40は捕捉カメラ8の光軸に対し9.56の角度で 且つ車道16に対し15°よりも大きな角度で装着されている。フラノツユ40 の19野39は捕捉カメラ8の視野20に近似している。フラッシュ40の幾何 学的形状構成は露光する車両、特にそのナンバープレートからのいかなる逆反射 効果をし減少させる上で重要である。ナンバープレート上に用いられている塗料 の逆反射特性は、最大反射光かフラノツユ照明ビームの軸線に沿って戻るような しのである。照明角や照明エネルギーはナンバープレート上に用いられている種 々の範囲の逆反射性及び非逆反+111性の塗料の色や調合を考慮して選択する 市両モニタンステムの捕捉カメラ8により得られる映像(イメージ)の例を図3 1及び32に示す。
捕捉カメラ8は図33に示すように、インタフェースボード359により検出サ ブシステム6G及び捕捉サブシステム68に接続されている。インタフェースポ ート359は電力をカメラ8に与え、カメラ8のプロセッサ360に対しデータ 割込みを与えることかでき、光学的なアイソレータ365によりカメラ8のイメ ーンハノフ7361及びトリがインタフェース363に接続されている。インタ フェースポード359は差動R8422通信インタフェース367及び通信ケー ブル369を介して制御ユニットlOに通信を行う。トリガ信号はトリガボー1 ・84からR8422インタフエースを介してカメラ8のトリガインタフェース 363に与えられる。CCDセンサ371により生ぜしめられるイメージデータ は、カメラ8がトリガ信号を受けてから約300ミリ秒後にカメラ8のイメージ バッファ361内に得られる。この時点でデータ割込み信号が制御ユニットIO から送られ、カラメ8からイメージデータを転送することを要求する。イメージ データはtStワード/秒のレートで16ビツトワードとしてイメージバッファ 361から読出される。各ワードは2つの8ビツト画素値を表わす。各16ビツ トワート内にはタイミングの目的でストローブクロック縁をも含まれている。1 6ビノトデータ流はCPU64により標準の論理レベルで8ビツトデータに変換 され、非同期イメージデータはデータキューブ−マックススキャン(Datac ube Ma++5can)ボードである捕捉サブシステム68のフレームグラ バ86により処理される。イメージデータは次に捕捉イメージバッファボード8 8内にクロック導入され、ハスレピータ89により図6に示すようにイメージバ ッファ兼通信コントローラ57又はナンバープレート認識システム51に転送さ れるまでこのイメージバッファボード88内に保持される。
捕(Wカメラ8により捕捉されたイメージは以下の特性を有する。
(i)3.5mの全道幅が撮像されている。
(ii)40X80mmのキャラクタ(文字、記号等)の組に対する各ナンバー プレートのキャラクタの画素解像度はW、Z及び0に対し少なくとも1o×20 画素であり、文字1.L等のようなストローク(線素)に対し最小4画素であっ た。
(ul)キャラクタストロークの平均グレーレベルはナンバープレートのグレー レベルの背景よりも少なくとも20グレーレベル高い。
(1v)ナンバープレート領域と車両本体の双方が、車両の種類を適切に識別し うるように撮像されている。
(V)ナンバープレートイメージの品質は、すべての車両やナンバープレー1・ の種類にχIし24時間全体に亘って比較的一定である。
イメージバッファ兼通信コントローラ57は、図34に示すようにディスク38 3」−のイメージの中間記憶を処理するだめのバッファボックス381としての ノリコン・グラフィックス・パーソナルIRIS 4D/355マンーンと、C l5cOインターネツトプロトコル(IP)ルータ385と、サミットテクノロ ノーズ社の520001SDN帯域幅マネージャ387とを有している。その曲 の説明はレピータ89とバッファボックス381との間のイメージ転送に関する ものであるか、この説明はレピータ89と図6に示ずようにノード2に位置する ナンバープレート認識システム51との間のイメージ転送にも適用される。
ハスレピータ89によるバッファボックス381へのデータ転送は3MB/秒デ ジタルラインにより行われる。DMA機能を有するBIT3型413VMEバス レピータであるレピータ89は、バッファボックス381か捕捉サランステム6 8内のバッファ88から直接データをコピーしつるようにする。バッファボック ス381とシステム68との間のイメージ転送を調整するために、バッファ88 内にイメージを蓄積するためのイメージヘッダ構造を確立し、メノセーノをメー ルボックス位置での割込みを介してバッファボックス381とシステム68との 間でやりとりする。イメージバッファ88に対するメモリのレイアウトを図35 に示づ。高位のメモリ位置は得られたイメージをバッファセグメント370内に 蓄t* するのに用いられ、各イメージバッファに対するヘッダ372は下位の メモリ位置に蓄積される。イメージヘッダ372は、収集イメージのデータと、 バッファ88内のイメージにilするベースアドレスと、イメージが現在読出さ れているかとうかを表わす使用中フラグと、イメージの寸法に関する上方(PI XO)とを含んでいる。バッファ中の最下位位置におけるメモリヘッダ374は バッファボックス381とJli(fしており、以下の領域を有する。
1 、 ha−1+osLinLr ・バッファボックス381により用いられ 、送られているのはどの種類の割込みであるかを特定する。
2、 ha−+magenum :イメージ使用可油側込みが送られた後にどの イメージを読取るかをバッファボックス381に知らせるのに用いられる。
3 、 l+a−numbufs ・バッファ88内に割当てられたイメージバ ッファの個数。
4、 ha lIeigl+L、 I+a−widLl+ :バッファ88内の イメージの111成。
5、1Ia−1u+fsize : 25 GバイトのイΔ数であるバッファの 一1法。
バッフ7ボノクス及び捕捉イメージ処理システム42か用いるソフトウェア上/ ニールのアーキテクチャを図36に示す。バッファボックスは、BIT3インタ フェースポード489を介する捕捉サブンステム68との通信のために応答する 捕捉モジュール401を実行する。このモジュールは捕捉サブシステム68をイ メージに対してポーリングし、これらをメモリバッファに蓄積し、次にこれらを 独自のネームを有するファイルとしてディレクトリキャプヂャQ内に蓄積する。
このネームは、バッファボックス381のネームの最初の5つのキャラクタと、 10ディジット数とより成る。CRCエラー検査値が発生され、イメージデータ は、リモートサイトすなわちノート2のネームと、イメージがカメラ8により捕 捉された時と、イメージへノダ艮と、CRC値と、イメージ幅と、イメージ高さ とを含むファイルのヘッダ内に蓄積される。キャプチャQは500個のイメージ を蓄積でき、これらの各イメージのデータは約1.5Mバイトを占存する。キャ プチュアQかオーバーフローすると、イメージは捨てられ、失われたイメージの ファイルネームが、これらイメー/が捨てられた時間とともにエラーファイル内 に蓄積される。キャプチャQのA−ハーフローは、捕捉サブンステムG8が長1 ul1間に亘って高速度でイメージを捕捉するか或いは1sDN45を経て中央 サーバ47に至るリンクが長1υ1間の間サービス外にある場合に生しるおそれ がある。
古すモートサイト2から中央サーバ47への通信リンクは、バッファボックス3 81に接続されたルータ385と、このルータ3851及び帯域幅マネージャ3 87との間のX21プロトコルリンク389とによって得られ、帯域幅マネージ ャ;387はマクロリンク”3’lllを1sDN45に与える。中央サーバ4 7も各リモートサイI・2に幻しCl5COIf’ルータ385と、サミットテ クノロジー社の32000帯域幅マネージャ387と、マネージャ387及びル ータ385間のX2+リンク389と、l5DN45へのマクロリンク391と によってl5DN45に接続されている。帯域幅マネージャ387及びルータ3 85は捕捉イメージ処理システム42の通信コントローラ42を構成する。X2 1リンク389はCCITT挿■規格により規定された標章のLl−I SDN 通信リンクである。マクロリ7り391はチルストう扛によるプライマリレーI ・アクセス(PriLIary RaLc Access)リンクであり、+3 − I SDNにおけるプライマリレートアクセス:こ女jするCCITT標学 1見烙(二基つくものである。X21リンクは768KB/秒で動作し、マクロ リンクは384 KB/秒で動作する2つの仮想リンクである。帯域幅マネージ ャ381は実質的には、データ収集プロトコルを用いl5DN115にアクセス を行うマルチプレクサである。
リモートサイト2の谷々はシリコングラファイトクリムソンマノーンである中央 サーバ47では図36に示すように検索モジュール403により表わされるもの であり、この検索モノニールはそれぞれのリモートサイト2にソケノI・接続さ れ、イメージをリモートサイト2からポーリングする。関連のデータを含む。リ モートサイト2からのイメージを検索するためにはユニツクスフアイル転送プロ トコルであるFTPプロトコルか用いられる。イメージを受けると、このイメー ジはCRC値に基ついてイメージデータの完全性に関し検査され、720個のイ メー7の容量をaするサーバ47の1月・リーバルQダイレクトす405に蓄積 される。これらのイメージは、イメージが最初に要求された時と、イメージを最 終的に受けた時と一緒に1月・リーバルQ405に蓄積されている。Sディスト リビュータモノニール407はイメージファイルネームを中央サーバ47の蓄積 モジュール・109に分配するように応答する。蓄積モジュール409はリトリ ーバルQ405からのイメージを検索し、各リモートサイト2から1週間に亘っ て得たイメージを記憶する容量を有するそれぞれのイメージ記憶装置411にこ れらイメージを保仔する。イメーノ記憶装ff1411はExabyte l  OIテープ記憶システムであり、これら記憶システムの各々は10個までのテー プを保持でき、各テープは+3000個のイメー7に設定した容量を有する。蓄 積モジュール409は各イメージ3己憶装置に文jし、アメリカのパルカンラボ ラトリ−ズories)社のGene Dronek氏により開発されたテープ ドライバに基づくテープドライバと通信する。このテープドライバはロボットア ームによりイメージ記憶装置411にテープを装填したりこのイメージ記憶装置 からテープを外したりするのを制御する。このテープドライバは最初にイメージ 記憶装置1411におけるテープの個数を決定し、コールドスターI−に対し各 テープを書式化するとともに第1テープを装填する。ウオームスタートの場合、 テープドライバは単に、最後に用いたテープを選択する。テープかその3000 個のイメージの容量に連すると、このテープはその蓄積場所に戻り、次のテープ が選択される。
Sディストリビュータ407は、リトリーバルQ405中のファイルのネームの リスト(記憶リストと称する)と、イメージ記憶装fJI1411への記憶処理 中であるファイルのネームの他のリスト(進行中リストと称する)とを有する。
蓄積モジュール409がファイルネームを要求すると、Sディストリビュータモ ジュール・107は記憶リストからファイルネームを取出し、このネームを進行 中リスI・に移す。ファイルネームが得られない場合には、モジュール407は リトリーバルQからネームをアクセスし、これらネームを記憶リストに加え、次 にファイルネームを取出す。モジュール407か蓄積モジュール409から蓄積 肯定応答を受けると、ファイルネームか進行中リストから除去される。蓄積モジ ュール409は7ア【ル不一ムに対しSディス(・リビュータ407をポーリン グし、ファイルネームを受けるとリトリーバルQから対応するファイルを検索し 、それをイメージ記憶装置にコピーする。これと同しファイルが、750faの イメージを保持しうるサーバ47の1PQ413のディレクトリにもコピーされ る。1PQ413か充満されている場合には、ファイルが捨てられ、ファイルの ヘッダか他のディレクトリデータベースQにコピーされる。次に、肯定応答メツ セージがSディスi・リビュータモジュール407に送られる。すべてのファイ ルには、ファイルがいつ記憶されたかを表わす時刻表示が入れられている。
I Pディスi・リビュータモジュール417は、中央サーバ47のイーサネッ ト1、ΔN419に接続されたナンバープレー1・認識システム51にイメージ を分配する。このモノニール417は、1PQ413に保持されているファイル を表わす、イメージリストと称されるファイルネームのリスI・を有している。
ナンバープレート認、識システム51がファイルネームに文1しポーリングする と、モジュール417はイメージリストからファイルネームを取出し、このファ イルネームを他のリストであるIP進行リストに移す。システム51か対応する ファイルを受けたことを認識すると、ファイルネームが、IPQ413からのフ ァイルネームと一緒に、IP進行リストから削除される。ファイルネームがイメ ージリスト中でi■)られない場合には、モジュール417によってネームがI PQから取出され、リストに加えられる。モジュール417はソケット接続を介 してシステム51と通信する。、:J!識ノンステム51より抽出されたナンバ ープレートの詳細(ディテール)は、イメージ捕捉時間や、リモートサイト2か らのイメージが既に与えられている車両の瞬間速度のような他のイメージデータ の詳細と一緒にサーバ47のデータベースQ415に蓄積されている。データベ ースモジュール419はデータベースQ415に入れられているファイルに対し ポーリングし、次にこれらファイルをイメージデータベース412に蓄積する。
ナンバープレート認識システム51は、図37に示すように、LAN 419に 接続される/リコン・グラノフィク・ワークステーション400を用いて実現し ているが、遠隔サイト2に在るレピータ盤89に直接接続することもできる。I ’1xar II画像コンピュータ402かワークステーンヨ/400に接続さ れ、画像副プロセツサの役割を果たず。システム51はまた、ワークステーショ ン400に接続されるモニタ404゜キイボート40G、 (ioOMl]のデ ィスク記tO装置408及び1.2G[lの先ディスク記憶装置410をaむ。
史にまた、ワークステーション400は、ヴイクI・リア州政府所有のVIVl lHVcl+1clc IdentiricaLion by Video I mage DCLccLion−ビデオ画像検出による車両識別)ソフトウェア を使用し、これは車両の画像中のナンバープレートの所在を把握し、それに光学 的文字認識(OCR)を応用して該プレート上の登録番号の文字を抽出する。V mDソフトウェアのパラメタ設定は、捕捉サブシステム68の供給する画像を取 り扱えるように、画像のコントラストの大きさに従って調整されている。ピーク 速度として毎秒2を受容するために、図38に示すように実時間画像処理手順4 12が使用される。この手順はステップ414で画像ファイル名をIPディスト リビュータ・モデル417から要求することで始まる。もしステップ41Gでフ ァイル名を受領されなかったらIPディストリビュータ・モジュール417はも う一度ポーリングし、そうでなければ受け取ったファイル名はIr’Q 414 にアクセスするのに用いられ、ステップ418でディスク408上の画像ファイ ルに記憶される。
画像はディスク408からアクセスされ、ワークステーション400の4つの別 個のモジュール、すなわち図39に示すように、プレート所在把握モジュール4 20.1!!形図形<I!1ypl+>抽出モジュール422. OCRモジュ ール424及びプレート認識モジュール42Gにより処理される。図40に示す ように、プレート所在把握モジュール420はステップ430でPixar副プ ロセッサ402用の画素ウィンドウの数として1280X1024個の画素の画 像を草備することにより始まる。ステップ432でシステム51は文字サイズの 対象物の縁を検出しようと試み、検出されたときに対象物の所在かステップ43 4で定められる。ステップ436で対象物アセンブラ−が隣接対象物をグループ 化するのに使用され、それらのグループはプレート分類器438で処理されて該 対象物グループかナンバープレートであるか否かを判定する。もし対象物グルー プがプレート・テンプレー1−<plate 1cmplaLe>に従ってプレ ートと分類されるならば、箱型外周が形成されてその座標か象形図形抽出モジュ ール422に戻される。象形図形抽出モジュール422は各箱型外周を処理して 2進数化し、箱型外周内の個々の文字を抽出して該「象形図形」すなわちナンバ ープレートに記載の文字及び数字をOCRモジュール424に引き渡す。OCR モジュール424は図41に示す通りステップ428で始動して、各象形図形に 対し象形図形抽出モジュール422により供給される象形図形ビットマツプから 活学的グラフ表現を構築する。
該ゲラフッに現は、孔や弧や垂直線や水平線のようなすべての文学的特徴を検出 するようにステップ1140で解析される。ステップ440の結果から象形図形 の文学的特徴を表ず81ビツトの連鎖列かステップ442で造り出される。次に ステップ444て、ヘイズの統ス1解析<l+aycsian sL+Li5L ical a++alysis>がこれらの特徴連鎖1こ’z4 Lで実行され て、それらか既知のASCII文字の予め定められた一式の特徴に合致するよう に試みて見る。最高確率の正確さで合致したASCII値かプレート認識モノニ ール42Gに戻される。
プレート認識モノニール42Gは箱型外周内の象形図形が有効なナノlく−プレ ー1を構成しているか否かを判定する。モノニール42Gは、OCRモジュール 424の活用を無視する機能、又はプレート所在把握モジュール420か見出し たのとは異jjる箱型91周を用いるよう象形図形抽出モジュール422に強制 する機能を持つので、他の画像処理モノニールを効率的に制御する。A−ストラ リアの大多数の登録ナノハープレートは6桁の字を持ち、連邦<Federal >プレートと非連邦プレートという2つのクラスのとちらかである。連邦プレー トは2普行のアルファべ・ノドと2桁の数字と2桁のアルファベットをITシ、 これに対してノ1連ノ1zプレー1・は3桁のアルファヘットとこれに続<3t fiの数字を有する。プレー1. H,識モジュール426は、この情報及びそ の他の情報、例えば文字の間隔や非連都プレートで用(覆られる特定のアルファ ヘットと数字の列の特徴等に基ついて、有効なナノノく−ブレ−1・か見出され たか否かを判定することができる。例えばOCRモジュールCよ、大文字の13 と8とを区別できないだろうし、多くのプレートのフォント<font、s>に χ1して[0(ゼロ)とO(オウ)」や「lとI」は違いかなり、lのである。
従ってプレー1’+iU識モジユール42GはOCRモノニール424の得た結 果を無視する必要かありit)る。またプレート認識モジュール42Gは、もし 所在把握モジュール420か戻して来たn FJIの箱型外周の左か右に別の象 形図形かあるようたとモジュール126か判断したならば、箱型外周を取り替え て処理するように象形図形抽出モジュール422に命令することもてきる。プレ ート認識モジュール42G(こよりi)られたナンバープレートの詳細はサーバ ー<5erver>47のデータベースQ4151こ格納されて元ディスク41 0に保存される。光ディスク410はまた、/ステム51力曵受は取ったときに 処理できない画像ファイルら保存する。
光デイスク410上のデータベースは、データベースQ415が行うのと同じよ うに、画像内に在るナンバープレートの位置やサイズや文字に関するデータ、及 びその他の詳細、例えば捕捉した1コ時等を、各処理された画像に対して記憶す る。
それはまた、ワークステーション400により記憶されたデータにアクセスする 機能をもつデータポインタで構成される。ワークステーション400はグラフの ユーザー・インターフェース・ソフトウェアを含み、これは操作者が手順412 及び手順414の結果を再点検することを可能とさせるもので、選定されたナン バープレー1・の領域で光学的文字認識を史に実行する。「ノークステーンジン 400の操作者か選定したナンバープレート領域で実行されるそれ以上のすべて のOCR処理は、通洛は手順412及び手順414の実行の解析に使用され、光 ディスク410に保存されているデータの集積を変更するものではない。
データベース421に記憶されている画像データは、種々の遠隔サイトすなわち 異なる節点2で同しナンバープレートの検出が生起するのを見出すように、画像 データのナンバープレー1・の詳細の相互間の合致に注目するマツチング・ソフ トウェアにより処理される。一旦合致が見出されたら、遠隔サイト2の間の距離 は分かっているのだから、この間をII!i過中に速度又は時間の違反が起こっ たか否かを判定するのに、捕捉時刻のフィールドを用いることができる。マツチ ング・ソフトウェアはLAN 419に接続するSun Microsysje +msのワークステーション450上で走らせるか、又はその代わりに、中央サ ーバー47によりl5DN 45上を道路交適当局に送られる画像データを用い て、道路交適当局のシステム上でマツチング・ソフトウェアを走らせる。道路交 適当局は、必要に応じて保存されたデータを得るためにl5DN 45を経由し て中央サーバー47と交信することもできる。
すへての映像のうち多数のものが興味のないものであるため、すべての映像をセ ントラル サーバ47に送信するのを避けるため、ノード2において映像を形成 し、ノートのアクイジション サブ・システム68のBIT3 レピータ カー ト89に直接接続されているそれぞれのナンバー(ライセンス)プレート識別シ ステム51により、遠隔のノード2においてナンバー プレー1・の詳細を抽出 する。このときセントラル サーバ47は抽出されたナンバー プレートの詳細 のみを受信し、映像のその他のデータ、例えば撮像時間、遠隔サイト、瞬間スビ −ド、並びに映像自体は受信しない。遠隔サイト2に形成された映像は所望に応 しセントラル サーバ47によって検索し再生(レトリーブ)可能である。
遠隔ノード2の制御は、セントラル サーバ47のLAN 419に接続された サン ワーク(太陽電池動作)ステーション450により動作する遠隔地点ユー ザ インクフェイス53により遂行される。このユーザ インタフェイス53は 、サン マイクロンステムズ リモ−1・ プロセノユア コール(RP C) 通信プロトコルを用い、♂遠隔サイト2のスーパー タスクに通信するユーザ  ツールを含む。このスーパー タスクは、ワークステーション450の位置に関 係なく、RP Cプロトコルを使用するユーザー ツールによって呼出すことが できる1組の処理機能(プロセデュラル ファンクンヨン)を具えている。RP Cプロトコルはデータタイプ変換及び整理(アライメント)を取扱う。スーパー タスクに設けられているプロセノユア(処理手続)は種々のアクンヨンを遂行し 、これらの全体によりノード2のソフトウェアの完全な制御を行う。例えばパラ メータ ファイルは、ノート′2のソフトウェアにより用いられるすべての変数 を、それらの初期値とともに維持記憶する。これらの値の形態は変数の種類(タ イプ)を表示し、これらは例えばlO進整数、16進整数、フローディング ポ イント値、文字列(キャラクタ ストリング)、またはプール値等である。これ らの変数はパラメータ ファイルを調整することによって変化させることかでき 、このパラメータ ファイル内にリストされている変数の位置は、すべてのグロ ーバル //ポル(大域記号)を有するVx Works システム テーブル 経由でめられる。ユーザ ツールはシステム パラメータの変換に加えて、スー パー タスクにアクセス可能てあり、谷ノード2上の状態及び形状の情報を得る ことかできる。
スーパー タスクは、トランスミッション コントロール プロ)・コル(TC l))及びユーザ データグラム プロトコル(UDP)の両者を介してRPC トランスアクションを受信する。これらの両者は、コンピュータ システム間の データグラムの伝送に、インタネット プロトコル(IP)を使用する。UDI ’は接続のない(コネクションレス)プロトコルで、主としてデータグラムのマ ルチブレキ//グに関与し、一方TCPは接続より生ずる(コネクノヨン オリ エンテッド)プロトコルてあり、データの完全性が維持されるよう作動する。ユ ーザツールは通常TCI’/I+’を使用し、これはRI’Cプロトコルと共に サン マイク[7システムズSun’s動作システム及びVxWorksリアル  タイム動作システムが設けられている。異なるセントラル ステーションが遠 隔ノードに)°クセスしシステム パラメータにコンフリクトを及ぼずような変 化を生ずることを防止するため、ユーザ ツールはすべての変化を生じさせる前 に常時のノードのソフトウェアの状態の情報を提供する。
遠隔サイト2のマスク クロック354は、セントラル サーバ47のクロック と同期しており、LAN491に接続されているシステム51及び450は、不 用・ワーク タイム プロトフル(NTI))を使用している。このネットワー ク タイム プロトコル(NTI’)は、揮皇のUNIXユーティリティで通常 LAN上の各ステーションのクロックの同期に使用される。NTPは遠隔サイト 2をポーリング腰この遠隔サイト2とセントラル サーバ47間の通信に関し、 遠隔サイト2より受信した情報をh(とじて、NTI’は遠隔サイト2にイフセ ット値を供給し、遠隔サイト2を同期させ、さらに例えばリンク コンジエスヂ タン(輻軽)のような過渡的な回路網(ネットワーク)のプロブレムを含む、ネ ットワーク伝送遅延のアカウントを供給する。
本発明による車両モニタ システムは、移動走行中の車両を他の目標より識別し て検出し、特定の選択した車両の映像を識別可能に収録でき、これには遠隔サイ ト2に収容されている電子カメラと処理回路並びにソフトウェアだけを要するの みであるのでとくに有利である。本発明のシステムは、自動的にナンバー プレ ートの詳細を抽出でき、道路に設ける装置あるいはマーキング等を必要とせず、 さらにノード2において、電磁信号の放射またはフィルムの交換を必要としない 。
本方式は、複数レーン道路上の複数の車両を同時に追跡し、これら車両をタイプ 別に識別することが可能である。全部のトラフィック レーンにわたって車両の 高解像度映像を得ることができ、本発明の解像度及び明瞭度はナンバー プレー 1−の識別に充分である。本方式は、赤外線撮像技術を用いて、100 m以上 の可視性あるすべての条件下で、連続的に動作させることができる。高解像カメ ラには、ブルーム(高輝度のはけ)防止技術を内蔵させ、車両のヘッド ライト による画素の飽和を防止し、さらに赤外線フラノツユを用いると、所在をほとん ど検知されず、フラッシュによる口くらみ現象をなくすことができる。
本方式は遠隔の中央ステーションより起動させ、かつ制御することができる。
本方式はいくつかの目的に使用でき、例えば、テールゲーティング違反のモニタ 、通行才1金の徴収のモニタ及び瞬間的レーアモニタ等に使用できる。さらに赤 色光の遮断モニタにも用いられる。
本7ステムは、その他の移動している目標の映像のモニタ及び収録にも用いるこ とかでき、例えば輸送中に+Jiにおけるコンテナの出nUの移動の監視及び撮 影、集荷ラインの物品の移動の監視及び撮影に使用することができる。
I6 4 特表千7−505966 (18) ;l クラスダ、t11.クス斤揉 時間(妙) FIG 26 エダ覧1ブl規V(リシノ(のに占51(uJ)人 (44)轟− <uJ>人(vlwx) q−、ニアx重−T+拒J@−(秒心じ二き) 国際調査報告 1me+v+aL+oeal烏yA−=−−8・国際調査報告  1−l涌pplieal馴N。
FamPCTnS^/2toIcon龜nuaboqeleeeoed+hec 1MIuly19921oν内11国際調査報告 1−m−1臂−N。
■ゴIAU93/LXll15 国際調査報告 1−−1−一。
1)嘴:=°!”IAU9310@I蔦5FomPCT、ISA/210(pa IeI′III鳳mJyynexIIIu1119921eeplneフロント ページの続き (81)指定国 EP(AT、BE、CH,DE。
DK、ES、FR,GB、GR,IE、IT、LU、MC,NL、PT、SE) 、0A(BF、BJ、CF、CG、CI、CM、GA、GN、ML、MR,NE 、SN。
TD、TG)、AT、AU、BB、BG、BR,CA。
CH,CZ、DE、DK、ES、FI、GB、HU、JP、KP、KR,KZ、 LK、LU、MG、MN、MW、NL、No、NZ、PL、PT、RO,RU、 SD。
SE、SK、UA、US、VN (72)発明者 オウティ グレン ウィリアムオーストラリア国 ヴイクトリ ア 3094マントマレンシ オリンピック アベニュオーストラリア国 ヴイ クトリア 3070ノースコート テムズ ストリート 26(72)発明者  ダン ポール アレクサンダーオーストラリア国 ヴイクトリア 3104ノー ス パルウィン エフワラ ストリート 17 (72)発明者 マツキンタイア イアン バリーオーストラリア国 ヴイクト リア 30840ザンナ パチュリ コート 4 (72)発明者 ミルス デニス チャールズオーストラリア国 ヴイクトリア  3131フオレスト ヒル グリープ ストリート(72)発明者 サイモン ス ベンジャミン フランシスオーストラリア国 ニューサウスウェールズ 2 041 パルマン カレッジ ストリート シー/− (72)発明者 ジャンセン マーリー ジョンオーストラリア国 ヴイクトリ ア 3078フエアフイールド ラングリッジ ストリート 14 (72)発明者 ナイト ロドニー ラヴイスオーストラリア国 ニューサウス ウエールズ 2500 グウィニーヴイル マーフィーズ アベニュー 14 (72)発明者 ピアース デヴイッド ステユアートオーストラリア国 ニュ ーサウスウェールズ 2500 ウロンボン スミス ストリート 躬 ユニッ ト 2 (72)発明者 バラフマル ポナムパラムオーストラリア国 ニューサウスウ ェールズ 2518 コリマル オウエン パークロード 27 ユニット 2

Claims (1)

  1. 【特許請求の範囲】 1.物体モニタ装置において、物体の移動をモニタしてこの物体のイメージを捕 捉すべき捕捉時間を決定するカメラ手段を備えたことを特徴とする物体モニタ装 置。 2.前記捕捉時間を、前記カメラ手段により前記物体がイメージ撮影位置にある ときを予報することによって決定する請求項1記載の物体モニタ装置。 3.前記カメラ手段は、静止物体及び他の移動物体から前記物体を検出しかつこ の物体を区別する構成とした請求項2記載の物体モニタ装置。 4.前記カメラ手段には、物体が移動する対応区域をモニタするビデオカメラ手 段と、前記ビデオカメラ手段によって発生した前記区域のイメージからこの区域 の背景イメージを差し引いて前記区域において移動する物体を表す差分イメージ を生成するイメージ処理手段とを設けた請求項3記載の物体モニタ装置。 5.前記イメージ処理手段には、前記差分イメージの同一移動物体に対応する部 分からクラスタを形成する類別手段を設けた請求項4記載の物体モニタ装置。 6.前記イメージ処理手段は、各クラスタを処理してこのクラスタが前記物体に 対応するか否かを決定し、前記捕捉時間を決定する処理を行う構成とした請求項 5記載の物体モニタ装置。 7.前記イメージ処理手段は、前記差分イメージから所定レベル範囲内のピクセ ルを無視するフィルタ処理を行う構成とした請求項6記載の物体モニタ装置。 8.前記イメージ処理手段には、前記差分イメージを処理して前記区域において 移動する物の前記カメラ手段に対して少なくとも所定光量レベルを発生する部分 に対応する範囲を含む断片化イメージを生成する断片化手段を設けた請求項7記 載の物体モニタ装置。 9.前記類別手段により、前記範囲の形状の分折をし、この分析に基づいて測定 値を生成し、この分折及び測定値に基づいて有効範囲及び無祝すべき無効範囲を 決定する請求項8記載の物体モニタ装置。 10.前記類別手段には、それぞれ物体に対応すると見なされる有効範囲により 構成したクラスタを生成し、前記有効範囲を拡張して範囲が互いにオーバーラッ プする場合には互いに結合して一つのクラスタを形成するか否かを決定するする クラスタ化手段を設けた請求項9記載の物体モニタ装置。 11.前記類別手段には、各クラスタを認識する各イメージのための各クラスタ にラベルを割り当て、順次のイメージに対してクラスタを照合及び分別しラベル を引き継ぐか又は新しいラベルを割り当てるかを決定するラベル付け手段を設け た請求項10記載の物体モニタ装置。 12.前記類別手段は、前記クラスタの特性を前記装置の類別データと比較する ことによって所定物体に対応するクラスタを類別し、前記物体に対応するクラス タを識別できる構成とした請求項11記載の物体モニタ装置。 13.前記カメラ手段によってモニタした物体の特性ヒストグラムを維持し、こ のヒストグラムに基づいて前記類別データを調整する手段を設けた請求項12記 載の物体モニタ装置。 14.前記区域の光量レベルを決定する光強度決定手段を設け、所定レベル範囲 、前記範囲の分折、前記クラスタ化手段によって前記クラスタに加えられた拡張 、及び前記類別データを、前記光量レベルに基づいて調整する請求項13記載の 物体モニタ装置。 15.前記イメージ処理手段には、順次のイメージに対して前記物体に対応する クラスタを追尾するトラッキング手段を設け、このトラッキング手段には、前記 クラスタの座標を座標変換して前記カメラ手段の視角ビューを補償する座様変換 手段と、各順次のイメージの前記クラスタの速度及び位置を予報する予報手段を 設けた請求項14記載の物体モニタ装置。 16.前記トラッキング手段は、前記イメージ撮影位置、前記クラスタの予報し た速度及び位置に基づいて前記捕捉時間を決定するものとした請求項14記載の 物体モニタ装置。 17.前記カメラ手段には、前記捕捉時間における前記物体のイメージを捕捉す るイメージ撮影カメラ手段を設けた請求項16記載の物体モニタ装置。 18.前記イメージ撮影カメラ手段は、前記物体の高解像度イメージを捕捉する ものとした請求項17記載の物体モニタ装置。 19.前記ビデオカメラ手段は、限定された視野を有する前記イメージ撮影カメ ラ手段よりも広範囲の視野ビューを有するものとした請求項18記載の物体モニ タ装置。 20.前記イメージ撮影カメラ手段に同期する赤外線フラッシュを設け、前記フ ラッシュのエネルギレベルを前記光量レベルに基づいて発光するものとした請求 項19記載の物体モニタ装置。 21.前記イメージ撮影カメラ手段には、イメージセンサ手段と、前記光量レベ ルに応答して前記イメージセンサ手段の飽和を禁止する露出制御手段とを設けた 請求項20記載の物体モニタ装置。 22.前記フラッシュには、可視光の発生を禁止する可視光発生禁止手段を設け た請求項21記載の物体モニタ装置。 23.前記クラスタ化手段によって適用される拡張を、前記光量レベルが夜間条 件に対応するときに増大する請求項22記載の物体モニタ装置。 21.前記拡張は、前記カメラ手段から遠い物体に対応する範囲に対しては少な くした請求項23記載の物体モニタ装置。 25.前記ラベル付け手段は、順次のイメージのクラスタの境界又は中心を比較 することに基づいて前記照合及び分別を行うものとした請求項24記載の物体モ ニタ装置。 26.前記差分イメージにはフィルタをかけ、このフィルタ作用によって前記背 景イメージを更新する請求項25記載の物体モニタ装置。 27.前記捕捉時間に前記イメージ撮影カメラ手段をトリがするトリが手段を設 けこのトリガ手段には、前記トラッキング手段から前記捕捉時間に対応する多数 の走査ラインを受け取って記憶する記憶手段と、前記イメージの走査ラインをカ ウントする計数手段と、前記計数手段のカウントが前記記憶した走査ラインの数 に達したとき前記イメージ撮影カメラ手段をトリガするトリガ信号を発生するト リガ信号発生手段とを設けた請求項26記載の物体モニタ装置。 28.前記光強度手段は、前記ビデオカメラ手段によって生じた前記イメージの ピクセルグレーレベルのヒストグラムを生成し、このヒストグラムの中央値に基 づいて日中か、夜間か又はトワイライトの光条件かを決定するものとした請求項 27記載の物体モニタ装置。 29.前記所定レべル範囲を、前記ヒストグラムの最小値、中央値、及びピーク 値に基づいて決定する請求項28記載の物体モニタ装置。 30.前記測定値は、前記範囲の円周及び包含部分の値とした請求項29記載の 物体モニタ装置。 31.前記捕捉したイメージを処理して前記物体を識別する情報を仰る認識手段 を設げた請求項1乃至30のうちのいずれか一項に記載の物体モニタ装置。 32.前記各区域をモニタする複数個のカメラ手段を設け、前記物体の情報を転 送するよう互いに通信し合うようにした請求項31記載の物体モニタ装置。 33.前記各区域をモニタする複数個のカメラ手段を設け、前記物体の情報を中 央ステーションに通信するようにした請求項31又は32記載の物体モニタ装置 。 34.前記物体に関する情報を、少なくとも2台のカメラ手段によって捕捉し、 前記情報を使用して少なくとも2個の区域間を前記物体が走行するにかかった時 間を決定する請求項33記載の物体モニタ装置。 35.前記中央ステーションには、前記中央ステーションから前記カメラ手段を 制御する遠隔制御手段を設けた請求項34記載の物体モニタ装置。 30.前記中央ステーション及び前記複数個のカメラ手段には、それぞれ遠隔通 信コントローラを設け、デジタル遠隔通信ネットワークを使用して通信するよう にした請求項35記載の物体モニタ装置。 3了.前記情報を保管し、この保管情報をその後にアクセスできるようにしたア ーカイブ手段を設けた請求項36記載の物体モニタ装置。 38.前記情報は、前記物体の捕捉イメージ及び捕捉時間を含み、前記中央ステ ーションには、前記認識手段を設けた請求項37記載の物体モニタ装置。 39.前記情報は、前記物体の捕捉したイメージの前記識別情報及び捕捉時間を 含むものとし、前記複数個の識手段を前記複数個のカメラ手段の位置で前記複数 個のカメラ手段にそれぞれ接続した請求項37記載の物体モニタ装置。 40.前記認識手段は、前記捕捉したイメージを処理して前記物体を識別する特 性ピクセルを表すピクセルを検索するようにした請求項38又は39記載の物体 モニタ装置。 41.前記物体を車両とした請求項1乃至40のうちのいずれか一項に記載の物 体モニタ装置。 42.前記認識手段には、前記イメージにおいてライセンスプレートを見いだす 検索手段と、前記ライセンスプレートの識別情報を構成する文字を決定する文字 決定手段とを設けた請求項41記載の物体モニタ装置。 43.前記所定の無効レベル範囲が前記車両の影によって発生するピクセルレベ ルをカバーするものとした請求項42記載の物体モニタ装置。 44.前記無効範囲は、前記車両により発生したヘッドライト反射又は前記区域 内の道路車線マータングに対応するものとした請求項43記載の物体モニタ装置 。 45.前記車両を、バス又はトラック等の大型車両とした請求項41乃至44の うちのいずれか一項に記載の物体モニタ装置。 16.物体モニタ装置において、物体の移動をモニタするカメラ手段と、前記カ メラ手段に応答して他の移動物体及び静止物体から所定の移動物体を検出するイ メージ処理手段とを備えたことを特徴とする物体モニタ装置。 47.前記イメージ処理手段は、前記所定の移動物体を追尾し、いっ前記所定移 動物体のイメージを捕捉するかの捕捉時間を決定するものとした請求項46記載 の物体モニタ装置。 48.前記カメラ手段に応答して光量レベルを決足する光強度手段を設け、前記 カメラ手段には、前記光量レベルに基づいてカメラ露出を調整する露出制御手段 を設け、前記イメージ処理手段により前記光量レベルに基づいて前記所定移動物 体を検出するパラメータを調整する請求項47記載の物体モニタ装置。 49.前記カメラ手段には、前記移動物体をモニタする検出カメラと、前記イメ ージ処理手段によってトリがされ、前記イメージを撮る捕捉カメラとを設けた請 求項48記載の物体モニタ装置。 50.前記イメージを処理して前記物体を識別の情報を抽出するイメージ処理手 段を設けた請求項49記載の物体モニタ装置。 51.前記イメージをデジタル遠隔通信ネットワークに伝送する伝送手段を設け た請求項50記載の物体モニタ装置。 52.前記移動物体を車両とした請求項51記載の物体モニタ装置。 53.前記所定移動物体を大型車両とした請求項52記載の物体モニタ装置。 54.移動物体のイメージを追尾及び捕捉するカメラ手段を備え、前記移動物体 のイメージから前記物体を識別する情報を自動的に抽出することを特徴とする物 体モニタ装置。 55.前記イメージをデジタル遠隔通信ネットワークに伝送する伝送手段を設け た請求項54記載の物体モニタ装置。 56.前記イメージを処理して前記情報を抽出するデータ処理手段を設げた請求 項55記載の物体モニタ装置。 57.各区域をモニタする複数個のカメラ手段と、各区域で得た前記情報を比較 する比較手段とを設けた請求項50記載の物体モニタ装置。 58.前記物体を車両とした請求項57記載の物体モニタ装置。 59.多重車線道路を移動する車両を連続的に検出及び追尾し、前記多重車線道 路の捕捉区域における所定車両のイメージを捕捉し、この捕捉したイメージから 前記車両に関する識別情報を抽出することができるようにしたことを特徴とする 車両モニタ装置。 60.複数個の捕捉区域を設け、各捕捉区域を前記多重車線道路の各車線に対応 させた請求項59記載の車両モニタ装置。 61.各区域を走行する所定移動車両のイメージを追尾及び捕捉する複数個のカ メラ手段と、前記区域から取得したイメージデータを処理して前記車両を識別し また前記区域間の前記車両の走行に関する情報を取得することを特徴とする車両 モニタ装置。 62.移動車両をモニタし、前記車両が所定タイプであるかを決定し、また前記 所定タイプの車両のイメージを撮影するカメラ手段を備えたことを特徴とする車 両モニタ装置。 63.前記イメージを処理して前記車両を識別する情報を取得する認識手段を設 けた請求項62記載の車両モニタ装置。 64.前記所定タイプを所定サイズとした請求項62記載の車両モニタ装置。 65.車両をモニタして違反車両を検出し、かつ前記車両のイメージを捕捉する 所定時間を決定し、また、前記違反車両の検出に応答して前記所定時間における 前記車両のイメージを撮影するカメラ手段を備えたことを特徴とする車両モニタ 装置。 66.前記イメージを処理して前記車両を識別する情報を収得する請求項65記 載の車両モニタ装置。 67.前記所定タイプを所定サイズとした請求項65記載の車両モニタ装置。 68.直路を走行する車両をモニタし、前記道路上のトラック、バス等の大型車 両と乗用車等の小型車両とを区別し、大型車両のみのイメージを捕捉し、この大 型車両の情報を取得できるようにしたことを特徴とする車両モニタ装置。 69.前記イメージから大型車両のライセンスプレートの文字等の前記車両情報 を自動的に収得する認識手段を設けた請求項68記載の車両モニタ装置。 70.前記道路上の異なる区域から得た前記車両情報を比較し、車両の平均速度 を決定する比較手段を設けた請求項69記載の車両モニタ装置。
JP5516114A 1992-03-20 1993-03-22 物体モニタシステム Pending JPH07505966A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
AUPL146592 1992-03-20
AU1465 1992-03-20
AU1464 1992-03-20
AUPL146492 1992-03-20
PCT/AU1993/000115 WO1993019441A1 (en) 1992-03-20 1993-03-22 An object monitoring system

Publications (1)

Publication Number Publication Date
JPH07505966A true JPH07505966A (ja) 1995-06-29

Family

ID=25644212

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5516114A Pending JPH07505966A (ja) 1992-03-20 1993-03-22 物体モニタシステム

Country Status (8)

Country Link
US (1) US5809161A (ja)
EP (1) EP0631683B1 (ja)
JP (1) JPH07505966A (ja)
AT (1) ATE203844T1 (ja)
CA (1) CA2132515C (ja)
DE (1) DE69330513D1 (ja)
NZ (1) NZ249799A (ja)
WO (1) WO1993019441A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004212129A (ja) * 2002-12-27 2004-07-29 Ishikawajima Harima Heavy Ind Co Ltd 環境状況把握装置

Families Citing this family (386)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6430303B1 (en) 1993-03-31 2002-08-06 Fujitsu Limited Image processing apparatus
JP3288474B2 (ja) * 1993-03-31 2002-06-04 富士通株式会社 画像処理装置
US6542077B2 (en) 1993-06-08 2003-04-01 Raymond Anthony Joao Monitoring apparatus for a vehicle and/or a premises
US5917405A (en) 1993-06-08 1999-06-29 Joao; Raymond Anthony Control apparatus and methods for vehicles
US5434927A (en) * 1993-12-08 1995-07-18 Minnesota Mining And Manufacturing Company Method and apparatus for machine vision classification and tracking
US6028626A (en) 1995-01-03 2000-02-22 Arc Incorporated Abnormality detection and surveillance system
US5666157A (en) * 1995-01-03 1997-09-09 Arc Incorporated Abnormality detection and surveillance system
EP0872120A1 (en) 1995-03-07 1998-10-21 Interval Research Corporation System and method for selective recording of information
DE19516083A1 (de) * 1995-05-03 1996-11-07 Albrecht Buchner System zur Überwachung des Straßenverkehrs
WO1997010564A1 (en) * 1995-09-15 1997-03-20 Interval Research Corporation A method of compressing a plurality of video images
US5938717A (en) * 1996-03-04 1999-08-17 Laser Technology, Inc. Speed detection and image capture system for moving vehicles
US10152876B2 (en) 1996-03-27 2018-12-11 Gtj Ventures, Llc Control, monitoring, and/or security apparatus and method
US6587046B2 (en) 1996-03-27 2003-07-01 Raymond Anthony Joao Monitoring apparatus and method
US10011247B2 (en) 1996-03-27 2018-07-03 Gtj Ventures, Llc Control, monitoring and/or security apparatus and method
US7253731B2 (en) 2001-01-23 2007-08-07 Raymond Anthony Joao Apparatus and method for providing shipment information
AUPN903296A0 (en) * 1996-03-29 1996-04-26 Commonwealth Scientific And Industrial Research Organisation An aircraft detection system
US5974158A (en) * 1996-03-29 1999-10-26 The Commonwealth Of Australia Commonwealth Scientific And Industrial Research Organization Aircraft detection system
AU760788B2 (en) * 1996-03-29 2003-05-22 Commonwealth Scientific And Industrial Research Organisation An image acquisition system
AU720315B2 (en) * 1996-03-29 2000-05-25 Commonwealth Scientific And Industrial Research Organisation An aircraft detection system
US5889505A (en) * 1996-04-04 1999-03-30 Yale University Vision-based six-degree-of-freedom computer input device
US7613801B2 (en) * 1996-07-12 2009-11-03 Microsoft Corporation System and method for monitoring server performance using a server
US6525761B2 (en) * 1996-07-23 2003-02-25 Canon Kabushiki Kaisha Apparatus and method for controlling a camera connected to a network
IT1286684B1 (it) * 1996-07-26 1998-07-15 Paolo Sodi Dispositivo e metodo per il rilevamento di infrazioni stradali con sistemi di puntamento dinamico
JP2998791B2 (ja) * 1996-10-31 2000-01-11 日本電気株式会社 三次元構造推定装置
US5893062A (en) 1996-12-05 1999-04-06 Interval Research Corporation Variable rate video playback with synchronized audio
US6263507B1 (en) 1996-12-05 2001-07-17 Interval Research Corporation Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data
CZ266699A3 (cs) * 1997-01-13 1999-12-15 John Overton Automatizovaný systém pro archivaci obrazů
DE19701484A1 (de) * 1997-01-17 1998-07-23 Bosch Gmbh Robert Verfahren zur Regelung der Belichtung von Videokameras
US5963253A (en) * 1997-01-17 1999-10-05 Raytheon Company Light sensor and thresholding method for minimizing transmission of redundant data
GB9702849D0 (en) * 1997-02-12 1997-04-02 Trafficmaster Plc Traffic monitoring
US6611610B1 (en) * 1997-04-02 2003-08-26 Gentex Corporation Vehicle lamp control
US6587573B1 (en) * 2000-03-20 2003-07-01 Gentex Corporation System for controlling exterior vehicle lights
NL1005785C2 (nl) * 1997-04-10 1998-10-14 Traffic Test B V Een systeem voor het uitvoeren van een inhaalcontrole bij voertuigen.
US6760061B1 (en) * 1997-04-14 2004-07-06 Nestor Traffic Systems, Inc. Traffic sensor
US6256046B1 (en) * 1997-04-18 2001-07-03 Compaq Computer Corporation Method and apparatus for visual sensing of humans for active public interfaces
US6295367B1 (en) * 1997-06-19 2001-09-25 Emtera Corporation System and method for tracking movement of objects in a scene using correspondence graphs
US6263088B1 (en) 1997-06-19 2001-07-17 Ncr Corporation System and method for tracking movement of objects in a scene
GB9719694D0 (en) * 1997-09-16 1997-11-19 Canon Kk Image processing apparatus
GB2330679B (en) * 1997-10-21 2002-04-24 911 Emergency Products Inc Warning signal light
AU1119999A (en) * 1997-10-24 1999-05-17 Magic Circle Media, Inc. Objet specification in a bit mapped image
NZ332266A (en) 1997-10-28 2000-12-22 John B Moetteli Speed camera system having license plate readers connected to central computer which calculates vehicle's speed
US6121898A (en) * 1997-10-28 2000-09-19 Moetteli; John B. Traffic law enforcement system
DE69915901T2 (de) 1998-01-14 2004-09-02 Canon K.K. Bildverarbeitungsgerät
US6061088A (en) * 1998-01-20 2000-05-09 Ncr Corporation System and method for multi-resolution background adaptation
US6154133A (en) * 1998-01-22 2000-11-28 Ross & Baruzzini, Inc. Exit guard system
WO1999040554A2 (en) * 1998-02-06 1999-08-12 Laser Technology, Inc. Portable motor vehicle speed awareness and surveillance system
US6546119B2 (en) * 1998-02-24 2003-04-08 Redflex Traffic Systems Automated traffic violation monitoring and reporting system
US9075136B1 (en) 1998-03-04 2015-07-07 Gtj Ventures, Llc Vehicle operator and/or occupant information apparatus and method
DE19810302A1 (de) * 1998-03-10 1999-09-16 Wienand Hans Theo Geschwindigkeitsmeßgerät
US6697103B1 (en) 1998-03-19 2004-02-24 Dennis Sunga Fernandez Integrated network for monitoring remote objects
US6400831B2 (en) * 1998-04-02 2002-06-04 Microsoft Corporation Semantic video object segmentation and tracking
US8543372B1 (en) 1998-05-18 2013-09-24 Dennis S. Fernandez System design rights management
JP3511892B2 (ja) * 1998-05-25 2004-03-29 日産自動車株式会社 車両用周囲モニタ装置
US6675189B2 (en) 1998-05-28 2004-01-06 Hewlett-Packard Development Company, L.P. System for learning and applying integrated task and data parallel strategies in dynamic applications
US7233978B2 (en) * 1998-07-08 2007-06-19 Econnectix, Llc Method and apparatus for managing location information in a network separate from the data to which the location information pertains
US7103640B1 (en) 1999-09-14 2006-09-05 Econnectix, Llc Network distributed tracking wire transfer protocol
EP0978811A3 (de) * 1998-08-07 2000-08-16 Siemens Aktiengesellschaft Verfahren sowie Einrichtung zur Reisezeitermittlung von Kraftfahrzeugen
US6711278B1 (en) * 1998-09-10 2004-03-23 Microsoft Corporation Tracking semantic objects in vector image sequences
US6606411B1 (en) * 1998-09-30 2003-08-12 Eastman Kodak Company Method for automatically classifying images into events
US6754663B1 (en) 1998-11-23 2004-06-22 Nestor, Inc. Video-file based citation generation system for traffic light violations
WO2000031707A1 (en) * 1998-11-23 2000-06-02 Nestor, Inc. Non-violation event filtering for a traffic light violation detection system
AUPP839199A0 (en) * 1999-02-01 1999-02-25 Traffic Pro Pty Ltd Object recognition & tracking system
US6396535B1 (en) 1999-02-16 2002-05-28 Mitsubishi Electric Research Laboratories, Inc. Situation awareness system
EP1056064B1 (en) * 1999-05-28 2007-12-12 Nippon Telegraph and Telephone Corporation Apparatus and method for speed measurement of vehicles with an image processing system
DE19926559A1 (de) * 1999-06-11 2000-12-21 Daimler Chrysler Ag Verfahren und Vorrichtung zur Detektion von Objekten im Umfeld eines Straßenfahrzeugs bis in große Entfernung
JP2001036801A (ja) * 1999-07-23 2001-02-09 Sharp Corp 撮像装置
GB9918248D0 (en) * 1999-08-04 1999-10-06 Matra Bae Dynamics Uk Ltd Improvements in and relating to surveillance systems
US7468677B2 (en) * 1999-08-04 2008-12-23 911Ep, Inc. End cap warning signal assembly
US6263265B1 (en) 1999-10-01 2001-07-17 General Electric Company Web information vault
US7783507B2 (en) * 1999-08-23 2010-08-24 General Electric Company System and method for managing a fleet of remote assets
AUPQ281299A0 (en) * 1999-09-14 1999-10-07 Locktronic Systems Pty. Ltd. Improvements in image recording apparatus
US6553131B1 (en) * 1999-09-15 2003-04-22 Siemens Corporate Research, Inc. License plate recognition with an intelligent camera
US6473517B1 (en) * 1999-09-15 2002-10-29 Siemens Corporate Research, Inc. Character segmentation method for vehicle license plate recognition
JP3352655B2 (ja) * 1999-09-22 2002-12-03 富士重工業株式会社 車線認識装置
US7155735B1 (en) 1999-10-08 2006-12-26 Vulcan Patents Llc System and method for the broadcast dissemination of time-ordered data
US6625589B1 (en) 1999-10-28 2003-09-23 General Electric Company Method for adaptive threshold computation for time and frequency based anomalous feature identification in fault log data
US6959235B1 (en) 1999-10-28 2005-10-25 General Electric Company Diagnosis and repair system and method
US6795935B1 (en) 1999-10-28 2004-09-21 General Electric Company Diagnosis of faults in a complex system
US6651034B1 (en) * 1999-10-28 2003-11-18 General Electric Company Apparatus and method for performance and fault data analysis
US6615367B1 (en) 1999-10-28 2003-09-02 General Electric Company Method and apparatus for diagnosing difficult to diagnose faults in a complex system
US6338152B1 (en) 1999-10-28 2002-01-08 General Electric Company Method and system for remotely managing communication of data used for predicting malfunctions in a plurality of machines
US6704621B1 (en) * 1999-11-26 2004-03-09 Gideon P. Stein System and method for estimating ego-motion of a moving vehicle using successive images recorded along the vehicle's path of motion
DE19960887A1 (de) * 1999-12-17 2001-06-21 Robot Foto Electr Kg Ortsinformation bei Dateikompression
US6522889B1 (en) * 1999-12-23 2003-02-18 Nokia Corporation Method and apparatus for providing precise location information through a communications network
US6757682B1 (en) 2000-01-28 2004-06-29 Interval Research Corporation Alerting users to items of current interest
US6940998B2 (en) * 2000-02-04 2005-09-06 Cernium, Inc. System for automated screening of security cameras
IL177381A0 (en) * 2000-03-08 2006-12-10 Given Imaging Ltd A device for in vivo imaging
US20010043721A1 (en) * 2000-03-21 2001-11-22 Sarnoff Corporation Method and apparatus for performing motion analysis on an image sequence
US6681195B1 (en) 2000-03-22 2004-01-20 Laser Technology, Inc. Compact speed measurement system with onsite digital image capture, processing, and portable display
JP3987264B2 (ja) * 2000-03-24 2007-10-03 富士通株式会社 ナンバープレート読取装置及び方法
US7151996B2 (en) * 2000-04-14 2006-12-19 Mobileye Technologies Limited System and method for generating a model of the path of a roadway from an image recorded by a camera
EP1150252B1 (en) * 2000-04-28 2018-08-15 Panasonic Intellectual Property Management Co., Ltd. Synthesis of image from a plurality of camera views
US7010788B1 (en) 2000-05-19 2006-03-07 Hewlett-Packard Development Company, L.P. System for computing the optimal static schedule using the stored task execution costs with recent schedule execution costs
US20080005275A1 (en) * 2000-06-02 2008-01-03 Econnectix, Llc Method and apparatus for managing location information in a network separate from the data to which the location information pertains
DE10030894A1 (de) * 2000-06-23 2002-01-03 Bosch Gmbh Robert Verkehrsinformationsverfahren und Verkehrsinformationssystem
US7319479B1 (en) 2000-09-22 2008-01-15 Brickstream Corporation System and method for multi-camera linking and analysis
US6965324B1 (en) * 2000-10-21 2005-11-15 Robert W. Suggs, Sr. Automotive picture and data acquisition center and method
US8564661B2 (en) 2000-10-24 2013-10-22 Objectvideo, Inc. Video analytic rule detection system and method
US7439847B2 (en) 2002-08-23 2008-10-21 John C. Pederson Intelligent observation and identification database system
US8188878B2 (en) 2000-11-15 2012-05-29 Federal Law Enforcement Development Services, Inc. LED light communication system
US7113867B1 (en) 2000-11-26 2006-09-26 Mobileye Technologies Limited System and method for detecting obstacles to vehicle motion and determining time to contact therewith using sequences of images
JP3390426B2 (ja) * 2000-11-29 2003-03-24 技研トラステム株式会社 物体像識別方法
US7024488B1 (en) 2001-04-12 2006-04-04 Ipix Corporation Method and apparatus for hosting a network camera
US7076085B1 (en) 2001-04-12 2006-07-11 Ipix Corp. Method and apparatus for hosting a network camera including a heartbeat mechanism
US7177448B1 (en) 2001-04-12 2007-02-13 Ipix Corporation System and method for selecting and transmitting images of interest to a user
US8026944B1 (en) 2001-04-12 2011-09-27 Sony Corporation Method and apparatus for hosting a network camera with image degradation
US7015949B1 (en) 2001-04-12 2006-03-21 Ipix Corporation Method and apparatus for hosting a network camera with refresh degradation
US6996782B2 (en) 2001-05-23 2006-02-07 Eastman Kodak Company Using digital objects organized according to a histogram timeline
US8028249B2 (en) * 2001-05-23 2011-09-27 Eastman Kodak Company Method and system for browsing large digital multimedia object collections
US6828920B2 (en) 2001-06-04 2004-12-07 Lockheed Martin Orincon Corporation System and method for classifying vehicles
US7998065B2 (en) 2001-06-18 2011-08-16 Given Imaging Ltd. In vivo sensing device with a circuit board having rigid sections and flexible sections
US7283672B1 (en) 2001-06-29 2007-10-16 Harris Scott C Image compression by object segregation
US9149175B2 (en) 2001-07-26 2015-10-06 Given Imaging Ltd. Apparatus and method for light control in an in-vivo imaging device
US20060184039A1 (en) * 2001-07-26 2006-08-17 Dov Avni Apparatus and method for light control in an in-vivo imaging device
US8493370B2 (en) * 2001-08-29 2013-07-23 Palm, Inc. Dynamic brightness range for portable computer displays based on ambient conditions
DE10148289A1 (de) * 2001-09-29 2003-04-24 Vitronic Dr Ing Stein Bildvera Verfahren und Vorrichtung zum Erfassen und Klassifizieren von Fahrzeugen in Bewegung
ATE407344T1 (de) * 2001-10-09 2008-09-15 Sirf Tech Inc Verfahren und system zum versenden von positionskodierten bildern über ein drahtloses netz
US8331621B1 (en) * 2001-10-17 2012-12-11 United Toll Systems, Inc. Vehicle image capture system
US7734500B1 (en) 2001-10-17 2010-06-08 United Toll Systems, Inc. Multiple RF read zone system
US7725348B1 (en) * 2001-10-17 2010-05-25 United Toll Systems, Inc. Multilane vehicle information capture system
DE10160719B4 (de) * 2001-12-11 2011-06-16 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und Vorrichtung zur Erkennung und Wiedererkennung von sich bewegenden Objekten
JP3817174B2 (ja) * 2001-12-28 2006-08-30 矢崎総業株式会社 車両用画像修整装置及び夜間運転視界支援装置
US9092841B2 (en) * 2004-06-09 2015-07-28 Cognex Technology And Investment Llc Method and apparatus for visual detection and inspection of objects
JP3747866B2 (ja) * 2002-03-05 2006-02-22 日産自動車株式会社 車両用画像処理装置
US7016518B2 (en) * 2002-03-15 2006-03-21 Extreme Cctv Inc. Vehicle license plate imaging and reading system for day and night
KR100459475B1 (ko) * 2002-04-04 2004-12-03 엘지산전 주식회사 차종 판단 시스템 및 그 방법
US10562492B2 (en) 2002-05-01 2020-02-18 Gtj Ventures, Llc Control, monitoring and/or security apparatus and method
US6904341B2 (en) * 2002-06-12 2005-06-07 Sea-Watch Technologies, Inc. Integrated vessel monitoring and control system
WO2004001513A1 (en) * 2002-06-25 2003-12-31 Combs Robert G Data logging and digital video recording/playback system
US20040001149A1 (en) * 2002-06-28 2004-01-01 Smith Steven Winn Dual-mode surveillance system
US7171028B2 (en) * 2002-11-22 2007-01-30 The Boeing Company Method and apparatus for covertly determining the rate of relative motion between two objects
JP4080316B2 (ja) * 2002-12-10 2008-04-23 富士フイルム株式会社 撮像装置、端末装置および撮像システム
DE10301898A1 (de) * 2003-01-17 2004-08-05 Robert Bosch Gmbh Verfahren zur Einstellung eines Bildsensors
SE531334C2 (sv) * 2003-01-30 2009-02-24 Facility Parking Europ Ab Fordon ID
US7382277B2 (en) * 2003-02-12 2008-06-03 Edward D. Ioli Trust System for tracking suspicious vehicular activity
EP1463301A1 (en) * 2003-03-19 2004-09-29 Thomson Licensing S.A. Method for identification of tokens in video sequences
EP1460835B1 (en) * 2003-03-19 2018-11-14 InterDigital Madison Patent Holdings Method for identification of tokens in video sequences
US20040201460A1 (en) * 2003-04-09 2004-10-14 Bucholz Andrew J. System and method of vehicle surveillance
US6865297B2 (en) * 2003-04-15 2005-03-08 Eastman Kodak Company Method for automatically classifying images into events in a multimedia authoring application
US7298895B2 (en) * 2003-04-15 2007-11-20 Eastman Kodak Company Method for automatically classifying images into events
US20100002070A1 (en) 2004-04-30 2010-01-07 Grandeye Ltd. Method and System of Simultaneously Displaying Multiple Views for Video Surveillance
US7528881B2 (en) * 2003-05-02 2009-05-05 Grandeye, Ltd. Multiple object processing in wide-angle video camera
US6970102B2 (en) * 2003-05-05 2005-11-29 Transol Pty Ltd Traffic violation detection, recording and evidence processing system
US7986339B2 (en) * 2003-06-12 2011-07-26 Redflex Traffic Systems Pty Ltd Automated traffic violation monitoring and reporting system with combined video and still-image data
US7263209B2 (en) * 2003-06-13 2007-08-28 Sarnoff Corporation Vehicular vision system
WO2005015482A1 (en) * 2003-07-10 2005-02-17 James Simon Autonomous wide-angle license plate recognition
US7747041B2 (en) * 2003-09-24 2010-06-29 Brigham Young University Automated estimation of average stopped delay at signalized intersections
US7171024B2 (en) * 2003-12-01 2007-01-30 Brickstream Corporation Systems and methods for determining if objects are in a queue
EP1542186A1 (en) * 2003-12-12 2005-06-15 Chao-Hung Chang Active searching and identifying system and method
EP1738198A4 (en) * 2004-02-13 2011-05-25 Technion Res & Dev Foundation IMPROVED UNDERWATER PICTURE
US7672514B2 (en) * 2004-03-02 2010-03-02 Sarnoff Corporation Method and apparatus for differentiating pedestrians, vehicles, and other objects
WO2005086078A1 (en) * 2004-03-02 2005-09-15 Sarnoff Corporation Method and apparatus for classifying an object
ATE396470T1 (de) 2004-04-08 2008-06-15 Mobileye Technologies Ltd Kollisionswarnsystem
US8427538B2 (en) * 2004-04-30 2013-04-23 Oncam Grandeye Multiple view and multiple object processing in wide-angle video camera
WO2005109859A2 (en) * 2004-05-01 2005-11-17 Eliezer Jacob Digital camera with non-uniform image resolution
US7605852B2 (en) 2004-05-17 2009-10-20 Micron Technology, Inc. Real-time exposure control for automatic light control
US8127247B2 (en) 2004-06-09 2012-02-28 Cognex Corporation Human-machine-interface and method for manipulating data in a machine vision system
US8243986B2 (en) * 2004-06-09 2012-08-14 Cognex Technology And Investment Corporation Method and apparatus for automatic visual event detection
US20050276445A1 (en) * 2004-06-09 2005-12-15 Silver William M Method and apparatus for automatic visual detection, recording, and retrieval of events
US8891852B2 (en) * 2004-06-09 2014-11-18 Cognex Technology And Investment Corporation Method and apparatus for configuring and testing a machine vision detector
JP2006025007A (ja) * 2004-07-06 2006-01-26 Fuji Photo Film Co Ltd 画像処理装置及び画像処理プログラム
IL162921A0 (en) * 2004-07-08 2005-11-20 Hi Tech Solutions Ltd Character recognition system and method
US7659906B2 (en) * 2004-07-29 2010-02-09 The United States Of America As Represented By The Secretary Of The Navy Airborne real time image exploitation system (ARIES)
US20060088188A1 (en) * 2004-10-11 2006-04-27 Alexander Ioffe Method for the detection of an obstacle
WO2006044476A2 (en) 2004-10-12 2006-04-27 Robert Vernon Vanman Method of and system for mobile surveillance and event recording
US20070092110A1 (en) * 2004-11-08 2007-04-26 Li-Qun Xu Object tracking within video images
US9292187B2 (en) 2004-11-12 2016-03-22 Cognex Corporation System, method and graphical user interface for displaying and controlling vision system operating parameters
US7636449B2 (en) 2004-11-12 2009-12-22 Cognex Technology And Investment Corporation System and method for assigning analysis parameters to vision detector using a graphical interface
US7720315B2 (en) 2004-11-12 2010-05-18 Cognex Technology And Investment Corporation System and method for displaying and using non-numeric graphic elements to control and monitor a vision system
EP1659551A1 (fr) * 2004-11-23 2006-05-24 S.A.V.E. - Sistemi Avanzati di Elettronica di Domenico Ing. Monopoli & C. S.A.S. Système électronique d'enregistrement de détection d'infraction au code de la route
US7512250B2 (en) * 2004-11-24 2009-03-31 Siemens Corporate Research, Inc. System and method for fast illumination-invariant background subtraction using two views
US7688999B2 (en) * 2004-12-08 2010-03-30 Electronics And Telecommunications Research Institute Target detecting system and method
US7623676B2 (en) * 2004-12-21 2009-11-24 Sarnoff Corporation Method and apparatus for tracking objects over a wide area using a network of stereo sensors
US7457433B2 (en) * 2005-01-20 2008-11-25 International Business Machines Corporation System and method for analyzing video from non-static camera
US9082456B2 (en) 2005-01-31 2015-07-14 The Invention Science Fund I Llc Shared image device designation
US9124729B2 (en) 2005-01-31 2015-09-01 The Invention Science Fund I, Llc Shared image device synchronization or designation
US9910341B2 (en) 2005-01-31 2018-03-06 The Invention Science Fund I, Llc Shared image device designation
US9489717B2 (en) 2005-01-31 2016-11-08 Invention Science Fund I, Llc Shared image device
US8902320B2 (en) 2005-01-31 2014-12-02 The Invention Science Fund I, Llc Shared image device synchronization or designation
US8606383B2 (en) 2005-01-31 2013-12-10 The Invention Science Fund I, Llc Audio sharing
US20060170956A1 (en) 2005-01-31 2006-08-03 Jung Edward K Shared image devices
US8502870B2 (en) * 2005-02-02 2013-08-06 Pima Electronic Systems Ltd. Device, system, and method of rapid image acquisition
WO2006082644A1 (ja) * 2005-02-03 2006-08-10 Fujitsu Limited 車両画像データ生成プログラムおよび車両画像データ生成装置
US7568628B2 (en) 2005-03-11 2009-08-04 Hand Held Products, Inc. Bar code reading device with global electronic shutter control
US7710452B1 (en) 2005-03-16 2010-05-04 Eric Lindberg Remote video monitoring of non-urban outdoor sites
US7050908B1 (en) * 2005-03-22 2006-05-23 Delphi Technologies, Inc. Lane marker projection method for a motor vehicle vision system
GB2425385B (en) 2005-04-18 2007-08-01 Pips Technology Ltd Vehicle speed monitoring system
US9819490B2 (en) 2005-05-04 2017-11-14 Invention Science Fund I, Llc Regional proximity for shared image device(s)
US8681225B2 (en) 2005-06-02 2014-03-25 Royce A. Levien Storage access technique for captured data
US10003762B2 (en) 2005-04-26 2018-06-19 Invention Science Fund I, Llc Shared image devices
US9167195B2 (en) 2005-10-31 2015-10-20 Invention Science Fund I, Llc Preservation/degradation of video/audio aspects of a data stream
US20070222865A1 (en) 2006-03-15 2007-09-27 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Enhanced video/still image correlation
US9967424B2 (en) 2005-06-02 2018-05-08 Invention Science Fund I, Llc Data storage usage protocol
US9451200B2 (en) 2005-06-02 2016-09-20 Invention Science Fund I, Llc Storage access technique for captured data
US9076208B2 (en) 2006-02-28 2015-07-07 The Invention Science Fund I, Llc Imagery processing
US8964054B2 (en) 2006-08-18 2015-02-24 The Invention Science Fund I, Llc Capturing selected image objects
US20070139529A1 (en) * 2005-06-02 2007-06-21 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Dual mode image capture technique
US9001215B2 (en) 2005-06-02 2015-04-07 The Invention Science Fund I, Llc Estimating shared image device operational capabilities or resources
US9191611B2 (en) 2005-06-02 2015-11-17 Invention Science Fund I, Llc Conditional alteration of a saved image
US9621749B2 (en) 2005-06-02 2017-04-11 Invention Science Fund I, Llc Capturing selected image objects
US9942511B2 (en) 2005-10-31 2018-04-10 Invention Science Fund I, Llc Preservation/degradation of video/audio aspects of a data stream
US7920959B1 (en) 2005-05-01 2011-04-05 Christopher Reed Williams Method and apparatus for estimating the velocity vector of multiple vehicles on non-level and curved roads using a single camera
CN101185084B (zh) * 2005-05-31 2010-06-16 皇家飞利浦电子股份有限公司 用于夜间探测道路的方法和系统
US7770799B2 (en) 2005-06-03 2010-08-10 Hand Held Products, Inc. Optical reader having reduced specular reflection read failures
NL1031867C1 (nl) * 2005-07-08 2007-01-09 Everhardus Fransiscu Weijdeven Werkwijze voor het bepalen van voertuiggegevens.
CN100458817C (zh) * 2005-07-21 2009-02-04 欧姆龙株式会社 监视装置
JP2007052770A (ja) * 2005-07-21 2007-03-01 Omron Corp 監視装置
US7504965B1 (en) 2005-08-05 2009-03-17 Elsag North America, Llc Portable covert license plate reader
US20070040065A1 (en) * 2005-08-19 2007-02-22 Von Thal German Flexible refueling boom extendable tube
US20070046484A1 (en) * 2005-08-22 2007-03-01 Andrew Bucholz Electronic parking identification and surveillance system and method
DE102005045017A1 (de) * 2005-09-21 2007-03-22 Robert Bosch Gmbh Verfahren und Fahrerassistenzsystem zur sensorbasierten Anfahrtsteuerung eines Kraftfahrzeugs
US8982944B2 (en) * 2005-10-12 2015-03-17 Enforcement Video, Llc Method and system for categorized event recording of images in multiple resolution levels
US20070120980A1 (en) * 2005-10-31 2007-05-31 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Preservation/degradation of video/audio aspects of a data stream
US9041851B2 (en) * 2005-11-15 2015-05-26 The Trustees Of Princeton University Organic electronic detectors and methods of fabrication
ATE429627T1 (de) * 2005-11-22 2009-05-15 Yarayan Ali Gerät zur prüfung der reifenprofiltiefe und -art, der geschwindigkeit und der bodenfreiheit an fahrzeugen während der fahrt
US7733357B2 (en) * 2006-01-13 2010-06-08 Hewlett-Packard Development Company, L.P. Display system
US8078618B2 (en) 2006-01-30 2011-12-13 Eastman Kodak Company Automatic multimode system for organizing and retrieving content data files
US7579965B2 (en) * 2006-03-03 2009-08-25 Andrew Bucholz Vehicle data collection and processing system
ITTO20060214A1 (it) * 2006-03-22 2007-09-23 Kria S R L Sistema di rilevamento di veicoli
US20070250898A1 (en) * 2006-03-28 2007-10-25 Object Video, Inc. Automatic extraction of secondary video streams
US20130163823A1 (en) * 2006-04-04 2013-06-27 Cyclops Technologies, Inc. Image Capture and Recognition System Having Real-Time Secure Communication
US20130163822A1 (en) * 2006-04-04 2013-06-27 Cyclops Technologies, Inc. Airborne Image Capture and Recognition System
TWI302879B (en) * 2006-05-12 2008-11-11 Univ Nat Chiao Tung Real-time nighttime vehicle detection and recognition system based on computer vision
US7956735B2 (en) 2006-05-15 2011-06-07 Cernium Corporation Automated, remotely-verified alarm system with intrusion and video surveillance and digital video recording
WO2007135488A1 (en) * 2006-05-22 2007-11-29 Nokia Corporation Detection system for detecing use of a mobile telecommunications device
US7786898B2 (en) 2006-05-31 2010-08-31 Mobileye Technologies Ltd. Fusion of far infrared and visible images in enhanced obstacle detection in automotive applications
US7724962B2 (en) * 2006-07-07 2010-05-25 Siemens Corporation Context adaptive approach in vehicle detection under various visibility conditions
US20080062009A1 (en) * 2006-08-30 2008-03-13 Marton Keith J Method and system to improve traffic flow
FR2906920A1 (fr) * 2006-10-04 2008-04-11 Nikos Ioannou Systeme autonome de detection du depassement par un vehicule d'une vitesse limite.
US7580547B2 (en) 2006-10-24 2009-08-25 Iteris, Inc. Electronic traffic monitor
DE602006003081D1 (de) * 2006-11-10 2008-11-20 Engine Srl System und Verfahren zur Detektion der Durchschnittsgeschwindigkeit von Fahrzeugen zur Kontrolle des Verkehrs
EP2110797B1 (en) * 2006-12-05 2015-10-07 Fujitsu Limited Traffic situation display method, traffic situation display system, vehicle-mounted device, and computer program
WO2008088409A2 (en) * 2006-12-19 2008-07-24 Indiana University Research & Technology Corporation Real-time dynamic content based vehicle tracking, traffic monitoring, and classification system
US8189962B2 (en) * 2006-12-19 2012-05-29 Hitachi Kokusai Electric Inc. Image processing apparatus
CN101211407B (zh) * 2006-12-29 2011-10-26 东软集团股份有限公司 昼夜图像识别方法和装置
US8213685B2 (en) * 2007-01-05 2012-07-03 American Traffic Solutions, Inc. Video speed detection system
WO2008091565A1 (en) * 2007-01-23 2008-07-31 Valeo Schalter & Sensoren Gmbh Method and system for universal lane boundary detection
US8132759B2 (en) * 2007-03-21 2012-03-13 The Boeing Company System and method for facilitating aerial refueling
US7959110B2 (en) * 2007-04-11 2011-06-14 The Boeing Company Methods and apparatus for resisting torsional loads in aerial refueling booms
US8144214B2 (en) 2007-04-18 2012-03-27 Panasonic Corporation Imaging apparatus, imaging method, integrated circuit, and storage medium
ATE537662T1 (de) * 2007-04-27 2011-12-15 Honda Motor Co Ltd System, programm und verfahren zur fahrzeugsperipherieüberwachung
US7952021B2 (en) 2007-05-03 2011-05-31 United Toll Systems, Inc. System and method for loop detector installation
US11265082B2 (en) 2007-05-24 2022-03-01 Federal Law Enforcement Development Services, Inc. LED light control assembly and system
US9294198B2 (en) 2007-05-24 2016-03-22 Federal Law Enforcement Development Services, Inc. Pulsed light communication key
US9414458B2 (en) 2007-05-24 2016-08-09 Federal Law Enforcement Development Services, Inc. LED light control assembly and system
US9455783B2 (en) 2013-05-06 2016-09-27 Federal Law Enforcement Development Services, Inc. Network security and variable pulse wave form with continuous communication
WO2008148022A2 (en) 2007-05-24 2008-12-04 Federal Law Enforcement Development Services, Inc. Building illumination apparatus with integrated communications, security and energy management
US9100124B2 (en) 2007-05-24 2015-08-04 Federal Law Enforcement Development Services, Inc. LED Light Fixture
US9258864B2 (en) 2007-05-24 2016-02-09 Federal Law Enforcement Development Services, Inc. LED light control and management system
US7869621B1 (en) * 2007-06-07 2011-01-11 Aydin Arpa Method and apparatus for interpreting images in temporal or spatial domains
US8718319B2 (en) * 2007-06-15 2014-05-06 Cognex Corporation Method and system for optoelectronic detection and location of objects
US8237099B2 (en) * 2007-06-15 2012-08-07 Cognex Corporation Method and system for optoelectronic detection and location of objects
US8804997B2 (en) 2007-07-16 2014-08-12 Checkvideo Llc Apparatus and methods for video alarm verification
CN101919246A (zh) * 2007-08-08 2010-12-15 托尼·迈耶 非后向反射牌照成像系统
US20090046157A1 (en) * 2007-08-13 2009-02-19 Andrew Cilia Combined wide-angle/zoom camera for license plate identification
US8599368B1 (en) * 2008-01-29 2013-12-03 Enforcement Video, Llc Laser-based speed determination device for use in a moving vehicle
US8306268B2 (en) * 2007-09-12 2012-11-06 General Electric Company Method and system for image integrity determination
KR101104609B1 (ko) * 2007-10-26 2012-01-12 주식회사 만도 차량의 목표주차위치 인식 방법 및 그 시스템
CA2704332C (en) 2007-11-01 2016-01-05 Igor Yurievich Matsur Traffic monitoring system
US8204273B2 (en) * 2007-11-29 2012-06-19 Cernium Corporation Systems and methods for analysis of video content, event notification, and video content provision
US8108055B2 (en) * 2007-12-28 2012-01-31 Larry Wong Method, system and apparatus for controlling an electrical device
EP2243290A4 (en) 2008-01-29 2011-06-22 Enforcement Video Llc OMNIDIRECTIONAL CAMERA FOR USE AT THE POLICE AUTOPE EVENT RECORD
WO2009102477A1 (en) * 2008-02-15 2009-08-20 Enforcement Video, Llc System and method for high-resolution storage of images
US8229168B2 (en) * 2008-02-20 2012-07-24 International Business Machines Corporation Fast license plate verifier
DE102008017137A1 (de) 2008-03-19 2009-10-01 Siemens Aktiengesellschaft Verfahren und Vorrichtung zur gesicherten Bildaufnahme aus einem Fahrzeug heraus
US8208022B2 (en) * 2008-06-05 2012-06-26 Lg Electronics Inc. Apparatus and method for removing blooming of camera image
US7786850B1 (en) 2008-06-16 2010-08-31 Gianni Arcaini Method and apparatus for bridge collision alert monitoring and impact analysis
DE102008002560A1 (de) * 2008-06-20 2009-12-24 Robert Bosch Gmbh Bilddatenvisualisierung
US9405968B2 (en) * 2008-07-21 2016-08-02 Facefirst, Inc Managed notification system
US8320674B2 (en) * 2008-09-03 2012-11-27 Sony Corporation Text localization for image and video OCR
JP5183392B2 (ja) * 2008-09-25 2013-04-17 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
NL2002080C (en) * 2008-10-10 2010-04-13 Lucas Christiaan Fretz Information system and method of providing information.
US8611590B2 (en) * 2008-12-23 2013-12-17 Canon Kabushiki Kaisha Video object fragmentation detection and management
US7974314B2 (en) * 2009-01-16 2011-07-05 Microsoft Corporation Synchronization of multiple data source to a common time base
US20100246890A1 (en) * 2009-03-26 2010-09-30 Microsoft Corporation Detection of objects in images
US8890773B1 (en) 2009-04-01 2014-11-18 Federal Law Enforcement Development Services, Inc. Visible light transceiver glasses
WO2010124062A1 (en) * 2009-04-22 2010-10-28 Cernium Corporation System and method for motion detection in a surveillance video
US20100276962A1 (en) * 2009-04-29 2010-11-04 Gm Global Technology Operations, Inc. Active face shade detection in auto sun-shade system
US20100302371A1 (en) * 2009-05-27 2010-12-02 Mark Abrams Vehicle tailgating detection system
US8310377B2 (en) * 2009-08-24 2012-11-13 Optotraffic, Llc Mobile automated system for traffic monitoring
ATE533141T1 (de) * 2009-10-01 2011-11-15 Kapsch Trafficcom Ag Vorrichtungen und verfahren zur bestimmung von richtung, geschwindigkeit und/oder abstand von fahrzeugen
PL2306425T3 (pl) * 2009-10-01 2011-12-30 Kapsch Trafficcom Ag Urządzenie i sposób detekcji osi kół
US20110234829A1 (en) * 2009-10-06 2011-09-29 Nikhil Gagvani Methods, systems and apparatus to configure an imaging device
DE102009046362A1 (de) * 2009-11-03 2011-05-05 Tesa Se Haftklebestoff aus einem vernetzbaren Polyolefin und einem Klebharz
CN101739829B (zh) * 2009-12-03 2014-04-23 北京中星微电子有限公司 一种基于视频的车辆超速监控方法及系统
US20110133510A1 (en) * 2009-12-07 2011-06-09 Gm Global Technology Operations, Inc. Saturation-based shade-line detection
BR112012019871A8 (pt) * 2010-02-08 2018-06-19 Obschestvo S Ogranichennoy Otveststvennostiyu Sistemy Peredovykh Tekh método e dispositivo para determinar a velocidade de percurso e coordenadas de veículos e subsequentemente identificar os mesmos e registrar de forma automática violações de trânsito em estradas
US9224050B2 (en) * 2010-03-16 2015-12-29 The University Of Sydney Vehicle localization in open-pit mining using GPS and monocular camera
US8736680B1 (en) 2010-05-18 2014-05-27 Enforcement Video, Llc Method and system for split-screen video display
US8922656B2 (en) 2010-06-16 2014-12-30 Ndi Technologies, Inc. USB video interface for ALPR cameras and associated method
US9626696B2 (en) * 2010-06-17 2017-04-18 Microsoft Technology Licensing, Llc Techniques to verify location for location based services
TWI452540B (zh) * 2010-12-09 2014-09-11 Ind Tech Res Inst 影像式之交通參數偵測系統與方法及電腦程式產品
US20120162431A1 (en) * 2010-12-23 2012-06-28 Scott Riesebosch Methods and systems for monitoring traffic flow
US20120179518A1 (en) * 2011-01-06 2012-07-12 Joshua Timothy Jaipaul System and method for intersection monitoring
EP2663969B1 (en) 2011-01-14 2020-04-15 Federal Law Enforcement Development Services, Inc. Method of providing lumens and tracking of lumen consumption
US9373142B2 (en) 2011-03-04 2016-06-21 Digital Recognition Network, Inc. Method and system for locating a mobile asset
BR112013023734A2 (pt) * 2011-03-14 2016-12-13 Univ California método e sistema para classificação de veículo
US8565481B1 (en) * 2011-05-26 2013-10-22 Google Inc. System and method for tracking objects
PT2538239E (pt) * 2011-06-21 2014-02-11 Kapsch Trafficcom Ag Método e dispositivo para deteção de rodas
US9031948B1 (en) * 2011-07-06 2015-05-12 Shawn B. Smith Vehicle prediction and association tool based on license plate recognition
US8781187B2 (en) * 2011-07-13 2014-07-15 Mckesson Financial Holdings Methods, apparatuses, and computer program products for identifying a region of interest within a mammogram image
US8768009B1 (en) * 2011-07-26 2014-07-01 Shawn B. Smith Locating persons of interest based on license plate recognition information
DE102011053284B8 (de) * 2011-09-05 2012-09-06 Jenoptik Robot Gmbh Verfahren zur Verifikation der Geschwindigkeit eines angemessenen Fahrzeuges mittels Kamera
US8903127B2 (en) * 2011-09-16 2014-12-02 Harman International (China) Holdings Co., Ltd. Egomotion estimation system and method
US10552669B2 (en) 2011-09-20 2020-02-04 Fraunhofer-Gesellschaft Zur Fòrderung Der Angewandten Forschung E.V. System and method for supporting an exercise movement
CA2851246A1 (en) * 2011-10-05 2013-04-11 L-3 Communications Mobilevision Inc. Multiple resolution camera system for automated license plate recognition and event recording
US9651499B2 (en) 2011-12-20 2017-05-16 Cognex Corporation Configurable image trigger for a vision system and method for using the same
US8934020B2 (en) * 2011-12-22 2015-01-13 Pelco, Inc. Integrated video quantization
US8736463B1 (en) * 2012-01-30 2014-05-27 Google Inc. Object bounding box estimation
US9569680B2 (en) * 2012-02-02 2017-02-14 Xerox Corporation Automated running-engine detection in stationary motor vehicles
JP6051608B2 (ja) * 2012-06-19 2016-12-27 市光工業株式会社 車両周辺対象物検出装置
US9465997B2 (en) 2012-09-26 2016-10-11 General Electric Company System and method for detection and tracking of moving objects
US20140133753A1 (en) * 2012-11-09 2014-05-15 Ge Aviation Systems Llc Spectral scene simplification through background subtraction
US9641806B2 (en) * 2013-03-12 2017-05-02 3M Innovative Properties Company Average speed detection with flash illumination
US9265112B2 (en) 2013-03-13 2016-02-16 Federal Law Enforcement Development Services, Inc. LED light control and management system
JP6178099B2 (ja) 2013-04-05 2017-08-09 ソニー株式会社 中間ユニットおよびカメラシステム
US10546441B2 (en) 2013-06-04 2020-01-28 Raymond Anthony Joao Control, monitoring, and/or security, apparatus and method for premises, vehicles, and/or articles
US9336450B2 (en) * 2013-06-05 2016-05-10 Xerox Corporation Methods and systems for selecting target vehicles for occupancy detection
MA36097B1 (fr) * 2013-07-08 2016-01-29 Mascir Morrocan Foundation For Advanced Science Innovation & Res Système mono-caméra d'estimation de vitesse de véhicule par traitement vidéo avec calibration multi-caméra par effet stéréoscopique
CA2856896A1 (en) 2013-07-18 2015-01-18 Spo Systems Inc. Limited Virtual video patrol system and components therefor
JP6110256B2 (ja) * 2013-08-21 2017-04-05 株式会社日本自動車部品総合研究所 対象物推定装置および対象物推定方法
US9736374B2 (en) * 2013-09-19 2017-08-15 Conduent Business Services, Llc Video/vision based access control method and system for parking occupancy determination, which is robust against camera shake
US9412031B2 (en) 2013-10-16 2016-08-09 Xerox Corporation Delayed vehicle identification for privacy enforcement
KR101507242B1 (ko) * 2013-10-21 2015-03-31 포항공과대학교 산학협력단 영상 분석을 통하여 모션 햅틱 효과를 제공하는 장치 및 방법
JP6351238B2 (ja) * 2013-11-15 2018-07-04 キヤノン株式会社 画像処理装置、撮像装置および距離補正方法
KR102149273B1 (ko) * 2013-12-10 2020-08-28 한화테크윈 주식회사 번호판 인식 방법 및 장치
FR3014553A1 (fr) * 2013-12-11 2015-06-12 Parrot Procede de calibration angulaire de la position d'une camera video embarquee dans un vehicule automobile
US9779284B2 (en) 2013-12-17 2017-10-03 Conduent Business Services, Llc Privacy-preserving evidence in ALPR applications
US20150198941A1 (en) 2014-01-15 2015-07-16 John C. Pederson Cyber Life Electronic Networking and Commerce Operating Exchange
US11244171B2 (en) * 2014-01-22 2022-02-08 Conduent Business Services Llc Video-based system for automated detection of double parking violations
US9478030B1 (en) * 2014-03-19 2016-10-25 Amazon Technologies, Inc. Automatic visual fact extraction
FR3018940B1 (fr) * 2014-03-24 2018-03-09 Survision Systeme de classification automatique de vehicules automobiles
US9626476B2 (en) 2014-03-27 2017-04-18 Change Healthcare Llc Apparatus, method and computer-readable storage medium for transforming digital images
US10025990B2 (en) * 2014-05-21 2018-07-17 Universal City Studios Llc System and method for tracking vehicles in parking structures and intersections
US9616350B2 (en) 2014-05-21 2017-04-11 Universal City Studios Llc Enhanced interactivity in an amusement park environment using passive tracking elements
US10207193B2 (en) 2014-05-21 2019-02-19 Universal City Studios Llc Optical tracking system for automation of amusement park elements
US9600999B2 (en) 2014-05-21 2017-03-21 Universal City Studios Llc Amusement park element tracking system
US10061058B2 (en) 2014-05-21 2018-08-28 Universal City Studios Llc Tracking system and method for use in surveying amusement park equipment
US9429398B2 (en) 2014-05-21 2016-08-30 Universal City Studios Llc Optical tracking for controlling pyrotechnic show elements
US9433870B2 (en) 2014-05-21 2016-09-06 Universal City Studios Llc Ride vehicle tracking and control system using passive tracking elements
US9443158B1 (en) * 2014-06-22 2016-09-13 Kristopher Haskins Method for computer vision to recognize objects marked for identification with a bigram of glyphs, and devices utilizing the method for practical purposes
US10248825B2 (en) * 2014-08-29 2019-04-02 Hewlett-Packard Development Company, L.P. Image processing
CN104574981B (zh) * 2014-12-01 2017-06-06 山东易华录信息技术有限公司 记录机动车行经减速让行路口不减速让行行为的系统和方法
US9607245B2 (en) 2014-12-02 2017-03-28 Xerox Corporation Adapted vocabularies for matching image signatures with fisher vectors
CN112055130B (zh) 2015-01-08 2023-03-17 索尼半导体解决方案公司 图像处理装置、成像装置和图像处理方法
US9984544B2 (en) 2015-02-17 2018-05-29 Sap Se Device layout optimization for surveillance devices
GB2560110B (en) 2015-05-18 2019-08-28 Roadmetric Ltd Detection and documentation of tailgating and speeding violations
US20170046950A1 (en) 2015-08-11 2017-02-16 Federal Law Enforcement Development Services, Inc. Function disabler device and system
EP3136635B1 (de) * 2015-08-25 2020-05-06 Toll Collect GmbH Verfahren und system zum bildlichen erfassen eines kraftfahrzeugs
EP3136636B1 (de) * 2015-08-25 2020-04-22 Toll Collect GmbH Verfahren und system zum bildlichen erfassen eines kraftfahrzeugs
RU2628916C2 (ru) * 2015-10-14 2017-08-22 Общество с ограниченной ответственностью "АВТОДОРИЯ" (ООО "АВТОДОРИЯ") Способ и система управления стационарной камерой
JP6709283B2 (ja) 2015-11-16 2020-06-10 オービタル インサイト インコーポレイテッド 低解像度リモートセンシング画像を用いた移動車両の検出及び分析
US20170186317A1 (en) 2015-12-29 2017-06-29 Tannery Creek Systems Inc. System and Method for Determining Parking Infraction
US9965696B2 (en) 2015-12-31 2018-05-08 James Alves Digital camera control system
PT3203447T (pt) 2016-02-04 2019-08-07 Holding Assessoria I Lideratge S L Hal Sl Deteção de acesso fraudulento em portas de controlo
JP6658054B2 (ja) * 2016-02-16 2020-03-04 トヨタ車体株式会社 車体部品の施工部位判定システム及び施工部位判定方法
US10341605B1 (en) 2016-04-07 2019-07-02 WatchGuard, Inc. Systems and methods for multiple-resolution storage of media streams
JP6789682B2 (ja) * 2016-06-13 2020-11-25 キヤノン株式会社 撮像装置、その制御方法、及びプログラム
US11092689B2 (en) * 2016-09-20 2021-08-17 Apple Inc. Enabling lidar detection
US10629072B2 (en) * 2016-10-20 2020-04-21 Ford Global Technologies, Llc LIDAR and vision vehicle sensing
US11017243B2 (en) 2016-12-05 2021-05-25 Intel Corporation Automotive system with motion detection capabilities
EP3566078A1 (en) * 2017-01-03 2019-11-13 Innoviz Technologies Ltd. Lidar systems and methods for detection and classification of objects
US10474906B2 (en) * 2017-03-24 2019-11-12 Echelon Corporation High dynamic range video of fast moving objects without blur
BR102017006860A2 (pt) * 2017-04-03 2018-10-30 Compsis Computadores E Sist Industria E Comercio Ltda sistema para detecção automática de categorias de veículos por análise da imagem de perfil longitudinal
EP3506153A1 (en) * 2017-12-28 2019-07-03 Canon Kabushiki Kaisha Information processing apparatus, system, method, and non-transitory computer-readable storage medium
WO2019179816A1 (de) * 2018-03-19 2019-09-26 Kistler Holding Ag Verkehrsüberwachungsanlage
US10836309B1 (en) * 2018-06-18 2020-11-17 Alarm.Com Incorporated Distracted driver detection and alert system
US10733761B2 (en) 2018-06-29 2020-08-04 Zoox, Inc. Sensor calibration
US10298910B1 (en) * 2018-06-29 2019-05-21 Zoox, Inc. Infrastructure free intrinsic calibration
EP3824454A4 (en) 2018-07-19 2021-09-01 Acusensus IP Pty Ltd BREACH DETECTION METHOD, DEVICE AND SYSTEM
US20210314477A1 (en) * 2018-08-17 2021-10-07 Hewlett-Packard Development Company, L.P. Exposure control of captured images
GB2576538B (en) 2018-08-23 2020-09-02 Roadmetric Ltd Detection and documentation of speeding violations
US11143599B2 (en) 2018-12-03 2021-10-12 Mistras Group, Inc. Systems and methods for inspecting pipelines using a pipeline inspection robot
US10783623B2 (en) * 2018-12-03 2020-09-22 Mistras Group, Inc. Systems and methods for inspecting pipelines using a robotic imaging system
US10967751B2 (en) * 2019-05-10 2021-04-06 Gm Global Technology Operations, Llc Method to detect the proper connection of a vehicle charging cable
WO2020230237A1 (ja) * 2019-05-13 2020-11-19 日本電信電話株式会社 交通流推定装置、交通流推定方法、交通流推定プログラムおよび交通流推定プログラムを記憶した記憶媒体
WO2020235466A1 (ja) * 2019-05-23 2020-11-26 日立オートモティブシステムズ株式会社 車両制御システム及び車両制御方法
US11267464B2 (en) 2019-07-24 2022-03-08 Pony Ai Inc. System and method to distinguish between moving and static objects
CN111340877B (zh) * 2020-03-25 2023-10-27 北京爱笔科技有限公司 一种车辆定位方法及装置
CN112309126B (zh) * 2020-10-30 2022-07-05 杭州海康威视数字技术股份有限公司 车牌检测方法、装置、电子设备及计算机可读存储介质
CN112926590B (zh) * 2021-03-18 2023-12-01 上海晨兴希姆通电子科技有限公司 线缆上字符的分割识别方法及其系统
CN113674329A (zh) * 2021-08-13 2021-11-19 上海同温层智能科技有限公司 车辆驾驶行为检测方法和系统
EP4199495A1 (en) * 2021-12-15 2023-06-21 Nokia Solutions and Networks Oy Regulating frame processing rates
CN115019502A (zh) * 2022-04-14 2022-09-06 安徽超远信息技术有限公司 一种道路车辆超高预警方法
US11715305B1 (en) * 2022-11-30 2023-08-01 Amitha Nandini Mandava Traffic detection system using machine vision
CN117553695B (zh) * 2024-01-11 2024-05-03 摩斯智联科技有限公司 计算车辆高度的方法、装置及计算机存储介质

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE1054757B (de) * 1957-08-02 1959-04-09 Robot Berning & Co Verfahren und Vorrichtung zur photographischen UEberwachung der Fahrzeuggeschwindigkeit mittels stationaerer Aufnahmekameras
US3685012A (en) * 1970-04-16 1972-08-15 Sperry Rand Corp Apparatus for determining data associated with objects
US3788201A (en) * 1970-12-14 1974-01-29 F Abell Method for establishing vehicle identification, speed and conditions of visibility
US3890462A (en) * 1974-04-17 1975-06-17 Bell Telephone Labor Inc Speed and direction indicator for video systems
FR2315730A1 (fr) * 1975-06-25 1977-01-21 Dassault Electronique Procede et installation pour l'identification rapide a distance de caracteres presents sur un support d'emplacement variable
SE394146B (sv) * 1975-10-16 1977-06-06 L Olesen Anordning for metning resp kontroll av ett foremals, i synnerhet ett fordons hastighet.
US4122521A (en) * 1975-10-20 1978-10-24 Northrop Corporation Correlation system for multiple-sensor reconnaissance vehicle
US4433325A (en) * 1980-09-30 1984-02-21 Omron Tateisi Electronics, Co. Optical vehicle detection system
JPS58140900A (ja) * 1982-02-17 1983-08-20 三菱電機株式会社 車両ナンバプレ−ト撮像装置
US4567609A (en) * 1983-03-28 1986-01-28 The United States Of America As Represented By The Secretary Of The Navy Automatic character recognition system
US4555618A (en) * 1983-06-02 1985-11-26 R L Associates Method and means for collecting highway tolls
SU1235002A1 (ru) * 1983-07-13 1986-05-30 Предприятие П/Я А-1772 Телевизионное устройство дл контрол движени транспортных средств
US4603390A (en) * 1984-03-05 1986-07-29 Soft Plus Corp. Computerized parking system
SU1193716A1 (ru) * 1984-05-04 1985-11-23 Специальное Проектное Конструкторское Бюро Промышленной Автоматики "Промавтоматика" Устройство дл определени скорости движени объектов и их типов
JPS6161573A (ja) * 1984-08-31 1986-03-29 Mitsubishi Electric Corp 交通監視システム
SU1234957A1 (ru) * 1984-09-12 1986-05-30 Предприятие П/Я В-2769 Цифровой селектор временного положени импульсов
FR2583882B1 (fr) * 1985-06-25 1989-02-03 Renault Dispositif de mesure de la vitesse et de la position d'un mobile par rapport au sol
JPS6287947A (ja) * 1985-10-14 1987-04-22 Matsushita Electric Ind Co Ltd 撮像装置
US4817166A (en) * 1986-05-05 1989-03-28 Perceptics Corporation Apparatus for reading a license plate
DD249783A1 (de) * 1986-06-05 1987-09-16 Wismar Ing Hochschule Verfahren zur zaehlung, klassifizierung und geschwindigkeitsermittlung von fahrzeugen
FR2609566B1 (fr) * 1987-01-14 1990-04-13 Armine Procede de determination de la trajectoire d'un corps apte a se deplacer sur une voie et dispositif de mise en oeuvre du procede
US4847772A (en) * 1987-02-17 1989-07-11 Regents Of The University Of Minnesota Vehicle detection through image processing for traffic surveillance and control
FR2617309B1 (fr) * 1987-06-29 1993-07-16 Cga Hbs Systeme pour la lecture automatique de donnees d'identification, apposees sur un vehicule
GB2217498B (en) * 1988-04-18 1992-03-18 Ind Tech Res Inst Method and apparatus for automatically recognising licence plate characters
IL86202A (en) * 1988-04-27 1992-01-15 Driver Safety Systems Ltd Traffic safety monitoring apparatus
DE58902538D1 (de) * 1988-05-19 1992-12-03 Siemens Ag Verfahren zur beobachtung einer szene und einrichtung zur durchfuehrung des verfahrens.
GB2219881A (en) * 1988-06-15 1989-12-20 English Electric Valve Co Ltd Vehicle monitoring system
JPH01319644A (ja) * 1988-06-18 1989-12-25 Furukawa Alum Co Ltd 耐熱性アルミニウム合金材及びその製造方法
JPH01319898A (ja) * 1988-06-21 1989-12-26 Mitsubishi Electric Corp 料金徴収装置
US4855770A (en) * 1988-09-09 1989-08-08 Polaroid Corporation Vehicle identification camera
GB2227866B (en) * 1988-12-13 1993-05-05 Matsushita Electric Ind Co Ltd Automatic vehicle identification system
US4958064A (en) * 1989-01-30 1990-09-18 Image Recognition Equipment Corporation Bar code locator for video scanner/reader system
US5146510A (en) * 1989-02-09 1992-09-08 Philip Morris Incorporated Methods and apparatus for optically determining the acceptability of products
US5046111A (en) * 1989-02-09 1991-09-03 Philip Morris Incorporated Methods and apparatus for optically determining the acceptability of products
GB2231753A (en) * 1989-05-05 1990-11-21 Golden River Ltd Traffic incident monitoring with vido cameras
JPH0752480B2 (ja) * 1989-06-09 1995-06-05 名古屋電機工業株式会社 車両検知装置
JPH0322099A (ja) * 1989-06-19 1991-01-30 Matsushita Electric Ind Co Ltd ナンバープレート自動認識装置
DE3937603A1 (de) * 1989-11-11 1991-06-27 Wannke Bodo System zum lesen von kraftfahrzeugkennzeichen
US5262871A (en) * 1989-11-13 1993-11-16 Rutgers, The State University Multiple resolution image sensor
JP2862605B2 (ja) * 1989-12-08 1999-03-03 名古屋電機工業株式会社 車両検知装置およびその検知方法
JP2712844B2 (ja) * 1990-04-27 1998-02-16 株式会社日立製作所 交通流計測装置及び交通流計測制御装置
JPH04147400A (ja) * 1990-10-11 1992-05-20 Matsushita Electric Ind Co Ltd 車両検出装置
US5161107A (en) * 1990-10-25 1992-11-03 Mestech Creation Corporation Traffic surveillance system
US5243418A (en) * 1990-11-27 1993-09-07 Kabushiki Kaisha Toshiba Display monitoring system for detecting and tracking an intruder in a monitor area
FR2671653B1 (fr) * 1991-01-11 1995-05-24 Renault Systeme de mesure du trafic de vehicules automobiles.
FR2672144B1 (fr) * 1991-01-30 1993-04-23 Angenieux P Ets Dispositif pour le controle de vehicules a l'endroit d'un poste de controle ou similaire.
US5301239A (en) * 1991-02-18 1994-04-05 Matsushita Electric Industrial Co., Ltd. Apparatus for measuring the dynamic state of traffic
US5296852A (en) * 1991-02-27 1994-03-22 Rathi Rajendra P Method and apparatus for monitoring traffic flow
WO1993019429A1 (en) * 1992-03-18 1993-09-30 In-Mar-Tech Australia Pty. Ltd. Vision apparatus
JP3011500U (ja) 1994-06-06 1995-05-30 金四郎 伴 窓硝子清掃器具

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004212129A (ja) * 2002-12-27 2004-07-29 Ishikawajima Harima Heavy Ind Co Ltd 環境状況把握装置

Also Published As

Publication number Publication date
EP0631683B1 (en) 2001-08-01
EP0631683A1 (en) 1995-01-04
CA2132515A1 (en) 1993-09-21
CA2132515C (en) 2006-01-31
EP0631683A4 (en) 1996-04-17
WO1993019441A1 (en) 1993-09-30
ATE203844T1 (de) 2001-08-15
AU3740293A (en) 1993-10-21
NZ249799A (en) 1996-11-26
US5809161A (en) 1998-09-15
AU671106B2 (en) 1996-08-15
DE69330513D1 (de) 2001-09-06

Similar Documents

Publication Publication Date Title
JPH07505966A (ja) 物体モニタシステム
CN103824452B (zh) 一种轻量级的基于全景视觉的违章停车检测装置
US8284996B2 (en) Multiple object speed tracking system
US11380105B2 (en) Identification and classification of traffic conflicts
KR102122859B1 (ko) 교통 영상감시시스템의 멀티 표적 추적 방법
CN107705574A (zh) 一种精准快速的道路违章停车全自动抓拍系统
CN102867417B (zh) 一种出租车防伪系统及方法
CN106373426A (zh) 基于计算机视觉的停车位及违规占道停车监控方法
CN110738150B (zh) 相机联动抓拍方法、装置以及计算机存储介质
JP2015090679A (ja) 車両軌跡抽出方法、車両領域抽出方法、車両速度推定方法、車両軌跡抽出プログラム、車両領域抽出プログラム、車両速度推定プログラム、車両軌跡抽出システム、車両領域抽出システム、及び、車両速度推定システム
US20220120910A1 (en) Information processing system, sensor system, information processing method, and non-transitory computer readable storage medium
WO2020210960A1 (zh) 交通道路的数字化全景重建的方法和系统
JP2000231693A (ja) 自動車通行監視・管理装置
Auty et al. Image acquisition system for traffic monitoring applications
Górska et al. AITP-AI thermal pedestrians dataset
CN202887450U (zh) 一种出租车防伪系统
CN113076821A (zh) 一种事件的检测方法及装置
Muhammad Detection parking Spaces by using the ResNet50 Algorithm
AU671106C (en) An object monitoring system
CN115691141B (zh) 一种基于护栏的城市交通管理方法和系统及网络侧服务端
Hayawi et al. Detection parking Spaces by using the ResNet50 Algorithm
Eriksson Leveraging traffic and surveillance video cameras for urban traffic.
CN116844007A (zh) 目标的跟踪方法、装置、存储介质和云计算平台
Parisot et al. Real-time road traffic classification using on-board bus video camera
NZ299442A (en) Object monitoring system for vehicles using a camera to monitor a moving vehicle and acquire images