JP2006020283A - 画像アレイセンサのための制御回路及びヘッドライトの自動制御 - Google Patents

画像アレイセンサのための制御回路及びヘッドライトの自動制御 Download PDF

Info

Publication number
JP2006020283A
JP2006020283A JP2005134483A JP2005134483A JP2006020283A JP 2006020283 A JP2006020283 A JP 2006020283A JP 2005134483 A JP2005134483 A JP 2005134483A JP 2005134483 A JP2005134483 A JP 2005134483A JP 2006020283 A JP2006020283 A JP 2006020283A
Authority
JP
Japan
Prior art keywords
row
control system
pixel
subwindow
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005134483A
Other languages
English (en)
Inventor
Jon H Bechtel
ジョン エイチ ベクテル
Joseph S Stam
ジョセフ エス スタム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gentex Corp
Original Assignee
Gentex Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gentex Corp filed Critical Gentex Corp
Publication of JP2006020283A publication Critical patent/JP2006020283A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/14Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
    • B60Q1/1415Dimming circuits
    • B60Q1/1423Automatic dimming circuits, i.e. switching between high beam and low beam due to change of ambient light or light level in road traffic
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/74Circuitry for scanning or addressing the pixel array
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/14Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/05Special features for controlling or switching of the light beam
    • B60Q2300/054Variable non-standard intensity, i.e. emission of various beam intensities different from standard intensities, e.g. continuous or stepped transitions of intensity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/30Indexing codes relating to the vehicle environment
    • B60Q2300/31Atmospheric conditions
    • B60Q2300/312Adverse weather
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/30Indexing codes relating to the vehicle environment
    • B60Q2300/32Road surface or travel path
    • B60Q2300/324Road inclination, e.g. uphill or downhill
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/30Indexing codes relating to the vehicle environment
    • B60Q2300/33Driving situation
    • B60Q2300/332Driving situation on city roads
    • B60Q2300/3321Detection of streetlights
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/41Indexing codes relating to other road users or special conditions preceding vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/42Indexing codes relating to other road users or special conditions oncoming vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/45Special conditions, e.g. pedestrians, road signs or potential dangers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

【課題】 アクティブ画素画像アレイセンサ等の画像アレイセンサの各種機能を制御するための制御回路を提供する。
【解決手段】 本発明は画像アレイセンサを制御すると共にシリアル通信インターフェースを介して画像アレイセンサとマイクロコントローラの間の通信を制御する制御システムに関する。制御システムはデータスループットを減小するため他のパラメータと同様のウィンドウ機能、動作モード、感度等の画像アレイセンサの各種特性を有効に制御することができる。本発明の重要な特性は、制御回路が比較的少数の出力ピンを有するCMOSにかなり容易且つ有効に構成されることができ、マイクロコントローラと同様に画像アレイセンサに基いて制御回路にCMOSをかなり容易且つ有効に集積させ、部品数を減少させ、したがって、システムの全体コストを減少させるという事実に関連している。
【選択図】 図9

Description

本発明は制御システムに関し、より詳細には、シリアル通信インターフェースを介して、所定数の画素を有する画像アレイセンサを制御すると共に画像アレイセンサとマイクロコントローラの間の通信を制御する制御システムに関し、特定用途向けIC(ASIC)として形成されると共に回路画像アレイセンサとカスタムICを形成するマイクロコントローラに集積されさえするように適合される回路を介して、画像アレイセンサの動作モードと同様に画素又はサブウィンドウの各種サブセットを効果的且つ経済的に制御させる。
米国特許No.5,386,128 米国特許5,471,515 2/SPIE VOL.1900
一般に、画像アレイセンサは当技術において公知である。フォトゲートとフォトダイオードの両画像アレイセンサは公知である。そのような画像アレイセンサの例は、1993年7月のEric R. Fossumによる特許文献1及び特許文献2及び非特許文献1の「アクティブ画素センサ:CCDは時代遅れか?(ACTIVE PIXEL SENSORS: ARE CCD'S DINOSAURS?)」に開示され、ここにインコーポレイテッドバイリファレンスされている。アクティブ画素画像アレイセンサも又公知であり、例えば、カリフォルニア州のラ・クレセンタ(La Crescenta)のPHOTOBIT LLC により製造されている。そのようなアクティブ画素画像アレイセンサは通常、ウィンドウを形成する所定数の画素、例えば、50X50のウィンドウで供給されている。
そのようなアクティブ画素画像アレイセンサに関する幾つかの重要な制御の研究がある。1つの重要な研究は一般にウィンドウ機能として公知なものに関連している。ウィンドウ機能は各種目的のため画像アレイセンサ内のサブウィンドウの画像を制御する能力に関連する。例えば、アクティブ画素画像アレイセンサはヘッドライト及びテールランプのために使用されてもよく、ヘッドライトの自動調光システムの一部分として検知する。より詳細には、本発明の1実施例では、画像センサは異なるフィルタを通る1つのフレームで、2つの実質的に同一サイズで独立して配置されたサブウィンドウに分割され、一方はヘッドライトを映像するもので、他方はテールランプを映像するものである。そのような適用において、1つの行は第1サブウィンドウから走査されてもよく、相当する行は他のウィンドウから走査される。処理はサブウィンドウのすべての行が走査されるまで繰り返される。
ウィンドウ機能はまたシステムのデータスループットを制御するために使用されてもよい。例えば、上述した適用では、道路標識及び街灯等のノイズを識別するために必要である。そのような適用では、AC電力線間電圧がある場合には、調和解析が決定されるために使用されてもよい。そのような適用では、最強の調波は米個の60Hz線間電圧で通常120Hzであり、欧州の50Hz線間電圧で100Hzである。フーリエ級数分析を使用し、100及び120Hz周波数の構成部品を検出するため、データは通常いずれかの周波数の2倍以上の割合でサンプリングされなければならず、1/50秒及び1/60秒の完全なサイクルに均等に分割する。例えば、6個の均等に間隔をあけたサンプルは50Hz線周波数のため秒当たり300サンプルの割合で取られ、60Hz線周波数のため秒割合当たり同一の300サンプルで取られる。秒割合当たり300サンプルはしばしばビデオカメラで使用される秒フレーム割合当たりの通常の30サンプルの約10倍である。過度に高いデータスループット率を避けるため、フレームサイズは比較的小さいサイズ、例えば、2画素単位と同程度に限定されてもよい。
ウィンドウの特徴はシステムの配列のために使用され得る。例えば、接近する車両のヘッドライトの接近を検出する有益な視野は高度で約10°、幅で30°である。しかし、そのようなシステムでは、車両内のセンサの光学的配列に幾つかの誤りを許容するのが好ましい。例えば、13°の高度の視野を有するセンサは3°の調整不良を許容し、適切な10°の高度範囲を見るように供給されていてもよい。ウィンドウの特徴は要求された10°の視野を走査された縮小、例えば、機能にとって画像処理データスループットの20%よりよくさせる。特に、適切な視野を得るため、システムが取付けられた後、較正測定が取られてもよい。視野はまた接近するヘッドライトの画像の平均位置、又は制御された車両自体のヘッドライトにより通常照らされた道路の一部分の平均に基いていてもよく、接近する車両に基いてシステムに制御車両のヘッドライトを減光させ、その車両のヘッドライトは通常、制御車両自体のヘッドライトにより照らされた道路部分の上部範囲の上方に数度だけの高度で現れる。
アクティブ画素画像アレイセンサを利用する適用における別の重要な考察は装置の感度を制御する能力である。一定の適用にとって、画像アレイセンサの飽和を避けるためシステムの感度を調整することが必要なことがある。例えば、そのような適用では、接近する車両からのヘッドライトの画像は視野の明るい地点として現れる。画像アレイセンサの感度が高すぎて設定された場合には、ヘッドライトを映す特定の画素は飽和状態となり、現実の感度は決定されることができない。そのような状態では、ヘッドライトの画像の感度は接近する車両の距離の一般の表示器であるので、そのような情報は失われる。第2に、接近する車両からのヘッドライトの明るい画像はシステムによい表示となり、検出された画像は照らされたり、又は車両自体のヘッドライトにより照らされた物体から反射されることよりむしろ接近する車両からである。
それ自体、そのようなアクティブ画像アレイセンサのための動作モードと同様にウィンドウサイズの改善した制御を提供する必要がある。動作調整の感度及びモードに加えて、フレーム読取りの繰返しタイミング及び読取られるフレーム数のような他のパラメータはまた制御される必要がある。第3に、重要な考察はかなり迅速にそのような変化をさせる能力である。
そのようなシステムの別の重要な考察はそのような制御回路のためのかなり限定された空間である。例えば、ヘッドライトの自動調光システムはバックミラーを有する取付けブラケットを共有するハウジングに配置されているのが好ましい。そのような適用では、空間はかなり限定されている。その上さらに、制御回路において、回路の構成部品数を減少することは常に好ましく、かなりコストを削減する。例えば、上述したようなアクティブ画素画像アレイセンサはCMOS技術に基づいている。したがって、マイクロコントローラ自体と同様に画像アレイセンサで集積可能な回路を開発する必要がある。
従来技術に伴う各種問題を解決することが本発明の目的である。
さらに、画像アレイセンサのための制御システムを供給することが本発明のさらなる目的である。
さらに、画像アレイセンサとマイクロコントローラの間の通信を制御する制御システムを供給することが本発明のさらなる発明である。
さらに、アクティブ画素画像アレイセンサ等の画像アレイセンサの各種機能を制御するための制御回路を供給することがさらなる目的である。
要約すると、本発明は画像アレイセンサを制御すると共にシリアル通信インターフェースを介して画像アレイセンサとマイクロコントローラの間の通信を制御する制御システムに関する。制御システムはデータスループットを減小するため他のパラメータと同様のウィンドウ機能、動作モード、感度等の画像アレイセンサの各種特性を有効に制御することができる。本発明の重要な特性は、制御回路が比較的少数の出力ピンを有するCMOSにかなり容易且つ有効に構成されることができ、マイクロコントローラと同様に画像アレイセンサに基いて制御回路にCMOSをかなり容易且つ有効に集積させ、部品数を減少させ、したがって、システムの全体コストを減少させるという事実に関連している。
本発明は、上述したように、アクティブ画素画像アレイセンサ等の画像アレイセンサを制御するための制御システムに関し、例えば、PHOTOBITフォトダイオードの画像アレイセンサであり、マイクロコントローラと比較的有効なシリアル通信インターフェースを供給する。システムはフォトダイオード画像アレイセンサに関連させて説明及び示されているが、本発明の原理はまた、上述したように、例えば、フォトゲート型の画像アレイセンサ等の他の画像アレイセンサにも適用可能である。後述する制御システムは現在のCMOS画像アレイセンサ及びマイクロコントローラと集積させて適応される。マイクロコントローラと画像アレイセンサの間のシリアル通信インターフェースは比較的低いピンカウントデバイスを供給する。例えば、実施例は制御論理、プログラマブル行、列及びタイミングコントローラ、フォトアレイセンサ及び付随のバイアスネットワーク、図9のブロック1,2,3及び4に示された増幅器及びアナログデジタルコンバータを集積してもよい。これらの機能の集積は主要の別のブロックとしてマイクロコントローラのブロック5にだけ残されている。接地ピン、V+供給ピン、発振器入力ピン、及びマイクロコントローラへのシリアルインターフェース用の3つのピンは要求されるすべてのピンとなってもよい。診断機能用のV−供給及びシリアル出力ピンでさえ、これは8個のピンだけ要求する。
本発明による制御システムは図9から図12gに示されている。本発明による制御システムの例示の適用は図1から図8に示されている。しかし、本発明の原理はそのような適用に限定されないことは認識されるべきである。特に、本発明による制御システムは画像アレイセンサの適用で実質的に使用されるように適応され、ウィンドウサイズ、フレーム及び上述した各種他のパラメータ等の1以上の画像アレイセンサは制御される必要がある。
(ヘッドライトの自動調光システム)
ヘッドライトの自動調光システムは運輸省(DOT)規則によりヘッドライトの自動調光を供給するように適用され、3°で40000カンデラ、6°で32050カンデラ、9°で1500カンデラ及び12°で750カンデラの強度を供給する。そのような放出パターンの例は図1に示されている。本発明で使用されるヘッドライトの自動調光システムは図2から4に示されているような光学システム及び図5から8に示されているような画像処理システムを含んでいる。他の車両の運転者を過度の光輝に晒すことなく、最長の適度な時間、高ビームのヘッドライトを残存させるため、本発明によるヘッドライトの自動調光システムは制御車両に関する他の車両の水平角度位置と同様に距離の関数として車両の高ビームへッドライトを制御する。以下により詳細に説明するように、光学システムは他の車両のヘッドライトとテールランプとを識別するように適応されている。他の車両のヘッドライトとテールランプからの光線は画素センサアレイで空間的に分離され、道路標識及び雪等からの反射のような他の周囲の光源に関するヘッドライトとテールランプとの増加した識別を供給する。光学システムは入射光源の水平及び垂直の両方の位置を光学システムの視野内に決定させる。画像処理システムは画素を処理し、制御車両に関して別の車両の距離及び水平角度位置の関数としてヘッドライトの自動制御を供給する。そのように、本発明によるシステムは、高ビームヘッドライトをできる限り長く残存させることにより車両の孔ビームヘッドライトの最適制御を供給するように適応され、他の車両の運転者が過度な量の光輝に晒されるのを防ぐ。
(光学システム)
図2から4を参照すると、光学システムは1対のレンズ103及び104、レンズホルダ105及び画像アレイセンサ106を備えている。図2及び3に最良に示されているように、レンズ103及び104はアレイの異なる部分に同一の視野を映させるために垂直に間隔を置いている。レンズ103,104はデバイスの視野内の光源に対し比較的小さくなっている。
レンズ103は600nmより大きい波長の光を送ると共に画像アレイセンサ106の片側のテールランプから赤色光線101の焦点を合わせるための赤色フィルタ染料で形成されてもよい。赤色フィルタ染料は可視スペクトルの青色端ですべての光線をレンズ103に吸収させると共にスペクトルの赤色端で光線を送る。そのように、テールランプからの光源はレンズ103を通って十分に伝送されている間、ヘッドライト等の非赤色光源から送られた光量は非常に減少される。そのように、画像アレイセンサ106に映されたテールランプからの光線の相対輝度は非常に増加される。
レンズ104は600nm以下の波長を有する光を送るための藍色が染み出た染料で形成されてもよい。レンズ104は画像アレイセンサ106の他方側に光線の焦点を合わせるために使用される。藍色が染み出た染料は上述した赤色フィルタに対し補色の効果を有している。特に、藍色が染み出た染料は、スペクトルの赤色端から光を吸収している間に可視スペクトルの青色端からの光を送る。そのように、ヘッドライト等の光源からのほとんどの光は、テールランプから放出のすべての光が実質的に遮られている間にレンズ104を通って送られる。
ヘッドライト及びテールランプの両方は赤外線の実質量を放出する。約750nm以上の波長で光を抑制するフィルタ染料又は別のフィルタを有するレンズを使用することにより、ヘッドライト及びテールランプにより送られた赤外線はレンズ103及び104によって実質的に遮られるだろう。赤外線光を除去することにより、赤色フィルタを通って映される赤色光と藍色フィルタを通って映される赤色光は実質的に増加されるであろう。
レンズ103及び104のための赤色及び藍色染料の使用は単なる例示である。レンズ103及び104のフィルタ特性はデバイスの感度を特定の光源に最適化するために選択される。例えば、新しい車両のヘッドライト又はテールランプは異なるスペクトル、例えば、高密度の放電ヘッドライト及び異なるフィルタ特性を必要とする光放出ダイオードのテールランプを有する別の光源で置換されてもよい。ヘッドライト及びテールランプのスペクトル特性により、透明レンズ103及び104は別の色付フィルタで使用されてもよい。
レンズ103及び104はアクリル性球状レンズで形成されてもよい。二者択一的に、レンズ103及び104は色分散及び球状レンズにある球状収差を最小にするために球状レンズとして形成されてもよい。球状及び非球状レンズの両方で形成された復号レンズもまた考えられる。
単体レンズはまた別のレンズ103及び104の代わりに使用されてもよい。単体レンズの使用は全体又は一部分の色付き画像アレイセンサに視野を映すために使用されてもよく、アレイの個々の画素に色素を含んでいる。
図2及び3に最良に示されているように、2つのレンズ103及び104と画像アレイセンサ106の間の水平距離は僅かに異なる。2つのレンズ103及び104のオフセットは、材料の屈折率がそれを通る光の波長で変化するという事実の結果として創られた色分散を補償する。2つのレンズ103及び104は可視スペクトルの異なる部分を送るので、レンズ103及び104と画像アレイセンサ106と間の距離はレンズ103及び104のそれぞれにより送られた光の帯域の分散を最小にするために最適化される。
上述したように、レンズ103を通って送られた光線101は画像アレイセンサ106の一方側に映され、レンズ104を通って送られた光線102が画像アレイセンサ106の他方側に映される。レンズ103及び104を通って送られる光線のそのような空間の分離を供給するため、レンズホルダ105はカットアウト107を供給され、光吸収材料で形成又は被覆されるのが好ましい。これらのカットアウト107は赤色レンズ103を通って送られた所望の最大垂直角度を超える光線が光線102のため確保された画像アレイセンサ106の一部分に映されるのを防いでいる。逆に、カットアウト107はまたレンズ104を通って送られた光線が光線101のため確保された画像アレイセンサ106の一部分に映されるのを防いでいる。
光学システムの視野は画像アレイセンサ106に対するレンズ103及び104とカットアウト107の構成により規定される。例えば、垂直方向に10度で水平方向に20度の例示的視野は以下に示す構成により作り出されてもよい。特に、そのような視野にとって、レンズ103及び104は小部分のカットアウトを有する1.5mmの直径で選択され、レンズ103,104をそれらの中心が1.0mm離れるように配置させる。レンズ103は画像アレイセンサ106から4.15mmに配置され、レンズ104は4.05mm離れて配置されている。レンズ103及び104の前後表面の半径は4.3mmで、0.2mmの厚さを有している。
図3及び4に最良に示されているように、環状カットアウト108はレンズホルダ105に形成されている。通常矩形の一対の孔110は後壁112に形成されている。後部の孔110は水平方向で1.6mmであり、垂直方向で0.8mmである。図4に最良に示されているように、カットアウト107は後部の孔110から前部のカットアウト108の直径に先細になっており、上述した視野を供給する。
したがって、上述した構成は所望の水平及び垂直視野外の光を調節することができる。特に、図3はシステムが垂直視野を超える角度で入射した光線をどのように調節するかを示している。図4は水平視野内の画像アレイセンサに映された光線を示している。
画像アレイセンサ106は例えば、米国特許No.5,471,515に開示され、ここにインコーポレイテッドバイリファレンスされ、カリフォルニア州ラ・クラセンタのPhotobit LLCから入手可能なCMOSアクティブ画素画像センサアレイであってもよい。CMOSアクティブ画素画像センサは同一のチップに他のCMOS電子部品を集積する能力と同様に比較的高い感度及び低い電力消費を供給する。画像アレイセンサ106は50X50の40μmの画素アレイであってもよい。画像アレイセンサ106の画素数はレンズ103及び104が投影する領域内にすべての画素が入るとは限らないように選択される。余分な画素は予想画像位置をオフセットすることにより機械的調整不良の簡単な修正を可能にする。
画像アレイセンサ106は視野内の光源に関しての空間情報を供給する。アレイのサイズは限定されず、物理的及び経済的制限により選択及び命令されてもよいが、アレイに存在する画素数は十分な空間の細部を得るために選択される。画像アレイセンサ106は数百フィートのテールランプを正確に検出するように敏感でなければならない。そのような感度はフレーム周期の間にアレイのフォトサイトが光に晒される時間の長さを長くすることにより達成されてもよい。フレーム周期はアレイを入手でき、視野に入る別の車両を画像処理システムに検出させるのに十分短い時間で画像処理システムにフレームを運ぶように選択される。短時間周期はまた集積周期の間のフレーム内の動作量を制限し、したがって比較的より正確な瞬間画像を創造する。
画素アレイの使用はまた他の利点を提供する。例えば、上述したように、フレームを入手する光集積時間は変更可能である。そのような特徴は最適の結果を提供させ、暗さの程度を変化させる。画像アレイセンサの別の重要な特徴はアレイまたは個々の画素内の画素のサブセットを使用する能力である。そのように、ウィンドウサイズが減少されると、読出し率は増加する。そのような特徴はシステムに街灯等の周囲の光源を識別させる。特に、そのような特徴はシステムをフレーム内の光源に配置させ、60Hzの数倍の割合で光源の幾つかのサンプルを入手する。特に、サンプルが120Hzの輝度変調を示した場合には、光源は街灯又は60HzAC電源から電力を供給された他の光源になるであろう。光源が変調されない場合には、光源は車両のDC電源により電力を供給されるであろう。
画像アレイセンサの別の潜在的利点はそれが車両直前の視野をより高い画素の解像度により映させることである。したがって、システムは制御車両に対する車両の角度が増加すると、有効な画素の解像度が減少するように構成されてもよく、それにより、それらの領域の処理時間の長さを減少させる。そのような構成は道路の縁の静止した反射物体からの光源に対するデバイスの感度を減少させる。
画像アレイセンサは製造されることができ、画素が映す視野内の領域の関数として画素ピッチが変化される。例えば、車両の中心の3度内の水平角度による空間を映す画素は10μm画素ピッチを供給されてもよい。3度と6度の間の水平角度を映す画素は20μmの画素ピッチで供給されてもよく、60度以上のそれらの画像角度は40μmピッチで供給されてもよい。そのような構成は検出領域を増加しないが、細部を解像する能力は比較的長い距離でテールランプのその相対サイズを考慮する重要な局面を増加させる。例えば、200フィートの距離での41/2インチの直径のテールランプは0.11度以下の角度に対している。50X50の画像アレイセンサが20度の視野を映すために使用された場合には、テールランプは画素により映された全体領域の約5.7%に対している。
テールランプはその周囲環境より比較的明るいが、テールランプにより与えられた赤色光はそのような距離で周囲の光により薄められる。所定領域の赤色光の量を同一領域の非赤色光の量と比較した時にそのような要素は重要となる。比較された空間領域は光源に対して大きい時、赤色光の割合は減少する。比較により、10μmの画素が40μmの画素の代わりにアレイ106の中心で使用される場合には、テールランプは全体領域の90%に対し、16倍の改善される。
(画像処理システム)
画像処理が図5から8に示されている。画像処理システムは画像アレイセンサ106、マイクロプロセッサ204、例えば、モトローラ型HC08、ヘッドライト制御ユニット205及び一対のヘッドライト206を備えている。上述したように、アクティブ画素アレイセンサは画像アレイセンサ106のため使用されてもよい。そのようなアクティブ画素センサは画像アレイ201及びアナログデジタルコンバータ(ADC)202を備えている。タイミング及び制御回路203はADC202と同様に画像アレイセンサ201を制御するために使用され、集積時間、読出しタイミング、画素選択、利得オフセット及び他の変数を制御する。マイクロコントローラ204は画像アレイセンサ201により収集されたデータを分析するために使用される。マイクロプロセッサ204は、例えば、順番にヘッドライト206を制御するリレイとして実行する、ヘッドライト制御装置、在来の装置と通信している。順番に、ヘッドライト制御装置205はヘッドライト206に加えられた電圧を変え、高ビーム又は明るいランプを入り切りさせる。
ヘッドライト制御のフローチャートが図6に示されている。システムは絶対光の測定、ADCパラメータ又は他の関数の調整のため時々中断して連続サイクルで稼動する。
各サイクルの始めには、ブロック301でのように、2つの画像がレンズ103及び104を通って取得される。ステップ302において、レンズ103及び104からの画像は分析され、テールランプを検出する。別の画像はレンズ104を介してステップ303で取得される。レンズ104を介して取得される画像は、より低い光のレベルの反射及び不快な光源を拒絶しながら、接近するヘッドライトを検出するのに十分低い利得で取得される。画像が分析された後、システムは画像の非常に明るいをチェックし、ステップ305で制御車両の前で車が回転した場合のように、視野内の車両のヘッドライト又はテールランプの突然の出現を示す。明るい光が検知された場合には、装置はヘッドライト206を直ぐに減光し、後述するように時間検証を回避する。その後、サイクルは繰り返される。明るい光がない場合には、システムはステップ307に進み、画像にヘッドライト又はテールランプがあるかどうかを決定する。
フレームでのヘッドライト又はテールランプの有無を確認するため、調整しないカウンタと調整するカウンタが使用される。明るい光が検出された時、上述したものを除いて、ヘッドライト206を調節又は調節しないようにヘッドライト制御装置205に信号を送る前に、これらのカウンタは連続フレームからのテールランプ又はヘッドライトからなのか特定の光源の検証を供給する。検証を供給することにより、装置内又は画像内の異常はヘッドライト206疑似の動作を起こすことはないだろう。
調整するカウンタはヘッドライト又はテールランプを有するフレームが検出される毎に増分され、作用し始める要求された連続フレームの数が達成されるようになる。調整するカウンタはクリアフレームが処理される毎に0に設定される。調整しないカウンタはクリアフレームで増分され、ヘッドライト又はテールランプを含む各フレームで0に設定される。調整又は調整しないことを要求された連続フレームの実際の数は装置の全体速度により決定される。フレームが確証のために使用されるに連れて、システムはノイズ及び異常を受け難くなる。しかし、装置は迅速に反応して効果的になり、確証フレームの数は比較的低く保持される。ヘッドライト又はテールランプがステップ307で検出される度に、調整しないカウンタはステップ308で0に設定される。ステップ309で、システムはヘッドライト206の高ビームがオンかどうかをチェックする。高ビームがオフの場合には、更なる動作は要求されず、サイクルはステップ317により示されているように繰り返される。高ビームがオンの場合には、調整するカウンタはステップ310で増分される。調整するカウンタがステップ310で増分された後、調整するカウンタがヘッドライト206を減光するために要求される連続フレームの数に届いた場合には、ステップ311でシステムがチェックされる。その場合には、システムはステップ306に進み、ヘッドライト206を減光し、調整するカウンタと調整しないカウンタの両方をリセットし、サイクルを繰り返す。そうでない場合には、システムはサイクルを繰り返し、ステップ317に進む。
ステップ307で、画像にヘッドライト又はテールランプがない場合には、調整するカウンタはステップ312で0に設定される。その後、ステップ313で、システムは高ビームがオンかどうかを決定する。高ビームがオンの場合には、システムはステップ317でサイクルを繰り返す。ステップ314で、明かりがオンの場合には、調整しないカウンタは増分される。調整しないカウンタが増分された後、システムは調整しないカウンタが高ビーム206を作動するのに要求される連続クリアフレームの数に達したかどうかをステップ315でチェックする。その場合には、高ビームはステップ316でつけられ、サイクルは繰り返される。調整しないカウンタが明るいヘッドライトを作動するために要求される数以下の場合には、システムはステップ317でサイクルを繰り返す。
テールランプ処理のためのフロー図が図7に示されている。以下でより詳細に説明するように、テールランプ等の物体を識別する主な方法はレンズ103を通る画素のグレースケール値をレンズ104を通って映された同一空間を示す画素のグレースケール値と比較することを含んでいる。レンズ103を通って映された画素の値がレンズ104を通って映された画素の値より著しく高い場合には、光源は赤色光であると決定される。決定に加えて、光が赤い場合には、システムはまた画素のグレースケール値がしきい値以上であるかどうかを決定することにより光がテールランプであることを決定する前に赤色光の輝度をもチェックする。当技術分野で公知なように、光源の輝度は観察者からの光源の距離の二乗で変化する。そのように、先行する車両の距離の概略の決定はヘッドライトを減光する適当な時間を決定するために行うことができる。
しきい値は各種方法で形成されてもよい。例えば、予め決められた定数又は現在の画像センサ及びADCの設定の関数である数とすることができる。しきい値はまた全体が沿うの平均画素輝度の要素としてしきい値を計算することにより決定されることができ、周囲の光源を変えることにより発生する変動を除去するのに役立つであろう。さらに、画素値は関心の画素の隣接領域の画素の平均に比較されてもよい。この局所平均方法は画像内の比較的大きく適度な明るさの地点が車両の光源として見られるのを防ぐ。より詳細には、遠いテールランプは1以下の画素に対し、したがって適度な輝度を有するだけである。適度な輝度はおそらく大きい物体からの反射により発生される。多数の画素に対する近接のテールランプは周囲の画素より明るい飽和中心を有し、同一の方法にそれらをも検出させる。
しきい値はまたルックアップ表又は形成を介して空間的にしきい値を変えることにより決定されてもよい。しかし、しきい値は減光がDOT標準により許容された最も暗いテールランプを適切に生じさせるように決定されるべきである。遠い車両は制御された車両の高ビームの最も強い部分に晒され、したがって図1に示されているように制御車両の直前でだけ減光を必要とされる。したがって、比較的低いしきい値が制御車両の直前で映された光源のため選択され、制御車両の直前にない光源のためにより高いしきい値が選択されてもよい。例えば、図1に関連して説明されているように、中心の左右3度の視野を映す画素のしきい値は車両直前の赤色光のためのしきい値の輝度の約4倍で6度の車両のための輝度の12倍の画像アレイセンサに入射する光レベルに一致すべきである。そのように空間的に変化するしきい値は制御車両の縁の領域に対しシステムを敏感にしないことにより赤色反射物により生じた故障のテールランプ検出を除去するのに役立つ。
同様のアプローチが中心の上下の空間及び角度の画像領域の画素のためのしきい値を変えるために取られることができる。しかし、車両は道路の盛り土及びこぶのため垂直方向にもっと頻繁且つ速く動く傾向があるので、車両角度に対するテールランプの感度を決定する時には、より連続的なアプローチが取られることがある。そのため、比較的厳しい垂直しきい値を指定して車両が数度上下移動する時に明るいヘッドライト206を入り切りさせてもよい。
光源がしきい値又はその近くでグレースケールを有している時に、ヒステリシス乗算器がしきい値に適用され、ヘッドライト206の振動を防止してもよい。したがって、明るいヘッドライト206がオフの場合には、しきい値はすべての画素のためより低くなり、最も弱いテールランプが画像にある場合でさえ、明るいヘッドライトが戻るのを防ぐ。しかし、明るいヘッドライト206がオンの場合には、しきい値はより高くし、十分な輝度のテールランプだけが検出され、車が減光範囲内にありヘッドライト206を減光させるようになっている。
テールランプの検出に直面する最大の問題の1つは道路の縁及び郵便ポストの印として通常見られるコーナーキューブ反射物から反射された不快な赤色光である。上述した可変のしきい値方法は個のノイズの幾つかを除去するのに役立つ。しかし、車両が適当な角度で反射物に接近する時に赤色反射物をテールランプから識別するのは相対的に不可能である。幸運にも連続フレームを調査すると共に時間に関するこれらの物体の動作を調査することにより、そのような反射物は濾過されることができる。連続して数回、テールランプ及び時間に関する画像の位置を記憶することにより又はテールランプが配置される小さな関心領域を検知することにより、装置は右側の動作を捜すことができ、光源が反射物であるかどうかを決定する。さらに、制御車両が静止物体を追い越す速度は車両が動いている別の車両を追い越す相対速度より非常に大きい。したがって、物体の輝度の増加率は通常、別の車両に対するより静止反射物に対する方がずっと大きくなるであろう。右側の水平方向の動作と結合する輝度のこの変化率は検出した故障のテールランプの数を減少させる印として使用されることができる。
光源の空間動作を分析する計算のより単純な方法は光源が配置される局所関心領域の幾つかの連続領域を簡単にとることである。垂直及び水平方向の動作は先行する車両のテールランプにとって比較的ゆっくりである。画素をサンプリングしてテールランプがすべてのサンプルに存在するかどうかを連続して数回調べることは画像内を速く動く物体を十分に除去することができる。
テールランプ処理のためのフロー図が図7に示されている。最初、ステップ318で、システムは画素がテールランプウィンドウ内にあるかどうかを確かめる。特に、上述したように、赤色光は画像アレイセンサ106の半分に映されている。したがって、画素は画像アレイセンサ106の適当な半分内にない場合には、システムはステップ319に進み、別の画素に移動する。上述したように、画像がテールランプかどうかを確かめる2つの基準がある。第1の基準はレンズ103を通る画素画像のグレースケールをレンズ104を通って映された空間の同一領域のための対応するグレースケールと比較することに関連する。レンズ103を通って映された画素のグレースケール値がレンズ104を通って映された対応する画素のグレースケールより著しく大きい場合には、テールランプを検出する基準の1つは満たされる。したがって、関心の画素がステップ318で確かめられたようにランプウィンドウ内にある場合には、レンズ103を通って映された画素のグレースケール値はステップ320において、レンズ104を通って映された対応する画素のグレースケール値と比較される。レンズ103を通る画素画像のグレースケール値がレンズ104により映された対応する画素よりn%大きくない場合には、システムはステップ319に進み、別の画素を調査する。そうでない場合には、システムはステップ321に進み、それが映す空間領域を基に特定の画素のためのしきい値を計算する。例えば、上述したように、画素のしきい値は画像アレイセンサ内のそれらの空間的関係に基いて変更されてもよい。
上述したように、テールランプ検出のための別の基準は隣接する画素に対する画素の輝度に関連する。したがって、ステップ322で、システムは隣接する画素の平均グレースケール値を計算する。ステップ323で、レンズ103を通って映された画素のための画素グレースケール値が隣接の画素の平均グレースケール値よりn%大きいと決定した場合には、システムはステップ324に進み、将来の参照フレームのためのテールランプリストに画素を追加する。そうでなければ、システムはステップ319に移動し、次の画素を動かす。ステップ325及び326で、上述したように、システムは検出された赤色光がテールランプか反射物かどうかを決定する。光が反射物であると決定された場合には、システムはステップ327に進み、次の画素に移動する。そうでなければ、ヘッドライトはステップ328で減光される。
ヘッドライト処理のためのフロー図は図8に示されている。ヘッドライト検出はテールランプ検出と同様である。主な相違はレンズ104を介して見られる画像だけが使用されることである。上述したように、画素の集積時間はより短く、ADCパラメータは画像だけがヘッドライト等の非常に明るい物体を示すようになっている。ほとんどの反射物はADCのゼロしきい値以下に十分下がる低く強い光源を有している。そのように、画素は隣接する画素の局所平均輝度に比較される。しきい値の空間的変動は視野の中心に一致する画素が画像の左の画素よりもっと敏感になるように設定されてもよい(左ハンドル領域)。しかし、これらのしきい値はヘッドライトから観察される放出パターン出の比較的広い変動のためテールランプのためのしきい値として同一程度まで空間的に変えるべきではない。さらに、接近する運転者に対するより多くのグレアの比較的高い可能性のため、ヘッドライトは同一方向で移動する車両からのテールランプが検出される場合より比較的もっと速く制御及び減光されてもよい。テールランプ処理回路と同様に、ヒステリシスはヘッドライトの循環を防ぐために追加されてもよい。
ヘッドライト検出のさらなる問題は、接近する車両間の距離の急速な減少から生じ、接近する車両が突然に制御車両の視野に入る時、例えば、コーナを曲がったり又は同様な状況の時に特に重要となる。この理由のため、さらなるフラッグが使用され、車両に明るいヘッドライトを直ぐに減光させ、光源が一定の絶対高レベルの輝度のしきい値以上である場合には確証を回避する。
ヘッドライト検出を悪化させる主な不快な光源は街灯及び電気的に照らされた通りのサイン等の頭上の光から来る。そのような不快な光源を除去する1つの方法はそれらの動作を分析することである。特に、すべての頭上の街灯は制御車両が移動すると画像の垂直上方に移動するであろう。この動作を分析することは幾つかの街灯を検出する有効な方法を供給する。不幸にも、遠いヘッドライトと画像の垂直上昇率は街灯が接近するまで大きくならないので、遠い街灯ほとんど同一高度角度となることが分かる。しかし、上述したように、街灯はAC制御され、したがって120Hzの輝度変調に晒される。DC電源により電力を与えられたヘッドライトはこの特性を示さない。したがって、画像アレイセンサ106は少数の画素を使用することができ、ウィンドウで幾つかの速い連続した読み出しをとっている。ウィンドウが十分に小さい場合には、ウィンドウは秒毎に数百フレームを読み出すことができる。一度、光源が画像で識別されると、幾つかのフレームは240Hz又はそれより高い割合で読み出される。その後、これらの読み出しは輝度変調を検出するために分析される。変調がある場合には、光源はAC電源から生じ、無視されることができる。二者択一的に、フォトダイオードはローパスフィルタと関連して使用されることができ、変調されていない光にAC変調された画像の光の割合を決定する。光源の重要な部分がAC変更された場合には、画像にある光源はAC光からであると仮定される。そうでなければ、光源はDC電源からであると仮定される。
ヘッドライト処理のためのフロー図が図8に示されている。最初、ステップ329で、システムは画素がヘッドライトウィンドウにあるかどうかを決定する(すなわち、画像アレイセンサ106がレンズ104を通って映された光線のために確保したその部分)。そうでなければ、システムはステップ330に進み、次の画素を調査する。さもなければ、システムはステップ331で画素を調査し、画素が上述した120Hzで変調されるかどうかを決定する。その場合には、光源は街灯であると仮定され、したがって、システムはステップ330で次の画素に進む。画素が120Hzの輝度変調に晒されていない場合には、その後、システムはステップ332で隣接する画素の平均グレースケール値を計算する。ステップ333で、システムはそれが映す空間領域を基に特定の画素のためのしきい値を決定する。次に、システムはステップ334で、画素のグレースケール値を絶対高レベルのしきい値と比較し、例えば、どの車が制御車両の視野に突然入ってくるかどうかを決定する。その場合には、システムはステップ335に進み、フラグを設定し、直ぐに減光させる。そうでなければ、システムはステップ336に進み、画素のグレースケール値が隣接の画素の平均よりn%大きいかどうかを決定する。そうでなければ、システムはステップ330に戻り、次の画素を調査する。そうでなければ、システムはステップ337に進み、将来の参照フレームのためヘッドライトリストに画素を追加する。
システムはステップ338と339で上述したように光源を調査し、光源が街灯かどうかを決定する。光源が街灯でないとシステムが決定した場合には、システムはステップ340に進み、フラグを設定し、ヘッドライト206の減光させる。光源が街灯であるとシステムが決定した場合には、システムはステップ341に進み、次の画像に移動する。従来の車両のランプシステムは明るいランプをオン又はオフのいずれかにする選択を有している。本発明は視野内の他の車両の距離に基いて変化する輝度にライトが作動するヘッドライトシステムの使用に容易に適用可能である。そのような実施例では、ヘッドライトの輝度は各種技術により変えられてもよく、全体の輝度レベルを減少又は増加するためヘッドライトのデューティサイクルを変調することを含んでいる。
可変輝度のヘッドライトはまたよりよいノイズ濾過となる。特に、光源が検出され、車両の制御されたヘッドライトの輝度を減少させる度に、他の画像が検出され、これらの光源の輝度が同様の量減少されたかどうかを決定する。そうである場合には、システムは光源が車両のヘッドライトからの反射であることを決定することもできるであろう。そのような情報はフィードバックとして使用されることができ、比較的有効な手段を供給し、制御車両のヘッドライトの反射により生じた不快な光を除去する。そのような実施例では、上述された輝度のしきい値は使用されないだろう。より詳細には、画像内の最も明るいヘッドライトとテールランプの輝度が使用され、制御車両のヘッドライトの輝度を決定する。画像内のヘッドライト又はテールランプが明るくなるに連れて、制御されるヘッドライトは減光されるようになる。
(画像アレイセンサ制御システム)
本発明による制御システムは上述した例示の適用のため柔軟なウィンドウ機能を経済的に実行するように適用されている。例えば、上述した例示の適用において3つの重要な考察がある。第1に、画像アレイセンサの動作のモードと同様にウィンドウサイズと方向付けを制御できることで大きな有用性があり、例えば、上述したように、二重ウィンドウと単一ウィンドウの動作モード間を切り換える能力である。第2に、感度、フレーム読み出し繰り返しタイミング、及び読み出すフレーム数等の他のパラメータは制御されるためすべて必要である。第3に、上述した例示の適用では、実際はすべての新しい読み出しは以前の読み出しからの設定において主な変更を必要とし、設定を急速に変更することができなければならない。そのような適用において動作設定で頻繁に非常に多くの変更の必要があるとしても、各読み出し前に書かれる設定のすべてを要求することによりオーバーヘッドはほとんど追加されない。これはまた、時間の掛かるアドレス伝送及びバス構造のさらなる複雑さ及び画像アレイ制御回路のアドレスデコーディングの必要性を除去する。
上述したように適用の制御システムのため多数の他の考察がある。第1に、コストを最小にすると共に簡潔な制御回路を供給するため、回路の主要構成部品のすべてとまではいかないが幾つかを単一集積回路に集積できるのが望ましい。本発明の1つの特徴によれば、後述するような制御回路はマイクロコントローラへのシリアルインターフェースを備え、マイクロコントローラは画像アレイセンサと同一集積回路に集積されることができると共に画素の読み出しをデジタル化するためのアナログデジタルコンバータ等の各種他の構成部品に集積されることができる。結局、マイクロコントローラでさえ同一の集積回路チップに集積されてもよい。
そのような制御回路の別の考察は、画像アレイセンサに要求される光学ウィンドウはパッケージコストを増加させ、電気接続はまた従来の集積回路パッケージより光学ウィンドウのパッケージにおいて供給するのはより高価であることである。これらの理由により、映像チップとマイクロコントローラの間の低いピンのカウントシリアルインターフェースを使用するのが大いに好ましい。同一の双方向性シリアルインターフェースを使用し、画像センサコントローラへ命令を発行し、戻されるデジタル化された映像情報を読み出すのはさらに好都合である。共通シリアルパス、シリアルレジスタ及びマイクロコントローラへのシリアルポートとインターフェースするタイミングを保持し、共通シリアルアーキテクチァと命令をキューに入れ、最終的に、要求された映像動作を実行する命令データを処理するためのレジスタを使用し続けるのはさらに好都合である。上記シリアル命令処理のため使用される同一クロックに画素の読み出しの連続する近似のステップを結合し、マイクロコントローラに戻る連続する変換ビットを同時に送るのはさらに好都合であり、同一画素の変換のため連続する近似ステップが依然として処理されている間、このビット式伝送は始まる。製品映像コントローラは技術状態を適用する特注回路及び設計を必要とし、シリコン領域のコストはまた少なくとも最初はかなり高くなるだろう。したがって、それは画像アレイをマイクロコントローラに結合し、適度なシリコン領域で実行される画像検知処理を制御する論理にとって重要である。これらの及び他の設計目標を満たすため、新しいシリアルアーキテクチャが使用され、マイクロコントローラと直接インターフェースし、頻繁に変更される命令を効果的に記録し、処理を実行し、かなり複雑なウィンドウの読み出し機能を制御する。
例示した適用において、命令データの9バイト(72ビット)はシリアルロード動作の間に1つの連続する隣接レジスタとして構成される9バイト長のシフトレジスタセグメントにシフトされる。幾つかの8ビット長レジスタのそれぞれは主要チェーンの値の1つに等しい、又はそれにより決定されたそれぞれの値に初期化されなければならないが、72ビットチェーンのブランチオフとして構成されている。本発明の1つの構成では、バイト式シリアル命令は8ビットのシフトレジスタセグメントの最初で最上位のビット第1から最下位のビット第1に変更される。これは使用されるマイクロコントローラが最上位のビット第1を送ると共に受け取り、連続する近似アナログデジタルコンバータは最上位のビット第1位を変換すると共に送る。一方、シリアル増分回路は最初に送られた最下位ビットを有していなければならない。2つの他の8ビットシフトレジスタでは、値はそれがシフトインされているように予め増分されている。したがって、より一般的な場合には、簡単なシフトレジスタ機能はさらなる処理ステップで増加され、特定のレジスタセグメントはシリアル入力値の処理導関数でロードされる。本発明の実施例では、アナログデジタル変換処理のタイミングはシリアル処理のタイミングと共通している。コンデンサ充電のバランスのアナログデジタルコンバータは同期され、実際にコントローラのシリアル処理のために使用される同一クロックにより作動されてもよく、変換の各連続近似ステップがなされている時にビットは共通のシリアルインターフェースを介してマイクロコントローラに送られる。これはさらなる同期、制御、及び2つの機能が同期されずに共に動作する時に必要となるバッファリング論理を省略する。
上述したように連続してロードされるデータは以下の情報を含んでいることが好ましい。第1フレームの最初及び最後の列数は含まれている。集積周期の始めに行のリセットを抑制し、集積周期の終わりにフレームの読み出しを抑制し、第2フレームだけ選択すると共に処理する別の選択を示すビットは含まれている。上述したように、ヘッドライトとテールランプ画像を処理するためフレームの外径当たりの二重ウィンドウが要求されない時にこれらの選択の最後は使用される。第1フレームの最初及び最後の行の数は含まれている。集積周期の始めでリセットされるフレームウィンドウの行と読み出されるフレームウィンドウの行の間のサイクル行オフセットを示す行位置もまたシリアルデータに含まれている。第1に対する第2フレームの行及び列オフセットはまた第2フレームが選択される時の使用のため含まれている。フレーム又はフレーム対の特定の行のリセットと特定の行の読み出しの間の0以上の更なるフレーム周期(例えば、0から255)の整数を挿入することによって、周期的な行オフセットにより供給されるもの以上の集積周期をさらに増加するように供給される。データはまたフレーム又はフレーム対を読み出し、命令を完成する回数を含んでいる。
集積周期の始めでのリセットを選択的に抑制する特徴又は読み出しが含まれ、集積前のリセット及び集積後の読み出しは別の動作として取扱われることができる。一度に全体画像の読み出しのため要求されるブロックサイズはマイクロコントローラのメモリ能力を超えてもよい。読み出し動作は読み出される行だけをリセットする。低い光レベルにとって、比較的長い集積周期を使用する必要がある。限定されたマイクロコントローラのメモリはブロックに割り込む画像を必要とし、それぞれの処理は利用可能以上のメモリを必要としない。別のリセット及び読み出し命令なしで、これは非常に精巧な制御を必要とし、全集積周期を待ち、各ブロックを処理することを必要にさせるであろう。低い光状態におけるセンサの有効な使用はできるだけ多くのセンサ領域で、できるだけ多くの時間に亘り光りを集めることを要求する。長い集積周期の間、タイミングは通常は重要ではないので、利用可能な制御モードが可能な場合には、マイクロコントローラの制御の下、集積は可能である。この能力はこの理由のため供給される。その上さらに、非並行の行のウィンドウは、集積周期の始め出のリセット、又は読み出し機能の一部としてのリセットのいずれかの間、それらの範囲外に行をリセットしないので、フィールドは時差的スケジュールにリセットされる非並行の行出ウィンドウに割り込んでもよく、読み出し機能を抑制するがリセット機能を可能にする別の命令を使用する。その後、リセット機能を抑制すると共に読み出し機能を可能にすることにより許容の集積周期の後、マイクロコントローラはこれらのブロックそれぞれの連続する読み出し及び処理を開始してもよい。二重又は単一のフレームモードが選択されてもよい。この方法では、多数のブロックを処理する集積周期はコントローラ回路の複雑さの最小限の増加で並行されてもよい。上記シーケンスでは、実際の集積周期はマイクロコントローラにより決定され、単一又は二重のフレームの単一読み出しサイクルが通常、選択されるので、各命令の集積周期は通常、最小値に設定される。
示された実施例は例えば、上述されているように、フォトダイオードの画素センサのアレイとインターフェースすると共に制御するように構成される。一般に、行がリセットされる時に行のそれぞれのフォトサイトの電荷は放出される。その後、電子が光子ストライクとしてフォトサイトを自由にされる時に蓄積され、光レベルと集積時間の比較的広範囲の間、蓄積された電荷はほぼ集積時間と光レベルの積に比例するようになっている。したがって、上述したような集積時間はカメラとフィルムの露光時間に類似している。
読み出し命令データの受取りに引き続いて、制御システムは同一のシリアルインターフェースで応答するのが好ましく、連続してデジタル読み出しを伝送し、デジタル読み出しは命令により特定された各フレームのそれぞれの画素によって受け取られる光レベルを示す。この読み出しシーケンスは命令で特定された回数繰り返される。マイクロコントローラ、例えば、モトローラの68HC708XL36はダイレクトメモリアクセス機能を使用し、ダイレクトメモリアクセス機能はデータがフォトセンサからマイクロコントローラに伝送可能な割合を増加すると共に他の機能のためマイクロコントローラを自由にするために使用されてもよい。1つの欠点は特定のマイクロコントローラのダイレクトメモリアクセス機能が一度に256バイトのブロックに限定されることである。それぞれの画素の読み出しは8ビット値として符号化され、256バイトは256だけの画素からの読み出しを記憶することができる。降雨又はヘッドライトの調光器センサ用の二重フレームセンサのための公称64対64画素アレイで、例えば、60ビットが30度に一致した場合には、その後、10度対30度フィールドは1200画素を含み、対応する2つの色付き二重フレームは2400画素を含むだろう。このフィールドはブロックで読み出されると共に処理されなければならないことがあり、メモリの限界に達する前にマイクロコントローラの使用可能なメモリを超えるのを防ぐ。選択されたマイクロコントローラのダイレクトメモリアクセスの特徴を使用するため、データは256バイト以下のブロックの収集されることが必要だろう。1実施例では、各新しい行の始めで行の5つの連続する画素を伝送するために必要な時間に等しい間隔がある。データの1以上のブロックが特定の読み出し命令のために収集されなければならない時にダイレクトメモリアクセスの特徴を使用するため、ブロック長は行の境界と中断モードのブロック端が選択され、マイクロコントローラが受け取られる各ブロックの端部で中断されるように設定されるのが好ましい。その後、マイクロコントローラは5つの画素の間隔を有し、ダイレクトメモリコントローラを設定し、新しいデータブロックを受け取る。行の遅延時間の間、これは制御回路により使用され、行にリセットを発行し、その集積周期を開始し、読み出しのため行の画素からの電荷をコンデンサに伝送する。この処理は以下に続く回路説明に詳説されている。行間の5個の画素遅延周期は選択的に、幾つかの他の固定した遅延周期に変更可能又は変更されてもよい。しかし、この周期の間に実行されたすべての機能が毎回実行されないとしても、所定の読み出し動作のための行の遅延周期の間は一定の長さであるのが好ましい。一定の時間周期の利点は制御論理がフレームの読み出し間隔の計算のように複雑ではないことである。また、変化のパターンにより、可変周期は調和解析で問題を作り出す非周期のフレームの読み出しを繰り返させることができる。使用されるマイクロコントローラは選択的に、デジタル単一プロセッサ又は他のプログラム可能なデータ処理デバイスにより置換されてもよい。
図9を参照すると、本発明の使用のため画像アレイセンサとマイクロプロセッサを組込んだ例示の制御システムのブロック図が示されている。システムはプログラム可能な行−列及びタイミングコントローラ1、制御論理2、画像アレイセンサ3、増幅器及びアナログデジタルコンバータ(A/D)回路4及びマイクロコントローラ5を備えている。本発明は制御論理2及びプログラム可能な行−列及びタイミング制御回路1に関連し、画像アレイセンサ3を制御すると共にマイクロコントローラ5との双方向シリアル通信インターフェース6を供給する。当業者であれば分かるように、本発明を形成する制御論理回路2と同様にプログラム可能な行−列及びタイミング制御回路1はASICとして実行されてもよく、全体回路の次の部分、すなわち、マイクロコントローラ5、画像アレイセンサ3及び増幅器及びA/Dコンバータ回路4の1以上の部分で集積されていてもよい。
図10aから10cは図9に示されたブロック図の概略図である。図10aから10cに示されているように、本発明による制御回路は上述したように制御論理2及びプログラム可能な行−列及びタイミングコントローラ1を組込んでおり、例えば、ASIC XC4003Eとして実行されて示されている。
図12aから12bは図10bで示されているようにASIC XC4003Eのためのプログラムを生成するために使用されるトップレベルの概略図である。参照したより低いレベルの図と共に図12aから12bは、Xilinx社からUnited Libraryと組合せて、Viewlogic Systems社の1997年2月6日のWorkview Officeのバージョン7.31を使用して実行される。これらの図はXilinx Design ManagerのバージョンM1.3.7により処理されるネットリストを生成するために使用される。Xilinx Design Managerの構成プログラムにより生成されたビットストリームはASIC XC4003Eをプログラムするために使用されてもよい。図10bのAtmel AT17C65シリアルメモリはその電力が回路に最初に加えらる度にXC4003Eにプログラムを記憶すると共に自動的にダウンロードするように構成される。
図11a及び11bはレジスタ及びデータパスを示し、画像アレイセンサの命令データは画像アレイセンサの制御のため記憶されると共に操作される。レジスタの全体機能はセンサの二重ウィンドウの読み出しのために要求される行選択及び列選択のアドレスのシーケンスを発生し、読み出しシーケンスの制御を促進する状態信号を戻すことである。ブロック300と320の組合せはCSO6を通り列選択アドレスCSO0を生成する。ブロック330と340の組合せはRSO6を通り行選択アドレスRSO0を生成する。ブロック360はフレーム数をカウントし、フレーム数はセンサの集積時間を延ばすために追加される。最後に、ブロック370はフレーム又はフレーム対を読み出す回数をカウントし、命令シーケンスを完了する。
制御回路のため2つの通常の動作モードがあり、1番目はレジスタがデータの72ビット(9連続伝送バイト)で連続的にロードされる命令シリアルロードモードである。2番目の動作モードは命令実行モードであり、レジスタが再構成され、8クロックサイクルシーケンスのため選択的に使用可能にし、増分、ロードを実行し、アドレスの複雑なシーケンスを発生するために要求される機能とアレイセンサの制御されたウィンドウの読み出しを順序付けるために要求される出力を示す状態とを比較する。回路はアレイセンサにより復号される2進行及び列のアドレスを発生し、要求された制御及び読み出し機能を実行するため選択された行及び列の交点で適当な行及び画素を選択する。
ブロック300,320,330,340,360及び370はそれぞれのリスト301,321,331,341,361及び371に列挙され、(示される交点を除く)これらのブロックから出力される信号はそれぞれリスト302,328,332,342,362及び372に列挙されている。それぞれのブロックはクロック信号CLK、シリアルロード信号SLD及び信号LASTを受け取り、これは特別のブロック又はブロックのグループが使用可能にされる8クロック信号の1グループの最後がブロック330以外のすべてのブロックで使用されることを示している。グループSCOXF,LCXF,HCXF,SROXF,LRXF,ARXF,HRXF,IFDXF及びRFCXFの72の矩形ボックスのそれぞれはクロックを使用可能にする個別のクロック型フリップフロップを示している。これらのフロップフロップは通常すべて、72ビット(9連続伝送バイト)の命令語をロードする1つの長いシフトレジスタとして使用可能にされると共に構成される。8ビットのグループSCOXFを除いて、残りの8個のフリップフロップグループはそれぞれが使用可能なクロックを有する簡単な8ビットシフトレジスタである。ロードシーケンスの間、SCOXFは各バイトのビット1と介してビット7を受け取り,SCO1Fを介してSCO7Fにそれらの連続してシフトし、バイトでシフトする8クロックパルスの最後の前にビット7はSCO1Fにあり、ビット1はSCO7Fにある。その後、8クロックパルスの最後で、LASTが主張され、SRCVの最後に来るビット0をSCOOFに直接導き、SCO1FをSCO7F、SCO2FをSCO6F、SCO3FをSCO5Fで置換し、SCO4Fは変更させない。これはバイトのビットの順序を反対にし、連続するバイトは連続して最下位ビットの最初をSCOOFからLCIN及びLC7FのD入力に伝送される。これはブロック320,340,360及び370で実行される連続する追加関数にとって必要である。SCOXFグループは実行段階の間はその値がSROXFのように静的のままであり、その段階の間は使用不能であるので、最初に配置された。これはデータセレクタをさらに複雑にする必要性を削除し、データセレクタは最上位ビットの最初から最下位ビットの最初に伝送順序を反対にするために使用される。4個の低い順位SCO0からSC04は加算器307のより高い順位ビットのためSC04を繰り返すことにより拡張された記号である。バス303で伝送されたこの番号は第1に対する第2フレームの列オフセットであり、AC7を介してAC0で発生され、バス304で伝送される第1フレームのため加算器307で列アドレスに加算される2つの補数形式をサインされている。加算器の出力はバス305で伝送される。信号SSFが主張され、バス305を選択し、第2フレームオフセットは追加され、それをバス306にゲートする。SSFが主張されない時、信号304は列オフセット値を加算することなく306に直接ゲートされる。CSOXFは306からの行アドレスがCCLKのライジングエッジによりクロックされる。CSOXFレジスタのビット数は変更されてもよく、センサの画素の列数を適応させる。32から64の列および行はヘッドライト調光制御のために要求される数及び上述した湿度感知の適用となると予想される。行及び列の選択アドレスのビット数は行及び列のより小さい数のために減少され、或いは、他が変わる場合には、少しで256の行及び列まで適応するために8に増加されてもよい。より多くの行及び列は本発明の範囲内であるが、ワードサイズの他の調整を必要とするだろう。8このワードサイズで留める必要はないが、これはマイクロコントローラのメモリ及び連続して伝送されたデータの8ビットワードサイズのワードのバイトサイズに一致させるのに好都合である。
連続するロード段階の間、データセレクタ322は出力信号SCO0をLC7FフリップフロップへのD入力であるLCINに送る。データセレクタ324は同一のビット流れをAC7FのD入力に送り、データセレクタ325はLCOFの出力をHC7FのD入力に送る。命令ロード段階の完了で、8ビットレジスタLCXF及びACXFの両方は開始のアドレス又は第1フレームの低位列を含み、HCXFは最後のアドレス又は第1フレームの高位列を含んでいる。したがって、ACXFのカウントは最も低位列アドレスで始まり、それが高位列アドレスと一致するまで増分させる。次の画素のカウントで高位列アドレスが一致された後、低位列アドレスのコピーは再びACXFシフトされ、低位列アドレスから高位列アドレスへの増分カウントが繰り返されるようになっている。したがって、増分画素カウントは単純な連続加算の1つの動作であり、カウントが高位列アドレスに等しく、その後、それは次の増分動作のためACXFのカウントに低位列アドレスのコピー動作となるようになる。
ブロック320で示された論理は、上述されたシーケンスを作り出すために要求されるように、それが増分、比較及びコピーを実行することで独立されている。それはCLK入力の一連の8サイクルに応答してそうなり、使用可能な画素カウントEPVCは高い。8CLKサイクルの最初に、FIRSTは主張され、連続加算の1つの回路326により使用され、ACXFのカウントの最下位(第1)ビットに1つの加算をする。連続加算の1つの回路326はいくつかのゲート及び1つだけのフリップフロップを含み、桁上げを記録する。連続的に増分した出力ACAは連続ロード又はリセットカウントサイクルの間を除いてセレクタ324により選択され、増分した値は8個の使用可能なくロックサイクルの後にACXFで現れる。増分動作のそれぞれの間、EPXCはまたLCXFを使用可能にし、SLDを低くし、LC0はLC7FへのD入力であるLCINに送られる。したがって、8個の使用可能なクロックサイクルの終わりでは、LCXFの元の内容はその開始位置に再循環され、LCXFの値はその元の低位列アドレスを保持する。高位列アドレスHCXFは同一経路で再循環され、ACINでのACXFの新しい連続した値はビット式方法でHCINの連続した高位列アドレスと比較される。連続した比較機能ブロック327で実行され、2個だけのフリップフロップ及び幾つかの論理ゲートを含んでいる。フリップフロップの1つはカウントのビット式同等のトラック及び高位列アドレスを保持し、それらは連続してコンパレータに存在し、他は次のクロックサイクルの間にACEH出力信号を主張するために使用され、ACXFのカウントがHCXFからの高位列アドレスに等しくなった後、EPXCが主張される。FIRSTは連続する比較の等しい表示を初期化するために使用され、LASTはACEHの要求された更新に信号を送るために使用される。この方法では、ACEHは低位列アドレスをカウンタにコピーするために必要とされるクロックサイクル数を正確に主張される。また、ACEHは出力であり、制御回路への入力として与えられ、行の終わりに信号を送る。行の間にEPXCの他の方法で周期的に使用可能な5個の画素の休止があり、要求された行の特定の機能が実行されてもよいようになっている。そうでなければ、命令のための全体の実行期間の間、列のカウントは画素値が読み出されるかどうかを規則的に加算され、画素カウントは周期的に循環し、同様の方法で循環される行カウントを使用可能にするために使用されるACEHの周期表明を作り出し、フレームの要求された数が読み出されるまでフレーム読み出しカウントを順番に増分する集積フレームカウントを循環するようになっている。CCLK信号は、カウントACXFが8クロックシーケンスの最初と最後のクロック周期の間にそのリセット位置にある時だけ表明され、列セレクトレジスタで記録されたビットが不正確な位置にシフトされないようになっている。
ブロック300及び320は共に列アドレスを生成し、またまさに述べたように循環され、周期的行時間ベースを確立する。ブロック330及び340は同様に実行するが、行アドレスを生成すると共に周期的フレームスキャンタイミング信号を作り出す同一機能ではない。説明は相違に導かれるだろう。意図した適用では、第2フレームの列オフセットは通常小さいが、第2フレームの行オフセットは大きい。そのため、SROXFの完全な8ビットは第2フレームの行オフセットのために使用される。低位ビットの最初に反対の順序は既になされているので、シリアル命令の間、すなわちSLDが高い時だけ、表明されるイネーブルを有する単純な8ビットシフトレジスタである。第2フレームの行オフセットを加算する加算器337の機能は第2フレーム列のオフセットのためブロック307の関連回路の結合機能に類似し、選択第2フレームSSF信号の使用はRCLKの使用と同様であり、新しい行選択アドレスをRSOXFレジスタに記録する。しかし、RCLKが表明され新しい行を選択する時のタイミングはまったく異なっている。2つの分離した行の選択カウンタは異なって初期化されるが、一緒に増分される。それぞれ1つは高位行アドレスに別々に比較され、使用可能な行カウントのERWC信号が表明されるCLKの次の8サイクルの間に低位行アドレスにリセットされる。おそらく第2フレームの行オフセットにより増分されるリセット行カウンタRRXFは行を選択するために使用され、集積周期の始めでリセットする。アナログデジタルの行カウントARXFは行を選択するために使用され、高位列範囲の読み出しウィンドウへの低位列の画素のアナログデジタル変換のための容量性保持レジスタにゲートする。リセット行カウントRRXFは低位行アドレスに等しく初期化され、その通常の構成は列アカウントに直接類似している。しかし、アナログデジタルの読み出し行ARXFカウントはロード命令の一部として特定される値に初期化されている。所定の値はLRXFに書かれた低位行カウントより大きく、HRXFに書かれた高位行カウントより少なく又は等しくすべきである。各カウントは、それがロードされる時の高位行カウント及びそれが増分されると共に増分動作の間に低位カウントにリセットされる各時間への均一性を個々にチェックされ、高位行カウントへの均一性が検出されたものに続く。その結果は、リセット行及びアナログデジタル読み出し行カウントが行のカウント値の同一範囲を通って同一ランプパターンに続くがお互いに動きがずれているということである。データセレクタ345は、リセット行RRW信号が表明され、集積周期の始めに行をリセットする時にRRXFカウンタからのバス343をバス334に送る。さもなければ、ARXFカウンタからのバス344は334に送られ、読み出す行を選択する。集積周期を開始する連続行のリセットは、リセット行アドレスが低位行アドレスと等しい命令サイクルの始めで、すなわちフレームのトップで開始する。集積周期を開始する行のリセットは一度開始すると、フレーム又はフレーム対のすべての行がリセットされるまで続く。リセット動作は挿入される集積遅延フレーム数に等しい集積フレーム周期のため中断され、フレーム又はフレーム対が最終読み出しサイクルのためリセットされるまで続く。その後、行の読み出しはアナログデジタル行カウントが低位アドレスに等しく設定される時に後に1以上の行を開始する。リセットプロセスのように、一度読み出しが加算された集積遅延フレーム周期のため読み出しを時間的に中断してフレームの終わりまで続く。命令の実行は最後のフレーム又はフレーム対の最後の行の読み出しが完了された後に丁度終わる。
IFDXFレジスタは加算された集積遅延周期の数の合計の2つの補数及び1つに予め設定される。すなわち、遅延周期の追加のない間、それは2の補数形式の−1に設定され、リセット及び各読み出しサイクルのための読み出しの間の2つの追加の集積遅延周期の間、それは2つの補数形式で−3に設定される。IFDXFレジスタの値はそれを低高の列及び行カウントレジスタとして再循環することにより維持される。カウンタIFCXFは最初1+にロードされ、IFDXFに配置された値及びあふれ状態は次の8クロックサイクルのため集積フレームカウントのあふれIFCOVを高くすることにより表明され、使用可能な集積フレームカウントEIFC信号は表明される。以前のブロックとして、EIFCはカウントを増分するように表明され、あふれ表示の表明はIFDXFからの値のコピーをIFCXFに予め増分させると共にコピーさせる。予め増分させる機能はカウンタがロードされる時にあふれ状態が同一サイクルで生じることができるように使用される。IFCOVの表明は集積フレーム遅延周期の終わりに信号を送るために使用される。それは8CLKサイクルのためEIFC信号を表明することによる各サイクルのフレーム周期のため一度使用可能にされる。連続して加算したもの及びあふれ検出器は2つのフリップフロップ及び幾つかの論理ゲートを使用し、IFINのシリアルビットストリーム入力の値を1+に等しくするIFCAでシリアルビットストリームを出力する。
ブロックのカウンタ373は1の合計の負数及びフレーム又はフレーム対を読み出す回数に設定される。ブロック360のIFCXFレジスタに類似し、命令の実行が最終フレームの読み出しの終わりで終了するので値をリセットするレジスタは要求されない。RFCOVのあふれ状態が表明されると共にブロックの読み出しが完了される時に読み出し命令の最後は信号を送る。
選択として、SOUT信号はコントローラにより出力され、都合のよいことには命令書き込み段階の間にマイクロコントローラのシリアル入力に入力する。戻された値はブロック373の加算の1つの回路により増分された各シリアルバイト値を有するであろう。この小さな変化で、それはすぐ前の命令の実行の終わりに設定された72ビットレジスタの値により直接決定され、それにより、よい診断テストポイントを構成し、非常に小さい追加論理で制御論理の比較的大きい割合の動作を確認する。RFCOFNは同一のCLKを有し、RFCOFとして使用可能であり、そのD入力としてRFC0を有している。それはクロックの正のエッジよりむしろ負でクロックされる。その結果はSOUTは1.5クロックパルス、RFC0を先行し、MISOラインのマイクロコントローラに送り返す適当な段階である。
命令レジスタの合計72のフロップフロップがあり、さらなる処理レジスタに25のさらなるフリップフロップがあり、行及び列アドレスを入手すると共に保持するレジスタに14のフリップフロップとシリアル加算、比較に13のフリップフロップがあり、合計124フリップフロップのためにあふれ機能がある。加算されたゲート及びバス論理は最小限であり、制御及びシリアルインターフェースブロックは加算部分の比較的適度な数で実行され、この新しいアプローチは実行される機能のための論理要求によって非常に重要であることが分かるようになっている。
図12bに関して、図12cに詳説されたブロック500はクロック及び、例えば、図10cに示されたモトローラの68HC708XL36のようなマイクロコントローラ5のSPIポートとインターフェースする論理を供給する。クロック及びマイクロコントローラ5のシリアルポートとの相互接続はブロック500に示され、図12cの回路の説明で説明されるだろう。
ブロック501はブロック500からのSYNC,RUNS及びCLK信号及び505を通してブロック502をキューに入れると共に処理する連続して構成された命令からのカウンタ状態情報を受け取り、ブロック501は507を通ってブロック502で起こる処理の全体シーケンスを制御する1グループの制御及び論理イネーブル信号を発行することによりこれらの信号に応答する。ブロック501はまたクロック及び結合した選択及び開始変換信号を電荷再分配アナログデジタルコンバータ(A/D)、例えば、LTC1196に送る。ブロック500はLTC1196からシリアルデータラインを入力すると共に緩衝し、データ信号の緩衝したシリアル形式をDOUTとして送り、NDCLKとして結合したクロックをマイクロコントローラ5に送る。507を通るブロック502はキューに入れ、記憶し、及び命令を処理する多数の機能を与える新しいシリアルアーキテクチャを表現する方法で図1a及び11bに詳説されている。アーキテクチャの詳細は論理図の従来のセットよりこの表現の方がより明りょうである。
ブロック502は図11a及び11bのブロック300及び320で詳説されている。ブロック502のフリップフロップはSLDが表明される命令入力段階の間にシリアル命令語から3バイト、24ビットを入力すると共にキューに入れる。これらのバイトは第2フレームの列オフセットSCO、第1フレームの低位列LC、及び第1フレームの高位列HCである。命令の実又はRUNSが表明される実行段階の間、この同一のレジスタセットが使用され、ブロック506に要求されたようにラッチされる動作列アドレスの適当なシーケンスを生成する。ブロック506はまた図11aのボックス300で設定されたCSOXFフリップフロップとして示されている。SCOXFレジスタのビット0から4(すなわち、SCO0F,SCO1F,SCO2F,SCO3F及びSCO4F)は第1フレームの相当する列に対して第2フレームの列の列オフセットを示すサインした数を入力するために使用される。この語のビット5,6及び7は特別の目的のために使用される。これらのビットはバスSC0[7,0]の示したラインのブロック502から出力され、ブロック501へのSC07(SFM),SC06(IRR)及びSC05(IAD)として入力される(これらの信号は図12aから12gのSFM,IRR及びIAD指示のもとでなくなることに注目しなさい)。SC07(SFM)は命令語で設定され、第1フレームの処理及び読み出しをスキップし、フレーム対の第2フレームだけを処理する。命令の実行及び集積時間はSFMが設定される時の処理段階がおよそ半分の数になるので短くされる。SC06(IRR)は集積周期の開始で行のリセットを抑制するように設定され、SC05(IAD)は実行の間に行の読み出しを抑制するように設定される。IAD又はIRRの設定は命令の事項のタイミングを変更することなく、一定の機能を抑制する。
ブロック503は図11aのボックス330及び図11bのボックス340に詳説されている。ブロック503のフリップフロップはSLDが表明される命令の入力段階の間にシリアル命令語から4バイト、32ビットを入力すると共にキューを入れる。これらのバイトは第2フレームの行オフセットSRO、第1フレームの低位行LR、AからZのコンバータARで読み出す行のための行カウントの初期値、及び第1フレームの高位行HRである。命令実行又はRUNSが表明される実行段階の間、この同一のレジスタセットはブロック507で要求されるようにラッチされる行アドレスの適当なシーケンスを生成するために使用される。ブロック507はまた図11aのボックス332に設定されたRSOXFとして示されている。論理は要求されるような集積周期の始めにリセットする行の行数とそれぞれの集積周期の終わりに読み出す行の行数の両方を生成すると共にラッチする。
ブロック504は図11bのボックス360で詳説される。ブロック504のフリップフロップはSLDが表明される命令入力期間の間シリアル命令語から1バイト、8ビットを入力すると共にキューを入れる。命令の実行又はRUNSが表明される実行段階の間、このバイトはフレームの行のリセットとそれらの読み出しの間に表明される0以上の集積フレーム遅延周期の数を制御し、画素サイトのためのより多くの露出時間を供給し、電荷を誘導する光を蓄積する。
ブロック505は図11bのボックス370に詳説されている。ブロック505のフリップフロップはSLDが表明されている命令入力周期の間シリアル命令語から1バイト、8ビットを入力すると共にキューを入れる。命令の実行又はRUNSが表明される実行段階の間、このバイトはフレーム又はフレーム対の連続する読み出し数を制御し、その読み出し数はそれぞれの画素サイトで受け取られる光レベルを表示する8ビットのデジタル化された読み出しとしてとられると共にマイクロコントローラに連続して戻される。
図12cは図12bのブロック500を実行する回路の論理図である。これらの図の他のブロックでのようにブロック500では、ピンに近接のブロックの内部の信号名は機能、この場合の図12cの回路を実行する副ブロックで使用される名前である。パッケージの外部の配線経路の名前はそのレベルの相互接続のために使用される名前である。ほとんどの場合には、名前は同一であるが、それらがない時に1つの図から別の図に幾つかの信号名の変更がある。例えば、図12bの信号名SCO7はブロック501及びそれに伴う図12dから12gでSFMに変更される。
図12cは図12cのブロック500を実行する。マイクロコントローラ5(図10c)は5個の信号経路によりASIC XC4003Eに接続されている。説明から明らかなように、単純な修正はこの数を4つに減少させ、任意の診断チェックを実行するために任意に供給されることがある5番目の接続を有している。マイクロコントローラ5のシリアル周辺インターフェース(SPI)ポートは4つの信号接続からなり、そのうちの3つはシリアルSPIバスの各デバイスのため一致するピンに直接相互接続される双方向ラインであり、本実施例では、マイクロコントローラ5及びASIC XC4003Eだけからなっている。
3つの双方向のバスラインはスレーブアウトのマスター(MISO)であり、マスターアウトスレーブイン(MOSI)、及びシリアル周辺のシリアルクロック(SPSCLK)である。さらに、ポートに接続する各デバイスはマイクロコントローラのためのSS及びASIC XC4003EのためのXSSを指示したアクティブロースレーブセレクト(SS)入力である。マイクロコントローラ5へのSSピンは接地され、この要求は満たされ、プログラミングオプションはマスター又はスレーブモードのいずれかでマイクロコントローラの5つの内部SPIポートを配置するために使用されてもよい。アクティブ低位のXSSピンはマイクロコントローラ5により低くドライブされ、スレーブモードにそれを配置する。フレーム又はフレーム対を一回以上読み出す通常の命令では、マイクロコントローラ5はマスターモードのその内部SPIポートを配置すると共にXSSライン低位をドライブすることによりスレーブモードにASIC XC4003Eのポートを配置する。その後、マイクロコントローラ5は9バイト、72ビットの命令をASIC XC4003Eに連続して伝送する。示された設計では、より多くのバイトが伝送された場合、伝送された最後の72は取得されたものである。命令バイトは各バイトの最初の最上位のビットを伝送し、最初から最後の順位はフレームカウント、集積フレーム遅延、高位行、A/D行の開始カウント、低位行、第2フレームの行オフセット、高位列、低位列、及び第2フレームの列オフセットを読み出す。命令の伝送段階の間、マイクロコントローラ5のマスターSPIポートはMOSIラインをデータでドライブし、SPSCLKラインをデータクロックでドライブする。命令が伝送された後、マイクロコントローラ5はその内部SPIユニットをプログラムを準備するスレーブモードに変更し、画素データのバイトを受け取り、その後マスターモードでASIC XC4003Eを配置するXSSラインを高位にドライブする。応答して、ASIC XC4003EはRUNS状態に入り、個々の画素からの電圧がデジタル化される時にデジタル化された画素データをマイクロコントローラ5に連続して返送する。その後、ASIC XC4003Eは別の命令がマイクロコントローラ5から受け取られるまでアイドルモードに入る。ASIC XC4003Eはマスター及びRUNSモードの間のマイクロコントローラ5のスレーブであり、ASIC XC4003EはMOSIラインを画素のA/D読み出しからのデータでドライブし、SPSCLKラインをデータクロックでドライブする。実際に、命令が完了し、ENDが表明された後、ASIC XC4003Eはマイクロコントローラ5がXSSを低位にドライブするまで非伝送状態のマスターとしてSPSCLK及びMOSIをドライブし続ける。命令が完了される前にXSSが低位にドライブされた場合には、それは中止される。
マイクロコントローラ5のSPIポートは多数のクロックモードを有し、使用されるものはSPSCLK信号がアイドル状態で高位であるものである。SPSCLKピンのためASIC XC4003EでプログラムされたプルアップはSPIのいずれもがマスターモードにない時にはSPSCLKは高位のままであることを保証する。マイクロコントローラ5のSPI又はASICのSPIのいずれかがマスターであり、1以上のSPIポートが同時にマスターを作られるべきではない時に第1の使用可能なクロック状態は高位にすべきである。クロックはさらに、データがMOSIラインにドライブされる時に第1変化がフォーリングエッジとなるように構成される。スレーブはクロックの次のライジングエッジでデータを記録する。1つのクロック源から別のものへの変化はクロックデータビットを落とすことなく或いは不必要なビットを導入することなく両方の方向で適切に成される慎重な検証が実行されるべきである。
命令の伝送モードの間、ASIC XC4003Eは以前の命令の実行によりシフトされたデータでMISOラインをドライブする。マイクロコントローラ5又はテスト機器の別の部分は任意にプログラムされてもよく、次の命令がロードされる時にこのデータを読み出すと共に確認する。データ経路の大きな部分及び送信及び受信終了の両方のマイクロコントローラ通信は戻されると予想される72ビット値のために適切に機能しなければならないので、それはASIC論理の機能の比較的よいチェック及びマイクロコントローラ5とのその相互接続を構成する。その特徴が使用されない場合には、MISOピンは接続される必要がない。
再び図12cを参照すると、OSCクロック信号はマイクロコントローラ5の水晶発振器によってドライブされ、水晶発振器はこの適用では、8から16メガヘルツの範囲で作動すると予想されている。しかし、広範囲からの周波数が使用されてもよい。OSCはパッド513で入り、周波数は2つに分離され、OSCDで公称4から8メガヘルツで50%のデューティサイクルを作り出す。OSCDは通常の動作では中断されない。マイクロコントローラ5からドライブされたアクティブ低位のXSS信号はパッド514で入力され、信号はNSSPを与えるOSCDにより記録されたDフリップフロップ511によってサンプリングされ、XSS入力のための同期した現在の様子であり、値はフリップフロップ512を介してシフトされXSS入力のための最後の様子であるNSSLを与える。XSS入力が少なくとも連続的サンプルのため低位である時、ゲート515からのLOAD信号は高位である。これはASIC XC4003Eのためのスレーブ状態に同等であり、ゲート516からのMSTは低位である。この状態では、ピン521のマイクロコントローラ5からのSPSCLK入力は517,519及びクロックバッファ520を介してゲートされ、ASIC XC4003Eのため主要なCLK信号をドライブする。したがって、このモードでは、システムクロックは命令語の各ビットのための1つの正のクロックエッジを有し、マイクロコントローラ5からASIC XC4003EのMOSIパッド524に連続して入れられ、シリアルインターフェースブロック500のDINピンに送られる。図12bに示されているように、信号DINのデータはブロック500の出力ピンでSRCVに名前を変更し、ブロック500のSRCV出力ピンから72ビット長の命令語のための入力地点であるブロック502のSRCV入力ピンに送られる。図12cでは、LOADの高位及びMST低位で、バッファ522及び523はSPSCLK及びMOSIがLOAD動作の間にASIC XC4003Eからドライブされないように使用可能とされている。バッファ525はLOADの高位でドライブさせ、図12aのブロック505からのSOUTはブロック500のSOUTピンを介して送られ、マイクロコントローラ5にMISOの戻りラインをドライブする。ブロック505では、信号NSSPはフリップフロップをトリガーさせた負のエッジによってドライブされ、MISOにドライブされたデータのため適当な位相を確立する。マイクロコントローラがXSSを低位から高位にドライブする時、信号NSSPはNSSLの前に1つのクロックサイクルを高位にドライブされ、528の出力は1つのクロックサイクルのため高位になるようになっている。この高位はRUNSを高位にさせる527のD入力に529を通ってゲートされる。527がXSSの低位をドライブすることにより生じた別のLOAD信号の表明、又は520のENDF信号の表明により信号を送られた命令の正常終了によりリセットされるまで、RUNSは529を通るフィードバックパスのため高位のままである。ENDがブロック501から受け取られ、次のLOAD命令によってクリアされる時にENDFは設定される。XSSが高位にドライブされる時、MSTは518,519及び520を通ってOSCDをゲートすることを表明し、ASIC XC4003EのためCLKをドライブする。OSCDに対するLOAD及びMSTの同期及び一方の除去及び他方の表明の間の1つのサイクルクロック周期はマイクロからのSPSCLKがよく機能する時によいクロックの変化を保証する。SYNCはRUNS又はLOADのいずれかが表明されず、バイトタイミングをシリアルビットストリームのバイトと特に同期するブロック501のソフト初期化のために使用される。
図12dから12eを参照すると、556を通る6個のフリップフロップ551は表550のカウント0から11のように列挙された12カウント値を介して循環するジョンソンカウンタを形成する。RUNSが表明される時にカウンタはすべての12の状態を通り循環し、RUNSが表明されていない時に560を通るゲート対557はLOADサイクルの間に表550の0から7のように列挙された最初の8つの値を通してカウンタを循環させる。LOAD又はRUNSのいずれもが表明されない時、SYNCはすべての6個のカウンタ段階を消去し、表550に列挙されているようにそれを0状態に保持することを表明する。FIRSTはカウント番号0のため表明され、カウント番号0は常に8クロックの最初であり、505を通りブロック502の情報を連続して処理するために使用される。LASTはカウント番号7のために表明され、カウント番号7は8クロックの最後であり、情報を処理するために使用される。CTLPはカウント8から11のために表明され、イネーブル信号を抑制するために使用され、イネーブル信号はこれらの追加のカウント状態が使用される時はいつでもシリアル処理のため使用される。CTLは追加のカウント状態の最初のために表明され、レジスタのイネーブルは使用可能とされない。この状態はシリアル処理レジスタのすべてがそれらの正常休止位置にあり、「行は高位に等しい」、「列は高位に等しい」、及び「あふれ」状態が表明される。それは、ほとんどの制御決定が非常に多数のフリップフロップにより証明されるように作られ、フリップフロップのイネーブルがこの信号によりドライブされる12カウントサイクルの1つである。CTLPを作る他の3つのカウント9から11はLTC1106アナログデジタルコンバータにより要求された画素当たりの12クロックを供給するために提供される。論理の実質的変更のカウント計画は8カウントだけで作動するように作ることができ、回路の休止動作を有するADコンバータ等の他の装置の動作を整合させるために要求されるようにサイクル当たりの9カウント以上の如何なる数にもかなり容易に調節することができる。LOAD段階の間、AD変換が実行され、特定の処理決定は為されず、さらにその上、CLKはシリアル入力クロックから直接得られ、正確にビット毎に1つのクロックがある。これは、560を通るゲート対557がシリアルロード段階の間にバイト当たり8カウントを通るカウンタを循環するために供給される理由である。FIRDT及びLASTビット表示器の生成は適切に生成され続け、シリアルロード動作で使用される。
RUNS段階の間、5個の画素継続時間の休止が各行の処理の始めで追加される。(休止は最初の行が処理される前で少し短い。)これは読み出される各行のための集積周期の開始で行のリセットを実行する時間を供給するためになされ、信号のシーケンスを生成し、行の読み出しシーケンスの始めで保持コンデンサに各行のため画素の読み出しを表現する値をゲートする。フリップフロップ570から575の行は通常シフトレジスタとして構成され、1は0のフィールドを通ってシフトされ、シフトは上記に関連して使用可能なCTL信号が表明されるクロックで起こる。
STRTはRUNSが低位である時に設定されることによりRUNS命令の始めに表明される。それはフリップフロップ591を開始の1画素周期又はRUNSシーケンスのために設定させ、この1つの画素幅の表明はフリップフロップ571から575にリップルする。RE4の表明はフリップフロップ585を表明するPXEに設定させ、行の終了が列の処理ブロック502からのACEHの表明により信号を送られるまでPXEのフィードバックはこの信号を存続させる。ACEHの表明は行の最後の列が処理されることを示している。フリップフロップ586はPXの表明の前に1つの画素幅の遅延を挿入する。ゲート565はあらゆる12クロック周期の画素時間から要求された8クロック周期の間、すなわち、CTLPが表明されない12クロック周期の8クロック周期の間、PXCを表明する。EPXCはブロック502により使用され、次の列の位置に増分される。RUNSが表明されない時、EPXCは連続して表明され、LOADが表明されている命令入力周期の間にブロック502を使用可能にする。
RE0が表明され、表明されるSSFDのための要求により表示されているように2つのフレームの秒の行が処理された後、ERWCはゲート566により表明され、間の行の周期の始めに次の行に増分する。CTLPが表明されない時、再びERWCは12クロック周期の8クロック周期の間だけ表明される。RUNSが表明されない時、ERWCはまたLOSDの間に表明される。1つのフレームだけが処理されている時、それが第2フレームであり、ERWCがあらゆる行の終わりで表明されていることに注目しなさい。RUNSが表明される時ERWCのゲーティングがゲート569により決定され、最後の行の終わり及びRREHが表明される行のリセットフレームの終わりでだけ、集積フレームのカウントEIECを使用可能にするようにさらに制限される信号GINCとして始められる。AREHが表明され、さらに集積フレームカウントがIFCOVが表明されることにより表示されたように完了する時、読み出しフレームカウントは読み出しフレームの終わりでだけ増分される。EIFC及びEAFCはRUNSが低位であるロード周期の間、共に表明される。
SLDはRUNS又はSYNCのいずれもが表明され、命令がロードされていることを表示している時に表明される。RFCOVがずっと表明されることにより証明されるように要求されたフレーム数が読み出され、AREHが表明され、最後の読み出しフレームセットが届けられたことを表示する時に前もって終了したPENDは表明される。PENDが表明された後、及び時間が与えられて最後のAD変換を完了し、マイクロコントローラ5にシリアルデータを送った後、さらなるフリップフロップがENDを表明する。多すぎたり又は少なすぎる画素クロックはマイクロコントローラへの画素の読み出しのシリアル伝送でフレーミングエラーを発生させるので、ここのタイミングはかなり重要である。
フリップフロップ580は選択第2フレームSSFの表示を記録する。この表示は図12aのブロック502及び503、及びここでの説明の下、図12dから12eの論理でも使用される。SSFが表明される時、第2列及び第2行のオフセットはベースの行及び列の選択に追加され、第2フレームのデータを処理する。正常モードでは、SFMが表明されない時、SSFは0で保持され、第1フレームの行は処理され、その後、ベースの行の値を変更することなく、SSFは表明され、第2フレームの相当する行が処理される。この方法では、2つのフレームの相当する行の処理はインターリーブされ、相当する行の処理の間のタイムスキューは短く、2つのフレームの1つの1つの行を処理する時間に等しくなる。二重フレームの意図した適用の1つはカラーフィルタリングを除いて実質的に同一である2つの画像を投影することであり、それぞれは2つのフレームのその1つで実質的同一位置を有している。ここでは、動作及び強度を換える時間は相当する画像の読み出しの間の時間の経過を最小にすることにより最小化させる。ここでは、この発明のシリアルアーキテクチャの多くの特徴を保持する選択が2つのフレームを分離することであり、可能な位置決めオフセットが2つの内の1つに適用された1つのフレームとしてそれらを並列にドライブする。その後、読み出しはまた並列にされ、全体の行のスキャンシーケンスは単一フレームのスキャニングのためそのようにもっと見えるだろう。
図12dから12eでは、選択第2フレームモードSFMが表明される時、論理和ゲート584がSSFを連続して設定させ、列及び行オフセットは命令を通して追加され、第2フレームの行だけが処理されるようになっている。SFMが表明されない正常の二重フレームモードでは、排他的論理和ゲート580は信号583DRE0が表明される非常に最初の時を除く各行の始めに、580、したがって、SSFの設定をトグルにする。フリップフロップ581は1つの画素周期により遅延されるSSFである信号SSFDを出力する。その遅延信号は幾つかの論理動作、例えばゲート569で有益である。図12gを参照すると、フリップフロップ902レジスタRSRは行がリセットされ集積周期を開始するフレーム処理の間隔の間に表明される。フリップフロップ910は各行が読み出される周期の間に表明されるADRを記録する。ゲート908及び909はRENを表明し、フリップフロップを使用可能にし、RSR及びADRを制御し、新しく可能性のある変更した設定を記録する。RENはRUNSが表明され、STRTがまだ高位で、CTLクロック周期の一致状態でもあり、DRE0の表明により表示されるような新しい行の開始、及びSSFDの表明により表示される第2フレームの行の処理の完了の時に、命令実行周期のまさに開始において表明される。
STRTが命令実行の始め及び新しい集積行のリセットフレームの始めの一致で表明される時(RREHは以前のフレームの終わりのため表明される)、RSRは設定され、フレームの読み出しは完了され(ADRは表明される)、読み出す別のフレームがある(RFCOVは表明されない)。リセットフレームの終わりが到達された時(RREHは表明される)、RSRは状態の一致でリセットされ。フレームの読み出しは進行せず(ADRは表明されない)、STRTは表明されない。最後の読み出しの最後の行が進行中である時(PENDは表明されている)、又は命令が実行されていない時(NRUNSが表明されている)、又は集積周期の始めで行のリセットが抑制されている時(IRRが表明されている)、RSRはリセットを保持する。
ADRは読み出しフレームの開始の一致で表明し(AREHは表明され)、もはや集積フレーム周期は残っていない(IECOVが表明される)。ADRは読み出しフレームの始めの状態の一致でリセットされ(AREHは表明されている)、集積フレーム遅延周期は残っている(IFCOVは表明されない)。RSRでのように、PEND又はNRUNSが表明される場合には、ADRがリセットされる。ADRはIRRの表明によりリセットされないが、A/D読み出しの抑制の表明によりリセットされる(IADは表明される)。パッド920から924はフォトダイオードのフォトサイトを有するフォトビットのアクティブ画素センサとの相互接続のため供給される。PGパッド920はフォトダイオードバージョンのドライブのため接地され、ドライブは示されているがセンサの代わりのフォトゲートバージョンのための適当な制御パターンを生成するために取付けられた論理を有しているであろう。通常のリセットは例では実行されず、行毎のリセットが使用され、RESETピン921は接地される。
行をリセットするため、リセットされる行の数はRCLKの正のエッジにより図12aの行の選択レジスタのブロック507にラッチされる。このレジスタの出力はASIC XC4003Eの行の選択パッド18,19,20,23,24,25及び26に直接取付けられ、画像アレイセンサ3の相当する行の選択ピンに送られるだろう。行選択はラッチされ、整定時間の後、行選択RR信号はピン924で表明され、ピンは画像アレイセンサ3の相当するリセット行入力に接続される。リセット行RR信号は集積周期の始めに行をリセットするために表明され、読み出し処理の一部として行をリセットをもし、画素の電圧の差の読み出しは集積時間に続くサンプリングするコンデンサの1つの画素の電圧を記録し、その後、行をリセットし、対の第2コンデンサの電圧を記録することにより取られる。そのようなコンデンサ対が画素の各列のために供給され、列の選択機能は図10aの増幅器AD830の差の入力に選択した列のためサンプリングするコンデンサ対の電圧をゲートする。丁度説明された処理は、画素がリセットされる時にゼロの読み出し電圧を変えることにより生じる読み出しのシステマティックエラーをゼロにする。
間断なく表明されなければならない2つの異なる行アドレスがあり、その1つは集積周期の始めにリセットする行のためである。これはRRWが表明される行の始めの5つの画素の周期の1つの間になされる。RRWは図12dから12fの論理により使用され、図12aのブロック503にも送られ、リセット行の適当なものをAD読み出し行アドレスを選択する。リセット行のアドレスが選択され、RRWが表明された時だけ行の選択レジスタ507にラッチされ、AD読み出しのための行のアドレスは別の方法で選択される。
画素クロックのサイクルを作る12の内の6つの連続クロック周期の間にCCAは表明される。以前の行及び列が記録し、続く行及び列が記録し、それを良好な信号にし、NSHS,NSHR及びRRをゲートする前に約2クロック周期ゼロに戻った後に約4CLKサイクルCCAは表明され、行及び列の選択はこれらの信号が表明される時に安定するようになっている。
NSHSは画像アレイセンサ3の読み出しのための保持コンデンサに選択した行から信号をゲートするアクティブ低位信号である。NSHSは表明され、RE3及びCCAが表明される行のため再処理する周期の間に行を読み出す。RE4及びCCAが表明されている次の画素の周期の間にリセット行RRは表明される。その後、アクティブ低位信号NSHRは表明され、行が選択された行から保持コンデンサの第2セットにリセットされた後に読み出しをゲートし、差の読み出しが上述したように取られることができるようになっている。NSHRはRE5及びCCAが表明される次の画素周期のリセット行の読み出しのために表明される。行の読み出しの始めのこの準備のシーケンスに続いて、列のカウントは選択された行の最初から最後の列まで指示され、選択された列の画素のための保持コンデンサ電圧を作動増幅器U6にゲートし、正常とリセット画素の読み出しの間の差は増幅され、バッファされ、例えば、Linear Technology Model No.LTC1196アナログデジタルコンバータの入力に送られる。
図12fを参照すると、フリップフロップ930は1つのクロック周期の間RCLKを循環し、CTLが表明されるものに続き、RSR及びRRWが共に表明される時に行出力レジスタにリセット行値を記録する。RCLKは同様の方法で高位に循環され、行を記録し、ADR及びRE2が共に表明される時に出力レジスタに読み出す。同様に、フリップフロップ931は1クロック周期の間にCCLKの高位を循環し、ADR及びPXEが共に表明され、フレームが読み出され、行の画素が変換されていることを表示している時にCTLが高位になるものに続く。
新しいアドレスが出力レジスタに記録され、それをフォトビットセンサに出力し、読み出しのため適当な画素を選択する時にだけCCLKは表明される。したがって、CCLKはまたアナログデジタル変換処理の開始の信号を送るのに役立つ。フリップフロップ932はパルスストレッチャとして役立ち、CCLKPは開始された11クロックサイクルの間続き、直ぐにCCLKパルスに続く。フリップフロップ933は有効にCCLKPを遅らせ、ASIC XC4003Eのパッド938の出力であるアクティブ低位信号NCSを生成し、結合したチップ選択に送られ、LTC1196アナログデジタルコンバータの変換ピンを開始する。システムクロックCLKはASIC XC4003Eのパッド937を介してLTC1196に送られ、変換されたデータはASIC XC4003Eのパッド939に戻され、正のクロックエッジのフリップフロップ935に記録される。これはゲート936から得たCLK及びNDCLKに関するデータ伝送のタイミングを再度確立するために役立ち、伝送された8クロックパルスにデータを供給し、最後にマイクロコントローラのSPIポートにそれを記録するために使用される。
明らかに、上記教示により、本発明の多くの修正及び変更が可能である。したがって、添付した特許請求の範囲内で、本発明は特に上述したものより別の方法で実施されてもよいことは認識されるべきである。
従来の高ビームヘッドライトのヘッドライト放出パターンを示す平面図である。 所望の視野内の垂直角度で入射する光線を示す本発明の一部分を形成する光学システムの側断面図である。 図2と同様に、所望の視野を超えた垂直高度で入射する光線を示している。 図1に示された光学システムの平断面図であり、所望の視野内の水平角度の光線を示している。 本発明によるヘッドライトの自動調光システムのブロック図である。 本発明による画像処理の全体フロー図である。 所望の視野内の車両のテールランプを検出する方法を示すフロー図である。 所望の視野内の他の車両からヘッドライトを検出するためのフロー図である。 本発明による制御回路の例示の適用を示すブロック図である。 図9に示されたブロック図の概略図である。 図9に示されたブロック図の概略図である。 図9に示されたブロック図の概略図である。 本発明による制御回路の一部分のために使用されるレジスタと論理のブロック図である。 本発明による制御回路の一部分のために使用されるレジスタと論理のブロック図である。 本発明による制御回路のトップレベルの図である。 本発明による制御回路のトップレベルの図である。 本発明による制御回路のSerBlkの概略図である。 本発明による制御回路のCanCtrl部分の概略図である。 本発明による制御回路のCanCtrl部分の概略図である。 本発明による制御回路のCanCtrl部分の概略図である。 本発明による制御回路のCanCtrl部分の概略図である。

Claims (43)

  1. ウィンドウを規定する画素センサのアレイから成り、各画素センサは行アドレスと列アドレスのアレイにあり、選択する行アドレスのための行入力と選択する列アドレスのための列入力とを有し、前記画素センサの入射光を基に前記選択する行アドレスと前記選択する列アドレスで前記画素センサのため画素出力信号を生成するように動作する画像センサと、
    前記出力信号をデジタル化するように動作する前記画素センサと通信するアナログデジタルコンバータと、
    前記画像システムのため命令を生成するように動作するプロセッサと、
    前記画像センサ、前記アナログデジタルコンバータ、及び前記プロセッサと通信し、
    (a)前記プロセッサから命令を受け取り、
    (b)前記受け取った命令を基に前記画像センサウィンドウの第1サブウィンドウを決定し、
    (c)前記サブウィンドウの各画素に対応して前記選択する行アドレスと前記選択する列アドレスを決定するように動作する制御システムとを、
    備えたことを特徴とする画像システム。
  2. 前記プロセッサはシリアルバスを介して前記制御システムと通信している請求項1に記載の画像システム。
  3. 前記シリアルバスは前記プロセッサから前記制御システムに新しい命令を伝送するように動作する請求項2に記載の画像システム。
  4. 前記新しい命令が前記プロセッサから前記制御システムに伝送される時に前記シリアルバスは前記制御システムから前記プロセッサへの前の命令を直ぐに処理することにより決定された結果を伝送するようにさらに動作し、前記プロセッサは前記制御システムから伝送された結果を診断テストポイントとして使用するように動作する請求項3に記載の画像システム。
  5. 前記シリアルバスは前記制御システムから前記プロセッサにデジタル化された画素データを伝送するようにさらに動作する請求項3に記載の画像システム。
  6. 前記制御システムは、
    列アドレスを開始するサブウィンドウを保持するための第1レジスタと、
    列アドレスを終了するサブウィンドウを保持するための第2レジスタと、
    行アドレスを開始するサブウィンドウを保持するための第3レジスタと、
    行アドレスを終了するサブウィンドウを保持するための第4レジスタとを備えた請求項2に記載の画像システム。
  7. 前記制御システムは、
    列オフセットを保持するための第5レジスタと、
    行オフセットを保持するための第6レジスタとをさらに備え、
    前記制御システムは前記第1サブウィンドウ、前記列オフセット、及び前記行オフセットの位置を使用して第2サブウィンドウを決定するようにさらに動作する請求項6に記載の画像システム。
  8. 前記制御システムは単一サブウィンドウの動作モードと二重サブウィンドウの動作モードの間で切り換わるようにさらに動作する請求項7に記載の画像システム。
  9. 前記制御システムは二者択一的に、前記第1サブウィンドウから少なくとも1つの画素センサの出力信号を読み、前記第2サブウィンドウから少なくとも1つの画素センサの出力信号を読むようにさらに動作する請求項7に記載の画像システム。
  10. 各画素センサは該画素センサの入射光を集積することにより信号を生成するように動作し、画素センサの各行は集積周期を開始するためのリセット信号を有し、前記制御システムは、
    前記命令から決定された値に初期化され、周期的に増分されるリセット行カウンタと、
    前記命令から決定された値に初期化され、周期的に増分される変換行カウンタと、
    前記リセット行カウンタ値を基に画素センサの行リセットに信号を送るための論理と、
    前記変換行カウンタ値を基に画素センサ出力の生成に信号を送るための論理とをさらに含み、
    前記集積周期は前記変換行カウンタの初期値と前記リセット行の初期値との差から決定される請求項6に記載の画像システム。
  11. 少なくとも1つのサブウィンドウのすべての行にアクセスする必要のある前記時間はフレーム周期を規定し、前記制御システムは前記命令から決定された値に初期化された集積フレーム周期カウンタをさらに備え、前記集積時間は前記集積フレーム周期カウンタから決定された多数のフレーム周期により拡張される請求項10に記載の画像システム。
  12. 少なくとも1つのサブウィンドウの1セットのすべての行はフレームを規定し、該フレームを読むことは該フレームで各画素のため前記画素出力信号を生成することを含み、前記制御システムは前記命令から決定された値に初期化されたフレーム読取りカウンタをさらに備え、前記制御システムは前記フレーム読取りカウンタの前記初期化された値を基に前記命令を終了する前に読み取られる多数のフレームを決定するようにさらに動作する請求項1に記載の画像システム。
  13. 前記アナログデジタルコンバータは前記出力信号をデジタル化するため逐次近似を使用する請求項1に記載の画像システム。
  14. 前記画像センサは画素センサのアレイからなり、該アレイは画像ウィンドウを規定し、各画素センサは行アドレスと列アドレスを有し、各画素センサは集積周期中の前記画素センサへの入射光を示す信号を出力するように動作し、前記制御システムは、
    プロセッサと通信するためのシリアルインターフェースと、
    該シリアルインターフェースと通信し、前記プロセッサからの命令を受け取るように動作する複数のレジスタと、
    該複数のレジスタの少なくとも1つのレジスタと通信し、前記受け取った命令を基に前記画像ウィンドウの少なくとも1つのサブウィンドウを決定するように動作する論理と、
    該論理と通信し、前記少なくとも1つのサブウィンドウの各画素に対応して前記画像センサに行アドレス及び列アドレスを供給するように動作する出力とを備えたことを特徴とする画像センサを制御するための制御システム。
  15. 前記少なくとも1つのサブウィンドウは第1サブウィンドウを備え、前記複数のレジスタは、
    列アドレスを開始する第1サブウィンドウを保持するための第1レジスタと、 列アドレスを終了する第1サブウィンドウを保持するための第2レジスタと、 行アドレスを開始する第1サブウィンドウを保持するための第3レジスタと、 行アドレスを終了する第1サブウィンドウを保持するための第4レジスタと備えた請求項14に記載の制御システム。
  16. 前記複数のレジスタは、
    第2サブウィンドウのため列オフセットを保持するための第5レジスタと、
    前記第2サブウィンドウのため行オフセットを保持するための第6レジスタとをさらに備え、
    前記列オフセットにより示された多数の列及び前記行オフセットにより示された多数の行によって前記第1サブウィンドウから分離される時に前記第2サブウィンドウを決定するように動作される請求項15に記載の制御システム。
  17. 単一サブウィンドウの動作モードと二重サブウィンドウの動作モードの間で切り換えるようにさらに動作する請求項16に記載の制御システム。
  18. 前記第1サブウィンドウからの少なくとも1つの画素センサの出力と前記第2サブウィンドウからの少なくとも1つの画素からの出力を二者択一的に読取るようにさらに動作する請求項16に記載の制御システム。
  19. 画素センサの各行は集積周期を開始するためのリセット信号を有し、前記命令から決定された値に初期化され、周期的に増分させるリセット行カウンタと、
    前記命令から決定された値に初期化され、周期的に増分された読み出し行カウンタと、
    前記リセット行カウンタを基に画素センサの行リセットに信号を送るための論理と、
    前記読み出し行カウンタを基に画素センサの出力に信号を送るための論理とをさらに備え、
    前記集積周期は前記読み出し行カウンタの初期値と前記リセット行の初期値との差から決定される請求項15に記載の制御システム。
  20. 前記少なくとも1つのサブウィンドウのすべてのすべての行にアクセスする必要がある前記時間はフレーム周期を規定し、前記制御システムは前記命令から決定された値に初期化された集積フレーム周期カウンタをさらに備え、前記集積時間は前記集積フレーム周期のカウンタから決定された多数のフレーム周期により拡張される請求項19に記載の制御システム。
  21. 前記少なくとも1つのサブウィンドウのすべての1セットのすべての行はフレームを規定し、フレームを読み込むことは該フレームの各画素から信号を生成することを含み、前記レジスタのセットは前記命令から決定された値に初期化されたフレーム読取りカウンタを備え、前記フレーム読取りカウンタの前記初期値を基に前記命令を終了する前に読取られる多数のフレームを決定するように動作する請求項14に記載の制御システム。
  22. 前記複数のレジスタの少なくとも2つがシフトレジスタである請求項14に記載の制御システム。
  23. 前記シフトレジスタの少なくとも2つは連続して隣接するレジスタを形成するようにカスケードされ、命令データは前記レジスタに連続してシフトされる請求項22に記載の制御システム。
  24. 前記シフトレジスタの少なくとも2つは少なくとも1つのサブウィンドウを決定するための論理による使用のため変更されるように動作可能な請求項23に記載の制御システム。
  25. 前記行アドレス及び前記列アドレスにより特定された前記画素の出力をデジタル化するためのアナログデジタルコンバータをさらに備えている請求項22に記載の制御システム。
  26. 前記アナログデジタルコンバータは逐次近似のアナログデジタルコンバータである請求項25に記載の制御システム。
  27. 前記少なくとも2つの変更可能なシフトレジスタは同時に動作するようにさらに動作可能な請求項24に記載の制御システム。
  28. 前記複数のレジスタの少なくとも1つは連続して隣接するレジスタと並列に前記命令の一部分を受け取るように動作する請求項23に記載の制御システム。
  29. 前記シリアルインターフェースは双方向性である請求項14に記載のシステム。
  30. 前記シリアルインターフェースと通信する逐次近似のアナログデジタルコンバータをさらに備えた請求項28に記載のシステム。
  31. 前記シフトレジスタがカスケードされる命令は別々のアドレス伝送及び復号化を削除する請求項24に記載の制御システム。
  32. 自動車の少なくとも1つのヘッドライトを制御するシステムであって、
    少なくとも1つのヘッドライトと通信し、制御信号に応じて少なくとも1つのヘッドライトを制御するように動作するヘッドライト制御装置と、
    前記ヘッドライト制御装置と通信し、少なくとも1つの画像を処理し、接近する車両のヘッドライトと先行する車両のテールランプの存在を検出すると共に制御信号を生成するように動作可能なプロセッサと、
    ウィンドウを規定する画素センサのアレイから成り、各画素センサは行アドレスと列アドレスの前記アレイにあり、行アドレスを選択するための行入力と列アドレスを選択するための列入力を有し、前記画素センサの入射光を基に前記選択する行アドレスと前記選択する列アドレスで前記画素センサのための画素出力信号を生成するように動作し、前記自動車の前の場面を見るように動作可能な画像センサと、
    前記画像センサと通信し、前記出力信号をデジタル化すると共に該デジタル化された出力信号を前記プロセッサに送るアナログデジタルコンバータと、
    前記画像センサ、前記アナログデジタルコンバータ、及び前記プロセッサと通信し、
    (a)前記プロセッサから命令を受け取り、
    (b)前記受け取った命令を基に前記画像センサウィンドウの第1サブウィンドウを決定し、
    (c)前記サブウィンドウの各画素に対応して前記選択する行アドレスと前記選択する列アドレスを決定するように動作することを特徴とする制御システム。
  33. 前記プロセッサはシリアルバスを介して前記制御システムと通信している請求項32に記載の画像システム。
  34. 前記シリアルバスは前記プロセッサから前記制御システムへ新しい命令を伝送するように動作する請求項33に記載の画像システム。
  35. 前記新しい命令が前記プロセッサから前記制御システムに伝送される時に前記シリアルバスは前記制御システムから前記プロセッサに前の命令を直ぐに処理することにより決定された結果を伝送するようにさらに動作され、前記プロセッサは前記制御システムから伝送された結果を診断テストポイントとして使用するように動作する請求項34に記載の画像システム。
  36. 前記シリアルバスは前記制御システムから前記プロセッサにデジタル化された画素データを伝送するようにさらに動作する請求項34に記載の画像システム。
  37. 前記制御システムは、
    列アドレスを開始するサブウィンドウを保持するための第1レジスタと、
    列アドレスを終了するサブウィンドウを保持するための第2レジスタと、
    行アドレスを開始するサブウィンドウを保持するための第3レジスタと、
    行アドレスを終了するサブウィンドウを保持するための第4レジスタとを備えた請求項33に記載の画像システム。
  38. 前記制御システムは、
    列オフセットを保持するための第5レジスタと、
    行オフセットを保持するための第6レジスタとをさらに備え、
    前記制御システムは前記第1サブウィンドウ、前記列オフセット、及び前記行オフセットの位置を使用して第2サブウィンドウを決定するようにさらに動作可能な請求項37に記載の画像システム。
  39. 前記制御システムは単一サブウィンドウの動作モードと二重サブウィンドウの動作モードの間で切り換えるようにさらに動作可能な請求項38に記載の画像システム。
  40. 前記制御システムは二者択一的に、前記第1サブウィンドウから少なくとも1つの画素センサの出力信号を読取り、前記第2サブウィンドウから少なくとも1つの画素センサの出力信号を読取るようにさらに動作可能な請求項38に記載の画像システム。
  41. 各画素センサは該画素センサの入射光を集積することにより信号を生成するように動作し、画素センサの各行は集積周期を開始するためのリセット信号を有し、前記制御信号は、
    前記命令から決定された値に初期化され、周期的に増分されるリセット行カウンタと、
    前記命令から決定された値に初期化され、周期的に増分される変換行カウンタと、
    前記リセット行カウンタ値を基に画素センサの行リセットに信号を送るための論理と、
    前記変換行カウンタ値を基に画素センサ出力の生成に信号を送るための論理とをさらに含み、
    前記集積周期は前記変換行カウンタの初期値と前記リセット行の初期値との差から決定される請求項37に記載の画像システム。
  42. 少なくとも1つのサブウィンドウのすべての行にアクセスする必要がある前記時間はフレーム周期を規定し、前記制御システムは前記命令から決定される値に初期化された集積フレーム周期カウンタをさらに備え、前記集積時間は前記集積フレーム周期のカウンタから決定された多数のフレーム周期によって拡張される請求項41に記載の画像システム。
  43. 少なくとも1つのサブウィンドウの1セットのすべての行はフレームを規定し、該フレームを読取ることは該フレームの各画素のため前記画素出力信号を生成することを含み、前記制御システムは前記命令から決定される値に初期化されるフレーム読取りカウンタをさらに備え、前記制御システムは前記フレーム読取りカウンタの前記初期値を基に前記命令を終了する前に読取られる多数のフレームを決定するようにさらに動作する請求項32に記載の画像システム。
JP2005134483A 1997-09-16 2005-05-02 画像アレイセンサのための制御回路及びヘッドライトの自動制御 Pending JP2006020283A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US08/933,210 US5990469A (en) 1997-04-02 1997-09-16 Control circuit for image array sensors

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2000512351A Division JP2001517035A (ja) 1997-09-16 1998-09-15 画像アレイセンサのための制御回路及びヘッドライトの自動制御

Publications (1)

Publication Number Publication Date
JP2006020283A true JP2006020283A (ja) 2006-01-19

Family

ID=25463554

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2000512351A Pending JP2001517035A (ja) 1997-09-16 1998-09-15 画像アレイセンサのための制御回路及びヘッドライトの自動制御
JP2005134483A Pending JP2006020283A (ja) 1997-09-16 2005-05-02 画像アレイセンサのための制御回路及びヘッドライトの自動制御

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2000512351A Pending JP2001517035A (ja) 1997-09-16 1998-09-15 画像アレイセンサのための制御回路及びヘッドライトの自動制御

Country Status (10)

Country Link
US (3) US5990469A (ja)
EP (1) EP1016268B1 (ja)
JP (2) JP2001517035A (ja)
KR (1) KR100511801B1 (ja)
CN (1) CN1192601C (ja)
AT (1) ATE229249T1 (ja)
AU (1) AU9481298A (ja)
CA (1) CA2301087C (ja)
DE (1) DE69809950T2 (ja)
WO (1) WO1999014943A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010199724A (ja) * 2009-02-23 2010-09-09 Nikon Corp 撮像装置

Families Citing this family (347)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6396397B1 (en) * 1993-02-26 2002-05-28 Donnelly Corporation Vehicle imaging system with stereo imaging
US5910854A (en) 1993-02-26 1999-06-08 Donnelly Corporation Electrochromic polymeric solid films, manufacturing electrochromic devices using such solid films, and processes for making such solid films and devices
US6822563B2 (en) 1997-09-22 2004-11-23 Donnelly Corporation Vehicle imaging system with accessory control
US5670935A (en) 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
US5877897A (en) 1993-02-26 1999-03-02 Donnelly Corporation Automatic rearview mirror, vehicle lighting control and vehicle interior monitoring system using a photosensor array
US5796094A (en) 1993-02-26 1998-08-18 Donnelly Corporation Vehicle headlight control using imaging sensor
US5668663A (en) 1994-05-05 1997-09-16 Donnelly Corporation Electrochromic mirrors and devices
US6891563B2 (en) 1996-05-22 2005-05-10 Donnelly Corporation Vehicular vision system
US7655894B2 (en) 1996-03-25 2010-02-02 Donnelly Corporation Vehicular image sensing system
US6786420B1 (en) 1997-07-15 2004-09-07 Silverbrook Research Pty. Ltd. Data distribution mechanism in the form of ink dots on cards
US5837994C1 (en) * 1997-04-02 2001-10-16 Gentex Corp Control system to automatically dim vehicle head lamps
US6130421A (en) 1998-06-09 2000-10-10 Gentex Corporation Imaging system for vehicle headlamp control
US7653215B2 (en) 1997-04-02 2010-01-26 Gentex Corporation System for controlling exterior vehicle lights
US8120652B2 (en) * 1997-04-02 2012-02-21 Gentex Corporation System for controlling vehicle equipment
US6861809B2 (en) * 1998-09-18 2005-03-01 Gentex Corporation Headlamp control to prevent glare
US6774988B2 (en) * 2002-07-30 2004-08-10 Gentex Corporation Light source detection and categorization system for automatic vehicle exterior light control and method of manufacturing
US6587573B1 (en) 2000-03-20 2003-07-01 Gentex Corporation System for controlling exterior vehicle lights
US6049171A (en) * 1998-09-18 2000-04-11 Gentex Corporation Continuously variable headlamp control
US6631316B2 (en) * 2001-03-05 2003-10-07 Gentex Corporation Image processing system to control vehicle headlamps or other vehicle equipment
US6611610B1 (en) 1997-04-02 2003-08-26 Gentex Corporation Vehicle lamp control
US6618117B2 (en) 1997-07-12 2003-09-09 Silverbrook Research Pty Ltd Image sensing apparatus including a microcontroller
US6948794B2 (en) 1997-07-15 2005-09-27 Silverbrook Reserach Pty Ltd Printhead re-capping assembly for a print and demand digital camera system
US6195150B1 (en) * 1997-07-15 2001-02-27 Silverbrook Research Pty Ltd Pseudo-3D stereoscopic images and output device
US6624848B1 (en) 1997-07-15 2003-09-23 Silverbrook Research Pty Ltd Cascading image modification using multiple digital cameras incorporating image processing
US7110024B1 (en) 1997-07-15 2006-09-19 Silverbrook Research Pty Ltd Digital camera system having motion deblurring means
US6690419B1 (en) 1997-07-15 2004-02-10 Silverbrook Research Pty Ltd Utilising eye detection methods for image processing in a digital image camera
US6879341B1 (en) 1997-07-15 2005-04-12 Silverbrook Research Pty Ltd Digital camera system containing a VLIW vector processor
US8294975B2 (en) 1997-08-25 2012-10-23 Donnelly Corporation Automotive rearview mirror assembly
US6124886A (en) 1997-08-25 2000-09-26 Donnelly Corporation Modular rearview mirror assembly
US6172613B1 (en) 1998-02-18 2001-01-09 Donnelly Corporation Rearview mirror assembly incorporating vehicle information display
US6326613B1 (en) 1998-01-07 2001-12-04 Donnelly Corporation Vehicle interior mirror assembly adapted for containing a rain sensor
US6313454B1 (en) 1999-07-02 2001-11-06 Donnelly Corporation Rain sensor
DE69836344T2 (de) 1997-10-30 2007-05-31 Donnelly Corp., Holland Regensensor mit nebelerkennung
US8288711B2 (en) 1998-01-07 2012-10-16 Donnelly Corporation Interior rearview mirror system with forwardly-viewing camera and a control
US6278377B1 (en) 1999-08-25 2001-08-21 Donnelly Corporation Indicator for vehicle accessory
US6445287B1 (en) 2000-02-28 2002-09-03 Donnelly Corporation Tire inflation assistance monitoring system
US6721008B2 (en) * 1998-01-22 2004-04-13 Eastman Kodak Company Integrated CMOS active pixel digital camera
US6947077B1 (en) * 1998-03-30 2005-09-20 Micron Technology, Inc. Fast and accurate adjustment of gain and exposure time for image sensors
US6847398B1 (en) * 1998-03-31 2005-01-25 Micron Technology, Inc. Latched row logic for a rolling exposure snap
US6329925B1 (en) 1999-11-24 2001-12-11 Donnelly Corporation Rearview mirror assembly with added feature modular display
US6420975B1 (en) 1999-08-25 2002-07-16 Donnelly Corporation Interior rearview mirror sound processing system
US6477464B2 (en) 2000-03-09 2002-11-05 Donnelly Corporation Complete mirror-based global-positioning system (GPS) navigation solution
US6693517B2 (en) 2000-04-21 2004-02-17 Donnelly Corporation Vehicle mirror assembly communicating wirelessly with vehicle accessories and occupants
AUPP702098A0 (en) 1998-11-09 1998-12-03 Silverbrook Research Pty Ltd Image creation method and apparatus (ART73)
CA2356992C (en) * 1999-01-25 2007-09-18 Gentex Corporation Vehicle equipment control with semiconductor light sensors
US6679608B2 (en) * 1999-01-25 2004-01-20 Gentex Corporation Sensor device having an integral anamorphic lens
US6166698A (en) 1999-02-16 2000-12-26 Gentex Corporation Rearview mirror with integrated microwave receiver
US7106374B1 (en) 1999-04-05 2006-09-12 Amherst Systems, Inc. Dynamically reconfigurable vision system
AUPQ056099A0 (en) 1999-05-25 1999-06-17 Silverbrook Research Pty Ltd A method and apparatus (pprint01)
US6975355B1 (en) 2000-02-22 2005-12-13 Pixim, Inc. Multiple sampling via a time-indexed method to achieve wide dynamic ranges
US6340864B1 (en) * 1999-08-10 2002-01-22 Philips Electronics North America Corporation Lighting control system including a wireless remote sensor
US20030134293A1 (en) * 1999-11-16 2003-07-17 Zhiping Liu Method for rapid and accurate identification of microorganisms
EP1103420B1 (en) 1999-11-24 2006-06-21 Donnelly Corporation Rearview mirror assembly with utility functions
US7480149B2 (en) 2004-08-18 2009-01-20 Donnelly Corporation Accessory module for vehicle
AU2001243285A1 (en) 2000-03-02 2001-09-12 Donnelly Corporation Video mirror systems incorporating an accessory module
US7370983B2 (en) 2000-03-02 2008-05-13 Donnelly Corporation Interior mirror assembly with display
US7167796B2 (en) 2000-03-09 2007-01-23 Donnelly Corporation Vehicle navigation system for use with a telematics system
US7004593B2 (en) 2002-06-06 2006-02-28 Donnelly Corporation Interior rearview mirror system with compass
US6403942B1 (en) 2000-03-20 2002-06-11 Gentex Corporation Automatic headlamp control system utilizing radar and an optical sensor
US6396408B2 (en) 2000-03-31 2002-05-28 Donnelly Corporation Digital electrochromic circuit with a vehicle network
US6958768B1 (en) * 2000-10-20 2005-10-25 Asti Holdings Limited CMOS inspection apparatus
US7255451B2 (en) 2002-09-20 2007-08-14 Donnelly Corporation Electro-optic mirror cell
US7581859B2 (en) 2005-09-14 2009-09-01 Donnelly Corp. Display device for exterior rearview mirror
EP1363810B1 (en) 2001-01-23 2007-05-30 Donnelly Corporation Improved vehicular lighting system
US6943832B2 (en) * 2001-03-22 2005-09-13 Agilent Technologies, Inc. Hysteresis in image processing algorithms
JP3873168B2 (ja) * 2001-07-03 2007-01-24 カシオ計算機株式会社 デジタルカメラ及び画像処理方法
US7697027B2 (en) 2001-07-31 2010-04-13 Donnelly Corporation Vehicular video system
US6882287B2 (en) 2001-07-31 2005-04-19 Donnelly Corporation Automotive lane change aid
US6617564B2 (en) 2001-10-04 2003-09-09 Gentex Corporation Moisture sensor utilizing stereo imaging with an image sensor
US6824281B2 (en) 2002-01-31 2004-11-30 Donnelly Corporation Vehicle accessory module
TWI228682B (en) * 2002-02-22 2005-03-01 Winbond Electronics Corp Volume-production compound contactless electromagnetic induction encrypted integrated circuit
US7004606B2 (en) 2002-04-23 2006-02-28 Donnelly Corporation Automatic headlamp control
US6918674B2 (en) 2002-05-03 2005-07-19 Donnelly Corporation Vehicle rearview mirror system
WO2003093857A2 (en) 2002-05-03 2003-11-13 Donnelly Corporation Object detection system for vehicle
US20060061008A1 (en) 2004-09-14 2006-03-23 Lee Karner Mounting assembly for vehicle interior mirror
US7329013B2 (en) 2002-06-06 2008-02-12 Donnelly Corporation Interior rearview mirror system with compass
US7683326B2 (en) 2002-07-09 2010-03-23 Gentex Corporation Vehicle vision system with high dynamic range
US10144353B2 (en) 2002-08-21 2018-12-04 Magna Electronics Inc. Multi-camera vision system for a vehicle
CA2494723C (en) 2002-08-21 2011-11-08 Gentex Corporation Image acquisition and processing methods for automatic vehicular exterior lighting control
US7310177B2 (en) 2002-09-20 2007-12-18 Donnelly Corporation Electro-optic reflective element assembly
US7274501B2 (en) 2002-09-20 2007-09-25 Donnelly Corporation Mirror reflective element assembly
US7679791B2 (en) * 2003-01-06 2010-03-16 Chun-Jen Chen Method for selecting and adjusting scanner illuminant
US7471831B2 (en) * 2003-01-16 2008-12-30 California Institute Of Technology High throughput reconfigurable data analysis system
US8045760B2 (en) * 2003-02-21 2011-10-25 Gentex Corporation Automatic vehicle exterior light control systems
US8326483B2 (en) * 2003-02-21 2012-12-04 Gentex Corporation Monitoring and automatic equipment control systems
EP1602117B2 (en) 2003-02-21 2015-11-18 Gentex Corporation Automatic vehicle exterior light control system assemblies
EP1620763B1 (en) 2003-05-06 2012-07-25 Gentex Corporation Vehicular rearview mirror
US20040228545A1 (en) 2003-05-12 2004-11-18 Kwang-Bo Cho Multisampling with reduced bit samples
CA2524041C (en) 2003-05-19 2011-07-19 Gentex Corporation Rearview mirror assemblies incorporating hands-free telephone components
US7289037B2 (en) 2003-05-19 2007-10-30 Donnelly Corporation Mirror assembly for vehicle
US7446924B2 (en) 2003-10-02 2008-11-04 Donnelly Corporation Mirror reflective element assembly including electronic component
US20050073586A1 (en) * 2003-10-06 2005-04-07 Songnian Li Digital camera interface
US7308341B2 (en) 2003-10-14 2007-12-11 Donnelly Corporation Vehicle communication system
US7148831B2 (en) * 2003-10-27 2006-12-12 Micron Technology, Inc. Variable quantization ADC for image sensors
JP4262072B2 (ja) * 2003-12-05 2009-05-13 株式会社日立製作所 自動車用補助機器制御装置
US7526103B2 (en) 2004-04-15 2009-04-28 Donnelly Corporation Imaging system for vehicle
US20060016965A1 (en) * 2004-07-23 2006-01-26 Gentex Corporation Optics elements configured for light sensing applications and related methods of manufacturing
JP4232714B2 (ja) * 2004-09-02 2009-03-04 ソニー株式会社 読出アドレス制御方法、物理情報取得装置、および半導体装置
US7777199B2 (en) * 2004-09-17 2010-08-17 Wichita State University System and method for capturing image sequences at ultra-high framing rates
US7740596B2 (en) * 2004-09-29 2010-06-22 Ethicon Endo-Surgery, Inc. Biopsy device with sample storage
US7881496B2 (en) 2004-09-30 2011-02-01 Donnelly Corporation Vision system for vehicle
EP1817689B1 (en) * 2004-11-18 2014-03-12 Gentex Corporation Improved image acquisition and processing systems for vehicle equipment control
US8924078B2 (en) 2004-11-18 2014-12-30 Gentex Corporation Image acquisition and processing system for vehicle equipment control
EP1827908B1 (en) 2004-12-15 2015-04-29 Magna Electronics Inc. An accessory module system for a vehicle window
US7720580B2 (en) 2004-12-23 2010-05-18 Donnelly Corporation Object detection system for vehicle
EP1883855B1 (en) 2005-05-16 2011-07-20 Donnelly Corporation Vehicle mirror assembly with indicia at reflective element
JP5197915B2 (ja) * 2005-06-20 2013-05-15 浜松ホトニクス株式会社 イメージセンサ
US7602422B2 (en) * 2005-07-08 2009-10-13 Seiko Epson Corporation Serial camera interface
US7417221B2 (en) * 2005-09-08 2008-08-26 Gentex Corporation Automotive vehicle image sensor
TWI388206B (zh) * 2005-09-14 2013-03-01 Panasonic Corp 攝影裝置、固態攝影元件、影像生成方法
FR2892360B1 (fr) * 2005-10-25 2009-05-15 Valeo Vision Sa Procede de controle d'une operation de commutation de faisceaux lumineux.
CN101535087B (zh) 2005-11-01 2013-05-15 唐纳利公司 具有显示装置的内部后视镜
US9371032B2 (en) 2006-01-10 2016-06-21 Guardian Industries Corp. Moisture sensor and/or defogger with Bayesian improvements, and related methods
US8634988B2 (en) * 2006-01-10 2014-01-21 Guardian Industries Corp. Time, space, and/or wavelength multiplexed capacitive light sensor, and related methods
EP2426552A1 (en) 2006-03-03 2012-03-07 Gentex Corporation Electro-optic elements incorporating improved thin-film coatings
EP1991905B1 (en) 2006-03-09 2011-05-11 Gentex Corporation Vehicle rearview assembly including a high intensity display
JP4466604B2 (ja) * 2006-04-26 2010-05-26 株式会社デンソー 車両用前照灯装置
JP4473232B2 (ja) * 2006-04-26 2010-06-02 株式会社日本自動車部品総合研究所 車載用車両前方環境検出装置および車両用照明装置
JP4853160B2 (ja) * 2006-08-02 2012-01-11 株式会社デンソー 車両検出装置及びヘッドランプ制御装置
US20080043099A1 (en) * 2006-08-10 2008-02-21 Mobileye Technologies Ltd. Symmetric filter patterns for enhanced performance of single and concurrent driver assistance applications
WO2008024639A2 (en) 2006-08-11 2008-02-28 Donnelly Corporation Automatic headlamp control system
JP4544233B2 (ja) * 2006-10-11 2010-09-15 株式会社デンソー 車両検出装置及びヘッドランプ制御装置
DE102006055904A1 (de) * 2006-11-27 2008-05-29 Adc Automotive Distance Control Systems Gmbh Erkennung und Kategorisierung von Lichtpunkten mit einer Kamera in einer Fahrzeugumgebung
DE102006055908A1 (de) 2006-11-27 2008-05-29 Adc Automotive Distance Control Systems Gmbh Verfahren zur automatischen Fernlichtsteuerung
DE102006055903A1 (de) * 2006-11-27 2008-05-29 Adc Automotive Distance Control Systems Gmbh Erkennung von Fahrzeuglichtern mit einer Kamera
US8814779B2 (en) * 2006-12-21 2014-08-26 Intuitive Surgical Operations, Inc. Stereoscopic endoscope
US8556807B2 (en) * 2006-12-21 2013-10-15 Intuitive Surgical Operations, Inc. Hermetically sealed distal sensor endoscope
US20080174691A1 (en) * 2007-01-19 2008-07-24 Quality Vision International Inc. Strobed image acquisition guided by range sensor
EP2122599B1 (en) 2007-01-25 2019-11-13 Magna Electronics Inc. Radar sensing system for vehicle
KR101078648B1 (ko) 2007-02-09 2011-11-01 젠텍스 코포레이션 개량된 이미징 장치
US8305471B2 (en) * 2007-02-09 2012-11-06 Gentex Corporation High dynamic range imaging device
US8289430B2 (en) * 2007-02-09 2012-10-16 Gentex Corporation High dynamic range imaging device
JP4538468B2 (ja) * 2007-02-27 2010-09-08 日立オートモティブシステムズ株式会社 画像処理装置,画像処理方法、及び画像処理システム
US7914187B2 (en) 2007-07-12 2011-03-29 Magna Electronics Inc. Automatic lighting system with adaptive alignment function
US8017898B2 (en) 2007-08-17 2011-09-13 Magna Electronics Inc. Vehicular imaging system in an automatic headlamp control system
WO2009050591A2 (en) * 2007-09-05 2009-04-23 Hiok Nam Tay Wide dynamic range cmos image sensor
WO2009036176A1 (en) 2007-09-11 2009-03-19 Magna Electronics Imaging system for vehicle
US7786440B2 (en) * 2007-09-13 2010-08-31 Honeywell International Inc. Nanowire multispectral imaging array
WO2009046268A1 (en) 2007-10-04 2009-04-09 Magna Electronics Combined rgb and ir imaging sensor
DE102007051269A1 (de) * 2007-10-26 2009-05-07 Hella Kgaa Hueck & Co. Vorrichtung für Kraftfahrzeuge zur Klassifizierung von Lichtquellen im Verkehrsraum
US8629927B2 (en) 2008-04-09 2014-01-14 Gentex Corporation Imaging device
US8587706B2 (en) * 2008-01-30 2013-11-19 Gentex Corporation Imaging device
US20120306816A1 (en) * 2011-06-06 2012-12-06 Simon James Bridger Simplified Optical Position Sensing Assembly
US8405636B2 (en) * 2008-01-07 2013-03-26 Next Holdings Limited Optical position sensing system and optical position sensor assembly
JP5152491B2 (ja) * 2008-02-14 2013-02-27 株式会社リコー 画像撮像装置
US8154418B2 (en) 2008-03-31 2012-04-10 Magna Mirrors Of America, Inc. Interior rearview mirror system
US7876371B2 (en) * 2008-03-31 2011-01-25 Aptina Imaging Corporation Systems and methods to perform digital correlated double sampling using successive approximation analog to digital conversion techniques
US20100020170A1 (en) 2008-07-24 2010-01-28 Higgins-Luthman Michael J Vehicle Imaging System
US9487144B2 (en) 2008-10-16 2016-11-08 Magna Mirrors Of America, Inc. Interior mirror assembly with display
US8378284B2 (en) * 2009-01-28 2013-02-19 Gentex Corporation Imaging device
US8144223B2 (en) * 2009-01-28 2012-03-27 Gentex Corporation Imaging device
WO2010099416A1 (en) 2009-02-27 2010-09-02 Magna Electronics Alert system for vehicle
DE102009016580A1 (de) 2009-04-06 2010-10-07 Hella Kgaa Hueck & Co. Datenverarbeitungssystem und Verfahren zum Bereitstellen mindestens einer Fahrerassistenzfunktion
US8376595B2 (en) 2009-05-15 2013-02-19 Magna Electronics, Inc. Automatic headlamp control
JP5424742B2 (ja) * 2009-06-30 2014-02-26 株式会社小糸製作所 車両用前照灯装置
US9495876B2 (en) 2009-07-27 2016-11-15 Magna Electronics Inc. Vehicular camera with on-board microcontroller
US8874317B2 (en) 2009-07-27 2014-10-28 Magna Electronics Inc. Parking assist system
EP2473871B1 (en) 2009-09-01 2015-03-11 Magna Mirrors Of America, Inc. Imaging and display system for vehicle
US8890955B2 (en) 2010-02-10 2014-11-18 Magna Mirrors Of America, Inc. Adaptable wireless vehicle vision system based on wireless communication error
US8456327B2 (en) 2010-02-26 2013-06-04 Gentex Corporation Automatic vehicle equipment monitoring, warning, and control system
DE102010025349A1 (de) * 2010-06-28 2011-12-29 Audi Ag Verfahren zum Betrieb einer Kraftfahrzeugbeleuchtungseinrichtung mit automatischer Abblendfunktion
US9117123B2 (en) 2010-07-05 2015-08-25 Magna Electronics Inc. Vehicular rear view camera display system with lifecheck function
US9056584B2 (en) 2010-07-08 2015-06-16 Gentex Corporation Rearview assembly for a vehicle
CN101917538B (zh) * 2010-08-26 2012-09-12 北京思比科微电子技术股份有限公司 Cmos图像传感器像素采样方法
WO2012068331A1 (en) 2010-11-19 2012-05-24 Magna Electronics Inc. Lane keeping system and lane centering system
US9900522B2 (en) 2010-12-01 2018-02-20 Magna Electronics Inc. System and method of establishing a multi-camera image using pixel remapping
US9264672B2 (en) 2010-12-22 2016-02-16 Magna Mirrors Of America, Inc. Vision display system for vehicle
US9085261B2 (en) 2011-01-26 2015-07-21 Magna Electronics Inc. Rear vision system with trailer angle detection
US9194943B2 (en) 2011-04-12 2015-11-24 Magna Electronics Inc. Step filter for estimating distance in a time-of-flight ranging system
WO2012145819A1 (en) 2011-04-25 2012-11-01 Magna International Inc. Image processing method for detecting objects using relative motion
BR112013029020A2 (pt) 2011-05-12 2019-10-01 Olive Medical Corp sensor de imagem com elementos de interconexão de otimização de tolerância
CN102279217B (zh) * 2011-05-27 2014-04-16 东南大学 单神经元及多神经元集群间神经信号传递特性探测装置
US9769430B1 (en) 2011-06-23 2017-09-19 Gentex Corporation Imager system with median filter and method thereof
US8620523B2 (en) 2011-06-24 2013-12-31 Gentex Corporation Rearview assembly with multiple ambient light sensors
US10793067B2 (en) 2011-07-26 2020-10-06 Magna Electronics Inc. Imaging system for vehicle
EP2740003B1 (en) 2011-08-05 2017-06-14 Gentex Corporation Optical assembly for a light sensor
EP2560391A1 (en) * 2011-08-17 2013-02-20 Autoliv Development AB imaging system in a motor vehicle, and corresponding imaging method
DE112012003931T5 (de) 2011-09-21 2014-07-10 Magna Electronics, Inc. Bildverarbeitungssystem für ein Kraftfahrzeug mit Bilddatenübertragung undStromversorgung über ein Koaxialkabel
US9681062B2 (en) 2011-09-26 2017-06-13 Magna Electronics Inc. Vehicle camera image quality improvement in poor visibility conditions by contrast amplification
US9146898B2 (en) 2011-10-27 2015-09-29 Magna Electronics Inc. Driver assist system with algorithm switching
US10099614B2 (en) 2011-11-28 2018-10-16 Magna Electronics Inc. Vision system for vehicle
US9298991B2 (en) * 2012-01-17 2016-03-29 LimnTech LLC GPS-based machine vision roadway mark locator, inspection apparatus, and marker
US9784843B2 (en) 2012-01-17 2017-10-10 Limn Tech LLC Enhanced roadway mark locator, inspection apparatus, and marker
US10301783B2 (en) 2012-01-17 2019-05-28 LimnTech LLC Roadway maintenance striping control system
US9316347B2 (en) 2012-01-24 2016-04-19 Gentex Corporation Rearview assembly with interchangeable rearward viewing device
US9041838B2 (en) 2012-02-14 2015-05-26 Gentex Corporation High dynamic range imager system
WO2013126715A2 (en) 2012-02-22 2013-08-29 Magna Electronics, Inc. Vehicle camera system with image manipulation
US10457209B2 (en) 2012-02-22 2019-10-29 Magna Electronics Inc. Vehicle vision system with multi-paned view
US8694224B2 (en) 2012-03-01 2014-04-08 Magna Electronics Inc. Vehicle yaw rate correction
US10609335B2 (en) 2012-03-23 2020-03-31 Magna Electronics Inc. Vehicle vision system with accelerated object confirmation
US9319637B2 (en) 2012-03-27 2016-04-19 Magna Electronics Inc. Vehicle vision system with lens pollution detection
WO2013158592A2 (en) 2012-04-16 2013-10-24 Magna Electronics, Inc. Vehicle vision system with reduced image color data processing by use of dithering
US8879139B2 (en) 2012-04-24 2014-11-04 Gentex Corporation Display mirror assembly
US10089537B2 (en) 2012-05-18 2018-10-02 Magna Electronics Inc. Vehicle vision system with front and rear camera integration
US8983135B2 (en) 2012-06-01 2015-03-17 Gentex Corporation System and method for controlling vehicle equipment responsive to a multi-stage village detection
EP2859436B1 (en) 2012-06-12 2020-06-03 Gentex Corporation Vehicle imaging system providing multi-stage aiming stability indication
IN2015MN00019A (ja) 2012-07-26 2015-10-16 Olive Medical Corp
US8964024B2 (en) 2012-08-02 2015-02-24 Gentex Corporation System and method for controlling exterior vehicle lights responsive to detection of a semi-truck
US9340227B2 (en) 2012-08-14 2016-05-17 Magna Electronics Inc. Vehicle lane keep assist system
US9511708B2 (en) 2012-08-16 2016-12-06 Gentex Corporation Method and system for imaging an external scene by employing a custom image sensor
WO2014032042A1 (en) 2012-08-24 2014-02-27 Gentex Corporation Shaped rearview mirror assembly
DE102013217430A1 (de) 2012-09-04 2014-03-06 Magna Electronics, Inc. Fahrerassistenzsystem für ein Kraftfahrzeug
JP2014059381A (ja) * 2012-09-14 2014-04-03 Casio Comput Co Ltd 画像処理装置、画像処理方法、及びプログラム
US9558409B2 (en) 2012-09-26 2017-01-31 Magna Electronics Inc. Vehicle vision system with trailer angle detection
US9446713B2 (en) 2012-09-26 2016-09-20 Magna Electronics Inc. Trailer angle detection system
US9707896B2 (en) 2012-10-15 2017-07-18 Magna Electronics Inc. Vehicle camera lens dirt protection via air flow
US9090234B2 (en) 2012-11-19 2015-07-28 Magna Electronics Inc. Braking control system for vehicle
US9743002B2 (en) 2012-11-19 2017-08-22 Magna Electronics Inc. Vehicle vision system with enhanced display functions
US10025994B2 (en) 2012-12-04 2018-07-17 Magna Electronics Inc. Vehicle vision system utilizing corner detection
EP2929402A4 (en) 2012-12-04 2016-05-25 Gentex Corp IMAGING SYSTEM AND METHOD FOR DETECTING A BRIGHT CITY MODE
US9481301B2 (en) 2012-12-05 2016-11-01 Magna Electronics Inc. Vehicle vision system utilizing camera synchronization
CN103024309B (zh) * 2012-12-29 2014-05-14 天津大学 用于快速获取单幅低阶累加图像的cmos图像传感器
US9327648B2 (en) 2013-01-04 2016-05-03 Gentex Corporation Rearview assembly with exposed carrier plate
US9488892B2 (en) 2013-01-09 2016-11-08 Gentex Corporation Printed appliqué and method thereof
US20140218529A1 (en) 2013-02-04 2014-08-07 Magna Electronics Inc. Vehicle data recording system
US9092986B2 (en) 2013-02-04 2015-07-28 Magna Electronics Inc. Vehicular vision system
US9207116B2 (en) 2013-02-12 2015-12-08 Gentex Corporation Light sensor
US9870753B2 (en) 2013-02-12 2018-01-16 Gentex Corporation Light sensor having partially opaque optic
US9445057B2 (en) 2013-02-20 2016-09-13 Magna Electronics Inc. Vehicle vision system with dirt detection
US9380228B2 (en) 2013-03-13 2016-06-28 Gentex Corporation High dynamic range image sensor system and method thereof
WO2014145248A1 (en) 2013-03-15 2014-09-18 Olive Medical Corporation Minimize image sensor i/o and conductor counts in endoscope applications
EP2967285B1 (en) 2013-03-15 2023-08-16 DePuy Synthes Products, Inc. Image sensor synchronization without input clock and data transmission clock
US10027930B2 (en) 2013-03-29 2018-07-17 Magna Electronics Inc. Spectral filtering for vehicular driver assistance systems
US9327693B2 (en) 2013-04-10 2016-05-03 Magna Electronics Inc. Rear collision avoidance system for vehicle
US10232797B2 (en) 2013-04-29 2019-03-19 Magna Electronics Inc. Rear vision system for vehicle with dual purpose signal lines
US9508014B2 (en) 2013-05-06 2016-11-29 Magna Electronics Inc. Vehicular multi-camera vision system
US10567705B2 (en) 2013-06-10 2020-02-18 Magna Electronics Inc. Coaxial cable with bidirectional data transmission
US9260095B2 (en) 2013-06-19 2016-02-16 Magna Electronics Inc. Vehicle vision system with collision mitigation
US20140375476A1 (en) 2013-06-24 2014-12-25 Magna Electronics Inc. Vehicle alert system
US9619716B2 (en) 2013-08-12 2017-04-11 Magna Electronics Inc. Vehicle vision system with image classification
US10326969B2 (en) 2013-08-12 2019-06-18 Magna Electronics Inc. Vehicle vision system with reduction of temporal noise in images
KR101848451B1 (ko) 2013-08-19 2018-04-12 젠텍스 코포레이션 차량 후미등과 점멸 적색 정지등을 구별하기 위한 차량 촬상 시스템 및 방법
EP3036132B1 (en) 2013-08-19 2019-02-27 Gentex Corporation Vehicle imaging system and method for distinguishing reflective objects from lights of another vehicle
CN105579289B (zh) 2013-08-19 2018-01-19 金泰克斯公司 具有自身运动检测的成像系统和方法
WO2015034773A1 (en) 2013-09-04 2015-03-12 Gentex Corporation A rearview assembly of a vehicle for displaying images
AU2014326772B2 (en) 2013-09-24 2017-07-20 Gentex Corporation Display mirror assembly
EP3052341B1 (en) 2013-10-01 2021-12-01 Gentex Corporation System and method for controlling exterior vehicle lights on motorways
KR101511853B1 (ko) 2013-10-14 2015-04-13 영남대학교 산학협력단 단일 다중 노출 카메라를 이용한 야간 전방 차량 검출 및 위치 측정 시스템 및 방법
KR101794821B1 (ko) 2013-11-15 2017-11-07 젠텍스 코포레이션 차량 앞유리에 대한 컬러 감쇠를 위한 동적 보상을 포함하는 촬상 시스템
US9499139B2 (en) 2013-12-05 2016-11-22 Magna Electronics Inc. Vehicle monitoring system
US9988047B2 (en) 2013-12-12 2018-06-05 Magna Electronics Inc. Vehicle control system with traffic driving control
WO2015116915A1 (en) 2014-01-31 2015-08-06 Gentex Corporation Backlighting assembly for display for reducing cross-hatching
CN104924877B (zh) * 2014-03-18 2017-10-10 鸿富锦精密工业(深圳)有限公司 汽车及汽车防炫目的方法
US10168393B2 (en) 2014-09-25 2019-01-01 Lockheed Martin Corporation Micro-vacancy center device
US9853837B2 (en) 2014-04-07 2017-12-26 Lockheed Martin Corporation High bit-rate magnetic communication
US9829545B2 (en) 2015-11-20 2017-11-28 Lockheed Martin Corporation Apparatus and method for hypersensitivity detection of magnetic field
US9590601B2 (en) 2014-04-07 2017-03-07 Lockheed Martin Corporation Energy efficient controlled magnetic field generator circuit
US9817081B2 (en) 2016-01-21 2017-11-14 Lockheed Martin Corporation Magnetometer with light pipe
US9638821B2 (en) 2014-03-20 2017-05-02 Lockheed Martin Corporation Mapping and monitoring of hydraulic fractures using vector magnetometers
US9614589B1 (en) 2015-12-01 2017-04-04 Lockheed Martin Corporation Communication via a magnio
US9823313B2 (en) 2016-01-21 2017-11-21 Lockheed Martin Corporation Diamond nitrogen vacancy sensor with circuitry on diamond
US9910104B2 (en) 2015-01-23 2018-03-06 Lockheed Martin Corporation DNV magnetic field detector
US9541610B2 (en) 2015-02-04 2017-01-10 Lockheed Martin Corporation Apparatus and method for recovery of three dimensional magnetic field from a magnetic detection system
US9824597B2 (en) 2015-01-28 2017-11-21 Lockheed Martin Corporation Magnetic navigation methods and systems utilizing power grid and communication network
US9910105B2 (en) 2014-03-20 2018-03-06 Lockheed Martin Corporation DNV magnetic field detector
US10338162B2 (en) 2016-01-21 2019-07-02 Lockheed Martin Corporation AC vector magnetic anomaly detection with diamond nitrogen vacancies
US9557391B2 (en) 2015-01-23 2017-01-31 Lockheed Martin Corporation Apparatus and method for high sensitivity magnetometry measurement and signal processing in a magnetic detection system
EP3119643B1 (en) 2014-03-21 2018-05-23 Gentex Corporation Tri-modal display mirror assembly
US9834146B2 (en) 2014-04-01 2017-12-05 Gentex Corporation Automatic display mirror assembly
US9623878B2 (en) 2014-04-02 2017-04-18 Magna Electronics Inc. Personalized driver assistance system for vehicle
US9487235B2 (en) 2014-04-10 2016-11-08 Magna Electronics Inc. Vehicle control system with adaptive wheel angle correction
US10328932B2 (en) 2014-06-02 2019-06-25 Magna Electronics Inc. Parking assist system with annotated map generation
DE102014217366A1 (de) * 2014-09-01 2016-03-03 Robert Bosch Gmbh Verfahren und Vorrichtung zum Anpassen einer Helligkeit eines Scheinwerfers für ein Fahrzeug
US9925980B2 (en) 2014-09-17 2018-03-27 Magna Electronics Inc. Vehicle collision avoidance system with enhanced pedestrian avoidance
US9694751B2 (en) 2014-09-19 2017-07-04 Gentex Corporation Rearview assembly
US9694752B2 (en) 2014-11-07 2017-07-04 Gentex Corporation Full display mirror actuator
EP3218227B1 (en) 2014-11-13 2018-10-24 Gentex Corporation Rearview mirror system with a display
KR101997815B1 (ko) 2014-12-03 2019-07-08 젠텍스 코포레이션 디스플레이 미러 어셈블리
USD746744S1 (en) 2014-12-05 2016-01-05 Gentex Corporation Rearview device
US9744907B2 (en) 2014-12-29 2017-08-29 Gentex Corporation Vehicle vision system having adjustable displayed field of view
US9720278B2 (en) 2015-01-22 2017-08-01 Gentex Corporation Low cost optical film stack
BR112017016261A2 (pt) 2015-01-28 2018-03-27 Lockheed Martin Corporation carga de energia in situ
GB2550809A (en) 2015-02-04 2017-11-29 Lockheed Corp Apparatus and method for estimating absolute axes' orientations for a magnetic detection system
US10286855B2 (en) 2015-03-23 2019-05-14 Magna Electronics Inc. Vehicle vision system with video compression
CN107531183B (zh) 2015-04-20 2021-09-03 金泰克斯公司 具有贴花的后视总成
US10819943B2 (en) 2015-05-07 2020-10-27 Magna Electronics Inc. Vehicle vision system with incident recording function
JP6526243B2 (ja) 2015-05-18 2019-06-05 ジェンテックス コーポレイション 全画面表示バックミラー装置
CN107709096B (zh) 2015-06-22 2021-08-24 金泰克斯公司 用于处理流式传输视频图像以校正经调幅光的闪变的系统和方法
US10214206B2 (en) 2015-07-13 2019-02-26 Magna Electronics Inc. Parking assist system for vehicle
US10078789B2 (en) 2015-07-17 2018-09-18 Magna Electronics Inc. Vehicle parking assist system with vision-based parking space detection
FR3041498A1 (fr) * 2015-09-21 2017-03-24 Zedel Lampe led dotee d'un dispositif de regulation de la luminosite
US10875403B2 (en) 2015-10-27 2020-12-29 Magna Electronics Inc. Vehicle vision system with enhanced night vision
EP3368375B1 (en) 2015-10-30 2020-03-04 Gentex Corporation Rearview device
USD798207S1 (en) 2015-10-30 2017-09-26 Gentex Corporation Rearview mirror assembly
US10685623B2 (en) 2015-10-30 2020-06-16 Gentex Corporation Toggle paddle
USD797627S1 (en) 2015-10-30 2017-09-19 Gentex Corporation Rearview mirror device
USD800618S1 (en) 2015-11-02 2017-10-24 Gentex Corporation Toggle paddle for a rear view device
WO2017078766A1 (en) 2015-11-04 2017-05-11 Lockheed Martin Corporation Magnetic band-pass filter
DE102015119444B4 (de) * 2015-11-11 2018-01-18 Protechna Herbst Gmbh & Co. Kg Vorrichtung und Verfahren zur Überwachung einer laufenden Warenbahn
WO2017087013A1 (en) 2015-11-20 2017-05-26 Lockheed Martin Corporation Apparatus and method for closed loop processing for a magnetic detection system
US10144419B2 (en) 2015-11-23 2018-12-04 Magna Electronics Inc. Vehicle dynamic control system for emergency handling
WO2017123261A1 (en) 2016-01-12 2017-07-20 Lockheed Martin Corporation Defect detector for conductive materials
WO2017127098A1 (en) 2016-01-21 2017-07-27 Lockheed Martin Corporation Diamond nitrogen vacancy sensed ferro-fluid hydrophone
GB2562958A (en) 2016-01-21 2018-11-28 Lockheed Corp Magnetometer with a light emitting diode
WO2017127096A1 (en) 2016-01-21 2017-07-27 Lockheed Martin Corporation Diamond nitrogen vacancy sensor with dual rf sources
WO2017127090A1 (en) 2016-01-21 2017-07-27 Lockheed Martin Corporation Higher magnetic sensitivity through fluorescence manipulation by phonon spectrum control
WO2017127091A1 (en) * 2016-01-21 2017-07-27 Lockheed Martin Corporation Reduced instruction set controller for diamond nitrogen vacancy sensor
AU2016388316A1 (en) 2016-01-21 2018-09-06 Lockheed Martin Corporation Diamond nitrogen vacancy sensor with common RF and magnetic fields generator
US11277558B2 (en) 2016-02-01 2022-03-15 Magna Electronics Inc. Vehicle vision system with master-slave camera configuration
US11433809B2 (en) 2016-02-02 2022-09-06 Magna Electronics Inc. Vehicle vision system with smart camera video output
US10160437B2 (en) 2016-02-29 2018-12-25 Magna Electronics Inc. Vehicle control system with reverse assist
US20170253237A1 (en) 2016-03-02 2017-09-07 Magna Electronics Inc. Vehicle vision system with automatic parking function
US10132971B2 (en) 2016-03-04 2018-11-20 Magna Electronics Inc. Vehicle camera with multiple spectral filters
US10055651B2 (en) 2016-03-08 2018-08-21 Magna Electronics Inc. Vehicle vision system with enhanced lane tracking
USD845851S1 (en) 2016-03-31 2019-04-16 Gentex Corporation Rearview device
USD817238S1 (en) 2016-04-29 2018-05-08 Gentex Corporation Rearview device
US10330744B2 (en) 2017-03-24 2019-06-25 Lockheed Martin Corporation Magnetometer with a waveguide
US10371765B2 (en) 2016-07-11 2019-08-06 Lockheed Martin Corporation Geolocation of magnetic sources using vector magnetometer sensors
US10359479B2 (en) 2017-02-20 2019-07-23 Lockheed Martin Corporation Efficient thermal drift compensation in DNV vector magnetometry
US10228429B2 (en) 2017-03-24 2019-03-12 Lockheed Martin Corporation Apparatus and method for resonance magneto-optical defect center material pulsed mode referencing
US20170343621A1 (en) 2016-05-31 2017-11-30 Lockheed Martin Corporation Magneto-optical defect center magnetometer
US10345396B2 (en) 2016-05-31 2019-07-09 Lockheed Martin Corporation Selected volume continuous illumination magnetometer
US10345395B2 (en) 2016-12-12 2019-07-09 Lockheed Martin Corporation Vector magnetometry localization of subsurface liquids
US10338163B2 (en) 2016-07-11 2019-07-02 Lockheed Martin Corporation Multi-frequency excitation schemes for high sensitivity magnetometry measurement with drift error compensation
US10571530B2 (en) 2016-05-31 2020-02-25 Lockheed Martin Corporation Buoy array of magnetometers
US10145910B2 (en) 2017-03-24 2018-12-04 Lockheed Martin Corporation Photodetector circuit saturation mitigation for magneto-optical high intensity pulses
US10274550B2 (en) 2017-03-24 2019-04-30 Lockheed Martin Corporation High speed sequential cancellation for pulsed mode
US10317279B2 (en) 2016-05-31 2019-06-11 Lockheed Martin Corporation Optical filtration system for diamond material with nitrogen vacancy centers
US10408890B2 (en) 2017-03-24 2019-09-10 Lockheed Martin Corporation Pulsed RF methods for optimization of CW measurements
US10281550B2 (en) 2016-11-14 2019-05-07 Lockheed Martin Corporation Spin relaxometry based molecular sequencing
US10677953B2 (en) 2016-05-31 2020-06-09 Lockheed Martin Corporation Magneto-optical detecting apparatus and methods
US10527746B2 (en) 2016-05-31 2020-01-07 Lockheed Martin Corporation Array of UAVS with magnetometers
US10025138B2 (en) 2016-06-06 2018-07-17 Gentex Corporation Illuminating display with light gathering structure
US10033916B2 (en) * 2016-06-14 2018-07-24 Intel Corporation Transmission of image data and camera management commands
US10291814B2 (en) 2016-10-14 2019-05-14 Intel Corporation Transmission of encrypted image data
USD809984S1 (en) 2016-12-07 2018-02-13 Gentex Corporation Rearview assembly
USD854473S1 (en) 2016-12-16 2019-07-23 Gentex Corporation Rearview assembly
WO2018125898A1 (en) 2016-12-30 2018-07-05 Gentex Corporation Full display mirror with on-demand spotter view
WO2018140402A1 (en) 2017-01-27 2018-08-02 Gentex Corporation Image compensation for motorcycle banking
EP3595931A4 (en) 2017-03-17 2020-01-22 Gentex Corporation REVIEW REVERSE CAMERA WITH TWO
US10459041B2 (en) 2017-03-24 2019-10-29 Lockheed Martin Corporation Magnetic detection system with highly integrated diamond nitrogen vacancy sensor
US10338164B2 (en) 2017-03-24 2019-07-02 Lockheed Martin Corporation Vacancy center material with highly efficient RF excitation
US10371760B2 (en) 2017-03-24 2019-08-06 Lockheed Martin Corporation Standing-wave radio frequency exciter
US10379174B2 (en) 2017-03-24 2019-08-13 Lockheed Martin Corporation Bias magnet array for magnetometer
US9966410B1 (en) * 2017-04-04 2018-05-08 Pixart Imaging (Penang) Sdn. Bhd. Image sensor circuit and image sensing method
US11042770B2 (en) * 2017-10-09 2021-06-22 EagleSens Systems Corporation Artificial intelligence based image data processing method and image sensor
US11282303B2 (en) 2017-12-01 2022-03-22 Gentex Corporation System and method for identifying vehicle operation mode
DE102018204424B3 (de) 2018-03-22 2019-08-08 Audi Ag Verfahren zum Kalibrieren einer Position eines Matrix-Scheinwerfers eines Kraftfahrzeugs, Steuereinrichtung und Kraftfahrzeug
US10932336B2 (en) 2018-09-10 2021-02-23 Lumileds Llc High speed image refresh system
US11011100B2 (en) 2018-09-10 2021-05-18 Lumileds Llc Dynamic pixel diagnostics for a high refresh rate LED array
US11091087B2 (en) 2018-09-10 2021-08-17 Lumileds Llc Adaptive headlamp system for vehicles
US11521298B2 (en) 2018-09-10 2022-12-06 Lumileds Llc Large LED array with reduced data management
TWI826530B (zh) 2018-10-19 2023-12-21 荷蘭商露明控股公司 驅動發射器陣列之方法及發射器陣列裝置
JP7237607B2 (ja) * 2019-01-25 2023-03-13 株式会社小糸製作所 車両用灯具システム、車両用灯具の制御装置および車両用灯具の制御方法
US11390209B2 (en) * 2020-03-18 2022-07-19 Grote Industries, Llc System and method for adaptive driving beam headlamp
US11968639B2 (en) 2020-11-11 2024-04-23 Magna Electronics Inc. Vehicular control system with synchronized communication between control units
EP4388243A1 (en) 2021-08-20 2024-06-26 Gentex Corporation Lighting assembly and illumination system having a lighting assembly

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2566219B1 (fr) * 1984-06-15 1989-04-28 Sfim Procede et dispositif pour l'exploration d'une fenetre de la zone image d'un dispositif a transfert de charges du type a transfert de trames
US4891559A (en) * 1985-06-13 1990-01-02 Nippondenso Soken, Inc. Apparatus for controlling a headlight of a vehicle
DE3744128A1 (de) * 1987-12-24 1989-07-13 Heering W Prof Dr Verfahren und schaltungsanordnung zur programmierten ansteuerung von ccd- und photodioden-matrixarrays
US5402170A (en) * 1991-12-11 1995-03-28 Eastman Kodak Company Hand-manipulated electronic camera tethered to a personal computer
US5475441A (en) * 1992-12-10 1995-12-12 Eastman Kodak Company Electronic camera with memory card interface to a computer
US5796094A (en) * 1993-02-26 1998-08-18 Donnelly Corporation Vehicle headlight control using imaging sensor
US5452004A (en) * 1993-06-17 1995-09-19 Litton Systems, Inc. Focal plane array imaging device with random access architecture
AU1689897A (en) * 1995-12-29 1997-07-28 Intel Corporation Cmos imaging device with integrated flash memory image correction circuitry
US5867214A (en) * 1996-04-11 1999-02-02 Apple Computer, Inc. Apparatus and method for increasing a digital camera image capture rate by delaying image processing
US5831258A (en) * 1996-08-20 1998-11-03 Xerox Corporation Pixel circuit with integrated amplifer
US6005613A (en) * 1996-09-12 1999-12-21 Eastman Kodak Company Multi-mode digital camera with computer interface using data packets combining image and mode data
US5837994C1 (en) * 1997-04-02 2001-10-16 Gentex Corp Control system to automatically dim vehicle head lamps
KR19990033743A (ko) * 1997-10-27 1999-05-15 구본준 디지탈 비디오 카메라

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010199724A (ja) * 2009-02-23 2010-09-09 Nikon Corp 撮像装置

Also Published As

Publication number Publication date
ATE229249T1 (de) 2002-12-15
AU9481298A (en) 1999-04-05
US7432967B2 (en) 2008-10-07
CN1270736A (zh) 2000-10-18
US5990469A (en) 1999-11-23
EP1016268A1 (en) 2000-07-05
DE69809950T2 (de) 2003-07-17
US20030058346A1 (en) 2003-03-27
CA2301087C (en) 2004-03-23
CN1192601C (zh) 2005-03-09
DE69809950D1 (de) 2003-01-16
US6469739B1 (en) 2002-10-22
EP1016268B1 (en) 2002-12-04
WO1999014943A1 (en) 1999-03-25
KR20010024013A (ko) 2001-03-26
KR100511801B1 (ko) 2005-09-05
CA2301087A1 (en) 1999-03-25
JP2001517035A (ja) 2001-10-02

Similar Documents

Publication Publication Date Title
JP2006020283A (ja) 画像アレイセンサのための制御回路及びヘッドライトの自動制御
KR100528469B1 (ko) 연속 가변 헤드램프 제어 방법 및 시스템
US7149613B2 (en) Image processing system to control vehicle headlamps or other vehicle equipment
KR100609273B1 (ko) 디지털 거울장치 프로젝터 및 디지털 거울장치 프로젝터에 사용되는 광량 제어 방법
US20090135271A1 (en) Image taking apparatus and image recorder
US20120062746A1 (en) Image Processing Apparatus
JPH1093856A (ja) 固体撮像装置
US8076633B2 (en) Night vision apparatus
CN105991935B (zh) 曝光控制装置及曝光控制方法
ES2908209T3 (es) Procedimiento para la medición de la latencia
US7518570B2 (en) Method and apparatus for miniaturizing digital light processing displays using high refractive index crystals
CA2452068C (en) Control circuit for image array sensors
US20240101021A1 (en) Headlight determination apparatus
CN112565618B (zh) 曝光控制装置
WO2023071262A1 (zh) 一种车灯组件及交通工具
MXPA00002204A (en) Control circuit for image array sensors and automatic headlamp control
JP7176208B2 (ja) システムおよび撮像装置
CN117635672A (zh) 图像处理方法、装置、摄像系统、设备、介质及程序产品
JP2021044667A (ja) 露光制御装置
JP2004153425A (ja) 車載用撮像装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080825

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20081125

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20081128

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090406

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090706

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090709

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100318