JP4359121B2 - Ｃｍｏｓまたはｃｃｄ技術のマトリクスを有する多機能統合化視覚システム - Google Patents

Ｃｍｏｓまたはｃｃｄ技術のマトリクスを有する多機能統合化視覚システム Download PDF

Info

Publication number
JP4359121B2
JP4359121B2 JP2003375731A JP2003375731A JP4359121B2 JP 4359121 B2 JP4359121 B2 JP 4359121B2 JP 2003375731 A JP2003375731 A JP 2003375731A JP 2003375731 A JP2003375731 A JP 2003375731A JP 4359121 B2 JP4359121 B2 JP 4359121B2
Authority
JP
Japan
Prior art keywords
matrix
optical
detection
specialized
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003375731A
Other languages
English (en)
Other versions
JP2004289787A (ja
Inventor
ネレオ・パッラロ
フィリッポ・ヴィシンタイネル
ピエルマリオ・レペット
エレナ・ボレッロ
バルトロメオ・パイレッティ
ステファノ・ベルナルド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Centro Ricerche Fiat SCpA
Original Assignee
Centro Ricerche Fiat SCpA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Centro Ricerche Fiat SCpA filed Critical Centro Ricerche Fiat SCpA
Publication of JP2004289787A publication Critical patent/JP2004289787A/ja
Application granted granted Critical
Publication of JP4359121B2 publication Critical patent/JP4359121B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B19/00—Cameras
    • G03B19/02—Still-picture cameras
    • G03B19/023—Multi-image cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/14—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
    • B60Q1/1415—Dimming circuits
    • B60Q1/1423—Automatic dimming circuits, i.e. switching between high beam and low beam due to change of ambient light or light level in road traffic
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/47—Scattering, i.e. diffuse reflection
    • G01N21/49—Scattering, i.e. diffuse reflection within a body or fluid
    • G01N21/53—Scattering, i.e. diffuse reflection within a body or fluid within a flowing fluid, e.g. smoke
    • G01N21/538—Scattering, i.e. diffuse reflection within a body or fluid within a flowing fluid, e.g. smoke for determining atmospheric attenuation and visibility
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481—Constructional features, e.g. arrangements of optical elements
    • G01S7/4816—Constructional features, e.g. arrangements of optical elements of receivers alone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00—Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/30—Indexing codes relating to the vehicle environment
    • B60Q2300/33—Driving situation
    • B60Q2300/332—Driving situation on city roads
    • B60Q2300/3321—Detection of streetlights
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1223—Mirror assemblies combined with other articles, e.g. clocks with sensors or transducers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B60S1/0833—Optical rain sensor
    • B60S1/0844—Optical rain sensor including a camera
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00—Photometry, e.g. photographic exposure meter
    • G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/47—Scattering, i.e. diffuse reflection
    • G01N2021/4704—Angular selective
    • G01N2021/4709—Backscatter
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327—Sensor installation details

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Immunology (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Pathology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Studio Devices (AREA)
  • Heating, Cooling, Or Curing Plastics Or The Like In General (AREA)
  • Casting Or Compression Moulding Of Plastics Or The Like (AREA)
  • Facsimile Heads (AREA)

Description

本発明は、視覚(visual)システムに関し、特に自動車に搭載されて用いられ、例えば、自動車ウインドスクリーンの曇り(misting)、ウインドスクリーン上の雨滴の存在、トンネルや橋の下を通過する際や夕暮れによる低い照明条件、霧(mist)や濃霧(fog)の存在、他の車両との出会いなどの環境パラメータを検出するためのものであり、さらに車両前方の風景をモニタするためにも用いられ（前方モニタリング）、例えば、カーブが始まる前に適応型ヘッドライトの動きを生じさせるための時間予期とともにカーブの存在を検出したり、レーンマーキングのラインに向かう車両の側方運動を合図する（レーン警告）ためのものである。
本発明の目的は、上述した機能の全てまたは一部を効率的に遂行でき、比較的簡素で信頼性の高いシステムを実施することである。更なる目的は、自動車向けの現行システムを克服して、異なるセンサのパッケージ統合化を提供することである。
上記目的を達成するため、発明の対象はＣＭＯＳ（またはＣＣＤ）技術の視覚マトリクスを備える多機能視覚システムであり、この視覚マトリクスは、風景のモニタリングや環境パラメータの検出の際に１つ又はそれ以上の機能のために個々に設計されたサブエリアに区分された感度エリアを有する。サブエリアへの分割は、幾つかの光学的な「撮像」系および他の光学系の統合化によって行われる。
特に、本発明は、モノクロでリニアや対数のＶＧＡのＣＭＯＳマトリクスを用いて、上述したタイプの視覚システムを自動車に統合化することを目的としており、例えば、自動車の室内バックミラーに接近して配置され、降雨検出、曇り検出、濃霧検出、夕暮れ検出、トンネル走行検出、他の車両との出会い検出、前方モニタリングなどの幾つかの機能を遂行する。
降雨や濃霧など幾つかの環境パラメータの検出は、アクティブ技術、即ち放射器(emitter)を用いたもの（詳しく後述する）と、パッシブ技術、即ち放射器を用いないものとの両方で実行可能である。
本発明に係るＣＭＯＳマトリクスを用いた視覚システムのより簡素な第１実施形態において、前記マトリクスは、前方モニタリング用、パッシブ濃霧検出用、夕暮れ検出用、トンネル走行検出用、アクティブ濃霧検出用にそれぞれ設計された特定のサブエリアに分割された感度エリアを有する。
より複雑な第２実施形態では、マトリクスの感度エリアは、降雨および曇り検出用の特定のサブエリアをも含んでいる。
さらにより複雑な第３の解決方法では、マトリクスの感度エリアは、他の車両との出会い検出用の特定の別のサブエリアをも備える。
本発明の好ましい特徴に従えば、システムは、放射器を用いたアクティブ降雨検出専用のサブエリアが装備される。好ましくは、降雨機能専用の前記エリアは、放射器を常時用いたウインドスクリーンの曇り機能にも用いられる。
さらに好ましい特徴に従えば、夕暮れ機能は、ＣＭＯＳマトリクスの特定のサブエリアによって遂行される。トンネル機能は、前方モニタリング機能に専用のエリアの一部を用いて遂行される。濃霧機能は、アクティブ技術（即ち、例えばＬＥＤやレーザダイオードなどの放射器を介して）を用いた専用のサブエリアと、別のサブエリアでのパッシブ技術との両方を用いて遂行され、後者は前方モニタリング専用のものに含まれている。
車両出会い機能は、２つの専用サブエリアを用いて遂行され、各々はレンズとフィルタの自己のシステム、あるいは前方モニタリング専用のサブエリアを有し、画素レベルの離散化(discretization)の程度で配置された光学フィルタを用いる。
本発明に従えば、センサは、ガラスまたは透明プラスチック材料からなる保護ウインドウを有し、これは光ファイバおよび必要に応じてプリズムの支持としても機能する。これらの光学部品は、前記ウインドウの中に形成された孔に装着され、これらの機能は下記によって明らかになるであろう。
本発明の更なる特徴に従えば、光学絶縁システムは、前方モニタリング専用のエリアと、降雨、曇り、濃霧および夕暮れ機能専用のものとの間に設けられ、これはマトリクス保護ウインドウの表面の部分的な被覆を基礎として、マトリクスに向かって側方に、吸収または反射する材料からなる層とともに、例えば、熱蒸発のセリグラフィ(serigraphy)によって設けられる。
本発明の更なる特徴に従えば、前方モニタリング機能のための対物レンズ(objective)の影響からの、降雨機能専用のエリアの光学絶縁システムが設けられ、この絶縁は、プリズムの幾つかの面の部分的な被覆を基礎として、吸収または反射する材料からなる層とともに、例えば、熱蒸発のセリグラフィによって設けられる。
降雨機能専用のサブエリアに関する限り、センサは、光学絶縁が設けられたプリズム、光バンドパスフィルタ、車両ウインドスクリーンに対して垂直に向いた対物レンズとともに直列的に関連付けられている。
ウインドスクリーン曇り機能に関する限り、これは、車両に装備された曇り除去手段の自動スタートを可能にするように設計される。対応するサブエリアは、光学絶縁が設けられたプリズム、フィルタ、車両ウインドスクリーンに対して垂直に向いた対物レンズとともに直列的に関連付けられている。
夕暮れ機能に関して、光を集めるためにプラスチックまたはガラスからなる光ファイバが、車両のウインドスクリーンに対して垂直に向いて、あるいはこの位置からある程度ずれるようにして設けられる。
アクティブ技術に基づいたトンネル機能に関して、「ボール」レンズや「グリン(grin)」レンズとともに、あるいは全くレンズ無しで、光ファイバが設けられ、必要に応じて他の「グリン」レンズや微小光学レンズとともに、あるいは全くレンズ無しで、ハイパス／干渉フィルタが設けられ、車両ウインドスクリーンや前方風景に対して直交した光軸を有する集光レンズが設けられる。パッシブ技術に基づいたトンネル機能に関して、車両前方の風景に向いた、前方モニタリング機能に好適な焦点距離を有する対物レンズが設けられる。
車両出会い機能に関して、光学フィルタ（ハイパスフィルタ＞５００ｎｍ、またはローパスフィルタ＜５００ｎｍ）が、２つのサブエリアの各々について対物レンズとともに設けられる。
前方モニタリング機能に関して、好適な焦点距離を有する対物レンズが設けられ、その光軸は水平面に関してある程度傾斜しており、移動方向に向いて、マトリクス中心から所定の距離にある。
明らかに、マトリクス視覚システムからの出力信号は、種々のサブエリア（ＣＭＯＳカメラの場合は「ウインドウ化処理(windowing)」によって）に関する像を取得する電子システムに向けられ、そして処理を行う。
本発明の更なる特徴および利点は、添付した図面を参照して、単に非限定的な例である下記の説明から明らかとなろう。
添付図面の図１は、本発明に係るセンサのＣＭＯＳマトリクスの感度エリアが１つ又はそれ以上の機能に特化したサブエリアに分割されることについての好ましい実施形態を示す。本実施形態は、上述した全ての機能、即ち、前方モニタリング、車両出会い、降雨、曇り、濃霧（アクティブモードとパッシブモード）、夕暮れ、トンネル、を考慮したものである。
図１は、各サブエリアによって実行される機能およびこれらの特徴についての説明とともに、ＶＧＡマトリクスの感度エリアを示す。
各種サブエリアの分布は、幾つかの基本的な基準を考慮している。
１．自動車の室内バックミラーに搭載した場合、マトリクスの傾斜は、風景前方モニタリング機能を実行するための光軸方向に依存する。
２．各機能に関して、エリアサイズは、視野および必要な分解能の関数である。
３．エリアの位置は、各機能の光軸方向に依存し、画素が使用されない分離エリアの必要性に依存する。
４．単一のエリアはより多くの機能に特化可能であり、あるいは１つの機能に特化したエリアの一部は他の機能にも特化可能である。
図１で参照した機能を発展させるために用いられる可能性ある測定技術をここで説明する。
ウインドスクリーンの曇り
パッシブシステム：ウインドスクリーンの外表面の上に、例えば格子(grid)などの参照像が位置しており、これがＣＭＯＳマトリクス上に結像される。像の鮮鋭度(sharpness)レベルは、ウインドスクリーンの内表面の曇り度合に依存する。この技術の重要な点は、人間の眼に見えない曇りレベルに対する感度と、周囲の照明に関する信号の依存性である。
アクティブシステム：図２と図３に示すように、赤外放射器Ｅは、自動車のウインドスクリーンＰのガラスの内表面に約４５度の入射角で光束を送出する。表面が曇っている場合、光束は凝縮水滴（図３）によって部分的に後方散乱して、ＣＭＯＳマトリクスによって検出される。曇りが存在しない場合（図２）、上述の現象は生じない。光学系は、放射器Ｅ（典型的にはＬＥＤ）によって送出された光束を整形して、都合の良いウインドスクリーン部分に焦点を結ばせることができる。
降雨
ＣＭＯＳマトリクスは、ウインドスクリーンの外表面の上に位置する雨滴の像を検出する。定量的な解析は、単一の像について実行可能であり、例えば、空間周波数のスペクトルを考慮したり、連続的な像を統計的手法で比較することによって行う。雨滴のコントラストに影響を及ぼす外部照明条件への依存性を排除し、均一で時間一定の方法で関心あるウインドスクリーン領域を照射するために、近赤外放射のＬＥＤ光源と、ＬＥＤ波長に調整したバンドパスフィルタが使用される。
夕暮れ／トンネル
２つのマトリクスが、２つの異なる方向から行なわれる照明測定に特化している（図４）。
・走行方向での小さな立体角Ａ（例えば１０度）。
・現在の車両位置周りの平均的な照明の測定を行うように、上方向きのより大きな立体角Ｂ（例えば４０度）。
濃霧(fog)
パッシブセンサ：パッシブ濃霧検出は、前方モニタリングを行うことになるエリアでの風景像の取得と、続く像の鮮鋭度解析とによって実施される。これは、限定した活動範囲を有するアクティブシステムに先行して霧峰(fog bank)を検出することを可能とする。
アクティブセンサ：視界(visibility)センサは、送信モジュール（赤外放射のＬＥＤまたはレーザダイオード）と、受信モジュール（ＣＭＯＳカメラ）とを備える。２つの視野は、部分的に重なっている。濃霧の場合、重なり領域での水滴の濃縮は、光束の後方散乱を生じさせ、これがセンサによって検出される（図５）。
車両出会い
ＣＭＯＳカメラは、車両前方の道路風景の幾つかの部分をフレームに撮る。図１のマトリクスは、２つの「車両出会い」エリアをそれぞれ含み、反対方向に走行する車両のヘッドライトの検出と、同じ方向に走行する車両のリアライトの検出に特化している。２つのエリアに関して、下向き(dipped)ヘッドライトとリアライトとを区別するために都合の良いハイパスフィルタとローパスフィルタが使用される。代替物として、前方モニタリング用に設計されたマトリクスエリアまたはサブエリアの中だけに画素レベルで必要な光学フィルタを配置することによって、カラーマトリクスまたはモノクロマトリクスでの前方モニタリング用に設計されたエリアを用いるものがある。
風景前方モニタリング
図１のマトリクスの主要な部分が、車両前方の道路風景をフレームに撮って、レーン警告、適応型ヘッドライト、車両出会いなどの機能を実施するために用いられる。
図６に示す実施形態は、図１のものに対して簡素化された実施形態であり、前方モニタリング機能、トンネル機能、濃霧機能（アクティブ技術とパッシブ技術）および夕暮れ機能のためのサブエリアのみを含む。
図７は、さらに降雨／曇り機能も想定した更なる実施形態を示す。
ＣＭＯＳマトリクス
ＣＭＯＳマトリクスに関する限り、前段で提案された多機能の統合化にとって満足すべき主要な要件は、下記のものがある。
・ＶＧＡフォーマット：このフォーマットは、マトリクスを７つの使用エリアと使用しない画素が存在する分離エリアとに分割することを可能にする。
・画素サイズ：極小の画素サイズは、各機能／エリア用の専用光学系を実現する際のより高い困難さを意味する。
・モノクロまたはカラー：カラーマトリクスの使用は、「車両出会い」機能に必要な光学フィルタの使用を回避することになろう。しかし、空間分解能を損なうであろう。
・リニアまたは対数の応答：幾つかの機能はパラメータの定量的評価に基づいており、そのため、ダイナミックレンジに関する限り、センサのリニア応答および一定の積分時間を有することが良いであろう。しかし、対数的な応答を有するセンサを使用することが好ましい。
・ダイナミックレンジ：前方モニタリング機能は、センサが８０ｄＢを超える照明レンジをカバーできることを必要とし、これは典型的な風景が夕暮れから直接の太陽光線まで変化する状況を伴うことからである。
・感度：これは、低い照明レベル（例えば、夕暮れ＝１ルクス）での夜間走行中の前方モニタリング機能、または集光した後方散乱放射がとても小さい（ナノワット（ｎＷ）の範囲）場合での濃霧機能にとって重要なパラメータである。
・スペクトル応答：センサは、８００〜９００ｎｍの範囲（アクティブ機能に用いられ、標準的な自動車のウインドスクリーンのガラスは約３０％の透過率を有する）で良い応答を持つべきであり、「夕暮れ」機能については、センサは、人間の眼（光度計の応答）のものと可能な限り類似した応答を持つべきである。
・フレームレート：ウインドウ化処理による高速の取得が行われ、デジタルフィルタリング技術が実施される（例えば、車両出会い機能の場合、ＡＣ供給の光源から到来し、５０〜６０Ｈｚの周波数を有する変調された放射をカットすることは有用であろう。）場合を除いて、フレームレートは決定的なパラメータではない。
本発明の実施形態の現実的な例において、対数のモノクロＶＧＡ ＣＭＯＳカメラは、０．３５ミクロンのＣＭＯＳ技術を用いて実現され使用される。これは、マトリクス状のアクティブ画素と、増幅器と、１０ビットＡＤコンバータと、マイクロプロセッサ用のインタフェイスとを集積化している。フォトダイオードマトリクスは、放射を電圧に連続的に変換して（リニアＣＭＯＳの典型としての電荷積分無しで）、ゆえに画素はいつでも読み出し可能になる。
フォトダイオードで発生した電流は、入射放射強度に対してリニアな依存性を有する。フォトダイオードの供給回路は対数的な特性を有し、画素の電圧出力は入射放射の対数に比例するようになる。
センサパッケージを参照すると、これは、図７Ａ（横断面）と図７Ｂ（上から見た図を示す）に示される。前記パッケージは、センサチップ１１が搭載されるベース１０と、平面で平行な表面を持つ透明材料の基板からなる光学保護ウインドウ１２とを備える。ＣＭＯＳマトリクスは、各々の環境モニタリング機能のための集積化センサによって集められた信号を最適化するように設計された光学部品と関連付けられる。即ち、降雨、車両出会いおよび前方モニタリングの場合、光学部品は風景の撮像も実行することになる。各機能に関して、視野および専用センサエリアは、介在する光学部品の焦点距離を決定する。焦点処理がいったん設定されると、照明レベルに関する要件は、レンズの最小寸法を制限する。システム配置によって課せられる条件がさらに考慮される。実際には、マトリクスが分割される隣接エリアの各々は、独立した光学系に関連付けられる。設計レベル上は、こうした集積化は２つの別の条件を意味する。
・光学系は、一方の近傍に他方が配置される。これは、単一の部品のサイズを制限する。この制限の評価の際、実装およびパッケージ動作のための可能な機械的解決法も考慮されることになる。
・エリアの近接は、像面の部分的な重なり合いに起因して、単一機能の信号間での妨害をもたらす。この問題に関して、単一エリアのための分離システムが設計されることになる。
考慮すべき他の特性は、全ての機能についての光軸の向きである。全ての要件を満たすために、光軸方向を変化させるための解決法を見出すことが必要であることは明らかである。この目的のため、下記で明らかとなるが、本発明はプリズムと光ファイバを使用する。
全ての機能にとって、ターゲットスポットの距離は焦点距離の１０倍以上であることから、光学的システムセンサ（イメージスポット）の距離は、焦点距離とほぼ同じになり、これは「降雨」「夕暮れ」および「車両出会い」（リアライトの検出）の機能については５ｍｍ未満となる。この距離は、特にプリズムが対物レンズとセンサとの間に配置される場合、厳しい要件となる。
図８は、本発明に係るシステムの実施形態の斜視図を示す。保護ウインドウ１２が装着されたＣＭＯＳマトリクス１１は、前方モニタリングのための対物レンズ１３に関連付けられる。既に言及したように、対物レンズ１３は、センサ１３とともに、自動車の室内バックミラーの前方部分（即ち、走行方向）に搭載される（簡明化のため図示していない）実施形態の例では、対物レンズ１３は第１素子として負のレンズを有して、かなり広い視野（３５°〜４５°）をカバーしている。
そして、前方モニタリング機能の絶縁に関する問題が存在している。可能な解決法は、矩形開口を有する分離壁の使用を伴う。この開口は、前方モニタリングエリアと同一の形状およびサイズを有する。
「夕暮れ」および「濃霧」機能を考えると、光軸が上向きに、例えば運動方向に関して６０°の角度で傾斜している点に関する問題が存在する。検出は、非撮像タイプのものである。
これらの２つの機能について、本発明は、例えば図８中の光ファイバ１４など、通常の光ファイバを用いて光軸の傾斜に関する問題を解決している。こうした光ファイバは、湾曲可能なパスに沿って信号を送信することを可能にする。さらに、この部品はかなり安価である。光ファイバは、好ましくはレンズ、例えばボールレンズまたはＧＲＩＮレンズ（屈折率傾斜）と関連付けられている。
図８はまた、降雨検出のための対物レンズ１５と、濃霧検出のための集光レンズ１７および光ファイバ１８と関連付けられた放射器１６とを示している。
図９は、図８の変形例を示し、ここでは対応する素子は同じ参照番号を有する。
図１０は、光ファイバ１８とＧＲＩＮ １９Ａ レンズやボールレンズ１９Ｂとの関連付けや、符号２０に示したようにファイバ端をレンズ無しにすることについての種々の可能性を示す。光ファイバ１８の反対端は、ＧＲＩＮレンズやマイクロ光学系２２を設けることができ、さらに符号２３に示したようにファイバ端をレンズ無しにすることも可能である。集光レンズ１７は、バンドパス光学フィルタ２４に関連付けられる。
対物レンズおよび光ファイバを介した前方モニタリング、「濃霧」および「夕暮れ」機能の統合化に続くステップは、「降雨」機能を追加した統合化である。後者の機能に関して、撮像光学部品、即ちレンズおよびプリズムが必要になる。前方モニタリング機能の視野は、下向きにある程度傾斜した光軸を有する。「夕暮れ」、「降雨」および「濃霧」機能に関して、その傾斜は上向き６０°である。実際には、後者の３つの機能については、広い許容誤差を有する。５〜６度の変動は、機能性に関する限り実質的な変化を伴わない。可能な光学的解決法は、マトリクス面を前方モニタリング機能の光軸に対して直交するように保つことであり、プリズムを用いて別の３つの機能のための光軸方向を変えることである。向きに関する許容誤差範囲は、像面（マトリクス面）の垂直方向に関して６０°の光軸に偏向させるプリズムを選択するのを可能にする。検討するプリズム（リトロー(Littrow)プリズム）は、図１２Ａと図１２Ｂの中の符号２０で参照される。前記図はまた、影付き領域３１と、光学ウインドウ１２の中に形成された孔に挿入された光ファイバ１４，１８の端部を示している。
図１３は、プリズム３０の斜視図を示す。前記プリズム３０は、ガラスまたは透明プラスチックで形成され、その面ＢＣは一層または多層のコーティングで被覆され、プリズムの内側に向かって反射し、外側に向かって吸収または反射する表面が得られる。プリズム３０の三角形ＡＢＤは、一層または多層のコーティングで被覆され、プリズムの内側に向かって吸収し、外側に向かって吸収または反射する表面が得られる。
プリズム３０は、図１２のように向いて、その面ＡＤはセンサ面に平行となる。面ＣＤは、いずれの光学素子の上にも載らない。その理由は下記により明らかとなろう。プリズム３０の面ＡＣの前方には撮像対物レンズ１５が配置され、これはプリズムを超えて結像可能なような後側焦点距離を有する。対物レンズから出た光は、面ＡＣに当たってプリズム３０の中に入る。ＡＣへの入射角度が限界角（プリズム−空気の通路ではプリズム屈折率１．５で、２７．９°となる。）より小さい場合、光は面ＣＤによって完全に反射される。これは、面ＣＤの外側にある光学媒体としての空気にとって必要な結果をもたらす。最終的に、光束は、プリズム３０から出てＣＤを通ってセンサに至る。
プリズム３０から出た光束の光学絶縁に関して、プリズム３０から出る放射光束の断面と同じ表面、またはより大きな表面を有する矩形の開口は、光学保護ウインドウ１２の中に形成される。開口の内壁は吸収性コーティングで被覆され、前方モニタリング機能の信号に伴う外乱を回避している。光ファイバからの信号に伴う外乱がある場合、必要に応じて、全ての内壁が前記コーティングで被覆することができる。
この種の光学系（対物レンズとプリズム）は、前方モニタリング機能のための対物レンズと一緒に使用することも可能である。２つの光学系が同一の光軸を持たないことは、サイズに関する限り、有利である。
明らかに、本発明の基本アイデアが同じであれば、構造の詳細および実施形態は、単なる例として記載し示したものに関して、本発明の枠組みを逸脱せずに広範囲に変化することができる。
本発明に係るマトリクスセンサの第１実施形態の概略図であり、上述した全ての機能を実施する。 ウインドスクリーンの曇りを検出するセンサの動作原理を示す概略図である。 ウインドスクリーンの曇りを検出するセンサの動作原理を示す概略図である。 夕暮れ／トンネル機能用のセンサの構成を示す概略図である。 アクティブ濃霧検出を示す一般的な図である。 本発明に係るシステムの第２および第３実施形態の概略図であり、より少ない数の機能を実施する。 本発明に係るシステムの第２および第３実施形態の概略図であり、より少ない数の機能を実施する。 本発明に係るシステムに存在するセンサの概略的な断面図および平面図である。 本発明に係るシステムに存在するセンサの概略的な断面図および平面図である。 本発明に係るシステムの実施形態の一例についての斜視図である。 図８の変形例を示す。 濃霧検出用の光学系についての実施可能な変形例を示す。 関連した保護ウインドウを有する、本発明に係るセンサマトリクスを含むアセンブリについての異なる斜視図である。 関連した保護ウインドウを有する、本発明に係るセンサマトリクスを含むアセンブリについての異なる斜視図である。 関連した保護ウインドウを有する、本発明に係るセンサマトリクスを含むアセンブリについての異なる斜視図である。 本発明に係る降雨検出用のシステムに用いられるプリズムの斜視図である。

Claims (26)

  1. 感度エリアを有するＣＣＤまたはＣＭＯＳマトリクス（１１）と、
    異なる方向及び／又は視野を有する複数の光学素子（１３，１４，１５，１８）とを備える光学システムであって、
    マトリクス（１１）の前記感度エリアは、異なる特定の機能のために設計された、複数の分離したサブエリアに分割され、
    前記サブエリアの一部は、風景モニタリングに特化したものであり、
    前記サブエリアの一部は、環境パラメータ検出に特化したものであり、
    前記分割は、前記複数の光学素子によって達成されており、
    該システムは、放射器および受光器を含み、アクティブ技術を用いて濃霧検出機能を実行する手段をさらに備えることを特徴とする光学システム。
  2. 自動車の室内バックミラーの前方部分に走行方向に搭載され、降雨検出、ウインドスクリーン曇り検出、濃霧検出、夕暮れ検出、トンネル走行検出、車両出会い検出、および車両前方風景モニタリングのいずれかの機能を実施することを特徴とする請求項１記載のシステム。
  3. マトリクスは、リニアまたは対数で、モノクロまたはカラーのＶＧＡ ＣＭＯＳマトリクスであることを特徴とする請求項１記載のシステム。
  4. マトリクスは、前方モニタリング機能、パッシブ濃霧検出、夕暮れ検出、トンネル走行検出、およびアクティブ濃霧検出のために設計された特定のサブエリアに分割された感度エリアを有することを特徴とする請求項１記載のシステム。
  5. マトリクスの感度エリアは、降雨および曇り検出のための特定のサブエリアも有することを特徴とする請求項４記載のシステム。
  6. マトリクスの感度エリアは、車両出会い検出のための追加の特定のサブエリアをさらに備えることを特徴とする請求項５記載のシステム。
  7. 放射器を用いたアクティブ降雨検出に特化したサブエリアが設けられることを特徴とする請求項６記載のシステム。
  8. 降雨検出機能に特化した前記サブエリアは、ウインドスクリーン曇り機能にも特化していることを特徴とする請求項７記載のシステム。
  9. 夕暮れ検出機能は、ＣＭＯＳマトリクスの特定のサブエリアによって実行されることを特徴とする請求項８記載のシステム。
  10. トンネル検出機能は、前方モニタリング機能に特化したエリアの一部を用いて実行されることを特徴とする請求項９記載のシステム。
  11. 濃霧検出機能は、前方モニタリングに特化したものに対応した他のサブエリアにおいて、パッシブ技術を用いて実行されることを特徴とする請求項１０記載のシステム。
  12. 車両出会い検出機能は、２つの特化したサブエリア、または前方モニタリングに特化したサブエリアを用いて、カラーマトリクスまたはモノクロマトリクスで、前方モニタリングに特化した、マトリクスのサブエリアにおいて画素レベルの離散化の程度で配置された光学フィルタを用いて、実行されることを特徴とする請求項１１記載のシステム。
  13. マトリクスセンサは、ガラスまたは透明プラスチックからなり、１つ又はそれ以上の光ファイバの支持としても機能する保護ウインドウを有することを特徴とする請求項１記載のシステム。
  14. 前記光ファイバは、前記保護ウインドウに形成された孔に挿入された近接端部を有することを特徴とする請求項１３記載のシステム。
  15. 前方モニタリングに特化したエリアと、降雨、曇り、濃霧および夕暮れ検出機能に特化したものとの間にある光学絶縁のための手段を備え、これはマトリクス保護ウインドウの表面の部分的な被覆を基礎として、マトリクスに向かって側方に、吸収または反射する材料からなる層とともに設けられることを特徴とする請求項１３記載のシステム。
  16. 別の機能の影響からの、降雨検出機能に特化したエリアの光学絶縁のための手段を備え、前記絶縁は、１）吸収または反射する材料からなる層を用いたプリズム面の部分的な被覆、または、２）光学ウインドウの中に形成された孔と孔内壁の被覆、に基づくものであることを特徴とする請求項１３記載のシステム。
  17. 降雨検出機能に特化したサブエリアは、光学絶縁を有するプリズムと、フィルタと、ウインドスクリーンに対して直交した光軸を有する対物レンズとを直列的に備える光学系からの光信号を受けることを特徴とする請求項１３記載のシステム。
  18. ウインドスクリーン曇り検出機能に特化したサブエリアは、光学絶縁を有するプリズムと、フィルタと、ウインドスクリーンに対して直交した光軸を有する対物レンズとを直列的に備える光学系からの光信号を受けることを特徴とする請求項１３記載のシステム。
  19. 夕暮れ検出機能に特化したサブエリアは、光ファイバを経由した光信号を受けることを特徴とする請求項１３記載のシステム。
  20. トンネル検出機能に特化したサブエリアは、前方モニタリング機能にも特化した対物レンズを経由した光信号を受けることを特徴とする請求項１３記載のシステム。
  21. 濃霧検出機能に特化したサブエリアは、アクティブ技術に基づいて、光ファイバの出力側端部でボールレンズまたはグリンレンズを備え、あるいは全くレンズ無しの光学系を経由した光信号を受けることを特徴とする請求項１３記載のシステム。
  22. 濃霧検出機能に特化したサブエリアは、パッシブ技術に基づいて、前方モニタリング機能にも特化した対物レンズを経由した光信号を受けることを特徴とする請求項１３記載のシステム。
  23. 車両出会い検出機能に特化した２つのサブエリアは、対物レンズとともにフィルタを経由した光信号を受けることを特徴とする請求項１３記載のシステム。
  24. カラーマトリクスまたはモノクロマトリクスでの前方モニタリングに特化したサブエリアの使用に基づいた車両出会い検出機能の変形例において、前方モニタリング機能に特化した同一の対物レンズを用いて光信号が集められることを特徴とする請求項１３記載のシステム。
  25. 前方モニタリング機能に特化したサブエリアは、マトリクス中心に関してシフトした光軸を有する対物レンズを経由した光信号を受けることを特徴とする請求項１３記載のシステム。
  26. 幾つかのサブエリアは、使用するサブエリア間で追加した分離に必要な未使用画素として確保されていることを特徴とする請求項１記載のシステム。
JP2003375731A 2002-11-05 2003-11-05 Ｃｍｏｓまたはｃｃｄ技術のマトリクスを有する多機能統合化視覚システム Expired - Fee Related JP4359121B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
IT000950A ITTO20020950A1 (it) 2002-11-05 2002-11-05 Sistema di visione integrato multifunzionale, con matrice

Publications (2)

Publication Number Publication Date
JP2004289787A JP2004289787A (ja) 2004-10-14
JP4359121B2 true JP4359121B2 (ja) 2009-11-04

Family

ID=32104807

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003375731A Expired - Fee Related JP4359121B2 (ja) 2002-11-05 2003-11-05 Ｃｍｏｓまたはｃｃｄ技術のマトリクスを有する多機能統合化視覚システム

Country Status (7)

Country Link
US (1) US7460161B2 (ja)
EP (1) EP1418089B1 (ja)
JP (1) JP4359121B2 (ja)
AT (1) ATE325726T1 (ja)
DE (1) DE60305124T2 (ja)
ES (1) ES2261846T3 (ja)
IT (1) ITTO20020950A1 (ja)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4326999B2 (ja) * 2003-08-12 2009-09-09 株式会社日立製作所 画像処理システム
ITTO20030770A1 (it) * 2003-10-02 2005-04-03 Fiat Ricerche Dispositivo di rilevamento installabile lungo una
JP4175266B2 (ja) * 2004-02-06 2008-11-05 株式会社デンソー ワイパ装置
WO2005115820A1 (de) 2004-05-25 2005-12-08 Siemens Aktiengesellschaft Überwachungseinheit nebst assistenzsystem für kraftfahrzeuge
DE102004037871B4 (de) * 2004-08-04 2006-10-12 Siemens Ag Optisches Modul für ein den Außenvorraum in Fahrtrichtung eines Kraftfahrzeuges erfassendes Assistenzsystem
DE112005001898A5 (de) * 2004-09-03 2007-08-09 Adc Automotive Distance Control Systems Gmbh Verfahren zur Detektion von Niederschlag auf einer Scheibe
JP4496964B2 (ja) 2005-01-14 2010-07-07 株式会社デンソー 車両用トンネル検出装置および車両用ライト制御装置
FR2883818B1 (fr) * 2005-03-31 2008-09-12 Valeo Vision Sa Procede de detection anticipee d'une arrivee d'un vehicule automobile dans un secteur sombre
DE602005004544T2 (de) 2005-09-19 2008-04-30 CRF Società Consortile per Azioni, Orbassano Multifunktioneller optischer Sensor mit einer an Mikrolinsen gekoppelten Matrix von Photodetektoren
ATE383031T1 (de) * 2005-10-21 2008-01-15 Fiat Ricerche Optischer multifunktionssensor für fahrassistenzsysteme in kraftfahrzeugen
EP1790541A2 (en) * 2005-11-23 2007-05-30 MobilEye Technologies, Ltd. Systems and methods for detecting obstructions in a camera field of view
DE102005058718B4 (de) * 2005-12-08 2020-06-04 Conti Temic Microelectronic Gmbh Sensorsystem zur Umgebungserfassung und zur Regendetektion
DE102006004193A1 (de) * 2006-01-27 2007-08-16 Sick Ag Vorrichtung zur optoelektronischen Überwachung von Objekten
DE102006044786A1 (de) * 2006-09-14 2008-03-27 Schefenacker Vision Systems Germany Gmbh Kamerasystem, Verfahren zum Betreiben eines Kamerasystems und Sensoreinrichtung eines Kamerasystems
JP5074273B2 (ja) * 2008-04-16 2012-11-14 株式会社デンソー 車両用灯火制御装置
EP2138352B1 (de) * 2008-06-24 2010-04-07 SMR PATENTS S.à.r.l. Optisches System und Verfahren zur Erkennung von optischer Verschleierung in einem Fahrzeug
DE102009040252A1 (de) 2009-09-04 2011-03-10 Daimler Ag Vorrichtung zur Erfassung von Lichtsignalen von Lichtzeichenanlagen für ein Fahrzeug
EP2557414B1 (en) * 2009-12-21 2015-03-25 C.R.F. Società Consortile per Azioni Optical detection system for motor-vehicles having multiple functions, including detection of the condition of the road surface
EP2542451B1 (en) 2010-03-04 2014-09-03 Valeo Schalter und Sensoren GmbH Method of fog and raindrop detection on a windscreen and driving assistance device
DE102010015214A1 (de) 2010-04-16 2011-10-20 Conti Temic Microelectronic Gmbh Verfahren und Vorrichtung zur Fahrerunterstützung beim Fahren eines Fahrzeugs durch Detektion von wetterbedingten Sichteinschränkungen
FR2965354B1 (fr) * 2010-09-28 2012-10-12 France Etat Ponts Chaussees Procede et dispositif de detection de brouillard, la nuit
DE102011105520A1 (de) 2011-06-24 2011-12-29 Daimler Ag Verfahren zur Erfassung von Lichtsignalen von Lichtzeichenanlagen für ein Fahrzeug
DE102011081365A1 (de) * 2011-08-23 2013-02-28 Robert Bosch Gmbh Verfahren zum Aufbereiten eines Lichtsignals zur Regenerkennung in einem Fahrzeug und Verfahren zur Regenerkennung in einem Fahrzeug
JP5862207B2 (ja) * 2011-11-02 2016-02-16 株式会社リコー 画像処理システム
JP5633503B2 (ja) * 2011-11-29 2014-12-03 株式会社リコー 画像処理システム、画像処理システムを備えた車両、画像処理方法及びプログラム
DE102011122457A1 (de) * 2011-12-24 2013-06-27 Connaught Electronics Ltd. Verfahren zum Betreiben einer Kameraanordnung, Kameraanordnung und Fahrerassistenzsystem
DE102012200200B4 (de) * 2012-01-09 2020-09-17 Robert Bosch Gmbh Kamerasystem, insbesondere für ein Fahrzeug, sowie ein Fahrzeug
DE102013020203A1 (de) 2013-11-30 2015-06-03 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Elektronische Kamera und diese verwendendes Kraftfahrzeug
US10023120B2 (en) * 2016-03-30 2018-07-17 Delphi Technologies, Inc. Multi-purpose camera device for use on a vehicle
US11518384B2 (en) * 2018-12-07 2022-12-06 Thinkware Corporation Method for displaying lane information and apparatus for executing the method
JP2019132847A (ja) * 2019-02-28 2019-08-08 株式会社ニコン 撮像装置
JP2020182139A (ja) * 2019-04-26 2020-11-05 ソニー株式会社 撮像システム及び撮像素子
DE102021109171A1 (de) * 2021-04-13 2022-10-13 Valeo Schalter Und Sensoren Gmbh Regensensorsystem und fahrzeug
DE102021132724A1 (de) 2021-12-10 2023-06-15 Valeo Schalter Und Sensoren Gmbh Optischer fahrzeug-umgebungssensor, fahrzeug und herstellungsverfahren
US11753024B1 (en) * 2022-07-15 2023-09-12 Ghost Autonomy Inc. Anticipatory vehicle headlight actuation

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5266828A (en) * 1988-10-14 1993-11-30 Matsushita Electric Industrial Co., Ltd. Image sensors with an optical fiber array
DE4200057A1 (de) * 1992-01-03 1993-07-08 Josef Dipl Ing Zink Lasermesssystem zur messung physikalischer messgroessen
US5313072A (en) * 1993-02-16 1994-05-17 Rockwell International Corporation Optical detector for windshield wiper control
US6396397B1 (en) * 1993-02-26 2002-05-28 Donnelly Corporation Vehicle imaging system with stereo imaging
DE59700293D1 (de) * 1996-02-13 1999-09-02 Marquardt Gmbh Optischer sensor
GB9606477D0 (en) * 1996-03-27 1996-06-05 Rover Group A sensing system for a vehicle
US5661303A (en) * 1996-05-24 1997-08-26 Libbey-Owens-Ford Co. Compact moisture sensor with collimator lenses and prismatic coupler
US6611610B1 (en) * 1997-04-02 2003-08-26 Gentex Corporation Vehicle lamp control
US6587573B1 (en) * 2000-03-20 2003-07-01 Gentex Corporation System for controlling exterior vehicle lights
US6130421A (en) * 1998-06-09 2000-10-10 Gentex Corporation Imaging system for vehicle headlamp control
US5923027A (en) * 1997-09-16 1999-07-13 Gentex Corporation Moisture sensor and windshield fog detector using an image sensor
DE19755008B4 (de) * 1997-12-11 2007-01-04 Conti Temic Microelectronic Gmbh Verfahren zum Betreiben eines Multifunktionalen Innenspiegels
DE19909986C2 (de) * 1999-03-06 2002-08-29 Kostal Leopold Gmbh & Co Kg Optoelektronische Überwachungseinrichtung für ein Kraftfahrzeug
TW532314U (en) * 2000-09-28 2003-05-11 Lian-Peng Shiang Optical fiber image inspecting system for use in inspecting surrounding of vehicle
US6281806B1 (en) * 2000-10-12 2001-08-28 Ford Global Technologies, Inc. Driver road hazard warning and illumination system
US6939015B2 (en) * 2002-09-20 2005-09-06 Eastman Kodak Company Chromium black light shield

Also Published As

Publication number Publication date
DE60305124T2 (de) 2006-09-28
US7460161B2 (en) 2008-12-02
EP1418089A2 (en) 2004-05-12
EP1418089B1 (en) 2006-05-10
JP2004289787A (ja) 2004-10-14
EP1418089A3 (en) 2004-11-24
DE60305124D1 (de) 2006-06-14
US20040141057A1 (en) 2004-07-22
ITTO20020950A1 (it) 2004-05-06
ES2261846T3 (es) 2006-11-16
ATE325726T1 (de) 2006-06-15

Similar Documents

Publication Publication Date Title
JP4359121B2 (ja) Ｃｍｏｓまたはｃｃｄ技術のマトリクスを有する多機能統合化視覚システム
CN1818613B (zh) 检测装置
KR101903981B1 (ko) 카메라와 라이트를 사용하여 창에 떨어지는 빗방울 감지
JP3163889U (ja) 運転における補助のための、及び／又は自動車に設けられたシステムを自動的に作動させるための、自動車に搭載される光センサデバイス
US6420704B1 (en) Method and system for improving camera infrared sensitivity using digital zoom
KR100874461B1 (ko) 차량의 외부 조명 제어 장치 및 차량의 자동 제어 장치
US10137842B2 (en) Camera system for a vehicle
US7208723B2 (en) Image processing system which processes an image captured by an imaging device through a lens having a focus which is adjusted to a point beyond the glass
JP3641250B2 (ja) 透光体表面の異物検出装置
JP4327024B2 (ja) 画像処理システム
JP6333238B2 (ja) カメラ及び照明を用いたガラス面の雨滴検出
WO2013081160A1 (en) Attached matter detector, and attached matter detection method
KR20110101177A (ko) 차창의 상태를 검출하기 위한 카메라 장치
JP6555569B2 (ja) 画像処理装置、移動体機器制御システム及び画像処理用プログラム
US10351105B2 (en) Illumination for detecting raindrops on a pane by means of a camera
US20150276982A1 (en) Illumination for the detection of raindrops on a window by means of a camera
JP2015031564A (ja) 付着物検出装置及び移動装置用機器制御システム
JP6701542B2 (ja) 検出装置、移動体機器制御システム及び検出用プログラム
JP5891723B2 (ja) 撮像方法および撮像ユニット
JP7473616B2 (ja) 自動露光遮蔽カメラ
JP2015169567A (ja) 付着物検出装置、移動体機器制御システム及び付着物検出用プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060419

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20070725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090324

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090618

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090714

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090807

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120814

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130814

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees