WO2006024247A1 - Verfahren zur detektion von niederschlag auf einer scheibe - Google Patents

Verfahren zur detektion von niederschlag auf einer scheibe Download PDF

Info

Publication number
WO2006024247A1
WO2006024247A1 PCT/DE2005/000676 DE2005000676W WO2006024247A1 WO 2006024247 A1 WO2006024247 A1 WO 2006024247A1 DE 2005000676 W DE2005000676 W DE 2005000676W WO 2006024247 A1 WO2006024247 A1 WO 2006024247A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
camera
vehicle
windscreen
target area
Prior art date
Application number
PCT/DE2005/000676
Other languages
English (en)
French (fr)
Inventor
Stefan Heinrich
Thomas Fechner
Michael Walter
Matthias Zobel
Original Assignee
Adc Automotive Distance Control Systems Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Adc Automotive Distance Control Systems Gmbh filed Critical Adc Automotive Distance Control Systems Gmbh
Priority to DE112005001898T priority Critical patent/DE112005001898A5/de
Publication of WO2006024247A1 publication Critical patent/WO2006024247A1/de

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60SSERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00Cleaning of vehicles
    • B60S1/02Cleaning windscreens, windows or optical devices
    • B60S1/04Wipers or the like, e.g. scrapers
    • B60S1/06Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60SSERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00Cleaning of vehicles
    • B60S1/02Cleaning windscreens, windows or optical devices
    • B60S1/04Wipers or the like, e.g. scrapers
    • B60S1/06Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B60S1/0833Optical rain sensor
    • B60S1/0844Optical rain sensor including a camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/42Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
    • G06V10/431Frequency domain transformation; Autocorrelation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle

Definitions

  • the invention relates to a method for the detection of precipitation on a disk.
  • State of the art are methods with active illumination of the disc, as can be found for example in DE 197 40 364 A1 or DE 198 46 969 A1.
  • light is fed via one or more light sources in the windshield. Since raindrops influence the reflection behavior, the difference between the amount of light coupled in and reflected on the pane can be measured by means of a photosensor and thus rain detected.
  • the detection of dry / dusty precipitation, icing and condensation fitting on the inside of the disc is not possible with the previously known active method.
  • a separate sensor unit with active lighting is required.
  • the object of the invention is to introduce an alternative method for the detection of precipitation, which can preferably detect all types of precipitation.
  • camera sensors for environmental observation e.g. used for lane detection, object recognition, with a view in the direction of travel or in the return area.
  • a camera sensor for environmental observation is focused on a target area in the vicinity of the vehicle, that is outside the dimensions of the vehicle is arranged on the road in a range of typically several meters in front of the front of the vehicle.
  • the camera is currently not focused on the windshield and therefore can not detect precipitation particles directly, as it can not image them sharply.
  • cameras can not only be optical receiver chips on CMOS or PIN diode arrays, but also scanning systems which image the image as lines per line onto a receiver and thus match the image pixels in the swivel position of the scanner, as can be seen in FIG DE 10135107 A1 can be seen.
  • the invention is based on the fact that precipitation on the pane changes the image in its sharpness and local contrast. Raindrops as well as condensation fitting on the inside of the disk form scattering lenses, which create a soft focus effect in the picture. According to the invention, it has been recognized that even with a camera arrangement for environmental observation, which is not focused on the windshield of the vehicle, it is possible to extract information about rainfall on the windshield from the captured image or corresponding sections. For this purpose, image processing algorithms are applied, which are based on the basic effect of softening during precipitation.
  • the analysis in the local area by contrast measurement in particular in predetermined image sections with relatively constant background image or analysis in the time domain by differential image comparison as well as in the frequency domain by means of a Fourier transform (FT) of the entire image or predetermined image sections to the one-dimensional, ie line by line discrete FT.
  • FT Fourier transform
  • the evaluation of local contrast differences of adjacent pixels, with line-by-line detection, for example, limited to the two adjacent pixels or the 9 pixels around a middle pixel in a matrix arrangement already shows significant sensitivity.
  • the measured contrast depends on the background image and the size and position of the image section used.
  • the assessment of the local contrast differences of adjacent pixels averaged over the entire image in typical environmental situations in traffic has a lower dependence on the respective ambient and lighting situations than the purely local assessment.
  • the use of the wiper and the comparison of two images before and after the wiping process are particularly preferred. If the spectrum of the image is changed by a wiping process, it is wet on the glass. If the wipe does not change the spectrum of the image, there is no moisture on the glass.
  • a heating coil can also be arranged in the pane or on the pane in order to create comparative images.
  • S (u, v) is the 2D Fourier transform of the image.
  • f_Low, f_High are the lower and upper cutoff frequencies.
  • Delta is the threshold to be crossed and f is the local spatial frequency.
  • the horizontal / vertical frequency components (u, v) and thus the orientations of 2D structures are neglected. Only their absolute frequency f [1 / pixel pitch] and thus their resolution is considered.
  • the optimal thresholds fJLow and f_High can be determined from training sequences, but are relatively uncritical.
  • the threshold value delta This depends on the scene dynamics (e.g., desert, forest) as well as the camera parameters (e.g., the exposure control gain).
  • the Fourier spectrum (and thus the integral over the high spectral components) is directly proportional to the amplitude of the input signal.
  • the thresholds can be determined offline from sequences containing scenes with or without fogging.
  • the thresholds can be dynamically adapted to the current scene.
  • the amplitude of the Fourier spectrum and thus the energy of the high - frequency spectral components depends on the contrast of the image. (eg the amplification factor of the camera and thus the time of day (day / night)). However, this does not apply to the ratio of high to low frequencies. This results in a second, more robust classifier.
  • the classifier may deteriorate as details with high-frequency content may be lost (eg headlights, stars at night).
  • the ratio of the high and low frequency spectral components can be obtained by the quotient of the sums of the intensities of high (Hi) and low-pass filtered (Ti) pixels of a picture line.
  • the low-pass filtered pixels Oi can be e.g. through a recursive filter from the
  • T 1 Qr - O 1 H - (I - Or) - O 1-1
  • the high-pass filtered pixels can be calculated from the differences between the original pixels and the low-pass filtered pixels.
  • the above equation corresponds to a high pass. Summing only values with abs (O (i + 1) -O (i-1))> delta, the camera noise can be suppressed, resulting in a very effective classifier.
  • the invention thus provides a multiple benefit of a camera that is used for environmental detection and as a rain sensor.
  • the camera sensor is focused environment observation on a target area that is located outside the dimensions of the vehicle on the road, for example, in a range of 5 to 30 meters in front of the front of the vehicle.
  • the information obtained from the environmental observation may e.g. be used in driver assistance functions such as Lane Depature Warning or Nightvision.
  • the present invention proposed method for detecting rainfall on the windshield is based precisely on this focus property, and differs from that of a conventional rain sensor, where the focus of a camera is directed directly at the windshield.

Abstract

Es wird ein Verfahren zur Detektion von Niederschlag, insbesondere Regen und Beschlag, auf einer Scheibe vorgestellt, welches nicht auf einer aktiven Beleuchtung der Scheibe und Messung der Reflektivität beruht, sondern eine Kamera, wo eine die Mehrzahl der benachbarten Pixel zur Erfassung eines Bildes eines Zielgebiets verwendet wird, wobei das Zielgebiet in der Umgebung des Fahrzeugs liegt und somit die Scheibe unscharf abgebildet wird. Regentropfen oder Beschlag auf der Scheibe bewirken im Bild bei unscharfer Abbildung einen Weichzeichnereffekt. Es wird die Schärfe des Bildes und/oder Kontrastunterschiede benachbarter Pixel bewertet und daraus auf ein Vorhandensein von Niederschlag auf der Scheibe geschlossen, vorzugsweise das Bild einer zweidimensionalen Fourier-Transformation unterzogen und die Ortsfrequenzen ausgewertet. Insbesondere bei einem kontrastarmem Zielgebiet bietet es sich an, dass ein erstes Bild aufgenommen wird, nachfolgend ein die Scheibe im Sichtbereich der Kamera überstreichender Scheibenwischer oder eine Heizung aktiviert wird und danach ein zweites Bild aufgenommen und beide Bilder auf Änderungen hin bewertet werden.

Description

Verfahren zur Detektion von Niederschlag auf einer Scheibe
Die Erfindung betrifft ein Verfahren zur Detektion von Niederschlag auf einer Scheibe. Stand der Technik sind dabei Verfahren mit aktiver Beleuchtung der Scheibe, wie diese beispielsweise der DE 197 40 364 A1 oder DE 198 46 969 A1 zu entnehmen sind. Dabei wird über eine oder mehre Lichtquellen Licht in die Windschutzscheibe eingespeist. Da Regentropfen das Reflektionsverhalten beeinflussen, kann mittels eines Photosensors, die Differenz zwischen eingekoppelter- und reflektierter Lichtmenge an der Scheibe gemessen und damit Regen detektiert werden. Die Erkennung von trockenen/stäubförmigen Niederschlag, Vereisung sowie Kondensationsbeschlag auf der Innenseite der Scheibe ist mit den bisher bekannten aktiven Verfahren nicht möglich. Zudem ist eine separate Sensoreinheit mit einer aktiven Beleuchtung erforderlich. Aufgabe der Erfindung ist es, ein alternatives Verfahren zur Detektion von Niederschlag vorzustellen, der vorzugsweise alle Niederschlagsarten erfassen kann.
In Kraftfahrzeugen werden zudem zukünftig in vermehrtem Umfang Kamerasensoren zur Umfeldbeobachtung, z.B. für Fahrspurerkennung, Objekterkennung, mit Blick in Fahrrichtung oder in den Rückfahrtbereich eingesetzt. Diese sind häufig im Inneren des Fahrzeugs hinter der Windschutzscheibe angeordnet. Ein Kamerasensor zur Umfeldbeobachtung ist auf ein Zielgebiet in der Umgebung des Fahrzeugs fokussiert, also ausserhalb der Abmessungen des Fahrzeugs auf die Fahrbahn in einem Bereich von typischerweise einigen Metern vor der Front des Fahrzeugs angeordnet ist. Die Kamera ist also gerade nicht auf die Windschutzscheibe fokussiert und kann daher nicht direkt Niederschlagspartikel erkennen, da er diese nicht scharf abbilden kann.
Kameras können im Sinne dieser Anmeldung nicht nur optische Empfängerchips auf CMOS- oder PIN-Dioden-Arrays sein, sondern auch scannende Systeme, welche das Urngebungsbild als zeilenweise auf einen Empfänger abbilden und die Bildpixel somit Schwenkstellung des Scanners entsprechen, wie dies bspw. aus der DE 10135107 A1 zu entnehmen ist.
Die Erfindung beruht darauf, dass Niederschlag auf der Scheibe das Bild in seiner Schärfe und lokalen Kontrasthaltigkeit verändern. Regentropfen wie auch Kondensationsbeschlag auf der Innenseite der Scheibe bilden Streulinsen, die im Bild einen Weichzeichner-Effekt erzeugen. Erfindungsgemäß wurde erkannt, dass auch mit einer Kameraanordnung zur Umfeldbeobachtung, die nicht auf die Windschutzscheibe des Fahrzeugs fokussiert ist, die Möglichkeit besteht, aus dem erfassten Bild oder entsprechenden Ausschnitten Informationen über Niederschlag auf der Scheibe zu extrahieren. Dazu werden Bildverarbeitungsalgorithmen angewendet, die sich an dem Grundeffekt der Weichzeichnung bei Niederschlag orientieren.
Hierfür bieten sich grundsätzlich die Analyse im Ortsbereich durch Kontrastmessung, insbesondere in vorgegebenen Bildausschnitten mit relativ konstantem Hintergrundbild oder die Analyse im Zeitbereich durch Differenzbildvergleich sowie im Frequenzbereich mittels einer Fourier-Transformation (FT) des gesamten Bildes oder vorgegebener Bildausschnitte bis hin zur eindimensionalen, also zeilenweisen diskreten FT. insbesondere zeigt die Bewertung lokaler Kontrastunterschiede benachbarter Pixel, bei zeilenweiser Erfassung bspw. beschränkt auf die jeweils zwei benachbarten Pixel oder die 9 Pixel um einen mittleren Pixel bei einer Matrixanordnung schon eine signifikante Empfindlichkeit. Der gemessene Kontrast ist jedoch abhängig vom Hintergrundbild und der Größe und Position des verwendeten Bildausschnitts. Jedoch hat sich gezeigt, dass gerade die Bewertung der lokalen Kontrastunterschiede benachbarter Pixel gemittelt über das gesamte Bild bei typischen Umgebungssituationen im Straßenverkehr eine geringere Abhängigkeit von den jeweiligen Umgebungs- und Beleuchtungssituationen hat als die rein lokale Bewertung.
Urn Einflüsse aus der Szene weiter zu eliminieren ist der Einsatz des Wischers und der Vergleich zweier Bilder vor und nach dem Wischvorgang besonders bevorzugt. Wird durch einen Wischvorgang das Spektrum des Bildes stark verändert, so handelt es sich um Nässe auf der Scheibe. Wird durch den Wischvorgang das Spektrum des Bildes nicht verändert befindet sich auf der Scheibe keine Nässe. Alternativ oder ergänzend kann auch eine Heizspirale in der Scheibe bzw. an der Scheibe angeordnet werden, um Vergleichsbilder zu schaffen.
Aus der Bildverarbeitung sind dabei zahlreiche Bewertungsmethoden für die Schärfe und lokale Kontraständerung bekannt. Durch zweidimensionale Fourier-Transformation und Auswertung der Ortsfrequenzen, insbesondere der hochfrequenten Anteile oder die Beschränkung auf Helligkeits- und/oder Farbunterschiede von Pixeln innerhalb eine Zone deutlich kleiner als die Gesamtgröße des Bildes sind auch die Einflüsse des Gesamtbildes des Zielgebiets und dessen Kontrastreichtum für die Auswertung deutlich geringer. Beschlag und Vereisung führen also auf einer nicht fokussierten Scheibe zu einer lokalen Reduktion von Kontrast und Schärfe eines Bildes. Dies lässt sich im Frequenzbereich durch die Dämpfung hoher Frequenzanteile nachweisen. Hierfür seien nochmals beispielhaft einige geeignete Klassifikationsmöglichkeiten aufgeführt:
1 ) Integriert man die hochfrequenten Spektralanteile und vergleicht sie mit einem Schwellwert, erhält man den folgenden Klassifikator.
f - Hιgh
1/ΔF - jS(f)df < A f = Ju2 +v2 f -Low
S(u,v) ist die 2D Fourier - Transformierte des Bildes. f_Low, f_High sind die untere und obere Grenzfrequenz. Delta ist der zu überschreitende Schwellwert und f die lokale Ortsfrequenz. Die horizontalen/vertikalen Frequenzanteile (u, v) und damit die Orientierungen von 2D Strukturen werden dabei vernachlässigt. Es wird nur deren absolute Frequenz f [1 /Pixelabstand] und damit deren Auflösung betrachtet.
Die optimalen Schwellen fJLow und f_High lassen sich aus Trainingssequenzen ermitteln, sind jedoch relativ unkritisch.
Ähnliches gilt für den Schwellwert Delta. Dieser ist von der Szenendynamik (z.B. Wüste, Wald) sowie den Kameraparametern abhängig (z.B. den Verstärkungsfaktoren für die Belichtungssteuerung). Das Fourier-Spektrum (und damit das Integral über die hohen Spektralanteile) ist direkt proportional zu Amplitude des Eingangssignals. Die Schwellen lassen sich aber offline aus Sequenzen, die Szenen mit und ohne Beschlag enthalten, ermitteln.
Befindet sich das System in einem Trackingmode (und damit in einem beschlagsfreien Zustand) lassen sich die Schwellen dynamisch an die momentane Szene anpassen. Während des Trackingmodes wird ein Mittelwert für die hochfrequenten Spektralanteile berechnet. Ist der gesetzte Schwellwert größer als der im Trackingmode (und damit im beschlagsfreiem Zustand) ermittelte Wert, lässt sich dieser reduzieren (z.B. neuer Schwellwert = (minimal zulässiger Schwellwert + Mittelwert )/2). 2) Die Amplitude des Fourier - Spektrums und damit die Energie der hochfrequenten Spektralanteile ist vom Kontrast des Bildes abhängig. (z.B. vom Verstärkungsfaktor der Kamera und damit der Tageszeit (Tag/Nacht)). Dies gilt jedoch nicht für das Verhältnis der hohen zu den tiefen Frequenzen. Daraus folgt ein zweiter, robusterer Klassifikator.
Δ
Figure imgf000005_0001
mit dem 2D Fourier Spektrum S(u,v), der Schwelle Delta, der unteren, mittleren und oberen Grenzfrequenz f_Low, f_Medium und f_High.
Steht das gesamte Bild (zeilenweise Bildabtastung) und damit die 2D Fourier- Transformierte S(u, v) nicht zur Verfügung lässt sich diese durch Addition der 1 D Fourier- Transformierten der einzelnen Zeilen nachbilden. Stehen nicht alle Bildzeilen zur Verfügung, kann es zu einer Verschlechterung des Klassifikators kommen, da Details mit hochfrequenten Anteilen verloren gehen können, (z.b. Scheinwerfer, Sterne bei Nacht.)
3) Um Rechenzeit zu sparen lässt sich das Verhältnis der hoch- und niederfrequenten Spektralanteile durch den Quotienten aus den Summen der Intensitäten aus hoch- (Hi) und tiefpassgefilterten (Ti) Bildpunkten einer Bildzeile gewinnen.
Die tiefpassgefilterten Bildpunkte Oi lassen sich z.B. durch ein rekursives Filter aus den
N
-τr < Δ
original Bildpunkten Oi bestimmen. T1 = Qr- O1 H- (I - Or) - O1-1
Die hochpassgefilterten Bildpunkte lassen sich aus den Differenzen zwischen den Originalbildpunkten und den tiefpassgefilterten Bildpunkten berechnen.
H = O -T 4) Einer der einfachsten Klassifikatoren ergibt sich, falls man nur die hochfrequenten Bildanteile betrachtet.
Figure imgf000006_0001
Die obige Gleichung entspricht einem Hochpass. Summiert man nur Werte mit abs(O(i+1)-O(i-1))>delta, lässt sich das Kamerarauschen unterdrücken und es ergibt sich ein äußerst effektiver Klassifikator. (Anmerkung: Die obige Formel entspricht einer nicht normierten Kontrastmessung über die Bildpunkte einer ganzen Zeile. (Es gilt für den Kontrast: K=(lmax-lmin)/(lmax+lmin). Sind nur zwei Werte vorhanden erhält man K=(H- I2)/(I1 +I2) oder [l(i)-l(i+1)]/[ l(i)+l(i+1)])).
Die Erfindung bietet somit einen Mehrfachnutzen einer Kamera, die zur Umgebungserfassung und als Regensensor verwendet wird. Der Kamerasensor ist dabei Umfeldbeobachtung auf ein Zielgebiet fokussiert, dass außerhalb der Abmessungen des Fahrzeugs auf die Fahrbahn beispielsweise in einem Bereich von 5 bis 30 Metern vor der Front des Fahrzeugs angeordnet ist. Die aus der Umfeldbeobachtung gewonnenen Informationen können z.B. in Fahrerassistenzfunktionen wie Lane Depature Warning oder Nightvision eingesetzt werden. Das hier erfindungsgemäß vorgestellte Verfahren zur Erkennung von Niederschlägen auf der Windschutzscheibe beruht genau auf dieser Fokuseigenschaft, und unterscheidet sich von dem eines konventionellen Regensensors, wo der Fokus einer Kamera direkt auf die Windschutzscheibe gerichtet ist.

Claims

Patentansprüche
1 ) Verfahren zur Detektion von Niederschlag auf einer Scheibe, dadurch gekenn¬ zeichnet, daß a) eine Kamera mit einer Mehrzahl benachbarter Pixel zur Erfassung eines Bildes eines Zielgebiets verwendet wird, wobei das Zielgebiet von der Kamera deutlich weiter entfernt ist als die Scheibe und die Kamera auf das Zielgebiet in der Umgebung des Fahrzeugs fokussiert ist und somit die Scheibe unscharf abbildet, b) und die Schärfe und/oder Kontrastunterschiede zumindest von Teilbereichen des Bildes bewertet und daraus auf ein Vorhandensein von Niederschlag auf der Scheibe geschlossen wird.
2) Verfahren nach Anspruch 1 , dadurch gekennzeichnet, daß das Bild einer Fourier- Transformation unterzogen und die Ortsfrequenzen ausgewertet werden.
3) Verfahren nach Anspruch 1 , dadurch gekennzeichnet, daß die Helligkeits- und/oder Farbunterschiede von Pixeln innerhalb einer Zone deutlich kleiner als die Gesamtgröße des Bildes bewertet werden.
4) Verfahren nach Anspruch 3, dadurch gekennzeichnet, daß die
Helligkeitsunterschiede unmittelbar benachbarter Pixel erfasst und über das Gesamtbild summiert und bewertet werden 5) Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, a) daß ein erstes Bild aufgenommen wird, b) nachfolgend ein die Scheibe im Sichtbereich der Kamera überstreichender Scheibenwischer aktiviert wird c) und danach ein zweites Bild aufgenommen und beide Bilder auf Änderungen hin bewertet werden.
6) Verfahren nach Anspruch 5, dadurch gekennzeichnet, daß a) ein erstes Bild aufgenommen und mit Vorgabewerten für die Schärfe des Bildes und/oder Kontrastunterschiede benachbarter Pixel verglichen wird und b) nur bei Unterschreitung von Mindestwerten der Schärfe und/oder Kontrastunterschieden der Scheibenwischer aktiviert wird.
7) Verwendung einer Kamera zur Erfassung der Umgebung eines Fahrzeugs durch eine Scheibe des Fahrzeugs hindurch zur Detektion von Regen gemäß dem Verfahrens nach einem der vorangehenden Ansprüche
8) Kamera zur Erfassung der Umgebung eines Fahrzeugs durch eine Scheibe des Fahrzeugs hindurch, welche einen regenabhängiges Signal gemäß dem Verfahrens nach einem der vorangehenden Ansprüche zur Steuerung der Scheibenwischer erzeugt.
9) Kraftfahrzeug mit einer Kamera und einer Auswerteeinheit zur Durchführung eines Verfahrens nach einem der vorangehenden Ansprüche
PCT/DE2005/000676 2004-09-03 2005-04-14 Verfahren zur detektion von niederschlag auf einer scheibe WO2006024247A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE112005001898T DE112005001898A5 (de) 2004-09-03 2005-04-14 Verfahren zur Detektion von Niederschlag auf einer Scheibe

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
DE102004042597 2004-09-03
DE102004042597.3 2004-09-03
DE102005004220 2005-01-28
DE102005004220.1 2005-01-28

Publications (1)

Publication Number Publication Date
WO2006024247A1 true WO2006024247A1 (de) 2006-03-09

Family

ID=34972116

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE2005/000676 WO2006024247A1 (de) 2004-09-03 2005-04-14 Verfahren zur detektion von niederschlag auf einer scheibe

Country Status (2)

Country Link
DE (1) DE112005001898A5 (de)
WO (1) WO2006024247A1 (de)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2901218A1 (fr) * 2006-05-22 2007-11-23 Valeo Vision Sa Procede de detection de pluie sur un parebrise
WO2010038223A1 (en) * 2008-10-01 2010-04-08 Hi-Key Limited A method and a system for detecting the presence of an impediment on a lens of an image capture device to light passing through the lens of an image capture device
WO2011127895A1 (de) 2010-04-16 2011-10-20 Conti Temic Microelectronic Gmbh Verfahren und vorrichtung zur fahrerunterstützung beim fahren eines fahrzeugs durch detektion von wetterbedingten sichteinschränkungen
WO2013163991A1 (de) * 2012-05-03 2013-11-07 Conti Temic Microelectronic Gmbh Detektion von regentropfen auf einer scheibe mittels einer kamera und beleuchtung
WO2014032933A1 (de) * 2012-08-29 2014-03-06 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum betreiben eines fahrzeugs
US8774546B2 (en) 2012-03-08 2014-07-08 Industrial Technology Research Institute Method and apparatus for single-image-based rain streak removal
US9224052B2 (en) 2012-12-19 2015-12-29 Industrial Technology Research Institute Method for in-image periodic noise pixel inpainting
US9335264B2 (en) 2010-11-30 2016-05-10 Conti Temic Microelectronic Gmbh Detection of raindrops on a pane by means of a camera and lighting
US9508015B2 (en) 2011-12-05 2016-11-29 Continental Teves Ag & Co. Ohg Method for evaluating image data of a vehicle camera taking into account information about rain
DE102015218500A1 (de) 2015-09-25 2017-03-30 Conti Temic Microelectronic Gmbh Beleuchtung und kamerabasierte Detektion von Regentropfen auf einer Scheibe
EP3336747A1 (de) 2016-12-13 2018-06-20 Continental Automotive GmbH Regendetektion mit einer kamera
EP3336748A1 (de) 2016-12-13 2018-06-20 Continental Automotive GmbH Detektieren von starkregen durch zeitliches messen der unschärfe von kanten
US10106126B2 (en) 2014-05-15 2018-10-23 Conti Temic Microelectronic Gmbh Apparatus and method for detecting precipitation for a motor vehicle
US10137842B2 (en) 2011-06-03 2018-11-27 Conti Temic Microelectronic Gmbh Camera system for a vehicle
CN114714865A (zh) * 2022-04-12 2022-07-08 重庆金康赛力斯新能源汽车设计院有限公司 汽车玻璃的除雾系统与除雾方法
CN114714865B (zh) * 2022-04-12 2024-05-14 重庆赛力斯新能源汽车设计院有限公司 汽车玻璃的除雾系统与除雾方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10111249A (ja) * 1996-10-09 1998-04-28 Fujitsu Ten Ltd 視界状態検出装置
DE19740364A1 (de) 1997-09-13 1999-03-25 Bosch Gmbh Robert Vorrichtung und Verfahren zum Betreiben eines Regensensors
DE19846969A1 (de) 1998-04-08 1999-10-14 Bosch Gmbh Robert Regensensor
DE10135107A1 (de) 2001-07-19 2003-02-06 Adc Automotive Dist Control Verfahren zum Optischen Abtasten einer Szene
DE10201522A1 (de) * 2002-01-17 2003-07-31 Bosch Gmbh Robert Verfahren und Vorrichtung zur Erkennung von Sichtbehinderungen bei Bildsensorsystemen
WO2003097420A1 (de) * 2002-05-18 2003-11-27 Elmos Semiconductor Ag Regensensor
EP1418089A2 (de) * 2002-11-05 2004-05-12 C.R.F. Società Consortile per Azioni Multifunktionales integriertes optisches System mit einer CMOS oder CCD Matrix
DE10303047A1 (de) * 2003-01-24 2004-08-05 Daimlerchrysler Ag Verfahren und Vorrichtung zur Sichtverbesserung und zur Bestimmung der Wettersituation
DE10303046A1 (de) * 2003-01-24 2004-10-21 Daimlerchrysler Ag Verfahren und Vorrichtung zur quantitativen Abschätzung der Sichtweite in Fahrzeugen

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10111249A (ja) * 1996-10-09 1998-04-28 Fujitsu Ten Ltd 視界状態検出装置
DE19740364A1 (de) 1997-09-13 1999-03-25 Bosch Gmbh Robert Vorrichtung und Verfahren zum Betreiben eines Regensensors
DE19846969A1 (de) 1998-04-08 1999-10-14 Bosch Gmbh Robert Regensensor
DE10135107A1 (de) 2001-07-19 2003-02-06 Adc Automotive Dist Control Verfahren zum Optischen Abtasten einer Szene
DE10201522A1 (de) * 2002-01-17 2003-07-31 Bosch Gmbh Robert Verfahren und Vorrichtung zur Erkennung von Sichtbehinderungen bei Bildsensorsystemen
WO2003097420A1 (de) * 2002-05-18 2003-11-27 Elmos Semiconductor Ag Regensensor
EP1418089A2 (de) * 2002-11-05 2004-05-12 C.R.F. Società Consortile per Azioni Multifunktionales integriertes optisches System mit einer CMOS oder CCD Matrix
DE10303047A1 (de) * 2003-01-24 2004-08-05 Daimlerchrysler Ag Verfahren und Vorrichtung zur Sichtverbesserung und zur Bestimmung der Wettersituation
DE10303046A1 (de) * 2003-01-24 2004-10-21 Daimlerchrysler Ag Verfahren und Vorrichtung zur quantitativen Abschätzung der Sichtweite in Fahrzeugen

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PATENT ABSTRACTS OF JAPAN vol. 1998, no. 09 31 July 1998 (1998-07-31) *

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2901218A1 (fr) * 2006-05-22 2007-11-23 Valeo Vision Sa Procede de detection de pluie sur un parebrise
EP1860426A3 (de) * 2006-05-22 2010-06-02 Valeo Vision Verfahren zum Erkennen von Regen auf einer Windschutzscheibe
US7860275B2 (en) 2006-05-22 2010-12-28 Valeo Vision Method for detecting rain on a windscreen
WO2010038223A1 (en) * 2008-10-01 2010-04-08 Hi-Key Limited A method and a system for detecting the presence of an impediment on a lens of an image capture device to light passing through the lens of an image capture device
US9128813B2 (en) 2010-04-16 2015-09-08 Conti Temic Microelectronic Gmbh Method and device for assisting a driver while driving a vehicle by detecting weather-related visibility limitations
DE102010015214A1 (de) 2010-04-16 2011-10-20 Conti Temic Microelectronic Gmbh Verfahren und Vorrichtung zur Fahrerunterstützung beim Fahren eines Fahrzeugs durch Detektion von wetterbedingten Sichteinschränkungen
WO2011127895A1 (de) 2010-04-16 2011-10-20 Conti Temic Microelectronic Gmbh Verfahren und vorrichtung zur fahrerunterstützung beim fahren eines fahrzeugs durch detektion von wetterbedingten sichteinschränkungen
US9335264B2 (en) 2010-11-30 2016-05-10 Conti Temic Microelectronic Gmbh Detection of raindrops on a pane by means of a camera and lighting
US10137842B2 (en) 2011-06-03 2018-11-27 Conti Temic Microelectronic Gmbh Camera system for a vehicle
US9508015B2 (en) 2011-12-05 2016-11-29 Continental Teves Ag & Co. Ohg Method for evaluating image data of a vehicle camera taking into account information about rain
US8774546B2 (en) 2012-03-08 2014-07-08 Industrial Technology Research Institute Method and apparatus for single-image-based rain streak removal
WO2013163991A1 (de) * 2012-05-03 2013-11-07 Conti Temic Microelectronic Gmbh Detektion von regentropfen auf einer scheibe mittels einer kamera und beleuchtung
US9702818B2 (en) 2012-05-03 2017-07-11 Conti Temic Microelectronic Gmbh Detection of raindrops on a windowpane by means of camera and light
WO2014032933A1 (de) * 2012-08-29 2014-03-06 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum betreiben eines fahrzeugs
US9224052B2 (en) 2012-12-19 2015-12-29 Industrial Technology Research Institute Method for in-image periodic noise pixel inpainting
US10106126B2 (en) 2014-05-15 2018-10-23 Conti Temic Microelectronic Gmbh Apparatus and method for detecting precipitation for a motor vehicle
DE102015218500A1 (de) 2015-09-25 2017-03-30 Conti Temic Microelectronic Gmbh Beleuchtung und kamerabasierte Detektion von Regentropfen auf einer Scheibe
EP3336747A1 (de) 2016-12-13 2018-06-20 Continental Automotive GmbH Regendetektion mit einer kamera
EP3336748A1 (de) 2016-12-13 2018-06-20 Continental Automotive GmbH Detektieren von starkregen durch zeitliches messen der unschärfe von kanten
CN114714865A (zh) * 2022-04-12 2022-07-08 重庆金康赛力斯新能源汽车设计院有限公司 汽车玻璃的除雾系统与除雾方法
CN114714865B (zh) * 2022-04-12 2024-05-14 重庆赛力斯新能源汽车设计院有限公司 汽车玻璃的除雾系统与除雾方法

Also Published As

Publication number Publication date
DE112005001898A5 (de) 2007-08-09

Similar Documents

Publication Publication Date Title
WO2006024247A1 (de) Verfahren zur detektion von niederschlag auf einer scheibe
EP1506108B1 (de) Regensensor
EP1027235B1 (de) Verfahren zum detektieren von auf einer windschutzscheibe befindlichen objekten sowie vorrichtung
DE69835175T2 (de) System zum Erfassen von Feuchtigkeit auf der Windschutzscheibe eines Fahrzeugs
EP2558336B1 (de) Verfahren und vorrichtung zur fahrerunterstützung beim fahren eines fahrzeugs durch detektion von wetterbedingten sichteinschränkungen
DE60214593T2 (de) Stereoabbildung mit einem bildsensor verwendender feuchtigkeitssensor
WO2019174682A1 (de) Verfahren und vorrichtung zur erkennung und bewertung von fahrbahnzuständen und witterungsbedingten umwelteinflüssen
DE112008001384B4 (de) Verfahren zur Verschmutzungserkennung bei einer TOF-Distanzbildkamera
WO2003063468A1 (de) Verfahren und vorrichtung zur bildverarbeitung sowie nachtsichtsystem für kraftfahrzeuge
WO2012171834A2 (de) Verfahren und vorrichtung zur detektion einer sichtbeeinträchtigung einer scheibe
EP1468401A1 (de) Verfahren und vorrichtung zur erkennung von sichtbehinderungen bei bildsensorsystemen
DE10139514A1 (de) Transmissionsdetektor für einen Fensterkörper, insbesondere die Windschutzscheibe eines Kraftfahrzeuges, sowie Reinigungsvorrichtung für einen Sichtbereich eines Fensterkörpers
WO2005066684A1 (de) Nachtsichtsystem für kraftfahrzeuge mit partiellem optischem filter
DE10303046A1 (de) Verfahren und Vorrichtung zur quantitativen Abschätzung der Sichtweite in Fahrzeugen
DE102014209197A1 (de) Vorrichtung und Verfahren zum Erkennen von Niederschlag für ein Kraftfahrzeug
EP2844529A1 (de) Detektion von regentropfen auf einer scheibe mittels einer kamera und beleuchtung
DE102004010908B4 (de) Bildaufnahmevorrichtung und Bildaufnahmeverfahren
EP1440856A2 (de) Verfahren und Vorrichtung zur Sichtverbesserung und zur Bestimmung der Wettersituation
DE102013022076A1 (de) Verfahren zum Bestimmen einer Breite eines Zielfahrzeugs mittels eines Kamerasystems eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE10219788C1 (de) Verfahren und Vorrichtung zur Sichtweitenmessung mit Bildsensorsystemen
DE102007058779B4 (de) Einrichtung eines Kraftfahrzeugs zur Erzeugung eines für eine Bildanalyse geeigneten Bildes
DE102006004770B4 (de) Verfahren zur bildgestützten Erkennung von Fahrzeugen im Umfeld eines Sraßenfahrzeugs
DE102015218500A1 (de) Beleuchtung und kamerabasierte Detektion von Regentropfen auf einer Scheibe
WO2017041795A1 (de) Stereokameravorrichtung zur umgebungserfassung eines kraftfahrzeugs, kraftfahrzeug mit einer solchen stereokameravorrichtung sowie ein verfahren zur erkennung von regentropfen oder ablagerungen
WO2012119627A1 (de) Verfahren und vorrichtung zur ermittlung von wasser auf einer fahrzeugscheibe

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KM KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 1120050018989

Country of ref document: DE

REF Corresponds to

Ref document number: 112005001898

Country of ref document: DE

Date of ref document: 20070809

Kind code of ref document: P

122 Ep: pct application non-entry in european phase