DE10322010A1 - Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing - Google Patents

Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing Download PDF

Info

Publication number
DE10322010A1
DE10322010A1 DE2003122010 DE10322010A DE10322010A1 DE 10322010 A1 DE10322010 A1 DE 10322010A1 DE 2003122010 DE2003122010 DE 2003122010 DE 10322010 A DE10322010 A DE 10322010A DE 10322010 A1 DE10322010 A1 DE 10322010A1
Authority
DE
Germany
Prior art keywords
camera
motor vehicle
recognition system
image recognition
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE2003122010
Other languages
German (de)
Inventor
Mark-Tell Dr. Schneider
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daimler AG
Original Assignee
DaimlerChrysler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DaimlerChrysler AG filed Critical DaimlerChrysler AG
Priority to DE2003122010 priority Critical patent/DE10322010A1/en
Publication of DE10322010A1 publication Critical patent/DE10322010A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B60S1/0833—Optical rain sensor
    • B60S1/0844—Optical rain sensor including a camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B60S1/0874—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means characterized by the position of the sensor on the windshield
    • B60S1/0885—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means characterized by the position of the sensor on the windshield the sensor being integrated in a rear-view mirror module

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

The system (2) has a camera (5) in the motor vehicle (1) for acquiring an image of an area (3.1) of the screen (3) and an image processing unit (6) for determining the amount of precipitation from the acquired image. A defined area (9) of a surface (10) of the motor vehicle can be detected by the camera through the screen to act as a background for image acquisition and for determining the quantity of precipitation by the image processing unit.

Description

Die Erfindung betrifft ein Bilderkennungssystem zum Erfassen einer Niederschlagsmenge auf einer Scheibe eines Kraftfahrzeugs, mit einer im Kraftfahrzeug angeordnete Kamera zum Aufnehmen eines Bildes eines Bereiches der Scheibe und einer Bildverarbeitungseinheit zur Bestimmung der Niederschlagsmenge aus dem von der Kamera aufgenommenen Bild.The The invention relates to an image recognition system for detecting a precipitation amount on a disc of a motor vehicle, with one in the motor vehicle arranged camera for taking a picture of an area of the Disk and an image processing unit for determining the amount of precipitation from the picture taken by the camera.

Aus der EP 0 832 798 B1 ist ein Bilderkennungssystem zum Erfassen von Flüssigkeitstropfen bekannt, die auf einer Oberfläche eines transparenten Elements abgeschieden sind. Das Bilderkennungssystem umfasst eine Kamera zum Aufnehmen eines Bildes und Mittel zur Bestimmung der Anwesenheit von Flüssigkeitstropfen aus dem von der Kamera aufgenommenen Bild. Das Bilderkennungssystem weist weiterhin einen durchscheinenden Schirm auf, beispielsweise ein durchscheinendes Folienelement, der über dem transparenten Element angeordnet ist. Der auf dem Schirm sich absetzende Niederschlag wird von der Kamera von einer Rückseitenoberfläche des transparenten Elements aus erfasst. Aufgrund der Verwendung des durchscheinenden Schirms werden nur Objekte unmittelbar in der Nähe des Schirms, die auf dem transparenten Element abgeschiedenen Flüssigkeitstropfen, von der Kamera aufgenommen, während von dem transparenten Element entfernte Objekte nicht berücksichtigt werden. Auch können feste Schmutzflecken, die auf dem transparenten Element abgeschieden sind, von Flüssigkeitstropfen unterschieden werden, indem man den Unterschied der optischen Eigenschaften dieser unterschiedlichen Objekte verwendet.From the EP 0 832 798 B1 For example, an image recognition system for detecting liquid drops deposited on a surface of a transparent member is known. The image recognition system comprises a camera for taking an image and means for determining the presence of liquid drops from the image taken by the camera. The image recognition system further comprises a translucent screen, for example a translucent film element disposed over the transparent element. The precipitate deposited on the screen is detected by the camera from a back surface of the transparent member. Due to the use of the translucent screen, only objects immediately adjacent to the screen, the drops of liquid deposited on the transparent element, are picked up by the camera while objects removed from the transparent element are not taken into account. Also, solid stains deposited on the transparent element can be distinguished from liquid drops by utilizing the difference in optical properties of these different objects.

Als nachteilig wird seitens der Anmelderin angesehen, dass das aus dem Stand der Technik bekannte Bilderkennungssystem aufgrund der Verwendung des durchscheinenden Schirms, der nicht im primären Sichtfeld eines Fahrers angeordnet ist, ein flächenmäßig nicht ausreichender und das eigentliche Sichtfeld des Fahrers nicht repräsentierender Bereich der Windschutzscheibe erfasst wird. Zudem wird nur die Flüssigkeitsmenge und nicht die eigentlich interessierende Durchsicht-Qualität ermittelt. Dadurch ist eine optimale Ansteuerung eines Wischblattes zum Reinigen der Windschutzscheibe nicht gewährleistet.As The Applicant considers that the disadvantage of the Prior art known image recognition system due to the use the translucent screen that is not in the primary field of view of a driver is arranged, a surface not sufficient and the actual field of vision of the driver not representing area the windshield is detected. In addition, only the amount of liquid and not the transparency of interest that is actually of interest. This is an optimal control of a wiper blade for cleaning the windscreen is not guaranteed.

Der Erfindung liegt somit die Aufgabe zugrunde, eine gegenüber dem Stand der Technik verbessertes Bilderkennungssystem zum Erfassen einer Niederschlagsmenge auf einer Scheibe eines Kraftfahrzeugs anzugeben, welches eine im Kraftfahrzeug angeordnete Kamera zum Aufnehmen eines Bildes eines Bereiches der Scheibe und eine Bildverarbeitungseinheit zur Bestimmung der Niederschlagsmenge aus dem von der Kamera aufgenommenen Bild aufweist.Of the Invention is therefore based on the object, a relation to the Prior art improved image recognition system for detecting a rainfall on a disc of a motor vehicle indicate which one arranged in the motor vehicle camera for Taking an image of an area of the disk and an image processing unit to determine the amount of rainfall from the recorded by the camera Image has.

Die Aufgabe wird gelöst durch ein Bilderkennungssystem zum Erfassen einer Niederschlagsmenge auf einer Scheibe eines Kraftfahrzeuges mit den Merkmalen des Anspruchs 1.The Task is solved by an image recognition system for detecting a rainfall amount on a disc of a motor vehicle with the features of the claim 1.

Erfindungsgemäß ist ein vorgegebener Bereich einer Oberfläche des Kraftfahrzeugs mit der Kamera durch die Scheibe erfassbar, welcher als definierter Hintergrund für die Aufnahme des Bildes und zur Bestimmung der Niederschlagsmenge durch die Bildverarbeitungseinheit aus dem von der Kamera aufgenommenen Bild dient. Es wird kein wie aus dem Stand der Technik bekannter durchscheinender Schirm zum Identifizieren von Wassertropfen benötigt. Dadurch kann der mit der Kamera erfassbare Ausschnitt der Scheibe wesentlich größer gewählt werden und zudem in einem Bereich der Scheibe liegen, der das Sichtfeld eines Fahrers wesentlich besser repräsentiert. Bedingt durch den größeren erfassbaren Bereich entsteht ein statistischer Vorteil bei der Bestimmung der Niederschlagsmenge. Der größere erfassbare Bereich im Sichtfeld des Fahrers und die erfindungsgemäß ermittelte Durchsicht-Qualität ergibt eine bessere Auslösecharakteristik für eine von der Bildverarbeitungseinheit angesteuerte Scheibenwischanlage. Als definierter Hintergrund für die Bilderfassung können in der Regel bereits vorhandene Flächen, gegebenenfalls mit einem Muster versehene Flächen, bzw. Komponenten des Kraftfahrzeugs benutzt werden. Aufwendige Zusatzkonstruktionen wie der aus dem Stand der Technik bekannte transparente Schirm, die zudem den mit der Kamera zu erfassenden Bereich flächenmäßig einschränken, werden nicht benötigt. Da die Kamera nicht durch speziell eingesetzte Mittel zur Niederschlagserfassung in ihrer Fernsicht beschränkt ist, kann diese wenigstens teilweise auch Aufgaben einer Umgebungsüberwachung übernehmen.According to the invention is a predetermined area of a surface of the motor vehicle with the camera by the disc detectable, which as defined Background for recording the image and determining the amount of rainfall by the image processing unit from that taken by the camera Image serves. It does not become as known in the art translucent screen needed to identify drops of water. Thereby can the captured with the camera section of the disc essential be chosen larger and also lie in an area of the disc, which is the field of vision represents a driver much better. Due to the larger detectable Area creates a statistical advantage in determining the Rainfall. The larger detectable Area in the field of vision of the driver and inventively determined Transmission-quality gives a better tripping characteristic for one wiper system controlled by the image processing unit. As a defined background for the image capture can usually existing areas, if necessary with a Patterned areas, or components of the motor vehicle are used. Elaborate additional constructions such as the well-known from the prior art transparent screen, the In addition, the range to be registered with the camera area to restrict area, are not required. Because the camera is not by specially used means for precipitation detection limited in their distance vision is, this can at least partially take over tasks of environmental monitoring.

In einer Ausgestaltung, bei welcher die Kamera in einem oberen Bereich des Innenraums des Kraftfahrzeuges angeordnet ist, ist es vorteilhaft, wenn die Kamera im Dachhimmel des Kraftfahrzeuges angeordnet ist. Mit dieser Anordnung kann eine außerhalb des Innenraums sich befindliche Oberfläche bzw. Komponente des Kraftfahrzeugs besser erfasst werden. Mit einem geeignet gewählten Kameraabstand zur Scheibe, kann der mit der Kamera erfassbare Bereich im Sichtfeld des Fahrers flächenmäßig maximiert und von der Lage im Sichtfeld her optimiert werden.In an embodiment in which the camera in an upper area the interior of the motor vehicle is arranged, it is advantageous if the camera is arranged in the headliner of the motor vehicle. With This arrangement can be an outside the interior surface or component of the motor vehicle be recorded better. With a suitably chosen camera distance to the disc, The area detectable by the camera can be in the field of view of the driver maximized in terms of area and be optimized by the situation in the field of vision.

Es ist von Vorteil, wenn der vorgegebene Bereich des Kraftfahrzeuges die Oberfläche einer Struktur, insbesondere eines Lüftungsgitter, ist oder umfasst. Das im Außenbereich des Kraftfahrzeuges, beispielsweise im Nahbereich der Scheibe, angeordnete Lüftungsgitter weist eine Strukturierung bzw. Musterung auf, vor dessen Hintergrund sich eine Niederschlagsmenge in Form von Flüssigkeitstropfen aufgrund der detaillierten und scharf begrenzten Struktur des Lüftungsgitters besonders gut identifizieren lässt. Durch die relative Anordnung von Belüftungsgitter und Kamera zueinander – das Belüftungsgitter ist in einem scheibennahen unteren Außenbereich der Scheibe und die Kamera in einem scheibennahen oberen Innenraumbereich des Kraftfahrzeuges angeordnet – wird ein flächenmäßig großer Bereich der Scheibe mit der Kamera erfasst. Neben dem primären Sichtbereich des Fahrers wird zusätzlich der untere Scheibenbereich mit der Kamera erfasst. Da sich der Niederschlag auf der Scheibe strömungstechnisch vorrangig von unten nach oben aufbaut, bedingt durch eine aufwachsende Gischt und zusätzlich von dem vom Kraftfahrzeug selbst reflektierten Regenwasser, ist eine Erfassung des Niederschlages im unteren Bereich der Scheibe von besonderem Interesse, da nur mit der Niederschlagserfassung im unteren Scheibenbereich beispielsweise ein Wischvorgang für die Scheibe so rechtzeitig ausgelöst werden kann, dass eine Beeinträchtigung der Sichtverhältnisse für den Fahrer bereits im Voraus weitestgehend vermieden werden kann.It is advantageous if the predetermined range of the motor vehicle, the surface of a Struk ture, in particular a ventilation grille, is or comprises. The ventilation grille arranged in the outer area of the motor vehicle, for example in the vicinity of the pane, has a structuring or pattern on the background of which precipitation in the form of liquid droplets can be identified particularly well due to the detailed and sharply delimited structure of the ventilation grille. Due to the relative arrangement of ventilation grille and camera to each other - the ventilation grille is disposed in a disc-near lower outside of the disc and the camera in a disc-near upper interior region of the motor vehicle - a large area of the disc is detected with the camera. In addition to the driver's primary field of view, the lower pane area is additionally recorded with the camera. Since the precipitate builds up on the disc primarily from bottom to top, due to a growing spray and additionally from the rainwater reflected by the motor vehicle itself, a detection of the precipitate in the lower part of the disc is of particular interest, since only with the precipitation detection in lower wheel area, for example, a wiping process for the disc can be triggered in time so that an impairment of visibility for the driver can be avoided in advance as far as possible.

Die Scheibe kann die Windschutzscheibe oder die Heckscheibe des Kraftfahrzeuges sein. Das Bilderkennungssystem kann aber auch für Scheiben von Eisenbahnen, Schiffen oder anderen Typen von Kraftfahrzeugen eingesetzt werden.The Disc can be the windshield or the rear window of the motor vehicle his. The image recognition system can also be used for windows of railways, Ships or other types of motor vehicles.

Weitere vorteilhafte Ausgestaltungen der Erfindung sind in den Unteransprüchen wiedergegeben.Further advantageous embodiments of the invention are given in the dependent claims.

Die Erfindung wird anhand mehrerer Ausführungsbeispiele in den Figuren näher erläutert. Dabei zeigen die 1 und 2 zwei Ausführungsformen eines Bilderkennungssystems zum Erfassen einer Niederschlagsmenge auf einer Scheibe eines Kraftfahrzeugs in einer seitlichen Schnittansicht in schematischer Darstellung.The invention will be explained in more detail with reference to several embodiments in the figures. The show 1 and 2 two embodiments of an image recognition system for detecting a rainfall on a disc of a motor vehicle in a sectional side view in a schematic representation.

In 1 ist ein Ausschnitt eines Kraftfahrzeuges 1 mit einem Bilderkennungssystem 2 zum Erfassen einer Niederschlagsmenge auf einer als Windschutzscheibe ausgebildeten Scheibe 3 des Kraftfahrzeuges 1 dargestellt. Als Scheibe 3 kann beispielsweise auch die Heckscheibe des Kraftfahrzeuges 1 vorgesehen sein.In 1 is a section of a motor vehicle 1 with an image recognition system 2 for detecting a rainfall on a disc designed as a windshield 3 of the motor vehicle 1 shown. As a disk 3 For example, the rear window of the vehicle 1 be provided.

Das Bilderkennungssystem 2 umfasst eine im Innenraum 4 des Kraftfahrzeuges angeordnete Kamera 5 zum Aufnehmen eines Bildes eines Bereiches 3.1 der Scheibe 3 und eine Bildverarbeitungseinheit 6 zur Bestimmung der Niederschlagsmenge aus dem von der Kamera 5 aufgenommenen Bild. Die Bildverarbeitungseinheit 6 steuert eine ihr nachgeschaltete Ansteuerung 7 für eine der Übersichtlichkeit wegen nicht weiter dargestellten Wischvorrichtung der Scheibe 3 an.The image recognition system 2 includes one in the interior 4 of the motor vehicle arranged camera 5 to take a picture of an area 3.1 the disc 3 and an image processing unit 6 to determine the amount of rainfall from the camera 5 taken picture. The image processing unit 6 controls a downstream control 7 for a sake of clarity not shown wiper device of the disc 3 on.

Mit der Kamera 5 kann ein vorgegebener Bereich 9 einer Oberfläche 10 des Kraftfahrzeuges 1 durch die Scheibe 3 erfasst werden, welcher als definierter Hintergrund für die Aufnahme des Bildes und zur Bestimmung der Niederschlagsmenge durch die Bildverarbeitungseinheit 6 dient. Der vorgegebene Bereich 9 wird begrenzt durch den von der Kamera 5 erfassten Raumwinkelbereich, verdeutlicht durch die beiden gebrochenen Linien 11. Der vorgegebene Bereich 9 umfasst in diesem Ausführungs beispiel die Oberfläche 10 einer Kontur 12 und ein Muster 13. Bei der Kontur 12 kann es sich beispielsweise um eine Scheinwerfervorrichtung, um den Eingang einer Ansaugvorrichtung für Luft oder um ein Markenzeichen handeln. Das Muster 13, insbesondere eine gitterartige Linienstruktur, kann beispielsweise in die Oberfläche 10 des Kraftfahrzeuges 1 so eingeprägt sein, dass es für das menschliche Auge nicht sichtbar und nur von der Kamera 5 erfasst werden kann. Ein Linienmuster ist bildverarbeitungstechnisch besonders gut geeignet, da Flüssigkeitstropfen die eine Linie des Linienmusters besetzen, besonders einfach von der Bildverarbeitungseinheit 6 zu registrieren und zu verarbeiten sind. Bei trockener Scheibe 3 sieht die Kamera 5 den vorgegebenen Bereich 9 der Oberfläche 10 des Kraftfahrzeuges 1 klar, während bei eintretender Benetzung durch die Flüssigkeitstropfen das klare Bild des Hintergrundes gestört wird. Auch ein einfacher, ebener lackierter Ausschnitt der Oberfläche 10 des Kraftfahrzeuges 1 kann zum Erfassen der Niederschlagsmenge herangezogen werden. In Abhängigkeit von ihrer Flächengröße können die im vorgegebenen Bereich 9 liegende Kontur 12, das Muster 13, ein lackierter Ausschnitt der Oberfläche 10 oder andere geeignete Bereiche der Oberfläche 10 allein oder in Kombination zum Bestimmen der Niederschlagsmenge benutzt werden.With the camera 5 can be a given range 9 a surface 10 of the motor vehicle 1 through the glass 3 which is used as a defined background for recording the image and for determining the amount of precipitation by the image processing unit 6 serves. The default range 9 is limited by the camera 5 recorded solid angle range, illustrated by the two broken lines 11 , The default range 9 includes in this embodiment, for example, the surface 10 a contour 12 and a pattern 13 , At the contour 12 it may be, for example, a headlamp device, the inlet of an air intake device or a trademark. The pattern 13 , In particular, a grid-like line structure, for example, in the surface 10 of the motor vehicle 1 so imprinted that it is not visible to the human eye and only from the camera 5 can be detected. A line pattern is particularly well suited for image processing, since drops of liquid occupying a line of the line pattern are particularly easy to use by the image processing unit 6 to register and process. When the disc is dry 3 sees the camera 5 the given area 9 the surface 10 of the motor vehicle 1 Clear, while entering wetting by the liquid drops the clear image of the background is disturbed. Also a simple, even-varnished section of the surface 10 of the motor vehicle 1 can be used to record the amount of precipitation. Depending on their area size, those in the given range 9 lying contour 12 , the pattern 13 , a lacquered cutout of the surface 10 or other suitable areas of the surface 10 used alone or in combination to determine the amount of precipitation.

Zur Unabhängigkeit der Anordnung von Tageslicht wird vorzugsweise eine Infrarot-empfindliche Kamera 5 verwendet. Bei geeigneter Wahl des sensitiven Spektralbereiches der Kamera 5 kann die Eigenwärme des Kraftfahrzeuges 1, z. B. der Motorhaube, statt einer Fremdlichtquelle verwendet werden.For independence of the arrangement of daylight is preferably an infrared-sensitive camera 5 used. With a suitable choice of the sensitive spectral range of the camera 5 can the heat of the motor vehicle 1 , z. As the hood, instead of an extraneous light source can be used.

Die Kamera 5 ist im Dachhimmel 8 des Kraftfahrzeuges 1 positioniert. Die Kamera 5 kann aber auch in einem anderen oberen Bereich des Innenraumes 4 des Kraftfahrzeuges 1 angeordnet sein, wobei bei der Positionierung und Ausrichtung der Kamera 5 zu berücksichtigen ist, dass ein möglicht großer Bereich 3.1 der Scheibe 3 im Sichtfeld des Fahrers und ein entsprechend geeigneter Hintergrund in Gestalt der Oberfläche 10 des Fahrzeuges 1 außerhalb des Innenraumes 4 erfasst wird.The camera 5 is in the headliner 8th of the motor vehicle 1 positioned. The camera 5 but it can also be in another upper area of the interior 4 of the motor vehicle 1 be arranged, taking in the positioning and orientation of the camera 5 It should be remembered that a large area is possible 3.1 the disc 3 in the field of vision of the driver and a correspondingly suitable background in the form of the surface 10 of the vehicle 1 outside the interior 4 is detected.

Die Kamera 5 ist zusätzlich für eine Umgebungserkennung einsetzbar. Mit dem Erfassungsbereich der Kamera 5, der nicht das Kraftfahrzeug 1 erfasst, können beispielsweise Fahrbahnmarkierungen, Fahrspur, Verkehrsschilder, Fahrbahnzustand und weitere Verkehrsteilnehmer erkannt werden. Zu diesem Zweck kann die der Kamera 5 nachgeschaltete Bildverarbeitungseinheit 6 beispielsweise zur Auswertung eine Bildaufteilung vornehmen, die eine parallele Bearbeitung der Niederschlagsmengenerfassung und der Umgebungserkennung ermöglicht. Die Kamera 5 kann somit für verschiedene Aufgaben eingesetzt werden. Ist die Kamera 5 zur Umgebungserkennung bereits im Kraftfahrzeug 1 vorgesehen, so wird für die Niederschlagsmengenerfassung kein zusätzlicher Regensensor benötigt.The camera 5 is also suitable for environmental detection. With the detection range of the camera 5 who is not the motor vehicle 1 detected, for example, lane markings, lane, traffic signs, road condition and other road users can be detected. For this purpose, the camera 5 downstream image processing unit 6 For example, make an image division for evaluation, which allows parallel processing of precipitation quantity detection and environmental detection. The camera 5 can thus be used for various tasks. Is the camera 5 for environmental detection already in the vehicle 1 provided, no additional rain sensor is needed for the precipitation quantity detection.

Im Kraftfahrzeug 1 gemäß 2 ist die Kamera 5 in einem Bereich eines Innenspiegels 14 angebracht. Mit der Kamera 5 kann der vorgegebene Bereich 9 der Oberfläche 10 des Kraftfahrzeuges 1 durch die Scheibe 3 erfasst werden, wobei der Bereich 9 in diesem Ausführungsbeispiel eine als Lüftungsgitter ausgebildete Struktur 15 umfasst, die im Nahbereich der Scheibe 3 angeordnet ist. Die Struktur 15 zeichnet sich durch ausgeprägte Kanten und schmale Stege aus, wodurch die Struktur 15 als definierter Hintergrund für die Aufnahme des Bildes und zur Bestimmung der Niederschlagsmenge durch die Bildverarbeitungseinheit 6 besonders gut geeignet ist.In the motor vehicle 1 according to 2 is the camera 5 in an area of an interior mirror 14 appropriate. With the camera 5 can be the default range 9 the surface 10 of the motor vehicle 1 through the glass 3 be captured, the area 9 in this embodiment, a trained as a ventilation grille structure 15 includes, in the vicinity of the disc 3 is arranged. The structure 15 is characterized by pronounced edges and narrow webs, reducing the structure 15 as a defined background for taking the picture and for determining the amount of precipitation by the image processing unit 6 is particularly well suited.

Mit der Ausrichtung der Kamera 5 auf die Struktur 15 wird der Bereich 3.1 der Scheibe 3 von der Kamera 5 erfasst. Der erfasste Bereich 3.1 deckt einen Großteil der Scheibe 3 ab, insbesondere das Sichtfeld des Fahrers und den unteren Bereich der Scheibe 3. Neben dem Sichtfeld des Fahrers ist der untere Bereich der Scheibe 3 zur Erfassung der Niederschlagsmenge besonders wichtig, da eine Gischt, die sich aus Spritzwasser und Regentropfen zusammensetzt, strömungsbedingt von unten nach oben ausbreitet. Bei einsetzendem und andauernden Niederschlag wird die Sicht des Fahrers primär von unten sich aufbauend verschlechtert. Durch die Erfassung der Niederschlagsmenge im unteren Bereich der Scheibe 3 kann eine Säuberung der Scheibe 3 so rechtzeitig ausgelöst und vorgenommen werden, dass eine störende Beeinträchtigung der Sicht des Fahrers weitestgehend vermieden werden kann.With the orientation of the camera 5 on the structure 15 becomes the area 3.1 the disc 3 from the camera 5 detected. The detected area 3.1 covers much of the disc 3 in particular, the field of vision of the driver and the lower portion of the disc 3 , Next to the driver's field of vision is the lower portion of the disc 3 For determining the amount of precipitation particularly important as a spray, which is composed of water spray and raindrops, flows from bottom to top flow. With onset and ongoing rainfall, the driver's view is primarily degraded from below building up. By recording the amount of rainfall at the bottom of the disc 3 may be a cleaning of the disc 3 be triggered and made in good time so that a disturbing impairment of the driver's view can be largely avoided.

Als Struktur 15 können neben dem Lüftungsgitter, das auch eine von der Scheibe 3 entferntere Position haben kann, auch andere Strukturen 15 vorgesehen sein. Zu denken ist hier beispielsweise an eine Figur oder ein ausgeprägtes Firmenlogo auf der Kühlerhaube des Kraftfahrzeuges 1.As a structure 15 can be next to the ventilation grille, which is also one of the disc 3 can have more distant position, also other structures 15 be provided. To think here is for example a figure or a pronounced company logo on the hood of the motor vehicle 1 ,

Mit dem Bilderkennungssystem 2 zum Erfassen der Niederschlagsmenge auf der Scheibe 3 des Kraftfahrzeuges 1 kann das Auslöseverhalten einer Scheibenwisch- und/oder Waschvorrichtung optimal angesteuert werden. Die Niederschlagsmenge wird auf der Scheibe 3 in dem Bereich 3.1 erfasst, der für eine optimale Ansteuerung wesentlich ist, nämlich im primären Sichtfeld des Fahrers und im unteren Bereich 3.1 der Scheibe 3, wo der Niederschlag zuerst eine klare Sicht beeinträchtigt. Der als Bestandteil des Kraftfahrzeuges 1 gewählte Hintergrund zur Aufnahme des Bildes mit der Kamera 5 sorgt für eine gute optische Bildauflösung.With the image recognition system 2 to record the amount of rainfall on the disc 3 of the motor vehicle 1 the triggering behavior of a windshield wiper and / or washing device can be optimally controlled. The rainfall is on the disk 3 in that area 3.1 detected, which is essential for optimal control, namely in the driver's primary field of vision and at the bottom 3.1 the disc 3 where the rainfall first obstructs a clear view. The as part of the motor vehicle 1 selected background to capture the image with the camera 5 ensures a good optical image resolution.

Claims (11)

Bilderkennungssystem (2) zum Erfassen einer Niederschlagsmenge auf einer Scheibe (3) eines Kraftfahrzeuges (1), umfassend: – eine im Kraftfahrzeug (1) angeordnete Kamera (5) zum Aufnehmen eines Bildes eines Bereiches (3.1) der Scheibe (3), – eine Bildverarbeitungseinheit (6) zur Bestimmung der Niederschlagsmenge aus dem von der Kamera (5) aufgenommenen Bild, dadurch gekennzeichnet , dass ein vorgegebener Bereich (9) einer Oberfläche (10) des Kraftfahrzeuges (1) mit der Kamera (5) durch die Scheibe (3) erfassbar ist, welcher als definierter Hintergrund für die Aufnahme des Bildes und zur Bestimmung der Niederschlagsmenge durch die Bildverarbeitungseinheit (6) dient.Image recognition system ( 2 ) for detecting a rainfall on a disc ( 3 ) of a motor vehicle ( 1 ), comprising: - one in the motor vehicle ( 1 ) arranged camera ( 5 ) for taking an image of an area ( 3.1 ) of the disc ( 3 ), - an image processing unit ( 6 ) to determine the amount of rainfall from the camera ( 5 ), characterized in that a predetermined area ( 9 ) of a surface ( 10 ) of the motor vehicle ( 1 ) with the camera ( 5 ) through the disc ( 3 ) which can be detected as a defined background for the acquisition of the image and for determining the amount of precipitation by the image processing unit ( 6 ) serves. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Kamera (5) in einem oberen Bereich des Innenraumes (4) des Kraftfahrzeuges (1) angeordnet ist.Image recognition system ( 2 ) according to claim 1, characterized in that the camera ( 5 ) in an upper area of the interior ( 4 ) of the motor vehicle ( 1 ) is arranged. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Kamera (5) im Dachhimmel (8) des Kraftfahrzeuges (1) angeordnet ist.Image recognition system ( 2 ) according to claim 1, characterized in that the camera ( 5 ) in the headliner ( 8th ) of the motor vehicle ( 1 ) is arranged. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Kamera (5) in einem Bereich eines Innenspiegels (14) angebracht ist.Image recognition system ( 2 ) according to claim 1, characterized in that the camera ( 5 ) in a region of an interior mirror ( 14 ) is attached. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass der vorgegebene Bereich (9) des Kraftfahrzeuges (1) die Oberfläche (10) einer Kontur (12) oder einer Struktur (15) umfasst.Image recognition system ( 2 ) according to claim 1, characterized in that the predetermined range ( 9 ) of the motor vehicle ( 1 ) the surface ( 10 ) of a contour ( 12 ) or a structure ( 15 ). Bilderkennungssystem (2) nach Anspruch 5, dadurch gekennzeichnet, dass die Struktur (15) als Lüftungsgitter ausgebildet ist.Image recognition system ( 2 ) according to claim 5, characterized in that the structure ( 15 ) is designed as a ventilation grille. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass der vorgegebene Bereich (9) der Oberfläche (10) des Kraftfahrzeuges (1) ein Muster (13) aufweist.Image recognition system ( 2 ) according to claim 1, characterized in that the predetermined range ( 9 ) of the surface ( 10 ) of the motor vehicle ( 1 ) a pattern ( 13 ) having. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Scheibe (3) die Windschutzscheibe des Kraftfahrzeuges (1) ist.Image recognition system ( 2 ) according to claim 1, characterized in that the disc ( 3 ) the windshield of the motor vehicle ( 1 ). Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Scheibe (3) die Heckscheibe des Kraftfahrzeuges (1) ist.Image recognition system ( 2 ) according to claim 1, characterized in that the disc ( 3 ) the rear window of the motor vehicle ( 1 ). Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Kamera (5) zusätzlich für eine Umgebungserkennung einsetzbar ist.Image recognition system ( 2 ) according to claim 1, characterized in that the camera ( 5 ) can also be used for environmental detection. Bilderkennungssystem (2) nach Anspruch 1, dadurch gekennzeichnet, dass die Kamera (5) für einen Spektralbereich empfindlich ist, der die Eigenwärme der Oberfläche (10), der Kontur (12) oder der Struktur (15) erfasst.Image recognition system ( 2 ) according to claim 1, characterized in that the camera ( 5 ) is sensitive to a spectral range which reduces the heat of the surface ( 10 ), the contour ( 12 ) or the structure ( 15 ) detected.
DE2003122010 2003-05-16 2003-05-16 Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing Withdrawn DE10322010A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE2003122010 DE10322010A1 (en) 2003-05-16 2003-05-16 Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE2003122010 DE10322010A1 (en) 2003-05-16 2003-05-16 Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing

Publications (1)

Publication Number Publication Date
DE10322010A1 true DE10322010A1 (en) 2004-12-02

Family

ID=33394649

Family Applications (1)

Application Number Title Priority Date Filing Date
DE2003122010 Withdrawn DE10322010A1 (en) 2003-05-16 2003-05-16 Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing

Country Status (1)

Country Link
DE (1) DE10322010A1 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005035812A1 (en) * 2005-07-27 2007-02-08 Adc Automotive Distance Control Systems Gmbh Method of detecting soiling on a transparent pane
DE102005058718A1 (en) * 2005-12-08 2007-06-14 Conti Temic Microelectronic Gmbh Sensor system for motor vehicle, has surrounding detection sensor formed as proximity sensor, rain sensor having low- resolution camera, and common evaluation unit for evaluation of sensor data, where sensors are arranged in common housing
EP1736384A3 (en) * 2005-06-24 2008-07-02 Audi Ag Device and method to control a sensor arrangement in a vehicle
DE102010013837A1 (en) * 2010-03-26 2011-09-29 Vr Vision Research Gmbh Sensor system for determining degree of wetting caused by e.g. rain on outer side of windscreen of motor car, has sources arranged at outer side of pane for determining aberrations that are produced due to outer wetting of pane
US9040915B2 (en) 2009-07-06 2015-05-26 Conti Temic Microelectronic Gmbh Optical module for simultaneously focusing on two fields of view
US9335264B2 (en) 2010-11-30 2016-05-10 Conti Temic Microelectronic Gmbh Detection of raindrops on a pane by means of a camera and lighting
DE102015218500A1 (en) 2015-09-25 2017-03-30 Conti Temic Microelectronic Gmbh Illumination and camera-based detection of raindrops on a pane
US9702818B2 (en) 2012-05-03 2017-07-11 Conti Temic Microelectronic Gmbh Detection of raindrops on a windowpane by means of camera and light
US10137842B2 (en) 2011-06-03 2018-11-27 Conti Temic Microelectronic Gmbh Camera system for a vehicle

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0832798A2 (en) * 1996-09-13 1998-04-01 Mitsuba Corporation Co., Ltd. Image recognition system
DE19749331A1 (en) * 1997-11-07 1999-05-20 Kostal Leopold Gmbh & Co Kg Method of detecting objects on motor vehicle windscreen
DE19700665C2 (en) * 1996-01-11 1999-06-02 Tokai Rika Co Ltd Sensor for detecting foreign material and windshield wiper system with sensor for detecting foreign material, especially raindrops
DE19855041A1 (en) * 1998-11-28 2000-05-31 Valeo Auto Electric Gmbh Device for the detection of particles on a windshield
DE19909989A1 (en) * 1999-03-06 2000-09-28 Kostal Leopold Gmbh & Co Kg Device for detecting objects on windshield of vehicle has object surface plane focused by objective that is oblique with respect to imaging axis of objective sensor array arrangement
US6320176B1 (en) * 1993-02-26 2001-11-20 Donnelly Corporation Vehicle rain sensor using imaging sensor
DE19909987C2 (en) * 1999-03-06 2003-04-10 Kostal Leopold Gmbh & Co Kg Arrangement for detecting objects located on a windshield of a motor vehicle

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6320176B1 (en) * 1993-02-26 2001-11-20 Donnelly Corporation Vehicle rain sensor using imaging sensor
DE19700665C2 (en) * 1996-01-11 1999-06-02 Tokai Rika Co Ltd Sensor for detecting foreign material and windshield wiper system with sensor for detecting foreign material, especially raindrops
EP0832798A2 (en) * 1996-09-13 1998-04-01 Mitsuba Corporation Co., Ltd. Image recognition system
DE19749331A1 (en) * 1997-11-07 1999-05-20 Kostal Leopold Gmbh & Co Kg Method of detecting objects on motor vehicle windscreen
DE19855041A1 (en) * 1998-11-28 2000-05-31 Valeo Auto Electric Gmbh Device for the detection of particles on a windshield
DE19909989A1 (en) * 1999-03-06 2000-09-28 Kostal Leopold Gmbh & Co Kg Device for detecting objects on windshield of vehicle has object surface plane focused by objective that is oblique with respect to imaging axis of objective sensor array arrangement
DE19909987C2 (en) * 1999-03-06 2003-04-10 Kostal Leopold Gmbh & Co Kg Arrangement for detecting objects located on a windshield of a motor vehicle

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1736384A3 (en) * 2005-06-24 2008-07-02 Audi Ag Device and method to control a sensor arrangement in a vehicle
DE102005035812A1 (en) * 2005-07-27 2007-02-08 Adc Automotive Distance Control Systems Gmbh Method of detecting soiling on a transparent pane
US8274562B2 (en) 2005-07-27 2012-09-25 Adc Automotive Distance Control Systems Gmbh Method for identifying soiling on a transparent screen
DE102005058718A1 (en) * 2005-12-08 2007-06-14 Conti Temic Microelectronic Gmbh Sensor system for motor vehicle, has surrounding detection sensor formed as proximity sensor, rain sensor having low- resolution camera, and common evaluation unit for evaluation of sensor data, where sensors are arranged in common housing
DE102005058718B4 (en) * 2005-12-08 2020-06-04 Conti Temic Microelectronic Gmbh Sensor system for environmental detection and rain detection
US9040915B2 (en) 2009-07-06 2015-05-26 Conti Temic Microelectronic Gmbh Optical module for simultaneously focusing on two fields of view
DE102010013837A1 (en) * 2010-03-26 2011-09-29 Vr Vision Research Gmbh Sensor system for determining degree of wetting caused by e.g. rain on outer side of windscreen of motor car, has sources arranged at outer side of pane for determining aberrations that are produced due to outer wetting of pane
US9335264B2 (en) 2010-11-30 2016-05-10 Conti Temic Microelectronic Gmbh Detection of raindrops on a pane by means of a camera and lighting
US10137842B2 (en) 2011-06-03 2018-11-27 Conti Temic Microelectronic Gmbh Camera system for a vehicle
US9702818B2 (en) 2012-05-03 2017-07-11 Conti Temic Microelectronic Gmbh Detection of raindrops on a windowpane by means of camera and light
DE102015218500A1 (en) 2015-09-25 2017-03-30 Conti Temic Microelectronic Gmbh Illumination and camera-based detection of raindrops on a pane

Similar Documents

Publication Publication Date Title
DE102014226358B4 (en) Apparatus and method for detecting surface pollution of a vehicle
EP1159170B1 (en) Device for detecting objects on a windscreen of a motor vehicle
DE19700665C5 (en) Sensor for detecting foreign material and windshield wiper system with sensor for detecting foreign material, especially raindrops
EP2062777B1 (en) Optical module
EP2370297B1 (en) Optical module having multifocal lens for detecting far and near fields in an image
DE102006008274B4 (en) Motor vehicle with an optical detection device and method for operating a motor vehicle
DE102012210116A1 (en) Method and device for detecting directional structures on a window of a vehicle
DE60300919T2 (en) Image pickup device of the vehicle occupants in a vehicle
DE10139514A1 (en) Transmission detector for window body, especially vehicle windscreen, has optics forming images of sections of body surface on detector whose maximum separation is comparable with free body aperture
DE102016211864A1 (en) Single body rain sensor with reflection sensor for detecting an external object
DE102015013203A1 (en) Cleaning unit for an image acquisition unit of a vehicle intended for environmental detection
DE10322010A1 (en) Image recognition system for detecting precipitation on motor vehicle screen uses defined area of vehicle surface detected by camera through screen as background for image acquisition, processing
DE10251661A1 (en) Motor vehicle with camera has at least the camera optics mounted on a windscreen wiper of part of a windscreen wiper
DE102016011994A1 (en) Method for controlling the operation of a windshield wiper device of a motor vehicle and associated motor vehicle
DE10157028A1 (en) Sensor device, in particular for controlling lighting devices of a motor vehicle
DE102023001699A1 (en) Transparency determining device for a window pane of a vehicle
DE102006056180A1 (en) Image processing system calibrating method for motor vehicle, involves detecting and evaluating marking on vehicle pane using image sensor, where characteristics of vehicle pane are determined based on detected marking
DE3532199A1 (en) Sensor for controlling the visual clarity of panes of glass
WO2004065176A1 (en) Holding element for the mirror of an interior rearview mirror, camera comprising one such holding element, and motor vehicle comprising one such camera
DE10230200A1 (en) Method and device for the detection of objects located on a surface of a transparent element
DE102019112449A1 (en) Motor vehicle with an optical arrangement for detecting vehicle interior objects in the invisible spectral range
DE102020209205B3 (en) Camera-based control of vehicle cleaning functions
DE102016008963A1 (en) Hinge cover of a commercial vehicle for receiving an image acquisition unit
DE10347977A1 (en) Rain sensor for detecting wetting of first surface of motor vehicle screen has measurement path outside area between radiation source, receiver and reflection device that reflects radiation from the back to receiver
DE102019000486A1 (en) Method for detecting and displaying traffic levels

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
8139 Disposal/non-payment of the annual fee