EP2384296A1 - Camera arrangement for sensing a state of a vehicle window - Google Patents

Camera arrangement for sensing a state of a vehicle window

Info

Publication number
EP2384296A1
EP2384296A1 EP09751878A EP09751878A EP2384296A1 EP 2384296 A1 EP2384296 A1 EP 2384296A1 EP 09751878 A EP09751878 A EP 09751878A EP 09751878 A EP09751878 A EP 09751878A EP 2384296 A1 EP2384296 A1 EP 2384296A1
Authority
EP
European Patent Office
Prior art keywords
optical radiation
vehicle window
image sensor
camera arrangement
radiation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP09751878A
Other languages
German (de)
French (fr)
Inventor
Michael Huelsen
Ulrich Seger
Matthias Karl
Annette Frederiksen
Roland Schmid
Werner Uhler
Norbert Hog
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of EP2384296A1 publication Critical patent/EP2384296A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/55—Specular reflectivity
    • G01N21/552—Attenuated total reflection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00—Cleaning of vehicles
    • B60S1/02—Cleaning windscreens, windows or optical devices
    • B60S1/04—Wipers or the like, e.g. scrapers
    • B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B60S1/0833—Optical rain sensor
    • B60S1/0844—Optical rain sensor including a camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/41—Refractivity; Phase-affecting properties, e.g. optical path length
    • G01N21/43—Refractivity; Phase-affecting properties, e.g. optical path length by measuring critical angle
    • G01N2021/435—Sensing drops on the contact surface
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00—Features of devices classified in G01N21/00
    • G01N2201/02—Mechanical
    • G01N2201/021—Special mounting in general
    • G01N2201/0216—Vehicle borne
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00—Features of devices classified in G01N21/00
    • G01N2201/06—Illumination; Optics
    • G01N2201/064—Stray light conditioning

Definitions

  • Camera arrangement for detecting a wheel condition of a vehicle window
  • the invention relates to a camera arrangement for detecting a wheel condition of a vehicle window.
  • a vehicle with this camera arrangement and a method for determining a state of the vehicle window are provided.
  • Camera arrangements for detecting a vehicle environment through a vehicle window of a vehicle, in particular a motor vehicle are used in particular in driver assistance systems, for example as part of a night vision system or as a warning system.
  • driver assistance systems for example as part of a night vision system or as a warning system.
  • camera arrangements are designed so that they can detect in particular the space in the direction of travel in front of the motor vehicle.
  • DE 10 2004 015 040 A1 shows such a camera arrangement for detecting a vehicle environment by means of a vehicle window which, in addition to a primary function such as night vision support and / or lane departure warning and / or traffic sign recognition and / or reversing aid, has a secondary function in the form of a rain sensor provides.
  • the camera arrangement has a radiation source, wherein optical radiation emitted by the radiation source is firstly coupled into the window pane and then decoupled, wherein the decoupled part of this optical radiation can be detected by an image sensor of a camera of the camera arrangement.
  • the radiation emitted by the radiation source becomes so coupled into the window that it is totally reflected in an untensioned state of the vehicle window in the interior of the vehicle window up to the place of Auskoppeins. Wetting of the pane by rainwater reduces the total reflected proportion of this coupled-in radiation. Based on the reduced in this way intensity by the
  • Radiation source emitted radiation can be determined by means of the camera assembly, the degree of wetting of the vehicle window. So that the radiation source does not interfere with a detection of a vehicle environment performed with the same image sensor, the image sensor is subdivided into a first subarea for detecting a vehicle environment and a second subarea for detecting a radiation radiated from the radiation source, wherein an overlap of these regions by the use of Aperture is prevented.
  • this camera arrangement for detecting a vehicle environment through a vehicle window is disclosed in DE 102 01 522 A1.
  • this camera arrangement comprises a secondary function, such as the detection of a visual obstruction, for example by raindrops on the vehicle window.
  • the camera arrangement has a camera that is focused on an outdoor area.
  • the visual obstruction is determined by measuring the blurring of an image acquired by means of an image sensor of the camera. In situations in which the vehicle environment contains too few contrasts, for example at night, it is possible to switch on a windscreen for a short time. Visual impairments are then detectable from the scattering of the illumination light. If a visual obstruction is detected, suitable measures can be taken, such as switching on a windshield wiper system or switching on a window heater.
  • measurements of the image sensor in the case of different illuminations with second optical radiation emitted by the radiation source are thus recorded and evaluated.
  • a first measurement with the radiation source switched on, ie with illumination by the second radiation, and a second measurement with the second radiation switched off or reduced in intensity can be recorded and the image signals of the image radiation can be recorded.
  • sensors are compared with each other.
  • the first optical radiation of the vehicle surroundings is additionally recorded, so that the image signals receive information of both radiations.
  • the disc state of a vehicle window is changed. If the vehicle window is illuminated by a radiation source with second optical radiation in a disc state changed in this way, this leads to a change in an image recorded with the image sensor, this image being less optical or not at all second with respect to an image Radiation was lit, contains additional information.
  • a pane state of the pane for example the strength of wetting of the vehicle window by rainwater.
  • the comparison of this image information can be done for example by an evaluation of the camera arrangement.
  • the disc state thus determined can be used for the initiation of measures, such as the involvement of a windshield wiper system.
  • both the first optical radiation and the second optical radiation can be detected jointly by means of at least one subarea of the image sensor.
  • both the first optical radiation and the second optical radiation can be detected together with the entire image sensor. The entire image sensor can thus be exploited for the detection of a vehicle environment as well as for the determination of a disk state.
  • the second optical radiation of the radiation source In order to ensure that the image information of the vehicle environment recorded with the image sensor is not disturbed by the second optical radiation of the radiation source, it is preferably not activated in every image acquisition cycle of the image sensor but, for example, only in every nth image acquisition cycle.
  • the frequency, the duration and / or the brightness of the illumination of the vehicle window by the second optical radiation can in particular be adapted to the situation, for example as a function of the situation be chosen from the external light conditions.
  • the radiation source can be activated more frequently than during the day to ensure a high image capture rate of a vehicle environment during the day.
  • Part of the image sensor in the absence of second radiation and a second portion of the image sensor is exposed to second optical radiation.
  • the radiation source can only be switched on when the exposure of the first subarea of the image sensor is completed.
  • the second subregion of the image sensor would be exposed together with first optical radiation and second optical radiation.
  • Such an image capture is particularly useful for such image sensors that allow a temporally offset exposure of pixels / pixels.
  • Fig. 1 shows a section through a camera arrangement of a first embodiment
  • FIG. 2 shows a section through a camera arrangement of a second embodiment.
  • FIG. 1 schematically shows a first embodiment of a camera arrangement 16 for detecting a window state of a vehicle window.
  • the camera assembly 16 includes a camera 2 with only one hinted
  • Camera housing 1 which is arranged in a vehicle interior of a vehicle not shown on a vehicle window 1, here a windshield.
  • the camera 2 comprises an image sensor 4 and a camera optics 12 arranged in front of the image sensor 4, here represented by a lens.
  • the image sensor 4 is formed on a semiconductor basis, in particular as a CMOS or
  • the camera arrangement 16 has an evaluation unit 10 for recording and evaluating the image signals S1.
  • the camera 2 is arranged such that a first optical radiation 6 generated by the vehicle surroundings through the vehicle window 1 and through the camera optics 12 from the image sensor
  • the focus of the camera optics 12 is preferably at infinity, so that the vehicle environment is sharply imaged on the image sensor 4 while ensuring a sufficient depth of field.
  • the camera arrangement 16 comprises a radiation source 3 for
  • the radiation source 3 has e.g. one or more LEDs and is arranged in or on the camera housing 1 1 such that at least a section A of the vehicle window 1 can be illuminated by the second optical radiation 7, but a direct illumination of the camera optics 12 and the image sensor 4 by the second optical Radiation 7 is prevented, for example, with a shield 13.
  • the illuminable with the radiation source 3 section A of the vehicle window 1 is in the detection range of the camera lens 12, so that a portion of the second optical radiation 7 via an illumination of the cutout A of the vehicle window 1 indirectly through the Bi-sensor 4 can be detected.
  • the vehicle window 1 is dirty, for example if there is a rain water drop 8 on the window surface 9 in the region of the cutout A, this contamination leads, in particular by scattering, reflection and / or refraction, to a changed beam path and / or an altered one
  • the image signals S1 output by the image sensor 4 in the state illuminated by the radiation source 3 are thus different from the image signals S1 recorded in a state of the vehicle window 1 by the vehicle window 1 not getting dirty and not passing through Rainwater is wetted.
  • the over- view omitted because of the representation of the scattered or reflected at interfaces portions of the second optical radiation.
  • the radiation source 3 is z. B. driven by the evaluation unit 10 by control signals S2.
  • at least two states of the radiation source 3 can be set, in which the radiation source 3 outputs different second radiation 7, i. with differences, in particular in intensity, but alternatively or additionally also in the spectral composition and / or angular distribution and / or polarity.
  • measurements are respectively taken with the camera 2 and their image signals S1 are recorded and evaluated by the evaluation unit 10.
  • the radiation source 3 can also be controlled by a further control unit by the control signals S2 and receive the evaluation unit corresponding signals for synchronization of this control unit;
  • the combination of the further control unit with the device carrying out the evaluation or evaluation corresponds to the evaluation unit 10 shown in FIGS. 1, 2.
  • the radiation source 3 may be a first measurement with active radiation source 3, i. with illuminated section A, and a second measurement without illumination of the section A, in particular with the radiation source 3 switched off.
  • the radiation source 3 is switched on for every n th image acquisition cycle, where n is a number> 1, preferably greater than 10, for the entire image acquisition cycle ie at least one frame is output.
  • the radiation source 3 is deactivated.
  • the image signal S1 of every nth image or frame comprises image information representing a superposition of first and second optical radiation 6, 7.
  • the remaining pictures include
  • the frequency, the brightness and / or the duration of the illumination of the vehicle window 1 by the second optical radiation 7 can be adjusted according to the situation. can be adjusted. For example, depending on the lighting conditions of the vehicle environment, the rate at which an image is recorded when the vehicle window 1 is illuminated by the second optical radiation 7 can be increased or decreased. Furthermore, several images can be recorded one after the other with the radiation source 3 activated. These measures are particularly advantageous in low light conditions, for example, at night, in which a lower frame rate of images that reproduce the vehicle environment without the interference of the second optical radiation 7, can be sought.
  • a change in the brightness of the radiation source 3 is advantageous in order to take into account a change in the brightness of the first optical radiation 6, for example in order to achieve a recognizable superposition of the first optical radiation 6 with the second optical radiation 7 for an advantageous evaluation, but an over-radiation to avoid.
  • the radiation source 3 is not activated over an entire imaging cycle, but only a period of time, causing a first portion of the image sensor 4 to be exposed with the first optical radiation 6 and the second optical radiation 7, and a second portion 7 is illuminated in the absence of second optical radiation.
  • the image sensor 4 is designed in this regard as an image sensor 4, in which
  • Pixels / pixels temporally offset exposed or read out Such a single image recorded with the image sensor 4 thus contains image information which is based both on the first optical radiation 6 in the absence of the second optical radiation 7 and on the first optical radiation 6 overlapping with the optical second radiation 7.
  • the image information that is not affected by the second optical radiation 7 can be evaluated for detecting a vehicle environment.
  • the other image information can be used to determine a slice state, for example as described above, by comparison with image information in which illumination of the vehicle window 1 is deactivated.
  • FIG. 2 shows a second embodiment of a camera arrangement 16 'according to the invention with a camera 2' for detecting a window state of a vehicle window 1 in a schematic representation.
  • the camera assembly 16 'according to the second embodiment corresponds to FIG.
  • Figure 1 shown first embodiment of the camera assembly 16 ', wherein in Only differences will be discussed below.
  • the second camera arrangement 16 ' in addition to the camera optics 12 on a camera add-on optics whose focus is in the region of the section A of the vehicle window 1, so that the section A is imaged sharply on the image sensor 4.
  • the additional camera optics comprises a concave mirror 14 and a deflection mirror 15.
  • the concave mirror 14 lies within the detection range of the camera optics 12.
  • the section A of the vehicle window 1 which can be illuminated by the radiation source 3 is imaged onto a second subregion 5b of the image sensor 4, the remaining image sensor 4 which forms a partial region 5a, can not be irradiated by the second optical radiation 7.
  • the second camera arrangement similar to the first camera arrangement may be designed such that the entire image sensor 4 is used for the detection of first optical radiation 6 and second optical radiation 7.
  • a focusing of the section A of the vehicle window 1 in particular allows the analysis of details on the vehicle window 1, for example the detection of scratches.
  • the image acquisition and the evaluation can be performed similar to the first embodiment of the camera assembly 16.
  • the additional camera optics can alternatively also be constructed from other optical elements or comprise further optical elements, for example also lenses or optical gratings.

Abstract

The invention relates to a camera arrangement (16, 16') for sensing a state of a vehicle window (1), at least comprising: a camera (2) including an image sensor (4) for sensing a first radiation (6) emitted by the surroundings of the vehicle and outputting image signals (S1); and a radiation source (3) for emitting a second optical radiation (7). The image sensor (4) can sense at least some of the emitted second optical radiation (7) in accordance with a state of the window. According to the invention, the camera arrangement (16) is designed such that a state of the vehicle window (1) can be determined from image signals (S1) output by the image sensor (4) in measurements in which the vehicle window (1) is differently illuminated using the second optical radiation (7). For this purpose, an evaluation unit (1), which determines a state of the vehicle window (1) from the image signals (S1) output by the image sensor (4) in the measurements, is preferably provided to record the image signals (S1) and determine the state of the window. Measurements can be taken especially while the radiation source (3) is switched on and off.

Description

Beschreibung description
Titeltitle
Kameraanordnung zur Erfassung eines Scheibenzustandes einer FahrzeugscheibeCamera arrangement for detecting a wheel condition of a vehicle window
Stand der TechnikState of the art
Die Erfindung betrifft eine Kameraanordnung zur Erfassung eines Scheibenzustandes einer Fahrzeugscheibe. Ergänzend sind ein Fahrzeug mit dieser Kame- raanordnung und ein Verfahren zum Ermitteln eines Zustande der Fahrzeugscheibe vorgesehen.The invention relates to a camera arrangement for detecting a wheel condition of a vehicle window. In addition, a vehicle with this camera arrangement and a method for determining a state of the vehicle window are provided.
Kameraanordnungen zur Erfassung einer Fahrzeugumgebung durch eine Fahrzeugscheibe eines Fahrzeuges, insbesondere eines Kraftfarzeuges, werden ins- besondere in Fahrerassistenzsystemen eingesetzt, beispielsweise im Rahmen eines Nachtsichtsystems oder als Warnsystem. Hierfür sind derartige Kameraanordnungen dazu ausgbildet, dass diese insbesondere den Raum in Fahrtrichtung vor dem Kraftfahrzeug erfassen können.Camera arrangements for detecting a vehicle environment through a vehicle window of a vehicle, in particular a motor vehicle, are used in particular in driver assistance systems, for example as part of a night vision system or as a warning system. For this purpose, such camera arrangements are designed so that they can detect in particular the space in the direction of travel in front of the motor vehicle.
Des Weiteren ist es bekannt, derartige Kameraanordnungen für Sekundärfunktionen zu verwenden, insbesondere für die Ermittlung eines Scheibenzustandes einer Fahrzeugscheibe einzusetzen. In der DE 10 2004 015 040 A1 ist eine derartige Kameraanordnung zur Erfassung einer Fahrzeugumgebung durch eine Fahrzeugscheibe gezeigt, die neben einer Primärfunktion, wie Nachtsichtunter- Stützung und/oder Spurverlassenswarnung und/oder Verkehrszeichenerkennung und/oder Rückfahrhilfe eine Sekundärfunktion in Form eines Regensensors zur Verfügung stellt. Hierfür weist die Kameraanordnung eine Strahlungsquelle auf, wobei von der Strahlungsquelle ausgegebene optische Strahlung in die Fensterscheibe zunächst ein und dann auskoppelbar ist, wobei der ausgekoppelte Teil dieser optischen Strahlung von einem Bildsensor einer Kamera der Kameraanordnung erfassbar ist. Die von der Strahlungsquelle ausgestrahlte Strahlung wird derart in die Fensterscheibe eingekoppelt, dass diese in einem unbentzten Zustand der Fahrzeugscheibe im Inneren der Fahrzeugscheibe bis zum Ort des Auskoppeins total reflektiert wird. Bei einer Benetzung der Scheibe durch Regenwasser reduziert sich der totalreflektierte Anteil dieser so eingekoppelten Strahlung. Anhand der auf dieser Weise reduzierten Intensität der durch dieFurthermore, it is known to use such camera arrangements for secondary functions, in particular to use for the determination of a window state of a vehicle window. DE 10 2004 015 040 A1 shows such a camera arrangement for detecting a vehicle environment by means of a vehicle window which, in addition to a primary function such as night vision support and / or lane departure warning and / or traffic sign recognition and / or reversing aid, has a secondary function in the form of a rain sensor provides. For this purpose, the camera arrangement has a radiation source, wherein optical radiation emitted by the radiation source is firstly coupled into the window pane and then decoupled, wherein the decoupled part of this optical radiation can be detected by an image sensor of a camera of the camera arrangement. The radiation emitted by the radiation source becomes so coupled into the window that it is totally reflected in an untensioned state of the vehicle window in the interior of the vehicle window up to the place of Auskoppeins. Wetting of the pane by rainwater reduces the total reflected proportion of this coupled-in radiation. Based on the reduced in this way intensity by the
Strahlungsquelle ausgestrahlten Strahlung lässt sich mittels der Kameraanordnung der Grad der Benetzung der Fahrzeugscheibe ermitteln. Damit die Strahlungsquelle eine mit demselben Bildsensor durchgeführte Erfassung einer Fahrzeugumgebung nicht stört, ist der Bildsensor in einen ersten Teilbereich für die Erfassung einer Fahrzeugumgebung und einem zweiten Teilbereich für die Erfassung einer von der Strahlungsquelle ausgestrahlten Strahlung unterteilt, wobei eine Überlappung dieser Bereiche durch den Einsatz einer Blende verhindert wird.Radiation source emitted radiation can be determined by means of the camera assembly, the degree of wetting of the vehicle window. So that the radiation source does not interfere with a detection of a vehicle environment performed with the same image sensor, the image sensor is subdivided into a first subarea for detecting a vehicle environment and a second subarea for detecting a radiation radiated from the radiation source, wherein an overlap of these regions by the use of Aperture is prevented.
Eine weitere Kameraaordnung zur Erfassung einer Fahrzeugumgebung durch eine Fahrzeugscheibe offenbart die DE 102 01 522 A1 . Neben einer Primärfunktion, wie die Erfassung von Objekten, umfasst diese Kameraanordnung eine Sekundärfunktion, wie die Erfassung einer Sichtbehinderung beispielsweise durch Regentropfen auf der Fahrzeugscheibe. Die Kameraanordnung weist eine Kame- ra auf, die auf einen Außenbereich fokussiert ist. Die Sichtbehinderung wird durch Messung der Unscharfe eines mittels eines Bildsensors der Kamera er- fassten Bildes ermittelt. In Situationen, in denen die Fahrzeugumgebung zu wenig Kontraste enthält, beispielsweise nachts, ist das kurzzeitige Einschalten einer Scheibenbeleuchtung möglich. Sichtbehinderungen sind dann aus der Streuung des Beleuchtungslichts detektierbar. Ist eine Sichtbehinderung detektiert, können geeignete Maßnahmen ergriffen werden, wie beispielsweise das Einschalten einer Scheibenwischanlage oder das Einschalten einer Scheibenheizung.Another camera arrangement for detecting a vehicle environment through a vehicle window is disclosed in DE 102 01 522 A1. In addition to a primary function, such as the detection of objects, this camera arrangement comprises a secondary function, such as the detection of a visual obstruction, for example by raindrops on the vehicle window. The camera arrangement has a camera that is focused on an outdoor area. The visual obstruction is determined by measuring the blurring of an image acquired by means of an image sensor of the camera. In situations in which the vehicle environment contains too few contrasts, for example at night, it is possible to switch on a windscreen for a short time. Visual impairments are then detectable from the scattering of the illumination light. If a visual obstruction is detected, suitable measures can be taken, such as switching on a windshield wiper system or switching on a window heater.
Offenbarung der ErfindungDisclosure of the invention
Erfindungsgemäß werden somit Messungen des Bildsensors bei unterschiedlichen Beleuchtungen mit von der Strahlungsquelle ausgegebener zweiter optischer Strahlung aufgenommen und ausgewertet. Insbesondere können eine erste Messung mit eingeschalteter Strahlungsquelle, d.h. mit Beleuchtung durch die zweite Strahlung, und eine zweite Messung mit ausgeschalteter oder in der Intensität reduzierter zweiter Strahlung aufgenommen und die Bildsignale des Bild- sensors miteinander verglichen werden. In beiden Messungen wird vorteilhafterweise die erste optische Strahlung der Fahrzeugumgebung ergänzend aufgenommen, so dass die Bildsignale Informationen beider Strahlungen erhalten.According to the invention, measurements of the image sensor in the case of different illuminations with second optical radiation emitted by the radiation source are thus recorded and evaluated. In particular, a first measurement with the radiation source switched on, ie with illumination by the second radiation, and a second measurement with the second radiation switched off or reduced in intensity can be recorded and the image signals of the image radiation can be recorded. sensors are compared with each other. In both measurements, advantageously, the first optical radiation of the vehicle surroundings is additionally recorded, so that the image signals receive information of both radiations.
Durch Beschädigungen, durch Verschmutzungen oder durch einen Belag, insbesondere durch eine Benetzung mit Regenwasser, wird der Scheibenzustand einer Fahrzeugscheibe verändert. Wird die Fahrzeugscheibe in einem derart veränderten Scheibenzustand durch eine Strahlungsquelle mit zweiter optischer Strahlung beleuchtet, führt dies zu einer Änderung eines mit dem Bildsensor auf- genommenen Bildes, wobei dieses Bild gegenüber einem Bild, bei dem die Fahrzeugscheibe weniger stark oder überhaupt nicht mit zweiter optischer Strahlung beleuchtet wurde, zusätzliche Informationen enthält. Insbesondere über einen Vergleich von im ersten Zustand bzw. der ersten Messung ausgegebenen Bildsignalen und im zweiten Zustand bzw. in der zweiten Messung ausgegebenen Bildsignale lässt sich ein Scheibenzustand der Scheibe ermitteln, beispielsweise die Stärke einer Benetzung der Fahrzeugscheibe durch Regenwasser. Der Vergleich dieser Bildinformationen kann beispielsweise durch eine Auswerteeinheit der Kameraanordnung erfolgen. Der so ermittelte Scheibenzustand kann für die Einleitung von Maßnahmen verwendet werden, beispielsweise die Einschaltung einer Scheibenwischeranlage.Due to damage, dirt or a coating, in particular by wetting with rainwater, the disc state of a vehicle window is changed. If the vehicle window is illuminated by a radiation source with second optical radiation in a disc state changed in this way, this leads to a change in an image recorded with the image sensor, this image being less optical or not at all second with respect to an image Radiation was lit, contains additional information. In particular via a comparison of image signals output in the first state or the first measurement and image signals output in the second state or in the second measurement, it is possible to determine a pane state of the pane, for example the strength of wetting of the vehicle window by rainwater. The comparison of this image information can be done for example by an evaluation of the camera arrangement. The disc state thus determined can be used for the initiation of measures, such as the involvement of a windshield wiper system.
Eine vorteilhafte Weiterbildung der Erfindung sieht vor, dass mittels zumindest eines Teilbereiches des Bildsensors gemeinsam sowohl die erste optische Strahlung als auch die zweite optische Strahlung erfassbar sind. Vorzugsweise ist mit dem gesamten Bildsensor gemeinsam sowohl die erste optische Strahlung als auch die zweite optische Strahlung erfassbar. Der gesamte Bildsensor kann damit für die Erfassung einer Fahrzeugumgebung als auch für die Ermittelung eines Scheibenzustandes ausgenutzt werden.An advantageous development of the invention provides that both the first optical radiation and the second optical radiation can be detected jointly by means of at least one subarea of the image sensor. Preferably, both the first optical radiation and the second optical radiation can be detected together with the entire image sensor. The entire image sensor can thus be exploited for the detection of a vehicle environment as well as for the determination of a disk state.
Um zu gewährleisten, dass die mit dem Bildsensor aufgenommenen Bildinformationen der Fahrzeugumgebung nicht durch die zweite optische Strahlung der Strahlungsquelle gestört sind, wird vorzugsweise nicht in jedem Bildaufnahmezyklus des Bildsensors aktiviert, sondern beispielsweise lediglich in jedem n-ten Bildaufnahmezyklus. Die Häufigkeit, die Dauer und/oder die Helligkeit der Be- leuchtung der Fahrzeugscheibe durch die zweite optische Strahlung kann insbesondere situationsabhängig angepasst werden, beispielsweise in Abhängigkeit von den äußeren Lichtverhältnissen gewählt sein. So kann nachts die Strahlungsquelle häufiger aktiviert werden als tagsüber, um tagsüber eine hohe Bilderfassungsrate einer Fahrzeugumgebung zu gewährleisten.In order to ensure that the image information of the vehicle environment recorded with the image sensor is not disturbed by the second optical radiation of the radiation source, it is preferably not activated in every image acquisition cycle of the image sensor but, for example, only in every nth image acquisition cycle. The frequency, the duration and / or the brightness of the illumination of the vehicle window by the second optical radiation can in particular be adapted to the situation, for example as a function of the situation be chosen from the external light conditions. Thus, at night, the radiation source can be activated more frequently than during the day to ensure a high image capture rate of a vehicle environment during the day.
Eine weitere vorteilhafte Weiterbildung der Erfindung sieht vor, dass ein ersterA further advantageous development of the invention provides that a first
Teilbereich des Bildsensors in Abwesenheit von zweiter Strahlung und ein zweiter Teilbereich des Bildsensors mit zweiter optischer Strahlung belichtet wird. Beispielsweise kann die Strahlungsquelle erst dann eingeschaltet werden, wenn die Belichtung des ersten Teilbereiches des Bildsensors abgeschlossen ist. Der zweite Teilbereich des Bildsensors würde mit erster optischer Strahlung und zweiter optischer Strahlung gemeinsam belichtet werden. Eine derartige Bilderfassung ist insbesondere für solche Bildsensoren verwendbar, die eine zeitlich versetzte Belichtung von Pixeln/Bildpunkten ermöglichen.Part of the image sensor in the absence of second radiation and a second portion of the image sensor is exposed to second optical radiation. For example, the radiation source can only be switched on when the exposure of the first subarea of the image sensor is completed. The second subregion of the image sensor would be exposed together with first optical radiation and second optical radiation. Such an image capture is particularly useful for such image sensors that allow a temporally offset exposure of pixels / pixels.
Kurze Beschreibung der ZeichnungenBrief description of the drawings
Fig. 1 zeigt einen Schnitt durch eine Kameraanordnung einer ersten Ausführungsform, undFig. 1 shows a section through a camera arrangement of a first embodiment, and
Fig. 2 zeigt einen Schnitt durch eine Kameraanordnung einer zweiten Aus- führungsform.2 shows a section through a camera arrangement of a second embodiment.
Beschreibung der AusführungsformenDescription of the embodiments
Gleiche oder einander entsprechend Bauteile sind in den Figuren mit denselben Bezugszeichen versehen.The same or corresponding components are provided in the figures with the same reference numerals.
Figur 1 zeigt schematisch eine erste Ausführungsform einer Kameraanordnung 16 zur Erfassung eines Scheibenzustandes einer Fahrzeugscheibe.FIG. 1 schematically shows a first embodiment of a camera arrangement 16 for detecting a window state of a vehicle window.
Die Kameraanordnung 16 umfasst eine Kamera 2 mit einem nur angedeutetenThe camera assembly 16 includes a camera 2 with only one hinted
Kameragehäuse 1 1 , die in einem Fahrzeuginnenraum eines nicht näher dargestellten Fahrzeuges an einer Fahrzeugscheibe 1 , hier einer Windschutzscheibe, angeordnet ist. Die Kamera 2 umfasst einen Bildsensor 4 und eine vor dem Bildsensor 4 angeordnete Kameraoptik 12, hier dargestellt durch eine Linse. Der Bildsensor 4 ist auf Halbleiterbasis ausgebildet, insbesondere als CMOS- oderCamera housing 1 1, which is arranged in a vehicle interior of a vehicle not shown on a vehicle window 1, here a windshield. The camera 2 comprises an image sensor 4 and a camera optics 12 arranged in front of the image sensor 4, here represented by a lens. The image sensor 4 is formed on a semiconductor basis, in particular as a CMOS or
CCD-Sensor, und gibt Bildsignale S1 aus. Weiterhin weist die Kameraanordnung 16 eine Auswerteeinheit 10 für die Aufnahme und Auswertung der Bildsignale S1 auf. Die Kamera 2 ist derart angeordnet, dass eine von der Fahrzeugumgebung erzeugte erste optische Strahlung 6 durch die Fahrzeugscheibe 1 und durch die Kameraoptik 12 von dem BildsensorCCD sensor, and outputs image signals S1. Furthermore, the camera arrangement 16 has an evaluation unit 10 for recording and evaluating the image signals S1. The camera 2 is arranged such that a first optical radiation 6 generated by the vehicle surroundings through the vehicle window 1 and through the camera optics 12 from the image sensor
4 erfassbar ist. Der Fokus der Kameraoptik 12 liegt vorzugsweise im Unendlichen, so dass die Fahrzeugumgebung unter Gewährleistung einer ausrechenden Schärfentiefe scharf auf dem Bildsensor 4 abgebildet wird.4 is detectable. The focus of the camera optics 12 is preferably at infinity, so that the vehicle environment is sharply imaged on the image sensor 4 while ensuring a sufficient depth of field.
Des Weiteren umfasst die Kameraanordnung 16 eine Strahlungsquelle 3 zumFurthermore, the camera arrangement 16 comprises a radiation source 3 for
Ausgeben einer zweiten optischen Strahlung 7. Die Strahlungsquelle 3 weist z.B. eine oder mehrere LEDs auf und ist derart im oder am Kameragehäuse 1 1 angeordnet, dass zumindest ein Ausschnitt A der Fahrzeugscheibe 1 durch die zweite optische Strahlung 7 beleuchtbar ist, aber eine direkte Beleuchtung der Kamera- optik 12 und des Bildsensors 4 durch die zweite optische Strahlung 7 verhindert ist, beispielsweise mit einem Abschirmelement 13. Der mit der Strahlungsquelle 3 beleuchtbare Ausschnitt A der Fahrzeugscheibe 1 liegt im Erfassungsbereich der Kameraoptik 12, so dass ein Teil der zweiten optischen Strahlung 7 über eine Beleuchtung des Ausschnittes A der Fahrzeugscheibe 1 indirekt durch den BiId- sensor 4 erfasssbar ist. In diesem Ausführungsbeispiel wird ein genügend großerOutputting a second optical radiation 7. The radiation source 3 has e.g. one or more LEDs and is arranged in or on the camera housing 1 1 such that at least a section A of the vehicle window 1 can be illuminated by the second optical radiation 7, but a direct illumination of the camera optics 12 and the image sensor 4 by the second optical Radiation 7 is prevented, for example, with a shield 13. The illuminable with the radiation source 3 section A of the vehicle window 1 is in the detection range of the camera lens 12, so that a portion of the second optical radiation 7 via an illumination of the cutout A of the vehicle window 1 indirectly through the Bi-sensor 4 can be detected. In this embodiment, a sufficiently large
Ausschnitt A der Fahrzeugscheibe 1 beleuchtet, so dass mittels des gesamten Bildsensors 4 gemeinsam sowohl die erste optische Strahlung 6 als auch ein Teil der zweiten optische Strahlung 7 erfassbar ist, wobei der Anteil der zweiten optischen Strahlung 7, der von dem Bildsensor 4 erfasst wird, von dem Zustand der äußeren bzw außenliegenden Scheibenoberfläche 9 abhängt.Section A of the vehicle window 1 illuminated, so that by means of the entire image sensor 4 together both the first optical radiation 6 and a part of the second optical radiation 7 can be detected, wherein the proportion of the second optical radiation 7, which is detected by the image sensor 4, depends on the state of the outer or outer disc surface 9.
Ist die Fahrzeugscheibe 1 verschmutzt, befindet sich beispielsweise ein Regenwassertropfen 8 auf der Scheibenoberfläche 9 im Bereich des Ausschnittes A, so führt diese Verschmutzung insbesondere durch Streuung, Reflektion und/oder Brechung, zu einem veränderten Strahlengang und/oder einem verändertenIf the vehicle window 1 is dirty, for example if there is a rain water drop 8 on the window surface 9 in the region of the cutout A, this contamination leads, in particular by scattering, reflection and / or refraction, to a changed beam path and / or an altered one
Spektrum der optischen Strahlung 7. Die von dem Bildsensor 4 ausgegebenen Bildsignale S1 im durch die Strahlungsquelle 3 beleuchteten Zustand unterscheiden sich damit von den Bildsignalen S1 , die in einem Zustand der Fahrzeugscheibe 1 aufgenommen wurden, indem die Fahrzeugscheibe 1 nicht ver- schmutzt und nicht durch Regenwasser benetzt ist. In der Figur wurde der Über- sicht wegen die Darstellung der gestreuten oder an Grenzflächen reflektierten Anteile der zweiten optischen Strahlung 7 weggelassen.Spectrum of the optical radiation 7. The image signals S1 output by the image sensor 4 in the state illuminated by the radiation source 3 are thus different from the image signals S1 recorded in a state of the vehicle window 1 by the vehicle window 1 not getting dirty and not passing through Rainwater is wetted. In the figure, the over- view omitted because of the representation of the scattered or reflected at interfaces portions of the second optical radiation.
Die Strahlungsquelle 3 wird z. B. von der Auswerteeinheit 10 durch Steuersignale S2 angesteuert. Hierbei können erfindungsgemäß insbesondere mindestens zwei Zustände der Strahlungsquelle 3 eingestellt werden, in denen die Strahlungsquelle 3 unterschiedliche zweite Strahlung 7 ausgibt, d.h. mit Unterschieden insbesondere in der Intensität, aber alternativ oder zusätzlich auch in der spektralen Zusammensetzung und/oder Winkelverteilung und/oder Polarität. In diesen zwei Zuständen werden jeweils Messungen mit der Kamera 2 durchgeführt und deren Bildsignale S1 von der Auswerteeinheit 10 aufgenommen und ausgewertet. Relevant hierbei ist die Zuordnung der gewonnen Bildsignale S1 zu den verschiedenen Messungen; hierbei kann die Strahlungsquelle 3 auch von einer weiteren Steuereinheit durch die Steuersignale S2 angesteuert werden und die Auswerteeinheit entsprechende Signale zur Synchronisation von dieser Steuereinheit erhalten; in diesem Fall entspricht die Kombination der weiteren Steuereinheit mit der die Auswertung bzw. Bewertung durchführenden Einrichtung der in Fig. 1 , 2 gezeigten Auswerteeinheit 10.The radiation source 3 is z. B. driven by the evaluation unit 10 by control signals S2. In this case, according to the invention, in particular at least two states of the radiation source 3 can be set, in which the radiation source 3 outputs different second radiation 7, i. with differences, in particular in intensity, but alternatively or additionally also in the spectral composition and / or angular distribution and / or polarity. In these two states, measurements are respectively taken with the camera 2 and their image signals S1 are recorded and evaluated by the evaluation unit 10. Relevant here is the assignment of the acquired image signals S1 to the various measurements; In this case, the radiation source 3 can also be controlled by a further control unit by the control signals S2 and receive the evaluation unit corresponding signals for synchronization of this control unit; In this case, the combination of the further control unit with the device carrying out the evaluation or evaluation corresponds to the evaluation unit 10 shown in FIGS. 1, 2.
Es kann insbesondere eine erste Messung mit aktiver Strahlungsquelle 3, d.h. mit beleuchtetem Ausschnitt A, und eine zweite Messung ohne Beleuchtung des Ausschnitts A, insbesondere mit ausgeschalteter Strahlungsquelle 3 durchgeführt werden. Für die erste Messung mit der Beleuchtung des Ausschnitts A der Fahrzeugscheibe 1 durch die zweite optische Strahlung 7 wird die Strahlungs- quelle 3 in jedem n-ten Bildaufnahmezyklus, wobei n eine Zahl > 1 ist, vorzugsweise größer 10 ist, für den gesamten Bildaufnahmezyklus eingeschaltet, d.h. es wird - mindestens - ein Frame ausgegeben. Bei den übrigen Bildaufnahmezyklen ist die Strahlungsquelle 3 deaktiviert. Somit umfasst das Bildsignal S1 von jedem n-ten Bild bzw. Frame Bildinformationen, die eine Überlagerung von erster und zweiter optischer Strahlung 6, 7 wiedergeben. Die übrigen Bilder umfassenIn particular, it may be a first measurement with active radiation source 3, i. with illuminated section A, and a second measurement without illumination of the section A, in particular with the radiation source 3 switched off. For the first measurement with the illumination of the section A of the vehicle window 1 by the second optical radiation 7, the radiation source 3 is switched on for every n th image acquisition cycle, where n is a number> 1, preferably greater than 10, for the entire image acquisition cycle ie at least one frame is output. In the other image acquisition cycles, the radiation source 3 is deactivated. Thus, the image signal S1 of every nth image or frame comprises image information representing a superposition of first and second optical radiation 6, 7. The remaining pictures include
Bildinformationen aus Bildsignalen S1 , die auf der ersten optischen Strahlung 6 in Abwesenheit von zweiter optischer Strahlung 7 beruhen, also ohne Störung durch die zweite optische Strahlung 7 eine Fahrzeugumgebung wiedergeben.Image information from image signals S1, which are based on the first optical radiation 6 in the absence of second optical radiation 7, ie reproduce a vehicle environment without interference by the second optical radiation 7.
Des Weiteren kann die Häufigkeit, die Helligkeit und/oder die Dauer der Beleuchtung der Fahrzeugscheibe 1 durch die zweite optische Strahlung 7 situationsab- hängig angepasst werden kann. So kann beispielsweise in Abhängigkeit der Lichtverhältnisse der Fahrzeugumgebung die Rate, mit der ein Bild bei durch die zweite optische Strahlung 7 beleuchteter Fahrzeugscheibe 1 aufgenommen wird, erhöht oder erniedrigt werden. Des Weiteren können mehrere Bilder hintereinan- der bei aktivierter Strahlungsquelle 3 aufgenommen werden. Diese Maßnahmen sind insbesondere vorteilhaft bei schlechten Lichtverhältnissen, beispielsweise nachts, bei denen eine geringere Bildrate von Bildern, die die Fahrzeugumgebung ohne die Störung durch die zweite optische Strahlung 7 wiedergeben, angestrebt werden kann. Eine Änderung der Helligkeit der Strahlungsquelle 3 ist vorteilhaft, um eine Änderung der Helligkeit von der ersten optischen Strahlung 6 zu berücksichtigen, beispielsweise um eine erkennbare Überlagerung der ersten optischen Strahlung 6 mit der zweiten optischen Strahlung 7 für eine vorteilhafte Auswertung zu erreichen, aber eine Überstrahlung zu vermeiden.Furthermore, the frequency, the brightness and / or the duration of the illumination of the vehicle window 1 by the second optical radiation 7 can be adjusted according to the situation. can be adjusted. For example, depending on the lighting conditions of the vehicle environment, the rate at which an image is recorded when the vehicle window 1 is illuminated by the second optical radiation 7 can be increased or decreased. Furthermore, several images can be recorded one after the other with the radiation source 3 activated. These measures are particularly advantageous in low light conditions, for example, at night, in which a lower frame rate of images that reproduce the vehicle environment without the interference of the second optical radiation 7, can be sought. A change in the brightness of the radiation source 3 is advantageous in order to take into account a change in the brightness of the first optical radiation 6, for example in order to achieve a recognizable superposition of the first optical radiation 6 with the second optical radiation 7 for an advantageous evaluation, but an over-radiation to avoid.
In einer alternativen Ausführungsform wird die Strahlungsquelle 3 nicht über einen gesamten Bildaufnahmezyklus aktiviert, sondern nur einen Zeitabschnitt, wodurch bewirkt wird, dass ein erster Teilbereich des Bildsensors 4 mit der ersten optischer Strahlung 6 und der zweiter optischer Strahlung 7 belichtet ist, und ein zweiter Teilbereich in Abwesenheit von zweiter optischer Strahlung 7 belich- tet ist. Der Bildsensor 4 ist diesbezüglich als Bildsensor 4 ausgebildet, bei demIn an alternative embodiment, the radiation source 3 is not activated over an entire imaging cycle, but only a period of time, causing a first portion of the image sensor 4 to be exposed with the first optical radiation 6 and the second optical radiation 7, and a second portion 7 is illuminated in the absence of second optical radiation. The image sensor 4 is designed in this regard as an image sensor 4, in which
Bildpunkte/Pixel zeitlich versetzt belichtet bzw ausgelesen werden. Ein solches mit dem Bildsensor 4 aufgenommenes einzelnes Bild enthält damit Bildinformationen, die sowohl auf erster optischer Strahlung 6 in Abwesenheit von zweiter optischer Strahlung 7 und von erster optischer Strahlung 6 überlappt mit optischer zweiter Strahlung 7 beruhen. Die Bildinformationen, die nicht durch die zweite optische Strahlung 7 beeinflusst sind, können für die Erfassung einer Fahrzeugumgebung ausgewertet werden. Die anderen Bildinformationen können für die Bestimmung eines Scheibenzutandes, beispielsweise wie oben beschrieben durch Vergleich mit Bildinformationen, bei denen eine Beleuchtung der Fahr- zeugscheibe 1 deaktiviert ist, bestimmt werden.Pixels / pixels temporally offset exposed or read out. Such a single image recorded with the image sensor 4 thus contains image information which is based both on the first optical radiation 6 in the absence of the second optical radiation 7 and on the first optical radiation 6 overlapping with the optical second radiation 7. The image information that is not affected by the second optical radiation 7 can be evaluated for detecting a vehicle environment. The other image information can be used to determine a slice state, for example as described above, by comparison with image information in which illumination of the vehicle window 1 is deactivated.
Figur 2 zeigt eine zweite Ausführungsform einer erfindungsgemäßen Kameraanordnung 16' mit einer Kamera 2' zur Erfassung eines Scheibenzustandes einer Fahrzeugscheibe 1 in einer schematischen Darstellung. In wesentlichen Punkten entspricht die Kameraanordnung 16' gemäß der zweiten Ausführungsform der inFIG. 2 shows a second embodiment of a camera arrangement 16 'according to the invention with a camera 2' for detecting a window state of a vehicle window 1 in a schematic representation. In essential points, the camera assembly 16 'according to the second embodiment corresponds to FIG
Figur 1 gezeigten ersten Ausführungsform der Kameraanordnung 16', wobei im Folgenden lediglich auf Unterschiede eingegangen wird. Im Gegensatz zur ersten Ausführungsform weist die zweite Kameraanordnung 16' neben der Kameraoptik 12 eine Kamerazusatzoptik auf, deren Fokus im Bereich des Ausschnitts A der Fahrzeugscheibe 1 liegt, so dass der Ausschnitt A scharf auf den Bildsensor 4 abgebildet wird. Die Kamerazusatzoptik umfasst einen Hohlspiegel 14 und einen Umlenkspiegel 15. Der Hohlspiegel 14 liegt im Erfassungsbereich der Kameraoptik 12. Des Weiteren wird der mit der Strahlungsquelle 3 beleuchtbare Ausschnitt A der Fahrzeugscheibe 1 auf einen zweiten Teilbereich 5b des Bildsensors 4 abgebildet, wobei der restliche Bildsensor 4, der einen Teilbereich 5a aus- bildet, nicht durch die zweite optische Strahlungen 7 bestrahlbar ist. Alternativ kann die zweite Kameraanordnung ähnlich der ersten Kameraanordnung derart ausgebildet sein, dass der gesamte Bildsensor 4 für die Erfassung von erster optischer Strahlung 6 und zweiter optischer Strahlung 7 verwendet wird. Eine Fo- kussierung des Ausschnitts A der Fahrzeugscheibe 1 ermöglicht insbesondere die Analyse von Details an der Fahrzeugscheibe 1 , beispielsweise die Erfassung von Kratzern. Die Bildaufnahme und die Auswertung kann ähnlich wie bei der ersten Ausführungsform der Kameraanordnung 16 duchgeführt werden. Die Kamerazusatzoptik kann alternativ auch aus anderen optischen Elementen aufgebaut sein oder weitere optische Elemente umfassen, beispielsweise auch Linsen oder optische Gitter. Figure 1 shown first embodiment of the camera assembly 16 ', wherein in Only differences will be discussed below. In contrast to the first embodiment, the second camera arrangement 16 'in addition to the camera optics 12 on a camera add-on optics whose focus is in the region of the section A of the vehicle window 1, so that the section A is imaged sharply on the image sensor 4. The additional camera optics comprises a concave mirror 14 and a deflection mirror 15. The concave mirror 14 lies within the detection range of the camera optics 12. Furthermore, the section A of the vehicle window 1 which can be illuminated by the radiation source 3 is imaged onto a second subregion 5b of the image sensor 4, the remaining image sensor 4 which forms a partial region 5a, can not be irradiated by the second optical radiation 7. Alternatively, the second camera arrangement similar to the first camera arrangement may be designed such that the entire image sensor 4 is used for the detection of first optical radiation 6 and second optical radiation 7. A focusing of the section A of the vehicle window 1 in particular allows the analysis of details on the vehicle window 1, for example the detection of scratches. The image acquisition and the evaluation can be performed similar to the first embodiment of the camera assembly 16. The additional camera optics can alternatively also be constructed from other optical elements or comprise further optical elements, for example also lenses or optical gratings.

Claims

Ansprüche claims
1 . Kameraanordnung (16, 16') zur Erfassung eines Scheibenzustandes einer Fahrzeugscheibe (1 ), mindestens aufweisend: eine Kamera (2, 2') mit einem Bildsensor (4) zur Erfassung einer von der Fahrzeugumgebung ausgegebenen ersten Strahlung (6) und zur Ausgabe von Bildsignalen (S1 ), und eine Strahlungsquelle (3) zum Ausgeben einer zweiten optischen Strahlung (7), wobei durch den Bildsensor (4) in Abhängigkeit von einem Scheibenzu- stand zumindest ein Teil der ausgegebenen zweiten optischen Strahlung (7) erfassbar ist, dadurch gekennzeichnet, dass die Kameraanordnung (16, 16') derartig eingerichtet ist, dass aus den Bildsignalen (S1 ), die von dem Bildsensor (4) in Messungen mit unterschiedlicher Beleuchtung der Fahrzeugscheibe (1 ) durch die zweite optische Strah- lung (7) ausgegeben werden, ein Scheibenzustand der Fahrzeugscheibe (1 ) bestimmbar ist.1 . A camera arrangement (16, 16 ') for detecting a wheel condition of a vehicle window (1), comprising at least: a camera (2, 2') with an image sensor (4) for detecting a first radiation (6) emitted by the vehicle surroundings and outputting Image signals (S1), and a radiation source (3) for outputting a second optical radiation (7), wherein at least part of the output second optical radiation (7) is detectable by the image sensor (4) as a function of a slice state in that the camera arrangement (16, 16 ') is set up such that from the image signals (S1) emitted by the image sensor (4) in measurements with different illumination of the vehicle window (1) by the second optical radiation (7). output, a disc state of the vehicle window (1) can be determined.
2. Kameraanordnung nach Anspruch 1 , dadurch gekennzeichnet, dass sie eine Auswerteeinheit (10) zur Aufnahme der Bildsignale (S1 ) und Ermittlung eines Scheibenzustandes aufweist, wobei die Auswerteeinheit (10) aus den Bildsignalen (S1 ), die von dem Bildsensor (4) in den Messungen mit unterschiedlicher Beleuchtung der Fahrzeugscheibe (1 ) durch die zweite optische Strahlung (7) ausgegeben werden, einen Scheibenzustand der Fahrzeugscheibe (1 ) bestimmt.2. A camera arrangement according to claim 1, characterized in that it comprises an evaluation unit (10) for receiving the image signals (S1) and determining a disk state, wherein the evaluation unit (10) from the image signals (S1) from the image sensor (4) are output in the measurements with different illumination of the vehicle window (1) through the second optical radiation (7), a disc state of the vehicle window (1) determined.
3. Kameraanordnung nach Anspruch 2, dadurch gekennzeichnet, dass die Auswerteeinheit (10) von dem Bildsensor (4) Bildsignale (S1 ) aus mindestens einer ersten Messung und einer zweiten Messung aufnimmt, bei denen die Strahlungsquelle (3) die zweite optische Strahlung mit unterschiedlicher Intensität und/oder unterschiedlicher spektraler Zusammensetzung und/oder unterschiedlicher Abstrahlcharakteristik und/oder unterschiedlicher Polarität ausgibt.3. Camera arrangement according to claim 2, characterized in that the evaluation unit (10) of the image sensor (4) receives image signals (S1) from at least a first measurement and a second measurement in which the radiation source (3) the second optical radiation with different Intensity and / or different spectral composition and / or outputs different emission characteristics and / or different polarity.
4. Kameraanordnung nach einem der vorherigen Ansprüche, dadurch gekenn- zeichnet, dass mittels zumindest eines Teilbereiches (5b) des Bildsensors4. Camera arrangement according to one of the preceding claims, characterized in that by means of at least a partial area (5b) of the image sensor
(4) gemeinsam sowohl die erste optische Strahlung (6) als auch die zweite optische Strahlung (7) erfassbar ist.(4) collectively both the first optical radiation (6) and the second optical radiation (7) can be detected.
5. Kameraanordnung nach einem der vorherigen Ansprüche, dadurch gekenn- zeichnet, dass diese derart eingerichtet ist, dass zumindest ein Teil der zweiten optischen Strahlung (7) vor dem Erfassen durch den Bildsensor (4) bereichsweise durch das Innere der Fahrzeugscheibe (1 ) geleitet wird.5. Camera arrangement according to one of the preceding claims, characterized in that it is set up such that at least a portion of the second optical radiation (7) before being detected by the image sensor (4) partially through the interior of the vehicle window (1) becomes.
6. Kameraanordnung nach einem der vorherigen Ansprüche, dadurch gekenn- zeichnet, dass die Strahlungsquelle (3) derart angeordnet ist, dass die zweite optische Strahlung (7) in einem derartigen Winkelbereich in die Fahrzeugscheibe (1 ) eingestrahlt wird, dass in einem unbenetzten Scheibenzustand innerhalb der Fahrzeugscheibe (1 ) zumindest ein Teil der zweiten optischen Strahlung (7) nicht totalreflektiert wird.6. Camera arrangement according to one of the preceding claims, characterized in that the radiation source (3) is arranged such that the second optical radiation (7) is irradiated in such an angular range in the vehicle window (1) that in an unwetted window state within the vehicle window (1) at least a part of the second optical radiation (7) is not totally reflected.
7. Kameraanordnung nach einem der vorherigen Ansprüche, wobei die Strahlungsquelle (3) derart angeordnet ist, dass die Fahrzeugscheibe (1 ) von einem Fahrzeuginnenraum aus mit zweiter optischer Strahlung (7) beleuchtbar ist.7. Camera arrangement according to one of the preceding claims, wherein the radiation source (3) is arranged such that the vehicle window (1) from a vehicle interior with second optical radiation (7) is illuminated.
8. Kameraanordnung nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass diese derart eingerichtet ist, dass in mindestens einem Bildaufnahmezyklus zumindest ein Teilbereich des Bildsensors (4) mit der ersten optischen Strahlung (6) in Abwesenheit der zweiten optischen Strahlung (7) und zeitlich dazu versetzt zumindest ein Teilbereich des Bildsensors (4) mit der ersten optischen Strahlung (6) und der zweiten optischen Strahlung (7) belichtet wird.8. Camera arrangement according to one of the preceding claims, characterized in that it is set up such that in at least one imaging cycle at least a portion of the image sensor (4) with the first optical radiation (6) in the absence of the second optical radiation (7) and in time to offset at least a portion of the image sensor (4) with the first optical radiation (6) and the second optical radiation (7) is exposed.
9. Kameraanordnung nach Anspruch 8, dadurch gekennzeichnet, dass in dem Bildaufnahmezyklus ein erster Teilbereich und ein zweiter Teilbereich des9. Camera arrangement according to claim 8, characterized in that in the image recording cycle, a first portion and a second portion of the
Bildsensors (4) ausgebildet sind zur zeitlich gegeneinander versetzten Be- lichtung, wobei der erste Teilbereich in Abwesenheit von der zweiten optischen Strahlung (7) und der zweite Teilbereich mit der zweiten optischen Strahlung (7) belichtet wird.Image sensor (4) are formed for temporally staggered Be In the absence of the second optical radiation (7) and the second partial region, the first partial region is exposed to the second optical radiation (7).
10. Kameraanordnung nach Anspruch 8, dadurch gekennzeichnet, dass in einem ersten Bildaufnahmezyklus der Bildsensor (4) in Abwesenheit von der zweiten optischen Strahlung (7) belichtet wird, und in einem zweiten Bildaufnahmezyklus der Bildsensor (4) mit der zweiten optischen Strahlung (7) belichtet wird.10. Camera arrangement according to claim 8, characterized in that in a first image acquisition cycle the image sensor (4) is exposed in the absence of the second optical radiation (7), and in a second image acquisition cycle the image sensor (4) with the second optical radiation (7 ) is exposed.
1 1 . Kameraanordnung nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass diese derart eingerichtet ist, dass die Häufigkeit, die Dauer und/oder die Helligkeit der Beleuchtung der Fahrzeugscheibe (1 ) durch die zweite optische Strahlung (7) situationsabhängig angepasst wird, insbeson- dere in Abhängigkeit von den Lichtverhältnissen der Fahrzeugumgebung.1 1. Camera arrangement according to one of the preceding claims, characterized in that it is set up such that the frequency, the duration and / or the brightness of the illumination of the vehicle window (1) by the second optical radiation (7) is adjusted depending on the situation, in particular Dependence on the lighting conditions of the vehicle environment.
12. Kameraanordnung nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass diese derart eingerichtet ist, dass zumindest ein mit zweiter optischer Strahlung (7) bestrahlbarer Ausschnitt (A) der Fahrzeugscheibe (1 ) scharf auf den Bildsensor (4) abbildbar ist.12. Camera arrangement according to one of the preceding claims, characterized in that it is arranged such that at least one with second optical radiation (7) can be irradiated cutout (A) of the vehicle window (1) sharply on the image sensor (4) can be imaged.
13. Kameraanordnung nach Anspruch 12, dadurch gekennzeichnet, dass diese neben einer Kameraoptik (12) eine Zusatzoptik aufweist, deren Fokus im Bereich des Ausschnitts (A) der Fahrzeugscheibe (1 ) liegt.13. Camera arrangement according to claim 12, characterized in that, in addition to a camera optics (12) has an additional optics whose focus is in the region of the section (A) of the vehicle window (1).
14. Fahrzeug mit einer Fahrzeugscheibe (1 ) und einer Kameraanordnung nach einem der vorherigen Ansprüche, wobei die Kameraanordnung an der Fahrzeugscheibe (1 ) angeordnet oder angebracht ist.14. Vehicle with a vehicle window (1) and a camera arrangement according to one of the preceding claims, wherein the camera arrangement on the vehicle window (1) is arranged or mounted.
15. Verfahren zum Ermitteln eines Zustande einer Fahrzeugscheibe, bei dem von einem Bildsensor (4) erste optische Strahlung (6) einer Fahrzeugumgebung durch eine Fahrzeugscheibe (1 ) hindurch erfasst wird, von einer Strahlungsquelle eine zweite optische Strahlung (7) derartig ausgegeben wird, dass durch den Bildsensor (4) in Abhängigkeit von einem Scheibenzustand zumindest ein Teil der ausgegebenen zweiten optischen15. A method for determining a state of a vehicle window, in which an image sensor (4) detects first optical radiation (6) of a vehicle environment through a vehicle window (1), from a radiation source a second optical radiation (7) is emitted in such a way, in that at least part of the second optical output emitted by the image sensor (4) is dependent on a disk state
Strahlung (7) erfassbar ist, dadurch gekennzeichnet, dass mindestens zwei Messungen des Bildsensors (4) mit unterschiedlicher Beleuchtung der Fahrzeugscheibe (1 ) durch die zweite optische Strahlung (7) durchgeführt werden, und aus den bei den Messungen ausgegebenen Bildsignalen (S1 ) des Bildsensors (4) ein Scheibenzustand der Fahrzeugscheibe (1 ) bestimmt wird. Radiation (7) is detectable characterized in that at least two measurements of the image sensor (4) with different illumination of the vehicle window (1) by the second optical radiation (7) are performed, and from the output during the measurements image signals (S1) of the image sensor (4) a disk state of Vehicle window (1) is determined.
EP09751878A 2009-01-02 2009-11-03 Camera arrangement for sensing a state of a vehicle window Withdrawn EP2384296A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102009000003A DE102009000003A1 (en) 2009-01-02 2009-01-02 Camera arrangement for detecting a wheel condition of a vehicle window
PCT/EP2009/064530 WO2010076066A1 (en) 2009-01-02 2009-11-03 Camera arrangement for sensing a state of a vehicle window

Publications (1)

Publication Number Publication Date
EP2384296A1 true EP2384296A1 (en) 2011-11-09

Family

ID=41566338

Family Applications (1)

Application Number Title Priority Date Filing Date
EP09751878A Withdrawn EP2384296A1 (en) 2009-01-02 2009-11-03 Camera arrangement for sensing a state of a vehicle window

Country Status (6)

Country Link
US (1) US20120026318A1 (en)
EP (1) EP2384296A1 (en)
KR (1) KR20110101177A (en)
CN (1) CN102271977B (en)
DE (1) DE102009000003A1 (en)
WO (1) WO2010076066A1 (en)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102472840B (en) 2009-07-06 2015-05-20 康蒂特米克微电子有限公司 Optical module for simultaneously focusing on two fields of view
DE102010028347A1 (en) * 2010-04-29 2011-11-03 Robert Bosch Gmbh Sensor arrangement on a motor vehicle
DE102010043479B4 (en) 2010-11-05 2019-03-07 Robert Bosch Gmbh Camera arrangement and method for operating a camera arrangement for a motor vehicle
JP5944405B2 (en) * 2010-11-30 2016-07-05 コンティ テミック マイクロエレクトロニック ゲゼルシャフト ミット ベシュレンクテル ハフツングＣｏｎｔｉ Ｔｅｍｉｃ ｍｉｃｒｏｅｌｅｃｔｒｏｎｉｃ ＧｍｂＨ Detection of raindrops on window glass by camera and lighting
DE102011003803A1 (en) * 2011-02-08 2012-08-09 Robert Bosch Gmbh Method and device for determining a clarity of a pane of a vehicle
DE102011103302A1 (en) 2011-06-03 2012-12-06 Conti Temic Microelectronic Gmbh Camera system for a vehicle
WO2012171737A1 (en) 2011-06-17 2012-12-20 Robert Bosch Gmbh Method and apparatus for identifying directional structures on a window of a vehicle
KR101332004B1 (en) * 2011-07-26 2013-11-25 주식회사 오토산업 Light Intensity Histogram Pattern Generation Apparatus using CMOS Image Sensor
JP5561333B2 (en) 2011-11-02 2014-07-30 株式会社リコー Image processing apparatus, imaging method, program, and vehicle
JP5761143B2 (en) 2011-11-02 2015-08-12 株式会社リコー Imaging unit, vehicle equipped with imaging unit
JP5633503B2 (en) * 2011-11-29 2014-12-03 株式会社リコー Image processing system, vehicle equipped with image processing system, image processing method and program
DE102011055928A1 (en) * 2011-12-01 2013-06-06 Conti Temic Microelectronic Gmbh Optical device e.g. stereo camera, for driver assistance system for detecting e.g. transport area lying ahead of vehicle, has concave mirror and deflecting prism arranged in optical path of near range radiation from near region
DE102011056051A1 (en) 2011-12-05 2013-06-06 Conti Temic Microelectronic Gmbh Method for evaluating image data of a vehicle camera taking into account information about rain
DE102011056690A1 (en) 2011-12-20 2013-06-20 Continental Automotive Gmbh Method and device for detecting moisture on a vehicle window
DE102012200991A1 (en) 2012-01-24 2013-07-25 Robert Bosch Gmbh Environment detecting device and associated method for determining the position and / or movement of an object
CN103376243B (en) * 2012-04-18 2015-10-28 原相科技股份有限公司 Rain brush control device, optics raindrop pick-up unit and detection method thereof
DE102012103873A1 (en) * 2012-05-03 2013-11-21 Conti Temic Microelectronic Gmbh Detecting raindrops on a glass by means of a camera and lighting
DE102013100292A1 (en) * 2013-01-11 2014-07-24 Conti Temic Microelectronic Gmbh Illumination for detecting raindrops on a pane by means of a camera
JP2014052364A (en) * 2012-08-09 2014-03-20 Ricoh Co Ltd Deposit detection device, equipment control system for mobile device, and mobile device
DE102013000751B4 (en) * 2013-01-17 2024-02-29 HELLA GmbH & Co. KGaA Sensor device for detecting moisture on a pane
DE102013225155A1 (en) 2013-12-06 2015-06-11 Conti Temic Microelectronic Gmbh Illumination for detecting raindrops on a pane by means of a camera
DE102013225156A1 (en) 2013-12-06 2015-06-11 Conti Temic Microelectronic Gmbh Illumination for detecting raindrops on a pane by means of a camera
US9395538B2 (en) * 2014-09-26 2016-07-19 Delphi Technologies, Inc. Vehicle imager assembly with localized window defogging
US9245333B1 (en) 2014-12-10 2016-01-26 Semiconductor Components Industries, Llc Systems and methods for detecting obstructions within the field-of-view of an image sensor
DE102015218500A1 (en) 2015-09-25 2017-03-30 Conti Temic Microelectronic Gmbh Illumination and camera-based detection of raindrops on a pane
KR101746531B1 (en) * 2016-10-19 2017-06-14 주식회사 오디텍 Vehicle rain sensor and vehicle wiper driving device
CN109455166A (en) * 2018-11-27 2019-03-12 江苏日盈电子股份有限公司 Camera cleaning system, mechanism and intelligent vehicle and its application
RU2741439C1 (en) * 2019-09-24 2021-01-26 Общество С Ограниченной Ответственностью "Аквафор" (Ооо "Аквафор") Device for membrane cleaning of liquid
JP7319597B2 (en) * 2020-09-23 2023-08-02 トヨタ自動車株式会社 Vehicle driving support device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10201522A1 (en) 2002-01-17 2003-07-31 Bosch Gmbh Robert Method and device for detecting visual impairments in image sensor systems
US8180099B2 (en) * 2002-07-16 2012-05-15 Trw Limited Rain detection apparatus and method
DE102004015040A1 (en) 2004-03-26 2005-10-13 Robert Bosch Gmbh Camera in a motor vehicle
DE102004037871B4 (en) * 2004-08-04 2006-10-12 Siemens Ag Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system
EP1777943B1 (en) * 2005-10-21 2008-01-02 C.R.F. Societa Consortile per Azioni Multifunctional optical sensor device for driving aids in motor-vehicles

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO2010076066A1 *

Also Published As

Publication number Publication date
CN102271977B (en) 2014-05-07
WO2010076066A1 (en) 2010-07-08
CN102271977A (en) 2011-12-07
KR20110101177A (en) 2011-09-15
US20120026318A1 (en) 2012-02-02
DE102009000003A1 (en) 2010-07-08

Similar Documents

Publication Publication Date Title
EP2384296A1 (en) Camera arrangement for sensing a state of a vehicle window
EP2384295B1 (en) Camera system and method for capturing the surroundings of a vehicle
EP2062777B1 (en) Optical module
EP2558336B1 (en) Method and device for assisting a driver while driving a vehicle by detecting weather-related visibility limitations
DE69817197T2 (en) HUMIDITY SENSOR AND WINDSHIELD FITTING DETECTOR
EP1506108B1 (en) Rain sensor
EP2646802A1 (en) Detection of raindrops on a pane by means of a camera and lighting
EP2879919B1 (en) Detection of rain drops on a plate by means of a camera and illumination
DE102010043479B4 (en) Camera arrangement and method for operating a camera arrangement for a motor vehicle
EP1303768B1 (en) Method for determining visibility
DE19749331A1 (en) Method of detecting objects on motor vehicle windscreen
DE102009000004A1 (en) Camera arrangement for a motor vehicle and motor vehicle with a camera arrangement
DE102006044786A1 (en) Camera system, method for operating a camera system and sensor device of a camera system
DE102012103873A1 (en) Detecting raindrops on a glass by means of a camera and lighting
DE102012200200A1 (en) Camera system, in particular for a vehicle
DE102014209197A1 (en) Apparatus and method for detecting precipitation for a motor vehicle
DE2932461A1 (en) METHOD FOR EVALUATING THE QUALITY OF THE WIPER BLADE / DISC SURFACE SYSTEM
DE102006055905B4 (en) Method for vehicle environment detection and device for environment detection in a motor vehicle
DE112009004830T5 (en) Spectrum measuring device for motion object
EP1498721A1 (en) Device for recognition of fog, especially for a vehicle
DE102019206370A1 (en) Exterior lighting device for a motor vehicle
DE3108234A1 (en) Method for assessing the quality of motor vehicle windows
WO2015081934A1 (en) Illumination for detecting raindrops on a pane by means of a camera
EP3733455B1 (en) View system for a vehicle
DE19950060A1 (en) Optoelectronic sensor device for a motor vehicle

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20110802

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO SE SI SK SM TR

DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20160601