WO2009118057A1 - Bildaufnahmesystem für ein fahrzeug, fahrzeug, steuereinrichtung und verfahren zur regelung eines bildsensors eines fahrzeugs - Google Patents

Bildaufnahmesystem für ein fahrzeug, fahrzeug, steuereinrichtung und verfahren zur regelung eines bildsensors eines fahrzeugs Download PDF

Info

Publication number
WO2009118057A1
WO2009118057A1 PCT/EP2008/065341 EP2008065341W WO2009118057A1 WO 2009118057 A1 WO2009118057 A1 WO 2009118057A1 EP 2008065341 W EP2008065341 W EP 2008065341W WO 2009118057 A1 WO2009118057 A1 WO 2009118057A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
image sensor
control device
signal
image
Prior art date
Application number
PCT/EP2008/065341
Other languages
English (en)
French (fr)
Inventor
Martin Rous
Original Assignee
Robert Bosch Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch Gmbh filed Critical Robert Bosch Gmbh
Priority to EP08873655A priority Critical patent/EP2258106A1/de
Publication of WO2009118057A1 publication Critical patent/WO2009118057A1/de

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/75—Circuitry for compensating brightness variation in the scene by influencing optical camera components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/302—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
    • B60R2300/402—Image calibration

Definitions

  • cameras in driver assistance systems are used to record objects in the exterior of the vehicle. This results in too long exposure times, the problem of motion blur, in particular to the edge of the image, since there is the lateral acceleration at large opening angles largest. To ensure good visibility of structures in z. For example, to ensure traffic signs through the image processing algorithms, the integration time is generally limited, thereby reducing the blurring of motion.
  • an image recording system which comprises an image sensor, a camera and means for noise reduction of the image signals generated by the image sensor.
  • the means for noise reduction comprise filter means which form a filter value of the images captured by the image sensor. Furthermore, control means for the
  • Filtering means are provided which control the number of images to be taken into account by the filter means for filtering, wherein for noise reduction, the number of images used for filtering is changed in dependence on a relative speed between the camera and a detected object.
  • the disadvantage of this solution is that the reduction of the movement
  • the reduction in noise also reduces the reduction in noise because fewer images are available.
  • the signal-to-noise ratio is reduced by reducing the integration time, and this also reduces the separation performance of image processing algorithms.
  • DE 102 13 917 A1 describes an image recording system with an image sensor and a processing unit, wherein the image sensor has a characteristic curve of the exposure sensitivity which can be set via the processing unit.
  • control parameters for the setting of this characteristic optimal control parameters for the future situation are to be determined in which the vehicle will be located.
  • Such a system can thus detect the entry of the vehicle into a tunnel in order to adjust the control parameters for future image acquisition as suitably as possible in changing light conditions.
  • At least one control parameter of the image sensor is set as a function of a driving dynamics signal.
  • the invention is based on the idea that the respective optimum settings of the image sensor or the camera depend not only on the exposure conditions, but also on different vehicle dynamics variables of the vehicle, in particular on the vehicle speed. According to the invention, a speed-adjusted parameterization is thus advantageously carried out.
  • the integration time of the Sensor corresponds to the exposure time.
  • the integration time can be increased at a low speed and thus a high degree of recognizability by the subsequent image processing algorithms can be made possible even in the dark or weak intensity of the incident light.
  • the integration time or an upper limit of the integration time is reduced. By reducing the integration time to higher vehicle speeds, the motion blur is reduced.
  • yaw rate or the steering angle possible because a higher yaw rate, i. Angular velocity around the vertical axis, usually leading to a higher motion blur.
  • the control device of the image recording system preferably takes the driving dynamics signal from an in-vehicle communication system, such as a vehicle.
  • B a data bus to which it is connected anyway.
  • the image sensor has at least one imager chip in CMOS or CCD technology.
  • at least one CMOS pixel with a highly dynamic range is provided, which has the advantage that it is sensitive over a wide range of brightness during the exposure. This makes it possible to process images with strong dynamics.
  • an aperture, the electrical gain, the black level, and / or the shape of the exposure sensitivity characteristic, ie, the output signal, are changed depending on an exposure.
  • a combined setting of several parameters can be made.
  • a change in the integration time can be advantageously combined with a variable aperture or aperture of the image sensor, wherein preferably a lower integration time can be compensated by a higher aperture.
  • the gain may increase toward higher speeds of the vehicle to compensate for the reduced integration time. Thus, too high or too low light absorption is prevented at measured exposure.
  • the shape of the characteristic curve can decrease in its compression toward higher speeds of the vehicle, preferably monotonically.
  • a “compression” is understood to mean that a strongly compressed characteristic flattens out more quickly, that is to say is less sensitive in the case of higher exposure, than a characteristic which is only slightly compressed, that is, sensitive over a relatively wide range of exposure.
  • Exposure is here understood as a measure of the intensity of the incident light: the exposure can be, in particular, the irradiance which indicates the intensity or the radiation power per area, or the illuminance as the photometric variable of the unit Lux, which takes into account the spectral sensitivity of the human eye ,
  • the change in the control parameters can in particular be monotonous with the change in the driving dynamics parameter, ie, for example, a monotonically decreasing with increasing driving speed integration time.
  • continuous functions can be used, in particular linear functions or staircase functions, ie with a stepwise change after exceeding certain threshold values.
  • a threshold for an upper limit of the speed and a lower limit of the speed is advantageous, since a reduction or increase in the integration time from certain values is no longer technically advantageous or even possibly meaningless.
  • FIG. 1 shows a block diagram of an image acquisition system according to the invention for a vehicle
  • FIG. 2 shows a diagram with a plurality of exposure sensitivity curves
  • FIG. 3 shows a driving scene with a vehicle according to the invention.
  • An image acquisition system 1 of a vehicle 12 is used in particular for a driver assistance function and comprises an image sensor 2 or camera 2 and a control device 3 for controlling the image sensor 2.
  • the image sensor 2 detects in its detection area 14 an outdoor scene around the vehicle 12, in particular in front of the vehicle 12, wherein it detects in particular a road and possibly objects on or next to the roadway.
  • the image sensor 2 has in known manner an imager Cip 2.1 with an array of pixels 11, which are formed in particular in CMOS or CCD technology, preferably in CMOS technology with highly dynamic sensitivity range. Furthermore, the image sensor 2 in a known aperture 13 or aperture with an adjustable aperture 13a on.
  • control parameters rp are stored in a memory 4, which are used to set the image sensor 2 and thus the pixels 11.
  • the control device 3 outputs control signals Srp to the image sensor 2.
  • the imager chip 2.1 or the entire image sensor 2 outputs output signals Sa to the control device 3, which forms image signals Bi therefrom and via a communication system 5, z.
  • an integration time Ti of the imager chip 2.1 and its pixels 11 an electrical amplification of the output signals Sa, an offset of the output signals, the aperture 13a and / or a shape of a characteristic of an exposure sensitivity of the image sensor 2 or its pixel 11 is provided.
  • the control device 3 furthermore receives at least one driving dynamics signal Sv, which describes a driving dynamics parameter v of the vehicle 12.
  • Sv a driving dynamics parameter
  • the z. B. is determined directly from a sensor 6 in the vehicle 12, z. B. the provided on a wheel shaft sensor 6, or even from an ABS control unit from measured Radf- numbers is determined as the reference speed.
  • a vehicle speed v it is also possible according to the invention for a vehicle speed v to be determined from the image signals Bi itself by a further control device, which in turn is used by the control device 3 as signal Sv.
  • the control device 3 of the image acquisition system 1 is set up such that the integration time Ti decreases monotonically toward higher speeds v of the vehicle 12.
  • the integration time Ti taking into account the imager chips 2.1 and the camera optics for a speed value of 60 km / h, the time of 40 ms are selected for 100 km / h 25 ms, for 120 km / h 20 ms, for 135 km / h 18 ms, for 160 km / h 15 ms and for 240 km / h 10 ms. In the intermediate areas, linear interpolation is used. For speeds higher than 240 km / h the integration time is kept constant at 10 ms, for speeds in the range of 0-60 km / h the integration time is constant 40 ms.
  • the aperture 13a of the image sensor 2 can basically be kept independent of the speed v. In principle, however, it is possible for the change in signal strength resulting from the variable integration time Ti to be modified by a change in another control parameter, for example, B. the diaphragm opening 13 a, be compensated.
  • the image acquisition system is configured such that the electrical gain monotonically increases toward higher speeds v of the vehicle 12.
  • control device 3 is set up so that the gain z. B. is linearly dependent on the speed v.
  • control device 3 of the image acquisition system 1 is set up in such a way that the shape of the characteristic curve decreases toward monotonically decreasing in its compression towards higher speeds of the vehicle.
  • FIG. 2 illustrates three curves of curves 8, 9, 10 respectively as a function of an ordinate-applied magnitude of an output signal Sa as a function of an illumination or illumination I plotted on the abscissa indicating an intensity or irradiance, ie a radiation power per area - chentician, or an illuminance as a photometric unit in Lux.
  • the curves have in known manner a plurality of interpolation points 7, between which they are linearly interpolated.
  • the support points of the characteristic curve 8 and 9 have a substantially logarithmic form, the characteristic curve 10 is linear.
  • the characteristic of the exposure sensitivity is greatly compressed via the control device 3, represented here by the characteristic curve 9.
  • the highly compressed characteristic curve 9 is transformed into a weakly compressed characteristic curve by continuous variation of the support points 7, represented here by characteristic curve 8 , convicted. Below a threshold value for the minimum speed v and above a threshold value for the maximum speed v, the shape of the characteristic curve 9 or 8 remains unchanged.

Abstract

Die Erfindung betrifft ein Bildaufnahmesystem (1) für ein Fahrzeug (12), das mindestens aufweist: einen Bildsensor (2) zum Erfassen einer Außenszene (14) außerhalb des Fahrzeugs (12) und zum Ausgeben von Bildsignalen (BS), eine Steuereinrichtung (3) zur Steuerung des Bildsensors (2) und Einstellung mindestens eines Regelparameters (rp) des Bildsensors (2). Erfindungsgemäß ist vorgesehen, dass die Steuereinrichtung (3) mindestens ein Fahrdynamik-Signal (Sv) aufnimmt, das eine Fahrdynamikgröße (v) des Fahrzeuges (12) beschreibt, und die Steuereinrichtung (3) mindestens einen Regelparameter (rp) des BiId- sensors (2) in Abhängigkeit von dem Fahrdynamik-Signal (Sv) einstellt. Weiterhin sind erfindungsgemäß ein Fahrzeug mit dem Bildaufnahmesystem und ein Verfahren zur Regelung des Bildsensors vorgesehen.

Description

Beschreibung
Titel
Bildaufnahmesystem für ein Fahrzeug, Fahrzeug, Steuereinrichtung und Verfahren zur Regelung eines Bildsensors eines Fahrzeugs
Stand der Technik
Kameras dienen in Fahrerassistenzsystemen unter anderem zur Erfassung von Objekten im Außenraum des Fahrzeugs. Hierbei entsteht bei zu langen Belichtungszeiten das Problem der Bewegungsunschärfe, insbesondere zum Bildrand hin, da dort die Querbeschleunigung bei großen Öffnungswinkeln am Größten ist. Um eine gute Erkennbarkeit von Strukturen in z. B. Verkehrszeichen durch die Bildverarbeitungsalgorithmen sicher zu stellen, wird in der Regel die Integrationszeit begrenzt und hierdurch die Bewegungs- unscharfe verringert.
Nachteilhaft an der Begrenzung der Integrationszeit ist jedoch insbesondere, dass hierdurch die maximale Entfernung der Erkennbarkeit von Strukturen bei Nacht eingeschränkt ist.
Aus der DE 10 2004 021 369 A1 ist ein Bildaufnahmesystem bekannt, welches einen Bildsensor, eine Kamera und Mittel für die Rauschreduzierung der von dem Bildsensor erzeugten Bildsignale umfasst. Die Mittel für die Rauschreduzierung umfassen Filtermittel, die einen Filterwert der von dem Bildsensor erfassten Bilder bilden. Des Weiteren sind Steuermittel für die
Filtermittel vorgesehen, die die Anzahl der von den Filtermitteln für eine Filterung zu berücksichtigen Bilder steuern, wobei zur Rauschreduzierung die Anzahl der zur Filterung verwendeten Bilder in Abhängigkeit einer Relativgeschwindigkeit zwischen der Kamera und einem erfassten Objekt geändert wird. Nachteil dieser Lösung ist allerdings, dass die Verringerung der Bewe- gungsunschärfe der Bilder auch die Reduzierung des Rauschens verringert, weil weniger Bilder zur Verfügung stehen. Generell verringert sich das Sig- nal-zu-Rausch-Verhältnis durch Reduzierung der Integrationszeit, und hierdurch verringert sich auch die Separationsleistung von Bildverarbeitungsal- gorithmen.
Die DE 102 13 917 A1 beschreibt ein Bildaufnahmesystem mit einem Bildsensor und einer Verarbeitungseinheit, wobei der Bildsensor eine über die Verarbeitungseinheit einstellbare Kennlinie der Belichtungsempfindlichkeit aufweist. Durch Extrapolation bereits ermittelter Regelparameter für die Einstellung dieser Kennlinie sollen optimale Regelparameter für die zukünftige Situation ermittelt werden, in der sich das Fahrzeug befinden wird. Ein derartiges System kann somit die Einfahrt des Fahrzeugs in einen Tunnel erkennen, um bei sich ändernden Lichtverhältnissen die Regelparameter für die zukünftige Bildaufnahme möglichst geeignet einzustellen.
Offenbarung der Erfindung
Erfindungsgemäß wird mindestens ein Regelparameter des Bildsensors in Abhängigkeit von einem Fahrdynamik-Signal eingestellt.
Der Erfindung liegt der Gedanke zugrunde, dass die jeweils optimalen Einstellungen des Bildsensors bzw. der Kamera nicht nur von den Belichtungsverhältnissen abhängen, sondern auch von verschiedenen Fahrdynamikgrö- ßen des Fahrzeugs, insbesondere von der Fahrzeuggeschwindigkeit. Erfindungsgemäß wird somit vorteilhafterweise eine geschwindigkeitsangepasste Parametrierung durchgeführt.
Dem liegt die Erkenntnis zugrunde, dass die Bewegungsunschärfe im Bild insbesondere durch die eigene Fahrzeugbewegung hervorgerufen wird und somit eine geschwindigkeitsangepasste Parametrierung eine jeweils geeignete Begrenzung der Integrationszeit ermöglicht. Die Integrationszeit des Sensors entspricht der Belichtungszeit. Erfindungsgemäß kann bei geringer Geschwindigkeit die Integrationszeit erhöht werden und somit auch bei Dunkelheit bzw. schwacher Intensität des einfallenden Lichts eine hohe Erkennbarkeit durch die nachfolgenden Bildverarbeitungsalgorithmen ermöglicht werden. Mit steigender Fahrzeuggeschwindigkeit wird die Integrationszeit oder eine obere Grenze der Integrationszeit verringert. Durch eine Reduzierung der Integrationszeit zu höheren Geschwindigkeiten des Fahrzeuges hin wird die Bewegungsunschärfe reduziert.
Erfindungsgemäß wird somit auch bei höheren Geschwindigkeiten eine gute Erkennung von Strukturen ermöglicht.
Neben der Einbeziehung eines Fahrzeug-Geschwindigkeitssignals ist weiterhin auch die Einbeziehung weiterer Fahrdynamikgrößen, z. B. der Gierrate oder auch des Lenkeinschlags möglich, da eine höhere Gierrate, d.h. Winkelgeschwindigkeit um die Hochachse, in der Regel zu einer höheren Bewegungsunschärfe führt.
Die Steuereinrichtung des Bildaufnahmesystems nimmt das Fahrdynamik- Signal vorzugsweise von einem fahrzeuginternen Kommunikationssystem wie z. B. einem Datenbus auf, an das sie ohnehin angeschlossen ist. Somit kann erfindungsgemäß ein zusätzlicher apparativer Aufwand vermieden oder zumindest gering gehalten werden.
Der Bildsensor weist insbesondere mindestens einen Imager-Chip in CMOS- oder CCD-Technik auf. Vorteilhafterweise ist zumindest ein CMOS-Pixel mit hochdynamischem Bereich vorgesehen, der den Vorteil aufweist, dass er über einen breiten Helligkeitsbereich während der Belichtung empfindlich ist. Dies ermöglicht es, Bilder mit starker Dynamik zu verarbeiten.
Erfindungsgemäß kann als Regelungsparameter des Bildsensors bzw. der Kamera insbesondere die Integrationszeit, alternativ oder zusätzlich hierzu auch eine Apertur bzw. Blendenöffnung, die elektrische Verstärkung (Gain), der Black-Level und/oder die Form der Kennlinie der Belichtungsempfindlichkeit, d.h. des Ausgangssignals in Abhängigkeit von einer Belichtung verändert werden.
Die Konfiguration in Abhängigkeit der Fahrdynamikgröße erfolgt hierbei vorteilhafterweise überlagernd der selbsttätigen Einstellung dieser Regelparameter durch z. B. eine Belichtungsmessung des Bildsensors.
Vorteilhafterweise kann insbesondere auch eine kombinierte Einstellung mehrerer Parameter vorgenommen werden. Eine Veränderung der Integrationszeit kann vorteilhafterweise mit einer veränderbaren Blende bzw. Blendenöffnung des Bildsensors kombiniert werden, wobei vorzugsweise eine geringere Integrationszeit durch eine höhere Blende ausgeglichen werden kann. Alternativ oder zusätzlich hierzu kann die Verstärkung zu höheren Geschwindigkeiten des Fahrzeugs hin zunehmen, um die verringerte Integrationszeit auszugleichen. Somit wird bei gemessener Belichtung eine zu hohe oder zu niedrige Lichtaufnahme verhindert.
Weiterhin kann die Form der Kennlinie zu höheren Geschwindigkeiten des Fahrzeugs hin in ihrer Komprimierung abnehmen, vorzugsweise monoton. Unter einer „Komprimierung" wird in diesem Zusammenhang verstanden, dass eine stark komprimierte Kennlinie schneller verflacht, d.h. bei höheren Belichtung unempfindlicher ist, als eine Kennlinie, die nur schwach kompri- miert ist, also über einen größeren Bereich der Belichtung empfindlich ist.
Unter Belichtung wird hierbei ein Maß für die Intensität des einfallenden Lichts verstanden: die Belichtung kann insbesondere die Bestrahlungsstärke sein, die die Intensität oder die Strahlungsleistung pro Fläche angibt, oder die Beleuchtungsstärke als photometrische Größe der Einheit Lux, die die spektrale Empfindlichkeit des menschlichen Auges berücksichtigt. Die Veränderung der Regelungsparameter kann insbesondere monoton mit der Änderung der Fahrdynamikgröße erfolgen, d.h. z. B. eine mit steigender Fahrgeschwindigkeit monoton abnehmende Integrationszeit. Hierbei können stetige Funktionen eingesetzt werden, insbesondere lineare Funktionen oder Treppenfunktionen, d.h. mit stufenweiser Änderung nach Überschreiten bestimmter Schwellenwerte. Weiterhin ist insbesondere ein Schwellenwert für eine obere Grenze der Geschwindigkeit und eine untere Grenze der Geschwindigkeit vorteilhaft, da eine Erniedrigung bzw. Erhöhung der Integrationszeit ab bestimmten Werten nicht mehr technisch vorteilhaft oder sogar gegebenenfalls nicht mehr sinnvoll ist.
Kurze Beschreibung der Zeichnungen
Fig. 1 zeigt ein Blockschaltbild eines erfindungsgemäßen Bildaufnahme- Systems für ein Fahrzeug,
Fig. 2 zeigt ein Diagramm mit mehreren Kennlinien der Belichtungsempfindlichkeit, und Fig. 3 eine Fahrszene mit einem erfindungsgemäßen Fahrzeug.
Ausführungsformen der Erfindung
Ein Bildaufnahmesystem 1 eines Fahrzeugs 12 dient insbesondere für eine Fahrerassistenzfunktion und umfasst einen Bildsensor 2 bzw. Kamera 2 und eine Steuereinrichtung 3 zur Steuerung des Bildsensors 2. Der Bildsensor 2 erfasst in seinem Erfassungsbereich 14 eine Außenszene um das Fahrzeug 12 herum, insbesondere vor dem Fahrzeug 12, wobei er insbesondere eine Fahrbahn und gegebenenfalls Objekte auf oder neben der Fahrbahn erfasst.
Der Bildsensor 2 weist in an sich bekannter Weise einen Imager-Cip 2.1 mit einer Array- Anordnung von Pixeln 11 auf, die insbesondere in CMOS- oder CCD-Technik ausgebildet sind, vorzugsweise in CMOS-Technik mit hochdynamischem Empfindlichkeitsbereich. Weiterhin weist der Bildsensor 2 in an sich bekannter Weise eine Blende 13 bzw. Apertur mit einer einstellbaren Blendenöffnung 13a auf.
In der Steuereinrichtung 3 sind in einem Speicher 4 Regelparameter rp ge- speichert, die zur Einstellung des Bildsensors 2 und somit der Pixel 11 dienen. Zur Einstellung gibt die Steuereinrichtung 3 Steuersignale Srp an den Bildsensor 2 aus. Der Imager-Chip 2.1 bzw. der gesamte Bildsensor 2 gibt Ausgangssignale Sa an die Steuereinrichtung 3 aus, die hieraus Bildsignale Bi bildet und über ein Kommunikationssystem 5, z. B. einen fahrzeuginternen Datenbus 5 wie z. B. den CAN-Bus oder einen Feldbus, oder auch ein Flex- ray- oder Ethernet-Kabel ausgibt.
Als Regelparameter rp sind eine Integrationszeit Ti des Imagerchips 2.1 bzw. seiner Pixel 11 , eine elektrische Verstärkung der Ausgangssignale Sa, ein Offset der Ausgangssignale, die Blendenöffnung 13a und/oder eine Form einer Kennlinie einer Belichtungsempfindlichkeit des Bildsensors 2 oder seines Pixels 11 vorgesehen.
Über das Kommunikationssystem 5 nimmt die Steuereinrichtung 3 weiterhin mindestens ein Fahrdynamik-Signal Sv auf, das eine Fahrdynamikgröße v des Fahrzeuges 12 beschreibt. Als Fahrdynamikgröße wird insbesondere die Fahrzeuggeschwindigkeit v herangezogen, die z. B. direkt von einem Sensor 6 im Fahrzeug 12 ermittelt wird, z. B. dem an einer Radwelle vorgesehenen Sensor 6, oder auch von einem ABS-Steuergerät aus gemessenen Raddreh- zahlen als Referenzgeschwindigkeit ermittelt wird. Weiterhin ist es erfindungsgemäß auch möglich, dass aus den Bildsignalen Bi selbst von einer weiteren Steuereinrichtung eine Fahrgeschwindigkeit v ermittelt wird und diese wiederum von der Steuereinrichtung 3 als Signal Sv herangezogen wird.
In einer ersten Ausführungsform ist die Steuereinrichtung 3 des Bildaufnahmesystems 1 so eingerichtet, dass die Integrationszeit Ti zu höheren Geschwindigkeiten v des Fahrzeugs 12 hin monoton abnimmt. Hierbei kann gemäß einer Ausführungsform z. B. die Integrationszeit Ti unter Berücksichtigung des Imagerchips 2.1 und der Kameraoptik für einen Geschwindigkeitswert von 60 km/h die Zeit von 40 ms gewählt werden, für 100 km/h 25 ms, für 120 km/h 20 ms, für 135 km/h 18 ms, für 160 km/h 15 ms und für 240 km/h 10 ms. In den Zwischenbereichen wird linear interpoliert. Für Geschwindigkeiten höher als 240 km/h wird die Integrationszeit bei 10 ms konstant belassen, für Geschwindigkeiten im Bereich von 0-60 km/h beträgt die Integrationszeit konstant 40 ms.
Die Blendenöffnung 13a des Bildsensors 2 kann grundsätzlich unabhängig von der Geschwindigkeit v gehalten werden. Es kann grundsätzlich jedoch die durch die variable Integrationszeit Ti entstehende Änderung der Signalstärke durch eine Änderung eines anderen Regelparameters, z. B. der Blen- denöffnung 13a, ausgeglichen werden.
In einer zweiten Ausführungsform ist das Bildaufnahmesystem so eingerichtet, dass die elektrische Verstärkung zu höheren Geschwindigkeiten v des Fahrzeugs 12 hin monoton zunimmt.
In dieser Ausführungsform ist die Steuereinrichtung 3 so eingerichtet, dass die Verstärkung z. B. linear abhängig von der Geschwindigkeit v ist.
In einer dritten Ausführungsform ist die Steuereinrichtung 3 des Bildaufnah- mesystems 1 so eingerichtet, dass die Form der Kennlinie zu höheren Geschwindigkeiten des Fahrzeugs hin in ihrer Komprimierung monoton abnehmend schwächer wird.
Fig. 2 stellt drei Kurven von Kennlinien 8, 9, 10 jeweils als Funktion eines auf der Ordinate aufgetragenen Betrags eines Ausgangssignals Sa in Abhängigkeit einer auf der Abszisse aufgetragenen Belichtung bzw. Illumination I, die eine Intensität bzw. Bestrahlungsstärke, d.h. eine Strahlungsleistung pro Flä- cheneinheit, oder eine Beleuchtungsstärke als photometrische Einheit in Lux. Die Kennlinien weisen in an sich bekannter Weise mehrere Stützpunkte 7 auf, zwischen denen sie linear interpoliert sind. Die Stützpunkte der Kennlinie 8 und 9 weisen dabei eine im Wesentlichen logarithmische Form auf, die Kennlinie 10 ist linear.
Für niedrige Geschwindigkeiten v ist über die Steuereinrichtung 3 die Kennlinie der Belichtungsempfindlichkeit stark komprimiert, hier dargestellt durch die Kennlinie 9. Für höhere Geschwindigkeiten v wird die stark komprimierte Kennlinie 9 über kontinuierliche Veränderung der Stützpunkte 7 in eine schwach komprimierte Kennlinie, hier dargestellt durch Kennlinie 8, überführt. Unterhalb eines Schwellenwertes für die minimale Geschwindigkeit v und oberhalb eines Schwellenwertes für die maximale Geschwindigkeit v bleibt die Form der Kennlinie 9 bzw. 8 unverändert.
Zur technischen Umsetzung eines Pixels mit einer konfigurierbaren Kennlinie wird exemplarisch auf die Druckschrift US 6,348,681 B1 verwiesen.

Claims

Ansprüche
1. Bildaufnahmesystem (1 ) für ein Fahrzeug (12), das mindestens aufweist: einen Bildsensor (2) zum Erfassen einer Außenszene (14) außerhalb des Fahrzeugs (12) und zum Ausgeben von Ausgangssignalen (Sa), eine Steuereinrichtung (3) zur Steuerung des Bildsensors (2) und Ein- Stellung mindestens eines Regelparameters (rp) des Bildsensors (2), dadurch gekennzeichnet, dass die Steuereinrichtung (3) mindestens ein Fahrdynamik-Signal (Sv) aufnimmt, das eine Fahrdynamikgröße (v) des Fahrzeuges (12) beschreibt, und die Steuereinrichtung (3) mindestens einen Regelparameter (rp) des
Bildsensors (2), insbesondere eine obere Grenze mindestens eines Regelparameters (rp) des Bildsensors (2), in Abhängigkeit von dem Fahrdynamik-Signal (Sv) einstellt.
2. Bildaufnahmesystem nach Anspruch 1 , dadurch gekennzeichnet, dass das Fahrdynamik-Signal (Sv) ein Messsignal des Fahrzeugs (12) o- der ein aus ein oder mehreren Messsignalen des Fahrzeugs (12) ermitteltes Referenzsignal ist.
3. Bildaufnahmesystem nach Anspruch 1 , dadurch gekennzeichnet, dass der Bildsensor (2) mehrere Pixel (11 ), insbesondere CMOS- oder CCD-Pixel aufweist, deren Regelparameter (rp) von der Steuereinrichtung (3) einstellbar sind.
4. Bildaufnahmesystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der zumindest eine Regelparameter (rp) eine Integrationszeit, eine elektrische Verstärkung, ein Offset, eine Blendenöffnung (13a) und/oder eine Form einer Kennlinie (8, 9, 10) einer Belichtungsempfindlichkeit des Bildsensors (2) oder eines Pixels (11 ) des Bildsensors (2) ist.
5. Bildaufnahmesystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass ein von der Steuereinrichtung (3) aufgenommenes Fahrdynamik-Signal ein Geschwindigkeits-Signal (Sv) ist, das eine Fahrzeug-Geschwindigkeit (v) des Fahrzeuges (12) beschreibt.
6. Bildaufnahmesystem nach Anspruch 5, dadurch gekennzeichnet, dass das Geschwindigkeits-Signal (Sv) aus einer Messung an einer Radwelle oder als ABS-Referenzgeschwindkeit aus gemessenen Raddrehzahlen ermittelt wird.
7. Bildaufnahmesystem nach Anspruch 5 oder 6, dadurch gekennzeichnet, dass die Steuereinrichtung (3) so eingerichtet ist, dass eine Integrationszeit oder Belichtungszeit zu höheren Geschwindigkeiten (v) des Fahrzeugs (12) hin abnimmt, vorzugsweise monoton abnimmt.
8. Bildaufnahmesystem nach einem der Ansprüche 5 bis 7, dadurch gekennzeichnet, dass die Steuereinrichtung (3) so eingerichtet ist, dass die Form einer Kennlinie (8, 9, 10) der Belichtungsempfindlichkeit des Bildsensors (2) zu höheren Geschwindigkeiten (v) des Fahrzeugs (12) hin in ihrer Komprimierung schwächer wird, vorzugsweise monoton abnehmend schwächer.
9. Bildaufnahmesystem nach einem der Ansprüche 5 bis 8, dadurch gekennzeichnet, dass die Steuereinrichtung (3) so eingerichtet ist, dass eine elektrische Verstärkung eines Ausgangssignals (Sa) des Bildsensors (2) zu höheren Geschwindigkeiten (v) des Fahrzeugs (12) hin zunimmt, vorzugsweise monoton zunimmt. l O. Bildaufnahmesystem nach einem der Ansprüche 5 bis 9, dadurch gekennzeichnet, dass die Steuereinrichtung (3) so eingerichtet ist, dass eine Blendenöffnung (13a) des Bildsensors (2) zu höheren Geschwin- digkeiten (v) des Fahrzeugs (12) hin zunimmt.
11. Bildaufnahmesystem nach einem der Ansprüche 5 bis 10, dadurch gekennzeichnet, dass mindestens ein erster und zweiter Regelparameter (rp) aufeinander abgestimmt geändert werden, so dass eine Änderung der Signalstärke des Ausgangssignals (Sa) aufgrund der
Änderung des ersten Regelparameters, insbesondere der Integrationszeit, durch eine Änderung des zweiten Regelparameters, z. B. der Blendenöffnung und/oder Verstärkung und/oder Kennlinienform, ganz oder teilweise ausgeglichen wird.
12. Bildaufnahmesystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass ein von der Steuereinrichtung (3) aufgenommenes Fahrdynamik-Signal eine gemessene oder ermittelte Gierrate (ω) verwendet wird.
13. Fahrzeug (12) mit einem Bildaufnahmesystem (1 ) nach einem der vorherigen Ansprüche, wobei das Bildaufnahmesystem (1 ) eine Außenszene (14) außerhalb des Fahrzeugs (12) aufnimmt.
14. Fahrzeug (12) nach Anspruch 13, dadurch gekennzeichnet, dass die
Steuereinrichtung (3) das Fahrdynamik-Signal (Sv) von einem Sensor (6) oder einer weiteren Steuereinrichtung des Fahrzeuges (12) über en fahrzeuginternes Kommunikationssystem (5), insbesondere einen Datenbus (5), aufnimmt.
15. Steuereinrichtung (3) für ein Fahrzeug (12), die mindestens aufweist: eine erste Schnittstelle zum Empfang von Ausgangssignalen (5a) ei- nes Bildsensors (2) zum Erfassen einer Außenszene (14) außerhalb des Fahrzeugs (12), eine zweite Schnittstelle zur Steuerung des Bildsensors (2) und Einstellung mindestens eines Regelparameters (rp) des Bildsensors (2), dadurch gekennzeichnet, dass die Steuereinrichtung (3) mindestens ein Fahrdynamik-Signal (Sv) aufnimmt, das eine Fahrdynamikgröße (v) des Fahrzeuges (12) beschreibt, und die Steuereinrichtung (3) mindestens einen Regelparameter (rp) des Bildsensors (2), insbesondere eine obere Grenze mindestens eines Regelparameters (rp) des Bildsensors (2), in Abhängigkeit von dem
Fahrdynamik-Signal (Sv) einstellt.
16. Verfahren zur Regelung eines Bildsensors (1 ) eines Fahrzeugs (12), bei dem mindestens ein Regelparameter (rp) des Bildsensors (2) in Abhängigkeit von mindestens einem Fahrdynamik-Signal (Sv) des
Fahrzeugs eingestellt wird.
17. Verfahren nach Anspruch 16, dadurch gekennzeichnet, dass der Regelparameter (rp) ausgewählt wird aus der Gruppe, die aufweist: eine Belichtungszeit, eine elektrische Verstärkung, einen Offset, eine
Blendenöffnung (13a) und/oder eine Form einer Kennlinie (8, 9, 10) einer Belichtungsempfindlichkeit des Bildsensors (2) oder eines Pixels (11 ) des Bildsensors (2).
18. Verfahren nach Anspruch 16 oder 17, dadurch gekennzeichnet, dass das Fahrdynamik-Signal (Sv) ein die Fahrzeuggeschwindigkeit (v) beschreibendes Geschwindigkeitssignal (Sv) und/oder ein die Gierrate (ω) beschreibendes Signal ist.
PCT/EP2008/065341 2008-03-26 2008-11-12 Bildaufnahmesystem für ein fahrzeug, fahrzeug, steuereinrichtung und verfahren zur regelung eines bildsensors eines fahrzeugs WO2009118057A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP08873655A EP2258106A1 (de) 2008-03-26 2008-11-12 Bildaufnahmesystem für ein fahrzeug, fahrzeug, steuereinrichtung und verfahren zur regelung eines bildsensors eines fahrzeugs

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102008000819.2 2008-03-26
DE102008000819.2A DE102008000819B4 (de) 2008-03-26 2008-03-26 Steuereinrichtung zur Steuerung eines Bildsensors, Bildaufnahmesystem und Verfahren zur Regelung eines Bildsensors eines Fahrzeugs

Publications (1)

Publication Number Publication Date
WO2009118057A1 true WO2009118057A1 (de) 2009-10-01

Family

ID=40386168

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2008/065341 WO2009118057A1 (de) 2008-03-26 2008-11-12 Bildaufnahmesystem für ein fahrzeug, fahrzeug, steuereinrichtung und verfahren zur regelung eines bildsensors eines fahrzeugs

Country Status (3)

Country Link
EP (1) EP2258106A1 (de)
DE (1) DE102008000819B4 (de)
WO (1) WO2009118057A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5737306B2 (ja) 2013-01-23 2015-06-17 株式会社デンソー 露出制御装置
DE102015012611A1 (de) 2015-09-29 2017-03-30 Daimler Ag Sichtverbesserungssystem für ein Kraftfahrzeug

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1066060A (ja) 1996-08-13 1998-03-06 Nissan Diesel Motor Co Ltd 車両用撮像装置
JP2001008195A (ja) 1999-06-24 2001-01-12 Mitsubishi Motors Corp 車両後方監視装置
US6348681B1 (en) 2000-06-05 2002-02-19 National Semiconductor Corporation Method and circuit for setting breakpoints for active pixel sensor cell to achieve piecewise linear transfer function
DE10213917A1 (de) 2002-03-28 2003-10-23 Bosch Gmbh Robert Verfahren und Vorrichtung zur Regelung eines Bildsensors
JP2004032528A (ja) 2002-06-27 2004-01-29 Nissan Motor Co Ltd 画像認識装置
WO2004068850A1 (de) 2003-01-17 2004-08-12 Robert Bosch Gmbh Verfahren zur einstellung eines bildsensors
EP1515547A2 (de) 2003-09-13 2005-03-16 Hella KGaA Hueck & Co. Optoelektronische Überwachungseinrichtung für Kraftfahrzeuge
DE102004021369A1 (de) 2004-04-30 2005-11-17 Robert Bosch Gmbh Bildaufnahmesystem
JP2007052114A (ja) 2005-08-16 2007-03-01 Fujifilm Corp 撮影装置、撮影コントローラ、および撮影システム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1066060A (ja) 1996-08-13 1998-03-06 Nissan Diesel Motor Co Ltd 車両用撮像装置
JP2001008195A (ja) 1999-06-24 2001-01-12 Mitsubishi Motors Corp 車両後方監視装置
US6348681B1 (en) 2000-06-05 2002-02-19 National Semiconductor Corporation Method and circuit for setting breakpoints for active pixel sensor cell to achieve piecewise linear transfer function
DE10213917A1 (de) 2002-03-28 2003-10-23 Bosch Gmbh Robert Verfahren und Vorrichtung zur Regelung eines Bildsensors
JP2004032528A (ja) 2002-06-27 2004-01-29 Nissan Motor Co Ltd 画像認識装置
WO2004068850A1 (de) 2003-01-17 2004-08-12 Robert Bosch Gmbh Verfahren zur einstellung eines bildsensors
EP1515547A2 (de) 2003-09-13 2005-03-16 Hella KGaA Hueck & Co. Optoelektronische Überwachungseinrichtung für Kraftfahrzeuge
DE102004021369A1 (de) 2004-04-30 2005-11-17 Robert Bosch Gmbh Bildaufnahmesystem
JP2007052114A (ja) 2005-08-16 2007-03-01 Fujifilm Corp 撮影装置、撮影コントローラ、および撮影システム

Also Published As

Publication number Publication date
DE102008000819A1 (de) 2009-10-01
EP2258106A1 (de) 2010-12-08
DE102008000819B4 (de) 2018-12-27

Similar Documents

Publication Publication Date Title
EP1910129B1 (de) Bildaufnahmesystem
EP2517177B1 (de) Verfahren zur bestimmung der relativbewegung mittels einer hdr-kamera
DE102016218843A1 (de) Bilderzeugungspixel mit hohem Dynamikumfang mit verbesserter Auslesung
DE202011005102U1 (de) Optische Sensorsysteme für Automotive Anwendung
DE102016218838A1 (de) Bilderzeugungspixel mit hohem Dynamikumfang mit verbesserter Auslesung
DE102013100327A1 (de) Fahrzeugfahrtumgebungserkennungsvorrichtung
DE102013115000A1 (de) Blendungsminderung für dynamischen Rückspiegel
DE102013012810A1 (de) Verfahren zum Aktivieren und Deaktivieren einer Bildkorrekturfunktion, Kamerasystem und Kraftfahrzeug
DE102011105628A1 (de) System und Verfahren zur Unterstützung der Sicht eines Fahrers
DE102008063121A1 (de) Belichtungssteuervorrichtung und Belichtungssteuerprogramm für elektronische Fahrzeugkamera
DE112020002319T5 (de) Bilderkennungsvorrichtung und bilderkennungsverfahren
DE112018002395T5 (de) Optischer sensor und elektronische vorrichtung
EP3291172A1 (de) Verfahren zur ermittlung von ergebnisbilddaten
DE102006055905A1 (de) Verfahren zur Fahrzeugumfelderkennung und Vorrichtung zur Umfelderkennung in einem Kraftfahrzeug
WO2006067005A1 (de) Vorrichtung und verfahren zur beeinflussung des auf einen bildsensor auftreffenden lichts
DE102006014504B3 (de) Bilderfassungssystem für Kraft- und Schienenfahrzeuge sowie Verfahren zur elektronischen Bilderfassung
DE102004010908B4 (de) Bildaufnahmevorrichtung und Bildaufnahmeverfahren
DE102008000819B4 (de) Steuereinrichtung zur Steuerung eines Bildsensors, Bildaufnahmesystem und Verfahren zur Regelung eines Bildsensors eines Fahrzeugs
EP3645343B1 (de) Kameravorrichtung sowie verfahren zur umgebungsangepassten erfassung eines umgebungsbereichs eines fahrzeugs
DE102005004513A1 (de) Detektion von Niederschlägen auf Oberflächen, insbesondere auf der Oberfläche der Windschutzscheibe eines Kraftfahrzeuges
EP3677019B1 (de) Verfahren und vorrichtung zur vorhersehbaren belichtungssteuerung zumindest einer ersten fahrzeugkamera
EP1654867B1 (de) Verfahren und vorrichtung zur belichtungssteuerung für eine kamera
WO2003066375A1 (de) Einrichtung zur automatischen einstellung der leuchtdichte des von einer rückwärtigen beleuchtungseinrichtung eines fahrzeugs ausgesandten lichtbündels
EP1515547B1 (de) Optoelektronische Überwachungseinrichtung für Kraftfahrzeuge
DE102014110663A1 (de) Verfahren zum Betreiben eines Kamerasystems eines Kraftfahrzeugs, Fahrerassistenzsystem und Kraftfahrzeug

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 08873655

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2008873655

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2008873655

Country of ref document: EP