DE10016184A1 - Car night vision system eliminates blurred images prevents eye strain - Google Patents

Car night vision system eliminates blurred images prevents eye strain

Info

Publication number
DE10016184A1
DE10016184A1 DE10016184A DE10016184A DE10016184A1 DE 10016184 A1 DE10016184 A1 DE 10016184A1 DE 10016184 A DE10016184 A DE 10016184A DE 10016184 A DE10016184 A DE 10016184A DE 10016184 A1 DE10016184 A1 DE 10016184A1
Authority
DE
Germany
Prior art keywords
image
data
camera
screen
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE10016184A
Other languages
German (de)
Other versions
DE10016184C2 (en
Inventor
Ulrich Fruebis
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE10016184A priority Critical patent/DE10016184C2/en
Publication of DE10016184A1 publication Critical patent/DE10016184A1/en
Application granted granted Critical
Publication of DE10016184C2 publication Critical patent/DE10016184C2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0038—Engine compartment
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

The car night vision system has a camera (16) with rotating transparent rain wiper disc (26) and image processor (20) which stores images and uses background pixel contrast comparison to select the sharpest picture received in a time frame for projection (22) on the windscreen (24).

Description

Die Erfindung betrifft eine Vorrichtung zur Anzeige der Umgebung eines Fahrzeuges.The invention relates to a device for displaying the Environment of a vehicle.

Ein spezieller Typ einer Vorrichtung zur Anzeige der Um­ gebung eines Fahrzeugs sind sogenannte Nachtsichtgeräte, welche unter anderem Restlichtverstärker oder Infrarot­ lichtkameras aufweisen.A special type of device for displaying the order vehicle are so-called night vision devices, which among other things residual light amplifier or infrared have light cameras.

Ein Nachtsichtgerät für Kraftfahrzeuge ist beispielsweise aus EP 0 707 424 A1 bekannt. Bei diesem Nachtsichtgerät wird die Umgebung des Fahrzeugs mit einer Strahlungs­ quelle einer Wellenlänge im unsichtbaren Bereich beleuch­ tet und das zurückgeworfene Licht wird mit einer Kamera oder Bildauswertevorrichtung erfaßt. Um eine Blendung der Kamera oder Bildauswertevorrichtung durch ein entgegen­ kommendes Fahrzeug zu verhindern, ist gemäß dieser Schrift vorgesehen, bei der zeilenweisen Verstärkung der Bilddaten auf frühere Verstärkungsfaktoren zurückzugrei­ fen, wobei der Verstärkungsfaktor sowohl aus einem frühe­ ren Bild oder einer früheren Zeile gewonnen werden soll.A night vision device for motor vehicles is, for example known from EP 0 707 424 A1. With this night vision device the area around the vehicle with a radiation source of a wavelength in the invisible range tet and the reflected light is with a camera or image evaluation device. To dazzle the Camera or image evaluation device by a counter Preventing an incoming vehicle is according to this Scripture provided in the line-by-line reinforcement of the Access image data to previous gain factors fen, the gain factor from both an early ren image or an earlier line.

Bei dem aus EP 0 577 501 A1 bekannten Infrarotnachtsicht­ gerät für Kraftfahrzeuge ist vorgesehen, eine Beleuch­ tungsquelle zu verwenden, welche lediglich einen bestimm­ ten Frequenzbereich verwendet, wobei eine Blendung durch ein entgegenkommendes Fahrzeug dadurch verhindert werden soll, daß eine Vielzahl von Frequenzen verwendet wird und gegebenenfalls bei Begegnung zweier Fahrzeuge mit gleicher Frequenz bei einem der Fahrzeuge die Frequenz gewechselt wird.In the infrared night vision known from EP 0 577 501 A1 Device for motor vehicles is provided with lighting to use source that only a certain th frequency range used, with a glare from this prevents an oncoming vehicle  is intended to use a variety of frequencies and if necessary when two vehicles meet same frequency for one of the vehicles the frequency is changed.

Ferner ist aus US 5 729 016 A1 ein Nachtsichtgerät be­ kannt, welches sich durch ungekühlte Strahlungsdetektoren auszeichnet. Eine Beleuchtungsquelle ist für dieses Nachtsichtgerät, welches die Sicht auch bei Rauch, Nebel oder Regen verbessern soll, nicht erforderlich.Furthermore, a night vision device is known from US Pat. No. 5,729,016 A1 knows what is due to uncooled radiation detectors distinguished. An illumination source is for this Night vision device, which also gives visibility in smoke, fog or to improve rain is not necessary.

Ein weiteres Nachtsichtgerät für Kraftfahrzeuge ist aus EP 0 686 865 A1 bekannt. Dieses Nachtsichtgerät weist einen Infrarotsensor auf, dessen Signale in einem Video­ prozessor aufgearbeitet werden. Die aufgearbeiteten Daten werden über eine Projektionseinrichtung in das Sichtfeld des Fahrers eingeblendet, so daß dieser gleichzeitig die sich zeigende Umgebung und das mittels des Infrarot­ sensors ermittelte Umgebungsbild betrachten kann. Der Videoprozessor ist dabei so eingestellt, daß sich die sichtbaren und die mittels des Videoprozessors darge­ stellten Objekte deckungsgleich überlagern. Der Video­ prozessor kann mit einer Bildauswertevorrichtung versehen sein, welche lediglich sogenannte "warme" Objekte wie Menschen und Tiere zur Anzeige bringt. Eine dieser Vorrichtung vergleichbare Vorrichtung zur Verbesserung der Sichtverhältnisse in einem Kraftfahrzeug ist ferner aus DE 40 32 927 C2 bekannt.Another night vision device for motor vehicles is out EP 0 686 865 A1 is known. This night vision device points an infrared sensor whose signals are in a video processor to be processed. The processed data are in the field of view via a projection device of the driver is displayed, so that this at the same time showing environment and that by means of the infrared sensors can view the surrounding image. The Video processor is set so that the visible and the Darge by means of the video processor superimposed objects. The video processor can be provided with an image evaluation device be, which only so-called "warm" objects like Brings people and animals to the display. One of these Device comparable device for improvement the visibility in a motor vehicle is also known from DE 40 32 927 C2.

Den genannten Nachtsichtgeräten ist gemeinsam, daß sie eine Optik erfordern, welche nicht durch Niederschläge gestört ist. Bei regennasser Optik oder anderen Strahlung streuenden Objekten im Strahlengang würden die genannten Nachtsichtgeräte nicht funktionieren oder lediglich undeutliche Bilder liefern.The night vision devices mentioned have in common that they require optics that are not caused by precipitation is disturbed. With rain-soaked optics or other radiation  scattering objects in the beam path would be the aforementioned Night vision devices don't work or just provide blurry images.

Der Erfindung liegt die Aufgabe zugrunde, die Bildquali­ tät von Nachtsichtgeräten für Fahrzeuge mit einfachen Mitteln zu verbessern.The invention has for its object the image quality night vision devices for vehicles with simple Means to improve.

Die Lösung dieser Aufgabe erfolgt erfindungsgemäß mit den Merkmalen der Ansprüche 1 bzw. 12.This object is achieved according to the invention with the Features of claims 1 and 12 respectively.

Gemäß der Erfindung ist vorgesehen, daß die Bildauswerte­ vorrichtung einen Bilddatenspeicher und eine Bewertungs­ vorrichtung aufweist, welche feststellt, ob Bilddaten für den Bildschirm ein scharfes oder ein unscharfes, insbe­ sondere regenunscharfes Bild repräsentieren. Die Bildauswertevorrichtung ist so ausgebildet, daß sie bei der Erzeugung der Bilddaten die Daten der Bewertungsvorrichtung berücksichtigt.According to the invention it is provided that the image evaluations device an image data memory and an evaluation has device which determines whether image data for the screen a sharp or a blurred, esp represent special rain-blurred image. The Image evaluation device is designed so that it at the generation of the image data Assessment device considered.

Vorzugsweise werden innerhalb vorgegebener Zeitfenster nur die schärfsten Bilder an den Bildschirm weitergeleitet. Gemäß einer dazu alternativen bevorzugten Ausführungsform werden einzelne Bildabschnitte oder ganze Bilder, für die nur Bilddatensatzabschnitte vorliegen, die unscharfe aktuelle Bilder repräsentieren, durch entsprechende frühere oder nachberechnete Bildabschnitte ersetzt. Nachberechnen heißt in diesem Fall, daß beispielsweise geprüft wird, in welchem Umfang der überwiegende Teil eines Bildes gegenüber einem früheren Bild verschoben oder gedreht worden ist, und daß ein so ermittelter Verschiebe- und/oder Drehfaktor auf einen Bilddatensatzabschnitt eines früheren scharfen Bildes angewendet wird, um ein scharfes Bild zu erhalten. Dieses Bild ist zwar kein aktuelles Abbild der Umgebung aber eine vernünftige, gut begründete Annahme für die Umgebung. Da Fahrzeuge in der Regel in Fahrt sind, sind entsprechende, die Änderung der Respektive berücksichtigende Rechenprogramme zur ausschnittsweisen oder kompletten Nachberechnung empfehlenswert.Preferably within a given time window only the sharpest pictures on the screen forwarded. According to an alternative preferred Embodiment are single image sections or whole Images for which only image data record sections are available that represent blurry current images, by corresponding previous or recalculated image sections replaced. In this case, recalculation means that for example, the extent to which the predominant part of a picture compared to an earlier one Image has been moved or rotated, and that such a determined displacement and / or rotation factor to one Image record section of an earlier sharp image  is applied to obtain a sharp image. This Image is not a current image of the environment, however a reasonable, well-founded assumption for the Surroundings. Since vehicles are usually in motion corresponding, the change of respect computer programs to take into account or complete recalculation is recommended.

Mit der Erfindung wird erreicht, daß für den Fahrer eines Fahrzeugs auch dann scharfe Bilder wahrnehmbar sind, wenn ohne die erfindungsgemäße Vorrichtung lediglich ein ver­ schwommenes Bild wahrnehmbar wäre. Dadurch wird erreicht, daß der Fahrer weniger schnell ermüdet, weil seinen Augen der permanente Wechsel zwischen scharfen und unscharfen Bildern erspart bleibt. Darüber hinaus ist es z. B. möglich, mit der erfindungsgemäßen Vorrichtung mit einer höheren Bildfrequenz zu arbeiten, als dem menschlichen Auge wahrzunehmen möglich ist. Dadurch lassen sich unscharfe Bilder ausschneiden, ohne daß tatsächlich ein wahrnehmbarer Informationsverlust eintritt. Die erfindungsgemäße Vorrichtung trägt dadurch zur Verkehrssicherheit bei.With the invention it is achieved that one for the driver Sharp images are noticeable even if the vehicle without the device according to the invention only a ver would be perceptible. This ensures that the driver tired less quickly because of his eyes the permanent change between sharp and unsharp Images are spared. In addition, it is e.g. B. possible with the device according to the invention with a higher frame rate than human Perception of the eye is possible. This allows cut out blurry images without actually noticeable loss of information occurs. The The device according to the invention thereby contributes to Road safety at.

Vorzugsweise wird die Erfindung mit einem Bildschirm ver­ wendet, der als sogenannter "Combiner" ausgebildet ist und sowohl eine Durchsicht auf eine hinter dem Bildschirm liegende Umgebung als auch die Darstellung von Bilddaten erlaubt, wobei die Bilddaten ein mit der erfindungsgemäßen Vorrichtung erzeugtes Umgebungsbild repräsentieren. Dadurch kann der Fahrer eines Fahrzeuges die durch die erfindungsgemäße Vorrichtung bereit gestellten klaren Bilder nutzen, ohne auf den unmittelbaren optischen Eindruck verzichten zu müssen.Preferably, the invention is ver with a screen turns, which is designed as a so-called "combiner" and both a look at one behind the screen lying environment as well as the display of image data allowed, the image data one with the Environment image generated device according to the invention represent. This allows the driver of a vehicle ready by the device according to the invention  put clear images without using the to have to give up an immediate visual impression.

Zur Ermittlung, ob ein Bild ein scharfes oder ein un­ scharfes Bild darstellt, weist die Bildauswertevorrichtung eine Bildpunktvergleichsvorrichtung auf. Dieser Bildpunktver­ gleichsvorrichtung liegt der Gedanke zugrunde, daß mit der Kamera aufzunehmende Objekte im wesentlichen Flächen eines einheitlichen Farb- oder Graubereiches sind und eine scharfe Kante aufweisen, mit der sie sich vom Hintergrund abheben. Benachbarte Bildpunkte (Pixel) liegen nach der für das erfindungsgemäße Verfahren und die Vorrichtung getroffenen Annahme daher entweder in einem engen Toleranzbereich oder weisen einen großen Farb- oder Grauwertabstand auf. Ist der Farb- oder Grauabstand allerdings gering, liegt eine Unschärfe vor und ein solche Bildpunkte aufweisendes Bild wird innerhalb eines vorgegebenen Zeitfensters nur zur Anzeige gebracht, wenn anstelle dieses Bildes nur Bilder mit noch mehr unscharfen Punkten zur Verfügung stehen.To determine whether an image is sharp or un represents a sharp image, the Image evaluation device a Pixel comparison device on. This pixel ver equal device is based on the idea that with Objects to be recorded on the camera essentially in areas of a uniform color or gray area are and have a sharp edge with which they stand out from the Stand out background. Adjacent pixels lie after that for the method and the device therefore assumed either in a narrow tolerance range or have a large one Color or gray value difference on. Is the color or Gray distance, however, is small, there is a blur and becomes such an image having pixels only for display within a specified time window brought if instead of this picture only pictures with still more fuzzy points are available.

Besonders geeignet ist die Bildpunktvergleichsvorrichtung für Nachtsichtgeräte von Fahrzeugen zur Verkehrsraumüber­ wachung, da bei einer solchen Überwachung stets Objekte im Bild zur Verfügung stehen, seien es Fahrzeuge, Bauwerke oder andere Hindernisse, die sich im allgemeinen gut von der Umgebung absetzen.The pixel comparison device is particularly suitable for night vision devices from vehicles to the traffic area guard, because with such monitoring there are always objects available in the picture, be it vehicles, Buildings or other obstacles in general set yourself apart from the surroundings.

Der Begriff Nachtsichtgerät bezeichnet im Sinne der Erfindung nicht nur Geräte zur Verbesserung eines angezeigten Bildes bei Dunkelheit sondern auch bei sonstigen ungünstigen Sichtverhältnissen, insbesondere Regen und Nebel. Weitere vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den Unteransprüchen sowie aus der Beschreibung im Zusammenhang mit den Zeichnungen.The term night vision device denotes in the sense of Invention not just devices to improve one displayed image in the dark but also in  other unfavorable visibility conditions, in particular Rain and fog. Further advantageous configurations and Further developments of the invention result from the Subclaims and from the description in Connection with the drawings.

Es zeigen:Show it:

Fig. 1 einen Pkw mit einer erfindungsgemäßen Vorrichtung zur Anzeige der Umgebung des Pkw, Fig. 1 shows a passenger car with an inventive device for displaying the vicinity of the car,

Fig. 2 ein scharfes schwarzweiß Bild eines Kraftfahrzeuges mit 64 Bildpunkten, Fig. 2 is a sharp black and white image of a motor vehicle, having 64 pixels,

Fig. 3 ein bereichsweise in Folge Nebel unscharfes Bild, Figure 3 is a partially blurred image resulted in fog.,

Fig. 4 ein aufgrund eines Regentropfens auf einem Kamera­ objektiv bereichsweise unscharfes Bild und Fig. 4 is an objectively blurred area due to a raindrop on a camera and

Fig. 5 ein zur Anzeige gebrachtes scharfes Bild. Fig. 5 is a sharp image displayed.

Die in Fig. 1 gezeigte Vorrichtung 10 zur Anzeige der Um­ gebung eines Fahrzeugs 12 weist eine hinter einem Kühler­ grill 14 angeordnete Kamera 16 auf. Diese Kamera 16 ist über eine Datenleitung 18 mit einer Bildauswertevorrichtung 20 verbunden. Von dieser Bildauswertevorrichtung 20 werden die über die Datenleitung 18 übermittelten Kameradaten in Bilddaten umgewandelt, die von einem Projektor 22 auf die als Bildschirm fungierende Windschutzscheibe 24 projiziert werden. Eine vor der Kamera 16 angeordnete, schnell rotierende durchsichtige Scheibe 26 verhindert, daß sich im Strahlengang der Optik der Kamera 16 Wassertropfen oder andere Partikel niederschlagen, welche die Bildübertragung stören könnten.The device 10 shown in FIG. 1 for displaying the order of a vehicle 12 has a grill 16 arranged behind a radiator 14 . This camera 16 is connected to an image evaluation device 20 via a data line 18 . From this image evaluation device 20 , the camera data transmitted via the data line 18 are converted into image data which are projected by a projector 22 onto the windshield 24 functioning as a screen. A rapidly rotating transparent disk 26 arranged in front of the camera 16 prevents water drops or other particles from depositing in the beam path of the optics of the camera 16 , which could interfere with the image transmission.

Anhand der Fig. 2 bis 5 ist erläutert, nach welchem Verfahren in der Bildauswertevorrichtung ein von der Kamera 16 erfaßtes Bild der Umgebung des Fahrzeuges 12 behandelt wird.Referring to Figs. 2 to 5 explained in the method by which the image evaluation apparatus in an image captured by the camera 16 image of the surroundings of the vehicle 12 is treated.

Bei guten Sichtverhältnissen nimmt die Kamera 16 beispielsweise ein aus 64 Bildpunkten bestehendes Bild der Umgebung des Fahrzeugs auf, welches auf einem hellen Hintergrund, beispielsweise dem hellgrauen Asphalt einer Straße 28 ein dunkles Hindernis 30, beispielsweise ein vorausfahrendes Fahrzeug zeigt. In dem genannten Beispiel werden lediglich drei Grauwerte erfaßt, nämlich hell, dunkel und grau.In good visibility conditions, the camera 16 records, for example, an image of the surroundings of the vehicle consisting of 64 pixels, which shows a dark obstacle 30 , for example a vehicle in front, on a light background, for example the light gray asphalt of a road 28 . In the example mentioned, only three gray values are recorded, namely light, dark and gray.

In der Bildauswertevorrichtung 20 werden nun benachbarte Bildpunkte sowohl zeilenweise gemäß den Zeilen 1 bis 8 als auch spaltenweise gemäß den Spalten A bis H miteinander verglichen. Eine Bildpunktvergleichsvorrichtung stellt dabei innerhalb der Bildauswertevorrichtung fest, daß benachbarte Punkte entweder den gleichen Grauwert oder einen maximalen Abstand hinsichtlich des Grauwertes voneinander aufweisen. In der Bildauswertevorrichtung wird daher das Bild gemäß Fig. 2 als scharfes Bild bewertet und in Bild­ daten übertragen, aufgrund welcher der Projektor 22 auf der Windschutzscheibe 24 ein Umgebungsbild (Fig. 5) anzeigt.In the image evaluation device 20 , adjacent pixels are now compared with one another both row by row according to rows 1 to 8 and column by column according to columns A to H. A pixel comparison device determines within the image evaluation device that neighboring points either have the same gray value or a maximum distance with respect to the gray value from one another. In the image evaluation device, the image according to FIG. 2 is therefore evaluated as a sharp image and transmitted in image data, on the basis of which the projector 22 displays an environmental image on the windshield 24 ( FIG. 5).

Befindet sich das Hindernis 30 wie in Fig. 3 gezeigt in einer Nebelbank, wird Licht gestreut und scharfe Kanten des Hindernisses verschwimmen. Dies führt dazu, daß bereichsweise (Felder E5 bis G7) von der Kamera Kameradaten entsprechend einem Grauwert "grau" geliefert werden. Die Bildpunktvergleichsvorrichtung stellt nunmehr bei dem zeilen- und spaltenweisen Vergleich der Bildpunkte fest, daß einige der benachbarten Bildpunkte weder den gleichen Grauwert noch den maximal möglichen Abstand aufweisen. Die Bildauswertevorrichtung bewertet daraufhin das von der Kamera 16 gelieferte Bild gemäß Fig. 3 als unscharf und unterdrückt eine Ausgabe eines Bildes. Stattdessen wird das in einem Bilddatenspeicher zuvor gespeicherte scharfe Bild gemäß Fig. 2 als Umgebungsbild wie in Fig. 5 gezeigt dargestellt.If the obstacle 30 is in a fog bank, as shown in FIG. 3, light is scattered and sharp edges of the obstacle become blurred. This leads to areas (fields E5 to G7) being supplied by the camera with camera data corresponding to a gray value "gray". When comparing the pixels row by row and column, the pixel comparison device now determines that some of the neighboring pixels have neither the same gray value nor the maximum possible distance. The image evaluation device then evaluates the image supplied by the camera 16 according to FIG. 3 as unsharp and suppresses an output of an image. Instead, the sharp image previously stored in an image data memory according to FIG. 2 is shown as a surrounding image as shown in FIG. 5.

In Fig. 4 ist dargestellt, wie sich ein Regentropfen aus­ wirken würde, wenn ein solcher nicht durch die rotierende Scheibe von der Optik der Kamera 16 entfernt würde. In einem solchen Fall würden die Felder F5, E6 bis G6 und F7 einen Grauwert "grau" aufweisen, welcher mit bestimmten benachbarten Feldern weder gleich noch von diesen maximal beabstandet ist. Das genannte Bild gemäß Fig. 4 ist also unscharf und wird nicht angezeigt. Stattdessen wird, wie zuvor beschrieben, ein in einem Bilddatenspeicher kurz zuvor abgelegtes Bild zur Anzeige gebracht. Da die genannte Vorrichtung mit einer Kamera mit hoher Bildaufnahmefrequenz, beispielsweise 100 Hz, arbeitet und der Projektor lediglich mit einer Anzeigefrequenz von 50 Hz, ist es möglich, Zeitfenster so zu wählen, daß nur jedes zweite von der Kamera 16 aufgezeichnete Bild umzuwandeln und zur Anzeige zu bringen ist. FIG. 4 shows how a raindrop would work if it were not removed from the optics of the camera 16 by the rotating disk. In such a case, the fields F5, E6 to G6 and F7 would have a gray value "gray", which is neither the same with certain neighboring fields nor at a maximum distance from them. The image referred to in FIG. 4 is therefore out of focus and is not displayed. Instead, as previously described, an image stored in an image data memory just before is displayed. Since the said device works with a camera with a high image recording frequency, for example 100 Hz, and the projector only with a display frequency of 50 Hz, it is possible to select time windows so that only every second image recorded by the camera 16 is converted and displayed is to be brought.

Claims (16)

1. Vorrichtung zur Anzeige der Umgebung eines Fahrzeugs, insbesondere in Fahrtrichtung des KFZ, mit
  • - einer die Umgebung des Fahrzeugs erfassenden Kamera (16),
  • - einer Bildauswertevorrichtung (20), die die Kamera­ daten bearbeitet und in Bilddaten überträgt, und
  • - einem Bildschirm, auf welchem ein aufgrund der Bilddaten erzeugtes Bild angezeigt wird,
dadurch gekennzeichnet,
daß die Bildauswertevorrichtung (20) einen Bilddaten­ speicher und eine Bewertungsvorrichtung aufweist, welche feststellt, ob Bilddaten für den Bildschirm ein scharfes, bereichsweise unscharfes oder ein unscharfes, insbesondere regenunscharfes Bild repräsentieren,
wobei die Bildauswertevorrichtung bei der Erzeugung der Bilddaten für den Bildschirm die Daten der Bewertungsvorrichtung berücksichtigt.1. Device for displaying the surroundings of a vehicle, in particular in the direction of travel of the vehicle
  • - a camera ( 16 ) capturing the surroundings of the vehicle,
  • - An image evaluation device ( 20 ) which processes the camera data and transmits it in image data, and
  • a screen on which an image generated on the basis of the image data is displayed,
characterized by
that the image evaluation device ( 20 ) stores an image data and has an evaluation device which determines whether image data for the screen represent a sharp, regionally unsharp or an unsharp, in particular rain-unsharp image,
wherein the image evaluation device takes into account the data of the evaluation device when generating the image data for the screen. 2. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, daß die Bildauswertevorrichtung innerhalb vorgegebener Zeitfenster nur die schärfsten Bilder an den Bildschirm weiterleitet. 2. Device according to claim 1, characterized in that that the image evaluation device within predetermined Time window only the sharpest pictures on the screen forwards.   3. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, daß die Bildauswertevorrichtung innerhalb vorgegebener Zeitfenster Bilddatensatzabschnitte einzelner unscharfer Bildbereiche aus einem Datensatz für ein Bild ausschneidet und durch entsprechende Bilddatensatzabschnitte eines früheren scharfen Bildes ersetzt.3. Device according to claim 1, characterized in that the image evaluation device within predetermined Time window of image data record sections of individual blurred image areas from a data set for a Cut out image and by appropriate Image record sections of an earlier sharp image replaced. 4. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, daß die Bildauswertevorrichtung innerhalb vorgegebener Zeitfenster Bilddatensatzabschnitte einzelner unscharfer Bildbereiche aus einem Datensatz für ein Bild ausschneidet und durch entsprechende Bilddatensatzabschnitte ersetzt, die durch Nachberechnung aus Daten eines früheren scharfen Bildes erzeugt worden sind.4. The device according to claim 1, characterized in that the image evaluation device within predetermined Time window of image data record sections of individual blurred image areas from a data set for a Cut out image and by appropriate Image record sections replaced by Recalculation from data from an earlier sharp image have been generated. 5. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, daß die Bildauswertevorrichtung innerhalb vorgegebener Zeitfenster unscharfe oder bereichsweise unscharfe Bilder durch aufgrund früherer scharfer Bilder nachberechnete Bilder ersetzt.5. The device according to claim 1, characterized in that the image evaluation device within predetermined Time window blurred or blurred in some areas Images due to previous sharp images post-calculated images replaced. 6. Vorrichtung nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, daß der Bildschirm derart ausgebildet ist, daß er eine Durchsicht auf eine hinter dem Bildschirm liegende Umgebung erlaubt, wobei das auf dem Bildschirm abgebildete, aus den Bilddaten erzeugte Umgebungsbild die Umgebung überlagernd angezeigt wird.6. Device according to one of claims 1 to 5, characterized characterized in that the screen is designed in this way is that he is reviewing one behind the Environment allowed lying screen, which on the Screen shown, generated from the image data Surrounding image is displayed overlaying the surroundings. 7. Vorrichtung nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, daß die Bildauswertevorrichtung eine Bildpunktvergleichsvorrichtung aufweist. 7. Device according to one of claims 1 to 6, characterized characterized in that the image evaluation device a Has pixel comparison device.   8. Vorrichtung nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, daß die Bildauswertevorrichtung (20) die Kameradaten auf Konturdaten reduziert.8. Device according to one of claims 1 to 7, characterized in that the image evaluation device ( 20 ) reduces the camera data to contour data. 9. Vorrichtung nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, daß die Kamera (16) Bilder in einem für das menschliche Auge sichtbaren Spektralbereich aufnimmt und in Kameradaten umwandelt.9. Device according to one of claims 1 to 8, characterized in that the camera ( 16 ) records images in a spectral range visible to the human eye and converts them into camera data. 10. Vorrichtung nach einem der Ansprüche 1 bis 9, dadurch gekennzeichnet, daß die Kamera (16) Bilder im Infrarot­ bereich aufnimmt und in Kameradaten umwandelt.10. Device according to one of claims 1 to 9, characterized in that the camera ( 16 ) takes pictures in the infrared range and converts them into camera data. 11. Vorrichtung nach einem der Ansprüche 1 bis 10, dadurch gekennzeichnet, daß die Kamera außerhalb des Fahrgast­ raumes angeordnet ist und für die Optik eine Optik­ reinigungsvorrichtung mit einer vorgebauten rotierenden Scheibe (26) aufweist.11. Device according to one of claims 1 to 10, characterized in that the camera is arranged outside the passenger compartment and has an optical cleaning device for the optics with a pre-built rotating disc ( 26 ). 12. Verfahren zur Bildaufbereitung bei einer Bildanzeige­ vorrichtung, bei dem
  • - ein Bild der Umgebung mit einer Erfassungsvorrichtung erfaßt und in Kameradaten umgewandelt wird,
  • - in einer Bildauswertevorrichtung die Kameradaten bearbeitet und in Bilddaten für einen Bildschirm übertragen werden,
  • - auf einem Bildschirm aufgrund der Bilddaten ein Bild angezeigt wird,
dadurch gekennzeichnet,
daß die Bilddaten in einem Bilddatenspeicher zwischen­ gespeichert werden und
daß innerhalb vorgegebener Zeitfenster nur scharfe, ge­ speicherte oder bearbeitete Bilder an den Bildschirm weitergeleitet werden.12. Process for image preparation in an image display device, in which
  • an image of the surroundings is captured with a capturing device and converted into camera data,
  • the camera data are processed in an image evaluation device and transmitted in image data for a screen,
  • an image is displayed on a screen based on the image data,
characterized,
that the image data are temporarily stored in an image data memory and
that only sharp, saved or edited images are forwarded to the screen within the specified time window. 13. Verfahren nach Anspruch 12, dadurch gekennzeichnet, daß innerhalb vorgegebener Zeitfenster nur die schärfsten Bilder an den Bildschirm weitergeleitet werden.13. The method according to claim 12, characterized in that that only the sharpest images forwarded to the screen become. 14. Verfahren nach Anspruch 12, dadurch gekennzeichnet, daß innerhalb vorgegebener Zeitfenster Bilddatensatzab­ schnitte einzelner unscharfer Bildbereiche aus einem Datensatz für ein Bild ausgeschnitten und durch entsprechende Bilddatensatzabschnitte eines früheren scharfen Bildes ersetzt werden.14. The method according to claim 12, characterized in that the image data set starts within the specified time window cuts individual blurred image areas from one Cut out record for an image and through corresponding image data record sections of an earlier one sharp image to be replaced. 15. Verfahren nach Anspruch 12, dadurch gekennzeichnet, daß innerhalb vorgegebener Zeitfenster Bilddatensatzab­ schnitte einzelner unscharfer Bildbereiche aus einem Datensatz für ein Bild ausgeschnitten und durch entsprechende Bilddatensatzabschnitte ersetzt werden, die durch Nachberechnung aus Daten eines früheren scharfen Bildes erzeugt werden.15. The method according to claim 12, characterized in that the image data set starts within the specified time window cuts individual blurred image areas from one Cut out record for an image and through corresponding image data record sections are replaced, by recalculating data from a previous one sharp image are generated. 16. Verfahren nach Anspruch 12, dadurch gekennzeichnet, daß innerhalb vorgegebener Zeitfenster unscharfe oder bereichsweise unscharfe Bilder durch aufgrund früherer scharfer Bilder nachberechnete Bilder ersetzt werden.16. The method according to claim 12, characterized in that within a given time window, blurred or areas blurred by areas due to earlier Sharp images will be replaced.
DE10016184A 2000-03-31 2000-03-31 Device for displaying the surroundings of a vehicle Expired - Fee Related DE10016184C2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE10016184A DE10016184C2 (en) 2000-03-31 2000-03-31 Device for displaying the surroundings of a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE10016184A DE10016184C2 (en) 2000-03-31 2000-03-31 Device for displaying the surroundings of a vehicle

Publications (2)

Publication Number Publication Date
DE10016184A1 true DE10016184A1 (en) 2001-10-25
DE10016184C2 DE10016184C2 (en) 2002-02-07

Family

ID=7637207

Family Applications (1)

Application Number Title Priority Date Filing Date
DE10016184A Expired - Fee Related DE10016184C2 (en) 2000-03-31 2000-03-31 Device for displaying the surroundings of a vehicle

Country Status (1)

Country Link
DE (1) DE10016184C2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10237606A1 (en) * 2002-08-16 2004-03-11 Hella Kg Hueck & Co. Windscreen camera-mounting arrangement for use in vehicles includes further circuit board for analysis electronics in horizontal arrangement
WO2004047449A1 (en) * 2002-11-16 2004-06-03 Robert Bosch Gmbh Device and method for improving visibility in a motor vehicle
DE10261290B4 (en) * 2001-12-28 2007-02-15 Yazaki Corp. In-vehicle image correction device and night driving field of view assistance device
WO2007053075A2 (en) * 2005-11-04 2007-05-10 Autoliv Development Ab Infrared vision arrangement and image enhancement method
US7372030B2 (en) 2004-07-12 2008-05-13 Siemens Aktiengesellschaft Method for representing a front field of vision from a motor vehicle
US7834905B2 (en) 2002-06-18 2010-11-16 Bayerische Motoren Werke Aktiengesellschaft Method and system for visualizing the environment of a vehicle with a distance-dependent merging of an infrared and a visual image
US8045011B2 (en) 2005-11-04 2011-10-25 Autoliv Development Ab Imaging apparatus
EP2426543A1 (en) 2005-09-08 2012-03-07 Johnson Controls GmbH Driver assistance system for a vehicle and method for visualising the environment of a vehicle

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10207039A1 (en) * 2002-02-20 2003-09-04 Bayerische Motoren Werke Ag Method and device for visualizing a section of the surroundings of a vehicle and a calibration device for calibrating the device
DE10218175B4 (en) * 2002-04-24 2011-10-27 Bayerische Motoren Werke Aktiengesellschaft Method and device for visualizing the environment of a vehicle with a driving-dependent fusion of an infrared and a visual image
DE10227171B4 (en) * 2002-06-18 2019-09-26 Bayerische Motoren Werke Aktiengesellschaft Method and device for visualizing the environment of a vehicle with distance-dependent fusion of an infrared and a visual image
DE10304703B4 (en) * 2003-02-06 2023-03-16 Bayerische Motoren Werke Aktiengesellschaft Method and device for visualizing the environment of a vehicle with environment-dependent fusion of an infrared and a visual image
DE102008049207B4 (en) 2008-07-03 2019-10-02 Bayerische Motoren Werke Aktiengesellschaft Motor vehicle with a camera arranged behind a grille for a night vision system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4032927C2 (en) * 1990-10-17 1993-04-15 Robert Bosch Gmbh, 7000 Stuttgart, De
EP0577501A1 (en) * 1992-06-30 1994-01-05 Valeo Vision Method and device for long distance night vision for motor vehicles
EP0686865A1 (en) * 1994-06-09 1995-12-13 Delco Electronics Corporation Night vision system for motor vehicles
DE29514364U1 (en) * 1995-09-07 1996-01-18 Hohe GmbH & Co. KG, 97903 Collenberg Image acquisition module
EP0707424A1 (en) * 1994-10-11 1996-04-17 Automobiles Peugeot Method and apparatus for improved night vision of a motorist
US5729016A (en) * 1994-04-12 1998-03-17 Hughes Aircraft Company Low cost night vision system for nonmilitary surface vehicles

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4032927C2 (en) * 1990-10-17 1993-04-15 Robert Bosch Gmbh, 7000 Stuttgart, De
EP0577501A1 (en) * 1992-06-30 1994-01-05 Valeo Vision Method and device for long distance night vision for motor vehicles
US5729016A (en) * 1994-04-12 1998-03-17 Hughes Aircraft Company Low cost night vision system for nonmilitary surface vehicles
EP0686865A1 (en) * 1994-06-09 1995-12-13 Delco Electronics Corporation Night vision system for motor vehicles
EP0707424A1 (en) * 1994-10-11 1996-04-17 Automobiles Peugeot Method and apparatus for improved night vision of a motorist
DE29514364U1 (en) * 1995-09-07 1996-01-18 Hohe GmbH & Co. KG, 97903 Collenberg Image acquisition module

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10261290B4 (en) * 2001-12-28 2007-02-15 Yazaki Corp. In-vehicle image correction device and night driving field of view assistance device
US7433496B2 (en) 2001-12-28 2008-10-07 Yazaki Corportion In-vehicle image correcting device and night driving view field supporting device
US7834905B2 (en) 2002-06-18 2010-11-16 Bayerische Motoren Werke Aktiengesellschaft Method and system for visualizing the environment of a vehicle with a distance-dependent merging of an infrared and a visual image
DE10237606A1 (en) * 2002-08-16 2004-03-11 Hella Kg Hueck & Co. Windscreen camera-mounting arrangement for use in vehicles includes further circuit board for analysis electronics in horizontal arrangement
DE10237606B4 (en) * 2002-08-16 2006-04-27 Hella Kgaa Hueck & Co. Camera arrangement for motor vehicles
WO2004047449A1 (en) * 2002-11-16 2004-06-03 Robert Bosch Gmbh Device and method for improving visibility in a motor vehicle
US7372030B2 (en) 2004-07-12 2008-05-13 Siemens Aktiengesellschaft Method for representing a front field of vision from a motor vehicle
EP2426543A1 (en) 2005-09-08 2012-03-07 Johnson Controls GmbH Driver assistance system for a vehicle and method for visualising the environment of a vehicle
EP2428833A1 (en) 2005-09-08 2012-03-14 Johnson Controls GmbH Driver assistance system for a vehicle and method for visualising the environment of a vehicle
US8519837B2 (en) 2005-09-08 2013-08-27 Johnson Controls Gmbh Driver assistance device for a vehicle and a method for visualizing the surroundings of a vehicle
EP3296796A2 (en) 2005-09-08 2018-03-21 Johnson Controls GmbH Driver assistance device for a vehicle and method for visualising the vicinity of a vehicle
WO2007053075A3 (en) * 2005-11-04 2007-06-28 Autoliv Dev Infrared vision arrangement and image enhancement method
WO2007053075A2 (en) * 2005-11-04 2007-05-10 Autoliv Development Ab Infrared vision arrangement and image enhancement method
US8045011B2 (en) 2005-11-04 2011-10-25 Autoliv Development Ab Imaging apparatus

Also Published As

Publication number Publication date
DE10016184C2 (en) 2002-02-07

Similar Documents

Publication Publication Date Title
DE19923964C2 (en) Environment monitoring device for a vehicle
EP1706773B1 (en) Night vision system for motor vehicles, comprising a partial optical filter
DE19930710C2 (en) Image display system and method for vehicles
WO1999037503A1 (en) Vehicle monitoring system
DE102017103282A1 (en) DISPLAY CONTROL FOR ONE VEHICLE
DE102014018040A1 (en) vision system
EP1997093A1 (en) Virtual spotlight for distinguishing objects of interest in image data
DE10016184C2 (en) Device for displaying the surroundings of a vehicle
DE102009002979A1 (en) Projection display device for vehicles, comprises sensor units formed to generate projection data from sensor values and location information, where control unit is formed to perform filtering of projection data
DE10203421C1 (en) Automobile display unit for IR night visibility device has image processor for reducing brightness level of identified bright points in night visibility image
EP3434523A1 (en) Indirect vision system for a vehicle
DE19802220A1 (en) Information display device used with computer or onboard automobile
DE102004060776A1 (en) Apparatus for recording and reproducing an image representation of a traffic space lying next to or behind a vehicle
DE102004010908B4 (en) Image pickup device and image recording method
DE102015015676A1 (en) A method for automatically connecting an environmental image on a display unit of a vehicle
DE102012018556B4 (en) Assistance system to enable an extended foresight for subsequent road users
DE10218175B4 (en) Method and device for visualizing the environment of a vehicle with a driving-dependent fusion of an infrared and a visual image
DE102012201322A1 (en) Method for actuating display unit for image output in passenger compartment of vehicle, involves determining glare characteristic, and generating glare avoiding parameter of activation signal for display unit based on glare characteristic
DE102006037600A1 (en) Method for resolution based representation of ambience of motor vehicle for use in parking system, involves capturing ambience information from ambience of motor vehicle by image sensor
DE102014224903A1 (en) Optical environment sensor for vehicles
DE19909989B4 (en) Device for detecting objects located on a transparent pane
DE102012005277B3 (en) Rear area vision system
EP3106349B1 (en) Vision system for a commercial vehicle for the display of the statutory fields of view of a main mirror and a wide-angle mirror
DE102017114611A1 (en) Method for generating at least one merged perspective image of a motor vehicle and a surrounding area of the motor vehicle, camera system and motor vehicle
DE10243620A1 (en) Process for image processing of the optical signals detected by a system for the environment detection of a vehicle and system for environment detection of a vehicle

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
D2 Grant after examination
8364 No opposition during term of opposition
8320 Willingness to grant licences declared (paragraph 23)
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee