DE10017072A1 - Hecküberwachungssystem für ein Fahrzeug - Google Patents

Hecküberwachungssystem für ein Fahrzeug

Info

Publication number
DE10017072A1
DE10017072A1 DE10017072A DE10017072A DE10017072A1 DE 10017072 A1 DE10017072 A1 DE 10017072A1 DE 10017072 A DE10017072 A DE 10017072A DE 10017072 A DE10017072 A DE 10017072A DE 10017072 A1 DE10017072 A1 DE 10017072A1
Authority
DE
Germany
Prior art keywords
vehicle
image
foe
section
monitoring system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE10017072A
Other languages
English (en)
Other versions
DE10017072C2 (de
Inventor
Kazutomo Fujinami
Naoto Ishikawa
Keiki Okamoto
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yazaki Corp
Original Assignee
Yazaki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yazaki Corp filed Critical Yazaki Corp
Publication of DE10017072A1 publication Critical patent/DE10017072A1/de
Application granted granted Critical
Publication of DE10017072C2 publication Critical patent/DE10017072C2/de
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/103—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using camera systems provided with artificial illumination device, e.g. IR light source
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
    • B60R2300/404—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components triggering from stand-by mode to operation mode
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/804—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for lane monitoring
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic

Abstract

Bei einem Hecküberwachungssystem für ein Fahrzeug vergrößert ein Prisma 2 den unteren Abschnitt des durch eine Kamera 1 aufnehmbaren Bereiches und verwendet eine Verwendungseinrichtung den unteren Abschnitt. In dieser Konfiguration kann das Bild in der näheren Umgebung des eigenen Fahrzeuges aufgenommen werden, ohne daß dadurch die Detektion der durch das aus einer großen Entfernung herannahende Fahrzeug erzeugten optischen Flüsse dadurch behindert wird, und zu anderen Zwecken als zur Detektion der optischen Flüsse verwendet werden.

Description

Die Erfindung betrifft ein Hecküberwachungssystem für ein Fahr­ zeug, und insbesondere ein Hecküberwachungssystem zum Detektie­ ren eines anderen Fahrzeugs, welches sich dem eigenen Fahrzeug während des Fahrens des Fahrzeugs nähert, unter Verwendung eines von einer in/an dem Fahrzeug angebrachten Kamera aufge­ nommenen Bildes und zum Ausgeben einer Warnung an den Fahrer. Nebenbei soll hier beachtet werden, daß das Heck auch hintere Seiten oder diagonale Rückseiten mit einschließt.
Bei einer für ein solches Hecküberwachungssystem für ein Fahr­ zeug beispielhaften herkömmlichen Technik wird ein sich dem eigenen Fahrzeug näherndes anderes Fahrzeug unter Verwendung von von dem anderen Fahrzeug ausgehenden optischen Flüssen detektiert. Unter Bezug auf Fig. 5A bis 9D wird ein herkömm­ liches Hecküberwachungssystem für ein Fahrzeug erklärt.
Fig. 9A bis 9C zeigen Ansichten zur Erklärung einer Verände­ rung eines von einer Kamera 1 aufgenommenen rückwärtigen Hin­ tergrundbildes. Fig. 9A zeigt eine Situation einschließlich des eigenen Fahrzeugs. Fig. 9B zeigt ein von der Kamera 1 zum Zeitpunkt t in einer Umgebung des eigenen Fahrzeugs aufgenomme­ nes Bild. Fig. 9C zeigt ein zum Zeitpunkt t + Δt aufgenommenes Bild.
Es wird nun angenommen, daß das eigene Fahrzeug auf einer ebe­ nen Straße geradeaus fährt. Das Verkehrszeichen und das Gebäu­ de, die in Fig. 9A in Bereichen hinter dem eigenen Fahrzeug liegen, werden als Bilder beobachtet, wie sie in Fig. 9B und 9C zum Zeitpunkt t beziehungsweise t + Δt gezeigt sind. Werden die entsprechenden Punkte in diesen beiden Bildern miteinander verbunden, so erhält man Geschwindigkeitsvektoren, wie sie in Fig. 9D gezeigt sind. Diese Vektoren werden als "optische Flüsse" bezeichnet. In dem Fall, wenn sich ein folgendes Fahr­ zeug nähert, sind die Richtungen der Vektoren in den optischen Flüssen in Fig. 10D gegenläufig. Bei dem herkömmlichen Umge­ bungsüberwachungssystem wird die Beziehung zwischen dem eigenen Fahrzeug und dem nachfolgenden Fahrzeug oder einem anderen auf einer Nachbarspur fahrenden Fahrzeug unter Verwendung der opti­ schen Flüsse überwacht, um das sich dem eigenen Fahrzeug nä­ hernde andere Fahrzeug zu überwachen und dabei eine Warnung an den Fahrer auszugeben.
Beim Zurückstoßen oder Rückwärtsfahren mit dem Fahrzeug dagegen gibt es, selbst wenn das Gesichtsfeld nach hinten durch einen Seitenspiegel oder einen Rückspiegel ergänzt ist, einen Be­ reich, der außerhalb des Gesichtsfelds des Fahrers liegt. Spe­ ziell große Fahrzeuge, so wie Lastwagen und Busse haben in einer rückwärtigen oder seitlich-rückwärtigen Richtung bezüg­ lich des Fahrzeugfahrers einen großen toten Winkel. Mit dem Ziel, einen solchen Nachteil zu beseitigen, wurde vorgeschla­ gen, mittels eines von einer an der Rückseite des großen Busses angebrachten Kamera aufgenommenen Bildes der Straße hinter dem Bus ein hinteres seitliches Gesichtsfeld bereitzustellen und, während das Fahrzeug rückwärts fährt, die hintere seitliche Richtung zu überwachen.
Während das Fahrzeug rückwärts fährt, muß die zum Überwachen der rückwärtig-seitlichen Richtung verwendete Kamera den Be­ reich innerhalb einiger Meter ausgehend vom Heck des Fahrzeugs überwachen, damit ein Hindernis in der Nähe des Fahrzeugs er­ mittelt werden kann. Andererseits muß die Kamera, während das Fahrzeug vorwärts fährt, den Raum einige Meter weit oder mehr hinter dem Heck des Fahrzeugs aufnehmen, damit die entweder von einem dem eigenen Fahrzeug folgenden oder von einem auf einer benachbarten Fahrspur fahrenden und sich aus großer Entfernung annähernden Fahrzeug erzeugten optischen Flüsse detektiert wer­ den können.
So muß die zum Überwachen der rückwärtigen Richtung verwendete Kamera, während das Fahrzeug vorwärts fährt bzw. rückwärts fährt, jeweils unterschiedliche Bereiche aufnehmen. Deshalb war es bislang nicht möglich, daß zum Überwachen der rückwärtig- seitlichen Richtung sowohl, während das Fahrzeug vorwärts fährt als auch während es rückwärts fährt, nur eine einzige Kamera verwendet wurde. Mit dem Ziel, einen solchen Nachteil zu besei­ tigen, wurde die Verwendung einer Weitwinkellinse vorgeschla­ gen, die vermag, sowohl den Raum in der Nähe des Fahrzeugs als auch den weit vom eigenen Fahrzeug entfernten Raum aufzunehmen. Jedoch ist bei einem System gemäß diesem Vorschlag die Auflö­ sung des gesamten Straßenbildes verringert, so daß das Detek­ tieren von optischen Flüssen erschwert ist.
Bei einem herkömmlichen Verfahren zum Detektieren von optischen Flüssen werden die weißen Linien der eigenen Spur auf einer geraden Straße detektiert, wird der Kreuzungspunkt der verlän­ gerten Linien der detektierten weißen Linien als FOE-Punkt definiert und werden, um optische Flüsse zu erhalten, radial ausgehend von dem FOE, Korrelationsberechnungen durchgeführt, wodurch eine Hochgeschwindigkeits-Bildverarbeitung verwirklicht wird. Jedoch ist bei einem von der Kamera nachts aufgenommenen Bild von der Straße der Kontrast nicht sehr hoch, so daß es schwierig ist, die weißen Linien zu detektieren. Um einem sol­ chen Nachteil abzuhelfen, können die weißen Linien in der Nähe des Fahrzeugs dadurch detektiert werden, daß das Heck des Fahr­ zeugs zu einem solchen Ausmaß beleuchtet ist, daß einerseits das hintere Fahrzeug an einem sicheren Fahren nicht gehindert ist und andererseits die weißen Linien auf dem Bild der Straße erkennbar sind.
Da jedoch, während das eigene Fahrzeug vorwärts fährt, die zum Überwachen der rückwärtig-seitlichen Richtung verwendete Kamera den weit entfernten Raum aufnimmt, kann, während das eigene Fahrzeug vorwärts fährt, diese einzige Kamera nicht zum rück­ wärtig-seitlichen Überwachen und Detektieren der weißen Linien in der Nähe des Fahrzeugs verwendet werden. Auch in diesem Fall kann ein Vorschlag sein, daß eine Weitwinkellinse verwendet wird, die vermag, den Raum in der Nähe und in großer Entfernung des eigenen Fahrzeugs aufzunehmen. Jedoch ist gemäß diesem Vor­ schlag die Auflösung des gesamten Bildes der Straße verringert, so daß das Detektieren von optischen Flüssen erschwert ist.
Es ist ein Ziel der Erfindung, ein Hecküberwachungssystem für ein Fahrzeug zu liefern, mit dem ein Bild in der Nähe des eige­ nen Fahrzeugs aufgenommen werden kann, ohne daß das Detektieren von durch ein sich von einem entfernten Ort näherndes Fahrzeug erzeugten optischen Flüsse behindert ist, und bei dem das in der Nähe des Fahrzeugs aufgenommene Bild zu einem anderen Zweck als zur Detektion von optischen Flüssen verwendet werden kann.
Um obige Ziele zu erreichen, ist gemäß der Erfindung, wie in dem Grundaufbauschema in Fig. 1 gezeigt ist, ein Hecküberwa­ chungssystem für ein Fahrzeug vorgesehen, mit:
einer an einem Fahrzeug angeordneten Bildaufnahmeeinrich­ tung 1 zum Aufnehmen des Hecks des Fahrzeugs zum Bereitstellen eines Bildes;
einer Einrichtung 4a-1 zum Detektieren der Bewegung ent­ sprechender Punkte in zwei von der Bildaufnahmeeinrichtung zu zwei Zeitpunkten aufgenommenen Bildern als optischer Fluß;
einer Gefahreinschätzungseinrichtung 4a-2 zum Detektieren des sich dem eigenen Fahrzeug nähernden und in der Nähe des eigenen Fahrzeugs fahrenden Fahrzeugs auf Grundlage des Wertes des von dem anderen Fahrzeug ausgehendem optischen Flusses;
einer Bildaufnahmebereich-Vergrößerungs-Einrichtung 2 zum Vergrößern eines unteren Abschnitts des von der Bildaufnahme­ einrichtung aufnehmbaren Bereichs; und
einer Verwendungseinrichtung 20 zum Verwenden des dem unteren Abschnitt entsprechenden Bildes zu einem anderen Zweck als dem Detektieren des optischen Flusses.
In dieser Konfiguration verwenden die Bildaufnahmebereich-Ver­ größerungs-Einrichtung 2 zum Vergrößern eines unteren Ab­ schnitts des durch die Bildaufnahmeeinrichtung aufnehmbaren Bereichs und die Verwendungseinrichtung 20 das dem unteren Abschnitt entsprechende Bild. Daher ist dadurch, daß der untere Abschnitt des durch die Bildaufnahmeeinrichtung aufnehmbaren Bereichs vergrößert wird, die Auflösung des Bildes im oberen Abschnitt des aufnehmbaren Bereichs nicht verringert. Das dem vergrößerten unteren Abschnitt entsprechende Bild in der Nähe des Fahrzeugs kann zu einem anderen Zweck als dem Detektieren der optischen Flüsse verwendet werden.
Vorzugsweise weist die Verwendungseinrichtung 20 eine Anzeige­ einrichtung 6b zum Anzeigen des durch die Bildaufnahmeeinrich­ tung aufgenommenen Bildes auf.
In dieser Konfiguration kann, da die Verwendungseinrichtung 20 eine Anzeigeeinrichtung 6b zum Anzeigen des durch die Bildauf­ nahmeeinrichtung aufgenommenen Bildes aufweist, die Hecküber­ wachung, während das Fahrzeug rückwärts fährt, durch ein Aus­ wählen des dem durch die Bildaufnahme-Vergrößerungs-Einrichtung vergrößerten unteren Abschnitt entsprechenden Bildes in der Nähe des Fahrzeugs durchgeführt werden.
Vorzugsweise weist das Hecküberwachurtgssystem weiter eine Fahr­ zeug-Rückwärtsfahrt-Detektionseinrichtung 5 zum Detektieren, ob das eigene Fahrzeug rückwärts fährt, auf, und wird das von der Bildaufnahmeeinrichtung aufgenommene Bild von der Anzeigeein­ richtung angezeigt, wenn von der Fahrzeug-Rückwärtsfahrt-Detek­ tionseinrichtung detektiert wird, daß das Fahrzeug rückwärts fährt.
In dieser Konfiguration zeigt, wenn von der Fahrzeug-Rückwärts­ fahrt-Detektionseinrichtung 5 detektiert wird, daß das Fahrzeug rückwärts fährt, die Anzeigeeinrichtung 6b automatisch das von der Bildaufnahmeeinrichtung 6b aufgenommene Bild an. Deshalb ist es nicht erforderlich, daß der Benutzer die Anzeigeeinrich­ tung 6b unter Verwendung des manuellen Schalters 6b ein-/aus­ schaltet.
Vorzugsweise detektiert die Detektionseinrichtung zum Detektie­ ren des optischen Flusses den optischen Fluß dann, wenn von der Fahrzeug-Rückwärtsfahrt-Detektionseinrichtung nicht detektiert wird, daß das Fahrzeug rückwärts fährt.
In dieser Konfiguration detektiert, wenn kein Rückwärtsfahren des Fahrzeugs detektiert wird, die Detektionseinrichtung 4a-1 zum Detektieren des optischen Flusses automatisch den optischen Fluß. Daher muß der Benutzer während des Vorwärtsfahrens oder vor dem Losfahren die Detektionseinrichtung 4a-1 zum Detekieren des optischen Flusses nicht ein-/ausschalten.
Vorzugsweise weist das von der Bildaufnahmeeinrichtung erhalte­ ne Bild einen ersten Bildabschnitt auf, der einem oberen Teil des durch die Bildaufnahmeeinrichtung aufnehmbaren Bereichs entspricht, und einen zweiten Bildabschnitt, der einem durch die Bildaufnahme-Vergrößerungs-Einrichtung vergrößerten unteren Abschnitt entspricht, und zeigt die Anzeigeeinrichtung nur den zweiten Bildabschnitt an.
Vorzugsweise weist das von der Bildaufnahmeeinrichtung erhalte­ ne Bild einen ersten Bildabschnitt auf, der einem oberen Teil des von der Bildaufnahmeeinrichtung aufnehmbaren Bereichs ent­ spricht und einen zweiten Bildabschnitt, der einem von der Bildaufnahme-Vergrößerungs-Einrichtung vergrößerten unteren Abschnitt desselben entspricht, und detektiert die Detektions­ einrichtung zum Detektieren des optischen Flusses den optischen Fluß aus dem ersten Bildabschnitt.
In dieser Konfiguration ist, da der optische Fluß anhand nur des ersten Bildabschnitts DG detektiert wird und die Bildver­ arbeitung für den zweiten Bildabschnitt CG weggelassen werden kann, die Bildverarbeitung zum Detektieren des optischen Flus­ ses minimierbar.
Der Verwendungsabschnitt weist vorzugsweise auf:
eine Weiße-Linien-Detektionseinrichtung zum Detektieren eines Paares von an beiden Seiten des eigenen Fahrzeuges an­ geordneten weißen Linien durch Verarbeitung des ersten Bild­ abschnittes,
eine Unterer-FOE-Setz-Einrichtung zum Setzen des Kreuzungspunktes von verlängerten Linien der durch die Weiße- Linien-Detektionseinrichtung detektierten weißen Linien als einen ersten FOE (Brennpunkt der Verlängerung) des ersten Bild­ abschnittes, und
eine Oberer-FOE-Setz-Einrichtung zum Setzen eines zweiten FOE des zweiten Bildabschnittes auf Grundlage des ersten Bild­ abschnittes, und
wobei die Detektionseinrichtung zum Detektieren des opti­ schen Flusses die optischen Flüsse aus dem zweiten Bildab­ schnitt durch Verwendung des durch die Oberer-FOE-Setz-Einrich­ tung gesetzten ersten FOE detektiert.
In dieser Konfiguration muß, wenn das Bild der weißen Linien auf dem ersten Bildabschnitt in einer dunklen Umgebung (nachts und innerhalb eines Tunnels) schwierig aufzunehmen ist, zum Aufnehmen der weißen Linien im zweiten Bildabschnitt nur die Umgebung des hinteren Endes des Fahrzeugs mit Licht beleuchtet werden.
Die Oberer-FOE-Einstelleinrichtung weist vorzugsweise eine Ein­ richtung zum Abspeichern eines Versatzes zwischen dem ersten FOE und dem zweiten FOE auf und stellt den zweiten FOE durch ein Verschieben des ersten FOE um den Versatz ein.
In dieser Konfiguration ist es nicht notwendig, daß der zweite FOE aus dem für den unteren Bildaufnahmebereich detektierten Winkel zwischen den weißen Linien berechnet wird.
Die Bildaufnahmebereichs-Vergrößerungs-Einrichtung ist vorzugs­ weise ein Prisma mit einem unteren Abschnitt, der nach unten hin dicker wird, so daß der untere Abschnitt des durch die Bildaufnahmeeinrichtung aufnehmbaren Bereichs vergrößert wird, und einem mit dem unteren Abschnitt integral ausgebildeten oberen Abschnitt mit einer gleichförmigen Dicke.
In dieser Konfiguration weist das Prisma mit dem oberen Ab­ schnitt mit einer gleichförmigen Dicke und dem unteren Ab­ schnitt mit einer nach unten größer werdenden Dicke einen kon­ stanten Prismenwinkel auf, so daß die Änderung des Brechungs­ index für das von dem oberen Abschnitt des Prismas einfallende Licht verringert ist, wodurch der tote Winkel an der Grenze zwischen dem oberen Abschnitt und dem unteren Abschnitt des Prismas verringert ist.
Die oben genannten und weitere Ziele und Merkmale der Erfindung werden in der folgenden Beschreibung anhand der Zeichnung näher ausgeführt.
Fig. 1 zeigt das Grundaufbauschema eines erfindungsgemä­ ßen Hecküberwachungssystems für ein Fahrzeug;
Fig. 2 zeigt ein Blockdiagramm einer Ausführungsform des erfindungsgemäßen Hecküberwachungssystems;
Fig. 3 zeigt eine Ansicht zur Erklärung der Form und der Funktionsweise eines Prismas, durch welches das in Fig. 2 gezeigte erfindungsgemäße Hecküberwachungssystem gebildet ist;
Fig. 4 zeigt eine Ansicht auf einem von einer Kamera aufgenommenen Bild;
Fig. 5 zeigt eine Ansicht auf dem geteilten Bild (oder Randbild), das durch Teilen des aufgenommenen Bildes erzeugt worden ist;
Fig. 6 zeigt eine Ansicht zur Erklärung der Vorgehens­ weise beim Detektieren von weißen Linien;
Fig. 7A und 7B zeigen Ansichten zum Erklären der Vor­ gehensweise beim Detektieren optischer Flüsse;
Fig. 8 zeigt ein Flußdiagramm, das den Verarbeitungsab­ lauf einer CPU zeigt, durch die das erfindungsgemäße Hecküber­ wachungssystem gebildet ist;
Fig. 9A bis 9D zeigen Ansichten zur Erklärung einer Änderung des durch eine Kamera nach hinten hinaus aufgenommenen Bildes.
Es folgt nun, in Bezug auf die Zeichung, eine Erklärung ver­ schiedener Ausführungsformen der Erfindung.
Fig. 2 zeigt ein Blockdiagramm einer Ausführungsform eines erfindungsgemäßen Umgebungsüberwachungssystems. Wie in Fig. 2 gezeigt ist, ist eine Kamera 1 an bzw. in einem Fahrzeug an einer Position angeordnet, von der aus das Heck des Fahrzeugs aufgenommen werden kann, und fokussiert die Kamera ein durch eine Linse 1a einfallendes Bild in eine Bildebene 1b.
Ein Prisma 2, das als Vergrößerungseinrichtung zum Vergrößern des aufzunehmenden Bereichs dient, weist einen oberen Abschnitt 2a mit einer gleichförmigen Dicke und einen unteren Abschnitt 2b mit einer nach unten hin dicker werdenden Dicke auf. Wie aus Fig. 3, wo das Prisma 2 nicht vor der Linse 1a angeordnet ist, ersichtlich ist, ist durch den Öffnungswinkel der Linse 1a ein Aufnahmebereich A definiert. Wenn das Prisma 2 vor der Linse 1a angeordnet ist, fällt das Bild in dem Aufnahmebereich B außer­ halb des Aufnahmebereichs A so ein, daß der durch die Kamera 1 aufnehmbare untere Bereich C' auf einen unteren Abschnitt C vergrößert ist. Zum Zweck des Auffindens des Hecks, wenn das Fahrzeug rückwärts fährt, ist das Prisma 2 vor der Linse 1a angeordnet, so daß der durch den unteren Abschnitt 2b einfal­ lende Abschnitt C innerhalb eines Bereichs von einigen Metern von dem Fahrzeug aus liegt.
Ein Speicherbereich 3 weist einen ersten Bildspeicher 3a, einen zweiten Bildspeicher 3b, einen Differentialbildspeicher 3c für das geteilte Bild und einen Speicher 3d für den divergenten optischen Fluß auf. Der erste und der zweite Bildspeicher 2a und 2b speichern die Pixel in einer von den in der Bildebene 1b der Kamera 1 abgebildeten Bilddaten D1 ausgehend konvertierten m- mal n-Matrix (z. B. 512 × 512 Pixel und mit einer Helligkeit von 0 bis 255 Helligkeitsstufen) temporär als D2 und D3 ab und liefern die Pixel an einen Mikrocomputer 3. Der erste Bildspei­ cher 3a und der zweite Bildspeicher 3b speichern die, ausgehend von dem zu einem eingestellten Zeitabschnitt Δt aufgenommenen Bild, konvertierten m × n-Pixel-Daten D2 und D3 sukzessive in einer solchen wechselnden Art, daß die Daten D2 und D3 zum Zeitpunkt t in den ersten Bildspeicher 3a, zum Zeitpunkt t + Δt in den zweiten Bildspeicher 2b, . . . abgespeichert werden. Der Differentialbildspeicher 3c für das geteilte Bild speichert die durch Teilen der Pixeldaten D2 und D3 erzeugten Daten D4 des geteilten Bildes ab. Der Speicher 3d für den divergenten opti­ schen Fluß speichert optische Flußdaten D5 in einer divergenten Richtung und liefert sie an den Mikrocomputer 4.
Der Mikrocomputer 4 weist eine CPU 4a auf, die gemäß einem Steuerprogramm arbeitet, einen ROM 4b zum Speichern des Steuer­ programmes für die CPU 4a und vorgeschriebener Werte und einen RAM 4c zum temporären Abspeichern der zum Durchführen der Be­ rechnung seitens der CPU 4a erforderlichen Daten.
Ein Alarmerzeugungsabschnitt 6 weist eine Anzeige 6a, die als Anzeigeeinrichtung 6a dient, und einen Lautsprecher 6b auf. Die Anzeige 6a zeigt das von der Kamera 1 aufgenommenen Bild an. Zusätzlich zeigt die Anzeige 6a, wann immer entschieden wird, daß die Gefahr eines Zusammenstoßes oder Kontaktes mit dem anderen Fahrzeug, das sich dem eigenen Fahrzeug nähert, be­ steht, visuell die Gefahr für den Fahrer an, indem die dement­ sprechende Nachricht angezeigt wird. Die Anzeige 6a kann ein Display sein, wie es für einen Fernsehempfänger verwendet wird.
Auf Grundlage des von dem Mikrocomputer 3 in dem Fall, wenn entschieden worden ist, daß die Gefahr eines Zusammenstoßes oder Kontaktes mit einem anderen Fahrzeug besteht, erzeugten Lautsignals S2 wird von dem Lautsprecher 6b ein Alarm mittels eines Lautes oder Tones ausgegeben, z. B. erzeugt der Lautspre­ cher 6b bei jeder dieser Tatsachen eine akustische Anleitung oder einen akustischen Alarm.
Im folgenden wird die Funktionsweise eines Hecküberwachungssys­ tems mit der oben beschriebenen Konfiguration erklärt. Zuerst beginnt die CPU 4a, wenn von einem Rückwärtsgangsensor 5 kein Rückwärtsfahrtsignal S1 ausgegeben wird, automatisch mit dem Detektieren des optischen Flusses. Während das Fahrzeug nicht rückwärts fährt, d. h. wenn gewünscht ist, daß während des Vorwärtsfahrens oder vor dem Anfahren die Hecküberwachung durchgeführt wird, beginnt die CPU 4a mit dem Detektieren des optischen Flusses. Dies erspart die Zeit und Arbeit eines Ein- /Ausschaltens der Detektion des optischen Flusses mittels eines manuellen Schalters.
Das Detektieren des optischen Flusses wird nach folgendem Ver­ fahren durchgeführt. Zuerst liefert die Kamera 1 das aufgenom­ mene Bild, wie es in Fig. 4 gezeigt ist, als Aufnahmebild-Daten D1 an den Mikrocomputer 4. Das aufgenommene Bild weist einen ersten Bildabschnitt DG auf, der einem durch den oberen Ab­ schnitt 2a des Prismas 2 einfallenden oberen Abschnitt D ent­ spricht, und einen zweiten Bildabschnitt CG, der einem durch den unteren Abschnitt 2b des Prismas 2 einfallenden unteren Abschnitt C entspricht. Der zweite Bildabschnitt CG ist ver­ tikal komprimiert. Das aufgenommene Bild weist eine Straße 10, auf die Straße 10 aufgemalte weiße Linien, an beiden Seiten der Straße in aufrechter Position vorgesehene Seitenwände 16, die in der Mittelposition in einer horizontalen Linie in der Bild­ fläche verschwinden, und ein sich näherndes Fahrzeug 17 auf.
Die CPU 4a konvertiert die von der Kamera zum Zeitpunkt t auf­ genommenen Daten D1 in die Pixeldaten 2 mit 512 × 512 Pixeln und mit einem Helligkeitswert von 0 bis 255 Helligkeitsstufen und liefert sie an den ersten Bildspeicher 2a. Der erste Bildspei­ cher 2a speichert die Pixeldaten D2 temporär ab, so daß sie für den Mikrocomputer 4 jederzeit lesbar sind. Nach einem vorge­ schriebenen Zeitabschnitt Δt liefert der Mikrocomputer 4 die Pixeldaten D3 des zum Zeitpunkt t + Δt aufgenommenen Bildes an den zweiten Bildspeicher 2b. Der erste Bildspeicher 3a und der zweite Bildspeicher 3b speichern also sukzessive die Pixeldaten D2 und D3 von in einem vorgeschriebenen Zeitabstand von Δt aufgenommenen Bildern ab.
Mittels der Verarbeitung durch die CPU 4a werden die Pixeldaten D2 mit dem Helligkeitswert Im,n in Pixeln in der m-ten Zeilen und n-ten Spalte gemäß Fig. 4 horizontal abgerastert, so daß ein Unterschied im Helligkeitswert (Im,n + 1 - Im,n) zwischen dem zugehörigen Pixel und einem benachbarten Pixel erzielt wird. Falls dieser größer als ein vorgeschriebener Wert ist, wird als Helligkeitswert Imn = 1 genommen. Falls er kleiner ist als dieser vorgeschriebener Wert, wird als Helligkeitswert Imn = 0 genommen. Unter dieser Annahme wird ein geteiltes Bild (Rand­ bild), wie es in Fig. 5 gezeigt ist, erzeugt, welches das Bild nur an den Rändern des aufgenommenen Bildes darstellt. Das so erzeugte geteilte Bild wird in Form der Daten D4 des geteilten Bildes an einen Differentialbildspeicher 2c für das geteilte Bild geliefert.
Für das geteilte Bild wird, wie in Fig. 6 gezeigt ist, eine Bezugslinie VSL gesetzt. Die Bezugslinie VSL ist so gesetzt, daß sie im geteilten Bild in einer, in horizontaler Richtung gese­ hen, Mittelposition des geteilten Bildes vertikal verläuft. Genauer gesagt ist die Bezugslinie, in horizontaler Richtung gesehen, in der Mitte der Spur, in der das eigene Fahrzeug fährt, gesetzt, und wird die Bezugslinie von den weißen Linien 12 und 13 überschnitten.
Nachdem die Bezugslinie VSL gesetzt worden ist, wird eine Suche nach den Randpunkten eines Paares von weißen Linien 12 und 13, die an beiden Seiten der eigenen Spur angeordnet sind, durch­ geführt. Das Suchen der Randpunkte der weißen Linien 22 und 23 wird innerhalb des zweiten Bildabschnittes CG durchgeführt, d. h. von einer am unteren Rand des in Fig. 6 gezeigten Bildaus­ schnittes angeordneten horizontalen Linie H (L0) bis zu einer horizontalen Linie H (LK). Zuerst werden die Randpunkte, ausge­ hend vom untersten Ende, auf der Bezugslinie VSL in horizontale Richtung zu beiden Enden hin gesucht. So erhält man die an der linken bzw. rechten Seite bezüglich der Bezugslinie VSL ange­ ordneten Randpunkte P (L0) der weißen Linie 12 und P (R0) der weißen Linie 13.
Als nächstes werden die Randpunkte vom Punkt PS1 ausgehend, welcher am zweiten Punkt vom untersten Ende aus angeordnet ist, in horizontale Richtung zu beiden Enden hin gesucht. So erhält man die an der linken bzw. rechten Seite bezüglich der Bezugs­ linie VSL angeordneten Randpunkte P (L1) der weißen Linie 12 und P (R1) der weißen Linie 13.
Dieses Verfahren wird sukzessive nach oben hin durchgeführt, so daß man die Randpunkte des geteiltes Bildes erhält. Als Ergeb­ nis ist es möglich, im zweiten Bildabschnitt CG nur die End­ punkte des Paares von weißen Linien 12 und 13 auf beiden Seiten der Spur, auf welcher das eigene Fahrzeug fährt, zu extrahie­ ren. Unter Verwendung der extrahierten Randpunkte werden nach der Methode der kleinsten Fehlerquadrate genäherte Linien er­ zeugt und als die weißen Linien 12 und 13 detektiert. Die CPU 4a dient als Einrichtung zum Setzen eines unteren FOE (Brenn­ punkt der Verlängerung), so daß die genäherten Linien der de­ tektierten weißen Linien 12 und 13 so verlängert werden, daß ihr Kreuzungspunkt als FOE' im zweiten Bildabschnitt CG gesetzt wird. Wie oben beschrieben wurde, ist, da die weißen Linien 12 und 13 im zweiten Bildabschnitt CG vertikal komprimiert sind, der Kreuzungspunkt FOE' der verlängerten Linien 12 und 13 im zweiten Bildabschnitt CG bezüglich des FOE im ersten Bildab­ schnitt DG versetzt. Wie aus Fig. 6 ersichtlich ist, kann der vertikale Versatz ΔS zwischen FOE' und FOE, da er durch den Ort der Kamera, die Form des Prismas usw. definiert ist, vorab in dem ROM 4b abgespeichert werden. In diesem Fall dient die CPU 4a als Einrichtung zum Setzen des oberen FOE. Und zwar wird der auf die oben beschriebene Weise gesetzte FOE' um den Versatz ΔS nach oben verschoben, so daß der FOE im ersten Bildabschnitt DG gesetzt werden kann.
Analog wird das an beiden Seiten der eigenen Spur angeordnete Paar von weißen Linien 12 und 13 im zweiten Bildabschnitt CG bezüglich der Pixeldaten D3 des nach Δt aufgenommenen Bildes detektiert. Der Kreuzungspunkt der verlängerten Linien der detektierten weißen Linien 12 und 13 wird als FOE' gesetzt. Der FOE' wird zum Setzen des FOE um den in dem ROM 4b abgespeicher­ ten Versatz ΔS nach oben verschoben. Aus diesem Grund muß, wenn z. B. das Bild der weißen Linien im ersten Bildabschnitt DG in einer dunklen Umgebung (nachts oder innerhalb eines Tunnels) schwierig aufzunehmen ist, zum Aufnehmen der weißen Linien im zweiten Bildabschnitt CG nur die nähere Umgebung des hinteren Endes des Fahrzeuges mit Licht beleuchtet werden. Deshalb kann zu diesem Zweck eine kleine und kostengünstige Lichtquelle verwendet werden. Weiter ist, da das Licht nach unten gerichtet ist, das auf das nachfolgende Fahrzeug gerichtete Licht weniger blendend.
Sobald der FOE gesetzt ist, fordert die CPU 4a die optischen Flüsse an, so daß sie die Gefahr für das auf der benachbarten Spur fahrende andere Fahrzeug oder dass in derselben Spur nach­ folgende Fahrzeug detektieren kann. Im folgenden wird, nun in Bezug auf Fig. 7, das Verfahren des Anforderns der optischen Flüsse erklärt. Zuerst werden aus dem ersten Bildspeicher 2a die Pixeldaten D2 gewonnen. Im zum Zeitpunkt t aufgenommenen Bild wird ein sich in eine radiale Richtung von dem wie oben beschrieben gesetzten FOE zu einem bestimmten interessierenden Punkt erstreckendes rechteckiges Fenster gesetzt (Fig. 7A). Als nächstes werden aus dem zweiten Bildspeicher 2b die Pixeldaten D3 gewonnen. Im zum Zeitpunkt t + Δt aufgenommenen Bild wird, während das Fenster Punkt für Punkt in die sich radial von dem FOE erstreckende Richtung verschoben wird, der Absolutwert der Helligkeitswertdifferenz zwischen jedem der das Fenster zum Zeitpunkt t bildenden Pixel und dem entsprechenden Pixel zum Zeitpunkt t + Δt ermittelt. Und zwar wird der Absolutwert zwi­ schen dem Pixel P zum Zeitpunkt t (Fig. 7A) und dem entspre­ chenden Pixel Q zum Zeitpunkt t + Δt (Fig. 7B) ermittelt. Der Verschiebebetrag des Fensters, wenn die Summe der so ermittel­ ten Helligkeitswertdifferenzen minimal ist, wird als der opti­ sche Fluß des interessierenden Punktes verwendet.
Obiges Verfahren wird für alle Punkte im ersten Bildabschnitt DG des aufgenommenen Bildes wiederholt, so daß die optischen Flüsse innerhalb des ersten Bildabschnittes DG ermittelt wer­ den. Das neben dem eigenen Fahrzeug fahrende andere Fahrzeug nähert sich dem eigenen Fahrzeug mit geringer Möglichkeit/Wahr­ scheinlichkeit. Deshalb ist es schwierig, die optischen Flüsse im zweiten Bildabschnitt CG, der ein Bild in der näheren Umge­ bung des eigenen Fahrzeuges darstellt, zu detektieren. Um einem solchen Nachteil abzuhelfen, werden die optischen Flüsse nur im ersten Bildabschnitt DG detektiert. So kann die Bildverarbei­ tung für den zweiten Bildabschnitt CG weggelassen werden, wo­ durch die Verarbeitungsgeschwindigkeit der CPU 4a erhöht ist.
Wenn die ermittelten optischen Flüsse im FOE konvergieren, bedeutet dies, daß das auf der benachbarten Spur fahrende oder auf derselben Spur nachfolgende andere Fahrzeug mit langsamerer Geschwindigkeit fährt als das eigene Fahrzeug. Das heißt, das andere Fahrzeug bleibt hinter dem eigenen Fahrzeug zurück. Wenn umgekehrt die ermittelten optischen Flüsse vom FOE weg diver­ gieren, nähert sich das andere Fahrzeug dem eigenen Fahrzeug.
Alle von der Szenerie und den Markierungen auf der Straße er­ zeugten optischen Flüsse im ersten Bildabschnitt DG konvergie­ ren in den FOE und können somit leicht von dem sich nähernden benachbarten oder folgenden Fahrzeug unterschieden werden. Die Länge der von dem benachbarten oder folgenden Fahrzeug erzeug­ ten optischen Flüsse ist proportional zur Relativgeschwindig­ keit des eigenen Fahrzeugs in Bezug auf das andere benachbarte oder nachfolgende Fahrzeug. Daher wird, wenn die Länge des von dem FOE divergierenden optischen Flusses eine vorgeschriebene Länge überschreitet, entschieden, daß sich das andere Fahrzeug dem eigenen Fahrzeug abrupt nähert. Um den Fahrer von dieser Tatsache zu informieren, wird durch einen Laut von dem Laut­ sprecher 6b eine Warnung ausgegeben, daß sich ein Fahrzeug nähert. Ansonsten wird im Anzeigebereich 6a eine Anzeige ge­ macht, daß sich das andere Fahrzeug nähert.
Wenn andererseits von einem Fahrzeug-Rückwärtsfahrt-Detektions­ sensor ein Rückwärtsfahrtsignal S2 an den Mikrocomputer 4 aus­ gegeben wird, zeigt die CPU 4a nur den zweiten Bildabschnitt CG des von der Kamera 1 aufgenommenen Bildes in der näheren Umge­ bung des eigenen Fahrzeuges an. Daher ist dadurch, daß der erste Bildabschnitt, der, wenn das Fahrzeug rückwärts fährt, nicht berücksichtigt werden muß, nicht angezeigt wird, die Sicht verbessert. Weiter ist es, da das von der Kamera 1 aufge­ nommene Bild automatisch von dem Anzeigebereich 6a angezeigt wird, wenn mit dem eigenen Fahrzeug rückwärts gefahren wird, nicht erforderlich, daß der Benutzer (Fahrer) den Anzeigebe­ reich 6a mittels eines manuellen Schalters ein-/ausschaltet. So erspart sich der Benutzer die Arbeit des Ein-/Ausschaltens des manuellen Schalters.
Wie oben beschrieben, wird, wenn das eigene Fahrzeug vorwärts fährt, die Hecküberwachung durch Detektion der optischen Flüsse auf dem durch die Kamera zum Detektieren des sich dem eigenen Fahrzeug nähernden anderen Fahrzeuges aufgenommenen Bild durch­ geführt. Andererseits wird, wenn das eigene Fahrzeug rückwärts fährt, die Hecküberwachung durch Auswahl des durch das Prisma 2 in dem Anzeigebereich 6b vergrößerten Bildes in der näheren Umgebung des Fahrzeuges durchgeführt. So ist die Hecküberwa­ chung sowohl auf das Vorwärtsfahren als auch auf das Rückwärts­ fahren des Fahrzeugs hin angepaßt, ohne daß zwei Kameras be­ nutzt werden und/oder die Kamera bewegt wird.
Weiter ist, da der untere Abschnitt des durch die Kamera auf­ nehmbaren Bereiches durch das Prisma 2 vergrößerbar ist, die Auflösung des ersten Bildabschnittes GD nicht verringert. Wei­ ter kann, da der zweite Bildabschnitt CG für beliebige andere Zwecke (die Hecküberwachung, während das Fahrzeug rückwärts fährt, und während des Einstellens des FOE) als zur Detektion des optischen Flusses verwendet werden kann, das Bild in der näheren Umgebung des Fahrzeuges aufgenommen werden, ohne daß die Detektion der von dem aus einer großen Entfernung heranna­ henden Fahrzeug herrührenden optischen Flüsse dadurch behindert wird, und zu anderen Zwecken als zu Detektion der optischen Flüsse verwendet werden.
In Bezug auf das in Fig. 8 gezeigte Flußdiagramm, das die Ver­ arbeitungsweise der CPU 4a veranschaulicht, wird im folgenden eine detaillierte Erklärung der Funktionsweise des Hecküber­ wachungssystems für ein Fahrzeug gegeben.
Zuerst wird, falls von dem Rückwärtsgang-Detektionssensor 5 ein Fahrzeug-Rückwärtsfahrt-Signal S1 ausgegeben wird ("J" in Schritt SP1), unter der Entscheidung, daß das Fahrzeug rück­ wärts fährt, der zweite Bildabschnitt CG in dem Anzeigebereich 6a angezeigt (Schritt SP2). Falls kein Fahrzeug-Rückwärtsfahrt- Signal S1 ausgegeben wird ("N" in Schritt SP1), werden unter der Entscheidung, daß das Fahrzeug vorwärts fährt oder vor dem Anfahren stillsteht, die zum Zeitpunkt t aufgenommenen Bild­ daten D1, wie sie in Fig. 4 gezeigt sind, von der Kamera 1 zum Bereitstellen der in den ersten Bildspeicher 2a abzuspeichern­ den Pixeldaten D2 abgerufen (Schritt S P3).
Jedes zu einem Zeitpunkt t + Δt aufgenommene Bilddatum D1 wird abgerufen, so daß die im zweiten Bildspeicher 2b abzuspeichern­ den Pixeldaten D3 bereitgestellt werden (Schritt SP4). Die Pixeldaten D2 und D3 werden durch einander geteilt, so daß das entsprechende geteilte Bild geliefert wird (Schritt SP5). Die weißen Linien an beiden Seiten der Spur, in der das eigene Fahrzeug fährt, werden detektiert (Schritt SP6). Als nächstes wird der Kreuzungspunkt der verlängerten Linien der weißen Linien innerhalb des detektierten Bildabschnittes CG als FOE' gesetzt (Schritt SP7).
Der in dem ROM 4b abgespeicherte Versatz ΔS wird geholt (Schritt SP8), und der im Schritt SP8 gesetzte FOE' wird zum Setzen des FOE um den Versatz ΔS verschoben (Schritt SP9). Als nächstes werden zum Detektieren des Ausmaßes der von dem in der benachbarten Spur fahrenden oder dem eigenen Fahrzeug in der­ selben Spur folgenden Fahrzeug ausgehenden Gefahr die optischen Flüsse innerhalb des ersten Bildabschnittes DG detektiert (Schritt SP10). Falls die ermittelten optischen Flüsse in eine von dem FOE divergierende Richtung weisen und eine Länge auf­ weisen, die eine vorgeschriebene Länge überschreitet ("J" in Schritt SP11), wird eine Entscheidung getroffen, daß sich das andere Fahrzeug dem eigenen Fahrzeug nähert. In diesem Fall wird durch einen Laut des Lautsprechers 6b die Warnung ausgege­ ben, daß sich ein Fahrzeug nähert, und im Anzeigebereich 6a eine Darstellung ausgegeben, die eine abrupte Annäherung des anderen Fahrzeuges anzeigt. Danach kehrt das Verfahren zu Schritt SP1 zurück. Falls die optischen Flüsse in eine in den FOE konvergierende Richtung weisen oder eine Länge aufweisen, die die vorgeschriebene Länge in divergierende Richtung nicht überschreitet, wird eine Entscheidung getroffen, daß sich kein Fahrzeug nähert ("N" in Schritt SP11). Das Verfahren kehrt direkt zu Schritt SP1 zurück.
Bei der obigen Ausführungsform wird zum Setzen des FOE der gesetzte FOE' um den zuvor in dem ROM 4b abgespeicherten Ver­ satz ΔS verschoben, wodurch die Verarbeitungsgeschwindigkeit der CPU 4a erhöht ist. Falls kein Bedarf besteht, die Verarbei­ tungsgeschwindigkeit der CPU 4a zu erhöhen, wird ein Versatz­ winkel zwischen den weißen Linien innerhalb des zweiten Bild­ abschnittes CG berechnet, und ebenso zwischen den weißen Linien innerhalb des ersten Bildabschnittes DG, welche durch die Befe­ stigungsposition der Kamera und die Form der Linse bestimmt sind. Der Kreuzungspunkt der verlängerten Linien der weißen Linien im zweiten Bildabschnitt CG, wenn sie um den Versatz­ winkel verschoben sind, ist als FOE definierbar.
Bei der obigen Ausführungsform weist das Prisma 2 mit dem obe­ ren Abschnitt 2a mit einer gleichförmigen Dicke und dem unteren Abschnitt 2b mit einer nach unten größer werdenden Dicke einen konstanten Prismenwinkel auf, so daß die Änderung des Brechungsindex für das von dem oberen Abschnitt 2a und 2b des Prismas 2 einfallende Licht verringert ist, wodurch der tote Winkel an der Grenze zwischen dem oberen Abschnitt 2a und dem unteren Abschnitt 2b des Prismas 2 verringert ist. Jedoch kann das Prisma 2 auch so konfiguriert sein, daß der Prismenwinkel des oberen Abschnittes 2a nach unten hin kontinuierlich zu­ nimmt, wodurch der Brechungsindex der optischen Achse des vom oberen Abschnitt 2a und vom unteren Abschnitt 2b einfallenden Lichtes kontinuierlich verändert wird. Dies erlaubt eine weite­ re Verringerung des toten Winkels.

Claims (9)

1. Hecküberwachungssystem für ein Fahrzeug, mit:
einer an einem Fahrzeug angeordneten Bildaufnahmeeinrich­ tung (1) zum Aufnehmen eines Bildes des Hecks des Fahrzeugs zum Liefern eines Bildes;
einer Einrichtung (4a-1) zum Detektieren, als optischer Fluß, der Bewegung der entsprechenden. Punkte von zwei durch die Bildaufnahmeeinrichtung (1) zu zwei Zeitpunkten aufgenommenen Bildern;
einer Gefahreinschätzungseinrichtung (4a-2) zum Detektie­ ren auf Grundlage der optischen Flüsse von dem anderen Fahr­ zeug, ob das in der näheren Umgebung das eigenen Fahrzeugs fah­ rende andere Fahrzeug sich dem eigenen Fahrzeug nähert;
einer Bildaufnahme-Vergrößerungseinrichtung (2) zum Ver­ größern eines unteren Abschnitts des durch die Bildaufnahme­ einrichtung aufnehmbaren Bereiches; und
einer Verwendungseinrichtung (20) zum Verwenden des dem unteren Abschnitt entsprechenden Bildes zu einem anderen Zweck als dem Detektieren der optischen Flüsse.
2. Hecküberwachungssystem nach Anspruch 1, wobei die Be­ nutzungseinrichtung (20) eine Anzeigeeinrichtung (6a) zum An­ zeigen des durch die Bildaufnahmeeinrichtung (1) aufgenommenen Bildes aufweist.
3. Hecküberwachungssystem gemäß Anspruch 1, das weiter eine Fahrzeug-Rückwärtsfahrt-Detektionseinrichtung (5) zum Detek­ tieren, ob das eigene Fahrzeug rückwärts fährt, aufweist, und wobei die Anzeigeeinrichtung (6a) das von der Bildaufnah­ meeinrichtung (1) aufgenommene Bild anzeigt, wenn von der Fahr­ zeug-Rückwärtsfahrt-Detektionseinrichtung (5) detektiert wird, daß das Fahrzeug rückwärts fährt.
4. Hecküberwachungssystem gemäß Anspruch 1, wobei die Einrich­ tung (4a-1) zum Detektieren des optischen Flusses, wenn von der Fahrzeug-Rückwärtsfahrt-Detektionseinrichtung (5) nicht detek­ tiert wird, daß das Fahrzeug rückwärts fährt, die optischen Flüsse detektiert.
5. Hecküberwachungssystem gemäß Anspruch 1, wobei das von der Bildaufnahmeeinrichtung (1) erhaltene Bild einen ersten Bild­ abschnitt (DG), der einem oberen Teil des von der Bildaufnah­ meeinrichtung (1) aufnehmbaren Bereiches entspricht, und einen zweiten Bildabschnitt (CG), der einem unteren Abschnitt des­ selben entspricht und der von der Bildaufnahme-Vergrößerungs­ einrichtung (2) vergrößert ist, aufweist, und wobei die Anzeigeeinrichtung (6a) nur den zweiten Bild­ abschnitt (CG) anzeigt.
6. Hecküberwachungssystem gemäß Anspruch 1, wobei das von der Bildaufnahmeeinrichtung (1) erhaltene Bild einen ersten Bild­ abschnitt (DG), der einem oberen Teil des von der Bildaufnah­ meeinrichtung (1) aufnehmbaren Bereichs entspricht, und einen zweiten Bildabschnitt (CG), der einem von der Bildaufnahme- Vergrößerungs-Einrichtung (2) vergrößerten unteren Abschnitt desselben entspricht, aufweist, und wobei die Einrichtung (4a-1) zum Detektieren des optischen Flusses den optischen Fluß aus dem ersten Bildabschnitt (DG) detektiert.
7. Hecküberwachungssystem gemäß Anspruch 1, wobei der Verwen­ dungsabschnitt (20) aufweist:
eine Weiße-Linien-Detektionseinrichtung (4a-3) zum Detek­ tieren eines Paares von an beiden Seiten des eigenen Fahrzeuges angeordneten weißen Linien durch Verarbeitung des ersten Bild­ abschnittes (DG),
eine Unterer-FOE-Setz-Einrichtung (4a-4) zum Setzen des Kreuzungspunktes von verlängerten Linien der durch die Weiße- Linien-Detektionseinrichtung (4a-3) detektierten weißen Linien als einen zweiten FOE (Brennpunkt der Verlängerung) des zweiten Bildabschnittes (CG), und
eine Oberer-FOE-Setz-Einrichtung (4a-5) zum Setzen des ersten FOE des zweiten Bildabschnittes (CG) auf Grundlage des zweiten Bildabschnittes (CG), und
wobei die Detektionseinrichtung (4a-1) zum Detektieren des optischen Flusses die optischen Flüsse aus dem ersten Bildab­ schnitt (DG) durch Verwendung des durch die Oberer-FOE-Setz- Einrichtung (4a-5) gesetzten ersten FOE detektiert.
8. Hecküberwachungssystem gemäß Anspruch 7, wobei die Oberer- FOE-Setz-Einrichtung (4a-5) eine Einrichtung (4b) zum Abspei­ chern eines Versatzes (ΔS) zwischen dem ersten FOE und dem zweiten FOE aufweist und den zweiten FOE durch Verschieben des ersten FOE um den Versatz (ΔS) setzt.
9. Hecküberwachungssystem gemäß Anspruch 1, wobei die Bildauf­ nahmebereich-Vergrößerungs-Einrichtung (2) ein Prisma (2) ist, das einen unteren Abschnitt (2a) aufweist, welcher nach unten hin dicker wird, so daß der untere Abschnitt (CG) des durch die Bildaufnahmeeinrichtung aufnehmbaren Bereiches vergrößert wird, und einen mit dem unteren Abschnitt (2a) integrierten und eine gleichförmige Dicke aufweisenden oberen Abschnitt (2b) auf­ weist.
DE10017072A 1999-04-06 2000-04-06 Hecküberwachungssystem für ein Fahrzeug Expired - Fee Related DE10017072C2 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11098591A JP2000295604A (ja) 1999-04-06 1999-04-06 車両用後側方監視装置

Publications (2)

Publication Number Publication Date
DE10017072A1 true DE10017072A1 (de) 2000-10-26
DE10017072C2 DE10017072C2 (de) 2002-10-17

Family

ID=14223896

Family Applications (1)

Application Number Title Priority Date Filing Date
DE10017072A Expired - Fee Related DE10017072C2 (de) 1999-04-06 2000-04-06 Hecküberwachungssystem für ein Fahrzeug

Country Status (3)

Country Link
US (1) US6259359B1 (de)
JP (1) JP2000295604A (de)
DE (1) DE10017072C2 (de)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1197937A1 (de) * 2000-10-11 2002-04-17 Sharp Kabushiki Kaisha Vorrichtung zur Überwachung der Umgebung eines beweglichen Körpers
DE102004046101A1 (de) * 2004-09-23 2006-09-21 Daimlerchrysler Ag Verfahren, Sicherheitsvorrichtung und Verwendung der Sicherheitsvorrichtung zur Früherkennung von Kraftfahrzeugkollisionen
DE102007016956A1 (de) * 2007-04-05 2008-10-09 Continental Teves Ag & Co. Ohg Fahrerassistenzsystem
US7811011B2 (en) 2006-02-06 2010-10-12 Leopold Kostal Gmbh & Co. Kg Camera arrangement behind an inclined pane
US9428110B2 (en) 2013-09-24 2016-08-30 Mekra Lang Gmbh & Co. Kg Visual system for a vehicle

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6326613B1 (en) 1998-01-07 2001-12-04 Donnelly Corporation Vehicle interior mirror assembly adapted for containing a rain sensor
US6124886A (en) 1997-08-25 2000-09-26 Donnelly Corporation Modular rearview mirror assembly
US8288711B2 (en) 1998-01-07 2012-10-16 Donnelly Corporation Interior rearview mirror system with forwardly-viewing camera and a control
US6445287B1 (en) 2000-02-28 2002-09-03 Donnelly Corporation Tire inflation assistance monitoring system
US6278377B1 (en) 1999-08-25 2001-08-21 Donnelly Corporation Indicator for vehicle accessory
US6420975B1 (en) 1999-08-25 2002-07-16 Donnelly Corporation Interior rearview mirror sound processing system
JP3624769B2 (ja) * 1999-09-30 2005-03-02 株式会社豊田自動織機 車両後方監視装置用画像変換装置
JP2001213254A (ja) * 2000-01-31 2001-08-07 Yazaki Corp 車両用側方監視装置
DE10007501A1 (de) * 2000-02-18 2001-09-13 Daimler Chrysler Ag Verfahren und Vorrichtung zur Erfassung und Überwachung einer Mehrzahl von vorausfahrenden Fahrzeugen
DE10109680B4 (de) * 2000-02-29 2009-02-26 Aisin Seiki K.K., Kariya Einparkhilfsgerät und Einparkhilfsverfahren für ein Fahrzeug
WO2001064481A2 (en) 2000-03-02 2001-09-07 Donnelly Corporation Video mirror systems incorporating an accessory module
US7480149B2 (en) 2004-08-18 2009-01-20 Donnelly Corporation Accessory module for vehicle
US6396408B2 (en) 2000-03-31 2002-05-28 Donnelly Corporation Digital electrochromic circuit with a vehicle network
EP1303140A4 (de) * 2000-07-19 2007-01-17 Matsushita Electric Ind Co Ltd Überwachungssystem
US7365779B2 (en) * 2000-09-14 2008-04-29 Fujitsu Ten Limited Image processing apparatus for selectively storing specific regions of an image
CN1599859A (zh) * 2001-03-29 2005-03-23 昭和电工株式会社 用于热交换器中的集管、热交换器及其制造方法
US6552656B2 (en) * 2001-04-12 2003-04-22 Horizon Navigation, Inc. Method and apparatus for generating notification of changed conditions behind a vehicle
US6542085B1 (en) * 2001-10-04 2003-04-01 Whetron Industrial Co., Ltd. Distance measuring and monitoring device equipped automobile reverse radar
JP3802394B2 (ja) * 2001-10-16 2006-07-26 オムロン株式会社 車載用レーダ装置
WO2003065084A1 (en) 2002-01-31 2003-08-07 Donnelly Corporation Vehicle accessory module
US7266220B2 (en) * 2002-05-09 2007-09-04 Matsushita Electric Industrial Co., Ltd. Monitoring device, monitoring method and program for monitoring
US6859148B2 (en) * 2002-10-30 2005-02-22 Ford Global Technologies, Llc Blind spot warning system for an automotive vehicle
US6930593B2 (en) * 2003-02-24 2005-08-16 Iteris, Inc. Lane tracking system employing redundant image sensing devices
GB0305304D0 (en) * 2003-03-07 2003-04-09 Qinetiq Ltd Scanning apparatus and method
JP3879696B2 (ja) * 2003-04-25 2007-02-14 日産自動車株式会社 運転支援装置
US20050128060A1 (en) * 2003-11-19 2005-06-16 Mark Rennick Universally usable object detection system and method
JP3897305B2 (ja) * 2004-02-06 2007-03-22 シャープ株式会社 車両周辺監視装置、車両周辺監視方法、制御プログラムおよび可読記録媒体
WO2006063827A1 (en) 2004-12-15 2006-06-22 Magna Donnelly Electronics Naas Limited An accessory module system for a vehicle window
DE102005003786A1 (de) * 2005-01-19 2006-07-20 Valeo Schalter Und Sensoren Gmbh Umfelderkennungssystem eines Kraftfahrzeugs
US8194132B2 (en) 2006-01-20 2012-06-05 Old World Industries, Llc System for monitoring an area adjacent a vehicle
JP4856656B2 (ja) * 2008-01-22 2012-01-18 富士重工業株式会社 車両検出装置
US8570374B2 (en) 2008-11-13 2013-10-29 Magna Electronics Inc. Camera for vehicle
DE102009000550B4 (de) * 2009-02-02 2018-10-04 Ford Global Technologies, Llc Weitwinkelbildgebungssystem für die Bereitstellung eines Bildes der Umgebung eines Fahrzeugs, insbesondere eines Kraftfahrzeugs
CN102055956B (zh) * 2009-11-02 2017-05-10 通用汽车环球科技运作公司 车载三维视频系统及用其监测车辆周围环境的方法
EP2701093B1 (de) 2012-08-20 2016-06-22 Honda Research Institute Europe GmbH Abtastsystem und Verfahren zur Erkennung sich bewegender Objekte
CN103522949B (zh) * 2012-12-21 2016-04-13 Tcl康钛汽车信息服务（深圳）有限公司 一种快速显示倒车影像的方法及车机系统
JP6265095B2 (ja) * 2014-09-24 2018-01-24 株式会社デンソー 物体検出装置
US20160193998A1 (en) * 2015-01-02 2016-07-07 Atieva, Inc. Automatically Activated Vehicle Obstacle Viewing System
JP7266165B2 (ja) * 2017-12-19 2023-04-28 パナソニックＩｐマネジメント株式会社 撮像装置、撮像システム、および表示システム
CN113114938B (zh) * 2021-04-12 2022-07-19 滁州博格韦尔电气有限公司 一种基于电子信息的目标精确监控系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS54150125A (en) * 1978-05-17 1979-11-26 Asahi Optical Co Ltd Focus detector
AU554186B2 (en) * 1981-10-26 1986-08-14 Sony Corporation Apparatus for detecting distance to an object
JP2887039B2 (ja) * 1993-03-26 1999-04-26 三菱電機株式会社 車両周辺監視装置
JP3064759B2 (ja) * 1993-09-28 2000-07-12 株式会社日立製作所 車両の周囲を監視する装置、車両の運転支援システムおよび運転支援装置
DE9411735U1 (de) * 1994-07-20 1994-11-10 Huang Shih Hsien System zum Beobachten des rückwärtigen Raumes eines Kraftfahrzeuges
WO1996034363A1 (fr) * 1995-04-26 1996-10-31 Hitachi, Ltd. Processeur d'images pour vehicule
JP3214364B2 (ja) * 1996-08-14 2001-10-02 富士電機株式会社 車間距離測定装置
JPH10208047A (ja) * 1997-01-23 1998-08-07 Nissan Motor Co Ltd 車載用走行環境認識装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1197937A1 (de) * 2000-10-11 2002-04-17 Sharp Kabushiki Kaisha Vorrichtung zur Überwachung der Umgebung eines beweglichen Körpers
US7295229B2 (en) 2000-10-11 2007-11-13 Sharp Kabushiki Kaisha Surround surveillance apparatus for mobile body
DE102004046101A1 (de) * 2004-09-23 2006-09-21 Daimlerchrysler Ag Verfahren, Sicherheitsvorrichtung und Verwendung der Sicherheitsvorrichtung zur Früherkennung von Kraftfahrzeugkollisionen
DE102004046101B4 (de) * 2004-09-23 2007-01-18 Daimlerchrysler Ag Verfahren, Sicherheitsvorrichtung und Verwendung der Sicherheitsvorrichtung zur Früherkennung von Kraftfahrzeugkollisionen
US7811011B2 (en) 2006-02-06 2010-10-12 Leopold Kostal Gmbh & Co. Kg Camera arrangement behind an inclined pane
DE102007016956A1 (de) * 2007-04-05 2008-10-09 Continental Teves Ag & Co. Ohg Fahrerassistenzsystem
US9428110B2 (en) 2013-09-24 2016-08-30 Mekra Lang Gmbh & Co. Kg Visual system for a vehicle

Also Published As

Publication number Publication date
US6259359B1 (en) 2001-07-10
JP2000295604A (ja) 2000-10-20
DE10017072C2 (de) 2002-10-17

Similar Documents

Publication Publication Date Title
DE10017072C2 (de) Hecküberwachungssystem für ein Fahrzeug
DE60005426T2 (de) Rückblicksüberwachungssystem für Fahrzeuge
EP3501897B1 (de) Sichtsystem zur erfassung einer fahrzeugumgebung
DE60009976T2 (de) Rück- und Seitenblickmonitor mit Kamera für Fahrzeug
DE60009114T2 (de) Vorrichtung zur unterstützung von kraftfahrzeugführern
DE60101440T2 (de) Vorrichtung zur Überwachung der Umgebung eines beweglichen Körpers
DE102006008703B4 (de) Fahrunterstützungssystem und Navigationssystem für ein Fahrzeug
EP2197707B1 (de) Vorrichtung zum überwachen der umgebung eines kraftfahrzeugs
DE19816054B4 (de) Kamerasystem zum Überwachen einer nicht unmittelbar einsehbaren Umgebung eines Fahrzeugs
DE10114932B4 (de) Dreidimensionale Umfelderfassung
EP2197706B1 (de) Verfahren zur fahrerinformation in einem kraftfahrzeug
DE10108646A1 (de) Gefahrenentscheidungsvorrichtung für ein Kraftfahrzeug und Umgebungsüberwachungsvorrichtung für dasselbe
EP2805183B1 (de) Verfahren und vorrichtung zum visualisieren der umgebung eines fahrzeugs
DE102012025322B4 (de) Kraftfahrzeug mit Kamera-Monitor-System
DE4410406A1 (de) Vorrichtung zum Überwachen der Umgebung eines Fahrzeugs
DE10317044A1 (de) Freiraumüberwachung bei Kraftfahrzeugen
EP2483107B1 (de) Verfahren und vorrichtung zur kombinierten visuellen anzeige von video- und abstandsdaten einer verkehrssituation
DE10035223A1 (de) Vorrichtung und Verfahren zur Überwachung der Umgebung eines Objekts
DE102005045017A1 (de) Verfahren und Fahrerassistenzsystem zur sensorbasierten Anfahrtsteuerung eines Kraftfahrzeugs
DE19860676A1 (de) Visualisierungseinrichtung für die von wenigstens einem Scheinwerfer eines Fahrzeugs bewirkte Beleuchtung vor dem Fahrzeug
DE112016002268T5 (de) Bildverarbeitungsvorrichtung, elektronisches spiegelsystem und bildverarbeitungsverfahren
DE10103924A1 (de) Vorrichtung zur Umgebungsüberwachung eines Fahrzeugs
DE102018108751B4 (de) Verfahren, System und Vorrichtung zum Erhalten von 3D-Information von Objekten
EP2857275A2 (de) Verfahren zum Betrieb eines Fahrerassistenzsystems zum Rangieren und/oder Parken
DE102007025147A1 (de) System zur Spurverlassenswarnung und/oder Spurhaltefunktion

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
D2 Grant after examination
8364 No opposition during term of opposition
8339 Ceased/non-payment of the annual fee