DE102010001954A1 - Umgebungsüberwachungsvorrichtung für ein Fahrzeug - Google Patents

Umgebungsüberwachungsvorrichtung für ein Fahrzeug Download PDF

Info

Publication number
DE102010001954A1
DE102010001954A1 DE102010001954A DE102010001954A DE102010001954A1 DE 102010001954 A1 DE102010001954 A1 DE 102010001954A1 DE 102010001954 A DE102010001954 A DE 102010001954A DE 102010001954 A DE102010001954 A DE 102010001954A DE 102010001954 A1 DE102010001954 A1 DE 102010001954A1
Authority
DE
Germany
Prior art keywords
risk
degree
obstacle
image
attention
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE102010001954A
Other languages
English (en)
Inventor
Toshiyasu Toyota-shi Katsuno
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of DE102010001954A1 publication Critical patent/DE102010001954A1/de
Ceased legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/002Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for parking purposes, e.g. for warning the driver that his vehicle has contacted or is about to contact an obstacle
    • B60Q9/004Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for parking purposes, e.g. for warning the driver that his vehicle has contacted or is about to contact an obstacle using wave sensors
    • B60Q9/005Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for parking purposes, e.g. for warning the driver that his vehicle has contacted or is about to contact an obstacle using wave sensors using a video camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/30Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8033Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for pedestrian protection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Transportation (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

Eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug, die aufweist: eine Bildbeschaffungseinheit (20), die ein Bild einer Fahrzeugumgebung beschafft; eine Hinderniserkennungseinrichtung (41) zur Erkennung eines Hindernisses in dem durch die Bildbeschaffungseinheit (20) beschafften Bild, zur Berechnung einer Position des Hindernisses und zur Berechnung einer Erfassungszuverlässigkeit, die eine Genauigkeit der Erkennung des Hindernisses angibt; eine Risikogradberechnungseinrichtung (44) zur Berechnung eines Risikograds, der einen Grad eines Risikos einer Kollision zwischen dem Hindernis und dem Fahrzeug angibt, und eine Aufmerksamkeitserregungseinheit (46), die ein Aufmerksamkeitserregungssignal zur Erregung der Aufmerksamkeit eines Fahrers auf der Grundlage der Erfassungszuverlässigkeit und des Risikograds ausgibt.

Description

  • HINTERGRUND DER ERFINDUNG
  • 1. GEBIET DER ERFINDUNG
  • Die Erfindung betrifft eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug, das ein Bild von der Fahrzeugumgebung beschafft und ein Signal auf der Grundlage des beschafften Bildes ausgibt, um die Aufmerksamkeit des Fahrers zu erregen.
  • 2. Beschreibung des Stands der Technik
  • Eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug ist vorgeschlagen worden, bei der eine Bildbeschaffungseinheit wie eine Kamera an dem Fahrzeug angebracht ist, ein Bild der Fahrzeugumgebung, das durch die Bildbeschaffungseinheit wie eine Kamera beschafft worden ist, auf einer Anzeige angezeigt wird, die an einer Position innerhalb des Fahrzeugs vorgesehen ist, an der die Anzeige durch den Fahrer betrachtet werden kann, und die angezeigten Bilder den Sehbereich des Fahrers steigern.
  • Beispielsweise offenbaren die japanische Patentanmeldungsveröffentlichung Nr. 2007-087203 ( JP-A-2007-087203 ), die japanische Patentanmeldungsveröffentlichung Nr. 2008-027309 ( JP-A-2008-027309 ) und die japanische Patentanmeldungsveröffentlichung Nr. 2008-135856 ( JP-A-2008-135856 ) derartige Umgebungsüberwachungsvorrichtungen für ein Fahrzeug, bei der Bilder der Fahrzeugumgebung beschafft werden, das Vorhandensein eines Hindernisses wie eines Fußgängers auf der Grundlage des beschafften Bildes erkannt wird, und das Vorhandensein des Hindernisses angezeigt wird, um die Aufmerksamkeit des Fahrers zu erregen. Als Ergebnis davon, dass die Aufmerksamkeit des Fahrers auf das Vorhandensein des Hindernisses mittels der Anzeige erregt wird, kann der Fahrer auf die Anzeige schauen.
  • Daher kann die Aufmerksamkeit des Fahrers von der Zone vor dem Fahrzeug abgelenkt werden, wenn die Aufmerksamkeit des Fahrers jedes Mal erregt wird, um auf die Anzeige zu schauen, wenn ein Hindernis wie ein Fußgänger vorhanden ist.
  • In einem Fall, in dem ein Risiko, dass das Fahrzeug mit dem Hindernis kollidiert, niedrig ist, beispielsweise wenn der Abstand zwischen dem Fahrzeug und dem Hindernis ausreichend groß ist, ist es vorzuziehen, dass der Fahrer direkt in Vorwärtsrichtung des Fahrzeugs schaut, um die Aufmerksamkeit des Fahrers auf die Zone in Vorwärtsrichtung des Fahrzeugs beizubehalten, anstelle dass er durch Erregung seiner Aufmerksamkeit auf die Anzeige schaut.
  • Außerdem gibt es eine Variation in der Erfassungszuverlässigkeit (Genauigkeit der Erfassung) von Hindernissen wie Fußgängern. Wenn die Erfassungszuverlässigkeit niedrig ist, ist es ebenfalls vorzuziehen, dass der Fahrer direkt in Vorwärtsrichtung des Fahrzeugs schaut, ohne dass er durch Erregung seiner Aufmerksamkeit auf die Anzeige schaut, um die Aufmerksamkeit des Fahrers auf die Zone in Vorwärtsrichtung des Fahrzeugs beizubehalten.
  • Wenn demgegenüber ein Risiko, dass das Fahrzeug mit einem Hindernis kollidiert, hoch ist und die Erfassungszuverlässigkeit des Hindernisses hoch ist, kann eine hohe Wahrscheinlichkeit von Gefahr angenommen werden. Daher ist es notwendig, die Aufmerksamkeit des Fahrers mit höherer Zuverlässigkeit zu erregen, um ein Manöver zum Vermeiden der Gefahr zu ermöglichen.
  • Jedoch sind in den herkömmlichen Umgebungsüberwachungsvorrichtungen für Fahrzeuge Fälle wie die vorstehend Beschriebenen nicht adäquat unterschieden. Somit wird das Vorhandensein des Hindernisses angezeigt, um die Aufmerksamkeit des Fahrers zu erregen, und um den Fahrer dazu zu bringen, auf die Anzeige zu schauen, selbst wenn die Notwenigkeit zum Erregen der Aufmerksamkeit niedrig ist. Als Ergebnis kann die Aufmerksamkeit des Fahrers auf die Zone in Vorwärtsrichtung des Fahrzeugs nicht beibehalten werden.
  • Zusammenfassung der Erfindung
  • Erfindungsgemäß wird eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug bereitgestellt, die die Aufmerksamkeit des Fahrers wie erforderlich unter Berücksichtigung eines Grades für ein Risiko, dass das Fahrzeug mit einem Hindernis kollidiert, und einer Hinderniserfassungszuverlässigkeit erregen kann.
  • Eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug gemäß einer ersten Ausgestaltung der Erfindung weist auf: eine Bildbeschaffungseinheit, die ein Bild einer Fahrzeugumgebung beschafft; eine Hinderniserkennungseinrichtung zum Erkennen eines Hindernisses in dem durch die Bildbeschaffungseinheit beschafften Bild, zur Berechnung einer Position des Hindernisses und zur Berechnung einer Erfassungszuverlässigkeit, die die Genauigkeit der Erkennung des Hindernisses angibt; eine Risikogradberechnungseinrichtung zur Berechnung eines Risikogrades, das einen Grad für ein Risiko einer Kollision zwischen dem Hindernis und dem Fahrzeug angibt, und einer Aufmerksamkeitserregungseinrichtung zur Ausgabe eines Aufmerksamkeitserregungssignals zum Erregen der Aufmerksamkeit des Fahrers auf der Grundlage der Erfassungszuverlässigkeit und des Risikogrades.
  • Gemäß der ersten Ausgestaltung der Erfindung ist es möglich, eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug bereitzustellen, das die Aufmerksamkeit des Fahrers wie erforderlich erregen kann, unter Berücksichtigung eines Grades eines Risikos, das das Fahrzeug mit einem Hindernis kollidiert, und einer Hinderniserfassungszuverlässigkeit.
  • Kurze Beschreibung der Zeichnungen
  • Die vorstehenden und weitere Aufgaben, Merkmale und Vorteile der Erfindung werden anhand der nachfolgenden Beschreibung von Ausführungsbeispielen unter Bezugnahme auf die beiliegenden Zeichnungen deutlich, wobei gleiche Bezugszeichen gleiche Elemente bezeichnen, und in denen:
  • 1 ein Beispiel einer schematischen Konfiguration einer Umgebungsüberwachungsvorrichtung für ein Fahrzeug gemäß einem vorliegenden Ausführungsbeispiel veranschaulicht,
  • 2 eine Schätzrisikograd-Berechnungseinrichtung (Variante 1) gemäß dem vorliegenden Ausführungsbeispiel veranschaulicht,
  • 3 eine Schätzrisikograd-Berechnungseinrichtung (Variante 2) gemäß dem vorliegenden Ausführungsbeispiel veranschaulicht,
  • 4 eine Risikogradberechnungseinrichtung gemäß dem vorliegenden Ausführungsbeispiel veranschaulicht,
  • 5 eine Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung gemäß dem vorliegenden Ausführungsbeispiel veranschaulicht,
  • 6A bis 6C ein Beispiel für ein auf einer Anzeigeeinheit gemäß dem vorliegenden Ausführungsbeispiel angezeigtes Bild zeigt, und
  • 7 ein Beispiel für ein Flussdiagramm von Vorgängen zeigt, das durch die Umgebungsüberwachungsvorrichtung für ein Fahrzeug gemäß dem vorliegenden Ausführungsbeispiel durchgeführt wird.
  • Ausführliche Beschreibung von Ausführungsbeispielen
  • Ein Ausführungsbeispiel der Erfindung ist nachstehend unter Bezugnahme auf die beiliegenden Zeichnungen beschrieben.
  • 1 veranschaulicht ein Beispiel einer schematischen Konfiguration der Umgebungsüberwachungsvorrichtung für ein Fahrzeug gemäß dem vorliegenden Ausführungsbeispiel. Wie es in 1 gezeigt ist, weist die Umgebungsüberwachungsvorrichtung 10 für ein Fahrzeug eine Bildbeschaffungseinheit 20, eine Signalverarbeitungseinheit 30 und eine Sensoreinheit 50 auf. Eine Anzeige 60 zeigt Bildsignale, die aus der Umgebungsüberwachungsvorrichtung 10 für ein Fahrzeug (Fahrzeugsumgebungsüberwachungsvorrichtung) ausgegeben werden.
  • Die Bildbeschaffungseinheit 20 weist eine Linse 21, ein erstes Prisma 22, ein zweites Prisma 23, ein erstes Bildaufnahmeelement 24 und ein zweites Bildaufnahmeelement 25 auf. Die Signalverarbeitungseinheit 30 weist eine Referenzsignalerzeugungseinrichtung 31, eine erste Eingangssignalverarbeitungseinrichtung 32, eine zweite Eingangssignalverarbeitungseinrichtung 33, eine Bildsyntheseeinrichtung 35, eine Hinderniserkennungseinrichtung 41, eine Helligkeitsberechnungseinrichtung 42, eine (Schätzrisikograd-Berechnungseinrichtung) Einrichtung zur Berechnung eines geschätzten Risikogrades 43, eine Risikogradberechnungseinrichtung 44, eine Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45, eine Aufmerksamkeitserregungseinrichtung 46 sowie eine Zentralverarbeitungseinheit (CPU), eine Speichereinheit (Speicher) und dergleichen auf, die in der Fig. nicht gezeigt sind. Die Sensoreinheit 50 weist einen Lichtsteuerungssensor 51, einen Fahrzeugsgeschwindigkeitssensor 52, einen Lenkwinkelsensor 53 und einen Abstandssensor 54 auf.
  • Die Bildbeschaffungseinheit 20 ist beispielsweise eine Charge-Coupled-Device-Kamera (CCD-Kamera, ladungsgekoppelte Kamera), oder eine Komplementär-Metalloxydhalbleiter-(CMOS-)Kamera. Die Bildbeschaffungseinheit 20 weist eine Funktion zur Beschaffung eines Bildes einer Fahrzeugumgebung auf. Die Linse 21 ist beispielsweise eine Fischaugenlinse bzw. ein Fischaugenobjektiv. Die Linse 21 weist eine Funktion zum Sammeln des von dem Objekt emittierten Lichtes in ein Bild auf.
  • Das erste Prisma 22 und das zweite Prisma 23 sind beispielsweise aus Glas oder Quarz aufgebaut. Das erste Prisma 22 und das zweite Prisma 23 weisen eine Funktion auf, bei der das Licht eines ersten Wellenlängenbereichs von dem auftreffenden Licht aus der Linse 21 linear durchgelassen wird, und das durchgelassene Licht selektiv in das erste Bildaufnahmeelement 24 eingeführt wird. Weiterhin weisen das erste Prisma 22 und das zweite Prisma 23 ebenfalls eine Funktion auf, bei der das Licht eines zweiten Wellenlängenbereichs, das eine Wellenlänge aufweist, die länger als die des Lichtes des ersten Wellenlängenbereichs ist, von dem auftreffenden Licht aus der Linse 21 durch eine Grenzfläche des ersten Prisma 22 und des zweiten Prisma 23 reflektiert wird, und das reflektierte Licht selektiv in das zweite Bildaufnahmeelement 25 eingeführt wird.
  • In diesem Fall ist der erste Wellenlängenbereich ein Wellenlängenbereich einschließlich eines sichtbaren Lichtbereichs und ist der zweite Wellenlängenbereich ein Wellenlängenbereich eines Nah-Infrarot-Bereichs. Der erste Wellenlängenbereich kann beispielsweise lediglich der sichtbare Lichtbereich oder ein Wellenlängenbereich sein, der durch Addieren des Nah-Infrarot-Bereichs zu dem sichtbaren Lichtbereich erhalten wird. Weiterhin kann der zweite Wellenlängenbereich beispielsweise lediglich in dem Nah-Infrarot-Bereich sein, oder ein Wellenlängenbereich sein, der durch Addieren eines Infrarotbereichs zu dem Nah-Infrarot-Bereich erhalten wird.
  • Das erste Bildaufnahmeelement 24 und das zweite Bildaufnahmeelement 25 sind beispielsweise durch einen Halbleiter wie CCD oder CMOS aufgebaut. Das erste Bildaufnahmeelement 24 und das zweite Bildaufnahmeelement 25 weisen eine Funktion zum Umwandeln eines auftreffenden optischen Bildes des Objektes in elektrische Signale auf. Das erste Bildaufnahmeelement 24 und das zweite Bildaufnahmeelement 25 können eine Empfindlichkeit gegenüber dem Licht desselben Wellenlängenbereichs aufweisen, jedoch wird es vorgezogen, dass das erste Bildaufnahmeelement 24 eine Empfindlichkeit gegenüber dem Licht des ersten Wellenlängenbereichs aufweist, und dass das zweite Bildaufnahmeelement 25 eine Empfindlichkeit gegenüber dem Licht des zweiten Wellenlängenbereichs aufweist. Die durch die Umwandlung in dem ersten Bildaufnahmeelement 24 und dem zweiten Bildaufnahmeelement 25 erhaltenen elektrischen Signale werden der ersten Eingangssignalverarbeitungseinrichtung 32 und der zweiten Eingangssignalverarbeitungseinrichtung 33 der Signalverarbeitungseinheit 30 zugeführt.
  • Die Signalverarbeitungseinheit 30 weist eine Funktion zur Durchführung einer vorbestimmte Signalverarbeitung des aus der Bildbeschaffungseinheit 20 zugeführten Signals und zur Ausgabe der verarbeiteten Signale zu der Anzeigeeinheit 60 auf. Die Signalverarbeitungseinheit 30 ist beispielsweise innerhalb einer elektronischen Steuerungseinheit (ECU) vorgesehen. Die Referenzsignalerzeugungseinrichtung 31 ist eine Schaltung, die einen Oszillator aufweist, der ein Referenzsignal erzeugt. Das durch die Referenzsignalerzeugungseinrichtung 31 erzeugte Referenzsignal wird der ersten Eingangssignalverarbeitungseinrichtung 32 und der zweiten Eingangssignalverarbeitungseinrichtung 33 zugeführt.
  • Die erste Eingangssignalverarbeitungseinrichtung 32 und die zweite Eingangssignalverarbeitungseinrichtung 33 erzeugen Ansteuerungssignale auf der Grundlage des durch die Referenzsignalerzeugungseinrichtung 31 erzeugten Referenzsignals und steuern das erste Bildaufnahmeelement 24 und das zweite Bildaufnahmeelement 25 an. Die erste Eingangssignalverarbeitungseinrichtung 32 und die zweite Eingangssignalverarbeitungseinrichtung 33 führen eine vorbestimmte Signalverarbeitung der aus dem ersten Bildaufnahmeelement 24 und dem zweiten Bildaufnahmeelement 25 zugeführten elektrischen Signale durch und führen die der vorbestimmten Signalverarbeitung unterzogenen elektrischen Signale der Bildsyntheseeinrichtung 35, der Hinderniserkennungseinrichtung 41 und der Helligkeitsberechnungseinrichtung 42 zu.
  • Die vorbestimmte Signalverarbeitung, auf die sich hier bezogen wird, ist beispielsweise ein korreliertes doppeltes Abtasten (CDS, correlated double sampling), die das Signalrauschen verringert, eine Autoverstärkungssteuerung (AGC, auto-gain control), die das Signal normalisiert, eine Analog-Digital-Wandlung, oder eine digitale Signalverarbeitung (Farbraumumwandlung, Kantenbetonungskorrektur, Gammakorrekturverarbeitung und dergleichen). Die der vorbestimmten Signalverarbeitung unterzogenen elektrischen Signale sind Bildsignale wie zusammengesetztes Video (composite video) oder YUV.
  • Das in der ersten Eingangssignalverarbeitungseinrichtung 32 der vorbestimmten Verarbeitung unterzogene und aus der ersten Eingangssignalverarbeitungseinrichtung 32 ausgegebene Signal ist ein erstes Bildsignal, und das in der zweiten Eingangssignalverarbeitungseinrichtung 33 der vorbestimmten Verarbeitung unterzogene und aus der zweiten Eingangssignalverarbeitungseinrichtung 33 ausgegebene Signal ist ein zweites Bildsignal. Ein durch das erste Bildsignal angezeigtes Bild ist ein erstes Bild, und ein durch das zweite Bildsignal angezeigtes Bild ist ein zweites Bild. Somit ist das erste Bildsignal ein Bildsignal, das durch das Licht einschließlich des sichtbaren Lichtbereichs erzeugt wird, und ist das zweite Bildsignal ein Bildsignal, das durch Licht einschließlich des Nah-Infrarot-Bereichs erzeugt wird. Weiterhin ist das erste Bild ein Bild, das durch das Licht einschließlich des sichtbaren Lichtbereichs angezeigt wird, und ist das zweite Bild ein Bild, das durch das Licht einschließlich des Nah-Infrarot-Bereichs angezeigt wird.
  • Die Bildsyntheseeinrichtung 35 gewichtet das erste Bildsignal und das zweite Bildsignal, die aus der ersten Eingangssignalverarbeitungseinrichtung 32 und der zweiten Eingangsverarbeitungseinrichtung 33 ausgegeben werden, mit einem vorbestimmten Gewichtverhältnis AW. Die resultierenden Signale werden dann aufsummiert, um ein Bildsignal zu erzeugen, das zu der Anzeigeeinheit 60 ausgegeben wird. Somit ist das zu der Anzeigeeinheit 60 ausgegebene Bildsignal ”(erstes Bildsignal)·(1 – AW) + (zweites Bildsignal)·AW”. Das vorbestimmte Gewicht AW kann ein fester Wert sein, der vorab eingestellt worden ist. Alternativ dazu kann das vorbestimmte Gewicht AW in geeigneter Weise auf der Grundlage einiger oder aller Berechungsergebnisse der Hinderniserkennungseinrichtung 41 und der Helligkeitsberechnungseinrichtung 42 bestimmt werden (AW kann entsprechend dem Zustand variiert werden).
  • Beispielsweise wird in einem Fall einer hohen Bildhelligkeit das Gewicht AW des zweiten Bildsignals (des Bildsignals, das durch das Licht einschließlich des Nah-Infrarot-Bereichs erzeugt wird) verringert und wird das Gewicht des ersten Bildsignals (des Bildsignals, das durch das Licht einschließlich des sichtbaren Lichtbereichs erzeugt wird), erhöht. Als Ergebnis kann ein fokussiertes Bild erhalten werden. Weiterhin ermöglicht eine Erhöhung des Gewichts des ersten Bildsignals (des Bildsignals, das durch das Licht einschließlich des sichtbaren Lichtbereichs erzeugt wird) die Farbbildanzeige.
  • Die Hinderniserkennungseinrichtung 41 erkennt auf der Grundlage des ersten Bildsignals und/oder des zweiten Bildsignals, ob in dem durch die Bildbeschaffungseinrichtung 20 beschafften Bild ein Hindernis vorhanden ist, und wenn ein Hindernis erkannt wird, wird die Hindernisposition berechnet. Die Hinderniserkennungseinrichtung 41 berechnet ebenfalls die Erfassungszuverlässigkeit, die die Genauigkeit der Hinderniserkennung angibt. Das Hindernis, auf das sich hier bezogen wird, ist beispielsweise ein Fußgänger oder ein anderes Fahrzeug. Ein Fall, in dem das Hindernis ein Fußgänger ist, ist nachstehend beschrieben.
  • Die Erkennung eines Fußgängers als ein Hindernis, die Berechnung einer Position des Fußgängers als ein Hindernis, und die Berechnung der Erfassungszuverlässigkeit kann beispielsweise durch Verwendung eines Musterabgleichsverfahren implementiert werden. Beispielsweise wird ein Bildmuster eines Fußgängers vorab erkannt und in einer Speichereinrichtung (einem Speicher) gespeichert, und das erste Bildsignal und/oder das zweite Bildsignal wird bzw. werden mit dem vorab gespeicherten Fußgängerbildmuster verglichen. Wenn die beiden übereinstimmen, wird als Ergebnis das Vorhandensein eines Fußgängers erkannt und wird die Position des Fußgängers berechnet. In diesem Fall wird die Erfassungszuverlässigkeit (beispielsweise von 0 bis 1), die die Korrektheit der Erkennung des Vorhandenseins des Fußgängers angibt, beispielsweise entsprechend dem Grad der Übereinstimmung mit dem Bildmuster berechnet.
  • Die Erfassungszuverlässigkeit wird anhand der Verarbeitungskapazität der CPU oder der Kapazität des in der Speichereinrichtung (Speicher) gespeicherten Bildmusters bestimmt. Daher ist es schwierig, eine hohe Erfassungszuverlässigkeit für alle Situationen zu garantieren. Somit wird in einigen Fällen, selbst wenn ein Objekt, das wie ein Fußgänger aussieht, erkannt wird, der Grad der Übereinstimmung mit dem Bildmuster niedrig und wird eine niedrige Erfassungszuverlässigkeit berechnet. Eine niedrige Erfassungszuverlässigkeit bedeutet, dass es sein kann, dass das erfasste Objekt kein Fußgänger ist. Im Gegensatz dazu ist einigen Fällen der Grad der Übereinstimmung mit dem Bildmuster hoch und wird eine hohe Erfassungszuverlässigkeit berechnet. Eine hohe Erfassungszuverlässigkeit bedeutet eine hohe Wahrscheinlichkeit, dass das erfasste Objekt ein Fußgänger ist.
  • Wie es nachstehend beschrieben ist, besteht die Aufgabe der Berechnung der Erfassungszuverlässigkeit mit der Hinderniserkennungseinrichtung 41 darin, die Erfassungszuverlässigkeit als ein Informationsteil zu verwenden, wenn die Notwendigkeit einer Anzeige zur Erregung von Aufmerksamkeit bestimmt wird. Die Erkennungsergebnisse (Vorhandensein eines Fußgängers, Position des Fußgängers und Erfassungszuverlässigkeit), die mit der Hinderniserkennungseinrichtung 41 erhalten werden, werden der Bildsyntheseeinrichtung 35, der Helligkeitsberechnungseinrichtung 42 und der Schätzrisikograd-Berechnungseinrichtung 43 zugeführt.
  • Die Helligkeitsberechnungseinrichtung 42 berechnet eine Helligkeit des Bildes an der Position des Fußgängers (Helligkeit des Fußgängers) unter Verwendung des ersten Bildsignals und/oder des zweiten Bildsignals auf der Grundlage der mit der Hinderniserkennungseinrichtung 41 erhaltenen Erkennungsergebnisse. Die Helligkeit des Fußgängers kann beispielsweise durch Berechnung des Durchschnittwerts der Helligkeit von Bildelementen (Pixel) entsprechend der Position des Fußgängers erhalten werden. Alternativ dazu kann ein repräsentativer Punkt aus den Bildelementen entsprechend der Position des Fußgängers ausgewählt werden und kann die Helligkeit des ausgewählten Bildelements als die Helligkeit des Fußgängers bestimmt werden. Das mit der Helligkeitsberechnungseinrichtung 42 erhaltene Helligkeitsberechnungsergebnis wird der Bildsyntheseeinrichtung 35, der Schätzrisikograd-Berechnungseinrichtung 43 und der Risikogradberechnungseinrichtung 44 zugeführt.
  • Die Schätzrisikograd-Berechnungseinrichtung 43 berechnet einen geschätzten Risikograd, der ein Wert ist, der durch Schätzen des Grads für ein Risiko einer Kollision zwischen dem Hindernis und dem Fahrzeug auf der Grundlage der mit der Hinderniserkennungseinrichtung 41 erhaltenen Erkennungsergebnisse, der mit der Helligkeitsberechnungseinrichtung 42 erhaltenen Berechnungsergebnisse und der mit der nachstehend beschriebenen Sensoreinheit 50 erhaltenen Erfassungsergebnisse erhalten wird. Beispielsweise ist in einem Fall, in dem der Abstand zwischen dem Fußgänger als ein Hindernis und dem Fahrzeug groß ist, der berechnete geschätzte Risikograd niedriger als in dem Fall, in dem der Abstand zwischen dem Fußgänger und dem Fahrzeug klein ist. Das berechnete Ergebnis des geschätzten Risikograds, das mit der Schätzrisikograd-Berechnungseinrichtung 43 erhalten wird, wird die Risikogradberechnungseinrichtung 44 zugeführt.
  • Ein spezifisches Beispiel für Berechnungen, die durch die Schätzrisikograd-Berechnungseinrichtung 43 durchgeführt wird, ist nachstehend unter Bezugnahme auf 2 und 3 beschrieben. 2 veranschaulicht die Schätzrisikograd-Berechnungseinrichtung (Variante 1). 3 veranschaulicht die Schätzrisikograd-Berechnungseinrichtung (Variante 2). Wie es in 2 gezeigt ist, weist das Fahrzeug 101 Scheinwerfer 102 auf. Weiterhin zeigt 2 Kurven gleicher Helligkeit 103a bis 103d an jeden Punkt von Licht, das von den Scheinwerfern 102 des Fahrzeugs 101 emittiert wird. Die Zahlen 100, 50, 30 und 10 in Klammern in den Fig. sind jeweils Beispiele für Helligkeitswerte (Einheit: Lux) der Kurven gleicher Helligkeit 103a bis 103d. In 3 ist ein Hindernis 104 gezeigt. 3 zeigt eine Bewegungsbahn 105 eines kreisförmigen Bogenradius R, die anhand des Lenkwinkels, des Achsabstands, der Fahrzeuggeschwindigkeit und dergleichen berechnet wird. Der geschätzte Risikograd wird beispielsweise anhand der Kurven gleicher Helligkeit 103a bis 103d des Abstands d zu dem Hindernis 104, der relativen Geschwindigkeit, der Bewegungsbahn des kreisförmigen Bogenradius R, der Fahrzeuggeschwindigkeit und dergleichen berechnet.
  • Erneut gemäß 1 berechnet die Risikogradberechnungseinrichtung 44 einen Risikograd, der den Grad eines Risikos einer Kollision zwischen dem Hindernis und dem Fahrzeug angibt, auf der Grundlage des durch die Helligkeitsberechnungseinrichtung 42 erhaltenen Berechnungsergebnisses und des durch die Schätzrisikograd-Berechnungseinrichtung 43 erhaltenen Berechnungsergebnisses. Der durch die Risikogradberechnungseinrichtung 44 berechnete Risikograd wird der Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 zugeführt.
  • Unter Bezugnahme auf 4 ist nachstehend ein spezifisches Beispiel für Berechnungen beschrieben, die durch die Risikogradberechnungseinrichtung 44 ausgeführt werden. 4 veranschaulicht die Risikogradberechnungseinrichtung. Gemäß 4 wird ein Kehrwert für das Helligkeitsverhältnis des Objektes, der entlang der Ordinate aufgetragen ist, anhand der Helligkeit des Bildes an der Position eines Fußgängers erhalten, die durch die Helligkeitsberechnungseinrichtung 42 berechnet wird. Ein Bereich nahe an 0 entspricht einer weißen Farbe, und wenn sich 1,0 angenähert wird, ändert sich die Farbe zu gelb, rot/blau und dann schwarz. Ein durch die Schätzrisikograd-Berechnungseinrichtung 43 berechneter geschätzter Risikograd ist entlang der Abszisse aufgetragen. Die Zahlen ”4, 6, 8, 10” sind die Risikograde, die durch die Risikogradberechnungseinrichtung 44 auf der Grundlage der mit der Helligkeitsberechnungseinrichtung 42 erhaltenen Berechnungsergebnisse und der mit der Schätzrisikograd-Berechnungseinrichtung 43 erhaltenen geschätzten Ergebnisse berechnet worden sind. In den in 4 gezeigten Beispielen sind vorbestimmte Bereiche mit gleichem Risikograd anhand des Kehrwerts für das Helligkeitsverhältnis des Objektes, der auf der Ordinate aufgetragen ist, und des geschätzten Risikograds, der auf der Abszisse aufgetragen ist, bestimmt, und sind die Risikograde ”4, 6, 8, 10” jedem vorbestimmten Bereich zugeordnet.
  • Beispielsweise kann der Fahrer das Hindernis leicht erkennen, voraus gesetzt dass das Hindernis weiß ist, selbst wenn der geschätzte Risikograd hoch ist. Daher ist der Risikograd niedrig und wird ein Risikograd von 4 berechnet. Wenn das Hindernis schwarz ist, ist es für den Fahrer schwierig, das Hindernis zu erkennen. Jedoch ist in einem Fall, in dem der geschätzte Risikograd niedrig ist, der Risikograd niedrig und wird ein Risikograd von 4 berechnet. Im Gegensatz dazu ist, wenn der geschätzte Risikograd hoch ist und das Hindernis schwarz ist, der Risikograd hoch. In diesem Fall wird ein Risikograd von 10 berechnet. Der berechnete Risikograd steigt mit Verringerung der Helligkeit und Erhöhung des geschätzten Risikograds an. Somit berechnet die Risikogradberechnungseinrichtung 44 den Risikograd aus zwei Standpunkten auf der Grundlage der Helligkeit des Fußgängers, die durch die Helligkeitsberechnungseinrichtung 42 berechnet wird, und des geschätzten Risikograds, der durch die Schätzrisikograd-Berechnungseinrichtung 43 berechnet wird.
  • Erneut gemäß 1 berechnet die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung den Erfassungszuverlässigkeitskorrekturwert durch Korrigieren der durch die Hinderniserkennungseinrichtung 41 berechneten Erfassungszuverlässigkeit auf der Grundlage des durch die Risikogradberechnungseinrichtung 44 berechneten Risikograds. Der durch die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 berechnete Erfassungszuverlässigkeitskorrekturwert wird der Aufmerksamkeitserregungseinrichtung 46 zugeführt.
  • Ein spezifisches Beispiel für durch die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 durchgeführte Berechnungen ist nachstehend unter Bezugnahme auf 5 beschrieben. 5 veranschaulicht die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung. In 5 ist ein Korrekturkoeffizient K entlang der Ordinate aufgetragen, und ist ein Risikograd entlang der Abszisse aufgetragen. Der entlang der Abszisse aufgetragene Risikograd ist ein durch die Risikogradberechnungseinrichtung 44 berechneter Wert und entspricht beispielweise den Risikograden ”4, 6, 8 und 10” gemäß 4. Der Korrekturkoeffizient K ist ein vorbestimmter Wert, der in der Speichereinrichtung (Speicher) gespeichert ist. Ein Kurve des Korrekturkoeffizienten K ist als irgendeine Kurve bestimmt, in der der Korrekturkoeffizient K mit Ansteigen des Risikograds (wenn dieser sich 10 annähert) näher an 1 kommt. Die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 berechnet den Erfassungszuverlässigkeitskorrekturwert durch Verwendung des in 5 gezeigten Korrekturkoeffizienten K, um die durch die Hinderniserkennungseinrichtung 41 berechnete Erfassungszuverlässigkeit zu korrigieren. Somit wird der Erfassungszuverlässigkeitskorrekturwert durch Multiplizieren der durch die Hinderniserkennungseinrichtung 41 berechneten Erfassungszuverlässigkeit mit dem Korrekturwert K erhalten.
  • Erneut gemäß 1 gibt, wenn der durch die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 berechnete Erfassungszuverlässigkeitskorrekturwert größer als ein vorbestimmter Anzeigebestimmungsschwellwert ist, die Aufmerksamkeitserregungseinrichtung 46 ein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 aus. Dieser Vorgang hat die folgende Bedeutung.
  • Im Prinzip hat der Erfassungszuverlässigkeitskorrekturwert als hoch berechnet zu werden, wenn der Risikograd hoch ist. Dies liegt daran, dass ein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 ausgegeben werden muss und die Aufmerksamkeit des Fahrers auf den Fußgänger erregt werden muss. Daher weist, wenn der Risikograd hoch ist, wie es beispielsweise in 5 gezeigt ist, der Korrekturkoeffizient K einen Wert nahe an 1.
  • Wenn im Gegensatz dazu der Risikograd niedrig ist, ist der Erfassungszuverlässigkeitskorrekturwert nicht notwendigerweise hoch, und es ist stattdessen vorzuziehen, dass der Erfassungszuverlässigkeitskorrekturwert verringert wird. In dem Beispiel gemäß 4, kann, wenn das Hindernis weiß ist, der Fahrer leicht das Hindernis erkennen. Daher ist der Risikograd niedrig und nimmt einen Wert von vier an. Wenn die Aufmerksamkeit des Fahrers mittels der Anzeigeeinheit 60 erregt wird, schaut der Fahrer auf die Anzeigeeinheit 60. Wenn jedoch kein Risiko involviert ist, wie in dem vorstehend beschriebenen Fall, ist es vorzuziehen, dass der Fahrer direkt auf das Hindernis anstelle auf die Anzeigeeinheit 60 schaut. Dementsprechend wird, wenn der Risikograd niedrig ist, der Korrekturkoeffizient K auf einen Wert kleiner als 1 eingestellt. Als Ergebnis wird, wenn der Erfassungszuverlässigkeitskorrekturwert gleich oder kleiner als der vorbestimmte Anzeigebestimmungsschwellwert ist, kein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 ausgegeben.
  • Jedoch ist in einem Fall, in dem die durch die Hinderniserkennungseinrichtung 41 berechnete Erfassungszuverlässigkeit niedrig ist, es sogar nicht klar, ob ein Fußgänger vorhanden ist. In einem derartigen Fall, in dem die durch die Hinderniserkennungseinrichtung 41 berechnete Erfassungszuverlässigkeit niedrig ist, ist es ebenfalls zu bevorzugen, dass der Fahrer direkt auf den Fußgänger anstelle durch Erregen seiner Aufmerksamkeit auf die Anzeigeeinheit 60 schaut. Daher ist trotz eines hohen Risikograds (der Korrekturkoeffizient K ist nahe bei eins) der Erfassungszuverlässigkeitskorrekturwert ein niedriger Wert. Als Ergebnis wird, wenn der Erfassungszuverlässigkeitskorrekturwert gleich oder kleiner als der vorbestimmte Anzeigebestimmungsschwellwert ist, kein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 ausgegeben.
  • Somit wird es leichter, ein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 auszugeben, wenn die durch die Hinderniserkennungseinrichtung 41 berechnete Erfassungszuverlässigkeit ansteigt und der Risikograd ansteigt (ein Fall, in dem die Wahrscheinlichkeit von Gefahr hoch ist). Somit kann in einem Fall, in dem die Aufmerksamkeit zu erregen ist (wenn ein Fußgänger mit einer hohen Wahrscheinlichkeit erfasst wird und ein Risikograd hoch ist), die Aufmerksamkeit zuverlässiger erregt werden. In anderen Fällen wird die Aufmerksamkeit des Fahrers nicht erregt, und schaut der Fahrer nicht auf die Anzeigeeinheit 60. Daher kann die Aufmerksamkeit des Fahrers auf die Zone vor dem Fahrzeug beibehalten werden.
  • Erneut gemäß 1 weist der Sensor 50 eine Funktion zur Beschaffung von Informationen bezüglich des Fahrzeugs und der Fahrzeugumgebung auf. Der Lichtsteuerungssensor 51 ist beispielsweise am Äußeren des Fahrzeugkörpers angebracht. Der Lichtsteuerungssensor 51 erfasst die Helligkeit der Fahrzeugumgebung und gibt ein Signal entsprechend dem Erfassungsergebnis zu der Schätzrisikograd-Berechnungseinrichtung 43 aus. Der Fahrzeuggeschwindigkeitssensor 42 ist beispielsweise an dem Fahrzeugrad angebracht, erfasst die Drehzahl des Rades und gibt ein Signal entsprechend dem Erfassungsergebnis zu der Schätzrisikograd-Berechnungseinrichtung 43 aus.
  • Der Lenkwinkelsensor 53 ist beispielsweise an einer Lenkwelle des Fahrzeugs angebracht. Der Lenkwinkelsensor 53 erfasst einen Lenkdrehwinkel und gibt ein Signal entsprechend dem Erfassungsergebnis zu der Schätzrisikograd-Berechnungseinrichtung 43 aus. Der Abstandsensor 54 ist beispielsweise ein Milliwellenradar (Milliwave-Radar), das den Abstand zwischen dem Fahrzeug und einem Hindernis erfasst. Der Abstandsensor 54 gibt ein Signal entsprechend dem Erfassungsergebnis zu der Schätzrisikograd-Berechnungseinrichtung 43 aus.
  • Die Anzeigeeinheit 60 ist beispielsweise eine Flüssigkristallanzeige. Die Anzeigeeinheit 60 weist eine Funktion auf, bei der als ein Bild lediglich das Bild, das durch die Bildsyntheseeinrichtung 35 synthetisiert worden ist, oder das Bildsignal angezeigt wird, das durch Überlagern eines von der Aufmerksamkeitserregungseinrichtung 46 ausgegebenes Aufmerksamkeitserregungssignals auf das durch die Bildsyntheseeinrichtung 35 synthetisierte Bildsignal erhalten wird. Die Anzeigeeinheit ist an einer Position innerhalb des Fahrzeugs angeordnet, an der diese von dem Fahrer betrachtet werden kann.
  • 6A bis 6C zeigen Beispiele von Bildern, die durch die Anzeigeeinheit angezeigt werden. 6A zeigt ein Beispiel, bei dem die Anzeigeeinheit 60 lediglich das durch die Bildsyntheseeinrichtung 35 synthetisierte Bildsignal anzeigt. 6B und 6C zeigen ein Beispiel, bei dem die Anzeigeeinheit 60 das Bildsignal anzeigt, das durch Überlagern eines von der Aufmerksamkeitserregungseinrichtung 46 ausgegebenes Aufmerksamkeitserregungssignal auf das durch die Bildsyntheseeinrichtung 35 synthetisierte Bildsignal erhalten wird. In 6B ist ein Aufmerksamkeitserregungsrahmen 110 als das Aufmerksamkeitserregungssignal zur Anzeige auf einem Bereich des durch die Anzeigeeinheit 60 angezeigten Bildes überlagert, wenn ein Fußgänger erkannt worden ist. In 6C wird ein Aufmerksamkeitserregungsrahmen 111, der die Position des Fußgängers angibt, überlagert und zusätzlich zu dem Aufmerksamkeitserregungsrahmen 110 angezeigt, der den Bereich angibt, in dem der Fußgänger erkannt worden ist, sodass der Fußgänger leicht durch den Fahrer erkannt werden kann. Die Aufmerksamkeit des Fahrers kann noch effektiver durch Ändern der Farben des Aufmerksamkeitserregungsrahmens 110 oder 111 oder durch Blinken des Rahmens erregt werden.
  • Die durch die Umgebungsüberwachungsvorrichtung 10 für ein Fahrzeug durchgeführte Verarbeitung ist nachstehend ausführlicher unter Bezugnahme auf 7 beschrieben. 7 zeigt ein Beispiel für ein Flussdiagramm von Vorgängen, die durch die Umgebungsüberwachungsvorrichtung für ein Fahrzeug gemäß dem vorliegenden Ausführungsbeispiel durchgeführt werden.
  • In Schritt 100 beschafft die Bildbeschaffungseinheit 20 ein Bild der Fahrzeugumgebung und bildet ein optisches Bild eines ersten Wellenlängenbereichs auf dem ersten Bildaufnahmeelement 24. Weiterhin wird ein optisches Bild des zweiten Wellenlängenbereichs auf dem zweiten Bildaufnahmeelement 25 gebildet (S100). In diesem Fall ist der erste Wellenlängenbereich ein Wellenlängenbereich einschließlich eines sichtbaren Lichtbereichs, und ist der zweite Wellenlängenbereich ein Wellenlängenbereich einschließlich eines Nah-Infrarot-Bereichs. Somit kann der erste Wellenlängenbereich beispielsweise lediglich der sichtbare Lichtbereich oder ein Wellenlängenbereich sein, der durch Hinzufügen des Nah-Infrarot-Bereichs zu dem sichtbaren Lichtbereich erhalten wird. Weiterhin kann der zweite Wellenlängenbereich beispielsweise lediglich der Nah-Infrarot-Bereich oder ein Wellenlängenbereich sein, der durch Hinzufügen eines Infrarotbereichs zu dem Nah-Infrarot-Bereich erhalten wird.
  • In Schritt 101 wandelt das erste Bildaufnahmeelement 24 das optische Bild des ersten Wellenlängenbereichs in ein elektrisches Signal um und gibt das elektrische Signal zu der ersten Eingangssignalverarbeitungseinrichtung 32 aus. Das zweite Bildaufnahmeelement 25 wandelt das optische Bild des zweiten Wellenlängenbereichs in ein elektrisches Signal um und gibt das elektrische Signal zu der zweiten Eingangssignalverarbeitungseinrichtung 33 aus (S101).
  • In Schritt 102 führen die erste Eingangssignalverarbeitungseinrichtung 32 und die zweite Eingangssignalverarbeitungseinrichtung 33 eine vorbestimmte Signalverarbeitung der eingegebenen elektrischen Signale durch und geben das erste Bildsignal und das zweite Bildsignal, die auf diese Weise erhalten werden, zu der Bildsyntheseeinrichtung 35, der Hinderniserkennungseinrichtung 41 und der Helligkeitsberechnungseinrichtung 42 aus (S102).
  • In Schritt 103 erkennt die Hinderniserkennungseinrichtung 41 auf der Grundlage des ersten Bildsignals und/oder des zweiten Bildsignals, ob ein Fußgänger in dem durch die Bildbeschaffungseinrichtung 20 beschafften Bild vorhanden ist, und wenn ein Fußgänger erkannt wird, wird die Position des Fußgängers berechnet. Die Hinderniserkennungseinrichtung 41 berechnet ebenfalls die Erfassungszuverlässigkeit, die die Genauigkeit der Hinderniserkennung angibt (S103). Die Erkennung des Fußgängers, die Berechnung der Position des Fußgängers und die Berechnung der Erfassungszuverlässigkeit kann beispielsweise durch Verwendung eines Musterabgleichsverfahrens implementiert werden, wie es vorstehend beschrieben worden ist. Die mit der Hinderniserkennungseinrichtung 41 erhaltenen Erkennungsergebnisse (Vorhandensein oder Nicht Vorhandensein des Fußgängers, Position des Fußgängers und Erfassungszuverlässigkeit) werden der Bildsyntheseeinrichtung 35, der Helligkeitsberechnungseinrichtung 42 und der Schätzrisikograd-Berechnungseinrichtung 43 zugeführt.
  • In Schritt 104 berechnet die Helligkeitsberechnungseinrichtung 42 eine Helligkeit des Bildes für die Position des Fußgängers aus dem ersten Bildsignal und/oder dem zweiten Bildsignal auf der Grundlage der mit der Hinderniserkennungseinrichtung 41 erhaltenden Erkennungsergebnisse (S104). Das mit der Helligkeitsberechnungseinrichtung 42 erhaltende Helligkeitsberechnungsergebnis wird der Bildsyntheseeinrichtung 35, der Schätzrisikograd-Berechnungseinrichtung 43 und der Risikogradberechnungseinrichtung 44 zugeführt.
  • In Schritt 105 berechnet die Schätzrisikograd-Berechnungseinrichtung 43 einen geschätzten Risikograd auf der Grundlage des mit der Hinderniserkennungseinrichtung 41 erhaltenen Erkennungsergebnisses, des mit der Helligkeitsberechnungseinrichtung 42 erhaltenen Berechnungsergebnisses und des mit der nachstehend beschriebenen Sensoreinheit 50 erhaltenen Erfassungsergebnisses (S105). Das berechnete Ergebnis des geschätzten Risikograds, das mit der Schätzrisikograd-Berechnungseinrichtung 43 erhalten wird, wird der Risikogradberechnungseinrichtung 44 zugeführt.
  • In Schritt 106 berechnet die Risikogradberechnungseinrichtung 44 einen Risikograd auf der Grundlage des mit der Helligkeitsberechnungseinrichtung 42 erhaltenen Helligkeitsberechnungsergebnisses und des durch die Schätzrisikograd-Berechnungseinrichtung 43 erhaltenen Berechnungsergebnisses (S106). Der durch die Risikogradberechnungseinrichtung 44 berechnete Risikograd wird der Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 zugeführt. Ein Beispiel für Risikogradsberechnungen ist in 4 gezeigt, wie es vorstehend beschrieben worden ist.
  • In Schritt 107 berechnet die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 den Erfassungszuverlässigkeitskorrekturwert durch Korrigieren der durch die Fußgängererkennungseinrichtung 41 berechneten Erfassungszuverlässigkeit auf der Grundlage des durch die Risikogradberechnungseinrichtung 44 berechneten Risikograds (S107). Der durch die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 berechnete Erfassungszuverlässigkeitskorrekturwert wird der Aufmerksamkeitserregungseinrichtung 46 zugeführt. Ein Beispiel für Berechnungen des Erfassungszuverlässigkeitskorrekturwerts ist vorstehend beschrieben.
  • In Schritt 108 bestimmt die Aufmerksamkeitserregungseinrichtung 46 die Notwendigkeit einer Aufmerksamkeitserregungsanzeige auf der Grundlage des durch die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 berechneten Erfassungszuverlässigkeitskorrekturwerts (S108). Die Notwendigkeit für die Aufmerksamkeitserregungsanzeige wird auf der Grundlage davon bestimmt, ob der durch die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung 45 berechnete Erfassungszuverlässigkeitskorrekturwert größer als ein Anzeigebestimmungsschwellwert ist, der vorab eingestellt ist. In Schritt 108 bestimmt, wenn der Erfassungszuverlässigkeitskorrekturwert größer als der vorab eingestellte Anzeigebestimmungsschwellwert ist, die Aufmerksamkeitserregungseinrichtung 46, dass die Aufmerksamkeitserregung notwendig ist (JA in 7), und geht der Verarbeitungsablauf zu Schritt 109 über. In Schritt 109 gibt die Aufmerksamkeitserregungseinrichtung 46 ein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 aus (S109). Das aus der Aufmerksamkeitserregungseinrichtung 46 ausgegebene Aufmerksamkeitserregungssignal wird auf der Anzeigeeinheit 60 beispielsweise wie in 6B und 6C gezeigt, wie es vorstehend beschrieben worden ist, auf dem in der Bildsyntheseeinrichtung 35 synthetisierten Bildsignal überlagert angezeigt. Wenn kein Hindernis vorhanden ist, stoppt die Aufmerksamkeitserregungseinrichtung 46 die Ausgabe des Aufmerksamkeitserregungssignals zu der Anzeigeeinheit 60. Als Ergebnis werden die Aufmerksamkeitserregungsrahmen 110 und 111 gelöscht, die die Aufmerksamkeitserregungssignale sind, die vorstehend als Beispiel in den 6B und 6C gezeigt worden sind.
  • In Schritt 108 bestimmt in einem Fall, in dem der Erfassungszuverlässigkeitskorrekturwert gleich oder kleiner als der vorab eingestellte Anzeigebestimmungsschwellwert ist, die Aufmerksamkeitserregungseinrichtung 46, dass die Aufmerksamkeitserregung unnötig ist (NEIN in 7), und geht der Verarbeitungsablauf zu Schritt 110 über. In Schritt 110 gibt die Aufmerksamkeitserregungseinrichtung 46 kein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 aus (S110). Als Ergebnis wird, wie es beispielsweise in 6A wie vorstehend beschrieben gezeigt ist, lediglich das in der Bildsyntheseeinrichtung 35 synthetisierte Bildsignal auf der Anzeigeeinheit 60 angezeigt.
  • Gemäß dem vorliegenden Ausführungsbeispiel wird ein Hindernis wie ein Fußgänger in dem durch die Bildbeschaffungseinheit beschafften Bild erkannt, werden die Position und der Erfassungszuverlässigkeit des Hindernisses berechnet, und wird die Helligkeit an der berechneten Position des Hindernisses berechnet. Weiterhin wird ein geschätzter Risikograd, der ein Schätzwert des Grades des Risikos für eine Kollision zwischen dem Hindernis und dem Fahrzeug ist, auf der Grundlage der Fahrzeuggeschwindigkeit und dem Lenkwinkel während der Fahrt berechnet. Dann wird ein Risikograd, das einen Grad eines Risikos der Kollision des Hindernisses und des Fahrzeugs zeigt, anhand von zwei Standpunkten berechnet, nämlich auf der Grundlage der berechneten Helligkeit und des geschätzten Risikograds. Ein Erfassungszuverlässigkeitskorrekturwert auf der Grundlage des berechneten Risikograds wird dann berechnet. Wenn der berechnete Erfassungszuverlässigkeitskorrekturwert größer als der vorbestimmter Anzeigebestimmungsschwellwert ist, wird ein Aufmerksamkeitserregungssignal ausgegeben und wird das Aufmerksamkeitserregungssignal, das auf dem durch die Bildbeschaffungseinheit beschafften Bild überlagert wird, auf der Anzeigeeinheit angezeigt (eine Aufmerksamkeitserregung wird durchgeführt). Wenn der berechnete Erfassungszuverlässigkeitskorrekturwert gleich oder kleiner als der vorbestimmte Anzeigebestimmungsschwellwert ist, wird kein Aufmerksamkeitserregungssignal ausgegeben und wird lediglich das durch die Bildbeschaffungseinheit beschaffte Bild auf der Anzeigeeinheit angezeigt (es wird keine Aufmerksamkeitserregung durchgeführt).
  • Somit wird durch Korrektur der Erfassungszuverlässigkeit auf der Grundlage eines Risikograds zur Berechnung des Erfassungszuverlässigkeitskorrekturwerts und darauffolgenden Vergleich des berechneten Erfassungszuverlässigkeitskorrekturwerts mit dem Anzeigebestimmungsschwellwert bestimmt, ob ein Aufmerksamkeitserregungssignal zu der Anzeigeeinheit 60 auszugeben ist. Als Ergebnis kann das Aufmerksamkeitserregungssignal leichter zu der Anzeigeeinheit 60 ausgegeben werden, wenn die Erfassungszuverlässigkeit hoch ist und der Risikograd hoch ist (ein Fall, in dem die Wahrscheinlichkeit von Gefahr hoch ist). Daher kann die Aufmerksamkeitserregung zuverlässiger durchgeführt werden. In anderen Fällen wird keine Aufmerksamkeitserregung durchgeführt und wird die Aufmerksamkeit des Fahrers nicht erregt, um den Fahrer dazu zu bringen, auf die Anzeigeeinheit 60 zu schauen. Daher kann die Aufmerksamkeit des Fahrers auf die Zone vor dem Fahrzeug beibehalten werden. Somit kann die Aufmerksamkeit des Fahrers, falls notwendig, erregt werden, indem der Risikograd einer Kollision zwischen dem Fahrzeug und dem Hindernis und die Erfassungszuverlässigkeit des Hindernisses berücksichtigt werden.
  • Das bevorzugte Ausführungsbeispiel wurde vorstehend beschrieben, jedoch ist die Erfindung nicht auf das vorstehend beschriebene Ausführungsbeispiel begrenzt und kann durch verschiedenartiges Modifizieren oder Ändern des vorstehend beschriebenen Ausführungsbeispiels implementiert werden, ohne von dem Umfang der Patentansprüche abzuweichen.
  • Beispielsweise wurde in dem vorliegenden Ausführungsbeispiel ein Beispiel beschrieben, bei dem Lichtsteuerungssensor 51, der Fahrzeuggeschwindigkeitssensor 52, der Lenkwinkelsensor 53 und der Abstandsensor 54 als die Sensoreinheit 50 verwendet wurden, jedoch können andere Sensoren statt der vorstehend beschriebenen Sensoren oder zusätzlich dazu verwendet werden. Beispiele für andere Sensoren umfassen einen Neigungssensor und ein globales Positionierungssystem (GPS, Gobal Positioning System). Durch Verwenden des Neigungssensors oder GPS ist es möglich, den Fahrzeugfahrzustand zu bestimmen (ob der Ort, an dem das Fahrzeug gegenwärtig fährt, ein Stadtbereich oder Vorortbereich ist). Weiterhin ist in dem vorliegenden Ausführungsbeispiel ein Beispiel beschrieben, in dem das Aufmerksamkeitserregungssignal auf der Grundlage des Erfassungszuverlässigkeitskorrekturwerts ausgegeben wird, jedoch kann ebenfalls eine Konfiguration verwendet werden, bei der das Aufmerksamkeitserregungssignal zum Erregen der Aufmerksamkeit des Fahrers auf der Grundlage des Risikograds und der Erfassungszuverlässigkeit ausgegeben wird.
  • Wie es vorstehend beschrieben worden ist weist eine Umgebungsüberwachungsvorrichtung für ein Fahrzeug auf: eine Bildbeschaffungseinheit (20), die ein Bild einer Fahrzeugumgebung beschafft; eine Hinderniserkennungseinrichtung (41) zur Erkennung eines Hindernisses in dem durch die Bildbeschaffungseinheit (20) beschafften Bild, zur Berechnung einer Position des Hindernisses und zur Berechnung einer Erfassungszuverlässigkeit, die eine Genauigkeit der Erkennung des Hindernisses angibt; eine Risikogradberechnungseinrichtung (44) zur Berechnung eines Risikograds, der einen Grad eines Risikos einer Kollision zwischen dem Hindernis und dem Fahrzeug angibt, und eine Aufmerksamkeitserregungseinheit (46), die ein Aufmerksamkeitserregungssignal zur Erregung der Aufmerksamkeit eines Fahrers auf der Grundlage der Erfassungszuverlässigkeit und des Risikograds ausgibt.
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • - JP 2007-087203 A [0003]
    • - JP 2008-027309 A [0003]
    • - JP 2008-135856 A [0003]

Claims (9)

  1. Umgebungsüberwachungsvorrichtung für ein Fahrzeug, mit einer Bildbeschaffungseinheit (20), die ein Bild einer Fahrzeugumgebung beschafft, einer Hinderniserkennungseinrichtung (41) zum Erkennen eines Hindernisses in dem durch die Bildbeschaffungseinheit (20) beschafften Bild, zur Berechnung einer Position des Hindernisses und zur Berechnung einer Erfassungszuverlässigkeit, die eine Genauigkeit der Erkennung des Hindernisses angibt, einer Risikogradberechnungseinrichtung (44) zur Berechnung eines Risikograds, der einen Grad eines Risikos einer Kollision zwischen dem Hindernis und dem Fahrzeug angibt, und einer Aufmerksamkeitserregungseinrichtung (46) zur Ausgabe eines Aufmerksamkeitserregungssignals zum Erregen der Aufmerksamkeit eines Fahrers auf der Grundlage der Erfassungszuverlässigkeit und des Risikograds.
  2. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach Anspruch 1, weiterhin mit einer Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung (45) zur Korrektur der Erfassungszuverlässigkeit auf der Grundlage des Risikograds, um einen Erfassungszuverlässigkeitskorrekturwert zu berechnen, wobei die Aufmerksamkeitserregungseinrichtung (46) das Aufmerksamkeitserregungssignal in einem Fall ausgibt, in dem der Erfassungszuverlässigkeitskorrekturwert größer als ein Schwellwert ist.
  3. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach Anspruch 1 oder 2, weiterhin mit einer Helligkeitsberechnungseinrichtung (42) zur Berechnung einer Helligkeit des Bildes an einer Position des Hindernisses, und einer Schätzrisikograd-Berechnungseinrichtung (43) zur Berechnung eines geschwätzten Risikograds der Kollision zwischen dem Hindernis und dem Fahrzeug, wobei die Risikogradberechnungseinrichtung (44) die den Risikograd auf der Grundlage der Helligkeit und des geschätzten Risikograds berechnet.
  4. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach Anspruch 3, wobei die Schätzrisikograd-Berechnungseinrichtung (43) den geschätzten Risikograd auf der Grundlage von Informationen einschließlich einer Geschwindigkeit des Fahrzeugs, eines Lenkwinkels des Fahrzeugs und eines Abstands zwischen dem Fahrzeug und dem Hindernis berechnet.
  5. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach einem der Ansprüche 1 bis 4, wobei das Aufmerksamkeitserregungssignal ein Signal zum Anzeigen eines Rahmens (110) ist, der einen Bereich einschließlich des erkannten Hindernisses in dem Bild umgibt, das durch die Bildbeschaffungseinheit (20) beschafft worden ist.
  6. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach einem der Ansprüche 1 bis 5, wobei das Aufmerksamkeitserregungssignal ein Signal zum Anzeigen eines Rahmens (111) ist, das das Hindernis des durch die Bildbeschaffungseinheit (20) beschafften Bildes umgibt.
  7. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach einem der Ansprüche 1 bis 6, wobei das Hindernis ein Fußgänger ist.
  8. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach Anspruch 2, wobei die Erfassungszuverlässigkeitskorrekturwert-Berechnungseinrichtung (45) den Erfassungszuverlässigkeitskorrekturwert durch Multiplizieren der Erfassungszuverlässigkeit mit einem Korrekturkoeffizienten berechnet, der mit einem Anstieg in dem Risikograd ansteigt.
  9. Umgebungsüberwachungsvorrichtung für ein Fahrzeug nach Anspruch 3, wobei die Risikogradberechnungseinheit (44) einen Risikograd berechnet, der mit Verringerung in der Helligkeit und Erhöhung in dem geschätzten Risikograd ansteigt.
DE102010001954A 2009-02-16 2010-02-15 Umgebungsüberwachungsvorrichtung für ein Fahrzeug Ceased DE102010001954A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009032682A JP4784659B2 (ja) 2009-02-16 2009-02-16 車両用周辺監視装置
JP2009-032682 2009-02-16

Publications (1)

Publication Number Publication Date
DE102010001954A1 true DE102010001954A1 (de) 2010-09-02

Family

ID=42371870

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102010001954A Ceased DE102010001954A1 (de) 2009-02-16 2010-02-15 Umgebungsüberwachungsvorrichtung für ein Fahrzeug

Country Status (3)

Country Link
US (1) US20100208075A1 (de)
JP (1) JP4784659B2 (de)
DE (1) DE102010001954A1 (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011078615A1 (de) * 2011-07-04 2013-01-10 Toyota Jidosha K.K. Objekterfassungsvorrichtung und objekterfassungsprogramm
WO2013083399A1 (de) * 2011-12-06 2013-06-13 Robert Bosch Gmbh Verfahren zur überwachung und signalisierung einer verkehrssituation im umfeld eines fahrzeuges
US8994823B2 (en) 2011-07-05 2015-03-31 Toyota Jidosha Kabushiki Kaisha Object detection apparatus and storage medium storing object detection program

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9200895B2 (en) 2010-11-16 2015-12-01 Konica Minolta, Inc. Image input device and image processing device
WO2012114478A1 (ja) * 2011-02-23 2012-08-30 トヨタ自動車株式会社 運転支援装置、運転支援方法及び運転支援プログラム
JP5639283B2 (ja) * 2011-11-25 2014-12-10 本田技研工業株式会社 車両周辺監視装置
US8791836B2 (en) 2012-03-07 2014-07-29 Lockheed Martin Corporation Reflexive response system for popup threat survival
US9030347B2 (en) 2012-05-03 2015-05-12 Lockheed Martin Corporation Preemptive signature control for vehicle survivability planning
US9240001B2 (en) 2012-05-03 2016-01-19 Lockheed Martin Corporation Systems and methods for vehicle survivability planning
US8831793B2 (en) * 2012-05-03 2014-09-09 Lockheed Martin Corporation Evaluation tool for vehicle survivability planning
DE102013113054B4 (de) * 2012-12-03 2022-01-27 Denso Corporation Zielerfassungsvorrichtung zum Vermeiden einer Kollision zwischen einem Fahrzeug und einem durch einen an dem Fahrzeug montierten Sensor erfassten Ziel
US9342986B2 (en) * 2013-02-25 2016-05-17 Honda Motor Co., Ltd. Vehicle state prediction in real time risk assessments
US9050980B2 (en) * 2013-02-25 2015-06-09 Honda Motor Co., Ltd. Real time risk assessment for advanced driver assist system
CN105393293B (zh) * 2013-07-18 2017-05-03 歌乐株式会社 车载装置
JP5861072B2 (ja) * 2014-03-06 2016-02-16 パナソニックIpマネジメント株式会社 表示制御装置、表示装置および表示制御プログラム
EP3288005B1 (de) * 2015-04-23 2021-04-07 Nissan Motor Co., Ltd. Vorrichtung zur okklusionskontrolle
US10822110B2 (en) 2015-09-08 2020-11-03 Lockheed Martin Corporation Threat countermeasure assistance system
US10788840B2 (en) * 2016-12-27 2020-09-29 Panasonic Intellectual Property Corporation Of America Information processing apparatus, information processing method, and recording medium
JP6558393B2 (ja) * 2017-04-06 2019-08-14 トヨタ自動車株式会社 進路設定装置及び進路設定方法
JP7198742B2 (ja) * 2019-12-27 2023-01-04 本田技研工業株式会社 自動運転車両、画像表示方法およびプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007087203A (ja) 2005-09-22 2007-04-05 Sumitomo Electric Ind Ltd 衝突判定システム、衝突判定方法及びコンピュータプログラム
JP2008027309A (ja) 2006-07-24 2008-02-07 Sumitomo Electric Ind Ltd 衝突判定システム、及び衝突判定方法
JP2008135856A (ja) 2006-11-27 2008-06-12 Toyota Motor Corp 物体認識装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004013466A (ja) * 2002-06-06 2004-01-15 Nissan Motor Co Ltd 車両周囲監視装置
JP4296951B2 (ja) * 2004-02-09 2009-07-15 株式会社豊田中央研究所 車両用情報提示装置
JP2005267112A (ja) * 2004-03-17 2005-09-29 Toyota Central Res & Dev Lab Inc ドライバ状態推定装置及び情報提示システム
JP3934119B2 (ja) * 2004-06-14 2007-06-20 本田技研工業株式会社 車両周辺監視装置
JP4598653B2 (ja) * 2005-05-13 2010-12-15 本田技研工業株式会社 衝突予知装置
JP4872245B2 (ja) * 2005-06-06 2012-02-08 トヨタ自動車株式会社 歩行者認識装置
JP4353162B2 (ja) * 2005-09-26 2009-10-28 トヨタ自動車株式会社 車輌周囲情報表示装置
JP4670805B2 (ja) * 2006-12-13 2011-04-13 株式会社豊田中央研究所 運転支援装置、及びプログラム
JP4433046B2 (ja) * 2007-12-26 2010-03-17 株式会社デンソー 露出制御装置及び露出制御プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007087203A (ja) 2005-09-22 2007-04-05 Sumitomo Electric Ind Ltd 衝突判定システム、衝突判定方法及びコンピュータプログラム
JP2008027309A (ja) 2006-07-24 2008-02-07 Sumitomo Electric Ind Ltd 衝突判定システム、及び衝突判定方法
JP2008135856A (ja) 2006-11-27 2008-06-12 Toyota Motor Corp 物体認識装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011078615A1 (de) * 2011-07-04 2013-01-10 Toyota Jidosha K.K. Objekterfassungsvorrichtung und objekterfassungsprogramm
DE102011078615B4 (de) 2011-07-04 2022-07-14 Toyota Jidosha Kabushiki Kaisha Objekterfassungsvorrichtung und objekterfassungsprogramm
US8994823B2 (en) 2011-07-05 2015-03-31 Toyota Jidosha Kabushiki Kaisha Object detection apparatus and storage medium storing object detection program
WO2013083399A1 (de) * 2011-12-06 2013-06-13 Robert Bosch Gmbh Verfahren zur überwachung und signalisierung einer verkehrssituation im umfeld eines fahrzeuges
US9478136B2 (en) 2011-12-06 2016-10-25 Robert Bosch Gmbh Method for monitoring and signaling a traffic situation in the surroundings of a vehicle

Also Published As

Publication number Publication date
JP2010191520A (ja) 2010-09-02
US20100208075A1 (en) 2010-08-19
JP4784659B2 (ja) 2011-10-05

Similar Documents

Publication Publication Date Title
DE102010001954A1 (de) Umgebungsüberwachungsvorrichtung für ein Fahrzeug
CN108460734B (zh) 车辆驾驶员辅助模块进行图像呈现的系统和方法
EP1831718B1 (de) Stereokamera f]r ein kraftfahrzeug
US7570286B2 (en) System and method for creating composite images
US8289391B2 (en) Apparatus for vehicle surroundings monitoring
US7492962B2 (en) System or method for enhancing an image
DE102011105628B4 (de) System zur Unterstützung der Sicht eines Fahrers
EP2723060A1 (de) Fahrzeugmontierte kameravorrichtung
KR101367637B1 (ko) 감시장치
US20090141128A1 (en) Method and device for image processing and a night vision system for motor vehicles
DE10324830A1 (de) Abbildungsverstärkung in einer Ferninfrarotkamera
JP5071198B2 (ja) 信号機認識装置,信号機認識方法および信号機認識プログラム
JP2020043400A (ja) 周辺監視装置
DE102019121340A1 (de) Verfahren und vorrichtung zum bestimmen einer fehlfunktion und sensorsystem
JP2007050757A (ja) 車両用表示制御装置
DE112017002774T5 (de) Bildverarbeitungseinrichtung und Bildverarbeitungsverfahren, und Lerneinrichtung und Lernverfahren
CN110378836B (zh) 获取对象的3d信息的方法、系统和设备
JP2010257282A (ja) 障害物検知装置、および当該装置を搭載した車両
DE102017116849A1 (de) Indirektes Sichtsystem für ein Fahrzeug
DE102013115000A1 (de) Blendungsminderung für dynamischen Rückspiegel
DE102019109491A1 (de) Datenverarbeitungsvorrichtung, überwachungssystem, wecksystem, datenverarbeitungsverfahren und datenverarbeitungsprogramm
WO2020153272A1 (ja) 測定装置、測距装置および測定方法
WO2017158829A1 (ja) 表示制御装置および表示制御方法
EP1476326B1 (de) Einrichtung zur automatischen einstellung der leuchtdichte des von einer rückwärtigen beleuchtungseinrichtung eines fahrzeugs ausgesandten lichtbündels
JP2017212633A (ja) 撮像装置、撮像表示方法および撮像表示プログラム

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
R002 Refusal decision in examination/registration proceedings
R003 Refusal decision now final

Effective date: 20130216