DE112013006385B4 - Fahrzeugperipherie-Anzeigevorrichtung - Google Patents

Fahrzeugperipherie-Anzeigevorrichtung Download PDF

Info

Publication number
DE112013006385B4
DE112013006385B4 DE112013006385.9T DE112013006385T DE112013006385B4 DE 112013006385 B4 DE112013006385 B4 DE 112013006385B4 DE 112013006385 T DE112013006385 T DE 112013006385T DE 112013006385 B4 DE112013006385 B4 DE 112013006385B4
Authority
DE
Germany
Prior art keywords
vehicle
image
display
image area
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE112013006385.9T
Other languages
English (en)
Other versions
DE112013006385T5 (de
Inventor
Yoshiaki Watanabe
Takehisa Mizuguchi
Takeshi Mitsui
Yoshihiro Ogawa
Takafumi Kasuga
Yohei Miki
Takeo Fujita
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of DE112013006385T5 publication Critical patent/DE112013006385T5/de
Application granted granted Critical
Publication of DE112013006385B4 publication Critical patent/DE112013006385B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)

Abstract

Fahrzeugperipherie-Anzeigevorrichtung, die ein aufgenommenes Bild einer Fahrzeugperipherie auf einer Anzeige anzeigt, umfassend:einen Fahrzeugsteuerinformations-Empfänger (10), der Fahrzeugsteuerinformation erfasst, welche für eine Fahrbedingung eines Fahrzeugs indikativ ist;einen Panoramagenerator (13), der Bilder der Fahrzeugperipherie in einer Mehrzahl von Aufnahmerichtungen kombiniert, welche durch eine Mehrzahl von Fahrzeugkameras aufgenommen werden, um ein Panoramabild zu erzeugen;einen Informationsprozessor (14), der basierend auf der Fahrbedingung des Fahrzeugs, welche durch die Fahrzeugsteuerinformation angezeigt ist, aus dem Inneren des Panoramabildes einen anzuzeigenden Bildbereich bestimmt und eine Kollisionsmöglichkeit zwischen einem Fahrzeugaußenseitenobjekt, das in dem Bildbereich erscheint, und dem Fahrzeug bewertet;einen Anzeigebildgenerator (15), der ein Anzeigebild erzeugt, das den Bildbereich enthält, der durch den Informationsprozessor (14) bestimmt ist, um ihn dadurch auf der Anzeige anzuzeigen;eine Fahrzeugsteuerung (12), die das Fahrzeug so steuert, dass seine Kollision mit dem Fahrzeugaußenseitenobjekt vermieden wird, entsprechend einem Ergebnis der Bewertung der Kollisionsmöglichkeit durch den Informationsprozessor (14) ;wobei der Informationsprozessor (14) aus dem Panoramabild der Fahrzeugperipherie einen Bildbereich bestimmt, der zu einer aus einer externen Vorrichtung angegebenen Bedingung passt; undwobei der Anzeigebildgenerator (15) das den zur aus der externen Vorrichtung spezifizierten Bedingung passenden Bildbereich beinhaltende Anzeigenbild erzeugt, um es damit auf der Anzeige und einer Anzeige der externen Vorrichtung anzuzeigen.

Description

  • TECHNISCHES GEBIET
  • Die vorliegende Erfindung bezieht sich auf eine Fahrzeugperipherie-Anzeigevorrichtung, die ein erfasstes Bild einer Fahrzeugperipherie einem Anwender präsentiert, und das Fahrzeug anhand einer von diesem Bild bestimmten Kollisionsmöglichkeit steuert.
  • HINTERGRUND
  • Beispielsweise in JP 2005-198160 A wird eine Fahrzeugvorrichtung (Vorrichtung im Fahrzeug) offenbart, welche eine Größe oder einen Beobachtungspunkt eines In-Fahrzeug-Kamerabildes ändert, das dem Fahrer zu präsentieren ist, auf Basis eines Lenkradwinkels und Information einer Schalthebelposition.
  • Weiter wird in JP 2001-55100 A ein In-Fahrzeug-Kamerasystem offenbart, das ein Panoramabild aus Fahrzeugkamerabildern erzeugt, auf Basis von Fahrzeuginformation, wie etwa einem Lenkradwinkel, um es dadurch dem Fahrer zu präsentieren.
  • Ähnliche Lehren wurden auch in DE 601 04 599 T2 offenbart, wo zum Beispiel omniazimutale optische Sensoren vorgeschlagen werden, um ein Panoramabild und ein perspektivisches Bild selektiv anzuzeigen. Somit kann beispielsweise eine Distanz zwischen einem Objekt und dem Fahrzeug ermittelt und ein Warnsignal ausgegeben werden, falls das Objekt in ein bestimmtes Gebiet um das Fahrzeug hineintritt. In DE 20 2011005102 U1 und DE 696 18 192 T3 werden auch optische Sensorsysteme für Anwendungen im Automobilbereich offenbart, so dass bei einer Totwinkelanzeige bei Annäherung eines großen Objektes eine Warnung ausgegeben wird. Patentdokumenten DE 10 2008 034 606 A1 , DE 10 2011 014 368 A1 , DE 100 59 315 A1 und DE 10 2011 077 398 A1 lehren allgemein, dass bei einer Kollisionsgefahr, ein angezeigter Raum so ausgerichtet wird, dass der Benutzer die kritischen Stellen gut erkennen kann.
  • Indem so eine Fahrzeugperipherie als das Panoramabild präsentiert wird, kann sich beispielsweise der Fahrer um die Rechts/Links-Drehungsrichtung herum versichern, um dadurch einen Abbiegungs-involvierenden Unfall zu vermeiden.
  • ZUSAMMENFASSUNG DER ERFINDUNG
  • DURCH DIE ERFINDUNG ZU LÖSENDE PROBLEME
  • Beim durch Patentdokumente 1 und 2 repräsentierten konventionellem Stand der Technik wird das Fahrzeugperipheriebild lediglich auf einem Bildschirm angezeigt; es bleibt damit dem Fahrer überlassen, ein Unfallrisiko aus dem Bild zu bewerten. Es differiert nämlich ein Ergebnis der Bewertung des Risikos basierend auf der Fahrzeugperipherie von Fahrer zu Fahrer. Somit gibt es das Problem, dass der Fahrbetrieb möglicherweise abhängig von dieser Bewertung verzögert wird.
  • Diese Erfindung ist gemacht worden, um das oben beschriebene Problem zu lösen und eine Aufgabe derselben ist es, eine Fahrzeugperipherie-Anzeigevorrichtung zu erzielen, welche den Fahrer auffordern kann, zum Fahren zu kommen, das sich eines Fahrzeugaußenseitenobjektes bewusst ist, und eine Fahrzeugsteuerung durchführen kann, um eine Kollision mit dem Fahrzeugaußenseitenobjekt automatisch zu vermeiden, selbst falls die Fahroperation durch den Fahrer verzögert ist.
  • MITTEL ZUM LÖSEN DER PROBLEME
  • Eine Fahrzeugperipherie-Anzeigevorrichtung gemäß der Erfindung ist eine Fahrzeugperipherie-Anzeigevorrichtung, die ein aufgenommenes Bild einer Fahrzeugperipherie auf einer Anzeige anzeigt, umfassend: einen Fahrzeugsteuerinformations-Empfänger, der Fahrzeugsteuerinformation erfasst, welche für eine Fahrbedingung eines Fahrzeugs indikativ ist; einen Panoramagenerator, der Bilder der Fahrzeugperipherie in einer Mehrzahl von Aufnahmerichtungen kombiniert, welche durch eine Mehrzahl von Fahrzeugkameras aufgenommen werden, um ein Panoramabild zu erzeugen; einen Informationsprozessor, der basierend auf der Fahrbedingung des Fahrzeugs, welche durch die Fahrzeugsteuerinformation angezeigt ist, aus dem Inneren des Panoramabildes einen anzuzeigenden Bildbereich bestimmt und eine Kollisionsmöglichkeit zwischen einem Fahrzeugaußenseitenobjekt, das in dem Bildbereich erscheint, und dem Fahrzeug bewertet; einen Anzeigebildgenerator, der ein Anzeigebild erzeugt, das den Bildbereich enthält, der durch den Informationsprozessor bestimmt ist, um ihn dadurch auf der Anzeige anzuzeigen; und eine Fahrzeugsteuerung, die das Fahrzeug so steuert, dass seine Kollision mit dem Fahrzeugaußenseitenobjekt vermieden wird, entsprechend einem Ergebnis der Bewertung der Kollisionsmöglichkeit durch den Informationsprozessor.
  • WIRKUNG DER ERFINDUNG
  • Gemäß dieser Erfindung wird ein solcher Effekt bereitgestellt, dass es möglich ist, den Fahrer aufzufordern, ein Fahren zu bekommen, das sich eines Fahrzeugaußenseitenobjektes bewusst ist und eine Fahrzeugsteuerung durchzuführen, um automatisch eine Kollision mit dem Fahrzeugaußenseitenobjekt zu vermeiden, selbst falls der Fahrbetrieb durch den Fahrer verzögert ist.
  • Figurenliste
    • 1 ist ein Blockdiagramm, welches eine Konfiguration einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 1 der Erfindung zeigt.
    • 2 ist ein Flussdiagramm, das einen Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 1 zeigt.
    • 3 ist ein Diagramm zum Zeigen der Verarbeitung (beim Linksabbiegen) des Ausschneidens eines Anzeigebereichs aus dem Fahrzeugperipheriebild gemäß einer Fahrbedingung eines Fahrzeugs.
    • 4 ist ein Diagramm zum Zeigen der Verarbeitung (beim Rückwärtsbewegen) des Ausschneidens eines Anzeigebereichs aus einem Fahrzeugperipheriebild gemäß einer Fahrbedingung eines Fahrzeugs.
    • 5 ist ein Blockdiagramm, das eine Konfiguration einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 2 der Erfindung zeigt.
    • 6 ist ein Flussdiagramm, das einen Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 2 zeigt.
    • 7 ist ein Blockdiagramm, das eine Konfiguration einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 3 der Erfindung zeigt.
    • 8 ist ein Flussdiagramm, das einen Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 3 zeigt.
    • 9 ist ein Diagramm, das ein Beispiel einer Verarbeitung des Änderns einer Größe eines Bildbereichs gemäß einer Laufbedingung eines Fahrzeugs zeigt.
    • 10 ist ein Blockdiagramm, das eine Konfiguration einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 4 der Erfindung zeigt.
    • 11 ist ein Flussdiagramm, das die Verarbeitung des Ausschneidens aus einem Panoramabild, eines Bildbereiches, der durch eine mitgebrachte Vorrichtung spezifiziert wird, und seines Anzeigens auf der mit hinein gebrachten Vorrichtung zeigt.
  • MODI ZUM AUSFÜHREN DER ERFINDUNG
  • Nachfolgend werden zum Illustrieren dieser Erfindung im größeren Detail Ausführungsformen zum Ausführen der Erfindung gemäß den beigefügten Zeichnungen beschrieben.
  • Ausführungsform 1
  • Bei der Fahrzeugperipherie-Anzeigevorrichtung gemäß der Erfindung wird von innerhalb eines Panoramabilds, das durch Kombinieren von Fahrzeugperipheriebildern in einer Mehrzahl von Aufnahmerichtungen, welche durch eine Mehrzahl von Fahrzeugkameras aufgenommen werden, ein für den Fahrer notwendiges Fahrzeugperipheriebild zu jeder Zeit des Fahrens ausgeschnitten, und unter Berücksichtigung einer Fahrzeugbewegungsrichtung präsentiert.
  • Insbesondere gibt es in einem Automobil viele tote Winkel ab dem Fahrer, so dass Fahrzeugunfälle hauptsächlich an kleineren Kollisionen zwischen Fahrzeugaußenseitenobjekten wie etwa einem Fußgänger, einem Fahrzeug und dergleichen, die in den Totwinkeln vorkommen, und dem Hostfahrzeug liegen.
  • Somit wird gemäß der vorliegenden Erfindung ein Fahrzeugperipheriebild auf der Sichtlinie, die möglicherweise unter den toten Winkel ab dem Fahrer gegeben wird, aus einem Panoramabild der Fahrzeugperipherie gemäß einer Bewegungsrichtung des Host-Fahrzeugs bestimmt. Dann wird eine Kollisionsmöglichkeit zwischen dem im Bild erscheinenden Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug bewertet und dem Fahrer in einer Anzeigenform präsentiert, welche zur Kollisionsmöglichkeit passt. Dies ermöglicht es dem Fahrer, die Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt, das im Bild erscheint, und dem Host-Fahrzeug visuell zu erkennen, auf Basis der Anzeigenform eines in einer Totwinkelrichtung aufgenommenen Bilds, wo die Sichtbarkeit während des Fahrens abnimmt.
  • Jedoch wird, egal wie der Fahrer Aufmerksamkeit schenkt, wie der Kollisionsunfall zu vermeiden ist, dem Fahren durch den Fahrer überlassen. Somit steuert bei dieser Fahrzeugperipherie-Anzeigevorrichtung gemäß der Erfindung, wenn die Kollisionsmöglichkeit zwischen dem in dem, dem Fahrer präsentierten Bild erscheinendem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug als am höchsten bestimmt wurde, die Vorrichtung das Fahrzeug, um den Kollisionsunfall zu vermeiden, ohne sich auf das Fahren durch den Fahrer zu verlassen. Dies ermöglicht es, den Kollisionsunfall sicher zu vermeiden.
  • 1 ist ein Blockdiagramm, das eine Konfiguration einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 1 der Erfindung zeigt. Die in 1 gezeigte Fahrzeugperipherie-Anzeigevorrichtung ist eine Fahrzeugperipherie-Anzeigevorrichtung mit dem oben beschriebenen Merkmal und ist mit einer Fahrzeugsteuerschnittstelle 10, einer Kameragruppe 11, einer Fahrzeugsteuerung 12, einem Panoramagenerator 13, einem Informationsprozessor 14, einem Anzeigebildgenerator 15 und einer Anzeige 16 versehen.
  • Die Fahrzeugsteuerschnittstelle 10 ist ein Fahrzeugsteuerinformations-Empfänger, der Bediensignale von Bedienteilen wie etwa einem Lenkrad, einem Schalthebel und dergleichen erfasst, welche Antriebsoperationen des Fahrzeugs durchführen, als für die Fahrbedingung des Fahrzeugs indikative Fahrzeugsteuerinformation. Beispiele der Fahrzeugsteuerinformation beinhalten Information, die sich auf die Fahrzeugsteuerung des Fahrzeugs beziehen, wie etwa einen Lenkwinkel eines Lenkrads, ein Bediensignal des Schalthebels und dergleichen. Weiterhin wird die an der Fahrzeugsteuerschnittstelle 10 erfasste Fahrzeugsteuerinformation an die Fahrzeugsteuerung 12 und den Informationsprozessor 14 ausgegeben.
  • Die Kameragruppe 11 ist eine Mehrzahl von Fahrzeugkameras, die an einer Mehrzahl von Positionen auf dem Fahrzeug montiert sind, und nimmt eine Fahrzeugperipherie in einer Mehrzahl von Richtungen auf. Als die Kameragruppe 11 werden beispielsweise eine Rückkamera, eine Frontkamera und Seitenkameras verwendet, die normalerweise auf dem Fahrzeug montiert sind.
  • Die Fahrzeugsteuerung 12 steuert die Bewegung des Fahrzeugs auf Basis der durch die Fahrzeugsteuerschnittstelle 10 erfassten Fahrzeugsteuerinformation. Weiter steuert die Fahrzeugsteuerung 12 das Host-Fahrzeug gemäß einem Ergebnis der Bewertung durch den Informationsprozessor 14 zur Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug. Wenn beispielsweise der Informationsprozessor 14 feststellte, dass die Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug am höchsten ist, steuert die Fahrzeugsteuerung 12 die Bewegung des Host-Fahrzeugs, um somit eine Kollision mit dem durch den Informationsprozessor 14 spezifizierten Fahrzeugaußenseitenobjekt zu vermeiden, ohne sich auf die Information aus der Fahrzeugsteuerschnittstelle 10 zu verlassen.
  • Der Panoramagenerator 13 verwendet eine Mehrzahl von durch die Kameragruppe 11 aufgenommenen Bildern, um ein Panoramabild zu erzeugen, in welchem Bilder einer Peripherie des Host-Fahrzeugs in einer Mehrzahl von aufgenommenen Richtungen miteinander gekoppelt werden. Beispielsweise verwendet der Panoramagenerator eine Mehrzahl von Kamerabildern, welche durch die Kameragruppe 11 aufgenommen sind, in welchen bildgebende Objekte räumlich kontinuierlich sind, und koppelt die entsprechenden Kamerabilder unter Berücksichtigung von Sichtlinien etc. der Fahrzeugkameras so zusammen, dass eine Kontinuität zwischen den angrenzenden Bildern sichergestellt ist.
  • Der Informationsprozessor 14 bestimmt aus dem durch den Panoramagenerator 13 erzeugten Panoramabild der Fahrzeugperipherie einen dem Fahrer zu präsentierenden Bildbereich auf Basis der Fahrbedingung des Host-Fahrzeugs, das durch die, durch die Fahrzeugsteuerschnittstelle 10 erfasste Fahrzeugsteuerinformation angegeben ist. Der dem Fahrer zu präsentierende Bildbereich ist beispielsweise ein Bildbereich, welcher in einer Richtung aufgenommen ist, wo die Sichtbarkeit in einem Sichtfeld ab dem Fahrer abnimmt.
  • Weiter bewertet der Informationsprozessor 14 die Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug auf Basis des Fahrzeugaußenseitenobjekts, das im durch das Panoramabild bestimmten Bildbereich erscheint, und der durch die Fahrzeugsteuerschnittstelle 10 erfassten Fahrzeugsteuerinformation. Beispielsweise schätzt der Informationsprozessor eine Distanz zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug auf Basis von in jedem vorbestimmten Zeitintervall durch die Kameragruppe 11 sequentiell aufgenommenen Bildern und der Position des Host-Fahrzeugs ab und vergleicht die geschätzte Distanz mit einem vorbestimmten Schwellenwert, um dadurch die Kollisionsmöglichkeit mit dem Fahrzeugaußenseitenobjekt zu bewerten.
  • Man beachte, dass der Informationsprozessor 14, wenn bewertet wird, dass die Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug am höchsten ist, ein Steuersignal an die Fahrzeugsteuerung 12 ausgibt, um sie so zu veranlassen, die Kollision mit dem Fahrzeugaußenseitenobjekt zu vermeiden.
  • Der Anzeigebildgenerator 15 erzeugt ein Anzeigebild, das einen durch den Informationsprozessor 14 bestimmten Bildbereich beinhaltet, auf Basis des durch den Panoramagenerator 13 erzeugten Panoramabildes und dem Verarbeitungsergebnis des Informationsprozessors 14. Wenn beispielsweise ein Fahrzeugaußenseitenobjekt im, dem Fahrer zu präsentierenden Bildbereich erscheint, der durch den Informationsprozessor 14 bestimmt ist, aus dem Panoramabild der Fahrzeugperipherie, erzeugt der Anzeigebildgenerator das Anzeigebild, in welchem Bildverarbeitung zum Herausheben des Fahrzeugaußenseitenobjekts durchgeführt worden ist.
  • Die Anzeige 16 ist eine Anzeige zum Anzeigen des durch den Anzeigebildgenerator 15 erzeugten Anzeigebilds und wird durch irgendeine Art von Anzeige realisiert, die im Fahrzeug platziert ist, oder eine in einer in das Fahrzeug hineingebrachten Informationsvorrichtung ausgestatteten Anzeige.
  • Man beachte, dass die Fahrzeugsteuerschnittstelle 10, die Fahrzeugsteuerung 12, der Panoramagenerator 13, der Informationsprozessor 14 und der Anzeigebildgenerator 15 als ein Software-Hardware-Kooperations-Verarbeitungsmittel realisiert werden, durch Implementieren der Programme, in welchen jeweilige Funktionen dieser Konfigurationselemente geschrieben sind, durch eine in der Fahrzeugperipherie-Anzeigevorrichtung montierten CPU.
  • Als Nächstes wird der Betrieb beschrieben.
  • 2 ist ein Flussdiagramm, das den Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 1 zeigt, und die Fahrzeugperipherie-Anzeigevorrichtung führt zyklisch die Verarbeitung in 2 durch.
  • Zuerst nehmen die jeweiligen Fahrzeugkameras der Kameragruppe 11 eine Fahrzeugperipherie auf, um die Kamerabilder der Fahrzeugperipherie in einer Mehrzahl von Aufnahmerichtungen zu erfassen (Schritt ST1). Beispielsweise führen die entsprechenden Fahrzeugkameras der Kameragruppe 11 periodisch Aufnahmen zu jedem vorbestimmten Zeitintervall durch, um Bilder zu ermitteln, die eine Zeitrafferänderung in der Situation der Fahrzeugperipherie zeigen. Die durch die jeweiligen Fahrzeugkameras der Kameragruppe 11 aufgenommenen Kamerabilder werden an den Panoramagenerator 13 gesendet.
  • Der Panoramagenerator 13 kombiniert die Bilder der Fahrzeugperipherie in einer Mehrzahl von Aufnahmerichtungen, welche durch die jeweiligen Fahrzeugkameras der Kameragruppe 11 aufgenommen sind, um das Panoramabild zu erzeugen (Schritt ST2). Das durch den Panoramagenerator 13 erzeugte Panoramabild wird an den Informationsprozessor 14 und den Anzeigebildgenerator 15 ausgegeben.
  • Dann erfasst die Fahrzeugsteuerschnittstelle 10 die sich auf eine Fahrbedienung beziehende Fahrzeugsteuerinformation (Schritt ST3). Die sich auf eine Fahrbedienung beziehende Fahrzeugsteuerinformation ist Information, welche für die Fahrbedingung des Fahrzeugs durch den Fahrer indikativ ist und ist beispielsweise Information, die für einen Lenkwinkel des Lenkrads oder eine Schaltposition des Schalthebels indikativ ist, die aus einem Fahrzeugbedienmechanismus einschließlich des Lenkrads und des Schalthebels erfasst werden. Die durch die Fahrzeugsteuerschnittstelle 10 erfasste Fahrzeugsteuerinformation wird an den Informationsprozessor 14 ausgegeben.
  • Basierend auf der Fahrbedienung des Fahrzeugs, welche durch die Fahrzeugsteuerinformation angegeben ist, bestimmt der Informationsprozessor 14 von innerhalb des Panoramabildes den anzuzeigenden Bildbereich (Schritt ST4). In diesem Schritt wird für den Bildbereich des Bestimmungsergebnisses Information zum Spezifizieren des Bildbereichs erzeugt (das als Abschneiden/Clippen des Bilds bezeichnet wird), wie etwa, in welcher Aufnahmerichtung sein Bild ist, welcher Teil des Panoramabildes der Bildbereich ist und ob ein Fahrzeugaußenseitenobjekt, das ein Hindernis sein kann, als ein Bildobjekt gegeben ist. Die für den Bildbereich des Bestimmungsergebnis indikative Information wird aus dem Informationsprozessor 14 an den Anzeigebildgenerator 15 ausgegeben.
  • 3 sind Diagramme zum Zeigen der Verarbeitung (beim Linksabbiegen) des Clippens des Anzeigebereichs aus dem Fahrzeugperipheriebild gemäß der Fahrbedingung des Fahrzeugs. In einer in 3(a) gezeigten Form des Panoramabildes zeigt die obere Hälfte des Panoramabilds 13a ein Fahrzeugfront-180°-Panoramabild und zeigt die untere Hälfte des Panoramabilds 13a ein Fahrzeugheck-180°-Panoramabild. Weiter, wenn das rechte Ende des oberen halben Panoramabildes mit dem linken Ende des unteren halben Panoramabildes verbunden wird, wird ein Panorama von 360° um das Fahrzeug herum (omnidirektionales Panorama des Fahrzeugs) bereitgestellt. Entsprechend, bei Sicht Fahrer voraus dem Fahrzeug erscheint das auf der rechten Seite bei Blick vom Fahrer existierende Fahrzeugaußenseitenobjekt um das rechte Ende des oberen halben Panoramabilds herum wie auch um das linke Ende des unteren halben Panoramabilds herum. Nachfolgend wird angenommen, dass der Panoramagenerator 13 das Panoramabild dieser Form erzeugt. Man beachte, dass diese Form nur ein Beispiel einer Form des Panoramabilds ist und ein Panoramabild einer anderen Form verwendet werden kann.
  • In einer Bedingung, wenn das in 3(a) gezeigte Panoramabild 13a ermittelt wird, wenn der Fahrer das Lenkrad nach links dreht (Lenkradwinkel θ), während er den Schalthebel zum Fahren „D“ bringt, bestimmt der Informationsprozessor 14 aus innerhalb des Panoramabilds 13a Bildbereiche, die durch unterbrochene Linien (Clippbilder) umgeben sind, als die anzuzeigenden Bildbereiche. Wenn nämlich in der Fahrbedingung des Wendens des Fahrzeugs nach links, wie in 3(b) gezeigt, werden Vorwärts- und Rückwärtsrichtungen auf der inneren Radseite des Fahrzeugs Richtungen, in welchen die Fahrersicht abnimmt. Somit wird das in 3(a) als durch unterbrochene Linien umgebene linke Frontbildbereich und der linke Rückbildbereich abgeschnitten. Wenn beispielsweise die Auflösung des Panoramabilds lateral L × vertikal 2H ist, und eine Linkswendung bei einem Lenkradwinkel 0 vorgenommen wird, werden die Bildbereiche, die alle eine Auflösung von W × H und eine Zentrumslinie (Zentrumslinie des Clippbilds) an einer Position L/20 weg von der Zentrumslinie des Panoramabilds aufweisen, als Bildbereiche in Vorwärtsrichtung und Rückwärtsrichtung auf der inneren Radseite geclippt (linke Seite).
  • Wenn das die Bildbereiche beinhaltete Anzeigebild dem Fahrer präsentiert wird, indem es auf der Anzeige 16 angezeigt wird, kann der Fahrer Anwesenheit/Abwesenheit eines Hindernisses auf der inneren Radseite des Fahrzeugs sicherstellen und somit ist es möglich, ihn/sie aufzufordern, zu fahren, um einen Wendungs-involvierenden Unfall während des Linksabbiegens zu vermeiden.
  • Derweil sind 4 Diagramme zum Zeigen der Verarbeitung (beim Rückwärtsfahren) des Clippens des Anzeigebereichs aus dem Fahrzeugperipheriebild gemäß der Fahrbedingung des Fahrzeugs. Auch in einer Form des in 4(a) gezeigten Panoramabilds, wie in 3, zeigt die obere Hälfte des Panoramabilds 13a ein Fahrzeugfront-180°-Panoramabild und zeigt die untere Hälfte des Panoramabilds 13a ein Fahrzeugheck-180°-Panoramabild und wenn das rechte Ende des oberen halben Panoramabildes mit dem linken Ende des unteren halben Panoramabildes verbunden wird, wird ein Panorama von 360° um das Fahrzeug herum bereitgestellt (omnidirektionales Panorama des Fahrzeugs).
  • In einer Bedingung, bei der das in 4(a) gezeigte Panoramabild 13a ermittelt wird, wenn der Fahrer den Schalthebel in Rückwärts „R“ legt, um sich rückwärts zu bewegen, während er das Lenkrad nach links dreht (Lenkradwinkel θ), bestimmt der Informationsprozessor 14 von innerhalb des Panoramabilds 13a durch unterbrochene Linien umgebene Bildbereiche (Clippbilder) als die anzuzeigenden Bildbereiche. Es wird nämlich im Falle der Bewegung des Fahrzeugs in einer wie in 4(b) gezeigten linken Rückwärtsrichtung der Fahrer erfordert, visuell um die Rückwärtsrichtung des Fahrzeugs herum zu erkennen; jedoch ist es im Allgemeinen wahrscheinlicher, dass der Fahrer weniger Aufmerksamkeit der rechten Frontseite des Fahrzeugs widmet, so dass, falls ein Hindernis in seiner Richtung existiert, das Kollisionsrisiko höher wird. Somit werden die in 4(a) als durch unterbrochene Linien umgebenen jeweiligen rechten Front- und linken Rückbildbereiche abgeschnitten. Wenn beispielsweise die Auflösung des Panoramabildes lateral L × vertikal 2H beträgt und der Lenkradwinkel θ ist, werden die Bildbereiche, die jeder eine Auflösung von W × H aufweisen und eine Zentrallinie (Zentrallinie der Clippbilder) an einer Position L/20 weg von der Zentrallinie des Panoramabilds aufweisen, als die Front- und linken Rückbildbereiche abgeschnitten.
  • Wenn das diese Bildbereiche beinhaltende Anzeigebild dem Fahrer präsentiert wird, indem es auf der Anzeige 16 angezeigt wird, kann der Fahrer die Anwesenheit/Abwesenheit eines Hindernisses in der Rückwärtsrichtung des Fahrzeugs bestätigen und seine diagonal entgegengesetzten Richtung und somit ist es möglich, ihn/sie dazu aufzufordern, zum Fahren zu gelangen, um einen Wende-involvierenden Unfall während der Rückwärtsbewegung zu vermeiden. Man beachte, dass das obige Verfahren des Abschneidens der Bildbereiche ein Beispiel ist und ein anderes Verfahren verwendet werden kann.
  • Hier sei zurückgekehrt zur Beschreibung von 2. Der Informationsprozessor 14 detektiert, wenn aus dem Panoramabild der dem Fahrer anzuzeigende Bildbereich bestimmt wird, ein Fahrzeugaußenseitenobjekt, das als Hindernis dient, aus Bildobjekten im vorbestimmten Bildbereich (Schritt ST5). Beispielsweise bestimmt aus jedem aus den sequentiell bei jedem vorbestimmten Zeitintervall durch die Kameragruppe 11 aufgenommenen Kamerabildern erzeugten Panoramabild der Informationsprozessor sequentiell den obigen Bildbereich. Bei Bilderkennung des Fahrzeugaußenseitenobjektes, das in diesen Bildbereichen erscheint, falls das in dem temporär sequentiellen Bildbereich erscheinende Fahrzeugaußenseitenobjekt graduell größer wird, wird dieses Fahrzeugaußenseitenobjekt als sich graduell dem Host-Fahrzeug annähernd festgestellt, so dass das Fahrzeugaußenseitenobjekt als ein Fahrzeugaußenseitenobjekt festgestellt wird, das ein Hindernis zum Host-Fahrzeug sein kann.
  • Der Informationsprozessor 14 bestimmt dann die Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt, das in dem Fahrer anzuzeigenden Bildbereich erscheint, und dem Host-Fahrzeug (Schritt ST6). Beispielsweise basierend auf einer Größe des in dem vorgenannten zeitlich sequentiellen Bildbereichen erscheinenden Fahrzeugaußenseitenobjekts schätzt der Informationsprozessor die Relativdistanz zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug. Dann vergleicht er die geschätzte Distanz mit Schwellenwertbereichen, welche drei Bedingungen von „keine Kollisionsmöglichkeit“, „Vorliegen von Kollisionsmöglichkeit“ und „Höchste Kollisionsmöglichkeit“ angegeben, um die entsprechende Situation zu bestimmen.
  • Wenn „Keine Kollisionsmöglichkeit“ bewertet wird, das heißt dass es keine Kollisionsmöglichkeit gibt, weil die Distanz von dem als ein Hindernis dienenden Fahrzeugaußenseitenobjekt lang ist, oder dass kein als ein Hindernis dienendes Fahrzeugaußenseitenobjekt detektiert wird, teilt der Informationsprozessor 14 dem Anzeigebildgenerator 15 das mit. Beim Empfangen der obigen Notifikation extrahiert der Anzeigebildgenerator 15 den als durch den Informationsprozessor 14 anzuzeigend bestimmten Bildbereich von innerhalb des durch den Panoramagenerator 13 erzeugten Panoramabildes und wendet eine erste Bildverarbeitung auf den Bildbereich an, um das Anzeigebild zu erzeuge (Schritt ST7). Man beachte, dass die erste Bildverarbeitung eine Verarbeitung ist, welche das Anzeigenbild erzeugt, das den durch den Informationsprozessor 14 ausgeschnittenen Bildbereich enthält, ohne irgendeine spezielle Bildverarbeitung auf das Fahrzeugaußenseitenobjekt als ein Bildobjekt anzuwenden.
  • Weiter, wenn „Vorliegen von Kollisionsmöglichkeit“ festgestellt wird, das heißt, dass die Distanz ab dem als ein Hindernis dienenden Fahrzeugaußenseitenobjekt kürzer als in dem Fall von „Keine Kollisionsmöglichkeit“ ist und innerhalb eines vorbestimmten Distanzbereichs fällt, teilt der Informationsprozessor 14 dem Anzeigebildgenerator 15 das mit.
  • Beim Empfangen der obigen Mitteilung erzeugt der Anzeigebildgenerator 15 den durch den Informationsprozessor 14 als anzuzeigend bestimmten Bildbereich von innerhalb des durch den Panoramagenerator 13 erzeugten Panoramabildes und wendet eine zweite Bildverarbeitung auf den Bildbereich an, um das Anzeigenbild zu erzeugen (Schritt ST8).
  • Die zweite Bildverarbeitung ist eine Modifikationsverarbeitung, um den Fahrer zu veranlassen, dem Fahrzeugaußenseitenobjekt Aufmerksamkeit zu schenken, und ist eine Verarbeitung, welche das, den durch den Informationsprozessor 14 geclippten Bildbereich enthaltende Anzeigenbild durch Anwenden von Bildverarbeitung zum Hervorheben des Fahrzeugaußenseitenobjekts als ein Bildobjekt erzeugt. Beispiele von Hervorheben beinhalten beispielsweise Umgeben des Fahrzeugaußenseitenobjekts mit einem Rahmen, Machen eines Rings längs dem Umriss des Fahrzeugaußenseitenobjekts, Blinkenlassen der Linie des Rahmens oder des Rings, Anlegen einer Warnfarbe an die Linie des Rahmens oder des Rings.
  • Beim Erzeugen des den Bildbereich enthaltenden Anzeigenbilds in Schritt ST7 oder Schritt ST8 gibt der Anzeigebildgenerator 15 das erzeugte Anzeigenbild an die Anzeige 16 aus.
  • Die Anzeige 16 zeigt auf ihrem Bildschirm das aus dem Anzeigebildgenerator 15 eingegebene Anzeigenbild an (Schritt ST9). Dies veranlasst den Fahrer, dem Fahrzeugaußenseitenobjekt Aufmerksamkeit zu schenken, was es ermöglicht, ihn/sie aufzufordern, zu fahren, um eine Kollision mit dem Host-Fahrzeug zu vermeiden.
  • Wenn andererseits „Höchste Kollisionsmöglichkeit“ bestimmt wird, nämlich dass die Distanz ab dem als ein Hindernis dienenden Fahrzeugaußenseitenobjekt viel kürzer wird und innerhalb eines vorbestimmten Distanzbereichs fällt, der zum Vermeiden der Kollision notwendig ist, gibt der Informationsprozessor 14 an die Fahrzeugsteuerung 12 eine Anweisung zum Vermeiden der Kollision aus und gibt daran Information aus, die zum Vermeiden der Kollision notwendig ist, wie etwa eine Richtung, in welcher das Ziel-Fahrzeugaußenseitenobjekt existiert und dergleichen.
  • Man beachte, dass der zum Vermeiden der Kollision notwendige Distanzbereich beispielsweise ein Bereich von mehreren Metern als die Distanz zwischen dem Fahrzeugaußenseitenobjekt und dem Host-Fahrzeug sein kann, welche ein Distanzbereich ist, bei dem die Kollision mit dem Fahrzeugaußenseitenobjekt als unvermeidbar vorhergesagt wird, falls der Fahrer eine Bestimmung über die Fahrbedienung trifft.
  • Beim Empfangen der obigen Anweisung steuert die Fahrzeugsteuerung 12 die Bewegung des Host-Fahrzeugs, um die Kollision zu vermeiden, auf Basis der Information, die zum Vermeiden der Kollision notwendig ist, ohne sich auf das Fahren durch den Fahrer zu verlassen (Schritt ST10).
  • Beispielsweise gibt die Fahrzeugsteuerung 12 die Fahrzeugsteuerinformation aus der Fahrzeugsteuerschnittstelle 10 ein, um die Fahrbedingung des Host-Fahrzeugs zu spezifizieren, und spezifiziert in Bezug auf den anhand dieser Bedingung abgeschnittenen Bildbereich eine ungefähre Position des Fahrzeugaußenseitenobjekts aus der zeitlichen Änderung etc. im Bildbereich, um dadurch die Bewegungsrichtung des Host-Fahrzeugs zu ändern, um so die Richtung zu vermeiden, in welcher das Fahrzeugaußenseitenobjekt existiert, oder die Bewegungsgeschwindigkeit in der Richtung zu reduzieren, in welcher das Fahrzeugaußenseitenobjekt existiert, oder das Fahren des Host-Fahrzeugs zu stoppen.
  • Man beachte, dass, wenn die Bewegungsrichtung des Fahrzeugs zu ändern ist, der Informationsprozessor 14 vorab aus dem Panoramabild der Fahrzeugperipherie eine sichere Richtung spezifiziert, in welcher kein Fahrzeugaußenseitenobjekt existiert, und auch Information, die indikativ für die sichere Richtung ist, zur Fahrzeugsteuerung 12 sendet, zusammen mit der Anweisung zum Vermeiden der Kollision. Dies ermöglicht es der Fahrzeugsteuerung 12, die Fahrzeugbewegungsrichtung zu der Richtung zu ändern, in der kein Fahrzeugaußenseitenobjekt existiert, und die sicher ist.
  • Wie oben beschrieben, gemäß Ausführungsform 1, umfasst sie: eine Fahrzeugsteuerschnittstelle 10, welche Fahrzeugsteuerinformation erfasst, die für eine Antriebbedingung des Fahrzeugs indikativ ist; den Panoramagenerator 13, der Bilder einer Fahrzeugperipherie bei einer Mehrzahl von Aufnahmerichtungen, die durch die Kameragruppe 11 aufgenommen sind, kombiniert, um dadurch ein Panoramabild der Fahrzeugperipherie zu erzeugen; der Informationsprozessor 14, welcher basierend auf der Fahrbedienung des Fahrzeugs, welche durch die Fahrzeugsteuerinformation angegeben ist, aus dem Panoramabild der Fahrzeugperipherie einen anzuzeigenden Bildbereich bestimmt, und über die Kollisionsmöglichkeit zwischen dem in dem Bildbereich erscheinenden Fahrzeugaußenseitenobjekt und dem Fahrzeug entscheidet; dem Anzeigebildgenerator 15, der ein Anzeigenbild, das den durch den Informationsprozessor 14 bestimmten Bildbereich beinhaltet, erzeugt, um es dadurch auf der Anzeige 16 anzuzeigen; und die Fahrzeugsteuerung 12, die das Fahrzeug steuert, seine Kollision mit dem Fahrzeugaußenseitenobjekt zu vermeiden, gemäß einem Ergebnis der Bestimmung zur Kollisionsmöglichkeit durch den Informationsprozessor 14.
  • Durch Bereitstellen der so beschriebenen Konfiguration wird es möglich, den Fahrer aufzufordern, so zu fahren, dass die Kollision mit dem Fahrzeugaußenseitenobjekt anhand der Kollisionsmöglichkeit mit dem Fahrzeugaußenseitenobjekt, bewertet aus den erfassten Bildern der Fahrzeugperipherie, vermieden wird.
  • Weiter, wenn beispielsweise in den Distanzbereich fallend, bei welchem die Kollision mit dem Fahrzeugaußenseitenobjekt unvermeidbar ist, falls der Fahrer eine Bestimmung zur Fahrbedienung trifft, wird das Host-Fahrzeug automatisch gesteuert, um die Kollision mit dem Fahrzeugaußenseitenobjekt zu vermeiden, so dass der Kollisionsunfall sicher vermieden werden kann.
  • Weiter erzeugt gemäß Ausführungsform 1 der Anzeigebildgenerator 15 ein Anzeigenbild, in welchem im anzuzeigenden Bildbereich ein Bereich, wo das Fahrzeugaußenseitenobjekt erscheint, in eine Anzeigeform verarbeitet worden ist, die zur Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt und dem Fahrzeug passt. Dies veranlasst den Fahrer, dem Fahrzeugaußenseitenobjekt Aufmerksamkeit zu schenken, auf Basis des Anzeigenbildes, was es möglich macht, ihn/sie aufzufordern, zu fahren, um die Kollision mit dem Host-Fahrzeug zu vermeiden.
  • Weiterhin bestimmt gemäß Ausführungsform 1 der Informationsprozessor 14 aus dem Panoramabild der Fahrzeugperipherie einen in der Richtung, in der die Fahrersichtbarkeit abnimmt, erfassten Bildbereich als den anzuzeigenden Bildbereich. Dies ermöglicht es, dem Fahrer das Bild in der Richtung, in der die Aufmerksamkeit erforderlich ist, gemäß der Fahrbedingung angemessen zu präsentieren.
  • Ausführungsform 2
  • Eine Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 2 zeigt in Bezug auf den dem Fahrer anzuzeigenden Bildbereich, aus welchen Teilen des Panoramabilds der Bildbereich ausgeschnitten worden ist, nämlich, mit welcher Aufnahmerichtung in der Fahrzeugperipherie sein Bild korrespondiert, als im Anzeigenbild beinhaltet an. Dies gestattet dem Fahrer, leicht zu verstehen, in welcher Richtung das präsentierte Bild aufgenommen worden ist.
  • 5 ist ein Blockdiagramm, das eine Konfiguration der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 2 der Erfindung zeigt. Die in 5 gezeigte Fahrzeugperipherie-Anzeigevorrichtung ist mit einer Fahrzeugsteuerschnittstelle 10, einer Kameragruppe 11, einer Fahrzeugsteuerung 12, einem Panoramagenerator 13, einem Informationsprozessor 14A, einem Anzeigebildgenerator 15, einer Anzeige 16 und einer Anwendungsschnittstelle 17 konfiguriert. Man beachte, dass in 5 die Konfigurationselemente, auf welche dieselben Bezugszeichen wie in 1 angewendet sind, ähnlich der Ausführungsform 1 funktionieren, so dass deren Beschreibung weggelassen wird.
  • Die Anwendungsschnittstelle 17 ist eine Schnittstelle, um dem Informationsprozessor 14A Bedieninformation eines vorbestimmten Bedienteils durch den Fahrer mitzuteilen und insbesondere empfängt sie die Bedieninformation zum Anweisen des Informationsprozessors 14A, im Anzeigenbild Information zu beinhalten, die für die Aufnahmerichtung des aus dem Kamerabild ausgeschnittenen Bildbereichs indikativ ist. Man beachte, dass der vorbestimmte Bedienteil ein Bedienteil ist, der dem Fahrer gestattet, eine Bedienung, wenn angemessen, durchzuführen, die beispielsweise eine auf dem Lenkrad platzierte Eingabetaste und dergleichen beinhalten.
  • Der Informationsprozessor 14A arbeitet dem Grundsatz nach ähnlich zur Ausführungsform 1; wenn jedoch die obige Bedieninformation durch die Anwendungsschnittstelle 17 erfasst wird, teilt der Informationsprozessor dem Anzeigebildgenerator 15 Information mit, die angeben, aus welchem Bereich des Panoramabilds der dem Fahrer zu präsentierende Bildbereich ausgeschnitten worden ist, nämlich in welcher Richtung in der Fahrzeugperipherie der Bildbereich aufgenommen worden ist.
  • Der Anzeigebildgenerator 15 erzeugt das Anzeigenbild, das die aus dem Informationsprozessor 14A eingegebene und für die Aufnahmerichtung des Bildbereichs indikative Information beinhaltet.
  • Die Fahrzeugsteuerschnittstelle 10, die Fahrzeugsteuerung 12, der Panoramagenerator 13, der Informationsprozessor 14A, der Anzeigebildgenerator 15 und die Anwendungsschnittstelle 17 werden als ein Software-Hardware-Kooperations-Verarbeitungsmittel realisiert, indem die Programme, in denen entsprechende Funktionen dieser Konfigurationselemente beschrieben sind, durch eine CPU realisiert werden, die in der Fahrzeugperipherie-Anzeigevorrichtung montiert ist.
  • Als Nächstes wird der Betrieb beschrieben.
  • 6 ist ein Flussdiagramm, das den Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 2 zeigt, und die Fahrzeugperipherie-Anzeigevorrichtung führt zyklisch die Verarbeitung in 6 aus. In der Verarbeitung durch dieses Flussdiagramm ist unten eine sich von derjenigen in 1 unterscheidende Verarbeitung gezeigt.
  • In Schritt ST4a erfasst der Informationsprozessor 14A die Bedieninformation der Anwendungsschnittstelle 17. Wenn nämlich der Fahrer den Bedienteil, wie etwa eine auf dem Lenkrad platzierte Eingabetaste oder dergleichen betätigt, wird ihre Bedieninformation über die Anwendungsschnittstelle 17 am Informationsprozessor 14A eingegeben.
  • Im Schritt ST7a, wenn „Keine Kollisionsmöglichkeit“ in Bezug auf das in dem vorbestimmten Bildbereich erscheinende Fahrzeugaußenseitenobjekt bestimmt wird, teilt der Informationsprozessor 14A dem Anzeigebildgenerator 15 das Ergebnis dieser Entscheidung und die für die Aufnahmerichtung des Bildbereichs indikative Information mit.
  • Beim Empfangen der obigen Mitteilung extrahiert der Anzeigebildgenerator 15 aus dem durch den Panoramagenerator 13 erzeugten Panoramabild den durch den Informationsprozessor 14A als anzuzeigend bestimmten Bildbereich und wendet eine dritte Bildverarbeitung auf den Bildbereich an, um das Anzeigenbild zu erzeugen (Schritt ST8a).
  • Man beachte, dass die dritte Bildverarbeitung Verarbeitung ist, welche das dem durch den Informationsprozessor 14 ausgeschnittenen Bildbereich beinhaltende Anzeigenbild erzeugt, indem auf diesen Bereich Bildverarbeitung zu seiner Anzeige mit der Aufnahmerichtung desselben angewendet wird, ohne irgendeine spezielle Bildverarbeitung an das Fahrzeugaußenseitenobjekt als ein Bildobjekt anzuwenden.
  • Derweil, in Schritt ST7a, wenn „Existenz von Kollisionsmöglichkeit“ in Bezug auf das in dem bestimmten Bildbereich Fahrzeugaußenseitenobjekt bestimmt wird, teilt der Informationsprozessor 14A dem Anzeigebildgenerator 15 das Ergebnis dieser Bewertung und die für die Aufnahmerichtung des Bildbereichs indikative Information mit.
  • Beim Empfangen der obigen Mitteilung extrahiert der Anzeigebildgenerator 15 aus dem durch den Panoramagenerator 13 erzeugten Panoramabild den durch den Informationsprozessor 14A als anzuzeigend bestimmten Bildbereich und wendet vierte Bildverarbeitung auf den Bildbereich an, um das Anzeigenbild zu erzeugen (Schritt ST9a).
  • Man beachte, dass die vierte Bildverarbeitung eine Modifikationsverarbeitung ist, um den Fahrer zu veranlassen, dem Fahrzeugaußenseitenobjekt Aufmerksamkeit zu schenken, und eine Verarbeitung ist, welche das Anzeigenbild erzeugt, das den durch den Informationsprozessor 14 abgeschnitten Bildbereich beinhaltet, durch Anwenden von Bildverarbeitung zum Hervorheben des Fahrzeugaußenseitenobjekts als einem Bildobjekt und zum Anzeigen des Bildbereichs mit seiner Aufnahmerichtung.
  • Beim Erzeugen des Anzeigenbilds beim Schritt ST8a oder Schritt ST9a gibt der Anzeigebildgenerator 15 das erzeugte Anzeigenbild an die Anzeige 16 aus.
  • Die Anzeige 16 zeigt auf ihrem Bildschirm das Anzeigenbild, das aus dem Anzeigebildgenerator 15 eingegeben wird, an (Schritt ST10a).
  • Wie oben beschrieben, gibt gemäß Ausführungsform 2 der Informationsprozessor 14A die für die Aufnahmerichtung des aus dem Panoramabild bestimmten Bildbereichs der Fahrzeugperipherie indikative Information an den Anzeigebildgenerator 15 aus und der Anzeigebildgenerator 15 erzeugt das den Bildbereich und die für Aufnahmerichtung indikative Information enthaltende Anzeigenbild. Dies gestattet dem Fahrer, aus dem Anzeigenbild das Fahrzeugaußenseitenobjekt und die Richtung zu erkennen, in welcher die Fahrzeugaußenseite existiert, so dass es möglich ist, den Fahrer zu veranlassen, dem Fahrzeugaußenseitenobjekt Aufmerksamkeit zu widmen, um ihn/sie dadurch aufzufordern, zu fahren, um die Kollision mit dem Host-Fahrzeug geeigneter zu vermeiden.
  • Ausführungsform 3
  • In einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 3 wird die Größe des aus dem Panoramabild der Fahrzeugperipherie zu bestimmenden Bildbereichs basierend auf einer Laufbedingung des Fahrzeugs geändert, die aus Fahrzeuginformation spezifiziert wird.
  • 7 ist ein Blockdiagramm, das eine Konfiguration der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 3 der Erfindung zeigt. Die in 7 gezeigte Fahrzeugperipherie-Anzeigevorrichtung ist mit einer Fahrzeugsteuerschnittstelle 10, der Kameragruppe 11, einer Fahrzeugsteuerung 12, einem Panoramagenerator 13, einem Informationsprozessor 14B, einem Anzeigebildgenerator 15A, einer Anzeige 16 und einem Fahrzeuginformations-Manager 18 konfiguriert. Man beachte, dass in 7 die Konfigurationselemente, auf welche dieselben Bezugszeichen wie in 1 angewendet werden, ähnlich zur Ausführungsform 1 funktionieren, so dass eine Beschreibung derselben weggelassen wird.
  • Der Fahrzeuginformations-Manager 18 verwaltet die Fahrzeuginformation durch ihr Erfassen aus dem Antriebsmechanismus des Fahrzeugs und präsentiert sie auf Anfrage der Anfragequelle. Man beachte, dass die Fahrzeuginformation Information ist, die für die Laufbedingung des Fahrzeugs indikativ ist, von der Beispiele einer Fahrzeuggeschwindigkeit und eine Beschleunigungsrate beinhalten.
  • Der Informationsprozessor 14B ändert die Größe des aus dem Panoramabild der Fahrzeugperipherie zu bestimmenden Bildbereichs (nachfolgend als Clipp-Bildbereich bezeichnet), auf Basis der Fahrbedingung des Fahrzeugs, die aus der Fahrzeuginformation spezifiziert ist. Beispielsweise vergrößert oder verkleinert sie die Größe des Clipp-Bildbereichs gemäß der Fahrzeuggeschwindigkeit.
  • Der Anzeigebildgenerator 15A erzeugt das Anzeigenbild, das dem durch den Informationsprozessor 14B bestimmten Bildbereich beinhaltet, in der zur Laufbedingung des Fahrzeugs passenden Größe.
  • Die Fahrzeugsteuerschnittstelle 10, die Fahrzeugsteuerung 12, der Panoramagenerator 13, der Informationsprozessor 14B, der Anzeigebildgenerator 15A und der Fahrzeuginformations-Manager 18 werden als ein Software/Hardware-Kooperationsverarbeitungsmittel realisiert, indem die Programme, in welchen entsprechende Funktionen dieser Konfigurationselemente geschrieben sind, durch eine in der Fahrzeugperipherie-Anzeigevorrichtung montierte CPU implementiert werden.
  • Als Nächstes wird der Betrieb beschrieben.
  • 8 ist ein Flussdiagramm, welches den Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 3 zeigt, und die Fahrzeugperipherie-Anzeigevorrichtung führt zyklisch die Verarbeitung in 8 durch. In der Verarbeitung durch dieses Flussdiagramm ist unten eine andere Verarbeitung als diejenige in 1 gezeigt.
  • In Schritt ST4b macht der Informationsprozessor 14B eine Anfrage nach der Fahrzeuginformation an dem Fahrzeuginformations-Manager 18, um dadurch die für die aktuelle Laufbedingung des Fahrzeugs indikative Fahrzeuginformation zu erfassen.
  • Dann bestimmt der Informationsprozessor 14B aus dem Panoramabild den Clippbildbereich mit der zu der aktuellen Laufbedingung des Fahrzeugs abgepassten Größe (Schritt ST5b).
  • 9 ist ein Diagramm, das ein Beispiel der Verarbeitung des Änderns der Größe des Bildbereichs gemäß der Laufbedingung des Fahrzeugs zeigt. Hier wird eine Beschreibung der Verarbeitung des Abschneidens des Bildbereichs in der zur Fahrzeuggeschwindigkeit passenden Größe und der Beschleunigungsrate des Fahrzeugs gemacht. Man beachte, dass in 9 die vertikale Größe des Clipp-Bildbereichs fest ist, unabhängig von der Laufbedingung, aber seine laterale Größe anhand der Fahrzeuggeschwindigkeit und der Beschleunigungsrate geändert wird.
  • Beispielsweise wird von drei Laufbedingungen Fall A, Fall B, Fall C) die Laufbedingung des Falls A aufgenommen, die Fahrzeuggeschwindigkeit V und die Beschleunigungsrate □F aufzuweisen, und diese Laufbedingung wird als eine Referenz verwendet, mit welcher die Größe A1 des Ausschnitts-Bildbereiches durch lateral W × vertikal H repräsentiert ist. Weiterhin berechnet der Informationsprozessor 14B die laterale Größe des Clipp-Bildbereiches unter Verwendung einer Funktion der Fahrgeschwindigkeit V und der Beschleunigungsrate □.
  • Hier, in der Laufbedingung B, obwohl die Fahrzeuggeschwindigkeit die gleiche wie im Falle A ist, ist die Beschleunigungsrate □1 (> □F). In diesem Fall wird das Sichtfeld des Fahrers in einem Grad enger, der dem Anstieg bei der Beschleunigungsrate entspricht.
  • Somit, um den aufgenommenen Bildbereich mit einem breiteren Bereich an Sicht-Feld zu präsentieren, wie in 9 gezeigt, bestimmt der Informationsprozessor 14B (schneidet ab) einen Clipp-Bildbereich, der lateral größer als der Clipp-Bildbereich im Fall A ist, mit der Größe W'□1 (> W) (Größe A2 = W'□1 × H) aus dem Panoramabild.
  • Weiterhin, in der Laufbedingung C, obwohl die Fahrzeuggeschwindigkeit die gleiche wie in Fällen A und B ist, beträgt die Beschleunigungsrate □2 (> □1). In diesem Fall wird das Sichtfeld des Fahrers viel enger, um einen Grad entsprechend dem Anstieg bei der Beschleunigungsrate.
  • Somit, um den aufgenommenen Bildbereich mit einem breiteren Bereich visuellen Felds zu präsentieren, wie in 9 gezeigt, bestimmt der Informationsprozessor 14B (schneidet ab) einen Clipp-Bildbereich, der lateral größer als der Clipp-Bildbereich im Fall B ist, mit der Größe W'□2 (> W'□1) (Größe A3 = W'□2 × H) aus dem Panoramabild.
  • Rückkehrend zur Beschreibung von 8 extrahiert im Schritt ST8b der Anzeigebildgenerator 15A aus dem durch den Panoramagenerator 13 erzeugten Panoramabild den Bildbereich, der als durch den Informationsprozessor 14B anzuzeigen bestimmt ist, und wendet eine fünfte Bildverarbeitung auf den Bildbereich an, um das Anzeigenbild zu erzeugen.
  • Man beachte, dass die fünfte Bildverarbeitung eine Verarbeitung ist, welche das Anzeigenbild erzeugt, das den in der Größe beschnittenen Bildbereich beinhaltet, gemäß der Laufbedingung des Fahrzeugs, ohne Anwenden irgendeiner speziellen Bildverarbeitung auf das Fahrzeugaußenseitenobjekt als ein Bildobjekt.
  • Weiterhin extrahiert im Schritt ST9b der Anzeigebildgenerator 15A aus dem durch den Panoramagenerator 13 erzeugten Panoramabild den Bildbereich, der durch den Informationsprozessor 14 als anzuzeigen bestimmt ist, und wendet eine sechste Bildverarbeitung auf den Bildbereich an, um das Anzeigenbild zu erzeugen.
  • Man beachte, dass die sechste Bildverarbeitung eine Modifikationsverarbeitung ist, um den Fahrer zu veranlassen, dem Fahrzeugaußenseitenobjekt Aufmerksamkeit zu schenken und eine Verarbeitung ist, welche das Anzeigenbild, das den in der Größe gemäß der Laufbedingung des Fahrzeugs abgeschnittenen Bildbereich beinhaltet, nach Hervorheben des Fahrzeugaußenseitenobjekts als einem Bildobjekt erzeugt.
  • Beim Erzeugen des Anzeigenbilds im Schritt ST8b oder Schritt ST9b gibt der Anzeigebildgenerator 15A das erzeugte Anzeigenbild an die Anzeige 16 aus.
  • Die Anzeige 16 zeigt auf ihrem Bildschirm das aus dem Anzeigebildgenerator 15A eingegebene Anzeigenbild an (Schritt ST10b).
  • Wie oben beschrieben, gemäß Ausführungsform 3, umfasst sie den Fahrzeuginformations-Manager 18, der die für die Laufbedingung des Fahrzeugs indikative Information hält, und die Fahrzeuginformation bei Anfrage der Anfragequelle präsentiert, wobei der Informationsprozessor 14B die Größe des Bildbereichs, die aus dem Panoramabild der Fahrzeugperipherie zu bestimmen ist, anhand der Laufbedingung des Fahrzeugs, die durch die Fahrzeuginformation spezifiziert ist, ändert. Diese ermöglicht es, selbst wenn das visuelle Feld des Fahrers sich anhand der Laufbedingung des Fahrzeugs ändert, aus dem Panoramabild den Bildbereich mit einem Bereich von Sichtfeld, das zum Sichtfeld passt, zu bestimmen und zu präsentieren. Gemäß dem ist es möglich, den Fahrer zu veranlassen, dem Fahrzeugaußenseitenobjekt angemessene Aufmerksamkeit zu widmen, um dadurch die Kollision mit dem Fahrzeug sicherer zu vermeiden.
  • Ausführungsform 4
  • In einer Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 4 wird ein Bildbereich, der zu einer Bedingung passt, welche durch eine mitgebrachte Vorrichtung spezifiziert ist, die eine externe Vorrichtung ist, die im Fahrzeug mitgeführt ist, aus dem Panoramabild der Fahrzeugperipherie bestimmt, und das den Bildbereich enthaltene Anzeigenbild wird auf der mitgebrachten Vorrichtung angezeigt. Dies gestattet dem Bediener der mitgebrachten Vorrichtung, eine Situation der Fahrzeugperipherie zu bestätigen und in die Lage zu gelangen, dem Fahrer einen Vorschlag zum Fahren zu geben, auf Basis der bestätigten Situation. Beispiele von Anwendungsfällen beinhalten Unterstützung des Fahrers, dem Vertrauen in das Fahren fehlt und Unterstützen des Fahrens in dem Fall, bei dem ein enger Pfad, wie etwa eine Bergstraße passiert wird.
  • 10 ist ein Blockdiagramm, das eine Konfiguration der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 4 der Erfindung zeigt. Die in 10 gezeigte Fahrzeugperipherie-Anzeigevorrichtung ist eine Fahrzeugperipherie-Anzeigevorrichtung, welche eine Bedienung aus der obigen mitgebrachten Vorrichtung 19 empfängt und ist mit einer Fahrzeugsteuerschnittstelle 10, einer Kameragruppe 11, einer Fahrzeugsteuerung 12, einem Panoramagenerator 13, einem Informationsprozessor 14C, einem Anzeigebildgenerator 15B und einer Anzeige 16 konfiguriert. Man beachte, dass in 10 die Konfigurationselemente, denen dieselben Bezugszeichen wie in 1 zugewiesen sind, ähnlich zur Ausführungsform 1 funktionieren, so dass eine Beschreibung derselben weggelassen wird.
  • Die mitgebrachte Vorrichtung 19 ist eine Informationsvorrichtung, die im Fahrzeug durch einen Fahrgast von außerhalb mitgebracht wird, von denen Beispiele ein Smartphone, ein Tablet-PC und dergleichen beinhalten. Man beachte, dass die mitgebrachte Vorrichtung 19 dem Informationsprozessor 14C der Fahrzeugperipherie-Anzeigevorrichtung die Bedingung zum Spezifizieren eines Clipp-Bildes mitteilen kann. Weiter kann die mitgebrachte Vorrichtung 19 auch auf ihrer Anzeige das anhand dieser Bedingung bestimmte Clipp-Bild anzeigen.
  • Ähnlich zur Ausführungsform 1 bestimmt basierend auf der Fahrbedingung des Fahrzeugs der Informationsprozessor 14C aus dem Panoramabild der Fahrzeugperipherie den anzuzeigenden Bildbereich (Clipp-Bildbereich). Weiter, wenn die Bedingung zum Abschneiden aus der mitgebrachten Vorrichtung 19 spezifiziert wird, bestimmt der Informationsprozessor 14C einen Bildbereich, welcher der spezifizierten Bedingung genügt, unabhängig von der Verarbeitung, basierend auf der Fahrbedingung des Fahrzeugs.
  • Man beachte, dass für den Clipp-Bildbereich indikative Information in jeglichem Fall aus dem Informationsprozessor 14C an den Anzeigebildgenerator 15B ausgegeben wird.
  • Ähnlich zur Ausführungsform 1 erzeugt der Anzeigebildgenerator 15B ein Anzeigenbild, welches den Clipp-Bildbereich beinhaltet, der basierend auf der Fahrbedingung des Fahrzeugs bestimmt wird, anhand der Anzeigeninformation der Anzeige 16. Weiter, wenn der Clipp-Bildbereich, welcher der aus der mitgebrachten Vorrichtung 19 spezifizierten Bedingung genügt, durch den Informationsprozessor 14C bestimmt worden ist, erzeugt der Anzeigebildgenerator 15B ein Anzeigenbild, das diesen Bildbereich enthält, gemäß der Anzeigenspezifikation der Anzeige der mitgebrachten Vorrichtung 19 unabhängig von der Verarbeitung, welche auf der Fahrbedingung des Fahrzeugs basiert.
  • Als Nächstes wird der Betrieb beschrieben.
  • 11 ist ein Flussdiagramm, das den Betrieb der Fahrzeugperipherie-Anzeigevorrichtung gemäß Ausführungsform 4 zeigt, welche die Verarbeitung zeigt, wenn ein Clipp-Bildbereich aus der mitgebrachten Vorrichtung 19 spezifiziert wird.
  • Man beachte, dass der Betrieb des Flussdiagramms parallel zu der in den Ausführungsformen 1 bis 3 gezeigten Verarbeitung ausgeführt werden kann.
  • Zuerst bedient ein Mitpassagier im Fahrzeug die mitgebrachte Vorrichtung 19, um dadurch der Fahrzeugperipherie-Anzeigevorrichtung eine Information mitzuteilen, die für eine gewünschte Richtung in der Fahrzeugperipherie indikativ ist, als eine Bedingung zum Spezifizieren des Clipp-Bildbereichs (Schritt ST1c). Beispielsweise wird eine Position des aus dem Panoramabild auszuschneidenden Bereichs als die Information spezifiziert, welche für die gewünschte Richtung indikativ ist.
  • Der Informationsprozessor 14C bestimmt aus dem Panoramabild der Fahrzeugperipherie, das durch den Panoramagenerator 13 erzeugt wird, den Clipp-Bildbereich, welcher der aus der mitgebrachten Vorrichtung 19 spezifizierten Bedingung genügt (Schritt ST2c). Für den Bildbereich des Bestimmungsergebnisses indikative Information wird aus dem Informationsprozessor 14C an den Anzeigebildgenerator 15B ausgegeben.
  • Dann detektiert der Informationsprozessor 14C beim Bestimmen des Bildbereichs, der der aus der mitgebrachten Vorrichtung 19 spezifizierten Bedingung genügt, ein als ein Hindernis dienendes Fahrzeugaußenseitenobjekt aus den Bildobjekten im bestimmten Bildbereich (Schritt ST3c). Beispielsweise bestimmt aus jedem aus den sequentiell zu jedem vorbestimmten Zeitintervall durch die Kameragruppe 11 aufgenommenen Kamerabildern erzeugten Panoramabild der Informationsprozessor sequentiell den Bildbereich, welcher der oben spezifizierten Bedingung entspricht. Bei Bilderkennung des in diesen Bildbereichen erscheinenden Fahrzeugaußenseitenobjekts, falls das in zeitlich sequentiellen Bildbereichen erscheinende Fahrzeugaußenseitenobjekt graduell größer wird, wird dieses Fahrzeugaußenseitenobjekt als sich graduell dem Host-Fahrzeug annähernd bestimmt, so dass das Fahrzeugaußenseitenobjekt als ein Fahrzeugaußenseitenobjekt bewertet wird, das ein Hindernis zum Host-Fahrzeug sein mag.
  • Der Anzeigebildgenerator 15B extrahiert aus dem durch den Panoramagenerator 13 erzeugten Panoramabild den durch den Informationsprozessor 14C bestimmten Clipp-Bildbereich und wendet eine Bildverarbeitung auf den Bildbereich an, um so zur Anzeigespezifikation der Anzeige der mitgebrachten Vorrichtung 19 zu passen, um dadurch das Anzeigenbild zu erzeugen (Schritt ST4c).
  • Danach notifiziert der Anzeigebildgenerator 15B nicht die Anzeige 16, sondern notifiziert die mitgebrachte Vorrichtung 19 über das als ein Ergebnis der Bild-Modifikationsverarbeitung erzeugte Anzeigenbild (Schritt ST15). Dies veranlasst das Anzeigenbild, auf der Anzeige der mitgebrachten Vorrichtung 19 angezeigt zu werden.
  • Man beachte, dass, wenn keine Bedingung zum Spezifizieren eines Bildbereichs aus der mitgebrachten Vorrichtung 19, welche in Kommunikation mit dem Anzeigebildgenerator 15B verbunden ist, mitgeteilt wird, der Anzeigebildgenerator 15B das auf der Anzeige 16 anzuzeigende Anzeigenbild (Anzeigenbild, das den anhand der Fahrbedingung des Fahrzeugs bestimmten Bildbereich beinhaltet), auch auf der Anzeige der mitgebrachten Vorrichtung 19 anzeigen kann.
  • Weiter kann der Anzeigebildgenerator 15B auf der Anzeige 16 das den Bildbereich, welcher die durch die mitgebrachte Vorrichtung 19 spezifizierte Bedingung erfüllt, enthaltende Anzeigenbild auf der Anzeige 16 anzuzeigen. In diesem Fall wird durch den Anzeigebildgenerator 15B eine zur Anzeigenspezifikation der Anzeige 16 passende Bildverarbeitung auf den Bildbereich angewendet, welcher die spezifizierte Bedingung erfüllt, um dadurch das Anzeigenbild zu erzeugen.
  • Wie oben beschrieben, bestimmt gemäß Ausführungsform 4 der Informationsprozessor 14C aus dem Panoramabild der Fahrzeugperipherie den zur aus der mitgebrachten Vorrichtung19, was eine externe Vorrichtung ist, spezifizierten Bedingung passenden Bildbereich, so dass der Bediener der mitgebrachten Vorrichtung die Situation einer durch den Bediener spezifizierten Fahrzeugperipherie bestätigen kann.
  • Weiter erzeugt gemäß Ausführungsform 4 der Anzeigebildgenerator 15B das Anzeigenbild, das den zur aus der mitgebrachten Vorrichtung 19, die eine externe Vorrichtung ist, spezifizierten Bedingung passenden Bildbereich beinhaltet, und zeigt ihn auf der Anzeige 16 oder/und der Anzeige der mitgebrachten Vorrichtung 19 an. Somit kann der Bediener der mitgebrachten Vorrichtung die Situation einer Fahrzeugperipherie bestätigen und wird fähig, dem Fahrer einen Hinweis zum Fahren zu geben, basierend auf der bestätigten Situation.
  • Es sollte angemerkt werden, dass eine unbegrenzte Kombination der entsprechenden Ausführungsformen, Modifikationen jeglichen Konfigurationselements in den Ausführungsformen und die Weglassung jeglichen Konfigurationselements in den Ausführungsformen in der vorliegenden Erfindung gemacht werden kann, ohne vom Schutzumfang der Erfindung abzuweichen.
  • INDUSTRIELLE ANWENDBARKEIT
  • Die Fahrzeugperipherie-Anzeigevorrichtung gemäß der Erfindung kann den Fahrer auffordern, zum Fahren zu kommen, das sich eines Fahrzeugaußenseitenobjekts bewusst ist, und kann eine Fahrzeugsteuerung durchführen, um eine Kollision mit dem Fahrzeugaußenseitenobjekt automatisch zu vermeiden, selbst falls die Fahrbedienung durch den Fahrer verzögert ist, und somit wird es als eine Sicherheits-Fahrunterstützungsvorrichtung für Fahrzeuge bevorzugt.
  • Bezugszeichenliste
  • 10 Fahrzeugsteuerschnittstelle, 11 Kameragruppe, 12 Fahrzeugsteuerung, 13 Panoramagenerator, 14, 14A, 14B, 14C Informationsprozessor, 15, 15A, 15B Anzeigebildgenerator, 16 Anzeige, 17 Anwendungsschnittstelle, 18 Fahrzeuginformations-Manager, 19 mitgebrachte Vorrichtung.
  • ZUSAMMENFASSUNG
  • Basierend auf einer durch Fahrzeugsteuerinformation angegebenen Fahrzeugfahrbedingung wird ein anzuzeigender Bildbereich aus einem Panoramabild der Fahrzeugperipherie bestimmt und wird eine Bewertung zur Kollisionsmöglichkeit zwischen einem in dem Bildbereich erscheinenden Fahrzeugaußenseitenobjekt und dem Fahrzeug getroffen, so dass ein Anzeigenbild, das den Bildbereich enthält, erzeugt und auf einer Anzeige 16 angezeigt wird, und das Fahrzeug wird gesteuert, um seine Kollision mit dem Fahrzeugaußenseitenobjekt zu vermeiden, anhand eines Ergebnisses der Bewertung der Kollisionsmöglichkeit.

Claims (5)

  1. Fahrzeugperipherie-Anzeigevorrichtung, die ein aufgenommenes Bild einer Fahrzeugperipherie auf einer Anzeige anzeigt, umfassend: einen Fahrzeugsteuerinformations-Empfänger (10), der Fahrzeugsteuerinformation erfasst, welche für eine Fahrbedingung eines Fahrzeugs indikativ ist; einen Panoramagenerator (13), der Bilder der Fahrzeugperipherie in einer Mehrzahl von Aufnahmerichtungen kombiniert, welche durch eine Mehrzahl von Fahrzeugkameras aufgenommen werden, um ein Panoramabild zu erzeugen; einen Informationsprozessor (14), der basierend auf der Fahrbedingung des Fahrzeugs, welche durch die Fahrzeugsteuerinformation angezeigt ist, aus dem Inneren des Panoramabildes einen anzuzeigenden Bildbereich bestimmt und eine Kollisionsmöglichkeit zwischen einem Fahrzeugaußenseitenobjekt, das in dem Bildbereich erscheint, und dem Fahrzeug bewertet; einen Anzeigebildgenerator (15), der ein Anzeigebild erzeugt, das den Bildbereich enthält, der durch den Informationsprozessor (14) bestimmt ist, um ihn dadurch auf der Anzeige anzuzeigen; eine Fahrzeugsteuerung (12), die das Fahrzeug so steuert, dass seine Kollision mit dem Fahrzeugaußenseitenobjekt vermieden wird, entsprechend einem Ergebnis der Bewertung der Kollisionsmöglichkeit durch den Informationsprozessor (14) ; wobei der Informationsprozessor (14) aus dem Panoramabild der Fahrzeugperipherie einen Bildbereich bestimmt, der zu einer aus einer externen Vorrichtung angegebenen Bedingung passt; und wobei der Anzeigebildgenerator (15) das den zur aus der externen Vorrichtung spezifizierten Bedingung passenden Bildbereich beinhaltende Anzeigenbild erzeugt, um es damit auf der Anzeige und einer Anzeige der externen Vorrichtung anzuzeigen.
  2. Fahrzeugperipherie-Anzeigevorrichtung nach Anspruch 1, wobei der Anzeigebildgenerator (15) das Anzeigenbild erzeugt, in welchem im anzuzeigenden Bildbereich ein Bereich, in dem das Fahrzeugaußenseitenobjekt erscheint, zu einer Anzeigenform verarbeitet worden ist, die zur Kollisionsmöglichkeit zwischen dem Fahrzeugaußenseitenobjekt und dem Fahrzeug passt.
  3. Fahrzeugperipherie-Anzeigevorrichtung nach Anspruch 1, wobei der Informationsprozessor (14) aus dem Panoramabild der Fahrzeugperipherie einen Bildbereich bestimmt, der in einer Richtung aufgenommen ist, in welchem eine Fahrersicht abnimmt, als den anzuzeigenden Bildbereich.
  4. Fahrzeugperipherie-Anzeigevorrichtung nach Anspruch 1, wobei der Informationsprozessor (14) an den Anzeigebildgenerator (15) Information ausgibt, die für eine Aufnahmerichtung des Bildbereichs indikativ ist, welche aus dem Panoramabild der Fahrzeugperipherie bestimmt ist; und der Anzeigebildgenerator (15) das Anzeigenbild erzeugt, welches den Bildbereich und die für die Aufnahmerichtung desselben indikative Information beinhaltet.
  5. Fahrzeugperipherie-Anzeigevorrichtung nach Anspruch 1, weiter umfassend einen Fahrzeuginformations-Manager (18), der für eine Fahrbedingung des Fahrzeugs indikative Fahrzeuginformation hält, und welcher auf Anfrage die Fahrzeuginformation seiner Anfragequelle präsentiert; wobei der Informations-Manager (18) eine Größe des aus dem Panoramabild der Fahrzeugperipherie zu bestimmenden Bildbereichs anhand einer Fahrbedingung des Fahrzeugs ändert, welche aus der Fahrzeuginformation spezifiziert ist.
DE112013006385.9T 2013-01-09 2013-01-09 Fahrzeugperipherie-Anzeigevorrichtung Active DE112013006385B4 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2013/050199 WO2014109016A1 (ja) 2013-01-09 2013-01-09 車両周辺表示装置

Publications (2)

Publication Number Publication Date
DE112013006385T5 DE112013006385T5 (de) 2015-09-17
DE112013006385B4 true DE112013006385B4 (de) 2018-09-06

Family

ID=51166687

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112013006385.9T Active DE112013006385B4 (de) 2013-01-09 2013-01-09 Fahrzeugperipherie-Anzeigevorrichtung

Country Status (5)

Country Link
US (1) US9499168B2 (de)
JP (1) JP5744352B2 (de)
CN (1) CN104903946B (de)
DE (1) DE112013006385B4 (de)
WO (1) WO2014109016A1 (de)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9854209B2 (en) * 2011-04-19 2017-12-26 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
GB2523353B (en) * 2014-02-21 2017-03-01 Jaguar Land Rover Ltd System for use in a vehicle
JP6617462B2 (ja) * 2015-07-31 2019-12-11 市光工業株式会社 車両周辺視認装置
JP6641762B2 (ja) * 2015-07-31 2020-02-05 市光工業株式会社 車両周辺視認装置
DE102015223175A1 (de) * 2015-11-24 2017-05-24 Conti Temic Microelectronic Gmbh Fahrerassistenzsystem mit adaptiver Umgebungsbilddatenverarbeitung
CN105898338A (zh) * 2015-12-18 2016-08-24 乐视致新电子科技(天津)有限公司 全景视频播放方法及装置
FR3047947B1 (fr) * 2016-02-24 2018-03-09 Renault S.A.S Procede d'aide a la conduite en marche avant d'un vehicule automobile, muni d'une camera a objectif de type fish-eye
WO2017154317A1 (ja) * 2016-03-09 2017-09-14 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
US10864856B2 (en) * 2016-04-14 2020-12-15 Nissan Motor Co., Ltd. Mobile body surroundings display method and mobile body surroundings display apparatus
WO2018037900A1 (ja) * 2016-08-22 2018-03-01 ソニー株式会社 運転支援装置および方法、移動体、並びにプログラム
US10733460B2 (en) 2016-09-14 2020-08-04 Nauto, Inc. Systems and methods for safe route determination
WO2018053175A1 (en) * 2016-09-14 2018-03-22 Nauto Global Limited Systems and methods for near-crash determination
JP7290567B2 (ja) 2016-11-07 2023-06-13 ナウト,インコーポレイテッド 運転者の注意散漫決定のためのシステム及び方法
US10798319B2 (en) * 2016-12-06 2020-10-06 Conti Temic Microelectronic Gmbh Camera device and method for capturing a surrounding region of a vehicle in a situation-adapted manner
KR102295577B1 (ko) * 2017-02-08 2021-08-30 현대자동차주식회사 Ecu, 상기 ecu를 포함하는 무인 자율 주행 차량, 및 이의 주행 차로 판단 방법
JP6846624B2 (ja) * 2017-02-23 2021-03-24 パナソニックIpマネジメント株式会社 画像表示システム、画像表示方法及びプログラム
CN106915295B (zh) * 2017-03-21 2019-09-17 青岛海信移动通信技术股份有限公司 车辆大灯状态的控制方法及装置
EP3389026A1 (de) * 2017-04-12 2018-10-17 Volvo Car Corporation Vorrichtung und verfahren zur fahrzeugfahrassistenz
US10843686B2 (en) * 2017-06-08 2020-11-24 Envisics Ltd Augmented reality (AR) visualization of advanced driver-assistance system
US10417816B2 (en) 2017-06-16 2019-09-17 Nauto, Inc. System and method for digital environment reconstruction
US10453150B2 (en) 2017-06-16 2019-10-22 Nauto, Inc. System and method for adverse vehicle event determination
KR101979277B1 (ko) * 2017-07-25 2019-05-16 엘지전자 주식회사 차량용 사용자 인터페이스 장치 및 차량
JP6920976B2 (ja) * 2017-12-15 2021-08-18 株式会社東海理化電機製作所 車両周辺監視装置
EP3759700B1 (de) 2018-02-27 2023-03-15 Nauto, Inc. Verfahren zur bestimmung einer fahrrichtlinie
DE112018007135B4 (de) * 2018-03-26 2022-02-17 Mitsubishi Electric Corporation Objekterkennungsvorrichtung, fahrzeug, objekterkennungsverfahren und objekterkennungsprogramm
JP2019193031A (ja) * 2018-04-23 2019-10-31 シャープ株式会社 車両周辺表示装置
FR3084631B1 (fr) * 2018-07-31 2021-01-08 Valeo Schalter & Sensoren Gmbh Assistance a la conduite pour le controle longitudinal et/ou lateral d'un vehicule automobile
CN109089086B (zh) * 2018-10-09 2024-04-05 上海宏英智能科技股份有限公司 一种全景摄像系统
US10901375B2 (en) * 2019-01-31 2021-01-26 Morgan Stanley Services Group Inc. Chaotic system anomaly response by artificial intelligence
US11360442B2 (en) * 2019-01-31 2022-06-14 Morgan Stanley Services Group Inc. Exposure minimization response by artificial intelligence
JP7079747B2 (ja) * 2019-03-08 2022-06-02 本田技研工業株式会社 表示装置、表示制御方法、およびプログラム
JP7354295B2 (ja) 2019-05-23 2023-10-02 ストリートスコープ,インコーポレイテッド 車両信号を処理して挙動危険性の測度を計算するための装置及び方法
JP7492512B2 (ja) 2019-06-14 2024-05-29 株式会社村上開明堂 画像出力を備えた車載用電子ミラー
US20220219686A1 (en) * 2019-07-30 2022-07-14 Mitsubishi Electric Corporation Vehicle driving assistance system, base point side driving assistance device, and in-vehicle driving assistance device
CN111613078A (zh) * 2020-04-13 2020-09-01 袁均 一种行车管理系统
CN114056238A (zh) * 2021-11-19 2022-02-18 阿维塔科技(重庆)有限公司 车外环境监控方法、装置、汽车及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10059315A1 (de) 2000-11-29 2002-06-13 Bosch Gmbh Robert Anordnung und Verfahren zum Überwachen des Umfeldes eines Fahrzeugs
DE60104599T2 (de) 2000-05-23 2005-08-04 Sharp K.K. Umgebungs-Überwachungssystem für bewegliche Körper wie Kraftfahrzeug oder Zug
DE69618192T3 (de) 1995-05-22 2006-08-10 Donnelly Corp., Holland Fahrzeug-rückblicksystem mit panoramischer sicht
DE102008034606A1 (de) 2008-07-25 2010-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit
DE202011005102U1 (de) 2010-09-17 2011-07-09 SMR Patents S.à.r.l. Optische Sensorsysteme für Automotive Anwendung
DE102011014368A1 (de) 2011-03-17 2012-09-20 DSP-Weuffen GmbH Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem
DE102011077398A1 (de) 2011-06-10 2012-12-13 Robert Bosch Gmbh Fahrzeugkamerasystem zur Bereitstellung eines lückenlosen Bildes der Fahrzeugumgebung und entsprechendes Verfahren

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3298851B2 (ja) 1999-08-18 2002-07-08 松下電器産業株式会社 多機能車載カメラシステムと多機能車載カメラの画像表示方法
JP3803021B2 (ja) 2000-10-02 2006-08-02 松下電器産業株式会社 運転支援装置
JP2002369186A (ja) * 2001-06-07 2002-12-20 Sony Corp 車両後方画像表示装置、車両周囲画像表示方法
JP4467313B2 (ja) 2004-01-09 2010-05-26 株式会社オートネットワーク技術研究所 車両周辺撮像装置
JP2006054662A (ja) * 2004-08-11 2006-02-23 Mitsubishi Electric Corp 運転支援装置
JP2007025739A (ja) * 2005-07-12 2007-02-01 Alpine Electronics Inc 車両用画像表示装置
CN1987357B (zh) * 2006-12-26 2010-05-19 浙江工业大学 基于全方位计算机视觉的智能停车辅助装置
JP4453775B2 (ja) * 2008-06-27 2010-04-21 トヨタ自動車株式会社 物体検出装置
DE102008034594B4 (de) * 2008-07-25 2021-06-24 Bayerische Motoren Werke Aktiengesellschaft Verfahren sowie Informationssystem zur Information eines Insassen eines Fahrzeuges
WO2011121741A1 (ja) * 2010-03-30 2011-10-06 富士通株式会社 画像生成装置、画像生成プログラム、合成テーブル生成装置および合成テーブル生成プログラム
DE102010042063B4 (de) * 2010-10-06 2021-10-28 Robert Bosch Gmbh Verfahren und Vorrichtung zum Bestimmen von aufbereiteten Bilddaten über ein Umfeld eines Fahrzeugs
KR20140054909A (ko) * 2012-10-30 2014-05-09 팅크웨어(주) 광각 렌즈 카메라 영상을 이용한 내비게이션 안내 장치 및 방법

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69618192T3 (de) 1995-05-22 2006-08-10 Donnelly Corp., Holland Fahrzeug-rückblicksystem mit panoramischer sicht
DE60104599T2 (de) 2000-05-23 2005-08-04 Sharp K.K. Umgebungs-Überwachungssystem für bewegliche Körper wie Kraftfahrzeug oder Zug
DE10059315A1 (de) 2000-11-29 2002-06-13 Bosch Gmbh Robert Anordnung und Verfahren zum Überwachen des Umfeldes eines Fahrzeugs
DE102008034606A1 (de) 2008-07-25 2010-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit
DE202011005102U1 (de) 2010-09-17 2011-07-09 SMR Patents S.à.r.l. Optische Sensorsysteme für Automotive Anwendung
DE102011014368A1 (de) 2011-03-17 2012-09-20 DSP-Weuffen GmbH Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem
DE102011077398A1 (de) 2011-06-10 2012-12-13 Robert Bosch Gmbh Fahrzeugkamerasystem zur Bereitstellung eines lückenlosen Bildes der Fahrzeugumgebung und entsprechendes Verfahren

Also Published As

Publication number Publication date
DE112013006385T5 (de) 2015-09-17
JPWO2014109016A1 (ja) 2017-01-19
US20150284001A1 (en) 2015-10-08
CN104903946B (zh) 2016-09-28
WO2014109016A1 (ja) 2014-07-17
US9499168B2 (en) 2016-11-22
CN104903946A (zh) 2015-09-09
JP5744352B2 (ja) 2015-07-08

Similar Documents

Publication Publication Date Title
DE112013006385B4 (de) Fahrzeugperipherie-Anzeigevorrichtung
EP2788967B1 (de) Verfahren zur überwachung und signalisierung einer verkehrssituation im umfeld eines fahrzeuges
EP3401166B1 (de) Spiegelersatzsystem als kamera-monitor-system (kms) eines kraftfahrzeugs, insbesondere eines nutzfahrzeugs
DE102015008042B3 (de) Anzeigeeinrichtung für Fahrzeuge, insbesondere Nutzfahrzeuge
DE112015001804B4 (de) Bord-Bildanzeigeeinrichtung, Bord-Bildanzeigeverfahren für Fahrzeug und Bord-Bild-Einstelleinrichtung
DE102017100004A1 (de) Verfahren zum Bereitstellen von zumindest einer Information aus einem Umgebungsbereich eines Kraftfahrzeugs, Anzeigesystem für ein Kraftfahrzeug, Fahrerassistenzsystem für ein Kraftfahrzeug sowie Kraftfahrzeug
DE102015210645A1 (de) Sicherheitsbestätigungsunterstützungssystem für Fahrzeugführer und zugehöriges Verfahen
DE102008039136A1 (de) Kamerasystem für ein Fahrzeug und Verfahren zum Steuern eines Kamerasystems
DE112017001410B4 (de) Informationsverarbeitungsvorrichtung
EP2624213A1 (de) Verfahren zur Visualisierung des Umfelds eines Kraftfahrzeugs
EP2620929A1 (de) Verfahren und Vorrichtung zur Erkennung einer Sondersituation im Straßenverkehr
DE102011083770A1 (de) Verfahren zur rechnergestützten Verarbeitung des Nahfeldes eines Fahrzeugs
DE112009005401T5 (de) Fahrunterstützungsvorrichtung und fahrunterstützungsverfahren
DE102015116280A1 (de) Fahrzeuginformation-Präsentationseinrichtung
DE102016215115A1 (de) Vorrichtung und Verfahren zum Detektieren von Verkehrsteilnehmern in einem Umfeld eines Ego-Fahrzeugs
DE102014211530A1 (de) Überholassistent für Straßen mit Gegenverkehr
DE102016204877A1 (de) Verfahren zum Betreiben eines Fahrassistenzsystems zur Durchführung eines autonomen oder teilautonomen Fahrmanövers eines Fahrzeugs und derartiges Fahrassistenzsystem
DE102016115313A1 (de) Verfahren zum Unterstützen eines Fahrers eines Gespanns, Fahrerassistenzsystem sowie Gespann
DE102013006097A1 (de) Kraftfahrzeug mit wenigstens einer Kamera und Verfahren zum Anzeigen eines Bilds der Umgebung vor dem Kraftfahrzeug
DE102016002232B4 (de) Verfahren zum Betrieb eines Kraftfahrzeugs
DE102018009563A1 (de) Verfahren zum Anzeigen einer Umgebung eines Kraftfahrzeugs, Computerprogrammprodukt sowie Kraftfahrzeug
DE102015013043A1 (de) Verfahren zur Vermeidung einer Kollision oder zumindest zur Verringerung einer Kollisionsschwere eines Fahrzeuges
WO2018149768A1 (de) Automatisierte aktivierung eines sichtunterstützungssystems
DE102012200762A1 (de) Verfahren und Fahrerassistenzsystem zur Signalisierung einer Verkehrssituation in einem Umfeld eines Fahrzeuges
DE102010033786A1 (de) Verfahren zur Erfassung und Anzeige seitlich neben und seitlich hinter einem Fahrzeug befindlicher Bereiche und Fahrzeug mit mehreren Bilderfassungseinheiten zur Erfassung seitlich neben und seitlich hinter dem Fahrzeug befindlicher Bereiche

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R082 Change of representative

Representative=s name: HOFFMANN - EITLE PATENT- UND RECHTSANWAELTE PA, DE

R016 Response to examination communication
R084 Declaration of willingness to licence
R016 Response to examination communication
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final