DE102015205507B3 - Rundsichtsystem für ein Fahrzeug - Google Patents

Rundsichtsystem für ein Fahrzeug Download PDF

Info

Publication number
DE102015205507B3
DE102015205507B3 DE102015205507.8A DE102015205507A DE102015205507B3 DE 102015205507 B3 DE102015205507 B3 DE 102015205507B3 DE 102015205507 A DE102015205507 A DE 102015205507A DE 102015205507 B3 DE102015205507 B3 DE 102015205507B3
Authority
DE
Germany
Prior art keywords
vehicle
projection surface
virtual
virtual projection
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE102015205507.8A
Other languages
English (en)
Inventor
Jochen ABHAU
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZF Friedrichshafen AG
Original Assignee
ZF Friedrichshafen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZF Friedrichshafen AG filed Critical ZF Friedrichshafen AG
Priority to DE102015205507.8A priority Critical patent/DE102015205507B3/de
Priority to EP16711280.4A priority patent/EP3274958B1/de
Priority to PCT/EP2016/056229 priority patent/WO2016150944A1/en
Priority to US15/081,832 priority patent/US10965911B2/en
Priority to KR1020160036620A priority patent/KR101885743B1/ko
Application granted granted Critical
Publication of DE102015205507B3 publication Critical patent/DE102015205507B3/de
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/102Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20068Projection on vertical or horizontal image axis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/168Driving aids for parking, e.g. acoustic or visual feedback on parking space

Abstract

Die Erfindung bezieht sich auf ein Rundsichtsystem für ein Fahrzeug (1), aufweisend zumindest eine Kamera (2), die in oder an dem Fahrzeug (1) positioniert ist, um zumindest einen Teil der Umgebung des Fahrzeugs (1) aufzunehmen, eine Auswertungseinheit (7) zum Verarbeiten von von der zumindest einen Kamera (2) aufgenommenen Bildern, und zumindest eine Anzeigevorrichtung (8) zum Darstellen eines von der Auswertungseinheit (7) erzeugten Draufsichtbilds. Hierzu ist die Auswertungseinheit (7) zum Erhalten des Draufsichtbilds durch Berechnen einer Projektion der aufgenommenen Bilder auf eine virtuelle Projektionsfläche und durch Berechnen einer Draufsicht der Projektion auf die virtuelle Projektionsfläche konfiguriert. Die virtuelle Projektionsfläche weist einen flachen Bodenteil (4) und einen ansteigenden Teil (5) angrenzend an den flachen Bodenteil (4) auf, wobei in einem Bereich, der den ansteigenden Teil zumindest auf einer Seite des Fahrzeugs (1) zumindest über eine Länge des Fahrzeugs (1) aufweist, eine Krümmung der virtuellen Projektionsfläche in einer Längsrichtung des Fahrzeugs (1) gleich null ist. Weiterhin bezieht sich die Erfindung auf ein Fahrzeug (1), das ein derartiges Rundsichtsystem aufweist.

Description

  • Die Erfindung betrifft ein Rundumsichtsystem für ein Fahrzeug, umfassend mindestens eine Kamera, eine Auswertungseinheit und mindestens ein Display, und ein Fahrzeug, das ein derartiges Rundumsichtsystem umfasst.
  • Fahrerassistenzsysteme sind oftmals mit Kameras ausgerüstet, um die Umgebung des Fahrzeugs zu erfassen. Um die erfassten Bilder als eine Rundumsicht des Fahrzeugs in einem Display anzuzeigen, müssen die Bilder möglicherweise entsprechend zusammengesetzt werden, um dem Fahrer des Fahrzeugs zu helfen.
  • In EP 2511137 A1 wird ein Rundumsichtsystem für ein Fahrzeug offenbart, wo sich mehrere Kameras auf den verschiedenen Seiten des Fahrzeugs befinden und die Rundumsicht dann durch Projizieren der kameraerfassten Bilder auf eine schalenförmige Projektionsoberfläche generiert wird, die dann von einem virtuellen Beobachter von oben betrachtet wird. Die Schalenform der Projektionsoberfläche bewirkt, dass Kraftfahrzeuge, die in einer Spur bei dem Fahrzeug fahren, sich anscheinend in einem Bogen um das Fahrzeug bewegen, was es erschwert, dass das angezeigte Rundumsichtbild von dem Fahrer des Fahrzeugs korrekt interpretiert wird.
  • Die Druckschrift DE 10 2012 018 326 A1 offenbart ein Verfahren für ein bildgebendes Fahrerassistenzsystem zur Abbildung von im Umgebungsbereich von Land-, Wasser oder Luftfahrzeugen angeordneten Objekten, insbesondere an einem Kraftfahrzeug, bei dem am Fahrzeug mindestens zwei Kameras zur Erzeugung einer im Innenraum oder Außenraum des Fahrzeuges darstellbaren Umsicht angeordnet sind, und der Blickwinkel benachbart angeordneter Kameras im Umgebungsbereich des Fahrzeuges sich mindestens teilweise überschneidet und dort mindestens einen Überlappungsbereich ausbildet, wobei zur Erzeugung der Umsichtdarstellung ein oder mehrere Kamerabilder der Kameras entsprechend ihrer Aufnahmeposition am Fahrzeug auf einer virtuellen Projektionsfläche angeordnet werden, die Teil eines virtuellen dreidimensionaler Raumkörpers das Fahrzeug an mindestens zwei Seiten mit Abstand umgibt, und zur Erreichung einer annähernd verdeckungsfreien Umsichtfunktion von Objekten im Überlappungsbereich der Kameras eine dynamische Anpassung der Zusammenfügung der Kamerabilder auf der Projektionsfläche durch die mathematische Verschiebung der virtuellen Projektionsfläche dergestalt erfolgt, dass das Objekt annähernd in der Ebene der virtuellen Projektionsfläche abgebildet wird.
  • Aus der Druckschrift EP 1 115 250 B1 ist eine Bilderzeugungsvorrichtung bekannt, die umfasst: eine Vielzahl von Kameras, die an einem Fahrzeug angebracht sind; eine Einrichtung, mit der die Eingabebilder von den Kameras auf wenigstens eine Fläche projiziert werden, die ein vorgegebenes Raummodell in einem dreidimensionalen Koordinatensystem in Bezug auf das Fahrzeug bildet, um so Raum-Daten zu schaffen, und eine Standpunkt-Umwandlungseinrichtung, mit der ein von einem beliebigen virtuellen Standpunkt in dem dreidimensionalen Koordinatensystem aus gesehenes Bild unter Bezugnahme auf die durch die Projektionseinrichtung erzeugten Raum-Daten zusammengesetzt wird, und eine Anzeigeeinrichtung, mit der das durch die Standpunkt-Umwandlungseinrichtung zusammengesetzte Bild angezeigt wird. Das Raummodell ist ein Modell aus Bildschirmebenen (screen planes), die sich an der Straßenoberfläche sowie an der hinteren linken Seite und der hinteren rechten Seite des Fahrzeugs befinden und auf die Straßenoberfläche aufgelegt sind, oder ein Modell der Ebene der Straßenoberfläche, einer Ebene vertikal zu der Straßenoberfläche, die sich an der Vorderseite des Fahrzeugs befindet, einer Ebene vertikal zu der Straßenoberfläche, die sich an der linken Seite relativ zur Fahrrichtung des Fahrzeugs befindet, einer Ebene vertikal zu der Straßenoberfläche, die sich an der Rückseite des Fahrzeugs befindet, sowie einer Ebene vertikal zu der Straßenoberfläche, die sich an der rechten Seite relativ zu der Fahrrichtung des Fahrzeugs befindet, oder ein Modell, das aus der Ebene der Straßenoberfläche und einer Wand zylindrischer oder elliptisch-zylindrischer Form kombiniert wird, die auf die Ebene der Straßenoberfläche aufgelegt ist, so dass sie das Fahrzeug umgibt, oder ein Modell einer gekrümmten Fläche in Schalenform, wobei sich das Fahrzeug auf dem Teil befindet, der dem Boden der Schale entspricht.
  • Die Aufgabe der vorliegenden Erfindung besteht somit in der Bereitstellung eines Rundumsichtsystems, das eine Vogelperspektive der Umgebung des Fahrzeugs generiert, die durch einen Fahrer des Fahrzeugs mit geringen Rechenkosten leicht interpretiert werden kann, wobei das System nicht komplexer ist als das Rundumsichtsystem gemäß dem oben erwähnten Stand der Technik.
  • Die Aufgabe wird durch das erfindungsgemäße Rundumsichtsystem gemäß Anspruch 1 gelöst. Vorteilhafte Ausführungsformen des erfindungsgemäßen Systems werden in den abhängigen Ansprüchen offenbart.
  • Das erfindungsgemäße Rundumsichtsystem umfasst mindestens eine Kamera, die in oder an dem Fahrzeug positioniert werden soll, um mindestens einen Teil der Umgebung des Fahrzeugs zu erfassen.
  • Weiterhin umfasst das Rundumsichtsystem eine Auswertungseinheit zum Verarbeiten von durch die mindestens eine Kamera erfassten Bildern und mindestens ein Display zum Anzeigen eines Draufsichtsbilds, das durch die Auswertungseinheit generiert worden ist.
  • Die Auswertungseinheit ist konfiguriert zum Erhalten des Draufsichtsbilds durch Berechnen einer Projektion der erfassten Bilder auf eine virtuelle Projektionsoberfläche und durch dann Berechnen einer Draufsicht der Projektion auf der virtuellen Projektionsoberfläche.
  • Hierdurch umfasst die virtuelle Projektionsoberfläche einen flachen Bodenteil und einen ansteigenden Teil bei dem flachen Bodenteil. Die virtuelle Projektionsoberfläche ist so ausgelegt, dass in einem Bereich, der den ansteigenden Teil mindestens auf einer Seite des Fahrzeugs mindestens über eine Länge des Fahrzeugs umfasst, eine Krümmung der virtuellen Projektionsoberfläche in einer Längsrichtung des Fahrzeugs null beträgt. Da sich die Projektionsoberfläche in der Richtung der Fahrzeuglänge nicht krümmt, erscheinen Kraftfahrzeuge sowie andere Objekte, die parallel zu der Fahrzeuglänge positioniert sind oder sich parallel dazu bewegen, parallel zu dem Fahrzeug, gerade und unverzerrt. Somit zeigt das Display ein realistisches Bild der relevanten Abschnitte der unmittelbaren Umgebung des Fahrzeugs, das durch den Fahrer des Fahrzeugs leicht korrekt interpretiert werden kann.
  • Die Schritte des Berechnens der Projektion der erfassten Bilder auf die virtuelle Projektionsoberfläche und des Berechnens der Draufsicht der Projektionsoberfläche können natürlich mathematisch zu einem einzelnen Projizier- oder Abbildungsschritt kombiniert werden.
  • Bei typischen Ausführungsformen ist möglicherweise mindestens eine der Kameras auf jeder Seite des Fahrzeugs positioniert, um eine volle Rundumsicht des Fahrzeugs zu erfassen. Hierdurch können die Kameras beispielsweise Fischaugenkameras sein. Auf diese Weise kann die Umgebung des Fahrzeugs entlang mindestens der linken und rechten Länge des Fahrzeugs erfasst werden. In diesem Fall kann es besonders nützlich sein, falls der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in Längsrichtung des Fahrzeugs null beträgt, den ansteigenden Teil der Projektionsoberfläche auf beiden Seiten des Fahrzeugs umfasst, und zwar mindestens über eine Länge des Fahrzeugs. Dies kann sicherstellen, dass Kraftfahrzeuge, die sich auf beiden Seiten des Fahrzeugs parallel zum Fahrzeug bewegen, so angezeigt werden, dass sie sich auf geraden Linien bewegen.
  • Es kann bevorzugt sein, dass in einem Bereich, der den ansteigenden Teil der Projektionsoberfläche vor und/oder hinter dem Fahrzeug mindestens über eine Breite des Fahrzeugs umfasst, die Krümmung der virtuellen Projektionsoberfläche in seitlicher Richtung des Fahrzeugs null beträgt. Dies kann sicherstellen, dass Objekte und Linien, die im rechten Winkel bezüglich der Länge des Fahrzeugs positioniert sind, wie etwa ein Kraftfahrzeug, das sich vor dem Fahrzeug über eine Kreuzung bewegt, ebenfalls in der Rundumsicht gerade und unverzerrt erscheinen.
  • Alternativ kann der ansteigende Teil der Projektionsoberfläche an mindestens einem Ende des Fahrzeugs offen sein, so dass sich der Bodenteil sowie der ansteigende Teil vor und/oder hinter dem Fahrzeug bis zur Unendlichkeit ziehen. Dann umfasst der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in der Längsrichtung des Fahrzeugs null beträgt, den ganzen ansteigenden Teil vor und/oder hinter dem Fahrzeug, was bewirkt, dass die Projektionsoberfläche eine Nutengestalt besitzt. Diese Gestalt der Projektionsoberfläche eignet sich besonders für das realistische Anzeigen von Objekten, die sich parallel zur Länge des Fahrzeugs befinden. Insbesondere jene Kraftfahrzeuge oder andere Objekte, die parallel zur Länge des Fahrzeugs vor oder hinter dem Fahrzeug positioniert sind oder sich parallel dazu bewegen, beispielsweise in einer anderen Spur vor dem Fahrzeug, werden auf eine Weise angezeigt, die durch den Fahrer des Fahrzeugs leicht korrekt interpretiert werden kann.
  • Weiterhin ist es möglich, dass der ansteigende Teil der Projektionsoberfläche den Bodenteil der Projektionsoberfläche umgibt, wodurch eine im Wesentlichen wannenförmige Projektionsoberfläche ausgebildet wird. Hierdurch ist der ansteigende Teil in Längsrichtung entlang der linken und rechten Länge des Fahrzeugs ungekrümmt und kann in seitlicher Richtung entlang der vorderen und hinteren Breite des Fahrzeugs gekrümmt oder ungekrümmt sein.
  • Es kann hierdurch besonders bevorzugt sein, falls der ungekrümmte ansteigende Teil in Längsrichtung entlang beiden Seiten des Fahrzeugs mit flachen, abgeschrägten, fast vertikalen oder vertikalen ansteigenden Teilen entlang einem oder beiden Enden des Fahrzeugs kombiniert wird. Die vertikalen oder fast vertikalen ansteigenden Teile sind rechnerisch unaufwendig, führen aber dazu, dass Objekte, wie etwa Kraftfahrzeuge oder Fahrräder, die sich in Querrichtung bezüglich der Länge des Fahrzeugs vor und/oder hinter dem Fahrzeug bewegen, so angezeigt werden, dass sie sich in einer geraden Linie in seitlicher oder Querrichtung des Fahrzeugs bewegen, wodurch bewirkt wird, dass das resultierende angezeigte Bild leicht korrekt durch den Fahrer des Fahrzeugs interpretiert werden kann.
  • Erfindungsgemäß ist der ansteigende Teil der Projektionsoberfläche mindestens auf einer Seite oder am Ende des Fahrzeugs flach und abgeschrägt und befindet sich bei der unteren Oberfläche, oder der ansteigende Teil ist aus mehreren flachen abgeschrägten und zunehmend steileren Abschnitten zusammengesetzt, so dass eine Linie, wo sich zwei benachbarte abgeschrägte Abschnitte treffen, gerade und parallel zur Längs- oder seitlichen Richtung des Fahrzeugs verläuft. Die Anzahl und Höhen der abgeschrägten Abschnitte können variieren. Es kann einen, zwei, drei oder mehr abgeschrägte Abschnitte geben. Mehr und dünnere Stücke bewirken, dass das Projektionsbild glatter ist, während weniger und dickere Stücke die Projektionsoberfläche und die ganze, mit der Projektion assoziierte erforderliche Berechnung weniger komplex machen.
  • Alternativ kann die Projektionsoberfläche derart definiert werden, dass der ansteigende Teil der Projektionsoberfläche eine regelmäßige Oberfläche bildet, das heißt, eine Oberfläche, die an einem beliebigen gegebenen Punkt der Oberfläche differenziert werden kann. Eine regelmäßige Projektionsoberfläche führt zu einem besonders glatten Projektionsbild, verursacht aber eine höhere Rechenkomplexität der Projektionen.
  • Die Auswertungseinheit kann konfiguriert sein zum Berechnen der Draufsicht der Projektion auf der virtuellen Projektionsoberfläche durch Projizieren der Projektion auf der virtuellen Projektionsoberfläche auf eine Ebene parallel zum Bodenteil der virtuellen Projektionsoberfläche. Auf diese Weise ist die Draufsicht eine unverzerrte Vogelperspektive der Projektionsoberfläche.
  • Alternativ kann die Auswertungseinheit konfiguriert sein zum Berechnen der Draufsicht der virtuellen Projektionsoberfläche gemäß einer Ansicht eines virtuellen Beobachters, der sich über der Projektionsoberfläche befindet. Wenn der virtuelle Beobachter immer weiter weg von der Projektionsoberfläche platziert ist, kann die Draufsicht gemäß einem virtuellen Beobachter die durch die Projektion auf eine Ebene generierte Vogelperspektive approximieren, wie oben beschrieben.
  • Falls mehrere Kameras zum Erfassen der Umgebung des Fahrzeugs als Basis zum Berechnen der Umgebungsansicht des Fahrzeugs verwendet werden, müssen die durch die verschiedenen Kameras erfassten Bilder und/oder ihre Projektionen möglicherweise zusammengesetzt werden, um die Rundumsicht oder Draufsicht des Fahrzeugs und seiner Umgebung auszubilden.
  • Deshalb kann die Auswertungseinheit weiterhin konfiguriert sein zum Generieren des Draufsichtsbilds als eine zusammengesetzte Draufsicht gemäß einer von drei weiter unten beschriebenen bevorzugten Optionen. Die Hauptaufgabe beim Berechnen eines zusammengesetzten Bilds ist das Ausgleichen der Überlappungen und/oder Spalte, die sich aus dem Positionieren und den Weitwinkelbreiten der mehreren Kameras ergeben.
  • Als eine erste Option zum Generieren des Draufsichtsbilds als eine zusammengesetzte Draufsicht kann die Auswertungseinheit konfiguriert sein zum Zusammensetzen der durch die Kameras erfassten Bilder zum Ausbilden eines zusammengesetzten Bilds, zum Projizieren des zusammengesetzten Bilds auf die virtuelle Projektionsoberfläche und zum Generieren einer Draufsicht der Projektion des zusammengesetzten Bilds auf der virtuellen Projektionsoberfläche.
  • Als eine zweite Option kann die Auswertungseinheit konfiguriert sein zum Zusammensetzen von Projektionen der durch die verschiedenen Kameras erfassten Bilder zum Ausbilden der Projektion der erfassten Bilder auf der virtuellen Projektionsoberfläche als ein zusammengesetztes Projektionsbild und durch Berechnen der Draufsicht des zusammengesetzten Projektionsbilds.
  • Als eine dritte Option kann die Auswertungseinheit konfiguriert sein zum Zusammensetzen von Draufsichten der Projektionen der durch die verschiedenen Kameras erfassten Bilder auf der virtuellen Projektionsoberfläche.
  • Die obigen drei Optionen zum Generieren einer zusammengesetzten Draufsicht differieren nur dahingehend, wenn die mehreren Bilder während der Berechnung der Draufsicht zusammengesetzt werden, identische oder fast identische Draufsichten auf der Basis jeder der obigen Optionen generiert werden können zum Generieren einer zusammengesetzten Draufsicht auf der Basis mehrerer Kamerabilder.
  • Bevorzugt wird das Rundumsichtsystem in einem Fahrzeug verwendet, wobei sich das Display innerhalb eines Innenraums des Fahrzeugs an einer Position befindet, die für den Fahrer des Fahrzeugs sichtbar ist.
  • Ausführungsbeispiele der Erfindung werden unten unter Bezugnahme auf die folgenden Figuren beschrieben. Es zeigen:
  • 1 eine schematische Draufsicht auf ein Fahrzeug, das mit einem Rundumsichtsystem mit mehreren Kameras ausgestattet ist,
  • 2 ein Blockdiagramm des Rundumsichtsystems,
  • 3 eine Perspektivansicht einer Oberfläche entsprechend einer virtuellen Projektionsoberfläche, die durch das Rundumsichtsystem verwendet wird,
  • 4 eine schematische Darstellung einer Projektion eines Kamerabilds und einer Ansicht von oben durch einen virtuellen Beobachter,
  • 5 eine Draufsicht auf eine rechte vordere Ecke eines Projektionsgitters einer anderen virtuellen Projektionsoberfläche,
  • 6 einen vertikalen Querschnitt einer regelmäßigen Projektionsoberfläche und
  • 7 eine Draufsicht, die zwei horizontale Querschnitte der regelmäßigen Projektionsoberfläche von 6 zeigt.
  • 1 zeigt ein Fahrzeug 1, das mit einem Rundumsichtsystem ausgestattet ist. Das Rundumsichtsystem umfasst sechs Weitwinkelkameras 2, wobei sich zwei der Kameras 2 auf jeder Seite des Fahrzeugs befinden und sich eine Kamera 2 an jedem der Vorderseite und Rückseite des Fahrzeugs 1 befindet. Jede Kamera 2 erfasst einen Teil der Umgebung des Fahrzeugs 1. Alternativ müssen, falls nur einige, aber nicht alle Seiten der Umgebung des Fahrzeugs 1 erfasst werden sollen, Kameras 2 nur auf den jeweiligen Seiten des Fahrzeugs 1 platziert werden.
  • 2 zeigt ein Blockdiagramm, das das Rundumsichtsystem auf schematische Weise darstellt. Zusätzlich zu den Kameras 2 umfasst das Rundumsichtsystem eine Auswertungseinheit 7 und ein Display 8.
  • Die durch die verschiedenen Kameras 2 erfassten Bilder werden zur Auswertungseinheit 7 zur Verarbeitung transferiert. Die Auswertungseinheit 7 ist konfiguriert zum Berechnen einer Projektion der durch die Kameras 2 erfassten Bilder auf eine virtuelle Projektionsoberfläche, wobei die Projektionsoberfläche wie in 3 gezeigt und unten ausführlicher beschrieben geformt sein kann. Die Auswertungseinheit 7 berechnet dann eine Draufsicht der Umgebung des Fahrzeugs 1. Diese Draufsicht wird als eine Draufsicht der Projektion auf der virtuellen Projektionsoberfläche generiert. Das berechnete Draufsichtsbild wird dann durch das Display 8 angezeigt, das sich derart innerhalb des Fahrzeugs 1 befindet, dass es für einen Fahrer des Fahrzeugs 1 sichtbar ist. Das Fahrzeug 1 kann beispielsweise ein Omnibus sein. Die auf dem Display 8 angezeigte Draufsicht kann dem Fahrer helfen zu prüfen, ob alle wartenden Passagiere bereits eingestiegen sind oder ob er vor dem Öffnen der Türen warten sollte, um zu verhindern, dass aussteigende Passagiere durch ein Kraftfahrzeug gefährdet werden, das am Fahrzeug 1 auf einer seiner Seiten vorbeifährt.
  • 3 veranschaulicht die wannenförmige virtuelle Projektionsoberfläche, die durch die Auswertungseinheit 7 zum Generieren der Draufsicht der Umgebung des Fahrzeugs 1 verwendet wird. Die virtuelle Projektionsoberfläche besteht aus einem flachen Bodenteil 4 und einem ansteigenden Teil, der den Bodenteil 4 umgibt. Der ansteigende Teil besteht aus mehreren benachbarten, flachen abgeschrägten und zunehmend steileren Segmenten 5 von länglicher rechteckiger Gestalt entlang zwei langen Seiten des rechteckigen Bodenteils 4 und vertikalen oder fast vertikalen Wänden 6 auf beiden kurzen Seiten des Bodenteils 4. Die Segmente 5 sind parallel zu einer Längsachse des Fahrzeugs 1 orientiert.
  • Die virtuelle Projektionsoberfläche ist derart ausgelegt, dass sich eine Position 3 des Fahrzeugs 1 in der Mitte des flachen Bodenteils 4 befindet und dass sich die flachen abgeschrägten Segmente 5 über mehr als die Länge des Fahrzeugs 1 erstrecken. Beispielsweise können sich die ungekrümmten Segmente 5 entlang der Längsrichtung des Fahrzeugs 1 über mehrere Meter über das Vorder- oder Rückende des Fahrzeugs 1 hinaus erstrecken.
  • Die Auswertungseinheit 7 berechnet die Draufsicht der Projektion auf der virtuellen Projektionsoberfläche als eine Ansicht eines virtuellen Beobachters, der sich über der Projektionsoberfläche befindet, so dass die Draufsicht einem Bild 14 entspricht, das von einer virtuellen Kamera 13 aufgenommen wird, die von oben auf die virtuelle Projektionsoberfläche blickt, siehe 4.
  • Falls die virtuelle Projektionsoberfläche keine vertikalen Teile besitzt, falls beispielsweise die Wände 6 nur fast vertikal sind oder durch unterschiedlich geformte Teile ersetzt worden sind, kann die Auswertungseinheit 7 die Draufsicht generieren durch Projizieren der Projektion der durch die Kameras 2 erfassten Bilder auf der virtuellen Projektionsoberfläche auf eine virtuelle Ebene, die parallel zum flachen Bodenteil 4 verläuft und sich über der virtuellen Projektionsoberfläche befindet.
  • Auf diese Weise wird eine mehr oder weniger unverzerrte Vogelperspektive durch die Auswertungseinheit 7 berechnet. Da die virtuelle Projektionsoberfläche in 3 entlang den Seiten sowie vor und hinter dem Fahrzeug 1 ungekrümmt ist, erscheinen Kraftfahrzeuge, die sich parallel zu dem Fahrzeug 1 auf einer beliebigen Seite des Fahrzeugs 1 bewegen oder die sich unter einem rechten Winkel bezüglich der Längsachse des Fahrzeugs 1 hinter oder vor dem Fahrzeug 1 bewegen, sich entlang unverzerrten geraden Linien auf der Projektionsoberfläche zu bewegen. Dadurch kann das resultierende berechnete Draufsichtsbild, wie auf dem Display 8 angezeigt, leicht korrekt durch den Fahrer des Fahrzeugs 1 interpretiert werden. Dies ist insbesondere deshalb wahr, da sich die meisten Straßen im rechten Winkel schneiden und sich die meisten Kraftfahrzeuge, Fußgänger oder andere Objekte deshalb entweder parallel zur Straße oder unter einem rechten Winkel zur Straße, auf der das kameraausgestattete Fahrzeug 1 positioniert ist, bewegen.
  • Zudem können die Projektion gemäß der Projektionsoberfläche von 3 und somit die Draufsicht aufgrund des ungekrümmten Designs der verschiedenen Teile der virtuellen Projektionsoberfläche mit geringen Rechenkosten berechnet werden.
  • 4 zeigt eine schematische Ansicht des Rundumsichtsystems, wobei eine der Kameras 2 gezeigt ist, während sie ein erhöhtes Objekt 9, in diesem Fall eine Person, erfasst, was zu einem Kamerabild 10 führt. Da ein Weitwinkelobjektiv wie etwa ein Fischaugenobjektiv zum Erfassen des Bilds verwendet wird, kann das von der Kamera erfasste Bild 10 geringfügig verzerrt erscheinen, wie durch unterschiedliche Projektionsstrahlen 11 angezeigt.
  • Dieses Bild 10 wird dann auf einen Teil 12 der ansteigenden Segmente 5 der virtuellen Projektionsoberfläche projiziert. Die Projektion auf der virtuellen Projektionsoberfläche wird durch die virtuelle Kamera 13 von oben betrachtet, um ein berechnetes Draufsichtsbild 14 zu generieren, wie durch Draufsichtsstrahlen 15 angezeigt.
  • Falls mehrere Kameras 2 verwendet werden, die beispielsweise auf verschiedenen Seiten des Fahrzeugs positioniert sind, wie in 1 gezeigt, werden mehrere Kamerabilder 10 zur gleichen Zeit aufgezeichnet, was zu mehreren berechneten Bildern 14 gemäß dem durch die virtuelle Kamera 13 dargestellten virtuellen Beobachter führt. Deshalb ist die Auswertungseinheit 7 weiterhin konfiguriert zum Zusammensetzen der mehreren berechneten Bilder 14 zu einem einzelnen, flüssig zusammengesetzten Draufsichtsbild, das dann auf dem Display 8 angezeigt wird.
  • Alternativ ist es möglich, dass die Auswertungseinheit 7 konfiguriert ist zum Zusammensetzen der durch die mehreren Kameras 2 erfassten mehreren Bilder 10 zu einem einzelnen zusammengesetzten Bild und dann Berechnen der Projektion auf die virtuelle Projektionsoberfläche und der Draufsicht auf der Basis des einzelnen zusammengesetzten Bilds.
  • Eine weitere Alternative ist, dass die Auswertungseinheit 7 konfiguriert ist zum Zusammensetzen der mehreren Projektionsbilder auf der virtuellen Projektionsoberfläche, die aus den durch die mehreren Kameras 2 erfassten Bildern resultieren, zu einem einzelnen Projektionsbild und dann Berechnen der Draufsicht auf der Basis dieses einzelnen Projektionsbilds.
  • Gemäß einem weiteren Ausführungsbeispiel kann die virtuelle Projektionsoberfläche auch eine von der in 3 gezeigten Gestalt unterschiedliche Gestalt aufweisen. Beispielsweise können die vertikalen Wände 6 vor und/oder hinter der Position 3 des Fahrzeugs 1 entfernt werden, um einen Bodenteil 4 auszubilden, der sich vor und/oder hinter dem Fahrzeug 1 bis zur Unendlichkeit zieht. Dies bewirkt, dass die Projektionsoberfläche im Wesentlichen nutenförmig ist, so dass sich der ungekrümmte ansteigende Teil der virtuellen Projektionsoberfläche links und rechts vom Fahrzeug 1 ebenfalls bis zur Unendlichkeit zieht.
  • Zum Ausgleichen der Ecken der in 3 dargestellten virtuellen Projektionsoberfläche ist es alternativ möglich, die vertikalen Wände 6 der Projektionsoberfläche vor und/oder hinter dem Fahrzeug 1 durch mehrere benachbarte abgeschrägte Segmente zu ersetzen, ähnlich den flachen abgeschrägten und zunehmend steileren Segmenten 5 entlang der Länge des Fahrzeugs in 3, was zu einer gitterartigen virtuellen Projektionsoberfläche führt.
  • 5 zeigt die rechte vordere Ecke eines Ausführungsbeispiels eines virtuellen Projektionsoberflächengitters 18 dieser Art. Zusätzlich zu der Verwendung eines ansteigenden Teils, der aus mehreren flachen und abgeschrägten benachbarten Segmenten 16 und 17 beide entlang den Seiten des Fahrzeugs 1 sowohl hinter als auch vor dem Fahrzeug 1 zusammengesetzt ist, verbinden Eckstücke des Gitters 18 die Segmente 17 vor dem Fahrzeug 1 und die Segmente 17 hinter oder vor dem Fahrzeug 1. Diese Eckstücke sind so abgewinkelt, um die Projektionsoberfläche in der Ecke auszugleichen. Auf diese Weise erscheint ein Kraftfahrzeug 19, das sich parallel zum Fahrzeug 1 bewegt, sich immer noch entlang einer geraden Linie zu bewegen, bis sich das Kraftfahrzeug 19 weit vor dem Fahrzeug 1 befindet, wobei Verzerrungen oder Diskontinuitäten in der Ecke auf ein Minimum reduziert sind.
  • Bei einer weiteren Ausführungsform kann die virtuelle Projektionsoberfläche, wie in 3 dargestellt, durch eine regelmäßige virtuelle Projektionsoberfläche ersetzt werden, die eine virtuelle Projektionsoberfläche ist, die an einem beliebigen gegebenen Punkt differenziert werden kann. Ein vertikaler Querschnitt 20 einer derartigen Projektionsoberfläche ist in 6 gezeigt. Der Querschnitt 20 bildet eine flüssige Linie, und die Position 3 des kameraausgestatteten Fahrzeugs 1 befindet sich in einer Mitte des flachen Bodenabschnitts 4 der virtuellen Projektionsoberfläche.
  • Einen horizontalen Querschnitt der gleichen virtuellen Projektionsoberfläche zu nehmen, führt zu Umrissen 21, 22, wobei der kleinere Umriss 22 von einem horizontalen Querschnitt nahe dem Bodenteil 4 der virtuellen Projektionsoberfläche resultiert, während der größere Umriss 21 von einem horizontalen Querschnitt nahe der Oberseite der virtuellen Projektionsoberfläche resultiert.
  • Während die virtuelle Projektionsoberfläche, wie in 6 und 7 gezeigt, regelmäßig ist, bleibt der ansteigende Teil entlang der Länge des Fahrzeugs 1 in Längsrichtung des Fahrzeugs wie in den anderen Ausführungsformen ungekrümmt, und der ansteigende Teil entlang der Breite des Fahrzeugs bleibt in der seitlichen Richtung des Fahrzeugs 1 ungekrümmt. Diese regelmäßige virtuelle Projektionsoberfläche führt zu einem besonders glatten Projektionsbild und somit zu einem besonders realistischen Draufsichtsbild.

Claims (11)

  1. Rundumsichtsystem für ein Fahrzeug (1), das Folgendes umfasst: – mindestens eine Kamera (2), die in oder an dem Fahrzeug (1) positioniert werden soll, um mindestens einen Teil der Umgebung des Fahrzeugs (1) zu erfassen, – eine Auswertungseinheit (7) zum Verarbeiten von durch die mindestens eine Kamera (2) erfassten Bildern, – mindestens ein Display (8) zum Anzeigen eines durch die Auswertungseinheit (7) generierten Draufsichtsbilds, wobei die Auswertungseinheit (7) konfiguriert ist zum Erhalten des Draufsichtsbilds durch Berechnen einer Projektion der erfassten Bilder auf eine virtuelle Projektionsoberfläche und durch Berechnen einer Draufsicht der Projektion auf der virtuellen Projektionsoberfläche, wobei die virtuelle Projektionsoberfläche einen flachen Bodenteil (4) und einen ansteigenden Teil (5) bei dem flachen Bodenteil (4) umfasst, wobei in einem Bereich, der den ansteigenden Teil mindestens auf einer Seite des Fahrzeugs (1) mindestens über eine Länge des Fahrzeugs (1) umfasst, eine Krümmung der virtuellen Projektionsoberfläche in einer Längsrichtung des Fahrzeugs (1) null beträgt, dadurch gekennzeichnet, dass der ansteigende Teil der Projektionsoberfläche mindestens auf einer Seite und/oder am Ende des Fahrzeugs (1) flach und abgeschrägt ist und sich bei dem Bodenteil befindet oder aus mehreren benachbarten, flachen, abgeschrägten und zunehmend steileren Abschnitten (5) zusammengesetzt ist, wobei eine Linie, wo sich zwei benachbarte abgeschrägte Abschnitte treffen, gerade und parallel zur Längs- oder seitlichen Richtung des Fahrzeugs (1) verläuft.
  2. Rundumsichtsystem nach Anspruch 1, wobei der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in der Längsrichtung des Fahrzeugs (1) null beträgt, den ansteigenden Teil der Projektionsoberfläche auf beiden Seiten des Fahrzeugs (1) mindestens über die Länge des Fahrzeugs (1) umfasst.
  3. Rundumsichtsystem nach einem der Ansprüche 1 oder 2, wobei in einem Bereich, der den ansteigenden Teil (6) vor und/oder hinter dem Fahrzeug (1) mindestens über eine Breite des Fahrzeugs (1) umfasst, die Krümmung der virtuellen Projektionsoberfläche in einer seitlichen Richtung des Fahrzeugs (1) null beträgt.
  4. Rundumsichtsystem nach einem der Ansprüche 1 bis 3, wobei der ansteigende Teil der Projektionsoberfläche an mindestens einem Ende des Fahrzeugs (1) offen ist, wobei sich der Bodenteil (4) und der ansteigende Teil vor und/oder hinter dem Fahrzeug (1) bis zur Unendlichkeit ziehen, wobei der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in der Längsrichtung des Fahrzeugs (1) null beträgt, den ganzen ansteigenden Teil vor und/oder hinter dem Fahrzeug (1) umfasst, so dass die Projektionsoberfläche eine Nutengestalt besitzt.
  5. Rundumsichtsystem nach einem der Ansprüche 1 bis 3, wobei der ansteigende Teil der Projektionsoberfläche den Bodenteil der Projektionsoberfläche umgibt, um eine im Wesentlichen wannenförmige Projektionsoberfläche auszubilden.
  6. Rundumsichtsystem nach einem der Ansprüche 1 bis 5, wobei der ansteigende Teil der Projektionsoberfläche eine regelmäßige Oberfläche bildet.
  7. Rundumsichtsystem nach einem der Ansprüche 1 bis 6, wobei die Auswertungseinheit (7) konfiguriert ist zum Berechnen der Draufsicht der Projektion auf der virtuellen Projektionsoberfläche durch Projizieren der Projektion auf der virtuellen Projektionsoberfläche auf eine Ebene parallel zum Bodenteil der virtuellen Projektionsoberfläche.
  8. Rundumsichtsystem nach einem der Ansprüche 1 bis 6, wobei die Auswertungseinheit (7) konfiguriert ist zum Berechnen der Draufsicht der Projektion auf der virtuellen Projektionsoberfläche gemäß einer Ansicht eines über der Projektionsoberfläche befindlichen virtuellen Beobachters.
  9. Rundumsichtsystem nach einem der vorhergehenden Ansprüche, wobei mindestens eine der Kameras (2) auf jeder Seite des Fahrzeugs (1) positioniert werden soll.
  10. Rundumsichtsystem nach einem der vorhergehenden Ansprüche, wobei die Auswertungseinheit (7) weiterhin konfiguriert ist zum Generieren des Draufsichtsbilds als eine zusammengesetzte Draufsicht durch eines von (a) Zusammensetzen der durch die Kameras (2) erfassten Bilder zum Ausbilden eines zusammengesetzten Bilds, Projizieren des zusammengesetzten Bilds auf die virtuelle Projektionsoberfläche und Generieren der Draufsicht der Projektion des zusammengesetzten Bilds auf der Projektionsoberfläche; (b) Zusammensetzen von Projektionen der durch die verschiedenen Kameras (2) erfassten Bilder zum Ausbilden der Projektion der erfassten Bilder auf der virtuellen Projektionsoberfläche als ein zusammengesetztes Projektionsbild und durch Berechnen der Draufsicht des zusammengesetzten Projektionsbilds; oder (c) Zusammensetzen von Draufsichten der Projektionen der durch die verschiedenen Kameras (2) erfassten Bilder auf der virtuellen Projektionsoberfläche.
  11. Fahrzeug (1), umfassend ein Rundumsichtsystem nach einem der vorhergehenden Ansprüche, wobei sich das Display (8) innerhalb eines Innenraums des Fahrzeugs (1) an einer Position befindet, die für einen Fahrer des Fahrzeugs (1) sichtbar ist.
DE102015205507.8A 2015-03-26 2015-03-26 Rundsichtsystem für ein Fahrzeug Expired - Fee Related DE102015205507B3 (de)

Priority Applications (5)

Application Number Priority Date Filing Date Title
DE102015205507.8A DE102015205507B3 (de) 2015-03-26 2015-03-26 Rundsichtsystem für ein Fahrzeug
EP16711280.4A EP3274958B1 (de) 2015-03-26 2016-03-22 Rundumsichtsystem für ein fahrzeug
PCT/EP2016/056229 WO2016150944A1 (en) 2015-03-26 2016-03-22 Surround view system for a vehicle
US15/081,832 US10965911B2 (en) 2015-03-26 2016-03-25 Surround view system for a vehicle
KR1020160036620A KR101885743B1 (ko) 2015-03-26 2016-03-28 차량의 서라운드 뷰 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102015205507.8A DE102015205507B3 (de) 2015-03-26 2015-03-26 Rundsichtsystem für ein Fahrzeug

Publications (1)

Publication Number Publication Date
DE102015205507B3 true DE102015205507B3 (de) 2016-09-29

Family

ID=55588288

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102015205507.8A Expired - Fee Related DE102015205507B3 (de) 2015-03-26 2015-03-26 Rundsichtsystem für ein Fahrzeug

Country Status (5)

Country Link
US (1) US10965911B2 (de)
EP (1) EP3274958B1 (de)
KR (1) KR101885743B1 (de)
DE (1) DE102015205507B3 (de)
WO (1) WO2016150944A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018203405A1 (de) 2018-03-07 2019-09-12 Zf Friedrichshafen Ag Visuelles Surround-View-System zur Überwachung des Fahrzeuginneren

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3392801A1 (de) * 2017-04-21 2018-10-24 Harman International Industries, Incorporated Systeme und verfahren zur fahrerassistenz
CN107696972A (zh) * 2017-10-20 2018-02-16 上海豫兴电子科技有限公司 应用于乘用车盲区智能辅助车载系统
KR101982091B1 (ko) * 2017-10-31 2019-05-24 주식회사 켐트로닉스 서라운드 뷰 모니터링 시스템
KR102051324B1 (ko) * 2017-10-31 2019-12-03 주식회사 켐트로닉스 서라운드 뷰 모니터링 시스템
DE102018102047A1 (de) * 2018-01-30 2019-08-01 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Darstellen eines Umgebungsbereichs eines Kraftfahrzeugs mit virtuellen, länglichen Abstandsmarkierungen in einem Bild, Computerprogrammprodukt, sowie Anzeigesystem
WO2020068960A1 (en) * 2018-09-26 2020-04-02 Coherent Logix, Inc. Any world view generation

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1115250B1 (de) * 1998-07-31 2012-06-06 Panasonic Corporation Vorrichtung und verfahren zur bildanzeige
DE102012018326A1 (de) * 2012-09-15 2014-03-20 DSP-Weuffen GmbH Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem mit verdeckungsfreier Umsichtfunktion

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2437494B1 (de) * 2009-05-25 2017-10-11 Panasonic Intellectual Property Management Co., Ltd. Vorrichtung zur überwachung der umgebung rund um ein fahrzeug
EP2511137B1 (de) 2011-04-14 2019-03-27 Harman Becker Automotive Systems GmbH Fahrzeug-Surround-Blicksystem
JP5124672B2 (ja) * 2011-06-07 2013-01-23 株式会社小松製作所 作業車両の周辺監視装置
JP5668857B2 (ja) 2011-07-29 2015-02-12 富士通株式会社 画像処理装置、画像処理方法および画像処理プログラム
JP5911775B2 (ja) * 2012-08-21 2016-04-27 富士通テン株式会社 画像生成装置、画像表示システム及び画像生成方法
DE102012018325A1 (de) * 2012-09-15 2014-03-20 DSP-Weuffen GmbH Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem mit adaptiver Umsichtdarstellung
JP6202240B2 (ja) 2013-02-05 2017-09-27 スズキ株式会社 俯瞰画像提示装置
US10093247B2 (en) * 2013-05-23 2018-10-09 GM Global Technology Operations LLC Enhanced front curb viewing system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1115250B1 (de) * 1998-07-31 2012-06-06 Panasonic Corporation Vorrichtung und verfahren zur bildanzeige
DE102012018326A1 (de) * 2012-09-15 2014-03-20 DSP-Weuffen GmbH Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem mit verdeckungsfreier Umsichtfunktion

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018203405A1 (de) 2018-03-07 2019-09-12 Zf Friedrichshafen Ag Visuelles Surround-View-System zur Überwachung des Fahrzeuginneren
US11210538B2 (en) 2018-03-07 2021-12-28 Zf Friedrichshafen Ag Visual surround view system for monitoring vehicle interiors

Also Published As

Publication number Publication date
US20160286170A1 (en) 2016-09-29
KR101885743B1 (ko) 2018-09-11
US10965911B2 (en) 2021-03-30
EP3274958B1 (de) 2019-12-18
EP3274958A1 (de) 2018-01-31
KR20160115852A (ko) 2016-10-06
WO2016150944A1 (en) 2016-09-29

Similar Documents

Publication Publication Date Title
DE102015205507B3 (de) Rundsichtsystem für ein Fahrzeug
EP1875442B1 (de) Verfahren zur grafischen darstellung der umgebung eines kraftfahrzeugs
EP2805183B1 (de) Verfahren und vorrichtung zum visualisieren der umgebung eines fahrzeugs
DE102009005505B4 (de) Verfahren und Vorrichtung zur Erzeugung eines Abbildes der Umgebung eines Kraftfahrzeugs
DE102016220075A1 (de) Kraftfahrzeug und Verfahren zur 360°-Umfelderfassung
DE102016212405A1 (de) Fahrzeugbildverarbeitungsvorrichtung und Fahrzeugbildverarbeitungssystem
DE102011080702B3 (de) Objekterfassungsvorrichtung für ein Fahrzeug, Fahrzeug mit einer derartigen Objekterfassungsvorrichtung
DE102016206493A1 (de) Verfahren und Kamerasystem zur Entfernungsbestimmung von Objekten zu einem Fahrzeug
DE112018000107T5 (de) Fahrzeugkamerakalibrierungsvorrichtung und -Verfahren
EP2888715B1 (de) Verfahren und vorrichtung zum betreiben eines fahrzeugs
DE112017001545T5 (de) Virtuelles überlagerungssystem und verfahren für verdeckte objekte
EP3281178A1 (de) Verfahren zur darstellung einer fahrzeugumgebung eines fahrzeuges
DE102013012930A1 (de) Verfahren zum Bestimmen eines aktuellen Abstands und/oder einer aktuellen Geschwindigkeit eines Zielobjekts anhand eines Referenzpunkts in einem Kamerabild, Kamerasystem und Kraftfahrzeug
WO2018072793A1 (de) Verfahren und vorrichtung zur erzeugung einer fahrzeugumgebungsansicht bei einem fahrzeug
DE102018108751A1 (de) Method, system and device of obtaining 3D-information of objects
WO2016177508A1 (de) Verfahren zur darstellung einer fahrzeugumgebung eines fahrzeuges
DE102013012778A1 (de) Verfahren zum Detektieren eines sich bewegenden Fußgängers anhand von charakteristischen Merkmalen und optischen Flussvektoren eines Bilds, Kamerasystem und Kraftfahrzeug
EP3409541A1 (de) Vorrichtung zur fahrschlauchabsicherung
DE102014226448B4 (de) Fahrzeug zum Errechnen einer Sicht einer Fahrzeugumgebung
EP3973511A1 (de) Verfahren zur erzeugung eines bildes einer fahrzeugumgebung und vorrichtung zur erzeugung eines bildes einer fahrzeugumgebung
DE102017104957A1 (de) Verfahren zum Bestimmen einer Bewegung von zueinander korrespondierenden Bildpunkten in einer Bildsequenz aus einem Umgebungsbereich eines Kraftfahrzeugs, Auswerteeinrichtung, Fahrerassistenzsystem sowie Kraftfahrzeug
DE102011005368A1 (de) Fahrerassistenzsystem für ein Fahrzeug mit einem angereicherten Videobild in einem Anzeigemittel
DE102020107949A1 (de) Sichtfeldunterstützungsbild-Erzeugungsvorrichtung und Bildumwandlungsverfahren
DE112016001238B4 (de) Fahrzeugumgebungsbildanzeigesteuerungsvorrichtung und fahrzeugumgebungsbildanzeigesteuerungsprogramm
DE102014017904A1 (de) Verfahren und Vorrichtung zur Detektion erhabener Objekte und Verfahren zur Unterstützung eines Fahrers beim Führen eines Fahrzeugs

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R082 Change of representative
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee