DE102015205507B3 - Rundsichtsystem für ein Fahrzeug - Google Patents
Rundsichtsystem für ein Fahrzeug Download PDFInfo
- Publication number
- DE102015205507B3 DE102015205507B3 DE102015205507.8A DE102015205507A DE102015205507B3 DE 102015205507 B3 DE102015205507 B3 DE 102015205507B3 DE 102015205507 A DE102015205507 A DE 102015205507A DE 102015205507 B3 DE102015205507 B3 DE 102015205507B3
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- projection surface
- virtual
- virtual projection
- projection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000000630 rising effect Effects 0.000 claims abstract description 33
- 238000011156 evaluation Methods 0.000 claims abstract description 30
- 238000012545 processing Methods 0.000 claims abstract description 4
- 239000002131 composite material Substances 0.000 claims description 18
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 4
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000007788 liquid Substances 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformation in the plane of the image
- G06T3/40—Scaling the whole image or part thereof
- G06T3/4038—Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/102—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
- B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
- B60R2300/8026—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20068—Projection on vertical or horizontal image axis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/168—Driving aids for parking, e.g. acoustic or visual feedback on parking space
Abstract
Die Erfindung bezieht sich auf ein Rundsichtsystem für ein Fahrzeug (1), aufweisend zumindest eine Kamera (2), die in oder an dem Fahrzeug (1) positioniert ist, um zumindest einen Teil der Umgebung des Fahrzeugs (1) aufzunehmen, eine Auswertungseinheit (7) zum Verarbeiten von von der zumindest einen Kamera (2) aufgenommenen Bildern, und zumindest eine Anzeigevorrichtung (8) zum Darstellen eines von der Auswertungseinheit (7) erzeugten Draufsichtbilds. Hierzu ist die Auswertungseinheit (7) zum Erhalten des Draufsichtbilds durch Berechnen einer Projektion der aufgenommenen Bilder auf eine virtuelle Projektionsfläche und durch Berechnen einer Draufsicht der Projektion auf die virtuelle Projektionsfläche konfiguriert. Die virtuelle Projektionsfläche weist einen flachen Bodenteil (4) und einen ansteigenden Teil (5) angrenzend an den flachen Bodenteil (4) auf, wobei in einem Bereich, der den ansteigenden Teil zumindest auf einer Seite des Fahrzeugs (1) zumindest über eine Länge des Fahrzeugs (1) aufweist, eine Krümmung der virtuellen Projektionsfläche in einer Längsrichtung des Fahrzeugs (1) gleich null ist. Weiterhin bezieht sich die Erfindung auf ein Fahrzeug (1), das ein derartiges Rundsichtsystem aufweist.
Description
- Die Erfindung betrifft ein Rundumsichtsystem für ein Fahrzeug, umfassend mindestens eine Kamera, eine Auswertungseinheit und mindestens ein Display, und ein Fahrzeug, das ein derartiges Rundumsichtsystem umfasst.
- Fahrerassistenzsysteme sind oftmals mit Kameras ausgerüstet, um die Umgebung des Fahrzeugs zu erfassen. Um die erfassten Bilder als eine Rundumsicht des Fahrzeugs in einem Display anzuzeigen, müssen die Bilder möglicherweise entsprechend zusammengesetzt werden, um dem Fahrer des Fahrzeugs zu helfen.
- In
EP 2511137 A1 wird ein Rundumsichtsystem für ein Fahrzeug offenbart, wo sich mehrere Kameras auf den verschiedenen Seiten des Fahrzeugs befinden und die Rundumsicht dann durch Projizieren der kameraerfassten Bilder auf eine schalenförmige Projektionsoberfläche generiert wird, die dann von einem virtuellen Beobachter von oben betrachtet wird. Die Schalenform der Projektionsoberfläche bewirkt, dass Kraftfahrzeuge, die in einer Spur bei dem Fahrzeug fahren, sich anscheinend in einem Bogen um das Fahrzeug bewegen, was es erschwert, dass das angezeigte Rundumsichtbild von dem Fahrer des Fahrzeugs korrekt interpretiert wird. - Die Druckschrift
DE 10 2012 018 326 A1 offenbart ein Verfahren für ein bildgebendes Fahrerassistenzsystem zur Abbildung von im Umgebungsbereich von Land-, Wasser oder Luftfahrzeugen angeordneten Objekten, insbesondere an einem Kraftfahrzeug, bei dem am Fahrzeug mindestens zwei Kameras zur Erzeugung einer im Innenraum oder Außenraum des Fahrzeuges darstellbaren Umsicht angeordnet sind, und der Blickwinkel benachbart angeordneter Kameras im Umgebungsbereich des Fahrzeuges sich mindestens teilweise überschneidet und dort mindestens einen Überlappungsbereich ausbildet, wobei zur Erzeugung der Umsichtdarstellung ein oder mehrere Kamerabilder der Kameras entsprechend ihrer Aufnahmeposition am Fahrzeug auf einer virtuellen Projektionsfläche angeordnet werden, die Teil eines virtuellen dreidimensionaler Raumkörpers das Fahrzeug an mindestens zwei Seiten mit Abstand umgibt, und zur Erreichung einer annähernd verdeckungsfreien Umsichtfunktion von Objekten im Überlappungsbereich der Kameras eine dynamische Anpassung der Zusammenfügung der Kamerabilder auf der Projektionsfläche durch die mathematische Verschiebung der virtuellen Projektionsfläche dergestalt erfolgt, dass das Objekt annähernd in der Ebene der virtuellen Projektionsfläche abgebildet wird. - Aus der Druckschrift
EP 1 115 250 B1 ist eine Bilderzeugungsvorrichtung bekannt, die umfasst: eine Vielzahl von Kameras, die an einem Fahrzeug angebracht sind; eine Einrichtung, mit der die Eingabebilder von den Kameras auf wenigstens eine Fläche projiziert werden, die ein vorgegebenes Raummodell in einem dreidimensionalen Koordinatensystem in Bezug auf das Fahrzeug bildet, um so Raum-Daten zu schaffen, und eine Standpunkt-Umwandlungseinrichtung, mit der ein von einem beliebigen virtuellen Standpunkt in dem dreidimensionalen Koordinatensystem aus gesehenes Bild unter Bezugnahme auf die durch die Projektionseinrichtung erzeugten Raum-Daten zusammengesetzt wird, und eine Anzeigeeinrichtung, mit der das durch die Standpunkt-Umwandlungseinrichtung zusammengesetzte Bild angezeigt wird. Das Raummodell ist ein Modell aus Bildschirmebenen (screen planes), die sich an der Straßenoberfläche sowie an der hinteren linken Seite und der hinteren rechten Seite des Fahrzeugs befinden und auf die Straßenoberfläche aufgelegt sind, oder ein Modell der Ebene der Straßenoberfläche, einer Ebene vertikal zu der Straßenoberfläche, die sich an der Vorderseite des Fahrzeugs befindet, einer Ebene vertikal zu der Straßenoberfläche, die sich an der linken Seite relativ zur Fahrrichtung des Fahrzeugs befindet, einer Ebene vertikal zu der Straßenoberfläche, die sich an der Rückseite des Fahrzeugs befindet, sowie einer Ebene vertikal zu der Straßenoberfläche, die sich an der rechten Seite relativ zu der Fahrrichtung des Fahrzeugs befindet, oder ein Modell, das aus der Ebene der Straßenoberfläche und einer Wand zylindrischer oder elliptisch-zylindrischer Form kombiniert wird, die auf die Ebene der Straßenoberfläche aufgelegt ist, so dass sie das Fahrzeug umgibt, oder ein Modell einer gekrümmten Fläche in Schalenform, wobei sich das Fahrzeug auf dem Teil befindet, der dem Boden der Schale entspricht. - Die Aufgabe der vorliegenden Erfindung besteht somit in der Bereitstellung eines Rundumsichtsystems, das eine Vogelperspektive der Umgebung des Fahrzeugs generiert, die durch einen Fahrer des Fahrzeugs mit geringen Rechenkosten leicht interpretiert werden kann, wobei das System nicht komplexer ist als das Rundumsichtsystem gemäß dem oben erwähnten Stand der Technik.
- Die Aufgabe wird durch das erfindungsgemäße Rundumsichtsystem gemäß Anspruch 1 gelöst. Vorteilhafte Ausführungsformen des erfindungsgemäßen Systems werden in den abhängigen Ansprüchen offenbart.
- Das erfindungsgemäße Rundumsichtsystem umfasst mindestens eine Kamera, die in oder an dem Fahrzeug positioniert werden soll, um mindestens einen Teil der Umgebung des Fahrzeugs zu erfassen.
- Weiterhin umfasst das Rundumsichtsystem eine Auswertungseinheit zum Verarbeiten von durch die mindestens eine Kamera erfassten Bildern und mindestens ein Display zum Anzeigen eines Draufsichtsbilds, das durch die Auswertungseinheit generiert worden ist.
- Die Auswertungseinheit ist konfiguriert zum Erhalten des Draufsichtsbilds durch Berechnen einer Projektion der erfassten Bilder auf eine virtuelle Projektionsoberfläche und durch dann Berechnen einer Draufsicht der Projektion auf der virtuellen Projektionsoberfläche.
- Hierdurch umfasst die virtuelle Projektionsoberfläche einen flachen Bodenteil und einen ansteigenden Teil bei dem flachen Bodenteil. Die virtuelle Projektionsoberfläche ist so ausgelegt, dass in einem Bereich, der den ansteigenden Teil mindestens auf einer Seite des Fahrzeugs mindestens über eine Länge des Fahrzeugs umfasst, eine Krümmung der virtuellen Projektionsoberfläche in einer Längsrichtung des Fahrzeugs null beträgt. Da sich die Projektionsoberfläche in der Richtung der Fahrzeuglänge nicht krümmt, erscheinen Kraftfahrzeuge sowie andere Objekte, die parallel zu der Fahrzeuglänge positioniert sind oder sich parallel dazu bewegen, parallel zu dem Fahrzeug, gerade und unverzerrt. Somit zeigt das Display ein realistisches Bild der relevanten Abschnitte der unmittelbaren Umgebung des Fahrzeugs, das durch den Fahrer des Fahrzeugs leicht korrekt interpretiert werden kann.
- Die Schritte des Berechnens der Projektion der erfassten Bilder auf die virtuelle Projektionsoberfläche und des Berechnens der Draufsicht der Projektionsoberfläche können natürlich mathematisch zu einem einzelnen Projizier- oder Abbildungsschritt kombiniert werden.
- Bei typischen Ausführungsformen ist möglicherweise mindestens eine der Kameras auf jeder Seite des Fahrzeugs positioniert, um eine volle Rundumsicht des Fahrzeugs zu erfassen. Hierdurch können die Kameras beispielsweise Fischaugenkameras sein. Auf diese Weise kann die Umgebung des Fahrzeugs entlang mindestens der linken und rechten Länge des Fahrzeugs erfasst werden. In diesem Fall kann es besonders nützlich sein, falls der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in Längsrichtung des Fahrzeugs null beträgt, den ansteigenden Teil der Projektionsoberfläche auf beiden Seiten des Fahrzeugs umfasst, und zwar mindestens über eine Länge des Fahrzeugs. Dies kann sicherstellen, dass Kraftfahrzeuge, die sich auf beiden Seiten des Fahrzeugs parallel zum Fahrzeug bewegen, so angezeigt werden, dass sie sich auf geraden Linien bewegen.
- Es kann bevorzugt sein, dass in einem Bereich, der den ansteigenden Teil der Projektionsoberfläche vor und/oder hinter dem Fahrzeug mindestens über eine Breite des Fahrzeugs umfasst, die Krümmung der virtuellen Projektionsoberfläche in seitlicher Richtung des Fahrzeugs null beträgt. Dies kann sicherstellen, dass Objekte und Linien, die im rechten Winkel bezüglich der Länge des Fahrzeugs positioniert sind, wie etwa ein Kraftfahrzeug, das sich vor dem Fahrzeug über eine Kreuzung bewegt, ebenfalls in der Rundumsicht gerade und unverzerrt erscheinen.
- Alternativ kann der ansteigende Teil der Projektionsoberfläche an mindestens einem Ende des Fahrzeugs offen sein, so dass sich der Bodenteil sowie der ansteigende Teil vor und/oder hinter dem Fahrzeug bis zur Unendlichkeit ziehen. Dann umfasst der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in der Längsrichtung des Fahrzeugs null beträgt, den ganzen ansteigenden Teil vor und/oder hinter dem Fahrzeug, was bewirkt, dass die Projektionsoberfläche eine Nutengestalt besitzt. Diese Gestalt der Projektionsoberfläche eignet sich besonders für das realistische Anzeigen von Objekten, die sich parallel zur Länge des Fahrzeugs befinden. Insbesondere jene Kraftfahrzeuge oder andere Objekte, die parallel zur Länge des Fahrzeugs vor oder hinter dem Fahrzeug positioniert sind oder sich parallel dazu bewegen, beispielsweise in einer anderen Spur vor dem Fahrzeug, werden auf eine Weise angezeigt, die durch den Fahrer des Fahrzeugs leicht korrekt interpretiert werden kann.
- Weiterhin ist es möglich, dass der ansteigende Teil der Projektionsoberfläche den Bodenteil der Projektionsoberfläche umgibt, wodurch eine im Wesentlichen wannenförmige Projektionsoberfläche ausgebildet wird. Hierdurch ist der ansteigende Teil in Längsrichtung entlang der linken und rechten Länge des Fahrzeugs ungekrümmt und kann in seitlicher Richtung entlang der vorderen und hinteren Breite des Fahrzeugs gekrümmt oder ungekrümmt sein.
- Es kann hierdurch besonders bevorzugt sein, falls der ungekrümmte ansteigende Teil in Längsrichtung entlang beiden Seiten des Fahrzeugs mit flachen, abgeschrägten, fast vertikalen oder vertikalen ansteigenden Teilen entlang einem oder beiden Enden des Fahrzeugs kombiniert wird. Die vertikalen oder fast vertikalen ansteigenden Teile sind rechnerisch unaufwendig, führen aber dazu, dass Objekte, wie etwa Kraftfahrzeuge oder Fahrräder, die sich in Querrichtung bezüglich der Länge des Fahrzeugs vor und/oder hinter dem Fahrzeug bewegen, so angezeigt werden, dass sie sich in einer geraden Linie in seitlicher oder Querrichtung des Fahrzeugs bewegen, wodurch bewirkt wird, dass das resultierende angezeigte Bild leicht korrekt durch den Fahrer des Fahrzeugs interpretiert werden kann.
- Erfindungsgemäß ist der ansteigende Teil der Projektionsoberfläche mindestens auf einer Seite oder am Ende des Fahrzeugs flach und abgeschrägt und befindet sich bei der unteren Oberfläche, oder der ansteigende Teil ist aus mehreren flachen abgeschrägten und zunehmend steileren Abschnitten zusammengesetzt, so dass eine Linie, wo sich zwei benachbarte abgeschrägte Abschnitte treffen, gerade und parallel zur Längs- oder seitlichen Richtung des Fahrzeugs verläuft. Die Anzahl und Höhen der abgeschrägten Abschnitte können variieren. Es kann einen, zwei, drei oder mehr abgeschrägte Abschnitte geben. Mehr und dünnere Stücke bewirken, dass das Projektionsbild glatter ist, während weniger und dickere Stücke die Projektionsoberfläche und die ganze, mit der Projektion assoziierte erforderliche Berechnung weniger komplex machen.
- Alternativ kann die Projektionsoberfläche derart definiert werden, dass der ansteigende Teil der Projektionsoberfläche eine regelmäßige Oberfläche bildet, das heißt, eine Oberfläche, die an einem beliebigen gegebenen Punkt der Oberfläche differenziert werden kann. Eine regelmäßige Projektionsoberfläche führt zu einem besonders glatten Projektionsbild, verursacht aber eine höhere Rechenkomplexität der Projektionen.
- Die Auswertungseinheit kann konfiguriert sein zum Berechnen der Draufsicht der Projektion auf der virtuellen Projektionsoberfläche durch Projizieren der Projektion auf der virtuellen Projektionsoberfläche auf eine Ebene parallel zum Bodenteil der virtuellen Projektionsoberfläche. Auf diese Weise ist die Draufsicht eine unverzerrte Vogelperspektive der Projektionsoberfläche.
- Alternativ kann die Auswertungseinheit konfiguriert sein zum Berechnen der Draufsicht der virtuellen Projektionsoberfläche gemäß einer Ansicht eines virtuellen Beobachters, der sich über der Projektionsoberfläche befindet. Wenn der virtuelle Beobachter immer weiter weg von der Projektionsoberfläche platziert ist, kann die Draufsicht gemäß einem virtuellen Beobachter die durch die Projektion auf eine Ebene generierte Vogelperspektive approximieren, wie oben beschrieben.
- Falls mehrere Kameras zum Erfassen der Umgebung des Fahrzeugs als Basis zum Berechnen der Umgebungsansicht des Fahrzeugs verwendet werden, müssen die durch die verschiedenen Kameras erfassten Bilder und/oder ihre Projektionen möglicherweise zusammengesetzt werden, um die Rundumsicht oder Draufsicht des Fahrzeugs und seiner Umgebung auszubilden.
- Deshalb kann die Auswertungseinheit weiterhin konfiguriert sein zum Generieren des Draufsichtsbilds als eine zusammengesetzte Draufsicht gemäß einer von drei weiter unten beschriebenen bevorzugten Optionen. Die Hauptaufgabe beim Berechnen eines zusammengesetzten Bilds ist das Ausgleichen der Überlappungen und/oder Spalte, die sich aus dem Positionieren und den Weitwinkelbreiten der mehreren Kameras ergeben.
- Als eine erste Option zum Generieren des Draufsichtsbilds als eine zusammengesetzte Draufsicht kann die Auswertungseinheit konfiguriert sein zum Zusammensetzen der durch die Kameras erfassten Bilder zum Ausbilden eines zusammengesetzten Bilds, zum Projizieren des zusammengesetzten Bilds auf die virtuelle Projektionsoberfläche und zum Generieren einer Draufsicht der Projektion des zusammengesetzten Bilds auf der virtuellen Projektionsoberfläche.
- Als eine zweite Option kann die Auswertungseinheit konfiguriert sein zum Zusammensetzen von Projektionen der durch die verschiedenen Kameras erfassten Bilder zum Ausbilden der Projektion der erfassten Bilder auf der virtuellen Projektionsoberfläche als ein zusammengesetztes Projektionsbild und durch Berechnen der Draufsicht des zusammengesetzten Projektionsbilds.
- Als eine dritte Option kann die Auswertungseinheit konfiguriert sein zum Zusammensetzen von Draufsichten der Projektionen der durch die verschiedenen Kameras erfassten Bilder auf der virtuellen Projektionsoberfläche.
- Die obigen drei Optionen zum Generieren einer zusammengesetzten Draufsicht differieren nur dahingehend, wenn die mehreren Bilder während der Berechnung der Draufsicht zusammengesetzt werden, identische oder fast identische Draufsichten auf der Basis jeder der obigen Optionen generiert werden können zum Generieren einer zusammengesetzten Draufsicht auf der Basis mehrerer Kamerabilder.
- Bevorzugt wird das Rundumsichtsystem in einem Fahrzeug verwendet, wobei sich das Display innerhalb eines Innenraums des Fahrzeugs an einer Position befindet, die für den Fahrer des Fahrzeugs sichtbar ist.
- Ausführungsbeispiele der Erfindung werden unten unter Bezugnahme auf die folgenden Figuren beschrieben. Es zeigen:
-
1 eine schematische Draufsicht auf ein Fahrzeug, das mit einem Rundumsichtsystem mit mehreren Kameras ausgestattet ist, -
2 ein Blockdiagramm des Rundumsichtsystems, -
3 eine Perspektivansicht einer Oberfläche entsprechend einer virtuellen Projektionsoberfläche, die durch das Rundumsichtsystem verwendet wird, -
4 eine schematische Darstellung einer Projektion eines Kamerabilds und einer Ansicht von oben durch einen virtuellen Beobachter, -
5 eine Draufsicht auf eine rechte vordere Ecke eines Projektionsgitters einer anderen virtuellen Projektionsoberfläche, -
6 einen vertikalen Querschnitt einer regelmäßigen Projektionsoberfläche und -
7 eine Draufsicht, die zwei horizontale Querschnitte der regelmäßigen Projektionsoberfläche von6 zeigt. -
1 zeigt ein Fahrzeug1 , das mit einem Rundumsichtsystem ausgestattet ist. Das Rundumsichtsystem umfasst sechs Weitwinkelkameras2 , wobei sich zwei der Kameras2 auf jeder Seite des Fahrzeugs befinden und sich eine Kamera2 an jedem der Vorderseite und Rückseite des Fahrzeugs1 befindet. Jede Kamera2 erfasst einen Teil der Umgebung des Fahrzeugs1 . Alternativ müssen, falls nur einige, aber nicht alle Seiten der Umgebung des Fahrzeugs1 erfasst werden sollen, Kameras2 nur auf den jeweiligen Seiten des Fahrzeugs1 platziert werden. -
2 zeigt ein Blockdiagramm, das das Rundumsichtsystem auf schematische Weise darstellt. Zusätzlich zu den Kameras2 umfasst das Rundumsichtsystem eine Auswertungseinheit7 und ein Display8 . - Die durch die verschiedenen Kameras
2 erfassten Bilder werden zur Auswertungseinheit7 zur Verarbeitung transferiert. Die Auswertungseinheit7 ist konfiguriert zum Berechnen einer Projektion der durch die Kameras2 erfassten Bilder auf eine virtuelle Projektionsoberfläche, wobei die Projektionsoberfläche wie in3 gezeigt und unten ausführlicher beschrieben geformt sein kann. Die Auswertungseinheit7 berechnet dann eine Draufsicht der Umgebung des Fahrzeugs1 . Diese Draufsicht wird als eine Draufsicht der Projektion auf der virtuellen Projektionsoberfläche generiert. Das berechnete Draufsichtsbild wird dann durch das Display8 angezeigt, das sich derart innerhalb des Fahrzeugs1 befindet, dass es für einen Fahrer des Fahrzeugs1 sichtbar ist. Das Fahrzeug1 kann beispielsweise ein Omnibus sein. Die auf dem Display8 angezeigte Draufsicht kann dem Fahrer helfen zu prüfen, ob alle wartenden Passagiere bereits eingestiegen sind oder ob er vor dem Öffnen der Türen warten sollte, um zu verhindern, dass aussteigende Passagiere durch ein Kraftfahrzeug gefährdet werden, das am Fahrzeug1 auf einer seiner Seiten vorbeifährt. -
3 veranschaulicht die wannenförmige virtuelle Projektionsoberfläche, die durch die Auswertungseinheit7 zum Generieren der Draufsicht der Umgebung des Fahrzeugs1 verwendet wird. Die virtuelle Projektionsoberfläche besteht aus einem flachen Bodenteil4 und einem ansteigenden Teil, der den Bodenteil4 umgibt. Der ansteigende Teil besteht aus mehreren benachbarten, flachen abgeschrägten und zunehmend steileren Segmenten5 von länglicher rechteckiger Gestalt entlang zwei langen Seiten des rechteckigen Bodenteils4 und vertikalen oder fast vertikalen Wänden6 auf beiden kurzen Seiten des Bodenteils4 . Die Segmente5 sind parallel zu einer Längsachse des Fahrzeugs1 orientiert. - Die virtuelle Projektionsoberfläche ist derart ausgelegt, dass sich eine Position
3 des Fahrzeugs1 in der Mitte des flachen Bodenteils4 befindet und dass sich die flachen abgeschrägten Segmente5 über mehr als die Länge des Fahrzeugs1 erstrecken. Beispielsweise können sich die ungekrümmten Segmente5 entlang der Längsrichtung des Fahrzeugs1 über mehrere Meter über das Vorder- oder Rückende des Fahrzeugs1 hinaus erstrecken. - Die Auswertungseinheit
7 berechnet die Draufsicht der Projektion auf der virtuellen Projektionsoberfläche als eine Ansicht eines virtuellen Beobachters, der sich über der Projektionsoberfläche befindet, so dass die Draufsicht einem Bild14 entspricht, das von einer virtuellen Kamera13 aufgenommen wird, die von oben auf die virtuelle Projektionsoberfläche blickt, siehe4 . - Falls die virtuelle Projektionsoberfläche keine vertikalen Teile besitzt, falls beispielsweise die Wände
6 nur fast vertikal sind oder durch unterschiedlich geformte Teile ersetzt worden sind, kann die Auswertungseinheit7 die Draufsicht generieren durch Projizieren der Projektion der durch die Kameras2 erfassten Bilder auf der virtuellen Projektionsoberfläche auf eine virtuelle Ebene, die parallel zum flachen Bodenteil4 verläuft und sich über der virtuellen Projektionsoberfläche befindet. - Auf diese Weise wird eine mehr oder weniger unverzerrte Vogelperspektive durch die Auswertungseinheit
7 berechnet. Da die virtuelle Projektionsoberfläche in3 entlang den Seiten sowie vor und hinter dem Fahrzeug1 ungekrümmt ist, erscheinen Kraftfahrzeuge, die sich parallel zu dem Fahrzeug1 auf einer beliebigen Seite des Fahrzeugs1 bewegen oder die sich unter einem rechten Winkel bezüglich der Längsachse des Fahrzeugs1 hinter oder vor dem Fahrzeug1 bewegen, sich entlang unverzerrten geraden Linien auf der Projektionsoberfläche zu bewegen. Dadurch kann das resultierende berechnete Draufsichtsbild, wie auf dem Display8 angezeigt, leicht korrekt durch den Fahrer des Fahrzeugs1 interpretiert werden. Dies ist insbesondere deshalb wahr, da sich die meisten Straßen im rechten Winkel schneiden und sich die meisten Kraftfahrzeuge, Fußgänger oder andere Objekte deshalb entweder parallel zur Straße oder unter einem rechten Winkel zur Straße, auf der das kameraausgestattete Fahrzeug1 positioniert ist, bewegen. - Zudem können die Projektion gemäß der Projektionsoberfläche von
3 und somit die Draufsicht aufgrund des ungekrümmten Designs der verschiedenen Teile der virtuellen Projektionsoberfläche mit geringen Rechenkosten berechnet werden. -
4 zeigt eine schematische Ansicht des Rundumsichtsystems, wobei eine der Kameras2 gezeigt ist, während sie ein erhöhtes Objekt9 , in diesem Fall eine Person, erfasst, was zu einem Kamerabild10 führt. Da ein Weitwinkelobjektiv wie etwa ein Fischaugenobjektiv zum Erfassen des Bilds verwendet wird, kann das von der Kamera erfasste Bild10 geringfügig verzerrt erscheinen, wie durch unterschiedliche Projektionsstrahlen11 angezeigt. - Dieses Bild
10 wird dann auf einen Teil12 der ansteigenden Segmente5 der virtuellen Projektionsoberfläche projiziert. Die Projektion auf der virtuellen Projektionsoberfläche wird durch die virtuelle Kamera13 von oben betrachtet, um ein berechnetes Draufsichtsbild14 zu generieren, wie durch Draufsichtsstrahlen15 angezeigt. - Falls mehrere Kameras
2 verwendet werden, die beispielsweise auf verschiedenen Seiten des Fahrzeugs positioniert sind, wie in1 gezeigt, werden mehrere Kamerabilder10 zur gleichen Zeit aufgezeichnet, was zu mehreren berechneten Bildern14 gemäß dem durch die virtuelle Kamera13 dargestellten virtuellen Beobachter führt. Deshalb ist die Auswertungseinheit7 weiterhin konfiguriert zum Zusammensetzen der mehreren berechneten Bilder14 zu einem einzelnen, flüssig zusammengesetzten Draufsichtsbild, das dann auf dem Display8 angezeigt wird. - Alternativ ist es möglich, dass die Auswertungseinheit
7 konfiguriert ist zum Zusammensetzen der durch die mehreren Kameras2 erfassten mehreren Bilder10 zu einem einzelnen zusammengesetzten Bild und dann Berechnen der Projektion auf die virtuelle Projektionsoberfläche und der Draufsicht auf der Basis des einzelnen zusammengesetzten Bilds. - Eine weitere Alternative ist, dass die Auswertungseinheit
7 konfiguriert ist zum Zusammensetzen der mehreren Projektionsbilder auf der virtuellen Projektionsoberfläche, die aus den durch die mehreren Kameras2 erfassten Bildern resultieren, zu einem einzelnen Projektionsbild und dann Berechnen der Draufsicht auf der Basis dieses einzelnen Projektionsbilds. - Gemäß einem weiteren Ausführungsbeispiel kann die virtuelle Projektionsoberfläche auch eine von der in
3 gezeigten Gestalt unterschiedliche Gestalt aufweisen. Beispielsweise können die vertikalen Wände6 vor und/oder hinter der Position3 des Fahrzeugs1 entfernt werden, um einen Bodenteil4 auszubilden, der sich vor und/oder hinter dem Fahrzeug1 bis zur Unendlichkeit zieht. Dies bewirkt, dass die Projektionsoberfläche im Wesentlichen nutenförmig ist, so dass sich der ungekrümmte ansteigende Teil der virtuellen Projektionsoberfläche links und rechts vom Fahrzeug1 ebenfalls bis zur Unendlichkeit zieht. - Zum Ausgleichen der Ecken der in
3 dargestellten virtuellen Projektionsoberfläche ist es alternativ möglich, die vertikalen Wände6 der Projektionsoberfläche vor und/oder hinter dem Fahrzeug1 durch mehrere benachbarte abgeschrägte Segmente zu ersetzen, ähnlich den flachen abgeschrägten und zunehmend steileren Segmenten5 entlang der Länge des Fahrzeugs in3 , was zu einer gitterartigen virtuellen Projektionsoberfläche führt. -
5 zeigt die rechte vordere Ecke eines Ausführungsbeispiels eines virtuellen Projektionsoberflächengitters18 dieser Art. Zusätzlich zu der Verwendung eines ansteigenden Teils, der aus mehreren flachen und abgeschrägten benachbarten Segmenten16 und17 beide entlang den Seiten des Fahrzeugs1 sowohl hinter als auch vor dem Fahrzeug1 zusammengesetzt ist, verbinden Eckstücke des Gitters18 die Segmente17 vor dem Fahrzeug1 und die Segmente17 hinter oder vor dem Fahrzeug1 . Diese Eckstücke sind so abgewinkelt, um die Projektionsoberfläche in der Ecke auszugleichen. Auf diese Weise erscheint ein Kraftfahrzeug19 , das sich parallel zum Fahrzeug1 bewegt, sich immer noch entlang einer geraden Linie zu bewegen, bis sich das Kraftfahrzeug19 weit vor dem Fahrzeug1 befindet, wobei Verzerrungen oder Diskontinuitäten in der Ecke auf ein Minimum reduziert sind. - Bei einer weiteren Ausführungsform kann die virtuelle Projektionsoberfläche, wie in
3 dargestellt, durch eine regelmäßige virtuelle Projektionsoberfläche ersetzt werden, die eine virtuelle Projektionsoberfläche ist, die an einem beliebigen gegebenen Punkt differenziert werden kann. Ein vertikaler Querschnitt20 einer derartigen Projektionsoberfläche ist in6 gezeigt. Der Querschnitt20 bildet eine flüssige Linie, und die Position3 des kameraausgestatteten Fahrzeugs1 befindet sich in einer Mitte des flachen Bodenabschnitts4 der virtuellen Projektionsoberfläche. - Einen horizontalen Querschnitt der gleichen virtuellen Projektionsoberfläche zu nehmen, führt zu Umrissen
21 ,22 , wobei der kleinere Umriss22 von einem horizontalen Querschnitt nahe dem Bodenteil4 der virtuellen Projektionsoberfläche resultiert, während der größere Umriss21 von einem horizontalen Querschnitt nahe der Oberseite der virtuellen Projektionsoberfläche resultiert. - Während die virtuelle Projektionsoberfläche, wie in
6 und7 gezeigt, regelmäßig ist, bleibt der ansteigende Teil entlang der Länge des Fahrzeugs1 in Längsrichtung des Fahrzeugs wie in den anderen Ausführungsformen ungekrümmt, und der ansteigende Teil entlang der Breite des Fahrzeugs bleibt in der seitlichen Richtung des Fahrzeugs1 ungekrümmt. Diese regelmäßige virtuelle Projektionsoberfläche führt zu einem besonders glatten Projektionsbild und somit zu einem besonders realistischen Draufsichtsbild.
Claims (11)
- Rundumsichtsystem für ein Fahrzeug (
1 ), das Folgendes umfasst: – mindestens eine Kamera (2 ), die in oder an dem Fahrzeug (1 ) positioniert werden soll, um mindestens einen Teil der Umgebung des Fahrzeugs (1 ) zu erfassen, – eine Auswertungseinheit (7 ) zum Verarbeiten von durch die mindestens eine Kamera (2 ) erfassten Bildern, – mindestens ein Display (8 ) zum Anzeigen eines durch die Auswertungseinheit (7 ) generierten Draufsichtsbilds, wobei die Auswertungseinheit (7 ) konfiguriert ist zum Erhalten des Draufsichtsbilds durch Berechnen einer Projektion der erfassten Bilder auf eine virtuelle Projektionsoberfläche und durch Berechnen einer Draufsicht der Projektion auf der virtuellen Projektionsoberfläche, wobei die virtuelle Projektionsoberfläche einen flachen Bodenteil (4 ) und einen ansteigenden Teil (5 ) bei dem flachen Bodenteil (4 ) umfasst, wobei in einem Bereich, der den ansteigenden Teil mindestens auf einer Seite des Fahrzeugs (1 ) mindestens über eine Länge des Fahrzeugs (1 ) umfasst, eine Krümmung der virtuellen Projektionsoberfläche in einer Längsrichtung des Fahrzeugs (1 ) null beträgt, dadurch gekennzeichnet, dass der ansteigende Teil der Projektionsoberfläche mindestens auf einer Seite und/oder am Ende des Fahrzeugs (1 ) flach und abgeschrägt ist und sich bei dem Bodenteil befindet oder aus mehreren benachbarten, flachen, abgeschrägten und zunehmend steileren Abschnitten (5 ) zusammengesetzt ist, wobei eine Linie, wo sich zwei benachbarte abgeschrägte Abschnitte treffen, gerade und parallel zur Längs- oder seitlichen Richtung des Fahrzeugs (1 ) verläuft. - Rundumsichtsystem nach Anspruch 1, wobei der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in der Längsrichtung des Fahrzeugs (
1 ) null beträgt, den ansteigenden Teil der Projektionsoberfläche auf beiden Seiten des Fahrzeugs (1 ) mindestens über die Länge des Fahrzeugs (1 ) umfasst. - Rundumsichtsystem nach einem der Ansprüche 1 oder 2, wobei in einem Bereich, der den ansteigenden Teil (
6 ) vor und/oder hinter dem Fahrzeug (1 ) mindestens über eine Breite des Fahrzeugs (1 ) umfasst, die Krümmung der virtuellen Projektionsoberfläche in einer seitlichen Richtung des Fahrzeugs (1 ) null beträgt. - Rundumsichtsystem nach einem der Ansprüche 1 bis 3, wobei der ansteigende Teil der Projektionsoberfläche an mindestens einem Ende des Fahrzeugs (
1 ) offen ist, wobei sich der Bodenteil (4 ) und der ansteigende Teil vor und/oder hinter dem Fahrzeug (1 ) bis zur Unendlichkeit ziehen, wobei der Bereich, wo die Krümmung der virtuellen Projektionsoberfläche in der Längsrichtung des Fahrzeugs (1 ) null beträgt, den ganzen ansteigenden Teil vor und/oder hinter dem Fahrzeug (1 ) umfasst, so dass die Projektionsoberfläche eine Nutengestalt besitzt. - Rundumsichtsystem nach einem der Ansprüche 1 bis 3, wobei der ansteigende Teil der Projektionsoberfläche den Bodenteil der Projektionsoberfläche umgibt, um eine im Wesentlichen wannenförmige Projektionsoberfläche auszubilden.
- Rundumsichtsystem nach einem der Ansprüche 1 bis 5, wobei der ansteigende Teil der Projektionsoberfläche eine regelmäßige Oberfläche bildet.
- Rundumsichtsystem nach einem der Ansprüche 1 bis 6, wobei die Auswertungseinheit (
7 ) konfiguriert ist zum Berechnen der Draufsicht der Projektion auf der virtuellen Projektionsoberfläche durch Projizieren der Projektion auf der virtuellen Projektionsoberfläche auf eine Ebene parallel zum Bodenteil der virtuellen Projektionsoberfläche. - Rundumsichtsystem nach einem der Ansprüche 1 bis 6, wobei die Auswertungseinheit (
7 ) konfiguriert ist zum Berechnen der Draufsicht der Projektion auf der virtuellen Projektionsoberfläche gemäß einer Ansicht eines über der Projektionsoberfläche befindlichen virtuellen Beobachters. - Rundumsichtsystem nach einem der vorhergehenden Ansprüche, wobei mindestens eine der Kameras (
2 ) auf jeder Seite des Fahrzeugs (1 ) positioniert werden soll. - Rundumsichtsystem nach einem der vorhergehenden Ansprüche, wobei die Auswertungseinheit (
7 ) weiterhin konfiguriert ist zum Generieren des Draufsichtsbilds als eine zusammengesetzte Draufsicht durch eines von (a) Zusammensetzen der durch die Kameras (2 ) erfassten Bilder zum Ausbilden eines zusammengesetzten Bilds, Projizieren des zusammengesetzten Bilds auf die virtuelle Projektionsoberfläche und Generieren der Draufsicht der Projektion des zusammengesetzten Bilds auf der Projektionsoberfläche; (b) Zusammensetzen von Projektionen der durch die verschiedenen Kameras (2 ) erfassten Bilder zum Ausbilden der Projektion der erfassten Bilder auf der virtuellen Projektionsoberfläche als ein zusammengesetztes Projektionsbild und durch Berechnen der Draufsicht des zusammengesetzten Projektionsbilds; oder (c) Zusammensetzen von Draufsichten der Projektionen der durch die verschiedenen Kameras (2 ) erfassten Bilder auf der virtuellen Projektionsoberfläche. - Fahrzeug (
1 ), umfassend ein Rundumsichtsystem nach einem der vorhergehenden Ansprüche, wobei sich das Display (8 ) innerhalb eines Innenraums des Fahrzeugs (1 ) an einer Position befindet, die für einen Fahrer des Fahrzeugs (1 ) sichtbar ist.
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015205507.8A DE102015205507B3 (de) | 2015-03-26 | 2015-03-26 | Rundsichtsystem für ein Fahrzeug |
EP16711280.4A EP3274958B1 (de) | 2015-03-26 | 2016-03-22 | Rundumsichtsystem für ein fahrzeug |
PCT/EP2016/056229 WO2016150944A1 (en) | 2015-03-26 | 2016-03-22 | Surround view system for a vehicle |
US15/081,832 US10965911B2 (en) | 2015-03-26 | 2016-03-25 | Surround view system for a vehicle |
KR1020160036620A KR101885743B1 (ko) | 2015-03-26 | 2016-03-28 | 차량의 서라운드 뷰 시스템 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015205507.8A DE102015205507B3 (de) | 2015-03-26 | 2015-03-26 | Rundsichtsystem für ein Fahrzeug |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102015205507B3 true DE102015205507B3 (de) | 2016-09-29 |
Family
ID=55588288
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102015205507.8A Expired - Fee Related DE102015205507B3 (de) | 2015-03-26 | 2015-03-26 | Rundsichtsystem für ein Fahrzeug |
Country Status (5)
Country | Link |
---|---|
US (1) | US10965911B2 (de) |
EP (1) | EP3274958B1 (de) |
KR (1) | KR101885743B1 (de) |
DE (1) | DE102015205507B3 (de) |
WO (1) | WO2016150944A1 (de) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102018203405A1 (de) | 2018-03-07 | 2019-09-12 | Zf Friedrichshafen Ag | Visuelles Surround-View-System zur Überwachung des Fahrzeuginneren |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3392801A1 (de) * | 2017-04-21 | 2018-10-24 | Harman International Industries, Incorporated | Systeme und verfahren zur fahrerassistenz |
CN107696972A (zh) * | 2017-10-20 | 2018-02-16 | 上海豫兴电子科技有限公司 | 应用于乘用车盲区智能辅助车载系统 |
KR101982091B1 (ko) * | 2017-10-31 | 2019-05-24 | 주식회사 켐트로닉스 | 서라운드 뷰 모니터링 시스템 |
KR102051324B1 (ko) * | 2017-10-31 | 2019-12-03 | 주식회사 켐트로닉스 | 서라운드 뷰 모니터링 시스템 |
DE102018102047A1 (de) * | 2018-01-30 | 2019-08-01 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zum Darstellen eines Umgebungsbereichs eines Kraftfahrzeugs mit virtuellen, länglichen Abstandsmarkierungen in einem Bild, Computerprogrammprodukt, sowie Anzeigesystem |
WO2020068960A1 (en) * | 2018-09-26 | 2020-04-02 | Coherent Logix, Inc. | Any world view generation |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1115250B1 (de) * | 1998-07-31 | 2012-06-06 | Panasonic Corporation | Vorrichtung und verfahren zur bildanzeige |
DE102012018326A1 (de) * | 2012-09-15 | 2014-03-20 | DSP-Weuffen GmbH | Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem mit verdeckungsfreier Umsichtfunktion |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2437494B1 (de) * | 2009-05-25 | 2017-10-11 | Panasonic Intellectual Property Management Co., Ltd. | Vorrichtung zur überwachung der umgebung rund um ein fahrzeug |
EP2511137B1 (de) | 2011-04-14 | 2019-03-27 | Harman Becker Automotive Systems GmbH | Fahrzeug-Surround-Blicksystem |
JP5124672B2 (ja) * | 2011-06-07 | 2013-01-23 | 株式会社小松製作所 | 作業車両の周辺監視装置 |
JP5668857B2 (ja) | 2011-07-29 | 2015-02-12 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP5911775B2 (ja) * | 2012-08-21 | 2016-04-27 | 富士通テン株式会社 | 画像生成装置、画像表示システム及び画像生成方法 |
DE102012018325A1 (de) * | 2012-09-15 | 2014-03-20 | DSP-Weuffen GmbH | Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem mit adaptiver Umsichtdarstellung |
JP6202240B2 (ja) | 2013-02-05 | 2017-09-27 | スズキ株式会社 | 俯瞰画像提示装置 |
US10093247B2 (en) * | 2013-05-23 | 2018-10-09 | GM Global Technology Operations LLC | Enhanced front curb viewing system |
-
2015
- 2015-03-26 DE DE102015205507.8A patent/DE102015205507B3/de not_active Expired - Fee Related
-
2016
- 2016-03-22 EP EP16711280.4A patent/EP3274958B1/de active Active
- 2016-03-22 WO PCT/EP2016/056229 patent/WO2016150944A1/en active Application Filing
- 2016-03-25 US US15/081,832 patent/US10965911B2/en active Active
- 2016-03-28 KR KR1020160036620A patent/KR101885743B1/ko active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1115250B1 (de) * | 1998-07-31 | 2012-06-06 | Panasonic Corporation | Vorrichtung und verfahren zur bildanzeige |
DE102012018326A1 (de) * | 2012-09-15 | 2014-03-20 | DSP-Weuffen GmbH | Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem mit verdeckungsfreier Umsichtfunktion |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102018203405A1 (de) | 2018-03-07 | 2019-09-12 | Zf Friedrichshafen Ag | Visuelles Surround-View-System zur Überwachung des Fahrzeuginneren |
US11210538B2 (en) | 2018-03-07 | 2021-12-28 | Zf Friedrichshafen Ag | Visual surround view system for monitoring vehicle interiors |
Also Published As
Publication number | Publication date |
---|---|
US20160286170A1 (en) | 2016-09-29 |
KR101885743B1 (ko) | 2018-09-11 |
US10965911B2 (en) | 2021-03-30 |
EP3274958B1 (de) | 2019-12-18 |
EP3274958A1 (de) | 2018-01-31 |
KR20160115852A (ko) | 2016-10-06 |
WO2016150944A1 (en) | 2016-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102015205507B3 (de) | Rundsichtsystem für ein Fahrzeug | |
EP1875442B1 (de) | Verfahren zur grafischen darstellung der umgebung eines kraftfahrzeugs | |
EP2805183B1 (de) | Verfahren und vorrichtung zum visualisieren der umgebung eines fahrzeugs | |
DE102009005505B4 (de) | Verfahren und Vorrichtung zur Erzeugung eines Abbildes der Umgebung eines Kraftfahrzeugs | |
DE102016220075A1 (de) | Kraftfahrzeug und Verfahren zur 360°-Umfelderfassung | |
DE102016212405A1 (de) | Fahrzeugbildverarbeitungsvorrichtung und Fahrzeugbildverarbeitungssystem | |
DE102011080702B3 (de) | Objekterfassungsvorrichtung für ein Fahrzeug, Fahrzeug mit einer derartigen Objekterfassungsvorrichtung | |
DE102016206493A1 (de) | Verfahren und Kamerasystem zur Entfernungsbestimmung von Objekten zu einem Fahrzeug | |
DE112018000107T5 (de) | Fahrzeugkamerakalibrierungsvorrichtung und -Verfahren | |
EP2888715B1 (de) | Verfahren und vorrichtung zum betreiben eines fahrzeugs | |
DE112017001545T5 (de) | Virtuelles überlagerungssystem und verfahren für verdeckte objekte | |
EP3281178A1 (de) | Verfahren zur darstellung einer fahrzeugumgebung eines fahrzeuges | |
DE102013012930A1 (de) | Verfahren zum Bestimmen eines aktuellen Abstands und/oder einer aktuellen Geschwindigkeit eines Zielobjekts anhand eines Referenzpunkts in einem Kamerabild, Kamerasystem und Kraftfahrzeug | |
WO2018072793A1 (de) | Verfahren und vorrichtung zur erzeugung einer fahrzeugumgebungsansicht bei einem fahrzeug | |
DE102018108751A1 (de) | Method, system and device of obtaining 3D-information of objects | |
WO2016177508A1 (de) | Verfahren zur darstellung einer fahrzeugumgebung eines fahrzeuges | |
DE102013012778A1 (de) | Verfahren zum Detektieren eines sich bewegenden Fußgängers anhand von charakteristischen Merkmalen und optischen Flussvektoren eines Bilds, Kamerasystem und Kraftfahrzeug | |
EP3409541A1 (de) | Vorrichtung zur fahrschlauchabsicherung | |
DE102014226448B4 (de) | Fahrzeug zum Errechnen einer Sicht einer Fahrzeugumgebung | |
EP3973511A1 (de) | Verfahren zur erzeugung eines bildes einer fahrzeugumgebung und vorrichtung zur erzeugung eines bildes einer fahrzeugumgebung | |
DE102017104957A1 (de) | Verfahren zum Bestimmen einer Bewegung von zueinander korrespondierenden Bildpunkten in einer Bildsequenz aus einem Umgebungsbereich eines Kraftfahrzeugs, Auswerteeinrichtung, Fahrerassistenzsystem sowie Kraftfahrzeug | |
DE102011005368A1 (de) | Fahrerassistenzsystem für ein Fahrzeug mit einem angereicherten Videobild in einem Anzeigemittel | |
DE102020107949A1 (de) | Sichtfeldunterstützungsbild-Erzeugungsvorrichtung und Bildumwandlungsverfahren | |
DE112016001238B4 (de) | Fahrzeugumgebungsbildanzeigesteuerungsvorrichtung und fahrzeugumgebungsbildanzeigesteuerungsprogramm | |
DE102014017904A1 (de) | Verfahren und Vorrichtung zur Detektion erhabener Objekte und Verfahren zur Unterstützung eines Fahrers beim Führen eines Fahrzeugs |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R082 | Change of representative | ||
R016 | Response to examination communication | ||
R018 | Grant decision by examination section/examining division | ||
R020 | Patent grant now final | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |