DE102019213607A1 - 3D display in digital vehicle rearview mirror - Google Patents

3D display in digital vehicle rearview mirror Download PDF

Info

Publication number
DE102019213607A1
DE102019213607A1 DE102019213607.9A DE102019213607A DE102019213607A1 DE 102019213607 A1 DE102019213607 A1 DE 102019213607A1 DE 102019213607 A DE102019213607 A DE 102019213607A DE 102019213607 A1 DE102019213607 A1 DE 102019213607A1
Authority
DE
Germany
Prior art keywords
rearview mirror
display
person
replacement system
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102019213607.9A
Other languages
German (de)
Inventor
Jochen Breilmann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Continental Automotive GmbH
Original Assignee
Continental Automotive GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive GmbH filed Critical Continental Automotive GmbH
Priority to DE102019213607.9A priority Critical patent/DE102019213607A1/en
Publication of DE102019213607A1 publication Critical patent/DE102019213607A1/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/107—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using stereoscopic cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Außenrückspiegelersatzsystem für ein Fahrzeug (1), dadurch gekennzeichnet, dass das Außenrückspiegelersatzsystem zwei, an den Seiten angeordnete 3D-Kamerasysteme (3, 5) und zwei im Fahrzeuginnenraum angeordnete 3D-Displays (4, 6) umfasst.The invention relates to an exterior rearview mirror replacement system for a vehicle (1), characterized in that the exterior rearview mirror replacement system comprises two 3D camera systems (3, 5) arranged on the sides and two 3D displays (4, 6) arranged in the vehicle interior.

Description

Die Erfindung betrifft ein Außenrückspiegelersatzsystem für ein Fahrzeug und ein Fahrzeug mit einem solchen Außenrückspiegelersatzsystem.The invention relates to an exterior rearview mirror replacement system for a vehicle and a vehicle with such an exterior rearview mirror replacement system.

Im Stand der Technik sind spiegelbasierende und digitale Fahrzeugrückspiegel bekannt. Nachteilig an spiegelbasierenden Außenspiegeln ist der Windwiderstand, der zu einem erhöhten Verbrauch und zum anderen die Vergrößerung der Fahrzeugbreite, die zu einem höheren Kollisionsrisiko und zu eingeschränkter Fahrbahnbenutzung führen kann. Bei digitalen Rückspiegeln fehlt jedoch die (3D-)Tiefeninformation eines rein optischen Rückspiegels. Dadurch können Entfernungen schlechter abgeschätzt werden.Mirror-based and digital vehicle rearview mirrors are known in the prior art. The disadvantage of mirror-based exterior mirrors is the wind resistance, which leads to increased consumption and, on the other hand, the enlargement of the vehicle width, which can lead to a higher risk of collision and restricted use of the road. With digital rear-view mirrors, however, the (3D) depth information of a purely optical rear-view mirror is missing. This makes it harder to estimate distances.

Ein erfindungsgemäßes Außenrückspiegelersatzsystem für ein Fahrzeug ist dadurch gekennzeichnet, dass das Außenrückspiegelersatzsystem zwei, an den Seiten angeordnete 3D-Kamerasysteme und zwei im Fahrzeuginnenraum angeordnete 3D-Displays umfasst. Dadurch ist das Erfassen von Tiefeninformation im Umfeld des Fahrzeugs und das Bereitstellen dieser Tiefeninformation an Personen innerhalb des Fahrzeugs möglich.An exterior rearview mirror replacement system according to the invention for a vehicle is characterized in that the exterior rearview mirror replacement system comprises two 3D camera systems arranged on the sides and two 3D displays arranged in the vehicle interior. This makes it possible to acquire depth information in the vicinity of the vehicle and to provide this depth information to people inside the vehicle.

Alternativ oder zusätzlich kann das Außenrückspiegelersatzsystem auch dadurch gekennzeichnet, dass die zwei im Fahrzeuginnenraum angeordneten 3D-Dsiplays als Teil eines sich im Wesentlichen über die gesamte Fahrzeugbreite erstreckendes 3D-Displays ausgebildet sind. Dies hat den Vorteil, dass sich die Position der Ausgabe flexibel, insbesondere flexibel in Bezug auf die Position einer Person und/oder eines Kopfes einer Person, einstellen lässt.Alternatively or additionally, the exterior rearview mirror replacement system can also be characterized in that the two 3D displays arranged in the vehicle interior are designed as part of a 3D display that extends essentially over the entire width of the vehicle. This has the advantage that the position of the output can be adjusted flexibly, in particular flexibly in relation to the position of a person and / or a person's head.

Alternativ oder zusätzlich kann das auch dadurch gekennzeichnet sein, dass das Außenspiegelersatzsystem dazu ausgebildet ist, die Position des Kopfes und/oder der Augen, insbesondere der Blickrichtung, einer Person zu erfassen, um dieser Person Tiefeninformation bereitzustellen. Dies hat den Vorteil, dass sich somit die Bereitstellung der Tiefeninformation flexibel auf die Person abstimmen lässt.Alternatively or additionally, this can also be characterized in that the exterior mirror replacement system is designed to detect the position of the head and / or the eyes, in particular the direction of gaze, of a person in order to provide depth information to this person. This has the advantage that the provision of the depth information can thus be flexibly adapted to the person.

Zusätzlich kann das Außenrückspiegelersatzsystem auch dadurch gekennzeichnet sein, dass das Außenrückspiegelersatzsystem dazu ausgebildet ist, zumindest eines der 3D-Displays von einem 3D Modus, bei dem der Person Tiefeninformation bereitgestellt wird, in einen 2D Modus, bei dem der Person keine Tiefeninformation bereitgestellt wird, umzuschalten, wenn durch die Erfassung der Position des Kopfes und/oder der Augen der Person festgestellt wird, dass die Person ihren Blick nicht auf das zumindest eine 3D-Display richtet oder mit ihrem Blick nicht in die Nähe des zumindest einen 3D-Display kommt, und das 3D Display von dem 2D Modus auf den 3D Modus umzuschalten, wenn durch die Erfassung der Position des Kopfes und/oder der Augen der Person festgestellt wird, dass die Person ihren Blick auf das zumindest eine 3D-Display richtet oder mit ihrem Blick in die Nähe des zumindest einen 3D-Display kommt. Dies hat den Vorteil, dass die Ausgabe flexibel an die Bedürfnisse der Person und anderen Personen im Fahrzeug angepasst werden kann, insbesondere, da bei Bereitstellung der Tiefeninformation für eine bestimmte Person die Anzeige von Informationen für andere Personen ungünstig dargestellt bzw. verfälscht werden kann.In addition, the exterior rearview mirror replacement system can also be characterized in that the exterior rearview mirror replacement system is designed to switch at least one of the 3D displays from a 3D mode, in which the person is provided with depth information, to a 2D mode, in which the person is not provided with any depth information when it is established by the detection of the position of the head and / or the eyes of the person that the person does not direct his or her gaze to the at least one 3D display or does not come near the at least one 3D display with his or her gaze, and to switch the 3D display from the 2D mode to the 3D mode if it is determined by the detection of the position of the head and / or the eyes of the person that the person directs their gaze to the at least one 3D display or with their gaze into the Comes close to at least one 3D display. This has the advantage that the output can be flexibly adapted to the needs of the person and other people in the vehicle, especially since when the depth information is provided for a specific person, the display of information for other people can be displayed or falsified in an unfavorable manner.

Alternativ oder zusätzlich kann das Außenrückspiegelersatzsystem auch dadurch gekennzeichnet sein, dass die Datenübertragung zumindest teilweise über Ethernet realisiert wird. Dadurch kann eine besonders vorteilhafte und schnelle Übertragung der Daten gewährleistet werden.As an alternative or in addition, the exterior rearview mirror replacement system can also be characterized in that the data transmission is at least partially implemented via Ethernet. A particularly advantageous and fast transmission of the data can thereby be guaranteed.

Alternativ oder zusätzlich kann das auch dadurch gekennzeichnet sein, dass die 3D-Kamerasysteme Stereokamerasysteme sind, die jeweils ein Kamerapaar umfassen. Diese Art der Erfassung von Tiefeninformationen ist besonders vorteilhaft, da die Erfassung der natürlichen menschlichen Sicht nachempfunden werden kann.Alternatively or additionally, this can also be characterized in that the 3D camera systems are stereo camera systems, each of which includes a pair of cameras. This type of acquisition of depth information is particularly advantageous since the acquisition of natural human vision can be modeled.

Weiterhin ist ein erfindungsgemäßes Fahrzeug vorgesehen, dass ein Außenrückspiegelersatzsystem mit einem oder mehreren der vorgenannten Merkmale, umfasst. So ein Fahrzeug hat den Vorteil, dass die Verkehrssicherheit und das Vertrauen der Personen im Fahrzeug erhöht wird. Weiterhin übertragen sich auch die Vorteile der einzelnen Merkmale auf das Fahrzeug.Furthermore, a vehicle according to the invention is provided that comprises an exterior rearview mirror replacement system with one or more of the aforementioned features. Such a vehicle has the advantage that it increases road safety and the confidence of the people in the vehicle. Furthermore, the advantages of the individual features are also transferred to the vehicle.

3D-Kamerasysteme sind Kamerasysteme, die die Erfassung von Tiefeninformationen eine Szenerie erlauben. Dadurch können absolute und relative Entfernungen von Objekten innerhalb der Szenerie bestimmt werden. Zusätzlich können diese Kamerasysteme auch dazu ausgebildet sein, Helligkeit, Graustufen, Farbwerte und/oder Oberflächentemperaturen zu erfassen. Verschiedene Systeme können eine 3D-Abbildung ihrer Umgebung erreichen.3D camera systems are camera systems that allow the acquisition of depth information in a scene. This allows absolute and relative distances to objects within the scenery to be determined. In addition, these camera systems can also be designed to detect brightness, gray levels, color values and / or surface temperatures. Different systems can achieve a 3D image of their environment.

So wird bei Stereokameras die Umgebung mit zwei Kameras gleichzeitig aufgenommen. Der Abstand der Kameraobjektive entspricht üblicherweise dem menschlichen Augenabstand. Wenn das resultierende Bildpaar den Augen des Betrachters getrennt vorgelegt wird, entsteht ein räumlicher Eindruck. Die Bilder können auch in einem Rechner verarbeitet werden und so die Distanz zu Objekten gemessen werden.With stereo cameras, the surroundings are recorded with two cameras at the same time. The distance between the camera lenses usually corresponds to the human eye distance. If the resulting pair of images is presented separately to the viewer's eyes, a spatial impression is created. The images can also be processed in a computer and the distance to objects can be measured.

Bei Triangulationssystemen bildet eine Lichtquelle ein definiertes Muster auf das Objekt oder die Szenerie ab. Eine Kamera nimmt dieses Muster aus einem anderen Blickwinkel auf und berechnet aus der Verzerrung die Distanz.In triangulation systems, a light source forms a defined pattern on the object or the From the scenery. A camera records this pattern from a different angle and calculates the distance from the distortion.

Bei TOF-Kameras (Time Of Flight - Flugzeit) wird über Laufzeitmessung ausgesendeten Lichtes auf die Distanz zurück geschlossen.With TOF cameras (Time Of Flight), the distance is deduced from the transit time measurement of the emitted light.

Bei Interferometrie-Systemen werden Interferenzen zwischen einem Mess- und Objektstrahl gemessen. Je kürzer die Wellenlängen, desto kleinere Distanzauflösungen sind erreichbar.In interferometry systems, interferences between a measuring beam and an object beam are measured. The shorter the wavelengths, the smaller the distance resolutions that can be achieved.

Bei Lichtfeldkameras werden mit Hilfe von Mikrolinsenarrays neben der Helligkeit eines Bildpunkts auch die Richtung der Lichtstrahlen, die zu einem Bildpunkt führen, erfasst. Üblicherweise ist dabei für jeden Bildpunkt eine Sensorfläche für jeweils eine der drei Grundfarben vorgesehen. Aus diesen Daten lässt sich dann eine Tiefenkarte berechnen, erlaubt aber auch nachträgliches Refokussieren des Szeneriebildes.In light field cameras, microlens arrays are used to record not only the brightness of an image point, but also the direction of the light rays that lead to an image point. Usually a sensor area for one of the three basic colors is provided for each pixel. A depth map can then be calculated from this data, but it also allows subsequent refocusing of the scene image.

Ein 3D-Display, auch Stereodisplay genannt, bezeichnet die Anzeige von stereoskopischen oder dreidimensionalen Bildern, um bei einem Betrachter einen Tiefeneindruck durch stereoskopisches Sehen mittels eines Bildschirmes oder durch eine Projektion hervorzurufen. Im Folgenden werden die Begriffe dreidimensional und stereoskopisch synonym verwendet und umfassen sowohl die Techniken der Autostereoskopie, Holografie und Volumendisplays, als auch die Technik der Stereoskopie, bei der zwei für das linke und rechte Auge leicht unterschiedliche zweidimensionale Bilder dargestellt werden und bei der die beiden Bilder dann erst im Gehirn für die Tiefenwahrnehmung kombiniert werden.A 3-D display, also known as a stereo display, denotes the display of stereoscopic or three-dimensional images in order to evoke an impression of depth in a viewer through stereoscopic vision using a screen or through a projection. In the following, the terms three-dimensional and stereoscopic are used synonymously and include both the techniques of autostereoscopy, holography and volume displays, as well as the technique of stereoscopy, in which two two-dimensional images are displayed slightly different for the left and right eye and in which the two images only then can be combined in the brain for depth perception.

Die 3D-Displays können dabei dazu ausgebildet sein, einer Person unterschiedliche optische Informationen für seine zwei Augen zur Verfügung zu stellen. Dies kann zum Beispiel mit einem Display umfassend Parallaxbarrieren geschehen. Die Parallaxbarrieren trennen dabei Pixelreihen, die Bilder für das eine Auge erzeugen, von Pixelreihen, die Bilder für das andere Auge erzeugen. Wenn sich das Display auf unterschiedliche und verändernde Blickwinke einstellen soll, muss das Display die Position der Person und deren Augen erfassen und die optische Information gezielt den einzelnen Augen zur Verfügung zu stellen. Die Erfassung der Person und/oder der Augen kann mithilfe von Wellen, insbesondere Schallwellen und/oder elektromagnetischen Wellen, besonders bevorzugt im optischen Bereich, erfolgen. Dazu kann das 3D Display eine Vorrichtung zum Aussenden von Wellen und/oder eine Vorrichtung zum Empfangen von Wellen aufweisen. Insbesondere ist dafür eine Kamera, besonders bevorzugt eine 3D Kamera wie ein TOF Kamerasystem oder ein Interferometriekamerasystem, geeignet.The 3D displays can be designed to provide a person with different optical information for his or her two eyes. This can be done, for example, with a display comprising parallax barriers. The parallax barriers separate rows of pixels that generate images for one eye from rows of pixels that generate images for the other eye. If the display is to adjust to different and changing viewing angles, the display must detect the position of the person and their eyes and make the optical information available to the individual eyes in a targeted manner. The person and / or the eyes can be detected with the aid of waves, in particular sound waves and / or electromagnetic waves, particularly preferably in the optical range. For this purpose, the 3D display can have a device for emitting waves and / or a device for receiving waves. In particular, a camera, particularly preferably a 3D camera such as a TOF camera system or an interferometric camera system, is suitable for this.

Weitere Merkmale, Eigenschaften und Vorteile der vorliegenden Erfindung ergeben sich aus der nachfolgenden Beschreibung unter Bezugnahme auf die beiliegenden Figuren. Darin zeigen schematisch:

  • 1 eine vereinfachte schematische Darstellung eines Fahrzeugs mit einem exemplarischen erfindungsgemäßen Außenrückspiegelersatzsystem, und
  • 2 eine weitere vereinfachte schematische Darstellung eines Fahrzeugs mit einem exemplarischen erfindungsgemäßen Außenrückspiegelersatzsystem.
Further features, properties and advantages of the present invention emerge from the following description with reference to the accompanying figures. They show schematically:
  • 1 a simplified schematic representation of a vehicle with an exemplary exterior rearview mirror replacement system according to the invention, and
  • 2 a further simplified schematic representation of a vehicle with an exemplary exterior rearview mirror replacement system according to the invention.

In 1 ist eine erfindungsgemäße Ausführungsform eines Außenrückspiegelersatzsystems dargestellt. Fahrzeug 1 umfasst dabei zwei, an den Seiten angeordnete 3D-Kamerasysteme 3, 5, die mit einem Steuergerät 2 verbunden sind. Das Steuergerät 2 leitet die von den 3D-Kamerasystemen 3, 5 aufgenommenen Daten an zwei, im Fahrzeuginnenraum angeordnete 3D-Displays 4, 6 weiter. Das Steuergerät kann auch dazu ausgebildet sein, die Daten vor der Weiterleitung zu verarbeiten. Die 3D-Displays 4, 6 geben die von den 3D-Kamerasystemen 3, 5 erfassten Daten an Personen im Fahrzeuginnenraum aus. Dabei ist die Ausgabe bevorzugt an die eine oder mehrere Personen gerichtet, die mit dem Führen des Fahrzeugs oder, insbesondere beim hochautomatisierten Fahren, mit der Aufsicht über das Fahrzeug betraut sind. Durch die Eigenschaften der 3D-Displays 4, 6 und die Eigenschaften der von den 3D-Kamerasystemen 3, 5 gelieferten Daten können die Personen mit einer Umfeldinformation, die eine Tiefeninformation umfasst, der Umgebung, insbesondere der Außenseiten, des Fahrzeugs versorgt werden.In 1 an embodiment of an exterior rearview mirror replacement system according to the invention is shown. vehicle 1 includes two 3D camera systems arranged on the sides 3 , 5 that with a control unit 2 are connected. The control unit 2 directs the from the 3D camera systems 3 , 5 recorded data on two 3D displays arranged in the vehicle interior 4th , 6th continue. The control device can also be designed to process the data before forwarding it. The 3D displays 4th , 6th give the from the 3D camera systems 3 , 5 recorded data to people in the vehicle interior. The output is preferably directed to the one or more persons who are entrusted with driving the vehicle or, in particular in the case of highly automated driving, with the supervision of the vehicle. Through the properties of the 3D displays 4th , 6th and the properties of the 3D camera systems 3 , 5 With the data supplied, the persons can be supplied with information on the surroundings, which includes depth information, of the surroundings, in particular the outside of the vehicle.

Kamera 12 kann eine Fahrzeuginnenraumkamera sein und auch dazu verwendet werden, die Position des Kopfes, der Augen und/oder der Blickrichtung einer Person im Fahrzeuginnenraum zu erfassen. Diese Daten können dann auch für das Außenrückspiegelersatzsystem verwendet werden.camera 12th can be a vehicle interior camera and can also be used to detect the position of the head, the eyes and / or the direction of gaze of a person in the vehicle interior. This data can then also be used for the exterior rearview mirror replacement system.

In 2 ist eine vereinfachte schematische Darstellung eines Fahrzeugs 1 mit einer weiteren erfindungsgemäßen Ausführungsform eines Außenrückspiegelersatzsystems, wobei die 3D-Kamerasysteme 3, 5 ein Stereokamerasystem, die jeweils ein Paar Kameras 8', 8", 9', 9" umfassen, die mit dem Steuergerät 2 verbunden sind, sind. Die Kameras 8', 8" und die Kameras 9', 9" können zum Beispiel jeweils nebeneinander in einem Abstand von ungefähr 10 cm angeordnet sein. Das Steuergerät 2 leitet die von den Kameras 8', 8", 9', 9" aufgenommenen Daten an zwei, im Fahrzeuginnenraum angeordnete 3D-Displays 4, 6 weiter. Die Daten der Kameras 8', 8" werden auf dem 3D-Display 4, die Daten der Kameras 9', 9" auf dem 3D-Display 6 ausgegeben. Die 3D-Displays können zum Beispiel vorne innen in den Türen oder vorne im oder am Armaturenbrett in der Nähe der A-Säule angeordnet sein. Das Steuergerät kann auch dazu ausgebildet sein, die Daten vor der Weiterleitung zu verarbeiten. Die 3D-Displays 4, 6 geben die von den Kameras 8', 8", 9', 9" erfassten Daten an Personen im Fahrzeuginnenraum aus. Dabei ist die Ausgabe bevorzugt an die eine oder mehrere Personen gerichtet, die mit dem Führen des Fahrzeugs oder, insbesondere beim hochautomatisierten Fahren, mit der Aufsicht über das Fahrzeug betraut sind. Durch die Eigenschaften der 3D-Displays 4, 6 und die Eigenschaften der von den Kameras 8', 8", 9', 9" gelieferten Daten können die Personen mit einer Umfeldinformation, die eine Tiefeninformation umfasst, der Umgebung, insbesondere der Außenseiten, des Fahrzeugs versorgt werden.In 2 Figure 3 is a simplified schematic representation of a vehicle 1 with a further embodiment according to the invention of an exterior rearview mirror replacement system, the 3D camera systems 3 , 5 a stereo camera system, each with a pair of cameras 8th' , 8th" , 9 ' , 9 " include that with the control unit 2 are connected. The cameras 8th' , 8th" and the cameras 9 ' , 9 " can for example be arranged side by side at a distance of approximately 10 cm. The control unit 2 directs those from the cameras 8th' , 8th" , 9 ' , 9 " recorded data on two 3D displays arranged in the vehicle interior 4th , 6th continue. The data from the cameras 8th' , 8th" are on the 3D display 4th , the data of the cameras 9 ' , 9 " on the 3D display 6th issued. The 3D displays can be arranged, for example, in the front inside the doors or in the front in or on the dashboard near the A-pillar. The control device can also be designed to process the data before forwarding it. The 3D displays 4th , 6th give the from the cameras 8th' , 8th" , 9 ' , 9 " recorded data to people in the vehicle interior. The output is preferably directed to the one or more persons who are entrusted with driving the vehicle or, particularly in the case of highly automated driving, with the supervision of the vehicle. Through the properties of the 3D displays 4th , 6th and the characteristics of the cameras 8th' , 8th" , 9 ' , 9 " With the data supplied, the persons can be supplied with information on the surroundings, which includes depth information, of the surroundings, in particular of the outside of the vehicle.

Die Verarbeitung der erfassten Bildinformationen und/oder das Zusammensetzen zu einem Bild mit Tiefeninformation kann in allen Ausführungsformen vorteilhafterweise auch bereits im jeweiligen Kamerasystem stattfinden. Dies erlaubt eine besonders vorteilhafte Verarbeitung, da die Latenzzeiten der unterschiedlichen Kameras 8', 8", 9', 9" durch die zeitlich frühere Verarbeitung besser ausgeglichen werden können.The processing of the captured image information and / or the combination to form an image with depth information can advantageously also take place in the respective camera system in all embodiments. This allows a particularly advantageous processing, since the latency times of the different cameras 8th' , 8th" , 9 ' , 9 " can be better balanced by the earlier processing.

Die Synchronität der Daten, insbesondere von den 3D-Kamerasystemem 3, 5, besonders auch die Videosignalübertragung und insbesondere die Synchronität zwischen der Videosignalübertragung der Kameras 8', 8" und 9', 9", und eine geringe Latenzzeit können z.B. auch per AVB (Audio/Video Bridging) über Ethernet realisiert werden.The synchronicity of the data, especially from the 3D camera systems 3 , 5 , especially the video signal transmission and especially the synchronicity between the video signal transmission of the cameras 8th' , 8th" and 9 ' , 9 " , and a low latency time can also be implemented using AVB (audio / video bridging) over Ethernet, for example.

3D-Kamerasysteme, die nicht auf den Einsatz von Stereokameras, bei der die Umgebung mit zwei Kameras gleichzeitig aufgenommen werden, basieren, haben den Vorteil, dass der Abstand der Kameraobjektive nicht dem menschlichen Augenabstand entsprechen muss und daher kompakter gebaut werden können.3D camera systems that are not based on the use of stereo cameras, in which the surroundings are recorded with two cameras at the same time, have the advantage that the distance between the camera lenses does not have to correspond to the human eye relief and can therefore be made more compact.

Weiterhin können die 3D-Kamerasysteme in allen Ausführungsformen auch direkt mit den jeweiligen 3D-Displays verbunden sein.Furthermore, the 3D camera systems in all embodiments can also be connected directly to the respective 3D displays.

Alternativ oder zusätzlich kann auch eine oder mehrere der fahrzeugseitig vorhandenen Komponenten, zum Beispiel eine Fahrzeuginnenraumkamera oder ein System zur Gestenerfassung, dazu verwendet werden, die Position der Person und/oder der Augen zu erfassen und die Ausgabe des 3D Displays entsprechend zu steuern.Alternatively or additionally, one or more of the components present on the vehicle, for example a vehicle interior camera or a system for gesture detection, can also be used to detect the position of the person and / or the eyes and to control the output of the 3D display accordingly.

In einer (nicht gezeigten) Ausführungsform erstreckt sich ein 3D-Display im Wesentlichen über die gesamte Fahrzeugbreite, im oder am Armaturenbrett also im Wesentlichen im Bereich zwischen den A-Säulen. Die beiden 3D-Displays 4, 6 zum Anzeigen der Daten von den 3D-Kamerasystemen 3, 5 können auch als Teil dieses sich im Wesentlichen über die gesamte Fahrzeugbreite erstreckendes 3D-Display ausgebildet sein. Dadurch ist auch eine flexible Veränderung der Anzeigeposition der Daten von den 3D-Kamasystemen 3, 5 möglich.In one embodiment (not shown), a 3D display extends essentially over the entire width of the vehicle, in or on the dashboard that is essentially in the area between the A-pillars. The two 3D displays 4th , 6th to display the data from the 3D camera systems 3 , 5 can also be designed as part of this 3D display which extends essentially over the entire width of the vehicle. This also allows the display position of the data from the 3D camera systems to be changed flexibly 3 , 5 possible.

Normalerweise gibt es im Fahrzeug eine primäre Person, die mit dem Führen des Fahrzeugs oder, insbesondere beim hochautomatisierten Fahren, mit der Aufsicht über das Fahrzeug betraut ist. Wenn diese primäre Person nicht auf das Display schaut, kann die Steuerung des 3D Displays bzw. das 3D Display dazu ausgebildet sein, das 3D Display von einem 3D Modus, bei dem der primären Person die Tiefeninformation angezeigt wird, in einen 2D Modus umzuschalten, in dem keine Tiefeninformation angezeigt wird. Dadurch können andere Personen die Informationen auf dem Display besser erkennen und die aufwändige Berechnung und Steuerung des 3D Modus entfällt. Wenn die primäre Person ihren Blick wieder auf das 3D Display richtet oder in dessen Nähe kommt, kann der 3D Modus wieder aktiviert werden.Usually there is one primary person in the vehicle who is entrusted with driving the vehicle or, especially in the case of highly automated driving, with the supervision of the vehicle. If this primary person is not looking at the display, the control of the 3D display or the 3D display can be designed to switch the 3D display from a 3D mode, in which the depth information is displayed to the primary person, into a 2D mode, in which no depth information is displayed. This enables other people to see the information on the display better and the time-consuming calculation and control of the 3D mode is no longer necessary. When the primary person directs their gaze back to the 3D display or comes close to it, the 3D mode can be reactivated.

Obwohl die Erfindung im Detail durch die bevorzugten Ausführungsbeispiele näher illustriert und beschrieben wurde, ist die Erfindung nicht durch die offenbarten Beispiele eingeschränkt. Variationen hiervon können vom Fachmann abgeleitet werden, ohne den Schutzumfang der Erfindung, wie er durch die nachfolgenden Patentansprüche definiert wird, zu verlassen.Although the invention has been illustrated and described in more detail by the preferred exemplary embodiments, the invention is not restricted by the examples disclosed. Variations therefrom can be derived by the person skilled in the art without departing from the scope of protection of the invention as defined by the following patent claims.

Claims (7)

Außenrückspiegelersatzsystem für ein Fahrzeug (1), dadurch gekennzeichnet, dass das Außenrückspiegelersatzsystem zwei, an den Seiten angeordnete 3D-Kamerasysteme (3, 5) und zwei im Fahrzeuginnenraum angeordnete 3D-Displays (4, 6) umfasst.Exterior rearview mirror replacement system for a vehicle (1), characterized in that the exterior rearview mirror replacement system comprises two 3D camera systems (3, 5) arranged on the sides and two 3D displays (4, 6) arranged in the vehicle interior. Außenrückspiegelersatzsystem nach Anspruch 1, dadurch gekennzeichnet, dass die zwei im Fahrzeuginnenraum angeordneten 3D-Dsiplays (4,6) als Teil eines sich im Wesentlichen über die gesamte Fahrzeugbreite erstreckenden 3D-Displays ausgebildet sind.Exterior rearview mirror replacement system according to Claim 1 , characterized in that the two 3D displays (4, 6) arranged in the vehicle interior are designed as part of a 3D display extending essentially over the entire width of the vehicle. Außenrückspiegelersatzsystem nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass das Außenspiegelersatzsystem dazu ausgebildet ist, die Position des Kopfes und/oder der Augen, insbesondere der Blickrichtung, einer Person zu erfassen, um dieser Person Tiefeninformation bereitzustellen.Exterior rearview mirror replacement system according to Claim 1 or 2 , characterized in that the exterior mirror replacement system is designed to detect the position of the head and / or the eyes, in particular the viewing direction, of a person in order to provide this person with depth information. Außenrückspiegelersatzsystem nach Anspruch 3, dadurch gekennzeichnet, dass das Außenrückspiegelersatzsystem dazu ausgebildet ist, zumindest eines der 3D-Displays (4, 6) von einem 3D Modus, bei dem der Person Tiefeninformation bereitgestellt wird, in einen 2D Modus, bei dem der Person keine Tiefeninformation bereitgestellt wird, umzuschalten, wenn durch die Erfassung der Position des Kopfes und/oder der Augen der Person festgestellt wird, dass die Person ihren Blick nicht auf das zumindest eine 3D-Display (4, 6) richtet oder mit ihrem Blick nicht in die Nähe des zumindest einen 3D-Display (4, 6) kommt, und das 3D Display (4, 6) von dem 2D Modus auf den 3D Modus umzuschalten, wenn durch die Erfassung der Position des Kopfes und/oder der Augen der Person festgestellt wird, dass die Person ihren Blick auf das zumindest eine 3D-Display (4, 6) richtet oder mit ihrem Blick in die Nähe des zumindest einen 3D-Display (4, 6) kommt.Exterior rearview mirror replacement system according to Claim 3 , characterized in that the exterior rearview mirror replacement system is designed to at least to switch one of the 3D displays (4, 6) from a 3D mode in which depth information is provided to the person into a 2D mode in which no depth information is provided to the person, if by detecting the position of the head and / or it is established in the eyes of the person that the person is not looking at the at least one 3D display (4, 6) or is not gazing into the vicinity of the at least one 3D display (4, 6), and the 3D To switch the display (4, 6) from the 2D mode to the 3D mode if it is determined by the detection of the position of the head and / or the eyes of the person that the person is looking at the at least one 3D display (4, 6 ) or comes near the at least one 3D display (4, 6) with their gaze. Außenrückspiegelersatzsystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Datenübertragung zumindest teilweise über Ethernet realisiert wird.Exterior rearview mirror replacement system according to one of the preceding claims, characterized in that the data transmission is at least partially implemented via Ethernet. Außenrückspiegelersatzsystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die 3D-Kamerasysteme (3, 5) Stereokamerasysteme, die jeweils ein Paar Kameras (8', 8", 9', 9") umfassen, sind.Exterior rearview mirror replacement system according to one of the preceding claims, characterized in that the 3D camera systems (3, 5) are stereo camera systems, each of which comprises a pair of cameras (8 ', 8 ", 9', 9"). Fahrzeug (1), umfassend ein Außenrückspiegelersatzsystem nach einem der vorhergehenden Ansprüche.Vehicle (1) comprising an exterior rearview mirror replacement system according to one of the preceding claims.
DE102019213607.9A 2019-09-06 2019-09-06 3D display in digital vehicle rearview mirror Withdrawn DE102019213607A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102019213607.9A DE102019213607A1 (en) 2019-09-06 2019-09-06 3D display in digital vehicle rearview mirror

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102019213607.9A DE102019213607A1 (en) 2019-09-06 2019-09-06 3D display in digital vehicle rearview mirror

Publications (1)

Publication Number Publication Date
DE102019213607A1 true DE102019213607A1 (en) 2021-03-11

Family

ID=74644628

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019213607.9A Withdrawn DE102019213607A1 (en) 2019-09-06 2019-09-06 3D display in digital vehicle rearview mirror

Country Status (1)

Country Link
DE (1) DE102019213607A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021205311A1 (en) 2021-05-25 2022-12-01 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Motor vehicle with an assistance system
EP4223593A1 (en) * 2022-02-08 2023-08-09 Continental Autonomous Mobility Germany GmbH Rear-view stereo camera system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021205311A1 (en) 2021-05-25 2022-12-01 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Motor vehicle with an assistance system
WO2022248330A1 (en) * 2021-05-25 2022-12-01 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Motor vehicle with an assistance system
EP4223593A1 (en) * 2022-02-08 2023-08-09 Continental Autonomous Mobility Germany GmbH Rear-view stereo camera system

Similar Documents

Publication Publication Date Title
DE102006003538B3 (en) Image acquisitions merging method for bird`s eye perspective, involves selecting image sections such that shadowing effects produced by moved objects are projected during transition in overall image from image section to other section
DE102013206435A1 (en) Visualization system and device for generating and displaying a virtual image of a vehicle environment
EP3537384A2 (en) Visual surround-view-system for monitoring vehicle interiors
DE102012203491B4 (en) Electronic rearview mirror system
WO2015048967A1 (en) Method and apparatus for displaying the surroundings of a vehicle, and driver assistance system
DE102012200731A1 (en) Method and device for visualizing the environment of a vehicle
EP0836332A2 (en) Position-adaptive, autostereoscopic monitor (PAM)
DE102012212577A1 (en) SYSTEM AND METHOD FOR A VIDEO WITH IMPROVED DEEP PERCEPTION
DE102012018326A1 (en) Method for imaging driver assistance system for mapping objects in surrounding area of vehicle e.g. land craft, involves enabling dynamic adaptation of joining camera images to approach cover-free circumspection function of objects
WO2015181042A1 (en) Operating microscope having a data unit, and method for overlaying images
DE102016008231A1 (en) Method and device for generating a virtual view from a vehicle
WO2007065871A1 (en) Head-up display system
WO2004028169A2 (en) Stereo night vision system for vehicles
DE102019213607A1 (en) 3D display in digital vehicle rearview mirror
DE102013013227A1 (en) Car with display unit and protection against a driver distraction
DE102005048232B4 (en) Reversing camera system and method for displaying information about a rear view from a vehicle
WO2015082105A1 (en) Method and device for generating an alert by means of two images of a vehicle environment obtained via cameras
DE102015224185B4 (en) Device for detecting and displaying a vehicle environment in a vehicle and vehicle with such a device
DE102016217037B4 (en) Method for operating a display device of a motor vehicle with a digital display surface and motor vehicle
DE10321506A1 (en) Procedure for determining the current head position of vehicle occupants
DE102021206608A1 (en) Camera system and method for a camera system
DE102016215704A1 (en) Method and device for operating a display system with data glasses
DE102017203970A1 (en) System and method for transmitting video data from a motor vehicle for a virtual ride in the motor vehicle
DE102020210055A1 (en) Method and device for monitoring the interior of a vehicle
DE102015112411A1 (en) System for the stereoscopic display of images of an endoscope

Legal Events

Date Code Title Description
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee