DE102017129214A1 - System and method for improving a field of vision - Google Patents

System and method for improving a field of vision Download PDF

Info

Publication number
DE102017129214A1
DE102017129214A1 DE102017129214.4A DE102017129214A DE102017129214A1 DE 102017129214 A1 DE102017129214 A1 DE 102017129214A1 DE 102017129214 A DE102017129214 A DE 102017129214A DE 102017129214 A1 DE102017129214 A1 DE 102017129214A1
Authority
DE
Germany
Prior art keywords
field
view
user
environmental image
camera unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE102017129214.4A
Other languages
German (de)
Other versions
DE102017129214B4 (en
Inventor
Hubert Wittmann
Tobias Sonnleitner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Grammer AG
Original Assignee
Grammer AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Grammer AG filed Critical Grammer AG
Priority to DE102017129214.4A priority Critical patent/DE102017129214B4/en
Publication of DE102017129214A1 publication Critical patent/DE102017129214A1/en
Application granted granted Critical
Publication of DE102017129214B4 publication Critical patent/DE102017129214B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075—Constructional features or details
    • B66F9/0755—Position control; Position detectors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075—Constructional features or details
    • B66F9/20—Means for actuating or controlling masts, platforms, or forks
    • B66F9/24—Electrical devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
    • B60R2300/406—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components using wireless transmission
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867—Combination of radar systems with cameras
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9324—Alternative operation using ultrasonic waves
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted

Abstract

System zur Verbesserung eines Blickfeldes eines Benutzers, umfassend:
Eine Augmented Reality Brille für den Benutzer, wobei die Brille eine erste Kameraeinheit und eine Anzeigeeinrichtung aufweist,
eine zweite Kameraeinheit, welches vorgesehen und dafür ausgebildet ist, eine Umgebung eines Fahrzeugs zu erfassen,
eine Bestimmungseinrichtung, welche vorgesehen und ausgebildet ist, ein Blickfeld des Benutzers mittels der ersten Kameraeinheit zu bestimmen,
eine Zuordnungseinrichtung, welche vorgesehen und dafür ausgebildet ist, dem Blickfeld ein zugehöriges Umgebungsbild der zweiten Kameraeinheit zuzuordnen,
eine Vergleichseinrichtung, welche vorgesehen und dafür ausgebildet ist, einen Vergleich des Blickfelds und des zugehörigen Umgebungsbilds durchzuführen und Unterschiede zu erkennen,
eine Steuereinheit, welche vorgesehen und dafür ausgebildet ist, die Unterschiede des Blickfeldes zu dem Umgebungsbild durch Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds auf der Anzeigeeinrichtung zu ersetzen

Figure DE102017129214A1_0000
System for improving a field of vision of a user, comprising:
An augmented reality goggle for the user, the goggle having a first camera unit and a display device,
a second camera unit which is provided and adapted to detect an environment of a vehicle,
a determination device, which is provided and designed to determine a field of view of the user by means of the first camera unit,
an association device, which is provided and designed to associate with the field of view an associated environmental image of the second camera unit,
a comparison device, which is provided and designed to perform a comparison of the field of view and the associated environmental image and to detect differences,
a control unit, which is provided and designed to replace the differences of the field of view to the environmental image by fading in at least parts of the associated environmental image on the display device
Figure DE102017129214A1_0000

Description

Die Erfindung betrifft ein System und ein Verfahren zur Verbesserung eines Blickfelds eines Benutzers.The invention relates to a system and a method for improving a field of view of a user.

Es sind aus dem Stand der Technik Systeme bekannt, beispielsweise die Google-Brille, mittels welcher beim Betrachten von Sehenswürdigkeiten oder anderen Dingen dem Benutzer in der Brille weitergehende Informationen eingeblendet werden, mittels welchen sich der Benutzer umfassend informieren kann. Eine derartige Einblendung von Informationen kann jedoch störend auf den Benutzer wirken.Systems are known from the state of the art, for example the Google glasses, by means of which further information is displayed to the user in the spectacles when viewing sights or other objects, by means of which the user can obtain comprehensive information. However, such an overlay of information may interfere with the user.

Derartige Systeme zum Einblenden von Informationen sind auch aus der Mobilitätsbranche bekannt, wobei die eingeblendeten Informationen Auskunft über das Fahrzeug geben, wie etwa Drehzahl, Geschwindigkeit oder dergleichen. Jedoch kann auch hier eine Störung des Benutzers gegeben sein und verbessert das Blickfeld des Benutzers im Hinblick auf die zu beobachtende Umgebung nicht.Such systems for fading information are also known in the mobility industry, where the information displayed provides information about the vehicle, such as speed, speed or the like. However, also here a disturbance of the user can be given and does not improve the field of vision of the user with regard to the environment to be observed.

Es ist demzufolge Aufgabe der vorliegenden Erfindung, ein System und ein Verfahren bereitzustellen, welche die Nachteile des Standes der Technik überkommt. Insbesondere wird ein System und ein Verfahren bereitgestellt, mittels welchen das Blickfeld des Benutzers nicht zusätzlich gestört wird und weiter verbessert werden kann.It is therefore an object of the present invention to provide a system and a method which overcomes the disadvantages of the prior art. In particular, a system and a method is provided by means of which the field of view of the user is not additionally disturbed and can be further improved.

Gelöst wird diese Aufgabe gemäß den Merkmalen der unabhängigen Patentansprüche.This object is achieved according to the features of the independent claims.

Ein wesentlicher Punkt der Erfindung liegt zunächst darin, ein System zur Verbesserung eines Blickfeldes eines Benutzers bereitzustellen, umfassend:

  • Eine Brille für den Benutzer, wobei die Brille eine erste Kameraeinheit und eine Anzeigeeinrichtung aufweist, eine zweite Kameraeinheit, welches vorgesehen und dafür ausgebildet ist, eine Umgebung eines Fahrzeugs zu erfassen, eine Bestimmungseinrichtung, welche vorgesehen und ausgebildet ist, ein Blickfeld des Benutzers mittels der ersten Kameraeinheit zu bestimmen, eine Zuordnungseinrichtung, welche vorgesehen und dafür ausgebildet ist, dem Blickfeld ein zugehöriges Umgebungsbild der zweiten Kameraeinheit zuzuordnen, eine Vergleichseinrichtung, welche vorgesehen und dafür ausgebildet ist, einen Vergleich des Blickfelds und des zugehörigen Umgebungsbilds durchzuführen und Unterschiede zu erkennen, und eine Steuereinheit, welche vorgesehen und dafür ausgebildet ist, die Unterschiede des Blickfeldes zu dem Umgebungsbild durch Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds auf der Anzeigeeinrichtung zu ersetzen.
An essential point of the invention is first of all to provide a system for improving a field of vision of a user, comprising:
  • A pair of glasses for the user, the glasses having a first camera unit and a display, a second camera unit provided and adapted to detect an environment of a vehicle, a determination device provided and configured, a field of view of the user by means of the an association device, which is provided and designed to associate with the field of view an associated environmental image of the second camera unit, a comparison device which is provided and configured to perform a comparison of the field of view and the associated environmental image and to detect differences, and a control unit, which is provided and designed to replace the differences of the field of view to the environmental image by fading in at least parts of the associated environmental image on the display device.

Bei der Brille handelt es sich insbesondere um eine Augmented Reality Brille, das heißt, dass mittels dieser Brille die vom Benutzer wahrgenommene beziehungsweise gesehene Realität erweitert wird. Dies steht insbesondere im Gegensatz zu einer VR (Virtual Reality) Brille, da hierbei der Benutzer keinen visuellen Kontakt zu der Realität hat. Die Augmented Reality Brille hat weiter gegenüber der VR Brille den entscheidenden Vorteil, dass bei einem Ausfall des Systems weiterhin die Realität betrachtet werden kann, was bei einer VR Brille nicht der Fall ist. Somit ist ein gewisses Maß an Sicherheit für den Benutzer gegeben.The glasses are, in particular, augmented reality glasses, that is to say that the reality perceived or seen by the user is widened by means of these glasses. This is in particular in contrast to a VR (Virtual Reality) glasses, since in this case the user has no visual contact with the reality. The Augmented Reality glasses have the further advantage over the VR glasses, that in case of a failure of the system the reality can still be considered, which is not the case with VR glasses. Thus, a certain degree of security for the user is given.

Erfindungsgemäß kann erkannt werden, dass sich im Blickfeld des Benutzers ein Hindernis oder ein Störkörper befindet, welches das Blickfeld des Benutzers einschränkt. Beispielsweise ist dabei eine Säule einer Fahrerkabine denkbar, welches den Blick nach außen behindert, wodurch Dinge oder Personen, welche sich hinter der Säule befindet, nicht erkannt werden können.According to the invention, it can be recognized that in the field of vision of the user there is an obstacle or a disruptive body which limits the field of vision of the user. For example, a pillar of a driver's cab is conceivable which obstructs the view to the outside, whereby things or persons who are behind the pillar can not be recognized.

Erfindungsgemäß wird durch einen Vergleich des Blickfelds und des zugehörigen Umgebungsbilds mittels der Vergleichseinrichtung erkannt, dass das Blickfeld des Benutzers durch das Hindernis oder den Störkörper eingeschränkt ist.According to the invention, it is recognized by comparing the field of view and the associated environmental image by means of the comparison device that the field of vision of the user is limited by the obstacle or the disruptive body.

Vorzugsweise wird ebenfalls erkannt, welcher Bereich des Umgebungsbildes dem durch das Hindernis verdeckten Bereich des Blickfelds entspricht.It is also preferably recognized which region of the surrounding image corresponds to the area of the field of view obscured by the obstacle.

Gemäß einer besonders bevorzugten Ausführungsform ist die zweite Kameraeinheit an dem Fahrzeug derart anordenbar, dass eine Vogelperspektive des gesamten Fahrzeugs erstellbar ist.According to a particularly preferred embodiment, the second camera unit can be arranged on the vehicle in such a way that a bird's eye view of the entire vehicle can be created.

Die Vogelperspektive ist insbesondere in der Mobilitätsbranche auch als „Bird View“ oder „Bird's Eye View“ bekannt und zeigt, eben in Vogelperspektive, die Umgebung des Fahrzeugs an.The bird's-eye view is also known as the "Bird View" or "Bird's Eye View", especially in the mobility industry, and shows the surroundings of the vehicle in bird's-eye view.

Handelt es sich hierbei etwa um ein Automobil, so ist die Anordnung hinreichend bekannt. Bei manchen speziellen Fahrzeugen ist jedoch eine andere Anordnung notwendig, beispielsweise bei einem Traktor mit einem Frontlader oder ein Gabelstapler mit Hebebühne. Wäre die zweite Kameraeinheit ähnlich wie beim Automobil angeordnet, so würde der Frontlader den Erfassungsbereich der Kameraeinheit stören und es könnte keine Vogelperspektive erstellt werden.If this is an automobile, the arrangement is sufficiently well known. In some special vehicles, however, a different arrangement is necessary, such as a tractor with a front loader or a lift truck with a lift. If the second camera unit were arranged similar to the automobile, the front loader would disturb the detection range of the camera unit and no bird's eye view could be created.

Gemäß einer weiteren bevorzugten Ausführungsform umfasst die zweite Kameraeinheit mindestens ein Kameraelement, bevorzugter mindestens zwei Kameraelemente und besonders bevorzugt mindestens vier Kameraelemente. Der Erfassungsbereich der Kameraelemente ist dabei abhängig von der Anzahl der Kameraelemente, bei zwei Kameraelementen beträgt der Erfassungsbereich eines Kameraelements 180°, bei mehreren Kameraelementen entsprechend weniger. According to a further preferred embodiment, the second camera unit comprises at least one camera element, more preferably at least two camera elements and particularly preferably at least four camera elements. The detection range of the camera elements is dependent on the number of camera elements, with two camera elements, the detection range of a camera element is 180 °, with several camera elements correspondingly less.

Ein Kameraelement ist insbesondere dann vorteilhaft, wenn lediglich eine einzige Richtung betrachtet werden soll, beispielsweise wenn der Benutzer nur nach vorne blickt und das Blickfeld des Benutzers durch ein Hindernis eingeschränkt ist. Insbesondere ist hierbei eine Betrachtung eines rückwärtigen Bereiches nicht notwendig, so dass hierdurch kein Kameraelement notwendig ist.A camera element is particularly advantageous when only a single direction is to be considered, for example, when the user only looks forward and the field of view of the user is limited by an obstacle. In particular, in this case a consideration of a rear area is not necessary, so that no camera element is necessary thereby.

Entsprechend kann sich die Anzahl der Kameraelemente ändern abhängig davon, welcher Sichtbereich für den Benutzer notwendig ist und vorgesehen ist.Accordingly, the number of camera elements may change depending on which viewing area is necessary and intended for the user.

Erfindungsgemäß ist eine Zuordnungseinrichtung vorgesehen, welche vorgesehen und ausgebildet ist, dem Blickfeld des Benutzers ein zugehöriges Umgebungsbild der zweiten Kameraeinheit zuzuordnen. Das heißt, dass abhängig vom Blickfeld des Benutzers, welches durch die erste Kameraeinheit bestimmt ist, das entsprechende und zugehörige Umgebungsbild zugeordnet wird.According to the invention, an allocation device is provided, which is provided and designed to associate with the field of view of the user an associated environmental image of the second camera unit. This means that depending on the field of view of the user, which is determined by the first camera unit, the corresponding and associated environmental image is assigned.

Gemäß einer besonders vorteilhaften Ausführungsform ist es daher vorgesehen, dass durch die Zuordnungseinrichtung nur diejenigen Kameraelemente aktiviert sind, welche für die Zuordnung des Umgebungsbildes notwendig sind. Es ist beispielsweise denkbar, dass der Benutzer nur geradeausfährt und auch nur geradeaus schaut, wodurch das Kameraelement, welches den rückwärtigen Bereich erfasst, nicht aktiv sein muss. Wird jedoch erkannt, dass der Benutzer nach hinten sieht, so wird das entsprechende Kameraelement aktiviert, da die Erfassung des Kameraelements notwendig ist, um ein zugehöriges Umgebungsbild zu erstellen.According to a particularly advantageous embodiment, it is therefore provided that only those camera elements are activated by the allocation device, which are necessary for the assignment of the environmental image. For example, it is conceivable that the user only drives straight ahead and also only looks straight ahead, as a result of which the camera element which detects the rear area does not have to be active. However, if it is detected that the user is looking backwards, the corresponding camera element is activated since the detection of the camera element is necessary in order to create an associated environmental image.

Ist lediglich ein Kameraelement vorgesehen, so ist vorzugsweise das eine Kameraelement aktivierbar und vorzugsweise immer aktiv.If only one camera element is provided, the one camera element is preferably activatable and preferably always active.

Gemäß einer weiteren bevorzugten Ausführungsform weist die Brille mindestens einen Beschleunigungssensor auf. Es ist daher mittels des Beschleunigungssensors möglich, zu erkennen, ob sich die Brille und entsprechend der Kopf bewegt, was zu einer Veränderung des Blickfeldes führt. Die Messdaten des Beschleunigungssensors können zur Bestimmung des Blickfelds des Benutzers mit einfließen. Insbesondere ist es mittels des Beschleunigungssensors möglich, Beschleunigungen in den drei Raumrichtungen zu erkennen, das heißt einen dreidimensionalen Beschleunigungsvektor zu bestimmen.According to a further preferred embodiment, the spectacles on at least one acceleration sensor. It is therefore possible by means of the acceleration sensor to detect whether the glasses and according moves the head, resulting in a change in the field of view. The measurement data of the acceleration sensor can be used to determine the field of view of the user. In particular, it is possible by means of the acceleration sensor to detect accelerations in the three spatial directions, that is to say to determine a three-dimensional acceleration vector.

Es ist allgemein auch zu beachten, dass vorzugsweise durch die erste Kameraeinheit auch die Augenbewegung erkennbar ist, da nicht nur durch die Bewegung des Körpers an sich, sondern auch durch die Bewegung der Augen des Benutzers das Blickfeld des Benutzers veränderbar ist.It should also be noted in general that the eye movement is preferably recognizable by the first camera unit, since not only by the movement of the body itself, but also by the movement of the eyes of the user, the field of view of the user is changeable.

Gemäß einer weiteren bevorzugten Ausführungsform weist die Brille mindestens einen Winkelsensor und/oder einen Positionssensor auf. Mittels des Winkelsensors und/oder des Positionssensors kann die relative Position der Brille bestimmt werden, beispielsweise relativ zu einer Fahrerkabine.According to a further preferred embodiment, the spectacles on at least one angle sensor and / or a position sensor. By means of the angle sensor and / or the position sensor, the relative position of the glasses can be determined, for example relative to a driver's cab.

Gemäß einer weiteren bevorzugten Ausführungsform weist die Anzeigeeinrichtung einen durchsichtigen Bildschirm auf. Mittels eines durchsichtigen Bildschirms kann die Realität weiterhin ungestört beobachtet werden, wobei bei Erkennen einer Störung mittels des durchsichtigen Bildschirms Teile des Umgebungsbilds eingeblendet werden können.According to a further preferred embodiment, the display device has a transparent screen. By means of a transparent screen, the reality can continue to be observed undisturbed, which can be displayed on detection of a disturbance by means of the transparent screen parts of the surrounding image.

Gemäß einer weiteren bevorzugten Ausführungsform ist durch den Benutzer der Steuereinheit ein Signal übermittelbar, mittels welchem der Steuereinheit mitgeteilt wird, ob ein Einblenden stattfinden soll oder nicht. Es kann durchaus Situationen geben, in welchem ein Einblenden nicht gewünscht ist, beispielsweise, wenn durch das Hindernis die Sonneneinstrahlung verringert werden kann.According to a further preferred embodiment, a signal is transmitted by the user of the control unit, by means of which the control unit is informed whether a fade should take place or not. There may well be situations in which fade-in is not desired, for example, when the sun's radiation can be reduced by the obstacle.

Vorzugsweise ist dazu ein Steuerknopf oder dergleichen vorgesehen, mittels welchem durch Betätigen das entsprechende Signal übermittelbar ist.Preferably, a control button or the like is provided, by means of which the corresponding signal can be transmitted by pressing.

Weiter wird die Aufgabe gelöst von einem Verfahren zur Verbesserung eines Blickfeldes eines Benutzers, umfassend die Verfahrensschritte:

  1. a) Bestimmen des Blickfelds eines Benutzers mittels einer ersten Kameraeinrichtung und einer Bestimmungseinrichtung;
  2. b) Erfassen eines Umgebungsbilds eines Fahrzeugs mittels einer zweiten Kameraeinrichtung;
  3. c) Zuordnen eines dem Blickfeld zugehörigen Umgebungsbildes;
  4. d) Durchführen eines Vergleiches zwischen dem Blickfeld und dem zugehörigen Umgebungsbildes;
  5. e) Erkennen von Unterschieden zwischen dem Blickfeld und dem zugehörigen Umgebungsbild;
  6. f) Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds mittels einer Anzeigeeinrichtung.
Furthermore, the object is achieved by a method for improving a field of vision of a user, comprising the method steps:
  1. a) determining the field of view of a user by means of a first camera device and a determination device;
  2. b) detecting an environmental image of a vehicle by means of a second camera device;
  3. c) assigning an environmental image associated with the field of view;
  4. d) performing a comparison between the field of view and the associated environmental image;
  5. e) detecting differences between the field of view and the associated environmental image;
  6. f) display at least parts of the associated environment image by means of a display device.

Es ist auch denkbar, dass weiter mindestens ein Ultraschallsensor und/oder ein Abstandsradar vorgesehen ist, welche eine Erweiterung des optischen Systems darstellen. Mittels des Ultraschallsensors und/oder des Abstandradars können weitere Hindernisse, wie etwa große Steine oder dergleichen, frühzeitig erkannt werden. Hierdurch kann die Sicherheit weiter erhöht werden.It is also conceivable that further at least one ultrasonic sensor and / or a distance radar is provided, which represent an extension of the optical system. By means of the ultrasonic sensor and / or the distance radar further obstacles, such as large stones or the like, can be detected early. As a result, the security can be further increased.

Weitere vorteilhafte Ausführungsformen ergeben sich aus den Unteransprüchen.Further advantageous embodiments will become apparent from the dependent claims.

Weitere Ziele, Vorteile und Zweckmäßigkeiten der vorliegenden Erfindung sind der nachfolgenden von der Beschreibung in Verbindung mit den Zeichnungen zu entnehmen. Hierbei zeigen:

  • 1 schematisch die Funktion und Funktionsweise eines Systems gemäß einer Ausführungsform;
  • 2 das System in einer bevorzugten Ausführungsform;
  • 3 das Verfahren gemäß einer Ausführungsform.
Other objects, advantages and advantages of the present invention will become apparent from the following description when taken in conjunction with the drawings. Hereby show:
  • 1 schematically the function and operation of a system according to an embodiment;
  • 2 the system in a preferred embodiment;
  • 3 the method according to one embodiment.

Die 1 zeigt schematisch die Funktion und Funktionsweise eines System 1 zur Verbesserung eines Blickfelds 3 eines Benutzers 16, wobei vorzugsweise der Benutzer 16 auf einem Fahrzeugsitz 17 sitzt, welcher ein Fahrzeugsitz 17 eines Fahrzeugs 11 ist, wobei das Fahrzeug 11 vorliegend nicht vollständig gezeigt ist, sondern lediglich eine Benutzerkabine 18 des Fahrzeugs 11.The 1 schematically shows the function and operation of a system 1 to improve a field of vision 3 a user 16 , preferably the user 16 on a vehicle seat 17 sitting, which is a vehicle seat 17 of a vehicle 11 is where the vehicle is 11 not shown in the present case, but only a user cabin 18 of the vehicle 11 ,

Der Benutzer 16 trägt die Brille 2, welche vorzugsweise eine Augmented Reality Brille 2 ist, und hat ein Blickfeld 3, wobei in diesem Blickfeld 3 ein oder mehrere Hindernisse 19 angeordnet sind, wobei das Hindernis 19 beispielsweise eine Säule 19' der Benutzerkabine 18 oder ein Hebegut 19" sein kann, wobei das Hebegut 19" vorzugsweise auf einer Hebebühne eines Gabelstaplers oder an einem Frontlader eines Traktors angeordnet sein kann.The user 16 wears the glasses 2 which preferably has augmented reality glasses 2 is, and has a field of vision 3 , being in this field of view 3 one or more obstacles 19 are arranged, the obstacle 19 for example, a column 19 ' the user's cabin 18 or a lift 19 " can be, being the lift 19 " may preferably be arranged on a lift of a forklift or on a front loader of a tractor.

Erfindungsgemäß umfasst die Brille 2 eine erste Kameraeinheit 4, welche ausgebildet und vorgesehen ist, das Blickfeld 3 des Benutzers 16 zu bestimmen. Weiter umfasst die Brille 2 eine Anzeigeeinrichtung 5, mittels welcher zumindest Teile des Umgebungsbildes dargestellt werden können, wobei das Umgebungsbild durch eine zweite Kameraeinheit 6 erfasst wird, wobei die zweite Kameraeinheit 6 vier Kameraelemente 12 aufweist, wobei die zweite Kameraeinheit 6 an dem Fahrzeug 11 derart anordenbar ist, dass eine Vogelperspektive des gesamten Fahrzeugs 11 erstellt werden kann. Es sei hierbei angemerkt, dass die Ausgestaltung mit vier Kameraelementen lediglich eine bevorzugte Ausführungsform darstellt; es ist ebenso möglich, nur ein, zwei oder drei Kameraelemente zu verwenden. Vorliegend ist die zweite Kameraeinheit 6 derart angeordnet, dass also auch die für den Benutzer 16 verdeckten Bereiche 20 erfasst werden können.According to the invention includes the glasses 2 a first camera unit 4 which is designed and provided, the field of vision 3 the user 16 to determine. Next includes the glasses 2 a display device 5 , by means of which at least parts of the environmental image can be displayed, the environmental image being represented by a second camera unit 6 is detected, wherein the second camera unit 6 four camera elements 12 wherein the second camera unit 6 on the vehicle 11 can be arranged so that a bird's eye view of the entire vehicle 11 can be created. It should be noted here that the embodiment with four camera elements represents only a preferred embodiment; it is also possible to use only one, two or three camera elements. In the present case is the second camera unit 6 arranged in such a way that so that for the user 16 hidden areas 20 can be detected.

Die Funktion beziehungsweise die Aufgabe des erfindungsgemäßen System 1 ist es, das Blickfeld 3 des Benutzers 16 zu verbessern, so dass der Benutzer 16 auch die verdeckten Bereich 20 betrachten und erfassen kann.The function or the task of the system according to the invention 1 is it, the field of vision 3 the user 16 to improve, so that the user 16 even the hidden area 20 consider and capture.

Dazu ist in der 2 das erfindungsgemäße System 1 in größerer Detailtiefe gezeigt.This is in the 2 the system according to the invention 1 shown in greater detail.

Das System 1 umfasst dabei die Augmented Reality Brille 2 für den Benutzer 16, wobei die Brille 2 eine erste Kameraeinheit 4 und eine Anzeigeeinrichtung 5 aufweist, und eine zweite Kameraeinheit 6, welches vorgesehen und dafür ausgebildet ist, eine Umgebung des Fahrzeugs 11 zu erfassen, und eine Bestimmungseinrichtung 7, welche vorgesehen und ausgebildet ist, das Blickfeld 3 des Benutzers 16 mittels der ersten Kameraeinheit 4 zu bestimmen, und eine Zuordnungseinrichtung 8, welche vorgesehen und dafür ausgebildet ist, dem Blickfeld ein zugehöriges Umgebungsbild der zweiten Kameraeinheit 6 zuzuordnen,
eine Vergleichseinrichtung 9, welche vorgesehen und dafür ausgebildet ist, einen Vergleich des Blickfelds 3 und des zugehörigen Umgebungsbilds durchzuführen und Unterschiede zu erkennen, und eine Steuereinheit 10, welche vorgesehen und dafür ausgebildet ist, die Unterschiede des Blickfeldes 3 zu dem Umgebungsbild durch Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds auf der Anzeigeeinrichtung 5 zu ersetzen.The system 1 includes the augmented reality glasses 2 for the user 16 , where the glasses 2 a first camera unit 4 and a display device 5 and a second camera unit 6 , which is provided and adapted to an environment of the vehicle 11 to capture, and a determination device 7 which is provided and designed, the field of vision 3 the user 16 by means of the first camera unit 4 to determine, and an allocation device 8th , which is provided and designed for the field of view, an associated environmental image of the second camera unit 6 to you,
a comparison device 9 which is provided and designed for a comparison of the field of view 3 and the associated environment image to detect differences, and a control unit 10 which is provided and designed for the differences of field of vision 3 to the environmental image by fading in at least parts of the associated environmental image on the display device 5 to replace.

Dabei sind die jeweiligen Bauelemente des Systems 1 miteinander zumindest in signaltechnischer Verbindung, wie in der 2 dargestellt ist.Here are the respective components of the system 1 at least in signaling connection, as in the 2 is shown.

Weiter weist die Brille 2 einen Beschleunigungssensor 13 sowie einen Winkelsensor 14 auf, mittels welchen insbesondere die Position und die Bewegungsrichtung der Brille 2 beziehungsweise des Kopfs des Benutzers 16 zu erkennen und zu bestimmen. Vorzugsweise kann ein Vektor der Beschleunigung erkannt werden, das heißt, die Beschleunigung in den drei Raumkoordinaten.Next points the glasses 2 an acceleration sensor 13 as well as an angle sensor 14 on, by means of which in particular the position and the direction of movement of the glasses 2 or the user's head 16 to recognize and determine. Preferably, a vector of the acceleration can be recognized, that is, the acceleration in the three space coordinates.

Bevorzugt umfasst das System 1 noch weiter einen Steuerknopf 21, mittels welchem ein Signal 22 an die Steuereinheit 10 übermittelt werden kann. Das Signal 22, welches der Steuereinheit 10 übermittelt wird, gibt der Steuereinheit 10 an, ob ein Einblenden stattfinden soll oder nicht. Ein derartiges Signal 22 wird durch eine Betätigung des Steuerknopfes 21 an die Steuereinheit 10 übermittelt.Preferably, the system comprises 1 even further a control button 21 , by means of which a signal 22 to the control unit 10 can be transmitted. The signal 22 , which is the control unit 10 is transmitted, gives the control unit 10 whether to fade in or not. Such a signal 22 is activated by pressing the control button 21 to the control unit 10 transmitted.

Weiter weist die Anzeigeeinrichtung 5 einen Bildschirm 15 auf, welcher als ein durchsichtiger Bildschirm 15 ausgebildet ist.Next, the display device 5 a screen 15 on, which as a transparent screen 15 is trained.

In der 3 ist ein erfindungsgemäßes Verfahren zur Verbesserung des Blickfelds 3 des Benutzers 16 dargestellt, wobei das Verfahren die Verfahrensschritte

  1. a) Bestimmen des Blickfelds 3 des Benutzers 16 mittels der ersten Kameraeinrichtung 4 und einer Bestimmungseinrichtung 7;
  2. b) Erfassen des Umgebungsbilds des Fahrzeugs 11 mittels der zweiten Kameraeinrichtung 6;
  3. c) Zuordnen des dem Blickfeld 3 zugehörigen Umgebungsbildes;
  4. d) Durchführen eines Vergleiches zwischen dem Blickfeld 3 und dem zugehörigen Umgebungsbildes;
  5. e) Erkennen von Unterschieden zwischen dem Blickfeld 3 und dem zugehörigen Umgebungsbild;
  6. f) Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds mittels einer Anzeigeeinrichtung 5.
In the 3 is an inventive method for improving the field of view 3 the user 16 shown, wherein the method comprises the method steps
  1. a) Determining the field of view 3 the user 16 by means of the first camera device 4 and a determination device 7 ;
  2. b) detecting the environmental image of the vehicle 11 by means of the second camera device 6 ;
  3. c) assigning the field of view 3 associated environmental image;
  4. d) performing a comparison between the field of view 3 and the associated environment image;
  5. e) Recognizing differences between the field of view 3 and the associated environment image;
  6. f) display at least parts of the associated environment image by means of a display device 5 ,

Zur Bestimmung des Blickfelds wird vorzugsweise auch die Position der Augen beziehungsweise die Blickrichtung der Augen benötigt, da das Blickfeld von diesen Parametern abhängt.To determine the field of view, the position of the eyes or the viewing direction of the eyes is preferably also required, since the field of view depends on these parameters.

Sämtliche in den Anmeldungsunterlagen offenbarte Merkmale werden als erfindungswesentlich beansprucht, sofern sie einzeln oder in Kombination gegenüber dem Stand der Technik neu sind.All disclosed in the application documents features are claimed as essential to the invention, provided they are new individually or in combination over the prior art.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

11
Systemsystem
22
Brilleglasses
33
Blickfeldfield of vision
44
erste Kameraeinheitfirst camera unit
55
Anzeigeeinrichtungdisplay
66
zweite Kameraeinheitsecond camera unit
77
Bestimmungseinrichtungdeterminer
88th
Zuordnungseinrichtungallocator
99
Vergleichseinrichtungcomparator
1010
Steuereinheitcontrol unit
1111
Fahrzeugvehicle
1212
Kameraelementcamera element
1313
Beschleunigungssensoraccelerometer
1414
Winkelsensorangle sensor
1515
Bildschirmscreen
1616
Benutzeruser
1717
Fahrzeugsitzvehicle seat
1818
Benutzerkabineusers cabin
1919
Hindernisobstacle
19'19 '
Säulepillar
19"19 "
Hebeguthoisting strap
2020
verdeckter Bereichcovered area
2121
Steuerknopfcontrol knob
2222
Signalsignal

Claims (9)

System (1) zur Verbesserung eines Blickfeldes (3) eines Benutzers (16), umfassend: Eine Augmented Reality Brille (2) für den Benutzer (16), wobei die Brille (2) eine erste Kameraeinheit (4) und eine Anzeigeeinrichtung (5) aufweist, eine zweite Kameraeinheit (6), welche vorgesehen und dafür ausgebildet ist, eine Umgebung eines Fahrzeugs (11) zu erfassen, eine Bestimmungseinrichtung (7), welche vorgesehen und ausgebildet ist, ein Blickfeld (3) des Benutzers (16) mittels der ersten Kameraeinheit (4) zu bestimmen, eine Zuordnungseinrichtung (8), welche vorgesehen und dafür ausgebildet ist, dem Blickfeld (3) ein zugehöriges Umgebungsbild der zweiten Kameraeinheit (6) zuzuordnen, eine Vergleichseinrichtung (9), welche vorgesehen und dafür ausgebildet ist, einen Vergleich des Blickfelds (3) und des zugehörigen Umgebungsbilds durchzuführen und Unterschiede zu erkennen, eine Steuereinheit (10), welche vorgesehen und dafür ausgebildet ist, die Unterschiede des Blickfeldes (3) zu dem Umgebungsbild durch Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds auf der Anzeigeeinrichtung (5) zu ersetzen.System (1) for improving a field of view (3) of a user (16), comprising: Augmented reality glasses (2) for the user (16), the glasses (2) having a first camera unit (4) and a display device (5), a second camera unit (6) provided and adapted to detect an environment of a vehicle (11), a determination device (7) which is provided and designed to determine a field of view (3) of the user (16) by means of the first camera unit (4), an association device (8) which is provided and designed to associate the field of view (3) with an associated environmental image of the second camera unit (6), a comparison device (9) which is provided and designed to perform a comparison of the field of view (3) and the associated environmental image and to detect differences, a control unit (10), which is provided and designed to replace the differences of the field of view (3) to the environmental image by fading in at least parts of the associated environmental image on the display device (5). System (1) nach Anspruch 1, dadurch gekennzeichnet, dass die zweite Kameraeinheit (6) an dem Fahrzeug (11) derart anordenbar ist, dass eine Vogelperspektive des gesamten Fahrzeugs (11) erstellbar ist.System (1) to Claim 1 , characterized in that the second camera unit (6) on the vehicle (11) can be arranged such that a bird's eye view of the entire vehicle (11) can be created. System (1) nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die zweite Kameraeinheit (6) zumindest eine, bevorzugter zumindest zwei und besonders bevorzugt zumindest vier Kameraelemente (12) aufweist.System (1) to Claim 1 or 2 , characterized in that the second camera unit (6) has at least one, more preferably at least two and particularly preferably at least four camera elements (12). System (1) nach Anspruch 3, dadurch gekennzeichnet, dass durch die Zuordnungseinrichtung (8) nur diejenigen Kameraelemente (12) aktiviert sind, die für die Zuordnung des Umgebungsbilds notwendig sind. System (1) to Claim 3 , characterized in that only the camera elements (12) are activated by the allocation device (8), which are necessary for the assignment of the environmental image. System (1) nach einem der Ansprüche 1-4, dadurch gekennzeichnet, dass die Brille (2) zumindest einen Beschleunigungssensor (13) aufweist.System (1) according to one of Claims 1 - 4 , characterized in that the glasses (2) has at least one acceleration sensor (13). System (1) nach einem der Ansprüche 1-5, dadurch gekennzeichnet, dass die Brille (2) zumindest einen Winkelsensor (14) aufweist.System (1) according to one of Claims 1 - 5 , characterized in that the glasses (2) has at least one angle sensor (14). System (1) nach einem der Ansprüche 1-6, dadurch gekennzeichnet, dass die Anzeigeeinrichtung (5) einen durchsichtigen Bildschirm (15) aufweist.System (1) according to one of Claims 1 - 6 , characterized in that the display device (5) has a transparent screen (15). System (1) nach einem der Ansprüche 1-7, dadurch gekennzeichnet, dass durch den Benutzer (16) der Steuereinheit ein Signal (22) übermittelbar ist, mittels welchem der Steuereinheit (10) mitgeteilt wird, ob das Einblenden stattfinden soll.System (1) according to one of Claims 1 - 7 , characterized in that by the user (16) of the control unit a signal (22) is communicable, by means of which the control unit (10) is informed whether the fade is to take place. Verfahren zur Verbesserung eines Blickfeldes (3) eines Benutzers (16), umfassend die Verfahrensschritte: g) Bestimmen des Blickfelds (3) eines Benutzers (16) mittels einer ersten Kameraeinheit und einer Bestimmungseinrichtung (7); h) Erfassen eines Umgebungsbilds eines Fahrzeugs (11) mittels einer zweiten Kameraeinheit; i) Zuordnen eines dem Blickfeld (3) zugehörigen Umgebungsbildes; j) Durchführen eines Vergleiches zwischen dem Blickfeld (3) und dem zugehörigen Umgebungsbildes; k) Erkennen von Unterschieden zwischen dem Blickfeld (3) und dem zugehörigen Umgebungsbild; I) Einblenden von zumindest Teilen des zugehörigen Umgebungsbilds mittels einer Anzeigeeinrichtung (5).Method for improving a field of vision (3) of a user (16), comprising the method steps: g) determining the field of view (3) of a user (16) by means of a first camera unit and a determination device (7); h) detecting an environmental image of a vehicle (11) by means of a second camera unit; i) assigning an environmental image associated with the field of view (3); j) performing a comparison between the field of view (3) and the associated environmental image; k) detecting differences between the field of view (3) and the associated environmental image; I) Display of at least parts of the associated environmental image by means of a display device (5).
DE102017129214.4A 2017-12-08 2017-12-08 System and method for improving a field of vision Active DE102017129214B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102017129214.4A DE102017129214B4 (en) 2017-12-08 2017-12-08 System and method for improving a field of vision

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017129214.4A DE102017129214B4 (en) 2017-12-08 2017-12-08 System and method for improving a field of vision

Publications (2)

Publication Number Publication Date
DE102017129214A1 true DE102017129214A1 (en) 2019-06-13
DE102017129214B4 DE102017129214B4 (en) 2024-01-18

Family

ID=66629516

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017129214.4A Active DE102017129214B4 (en) 2017-12-08 2017-12-08 System and method for improving a field of vision

Country Status (1)

Country Link
DE (1) DE102017129214B4 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019209590A1 (en) * 2019-07-01 2021-01-07 Zf Friedrichshafen Ag Method for improving the field of vision of a driver of a vehicle

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150235398A1 (en) * 2014-02-18 2015-08-20 Harman International Industries, Inc. Generating an augmented view of a location of interest
DE102014208310A1 (en) * 2014-05-05 2015-11-05 Bayerische Motoren Werke Aktiengesellschaft Driver assistance system for displaying an augmented reality
DE102015007246A1 (en) * 2015-06-05 2016-12-08 Audi Ag A method of operating a display system and display system for a motor vehicle
DE102016008231A1 (en) * 2016-07-05 2017-02-09 Daimler Ag Method and device for generating a virtual view from a vehicle

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015014639B4 (en) 2015-11-12 2020-08-06 Hologram Industries Research Gmbh Display device for superimposing a virtual image in the field of view of a user

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150235398A1 (en) * 2014-02-18 2015-08-20 Harman International Industries, Inc. Generating an augmented view of a location of interest
DE102014208310A1 (en) * 2014-05-05 2015-11-05 Bayerische Motoren Werke Aktiengesellschaft Driver assistance system for displaying an augmented reality
DE102015007246A1 (en) * 2015-06-05 2016-12-08 Audi Ag A method of operating a display system and display system for a motor vehicle
DE102016008231A1 (en) * 2016-07-05 2017-02-09 Daimler Ag Method and device for generating a virtual view from a vehicle

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019209590A1 (en) * 2019-07-01 2021-01-07 Zf Friedrichshafen Ag Method for improving the field of vision of a driver of a vehicle
DE102019209590B4 (en) * 2019-07-01 2021-04-01 Zf Friedrichshafen Ag Method for improving the field of vision of a driver of a vehicle

Also Published As

Publication number Publication date
DE102017129214B4 (en) 2024-01-18

Similar Documents

Publication Publication Date Title
EP3298474B1 (en) Method for operating a head-mounted display in a motor vehicle, and system comprising a head-mounted display
EP3394708B1 (en) Method for operating a virtual reality system, and virtual reality system
EP3084564B1 (en) Device and method for navigating within a menu for controlling a vehicle, and selecting a menu entry from the menu
EP2986225B1 (en) Method for determining if a vehicle occupant is aware of relevant objects in the surroundings of the vehicle
DE102012219280A1 (en) Driver assistance system for motor car, has evaluating device selecting and displaying information of objects located outside of vehicle through display device in response to detected eye and pointing gesture of hand and/or finger of person
DE102012218837A1 (en) Method for displaying a representation on head-up display or head-mounted display e.g. LCD in passenger car, involves determining representation that is to-be-superimposed from view of user in environment, and assigning representation
EP2987057A1 (en) Method for selecting an information source from a plurality of information sources for display on a display of data spectacles
DE102014211803A1 (en) Augmented reality system for a motor vehicle
WO2019037905A1 (en) Method for operating an assistance system for a vehicle and assistance system
EP3231668A1 (en) Vehicle, in particular commercial vehicle, with a mirror replacement system
DE102016214046A1 (en) Method for operating a driver assistance system with data glasses and a display system with data glasses
DE102014009302A1 (en) Method for operating a virtual reality glasses and system with a virtual reality glasses
EP3794927A1 (en) Agricultural machine
WO2016165799A1 (en) Method for operating virtual reality goggles and system comprising virtual reality goggles
DE102014214088A1 (en) Driver information system in a vehicle
DE102014009608A1 (en) Operation of AR glasses in the motor vehicle
DE102014009299A1 (en) Method for operating a virtual reality glasses and system with a virtual reality glasses
DE102013013166A1 (en) Car with head-up display and associated gesture operation
DE102017129214A1 (en) System and method for improving a field of vision
DE102012006679A1 (en) Method for detecting and displaying vehicle environment of vehicle, involves detecting image of vehicle environment by camera device, where vehicle is moved by retention of driving condition
DE102017221317A1 (en) Method and device for operating a data glasses in a motor vehicle
DE102015007131B4 (en) A method of operating a display system and display system
WO2017207094A1 (en) Signal device for a vehicle, in particular a motor vehicle, and method for operating a signal device of said type
DE102016225262A1 (en) Method and device for operating a display system with data glasses
DE102016102808A1 (en) Method for controlling a sighting device arranged to be directionally arranged on a vehicle

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R081 Change of applicant/patentee

Owner name: GRAMMER AKTIENGESELLSCHAFT, DE

Free format text: FORMER OWNER: GRAMMER AG, 92224 AMBERG, DE

R082 Change of representative

Representative=s name: HANNKE BITTNER & PARTNER, PATENT- UND RECHTSAN, DE

R016 Response to examination communication
R018 Grant decision by examination section/examining division