DE102016225710A1 - Method for operating an autonomous vehicle - Google Patents

Method for operating an autonomous vehicle Download PDF

Info

Publication number
DE102016225710A1
DE102016225710A1 DE102016225710.2A DE102016225710A DE102016225710A1 DE 102016225710 A1 DE102016225710 A1 DE 102016225710A1 DE 102016225710 A DE102016225710 A DE 102016225710A DE 102016225710 A1 DE102016225710 A1 DE 102016225710A1
Authority
DE
Germany
Prior art keywords
output
virtual reality
vehicle
reality glasses
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102016225710.2A
Other languages
German (de)
Inventor
Alexander Otte
Simon Weissenmayer
Johannes Schild
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102016225710.2A priority Critical patent/DE102016225710A1/en
Publication of DE102016225710A1 publication Critical patent/DE102016225710A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/31—Virtual images
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Betreiben eines autonomen Fahrzeugs, das über ein Ausgabemittel zur Ausgabe von Informationen an einen Fahrer des Fahrzeugs und eine Schnittstelle zum Aufbau einer Verbindung mit einer Virtual-Reality-Brille verfügt, wobei ein Ausgabesignal mittels der Schnittstelle von der Virtual-Reality-Brille an das Ausgabemittel übertragen wird und durch das Ausgabemittel ausgegeben wird.The invention relates to a method for operating an autonomous vehicle, which has an output device for outputting information to a driver of the vehicle and an interface for establishing a connection with a virtual reality goggle, wherein an output signal is transmitted by the interface of the virtual Reality glasses is transmitted to the output means and output by the output means.

Description

Stand der TechnikState of the art

Autonome bzw. hochautomatisierte Fahrzeuge können immer mehr Fahrsituationen selbständig beherrschen, ohne dass eine ständige Überwachung durch den Fahrer notwendig ist. So wird es in näherer Zukunft möglich sein, dass der Fahrer über längere Strecken während der Fahrt arbeitet oder anderweitig beschäftigt ist. Sobald der Fahrer die Überwachung oder das Steuern des Fahrzeugs übernehmen muss, weist das Fahrzeug den Fahrer visuell oder akustisch darauf hin.Autonomous or highly automated vehicles can control more and more driving situations independently, without the need for constant monitoring by the driver. So it will be possible in the near future that the driver works long distances while driving or is otherwise busy. As soon as the driver has to undertake the monitoring or the steering of the vehicle, the vehicle informs the driver visually or acoustically.

Auf dem Weg zum autonomen Fahren ist davon auszugehen, dass dieses zunächst in Form eines hochautomatisierten Fahrens, beispielsweise auf Autobahnabschnitten stattfindet. Fahrten auf Autobahnabschnitten zeichnen sich durch relativ wenige Fahrmanöver bei gleichzeitig durch Sensoren gut erkennbare Infrastruktur aus. Es ist daher davon auszugehen, dass in naher Zukunft hochautomatisierte Fahrzeuge beispielsweise durch einen Fahrer auf eine Autobahn aufgefahren werden und sobald der Autobahnabschnitt befahren werden soll, in einen hochautomatisierten Fahrmodus übergehen. Das bedeutet, dass der Fahrer bis zum Erreichen einer Autobahnabfahrt nicht zum Steuern des Fahrzeugs benötigt wird, so dass der Fahrer sich anderweitig beschäftigen kann. Es ist davon auszugehen, dass insbesondere Berufspendler längere Fahrten auf Autobahnen nutzen werden, um im eigenen Fahrzeug zu arbeiten oder Medien zu konsumieren.On the way to autonomous driving, it can be assumed that this first takes place in the form of highly automated driving, for example on motorway sections. Rides on motorway sections are characterized by relatively few driving maneuvers with at the same time easily identifiable by sensors infrastructure. It is therefore to be assumed that in the near future highly automated vehicles, for example, will be driven onto a highway by a driver and, as soon as the motorway section is to be used, pass into a highly automated driving mode. This means that the driver is not required to control the vehicle until reaching a motorway exit, so that the driver can otherwise occupy himself. It is expected that commuters in particular will use longer trips on motorways to work in their own vehicle or to consume media.

Ein weiteres zukunftsträchtiges Thema ist die Wiedergabe von Medien über Virtual-Reality-Brillen. Eine Verknüpfung dieser beiden Zukunftsthemen ist naheliegend und wird dazu führen, dass Fahrzeugführer während längerer Autobahnfahrten, die automatisch bzw. autonom vom Fahrzeug durchgeführt werden, eine Virtual-Reality-Brille nutzen, um zu arbeiten oder Medien zu konsumieren.Another promising topic is the reproduction of media via virtual reality glasses. Linking these two issues of the future is obvious and will result in drivers using virtual reality goggles to work or consume media during long highway rides that are automatically or autonomously performed by the vehicle.

Aus Sicherheitsgründen muss der Fahrer jederzeit auf Warnhinweise des Fahrzeugs reagieren können, beispielsweise dann, wenn die Sensorik des Fahrzeugs erkennt, dass ein Eingreifen des Fahrers unmittelbar bevorstehend benötigt wird. In diesem Fall besteht die Gefahr, dass der Fahrer, der eine Virtual-Reality-Brille verwendet, den Warnhinweis des Fahrzeugs nicht wahrnimmt.For safety reasons, the driver must be able to react at all times to warnings of the vehicle, for example, when the sensor of the vehicle detects that intervention by the driver is imminently needed. In this case, there is a risk that the driver using virtual reality glasses does not notice the warning of the vehicle.

Es ist daher Aufgabe der vorliegenden Erfindung, ein Verfahren bereitzustellen, das einem Fahrer das Verwenden einer Virtual-Reality-Brille in einem autonomen bzw. hochautomatisierten Fahrzeug erlaubt, wobei der Fahrer trotzdem Warnhinweise des Fahrzeugs wahrnehmen kann.It is therefore an object of the present invention to provide a method that allows a driver to use a virtual reality glasses in an autonomous or highly automated vehicle, wherein the driver can still perceive warnings of the vehicle.

Offenbarung der ErfindungDisclosure of the invention

Das erfindungsgemäße Verfahren zum Betreiben eines autonomen Fahrzeugs, das über ein Ausgabemittel zur Ausgabe der Informationen an einen Fahrer des Fahrzeugs und eine Schnittstelle zum Aufbau einer Verbindung mit einer Virtual-Reality-Brille verfügt, hat den Vorteil, dass ein Ausgabesignal mittels der Schnittstelle von der Virtual-Reality-Brille an die Ausgabemittel übertragen wird und durch das Ausgabemittel ausgegeben wird.The inventive method for operating an autonomous vehicle, which has an output means for outputting the information to a driver of the vehicle and an interface for establishing a connection with a virtual reality glasses, has the advantage that an output signal by means of the interface of the Virtual reality glasses is transmitted to the output means and output by the output means.

Unter autonomem Fahrzeug im Sinne der vorliegenden Erfindung sind dabei auch Fahrzeuge zu verstehen, die lediglich für eine begrenzte Zeitspanne autonom fahren, beispielsweise beim Befahren eines Autobahnabschnitts.For the purposes of the present invention, an autonomous vehicle is also to be understood as vehicles which drive autonomously only for a limited period of time, for example when driving on a motorway section.

Vorteilhaft ist, wenn die Ausgabe des Ausgabesignals unterbrochen wird, um ein Sicherheitssignal mittels des Ausgabemittels auszugeben.It is advantageous if the output of the output signal is interrupted in order to output a safety signal by means of the output means.

Vorteilhaft ist, wenn es sich bei dem Sicherheitssignal um ein Signal handelt, das den Fahrer des autonomen Fahrzeugs zur Übernahme einer Kontrolle über das Fahrzeug auffordert.It is advantageous if the safety signal is a signal that prompts the driver of the autonomous vehicle to take control of the vehicle.

Vorteilhaft ist, wenn das Fahrzeug zusätzlich zur Ausgabe des Sicherheitssignals mittels der Ausgabemittel das Sicherheitssignal zur Ausgabe mittels Brillenausgabemitteln der Virtual-Reality-Brille an die Virtual-Reality-Brille überträgt. Durch eine gleichzeitige Ausgabe des Sicherheitssignals durch die fahrzeugeigenen Ausgabemittel und die Brillenausgabemittel wird die Wahrscheinlichkeit einer Wahrnehmung durch den Fahrer wesentlich vergrößert.It is advantageous if the vehicle in addition to the output of the security signal by means of the output means transmits the security signal for output by means of spectacle output means of virtual reality glasses to the virtual reality glasses. By simultaneously outputting the safety signal by the on-vehicle output means and the eyeglass output means, the probability of driver perception is substantially increased.

Vorteilhaft ist, wenn es sich bei dem Brillenausgabemittel um einen Lautsprecher der Virtual-Reality-Brille handelt. Der Lautsprecher der Virtual-Reality-Brille ist in vorteilhafter Weiterbildung Teil eines Kopfhörers. Eine Virtual-Reality-Brille im Sinne der vorliegenden Erfindung umfasst daher Virtual-Reality-Brillen, die lediglich über ein Display verfügen, aber auch Brillen, die über ein Display und zusätzlich einen Kopfhörer verfügen. Das erfindungsgemäße Verfahren kann z. B. auch auf Virtual-Reality-Brillen, die in Form eines Helms mit innenliegenden Kopfhörern und einem Display, das ähnlich einem Visier vor den Augen eines Trägers des Helmes angeordnet ist, verwendet werden.It is advantageous if the eyeglass output means is a loudspeaker of the virtual reality glasses. The speaker of the virtual reality glasses is part of a headphone in an advantageous development. A virtual reality glasses in the context of the present invention therefore includes virtual reality glasses that have only a display, but also glasses that have a display and in addition a headphone. The inventive method can, for. As well as on virtual reality glasses, which are in the form of a helmet with internal headphones and a display, which is similar to a visor in front of the eyes of a wearer of the helmet, are used.

Vorteilhaft ist, wenn zusätzlich zur Ausgabe des Sicherheitssignals durch das Ausgabemittel ein Warnhinweis auf einem Display der Virtual-Reality-Brille angezeigt wird. Der Fahrer des Fahrzeugs wird in diesem Fall nicht nur akustisch, sondern auch optisch gewarnt und gegebenenfalls darauf hingewiesen, dass er die Kontrolle über das Fahrzeug übernehmen muss. It is advantageous if in addition to the output of the security signal by the output means a warning is displayed on a display of the virtual reality glasses. The driver of the vehicle is warned in this case not only acoustically, but also visually and possibly advised that he must take control of the vehicle.

Vorteilhaft ist, wenn zusätzlich zur Ausgabe des Sicherheitssignals durch das Ausgabemittel auf einem Display der Virtual-Reality-Brille ein Bild einer Kamera der Virtual-Reality-Brille wiedergegeben wird. Besonders vorteilhaft ist, wenn ein Bild einer Kamera, die derart an der Virtual-Reality-Brille angeordnet ist, dass sie ein Bild der Umgebung aufnimmt, das einem Sichtfeld des Trägers der Virtual-Reality-Brille entspricht, wiedergegeben wird. Somit kann der Fahrer bzw. Träger der Virtual-Reality-Brille augenblicklich ein freies Sichtfeld auf das Innere des Fahrzeugs bzw. die Fahrsituation erhalten, so dass er unmittelbar die Kontrolle über das Fahrzeug übernehmen kann, ohne die Virtual-Reality-Brille absetzen zu müssen.It is advantageous if in addition to the output of the security signal by the output means on a display of the virtual reality glasses an image of a camera of the virtual reality glasses is displayed. It is particularly advantageous if an image of a camera, which is arranged on the virtual reality glasses in such a way that it takes an image of the environment, which corresponds to a field of view of the wearer of the virtual reality glasses, is reproduced. Thus, the driver or wearer of the virtual reality glasses can immediately get a clear field of view on the interior of the vehicle or the driving situation, so that he can take control of the vehicle directly without having to sell the virtual reality glasses ,

Vorteilhaft ist, wenn es sich bei dem Ausgabemittel um ein akustisches Ausgabemittel, insbesondere einen Lautsprecher und bei dem Ausgabesignal um ein Audiosignal handelt. In diesem Fall wird ein Audiosignal, das von der Virtual-Reality-Brille, beispielsweise per integriertem Kopfhörer, an den Fahrer abgegeben werden soll, zunächst mittels der Schnittstelle an das Fahrzeug übertragen und von dem Fahrzeug mittels der bordeigenen akustischen Ausgabemittel, beispielsweise der Lautsprecher an der bordeigenen Audioanlage wiedergegeben. Der Fahrer des Fahrzeugs hat in diesem Fall den gleichen Klangeindruck, als würden die Audiosignale von den integrierten Lautsprechern der Virtual-Reality-Brille abgegeben.It is advantageous if the output device is an acoustic output device, in particular a loudspeaker, and the output signal is an audio signal. In this case, an audio signal, which is to be delivered by the virtual reality glasses, for example by integrated headphones, to the driver, first transmitted by the interface to the vehicle and from the vehicle by means of the on-board acoustic output means, such as the speaker the on-board audio system reproduced. The driver of the vehicle in this case has the same sound impression as if the audio signals were emitted from the integrated speakers of the virtual reality glasses.

Durch die Wiedergabe mittels der akustischen Ausgabemittel des Fahrzeugs ist es für eine Fahrzeugsteuerung allerdings möglich, die Ausgabe der akustischen Signale zu unterbrechen, beispielsweise um ein akustisches Sicherheitssignal abzusetzen. Somit kann auf einfache Art und Weise sichergestellt werden, dass der Fahrer des Fahrzeugs die durch das Fahrzeug abgegebenen akustischen Sicherheitssignale zur Kenntnis nimmt, auch wenn der Fahrer zum Zeitpunkt der Abgabe eine Virtual-Reality-Brille verwendet, die ebenfalls akustische Signale abgibt, da die akustischen Signale der Virtual-Reality-Brille jederzeit von der Fahrzeugsteuerung blockiert werden können.However, it is possible for a vehicle controller to interrupt the output of the acoustic signals by means of the acoustic output device of the vehicle, for example in order to set off an acoustic safety signal. Thus, it can be ensured in a simple manner that the driver of the vehicle takes note of the sound emitted by the vehicle acoustic safety signals, even if the driver uses a virtual reality glasses at the time of delivery, which also emits acoustic signals, as the acoustic signals of the virtual reality glasses can be blocked at any time by the vehicle control.

Vorteilhaft sind eine Vorrichtung, die eingerichtet ist, jeden Schritt des Verfahrens nach einem der vorangegangenen Ansprüche auszuführen, sowie ein Computerprogramm, das eingerichtet ist, jeden Schritt des erfindungsgemäßen Verfahrens auszuführen, insbesondere, wenn das Computerprogramm auf einer Recheneinheit abläuft.A device which is set up to carry out each step of the method according to one of the preceding claims and a computer program which is set up to carry out each step of the method according to the invention are advantageous, in particular if the computer program runs on an arithmetic unit.

Vorteilhaft sind ein Speichermedium, auf dem das erfindungsgemäße Computerprogramm gespeichert ist, sowie eine elektronische Steuereinheit, die das Speichermedium umfasst.Advantageously, a storage medium, on which the computer program according to the invention is stored, and an electronic control unit, which comprises the storage medium.

Alternativ oder zusätzlich kann vorgesehen sein, dass eine Bildinformation, die mittels des Displays der Virtual-Reality-Brille zur Anzeige gebracht werden soll, nicht von der Virtual-Reality-Brille berechnet wird, sondern von der Steuereinheit des Fahrzeugs. Die Bildinformationen werden mittels der Schnittstelle an das Display der Virtual-Reality-Brille übertragen und dort wiedergegeben. Somit kann ebenfalls sichergestellt werden, dass ein durch die Fahrzeugsteuerung abgegebener optischer Warnhinweis auf leicht erkennbare Art und Weise in das Blickfeld des Fahrers gelangt, beispielsweise dadurch, dass während der Anzeige des optischen Warnhinweises die Wiedergabe der Bildinformationen gestoppt wird und durch einen schwarzen Hintergrund ersetzt wird. Auch in diesem Fall ist es denkbar, ein mittels einer Kamera aufgenommenes Bild der Umgebung auf dem Display der Virtual-Reality-Brille wiederzugeben, das gleichzeitig von dem optischen Warnhinweis überlagert sein kann.Alternatively or additionally, it may be provided that image information which is to be displayed by means of the display of the virtual reality glasses is not calculated by the virtual reality glasses, but by the control unit of the vehicle. The image information is transmitted via the interface to the display of the virtual reality glasses and reproduced there. Thus, it can also be ensured that an optical warning issued by the vehicle control system enters the driver's field of vision in an easily recognizable manner, for example in that, during the display of the visual warning, the reproduction of the image information is stopped and replaced by a black background , In this case, too, it is conceivable to reproduce an image of the surroundings taken on the display of the virtual reality goggles by means of a camera, which can be superimposed on the visual warning at the same time.

Alternativ oder zusätzlich kann vorgesehen sein, dass für den Fall, dass die Virtual-Reality-Brille über keinen eigenen Stromspeicher verfügt, eine Stromversorgung der Virtual-Reality-Brille durch das Fahrzeug unterbrochen wird. Das Verschwinden des Bildes auf dem Display der Virtual-Reality-Brille ersetzt in diesem Fall den optischen Warnhinweis.Alternatively or additionally, it may be provided that in the event that the virtual reality glasses does not have their own power storage, a power supply of the virtual reality glasses is interrupted by the vehicle. The disappearance of the image on the display of the virtual reality glasses replaced in this case the visual warning.

Nachfolgend wird ein Ausführungsbeispiel der vorliegenden Erfindung anhand der beiliegenden Zeichnung näher erläutert. Dabei zeigt:Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings. Showing:

Figurenlistelist of figures

  • 1 eine schematische Darstellung eines Fahrzeugs, das zur Durchführung eines Ausführungsbeispiels des erfindungsgemäßen Verfahrens eingerichtet ist. 1 a schematic representation of a vehicle which is adapted to carry out an embodiment of the method according to the invention.

1 zeigt eine schematische Darstellung eines Fahrzeugs (10), das zur Durchführung eines Ausführungsbeispiels des erfindungsgemäßen Verfahrens eingerichtet ist. 1 zeigt ferner eine schematische Darstellung einer Virtual-Reality-Brille (30), die über ein Display (32) und Brillenausgabemittel in Form eines Lautsprechers (34) verfügt, der wiederum Teil eines Kopfhörers sein kann. Die Virtual-Reality-Brille (30) verfügt außerdem über eine Kamera (36), die derart an der Virtual-Reality-Brille (30) angeordnet ist, dass ein durch die Kamera aufgenommenes Bild in Bezug auf eine räumlicher Ausdehnung, wie z.B. einem Sehwinkel, dem Bild entspricht, dass ein Träger der Virtual-Reality-Brille sehen würde, wenn die Virtual-Reality-Brille durchsichtig wäre. Die Virtual-Reality-Brille (30) steht über eine Schnittstelle (26) mit einer Steuereinheit (20) des Fahrzeugs (10) in Verbindung. 1 shows a schematic representation of a vehicle ( 10 ), which is set up to carry out an embodiment of the method according to the invention. 1 further shows a schematic representation of a virtual reality glasses ( 30 ), which have a display ( 32 ) and spectacle output means in the form of a loudspeaker ( 34 ), which in turn can be part of a headphone. The virtual reality glasses ( 30 ) also has a camera ( 36 ), which are so on the virtual reality glasses ( 30 ) that an image taken by the camera with respect to a spatial extent such as a visual angle corresponds to the image that a wearer of the virtual reality glasses would see if the virtual reality glasses were transparent. The virtual reality glasses ( 30 ) is via an interface ( 26 ) with a control unit ( 20 ) of the vehicle ( 10 ) in connection.

Die elektronische Steuereinheit (20) umfasst ein Speichermedium (22). Das Fahrzeug (10), bei dem es sich insbesondere um ein autonomes Fahrzeug (10) handelt, verfügt außerdem über ein Ausgabemittel in Form eines Lautsprechers (24), der über eine Signalleitung mit der elektronischen Steuereinheit (20) in Verbindung steht.The electronic control unit ( 20 ) comprises a storage medium ( 22 ). The vehicle ( 10 ), which is in particular an autonomous vehicle ( 10 ) also has an output means in the form of a loudspeaker ( 24 ), which is connected via a signal line to the electronic control unit ( 20 ).

Sobald sich das Fahrzeug (10) in einem autonomen Fahrbetrieb befindet, kann ein Fahrer des Fahrzeugs (10) die Virtual-Reality-Brille (30) aufsetzen und verwenden. Das Display (32) kann dabei beliebige Inhalte wiedergeben. Die Virtual-Reality-Brille (30) steht über die Schnittstelle (26) mit der elektronischen Steuereinheit (20) in Verbindung. Im Rahmen des Verbindungsaufbaus zwischen der Virtual-Reality-Brille (30) und der elektronischen Steuereinheit (20) wird eine direkte Ausgabe eines Audiosignals durch die Kopfhörer (34) unterbunden. Stattdessen werden auszugebende Audiosignale über die Schnittstelle (26) von der Virtual-Reality-Brille (30) an die elektronische Steuereinheit (20) übermittelt und von dort mittels der Signalleitung an den Lautsprecher (24) übertragen und wiedergegeben.As soon as the vehicle ( 10 ) is in an autonomous driving operation, a driver of the vehicle ( 10 ) the virtual reality glasses ( 30 ) and use. The display ( 32 ) can play any content. The virtual reality glasses ( 30 ) is via the interface ( 26 ) with the electronic control unit ( 20 ) in connection. As part of the connection setup between the virtual reality glasses ( 30 ) and the electronic control unit ( 20 ) is a direct output of an audio signal through the headphones ( 34 ) prevented. Instead, audio signals are output via the interface ( 26 ) of the virtual reality glasses ( 30 ) to the electronic control unit ( 20 ) and from there by means of the signal line to the speaker ( 24 ) and reproduced.

Während des autonomen Fahrbetriebs des Fahrzeugs (10) überwacht dieses permanent seinen eigenen Betriebszustand, um gegebenenfalls ein Sicherheitssignal, beispielsweise eine Warnung an den Fahrer des Fahrzeugs (10) ausgeben zu können, wobei das Sicherheitssignal die Informationen beinhaltet, dass der Fahrer des Fahrzeugs (10) in einer unmittelbar bevorstehenden Situation die Kontrolle über das Fahrzeug (10) übernehmen muss. Dies kann beispielsweise dadurch bedingt sein, dass das Fahrzeug (10) in einen unsicheren Betriebszustand übergeht, der den Eingriff des Fahrers erforderlich macht oder dadurch, dass das Fahrzeug (10) beispielsweise einen Autobahnabschnitt verlässt, so dass ein für einen autonomen Fahrbetrieb des Fahrzeugs (10) vorgesehener Streckenabschnitt beendet ist.During the autonomous driving of the vehicle ( 10 ) permanently monitors its own operating state in order, if necessary, to provide a safety signal, for example a warning to the driver of the vehicle ( 10 ), wherein the safety signal includes the information that the driver of the vehicle ( 10 ) in an imminent situation, control of the vehicle ( 10 ) has to take over. This may be due, for example, to the fact that the vehicle ( 10 ) changes to an unsafe operating condition that requires the intervention of the driver or that the vehicle ( 10 ) Leaves, for example, a motorway section, so that one for an autonomous driving operation of the vehicle ( 10 ) provided route section is completed.

Die elektronische Steuereinheit (20) unterbricht die Ausgabe des Audiosignals der Virtual-Reality-Brille (30), um mittels des Lautsprechers (24) das Sicherheitssignal in Form einer akustischen Warnung auszugeben. Gleichzeitig übermittelt die elektronische Steuereinheit (20) über die Schnittstelle (26) ein Signal an die Virtual-Reality-Brille (30), das das Display (32) der Virtual-Reality-Brille (30) zur Anzeige einer optischen Warnung veranlasst. Das Sicherheitssignal in Form einer akustischen Warnung wird mittels der Schnittstelle (26) ebenfalls durch die Kopfhörer (34) der Virtual-Reality-Brille (30) wiedergegeben. Zusätzlich zu dem optischen Warnhinweis zeigt das Display (32) der Virtual-Reality-Brille (30) ein Bild der Kamera (36), die derart an der Virtual-Reality-Brille (30) angeordnet ist, dass das durch die Kamera aufgenommene Bild einem Sichtfeld des Fahrers entspricht, der die Virtual-Reality-Brille (30) trägt.The electronic control unit ( 20 ) interrupts the output of the audio signal of the virtual reality glasses ( 30 ) by means of the loudspeaker ( 24 ) output the safety signal in the form of an audible warning. At the same time, the electronic control unit ( 20 ) via the interface ( 26 ) send a signal to the virtual reality glasses ( 30 ), the display ( 32 ) of the virtual reality glasses ( 30 ) to display an optical warning. The safety signal in the form of an acoustic warning is transmitted by means of the interface ( 26 ) also through the headphones ( 34 ) of the virtual reality glasses ( 30 ). In addition to the visual warning, the display shows ( 32 ) of the virtual reality glasses ( 30 ) a picture of the camera ( 36 ), which are so on the virtual reality glasses ( 30 ) is arranged so that the image taken by the camera corresponds to a field of view of the driver, the virtual reality glasses ( 30 ) wearing.

Claims (12)

Verfahren zum Betreiben eines autonomen Fahrzeugs (10), das über ein Ausgabemittel (24) zur Ausgabe von Informationen an einen Fahrer des Fahrzeugs (10) und eine Schnittstelle (26) zum Aufbau einer Verbindung mit einer Virtual-Reality-Brille (30) verfügt, dadurch gekennzeichnet, dass ein Ausgabesignal mittels der Schnittstelle (26) von der Virtual-Reality-Brille (30) an das Ausgabemittel (24) übertragen wird und durch das Ausgabemittel (24) ausgegeben wird.A method of operating an autonomous vehicle (10) having output means (24) for outputting information to a driver of the vehicle (10) and an interface (26) for establishing communication with a virtual reality goggle (30) characterized in that an output signal is transmitted by the interface (26) from the virtual reality goggles (30) to the output means (24) and output by the output means (24). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Ausgabe des Ausgabesignals unterbrochen wird, um ein Sicherheitssignal mittels des Ausgabemittels (24) auszugeben.Method according to Claim 1 characterized in that the output of the output signal is interrupted to output a security signal by means of the output means (24). Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass es sich bei dem Sicherheitssignal um ein Signal handelt, dass den Fahrer des autonomen Fahrzeugs (10) zur Übernahme einer Kontrolle über das Fahrzeug (10) auffordert.Method according to Claim 2 , characterized in that the safety signal is a signal requesting the driver of the autonomous vehicle (10) to take control of the vehicle (10). Verfahren nach einem der Ansprüche 2 oder 3, dadurch gekennzeichnet, dass das Fahrzeug (10) zusätzlich zur Ausgabe des Sicherheitssignals mittels der Ausgabemittel (24) das Sicherheitssignal zur Ausgabe mittels Brillenausgabemitteln (34) der Virtual-Reality-Brille (30) an die Virtual-Reality-Brille (30) überträgt.Method according to one of Claims 2 or 3 , characterized in that the vehicle (10) in addition to the output of the security signal by means of the output means (24) transmits the security signal for output by means of spectacle output means (34) of the virtual reality glasses (30) to the virtual reality glasses (30) , Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass es sich bei dem Brillenausgabemittel (24) um einen Lautsprecher (24) der Virtual-Reality-Brille (30) handelt.Method according to Claim 4 , characterized in that the spectacle output means (24) is a loudspeaker (24) of the virtual reality spectacles (30). Verfahren nach einem der Ansprüche 2 bis 5, dadurch gekennzeichnet, dass zusätzlich zur Ausgabe des Sicherheitssignals durch das Ausgabemittel (24) ein Warnhinweis auf einem Display (32) der Virtual-Reality-Brille (30) angezeigt wird.Method according to one of Claims 2 to 5 , characterized in that in addition to the output of the security signal by the output means (24) a warning on a display (32) of the virtual reality glasses (30) is displayed. Verfahren nach einem der Ansprüche 2 bis 5, dadurch gekennzeichnet, dass zusätzlich zur Ausgabe des Sicherheitssignals durch das Ausgabemittel (24) auf einem Display (32) der Virtual-Reality-Brille (30) ein Bild einer Kamera (36) der Virtual-Reality-Brille (30) wiedergegeben wird.Method according to one of Claims 2 to 5 , characterized in that in addition to the output of the security signal by the output means (24) on a display (32) of the virtual reality glasses (30), an image of a camera (36) of the virtual reality glasses (30) is reproduced. Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass es sich bei dem Ausgabemittel (24) um ein akustisches Ausgabemittel (24), insbesondere einen Lautsprecher (24), und bei dem Ausgabesignal um ein Audiosignal handelt.Method according to one of the preceding claims, characterized in that the output means (24) is an acoustic output means (24), in particular a loudspeaker (24), and the output signal is an audio signal. Vorrichtung, die eingerichtet ist, jeden Schritt des Verfahrens nach einem der vorangegangenen Ansprüche auszuführen. Apparatus adapted to carry out each step of the method according to any one of the preceding claims. Computerprogramm, das eingerichtet ist, jeden Schritt des Verfahrens nach einem der Ansprüche 1 bis 8 auszuführen.Computer program that is set up, each step of the procedure according to one of Claims 1 to 8th perform. Speichermedium (22), auf dem das Computerprogramm nach Anspruch 10 gespeichert ist.Storage medium (22) on which the computer program Claim 10 is stored. Elektronische Steuereinheit (20), die das Speichermedium nach Anspruch 11 umfasst.Electronic control unit (20), which the storage medium after Claim 11 includes.
DE102016225710.2A 2016-12-21 2016-12-21 Method for operating an autonomous vehicle Pending DE102016225710A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102016225710.2A DE102016225710A1 (en) 2016-12-21 2016-12-21 Method for operating an autonomous vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102016225710.2A DE102016225710A1 (en) 2016-12-21 2016-12-21 Method for operating an autonomous vehicle

Publications (1)

Publication Number Publication Date
DE102016225710A1 true DE102016225710A1 (en) 2018-06-21

Family

ID=62251592

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102016225710.2A Pending DE102016225710A1 (en) 2016-12-21 2016-12-21 Method for operating an autonomous vehicle

Country Status (1)

Country Link
DE (1) DE102016225710A1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19743024A1 (en) * 1997-09-29 1999-04-08 Daimler Chrysler Ag Road vehicle with automatic guidance and communication system
DE102010016113A1 (en) * 2010-03-24 2011-09-29 Krauss-Maffei Wegmann Gmbh & Co. Kg Method for training a crew member of a particular military vehicle
DE102012201513A1 (en) * 2012-02-02 2013-08-08 Bayerische Motoren Werke Aktiengesellschaft Warning device in a motor vehicle for warning a driver
DE102014220001A1 (en) * 2013-10-10 2015-04-16 Ford Global Technologies, Llc Autonomous vehicle media control
DE102014220053A1 (en) * 2013-10-03 2015-07-23 Honda Motor Co., Ltd. SYSTEM AND METHOD FOR DYNAMIC VEHICLE INTERNAL VIRTUAL REALITY
US20160027099A1 (en) * 2014-07-26 2016-01-28 Audi Ag Presentation device for carrying out a product presentation
DE102016120427A1 (en) * 2015-10-26 2017-04-27 Active Knowledge Ltd. Use video review to alert an occupant of a vehicle of an impending event that will cause a sudden decrease in ride comfort

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19743024A1 (en) * 1997-09-29 1999-04-08 Daimler Chrysler Ag Road vehicle with automatic guidance and communication system
DE102010016113A1 (en) * 2010-03-24 2011-09-29 Krauss-Maffei Wegmann Gmbh & Co. Kg Method for training a crew member of a particular military vehicle
DE102012201513A1 (en) * 2012-02-02 2013-08-08 Bayerische Motoren Werke Aktiengesellschaft Warning device in a motor vehicle for warning a driver
DE102014220053A1 (en) * 2013-10-03 2015-07-23 Honda Motor Co., Ltd. SYSTEM AND METHOD FOR DYNAMIC VEHICLE INTERNAL VIRTUAL REALITY
DE102014220001A1 (en) * 2013-10-10 2015-04-16 Ford Global Technologies, Llc Autonomous vehicle media control
US20160027099A1 (en) * 2014-07-26 2016-01-28 Audi Ag Presentation device for carrying out a product presentation
DE102016120427A1 (en) * 2015-10-26 2017-04-27 Active Knowledge Ltd. Use video review to alert an occupant of a vehicle of an impending event that will cause a sudden decrease in ride comfort

Similar Documents

Publication Publication Date Title
DE112016005784B4 (en) Visual perception assistance system and visual perception target object detection system
DE102007045932B4 (en) Method and device for warning a driver of a vehicle
DE102017200149B4 (en) Method for learning and checking driving behavior of a vehicle driver and vehicle
DE102014019579B4 (en) System and method for operating a display device
DE102015201456B4 (en) Method and system for issuing a warning message in a vehicle
EP3820727B1 (en) Method for operating a display device worn on the head by a vehicle occupant of a motor vehicle, and display system for a motor vehicle
DE102017110283A1 (en) CONTROLLING FUNCTIONS AND EXPENSES OF AUTONOMOUS VEHICLES BASED ON A POSITION AND ATTENTION FROM OCCUPANTS
DE102013001326B4 (en) Car with Car-to-X functionality
DE102008038816A1 (en) Method for backup of operation of vehicle, involves detecting condition of driver of vehicle with respect to condition of vehicle
DE102014000803B4 (en) Vehicle, display system and method for displaying traffic-related information
DE102014214516A1 (en) Apparatus and method for reproducing data in augmented reality for an occupant of a vehicle
DE102015116280B4 (en) vehicle information presentation device
DE102015117224A1 (en) Systems and methods for use with a vehicle incorporating an eye tracking device
DE102013226336A1 (en) Communication between autonomous vehicles and people
DE102015101183A1 (en) Method for operating a driver assistance system of a motor vehicle with display of environmental data in an autonomous driving mode, driver assistance system and motor vehicle
DE102017215406A1 (en) A method, mobile user device, computer program for generating visual information for at least one occupant of a vehicle
DE102016207353A1 (en) Method and device for detecting a use of an electronic device by a driver for a vehicle
DE102019201407A1 (en) Method and device for controlling a driver's attention
EP3695267A1 (en) Method for operating a head-mounted electronic display device and display system for displaying a virtual content
JP2015193317A (en) information display system
DE102017211028A1 (en) A method of warning a passenger in a vehicle
DE102015210780A1 (en) Method and control unit for communication between an autonomous vehicle and an occupant
DE102017215404A1 (en) Method, mobile user device, system, computer program for controlling a mobile user device of an occupant of a vehicle
DE102014226187A1 (en) Communication by means of a puff of air
EP4028819B1 (en) Method for operating a head-mounted display apparatus in a motor vehicle, control device, and head-mounted display apparatus

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R002 Refusal decision in examination/registration proceedings
R125 Request for further processing filed
R126 Request for further processing allowed