DE102015207337B4 - Method and device for entertaining at least one occupant of a motor vehicle - Google Patents

Method and device for entertaining at least one occupant of a motor vehicle Download PDF

Info

Publication number
DE102015207337B4
DE102015207337B4 DE102015207337.8A DE102015207337A DE102015207337B4 DE 102015207337 B4 DE102015207337 B4 DE 102015207337B4 DE 102015207337 A DE102015207337 A DE 102015207337A DE 102015207337 B4 DE102015207337 B4 DE 102015207337B4
Authority
DE
Germany
Prior art keywords
occupant
data glasses
processor
vehicle
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102015207337.8A
Other languages
German (de)
Other versions
DE102015207337A1 (en
Inventor
Ronny Garz
Johannes Tümler
Jan Jakobs
Eduard Jundt
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102015207337.8A priority Critical patent/DE102015207337B4/en
Publication of DE102015207337A1 publication Critical patent/DE102015207337A1/en
Application granted granted Critical
Publication of DE102015207337B4 publication Critical patent/DE102015207337B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A63F13/5372—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen for tagging characters, objects or locations in the game scene, e.g. displaying a circle under the character controlled by the player
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/51—Server architecture
    • A63F2300/516—Server architecture connected to a local network, e.g. in a plane, hotel
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Verfahren zur Unterhaltung mindestens eines Insassen (31, 32) eines Fahrzeuges (1, 2), mittels mindestens einer Datenbrille (11), die eine Anzeigeeinheit (19) im Blickfeld des Insassen (31, 32) bildet, und mindestens einem Prozessor (12, 21), wobei der mindestens eine Prozessor (12, 21) und die Datenbrille (11) über eine Kommunikationsverbindung miteinander verbunden sind, wobei der mindestens eine Prozessor (12, 21) Daten zur Datenbrille (11) überträgt, die auf der Anzeigeeinheit (19) der Datenbrille (11) dargestellt werden, dadurch gekennzeichnet, dass mindestens ein zweiter Insasse (32, 31) eines Fahrzeugs (2, 1) eine Datenbrille (11) aufweist, wobei mittels einer Sensorik (18) jeweils mindestens eine Interaktion eines Insassen (31, 32) erfasst wird, wobei die erfasste Interaktion des Insassen (31, 32) an den mindestens einen Prozessor (12, 21) übermittelt wird und mit einer Interaktion des anderen Insassen (32, 31) verknüpft wird.

Figure DE102015207337B4_0000
Method for entertaining at least one occupant (31, 32) of a vehicle (1, 2) by means of at least one pair of data glasses (11) which forms a display unit (19) in the field of vision of the occupant (31, 32), and at least one processor (12, 21), wherein the at least one processor (12, 21) and the data glasses (11) are connected to one another via a communication connection, wherein the at least one processor (12, 21) transmits data to the data glasses (11) which are displayed on the display unit (19) of the data glasses (11), characterized in that at least one second occupant (32, 31) of a vehicle (2, 1) has data glasses (11), wherein at least one interaction of an occupant (31, 32) is recorded by means of a sensor system (18), wherein the recorded interaction of the occupant (31, 32) is transmitted to the at least one processor (12, 21) and is compared with an interaction of the other occupant (32, 31) is linked.
Figure DE102015207337B4_0000

Description

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Unterhaltung mindestens eines Insassen eines Kraftfahrzeugs.The invention relates to a method and a device for entertaining at least one occupant of a motor vehicle.

Die Unterhaltung von Insassen eines Kraftfahrzeugs nimmt einen immer höheren Stellenwert ein. Dabei kann das Kraftfahrzeug ein straßengeführtes Kraftfahrzeug wie beispielsweise ein PKW oder Bus sein, aber auch ein luft-, wasser- oder schienengebundenes Kraftfahrzeug sein.The entertainment of the occupants of a motor vehicle is becoming increasingly important. The motor vehicle can be a road-based vehicle such as a car or bus, but can also be an air, water or rail-based vehicle.

Hierzu sind verschiedene Ansätze bekannt.Various approaches are known for this.

Aus der US 2013/0083061 A1 ist ein Spielsystem für ein Kraftfahrzeug bekannt, bei dem mittels einer Kamera reale Bilder vom Umfeld des Kraftfahrzeugs aufgenommen werden und mit virtuellen Bildern verschmolzen werden (augmented reality image). Ein Fahrzeuginsasse kann sich dann auf einer entsprechenden Ein- und Ausgabeeinheit die augmented reality images darstellen lassen und als Spielvorgabe nutzen. Die Ein- und Ausgabeeinheit ist beispielsweise ein Tablet-Computer oder eine Spielkonsole. Diese Daten können auch an einen entfernten Spieler außerhalb des Kraftfahrzeugs, der beispielsweise zu Hause ist, übertragen werden.From the US 2013/0083061 A1 A game system for a motor vehicle is known in which real images of the vehicle's surroundings are recorded using a camera and merged with virtual images (augmented reality image). A vehicle occupant can then have the augmented reality images displayed on a corresponding input and output unit and use them as a game template. The input and output unit is, for example, a tablet computer or a game console. This data can also be transmitted to a remote player outside the vehicle, for example at home.

Aus der US 2014/0274400 A1 ist ein interaktives Spiel zwischen zwei Insassen in unterschiedlichen Fahrzeugen bekannt. Den beiden Insassen sind jeweils Spieleinrichtungen zugeordnet, die über ein drahtloses Netzwerk miteinander Daten austauschen. Dabei wird mindestens ein Spielparameter bestimmt, der abhängig ist vom Fahrverhalten eines der Fahrzeuge.From the US 2014/0274400 A1 is an interactive game between two passengers in different vehicles. The two passengers are each assigned game devices that exchange data with each other via a wireless network. At least one game parameter is determined that depends on the driving behavior of one of the vehicles.

Aus der EP 1 990 674 A1 oder der US 2013/0162639 A1 sind jeweils Datenbrillen (headmounted display system) für einen Fahrzeuginsassen, insbesondere den Kraftfahrzeugführer, bekannt, die eine Anzeigeeinheit im Blickfeld des Insassen bildet. Dabei können von einem Prozessor Daten zur Datenbrille übertragen werden, die dann zusätzlich im Blickfeld angezeigt werden. Diese Daten sind beispielsweise Navigationsdaten oder Informationen, die mittels einer Kamera aus der Umgebung gewonnen wurden. Zusätzlich wird auch in der US 2013/0162639 A1 vorgeschlagen, die Datenbrille für 2D- oder 3D-Videospiele zu verwenden. Die Datenbrille kann dabei mit integrierten Lautsprechern und Mikrofonen ausgebildet sein. Weiter wird auch offenbart, dass die Kopfposition erfasst wird und die Darstellung auf der Anzeigeeinheit der Datenbrille in Abhängigkeit der Kopfposition angepasst wird.From the EP 1 990 674 A1 or the US 2013/0162639 A1 Data glasses (head-mounted display system) are known for a vehicle occupant, in particular the driver, which forms a display unit in the occupant's field of vision. A processor can transmit data to the data glasses, which are then additionally displayed in the field of vision. This data is, for example, navigation data or information obtained from the environment using a camera. In addition, the US 2013/0162639 A1 It is proposed to use the data glasses for 2D or 3D video games. The data glasses can be designed with integrated loudspeakers and microphones. It is also disclosed that the head position is recorded and the representation on the display unit of the data glasses is adjusted depending on the head position.

Aus der DE 10 2013 210 746 A1 ist ein gattungsgemäßes Verfahren zur Unterhaltung mindestens eines Insassen eines Fahrzeugs mittels mindestens deiner Datenbrille bekannt. Dabei wird auch offenbart, dass mehr als ein Fahrzeuginsasse eine solche Datenbrille tragen kann. Ähnliche Verfahren sind aus der EP 1 990 674 A1 und der US 2011/0282130 A1 bekannt, wo mehrere Insassen Datenbrillen tragen können.From the EN 10 2013 210 746 A1 A generic method for entertaining at least one occupant of a vehicle using at least one pair of data glasses is known. It is also disclosed that more than one vehicle occupant can wear such data glasses. Similar methods are known from EP 1 990 674 A1 and the US 2011/0282130 A1 where several occupants can wear data glasses.

Der Erfindung liegt das technische Problem zugrunde, ein Verfahren zur Unterhaltung mindestens eines Insassen eines Kraftfahrzeugs zur Verfügung zu stellen, das vielfältigere Unterhaltungsmöglichkeiten bietet. Ein weiteres Problem ist die Schaffung einer Vorrichtung zur Unterhaltung mindestens eines Insassen eines Kraftfahrzeugs mit vielfältigeren Unterhaltungsmöglichkeiten.The invention is based on the technical problem of providing a method for entertaining at least one occupant of a motor vehicle, which method offers a wide range of entertainment options. A further problem is the creation of a device for entertaining at least one occupant of a motor vehicle with a wide range of entertainment options.

Die Lösung des technischen Problems ergibt sich durch ein Verfahren mit den Merkmalen des Anspruchs 1 sowie eine Vorrichtung mit den Merkmalen des Anspruchs 9. Weitere vorteilhafte Ausgestaltungen der Erfindung ergeben sich aus den Unteransprüchen.The solution to the technical problem results from a method having the features of claim 1 and a device having the features of claim 9. Further advantageous embodiments of the invention emerge from the subclaims.

Das Verfahren zur Unterhaltung mindestens eines Insassen eines Kraftfahrzeugs erfolgt mittels mindestens einer Datenbrille, die eine Anzeigeeinheit im Blickfeld des Insassen bildet, und mindestens einen Prozessor, wobei der mindestens eine Prozessor und die Datenbrille über eine Kommunikationsverbindung miteinander verbunden sind. Die Kommunikationsverbindung ist vorzugsweise drahtlos. Der mindestens eine Prozessor überträgt Daten zur Datenbrille, die auf der Anzeigeeinheit der Datenbrille dargestellt werden. Weiter weist mindestens ein zweiter Insasse eines Fahrzeugs eine Datenbrille auf, wobei mittels einer Sensorik jeweils mindestens eine Interaktion eines Insassen erfasst wird. Die erfasste Interaktion des Insassen wird an den mindestens einen Prozessor übermittelt und mit einer Interaktion des anderen Insassen verknüpft. Dies ermöglicht ein interaktives Spielen oder Austauschen von Informationen zwischen verschiedenen Insassen, wobei das interaktive Spielen oder Austauschen von Informationen in Echtzeit oder zeitlich verzögert erfolgen kann. Das Kraftfahrzeug ist vorzugsweise ein straßengeführtes Kraftfahrzeug, kann aber auch ein schienen-, luft- oder wassergeführtes Kraftfahrzeug sein. Der Prozessor kann dabei fahrzeugfest installiert sein oder aber Bestandteil eines mobilen Endgerätes wie beispielsweise ein Smartphone oder ein Tablet-Computer sein.The method for entertaining at least one occupant of a motor vehicle is carried out by means of at least one pair of data glasses, which form a display unit in the occupant's field of vision, and at least one processor, wherein the at least one processor and the data glasses are connected to one another via a communication connection. The communication connection is preferably wireless. The at least one processor transmits data to the data glasses, which is shown on the display unit of the data glasses. Furthermore, at least one second occupant of a vehicle has data glasses, wherein at least one interaction of an occupant is recorded by means of a sensor system. The recorded interaction of the occupant is transmitted to the at least one processor and linked to an interaction of the other occupant. This enables interactive gaming or exchanging of information between different occupants, wherein the interactive gaming or exchanging of information can take place in real time or with a time delay. The motor vehicle is preferably a road-going motor vehicle, but can also be a rail-, air- or water-going motor vehicle. The processor can be installed permanently in the vehicle or can be part of a mobile terminal such as a smartphone or a tablet computer.

Insbesondere kann der zweite Insasse sich in einem anderen Fahrzeug befinden, wobei sich in jedem Fahrzeug mindestens ein Prozessor befindet, wobei die beiden Prozessoren über eine drahtlose Kommunikationsverbindung miteinander verbunden sind. Dabei sei angemerkt, dass die drahtlose Kommunikationsverbindung zwischen den Prozessoren beispielsweise eine Car2Car-Verbindung nach IEEE-Norm oder eine Mobilfunkverbindung ist, wohingegen die Kommunikationsverbindung zwischen Prozessor und Datenbrille auch als IR- oder WLAN-Verbindung ausgebildet sein kann.In particular, the second occupant may be in a different vehicle, with at least one processor in each vehicle, the two processors being connected to each other via a wireless communication link. It should be noted that the wireless communication link between the processors for example, a Car2Car connection according to IEEE standard or a mobile phone connection, whereas the communication connection between the processor and the data glasses can also be designed as an IR or WLAN connection.

In einer Ausführungsform wird mittels der Sensorik mindestens die Blickrichtung des Insassen erfasst, d.h. die Blickrichtung stellt mindestens eine Interaktion dar. Dabei kann die Sensorik in die Datenbrille integriert sein oder aber eine im Fahrzeug installierte Sensorik, beispielsweise eine Kamera, sein. Auch eine Kombination von brillenseitiger und fahrzeugseitiger Sensorik ist möglich.In one embodiment, the sensor system detects at least the direction in which the occupant is looking, i.e. the direction in which he is looking represents at least one interaction. The sensor system can be integrated into the data glasses or can be a sensor system installed in the vehicle, such as a camera. A combination of sensors on the glasses and on the vehicle is also possible.

In einer weiteren Ausführungsform werden zusätzlich zur Blickrichtung Kopf-, Augen-, Hand-, Körperposition und/oder Relativbewegungen des Insassen erfasst. Dies kann ebenfalls wieder durch eine fahrzeugseitige Sensorik erfolgen, wie beispielsweise eine Kamera, Trackingsensoren oder Gyroskope oder durch eine freibewegliche Sensorik, die beispielsweise in die Datenbrille und/oder ein Smartphone integriert ist.In a further embodiment, in addition to the direction of view, the head, eye, hand, body position and/or relative movements of the occupant are recorded. This can again be done by a vehicle-side sensor system, such as a camera, tracking sensors or gyroscopes, or by a freely movable sensor system that is integrated, for example, in the data glasses and/or a smartphone.

In einer weiteren Ausführungsform tauschen sich die Fahrzeuge über die jeweilige Position aus, indem beispielsweise die jeweiligen GPS-Daten ausgetauscht werden.In a further embodiment, the vehicles exchange information about their respective positions, for example by exchanging their respective GPS data.

In einer weiteren Ausführungsform werden mittels mindestens einer weiteren Sensorik Umfeldinformationen des Fahrzeugs erfasst, wobei die Umfeldinformationen mit Interaktionen des Insassen verknüpft und einem Prozessor im anderen Fahrzeug zur Verfügung gestellt werden. Die Sensorik zur Erfassung von Umfeldinformationen ist beispielsweise als Ultraschall-Sensorik und/oder Radar-Sensorik und/oder Lidar-Sensorik und/oder als mindestens eine Kamera und/oder als satellitengestützte Positionsbestimmungseinheit (z.B. GPS) ausgebildet. Weitere Sensoriken können zur Unterstützung herangezogen werden, wie beispielsweise Beschleunigungssensoren oder Gyroskop-Daten.In a further embodiment, information about the environment of the vehicle is recorded by means of at least one further sensor system, whereby the information about the environment is linked to interactions of the occupant and made available to a processor in the other vehicle. The sensor system for recording information about the environment is designed, for example, as ultrasound sensors and/or radar sensors and/or lidar sensors and/or as at least one camera and/or as a satellite-based positioning unit (e.g. GPS). Other sensors can be used for support, such as acceleration sensors or gyroscope data.

In einer weiteren Ausführungsform werden die Umfeldinformationen mit Zusatzinformationen einer digitalen Datenbasis verknüpft, in der beispielsweise points of interest (POI) abgelegt sind. Die Datenbasis kann dabei lokal im Fahrzeug abgelegt sein oder über eine Kommunikationsverbindung abrufbar sein (z.B. über Car2X- oder Internet-Kommunikation).In a further embodiment, the environmental information is linked to additional information from a digital database in which, for example, points of interest (POI) are stored. The database can be stored locally in the vehicle or can be accessed via a communication connection (e.g. via Car2X or Internet communication).

In einer weiteren Ausführungsform ist der Datenbrille ein Algorithmus zur Erfassung vordefinierter Objekte zugeordnet, wobei ein Verweilen der Blickrichtung für eine vordefinierte Zeit auf einem vordefinierten Objekt erfasst und abgespeichert wird. Diese Erfassung kann dann auch an den anderen Insassen übertragen werden.In a further embodiment, the data glasses are assigned an algorithm for detecting predefined objects, whereby the gaze direction remaining on a predefined object for a predefined time is detected and stored. This detection can then also be transmitted to the other occupant.

Die Vorrichtung zur Unterhaltung mindestens eines Insassen eines Kraftfahrzeugs umfasst mindestens eine Datenbrille, die eine Anzeigeeinheit im Blickfeld des Insassen bildet, und mindestens einen Prozessor, wobei der mindestens eine Prozessor und die Datenbrille derart ausgebildet sind, dass diese über eine Kommunikationsverbindung miteinander verbunden sind, wobei der mindestens eine Prozessor Daten zur Datenbrille überträgt, die auf der Anzeigeeinheit der Datenbrille dargestellt werden. Die Kommunikationsverbindung ist vorzugsweise drahtlos. Die Vorrichtung weist mindestens eine Sensorik zur Erfassung einer Interaktion eines Insassen mit Datenbrille auf, wobei die Vorrichtung derart ausgebildet ist, dass ein erfasste Interaktion des Insassen an den mindestens einen Prozessor übermittelt und mit einer Interaktion eines Insassen mit einer zweiten Datenbrille verknüpft wird.The device for entertaining at least one occupant of a motor vehicle comprises at least one pair of data glasses, which form a display unit in the occupant's field of vision, and at least one processor, wherein the at least one processor and the data glasses are designed such that they are connected to one another via a communication connection, wherein the at least one processor transmits data to the data glasses, which is shown on the display unit of the data glasses. The communication connection is preferably wireless. The device has at least one sensor system for detecting an interaction of an occupant with data glasses, wherein the device is designed such that a detected interaction of the occupant is transmitted to the at least one processor and linked to an interaction of an occupant with a second pair of data glasses.

Hinsichtlich der weiteren Ausgestaltung der Vorrichtung wird auf die vorangegangenen Ausführungen Bezug genommen.With regard to the further design of the device, reference is made to the preceding statements.

Die Erfindung wird nachfolgend anhand eines bevorzugten Ausführungsbeispiels näher erläutert. Die einzelnen Figuren zeigen:

  • 1 ein schematisches Blockschaltbild einer Vorrichtung zur Unterhaltung von Insassen eines Fahrzeugs und
  • 2 eine beispielhafte Darstellung von Insassen von zwei Fahrzeugen.
The invention is explained in more detail below using a preferred embodiment. The individual figures show:
  • 1 a schematic block diagram of a device for entertaining occupants of a vehicle and
  • 2 an exemplary representation of occupants of two vehicles.

In der 1 sind zwei Fahrzeuge 1, 2 dargestellt, die jeweils eine Vorrichtung 10 zur Unterhaltung mindestens eines Insassen eines Fahrzeugs aufweisen. Die Vorrichtung 10 umfasst eine Datenbrille 11, einen ersten Prozessor 12, eine Umfeldsensorik 13, eine Einheit 14 zur drahtlosen Kommunikation mittels einer Antenne 15, mindestens eine in den Innenraum des Fahrzeugs 1, 2 gerichtete Kamera 16 sowie ein mobiles Endgerät 17, das beispielsweise als Spielecontroller, Touchpad, Tastatur, Smartphone, Tablet-Computer etc. ausgebildet sein kann. Die Datenbrille 11 weist mindestens einen Sensor 18 zur Erfassung der Blickrichtung eines Insassen auf. Die Datenbrille 11 bildet dabei eine Anzeigeeinheit 19 im Sichtbereich des Insassen, wenn dieser die Datenbrille 11 trägt. Weiter weist die Datenbrille 11 einen zweiten Prozessor 20 auf, der drahtlos oder drahtgebunden mit einem Prozessor 21 des mobilen Endgeräts 17 kommunizieren kann. Die Datenbrille 11 kann dabei über weitere Sensoriken verfügen und auch mit Mikrofon und Lautsprecher ausgebildet sein.In the 1 two vehicles 1, 2 are shown, each of which has a device 10 for entertaining at least one occupant of a vehicle. The device 10 comprises data glasses 11, a first processor 12, an environment sensor system 13, a unit 14 for wireless communication by means of an antenna 15, at least one camera 16 directed into the interior of the vehicle 1, 2 and a mobile terminal 17, which can be designed, for example, as a game controller, touchpad, keyboard, smartphone, tablet computer, etc. The data glasses 11 have at least one sensor 18 for detecting the line of sight of an occupant. The data glasses 11 form a display unit 19 in the field of vision of the occupant when he or she is wearing the data glasses 11. The data glasses 11 also have a second processor 20, which can communicate wirelessly or by wire with a processor 21 of the mobile terminal 17. The data glasses 11 can have further sensors and can also be designed with a microphone and loudspeaker.

Mittels der beiden Vorrichtungen 10 können nun zwei Insassen in den beiden Fahrzeugen 1, 2 auf verschiedenste Weise interaktiv kommunizieren, wobei je nach Form der Kommunikation nicht alle aufgezählten Bestandteile der Vorrichtung 10 benötigt werden.By means of the two devices 10, two occupants in the two vehicles 1, 2 can now communicate interactively in a variety of ways, whereby, depending on the form of communication, not all of the listed components of the device 10 are required.

Einige Formen sollen nun beispielhaft anhand einiger interaktiver Spiele kurz skizziert werden.Some forms will now be briefly outlined using some interactive games as examples.

In einer Ausführungsform können die beiden Insassen gemeinsam Zeichnen. Hierzu fixiert der Insasse mit seiner Datenbrille 11 eine Zeichenfläche (z.B. eine Scheibe, den Dachhimmel, eine Rückwand eines Sitzes), was durch den Sensor 18 erfasst wird. Über das mobile Endgerät 17 oder Gesten, die von der Kamera 16 erfasst werden, beginnt beispielsweise der Insasse in Fahrzeug 1 zu malen. Die Eingaben werden erfasst und an den Prozessor 20 der Datenbrille 11 übermittelt und auf der Anzeigeeinheit 19 dargestellt. Der Insasse im zweiten Fahrzeug 2 malt ebenfalls, sodass auf die vorangegangenen Ausführungen Bezug genommen werden kann. Zusätzlich überträgt die Datenbrille 11 die Daten von der Anzeigeeinheit 19 an den ersten Prozessor 12, von wo aus diese über die Einheit 14 an das jeweils andere Fahrzeug übermittelt werden und an die dortige Datenbrille 11 übertragen werden. Dadurch sieht der Insasse in dem Fahrzeug 1 bzw. 2 auch das, was der Insasse im Fahrzeug 2 bzw. 1 gemalt hat.In one embodiment, the two occupants can draw together. To do this, the occupant uses his data glasses 11 to focus on a drawing surface (e.g. a window, the roof lining, a rear wall of a seat), which is recorded by the sensor 18. Using the mobile device 17 or gestures recorded by the camera 16, the occupant in vehicle 1, for example, begins to paint. The inputs are recorded and transmitted to the processor 20 of the data glasses 11 and shown on the display unit 19. The occupant in the second vehicle 2 also paints, so reference can be made to the previous explanations. In addition, the data glasses 11 transmit the data from the display unit 19 to the first processor 12, from where they are transmitted to the other vehicle via the unit 14 and transferred to the data glasses 11 there. As a result, the occupant in vehicle 1 or 2 also sees what the occupant in vehicle 2 or 1 has painted.

Ein weiteres inaktives Spiel ist beispielsweise, dass ein Insasse beim Vorbeifahren oder im Stau ein Objekt selektiert (beispielsweise durch Fokussierung mittels der Datenbrille). Anhand der Daten der Umfeldsensorik 13 kann dem Objekt eine Position zugeordnet werden. Dabei sei angenommen, das Objekt sei statisch (z.B. ein Haus). Der Insasse kann dann virtuell das Objekt bemalen und das Ergebnis zusammen mit der Position an das andere Fahrzeug direkt oder eine Infrastruktur zur Zwischenspeicherung übermitteln. Fährt dann das andere Fahrzeug an dem Objekt vorbei, so übermittelt dessen Prozessor 12 die empfangenen Daten an die Datenbrille 11 und der Insasse sieht, was der andere Insasse gemalt hat. Des Weiteren können die Vorrichtungen 10 auf eine digitale Datenbasis 30 zugreifen, wo z.B. Daten über POls abgelegt sind, die dann den Objekten bzw. virtuellen Bildern angehängt werden können. Selbstverständlich können die POI-Informationen auch ohne virtuelle Bilder an die Objekte angehängt werden und dann anderen Fahrzeugen übermittelt werden.Another inactive game is, for example, that an occupant selects an object when driving past or in a traffic jam (for example by focusing using the data glasses). Based on the data from the environmental sensors 13, a position can be assigned to the object. It is assumed that the object is static (e.g. a house). The occupant can then virtually paint the object and transmit the result together with the position to the other vehicle directly or to an infrastructure for intermediate storage. If the other vehicle then drives past the object, its processor 12 transmits the received data to the data glasses 11 and the occupant sees what the other occupant has painted. Furthermore, the devices 10 can access a digital database 30, where, for example, data about POIs is stored, which can then be attached to the objects or virtual images. Of course, the POI information can also be attached to the objects without virtual images and then transmitted to other vehicles.

In der 2 ist eine weitere beispielhafte Spielsituation zwischen einem Insassen 31 im ersten Fahrzeug 1 und einem Insassen 32 im zweiten Fahrzeug 2 dargestellt. Dabei tragen beide Insassen 31, 32 jeweils die Datenbrille 11. Auch der Fahrer im ersten Fahrzeug 1 trägt eine Datenbrille 11, um beispielsweise zusätzliche Navigationshinweise zu erhalten. Es sind aber Situationen denkbar, wo auch der Fahrer mitspielen kann (z.B. beim autonomen Fahren). Den Datenbrillen 11 ist jeweils ein Algorithmus zur Erkennung von vordefinierten Objekten zugeordnet. Beispielsweise spielen die beiden Insassen 31, 32 das Spiel, wer am meisten Fahrzeuge eines bestimmten Herstellers in einer bestimmten Farbe sieht (entspricht dem vordefinierten Objekt). Fokussiert dann der Insasse 32 das vorbestimmte Objekt ausreichend lange oder löst eine andere Aktion aus, so wird dies von der Vorrichtung 10 im zweiten Fahrzeug 2 erfasst und der Insasse 32 bekommt einen Punkt. Dies wird dem anderen Insassen 31 im ersten Fahrzeug 1 mitgeteilt. Dabei ist vergrößert die Anzeige in einem Glas der Datenbrille 11 dargestellt. Dabei kann jeder Insasse 31, 32 in seiner eigenen Umgebung spielen oder aber beiden wird eine virtuelle Umgebung angezeigt. Ebenso ist es denkbar, Umgebungsdaten (von der Umfeldsensorik 13) des einen Fahrzeugs an das andere Fahrzeug zu übermitteln, sodass beide Insassen 31, 32 in der gleichen Umgebung spielen.In the 2 another example game situation is shown between an occupant 31 in the first vehicle 1 and an occupant 32 in the second vehicle 2. Both occupants 31, 32 are wearing the data glasses 11. The driver in the first vehicle 1 also wears data glasses 11, for example to receive additional navigation instructions. However, situations are conceivable where the driver can also play (e.g. during autonomous driving). An algorithm for recognizing predefined objects is each assigned to the data glasses 11. For example, the two occupants 31, 32 play the game of who sees the most vehicles from a certain manufacturer in a certain color (corresponds to the predefined object). If the occupant 32 then focuses on the predetermined object for a sufficiently long time or triggers another action, this is detected by the device 10 in the second vehicle 2 and the occupant 32 receives a point. This is communicated to the other occupant 31 in the first vehicle 1. The display in one lens of the data glasses 11 is shown enlarged. Each occupant 31, 32 can play in their own environment, or a virtual environment is displayed to both. It is also conceivable to transmit environmental data (from the environmental sensor system 13) of one vehicle to the other vehicle, so that both occupants 31, 32 play in the same environment.

Claims (9)

Verfahren zur Unterhaltung mindestens eines Insassen (31, 32) eines Fahrzeuges (1, 2), mittels mindestens einer Datenbrille (11), die eine Anzeigeeinheit (19) im Blickfeld des Insassen (31, 32) bildet, und mindestens einem Prozessor (12, 21), wobei der mindestens eine Prozessor (12, 21) und die Datenbrille (11) über eine Kommunikationsverbindung miteinander verbunden sind, wobei der mindestens eine Prozessor (12, 21) Daten zur Datenbrille (11) überträgt, die auf der Anzeigeeinheit (19) der Datenbrille (11) dargestellt werden, dadurch gekennzeichnet, dass mindestens ein zweiter Insasse (32, 31) eines Fahrzeugs (2, 1) eine Datenbrille (11) aufweist, wobei mittels einer Sensorik (18) jeweils mindestens eine Interaktion eines Insassen (31, 32) erfasst wird, wobei die erfasste Interaktion des Insassen (31, 32) an den mindestens einen Prozessor (12, 21) übermittelt wird und mit einer Interaktion des anderen Insassen (32, 31) verknüpft wird.Method for entertaining at least one occupant (31, 32) of a vehicle (1, 2) by means of at least one pair of data glasses (11) which forms a display unit (19) in the field of vision of the occupant (31, 32), and at least one processor (12, 21), wherein the at least one processor (12, 21) and the data glasses (11) are connected to one another via a communication connection, wherein the at least one processor (12, 21) transmits data to the data glasses (11) which are displayed on the display unit (19) of the data glasses (11), characterized in that at least one second occupant (32, 31) of a vehicle (2, 1) has data glasses (11), wherein at least one interaction of an occupant (31, 32) is recorded by means of a sensor system (18), wherein the recorded interaction of the occupant (31, 32) is transmitted to the at least one processor (12, 21) and is compared with an interaction of the other occupants (32, 31). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass der zweite Insasse (32, 31) sich in einem anderen Fahrzeug (2, 1) befindet, wobei sich in jedem Fahrzeug (1, 2) mindestens ein Prozessor (12, 21) befindet, wobei die beiden Prozessoren (12, 21) über eine drahtlose Kommunikationsverbindung miteinander verbunden sind.Procedure according to Claim 1 , characterized in that the second occupant (32, 31) is located in another vehicle (2, 1), wherein at least one processor (12, 21) is located in each vehicle (1, 2), wherein the two processors (12, 21) are connected to one another via a wireless communication link. Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass mittels der Sensorik (18) mindestens die Blickrichtung des Insassen (31, 32) erfasst wird.Method according to one of the preceding claims, characterized in that at least the viewing direction of the occupant (31, 32) is detected by means of the sensor system (18). Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass zusätzlich zur Blickrichtung Kopf-, Augen-, Hand-, Körperpositionen und/oder Relativbewegungen des Insassen (31, 32) erfasst werden.Procedure according to Claim 3 , characterized in that in addition to the direction of view, head, eye, hand, body positions and/or relative movements of the occupant (31, 32) are detected. Verfahren nach einem der Ansprüche 2 bis 4, dadurch gekennzeichnet, dass die Fahrzeuge (1, 2) sich über ihre jeweilige Position austauschen.Method according to one of the Claims 2 until 4 , characterized in that the vehicles (1, 2) exchange information about their respective positions. Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass mittels mindestens einer weiteren Sensorik (13) Umfeldinformationen des Fahrzeugs erfasst werden, wobei die Umfeldinformationen mit Interaktionen des Insassen (31, 32) verknüpft und einem Prozessor (12, 21) im anderen Fahrzeug zur Verfügung gestellt werden.Method according to one of the preceding claims, characterized in that environmental information of the vehicle is detected by means of at least one further sensor system (13), wherein the environmental information is linked to interactions of the occupant (31, 32) and made available to a processor (12, 21) in the other vehicle. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass die Umfeldinformationen mit Zusatzinformationen einer digitalen Datenbasis (30) verknüpft werden.Procedure according to Claim 6 , characterized in that the environmental information is linked to additional information from a digital database (30). Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass der Datenbrille (11) ein Algorithmus zur Erfassung vordefinierter Objekte zugeordnet ist, wobei ein Verweilen der Blickrichtung für eine vordefinierte Zeit auf einem vordefinierten Objekt erfasst und abgespeichert wird.Method according to one of the preceding claims, characterized in that the data glasses (11) are assigned an algorithm for detecting predefined objects, wherein a dwell of the line of sight on a predefined object for a predefined time is detected and stored. Vorrichtung zur Unterhaltung mindestens eines Insassen (31, 32) eines Fahrzeugs (1, 2), umfassend mindestens eine Datenbrille (11), die eine Anzeigeeinheit (19) im Blickfeld des Insassen (31, 32) bildet, und mindestens einen Prozessor (12, 21), wobei der mindestens eine Prozessor (12, 21) und die Datenbrille (11) derart ausgebildet sind, dass diese über eine Kommunikationsverbindung miteinander verbunden sind, wobei der mindestens eine Prozessor (12, 21) Daten zur Datenbrille (11) überträgt, die auf der Anzeigeeinheit (19) der Datenbrille (11) dargestellt werden, dadurch gekennzeichnet, dass die Vorrichtung (10) mindestens eine Sensorik (18) zur Erfassung einer Interaktion eines Insassen (31, 32) mit Datenbrille (11) aufweist, wobei die Vorrichtung (10) derart ausgebildet ist, dass eine erfasste Interaktion des Insassen (31, 32) an den mindestens einen Prozessor (12, 21) übermittelt wird und mit einer Interaktion eines Insassen (32, 31) mit einer zweiten Datenbrille (11) verknüpft wird.Device for entertaining at least one occupant (31, 32) of a vehicle (1, 2), comprising at least one pair of data glasses (11) which forms a display unit (19) in the field of vision of the occupant (31, 32), and at least one processor (12, 21), wherein the at least one processor (12, 21) and the data glasses (11) are designed such that they are connected to one another via a communication connection, wherein the at least one processor (12, 21) transmits data to the data glasses (11) which are displayed on the display unit (19) of the data glasses (11), characterized in that the device (10) has at least one sensor system (18) for detecting an interaction of an occupant (31, 32) with data glasses (11), wherein the device (10) is designed such that a detected interaction of the occupant (31, 32) is transmitted to the at least one processor (12, 21) and is linked to an interaction of an occupant (32, 31) is linked to a second data glasses (11).
DE102015207337.8A 2015-04-22 2015-04-22 Method and device for entertaining at least one occupant of a motor vehicle Active DE102015207337B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102015207337.8A DE102015207337B4 (en) 2015-04-22 2015-04-22 Method and device for entertaining at least one occupant of a motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102015207337.8A DE102015207337B4 (en) 2015-04-22 2015-04-22 Method and device for entertaining at least one occupant of a motor vehicle

Publications (2)

Publication Number Publication Date
DE102015207337A1 DE102015207337A1 (en) 2016-10-27
DE102015207337B4 true DE102015207337B4 (en) 2024-06-06

Family

ID=57110737

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102015207337.8A Active DE102015207337B4 (en) 2015-04-22 2015-04-22 Method and device for entertaining at least one occupant of a motor vehicle

Country Status (1)

Country Link
DE (1) DE102015207337B4 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016213916A1 (en) * 2016-07-28 2018-02-01 Volkswagen Aktiengesellschaft Infotainment system for a motor vehicle
DE102017216737A1 (en) 2017-09-21 2019-03-21 Volkswagen Aktiengesellschaft Method and device for transmitting information from a first road user to a second road user and for receiving information that has been sent from a first road user to a second road user
DE102017217923A1 (en) 2017-10-09 2019-04-11 Audi Ag Method for operating a display device in a motor vehicle
DE102018206658A1 (en) * 2018-04-30 2019-10-31 Audi Ag Method for operating electronic data glasses in a motor vehicle and electronic data glasses
DE102020114656A1 (en) 2020-06-02 2021-12-02 Audi Aktiengesellschaft INFORMATION PROCESSING SYSTEM AND METHOD FOR PROCESSING INFORMATION
DE102022123223A1 (en) 2022-09-12 2024-03-14 Bayerische Motoren Werke Aktiengesellschaft Transmission of visual display content between a vehicle-based and a glasses-based display in a vehicle

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060238877A1 (en) 2003-05-12 2006-10-26 Elbit Systems Ltd. Advanced Technology Center Method and system for improving audiovisual communication
EP1990674A1 (en) 2007-05-09 2008-11-12 Harman Becker Automotive Systems GmbH Head-mounted display system
US20090018419A1 (en) 2004-04-01 2009-01-15 Torch William C Biosensors, communicators, and controllers monitoring eye movement and methods for using them
US20110282130A1 (en) 2010-05-14 2011-11-17 Advitech, Inc. System and method for prevention and control of the effects of spatial disorientation
US20130083061A1 (en) 2011-09-30 2013-04-04 GM Global Technology Operations LLC Front- and rear- seat augmented reality vehicle game system to entertain & educate passengers
WO2013082049A1 (en) 2011-11-30 2013-06-06 Kathryn Stone Perez Head-mounted display based education and instruction
US20130162639A1 (en) 2011-12-21 2013-06-27 Harman Becker Automotive Systems Gmbh Method And System For Generating Augmented Reality With A Display Of A Motor Vehicle
US20140274400A1 (en) 2013-03-14 2014-09-18 Honda Motor Co., Ltd. Interactive vehicle gaming system and method
DE102013210746A1 (en) 2013-06-10 2014-12-11 Robert Bosch Gmbh System and method for monitoring and / or operating a technical system, in particular a vehicle

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060238877A1 (en) 2003-05-12 2006-10-26 Elbit Systems Ltd. Advanced Technology Center Method and system for improving audiovisual communication
US20090018419A1 (en) 2004-04-01 2009-01-15 Torch William C Biosensors, communicators, and controllers monitoring eye movement and methods for using them
EP1990674A1 (en) 2007-05-09 2008-11-12 Harman Becker Automotive Systems GmbH Head-mounted display system
US20110282130A1 (en) 2010-05-14 2011-11-17 Advitech, Inc. System and method for prevention and control of the effects of spatial disorientation
US20130083061A1 (en) 2011-09-30 2013-04-04 GM Global Technology Operations LLC Front- and rear- seat augmented reality vehicle game system to entertain & educate passengers
WO2013082049A1 (en) 2011-11-30 2013-06-06 Kathryn Stone Perez Head-mounted display based education and instruction
US20130162639A1 (en) 2011-12-21 2013-06-27 Harman Becker Automotive Systems Gmbh Method And System For Generating Augmented Reality With A Display Of A Motor Vehicle
US20140274400A1 (en) 2013-03-14 2014-09-18 Honda Motor Co., Ltd. Interactive vehicle gaming system and method
DE102013210746A1 (en) 2013-06-10 2014-12-11 Robert Bosch Gmbh System and method for monitoring and / or operating a technical system, in particular a vehicle

Also Published As

Publication number Publication date
DE102015207337A1 (en) 2016-10-27

Similar Documents

Publication Publication Date Title
DE102015207337B4 (en) Method and device for entertaining at least one occupant of a motor vehicle
DE112014003145B4 (en) Head-up ad and program
DE102020128536A1 (en) PORTABLE SYSTEM OF EXTENDED REALITY FOR VEHICLE OCCUPANTS
DE102017110283A1 (en) CONTROLLING FUNCTIONS AND EXPENSES OF AUTONOMOUS VEHICLES BASED ON A POSITION AND ATTENTION FROM OCCUPANTS
DE102017111843A1 (en) Systems to dynamically guide a user to a pickup location of an autonomous vehicle by means of extended reality walking instructions
EP3164756B1 (en) Locating an hmd in a vehicle
EP3129820A1 (en) Locating a head-mounted display (hmd) in a vehicle
WO2019170387A1 (en) Overlaying additional information on a display unit
DE102010017931A1 (en) Gesture-actuated information systems and methods for interesting details
DE102019118461A1 (en) OVERVIEW OF VEHICLE AD INDICATORS
DE102015101560A1 (en) Systems and methods for a vehicle-based display projection of a mobile device
DE102014112077A1 (en) Device for relieving travel sickness in a motor vehicle
DE102014214514A1 (en) Apparatus and method for exchanging data between vehicles for setting up a convoy
EP3695266B1 (en) Method for operating a display device in a motor vehicle
WO2019057452A1 (en) Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a motor vehicle
DE102010003851A1 (en) Destination marking method for motor vehicle driver, involves determining position of destination relative to vehicle, and embedding virtual object in real vehicle environment that is visible to vehicle occupant on head-up display
DE102016225746A1 (en) Establishing a direct communication connection with a foreign vehicle in an environment of a motor vehicle
DE102018215186A1 (en) Concept for monitoring and planning a movement of a means of transportation
DE102018216409A1 (en) Method, device and means of transportation for a kinetose-avoiding representation of a liquid in a display in a means of transportation
DE102014207398A1 (en) Object association for contact-analogue display on an HMD
DE112016005798T5 (en) VEHICLE INTERNAL SYSTEM AND METHOD FOR PROVIDING INFORMATION RELATING TO POINTS OF INTEREST
EP3963504A1 (en) Method for capturing image material for monitoring image-analysing systems, device and vehicle for use in the method and computer program
DE102015209090A1 (en) Output of a warning to road users on a head-mounted display
DE102017213544A1 (en) Method for controlling a VR representation in a means of locomotion and VR presentation device
EP3834058A1 (en) Method and system for operating at least two display devices carried by respective vehicle occupants on the head

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R016 Response to examination communication
R018 Grant decision by examination section/examining division