DE102018125309A1

DE102018125309A1 - Method of using data glasses for unlocking vehicles

Info

Publication number: DE102018125309A1
Application number: DE102018125309.5A
Authority: DE
Inventors: Philipp Tiefenbacher
Original assignee: Bayerische Motoren Werke AG
Current assignee: Bayerische Motoren Werke AG
Priority date: 2018-10-12
Filing date: 2018-10-12
Publication date: 2020-04-16

Abstract

Offenbart wird ein Verfahren zur Nutzung einer Datenbrille zum Entriegeln eines Fahrzeugs, umfassend: Bestimmen des Ortes der Datenbrille; Falls die Datenbrille in einer vorbestimmten Entfernung zum Fahrzeug ist: Ausgeben, insbesondere Anzeigen, einer Mitteilung durch die Datenbrille, dass das Fahrzeug entriegelt werden kann; Empfangen einer Bestätigung durch den Benutzer der Datenbrille, dass das Fahrzeug entriegelt werden soll; In Antwort auf das Empfangen der Bestätigung: Ausgeben einer Anweisung zum Entriegeln des Fahrzeugs.Disclosed is a method of using smart glasses to unlock a vehicle, comprising: determining the location of the smart glasses; If the data glasses are at a predetermined distance from the vehicle: output, in particular displaying, a message by the data glasses that the vehicle can be unlocked; Receiving confirmation from the user of the data glasses that the vehicle should be unlocked; In response to receiving the confirmation: issuing an instruction to unlock the vehicle.

Description

Die Erfindung betrifft ein Verfahren zur Nutzung einer Datenbrille für die Entriegelung von Fahrzeugen.The invention relates to a method for using data glasses for unlocking vehicles.

Datenbrillen, manchmal auch Head-mounted Displays, HMD, genannt, umfassen zumindest eine Anzeige, die auf einem brillenähnlichen Gestell montiert ist und elektronische Rechen- sowie Kommunikationsmittel. Bei den Kommunikationsmitteln handelt es sich meist um Mittel zur drahtlosen Datenübertragung wie Bluetooth, WiFi, Zigbee, Z-Wave oder andere Funksysteme.Data glasses, sometimes also called head-mounted displays, HMD, comprise at least one display, which is mounted on a frame similar to glasses, and electronic computing and communication means. The means of communication are mostly means for wireless data transmission such as Bluetooth, WiFi, Zigbee, Z-Wave or other radio systems.

Moderne und insbesondere zukünftige Fahrzeuge verfügen ebenfalls über meist dieselben Mittel zur drahtlosen Datenkommunikation.Modern and especially future vehicles also usually have the same means for wireless data communication.

Heutzutage sind Systeme zur Fahrzeugentriegelung bekannt, bei denen lediglich ein Funkschlüssel vom Benutzer mitgeführt werden muss, um das Fahrzeug beim Öffnen auch zu entriegeln. Diese Systeme sind vergleichsweise komfortabel, verlangen aber auch, dass ein separates elektronisches Gerät, der Funkschlüssel, vom Benutzer mitgeführt wird.Nowadays, systems for vehicle unlocking are known in which only a radio key has to be carried by the user in order to unlock the vehicle when it is opened. These systems are comparatively convenient, but also require that a separate electronic device, the radio key, be carried by the user.

Die Aufgabe an den Fachmann ist die Entwicklung eines Systems, das eine Entriegelung von Fahrzeugen ermöglicht, ohne dass ein dediziertes elektronisches Gerät zu diesem Zweck mitgeführt werden muss. Die Aufgabe wird durch das Verfahren und die Datenbrille gemäß den unabhängigen Ansprüchen gelöst. Vorteilhafte Weiterbildungen sind in den abhängigen Ansprüchen definiert.The task for the person skilled in the art is to develop a system that enables vehicles to be unlocked without having to carry a dedicated electronic device for this purpose. The object is achieved by the method and the data glasses according to the independent claims. Advantageous further developments are defined in the dependent claims.

Hierin wird also vorgeschlagen, ein mobiles Endgerät, das der Benutzer ohnehin verwendet, nämlich eine Datenbrille, zur Entriegelung des Fahrzeugs zu verwenden. Im Gegensatz zu einem Smartphone bietet die Datenbrille den Vorteil, dass sie nicht separat in der Hand gehalten werden muss und eine separate Bedienung des Smartphones erforderlich ist, die meist beide Hände des Benutzers beansprucht. Es wird die typische langwierige Sequenz des Auspackens des Smartphones und des Öffnens einer Anwendung auf dem Smartphone vermieden. Ferner ermöglicht die Datenbrille verbesserte Möglichkeiten der Bestätigung, also Eingabemöglichkeiten, dass das Fahrzeug entriegelt werden soll.It is therefore proposed to use a mobile terminal that the user is using anyway, namely data glasses, to unlock the vehicle. In contrast to a smartphone, the data glasses have the advantage that they do not have to be held separately in the hand and separate operation of the smartphone is required, which usually takes up both hands of the user. The typical lengthy sequence of unpacking the smartphone and opening an application on the smartphone is avoided. Furthermore, the data glasses enable improved possibilities for confirmation, that is, input options that the vehicle should be unlocked.

Die Bestätigung durch den Benutzer umfasst typischerweise eines oder mehrere der folgenden: Das Drücken einer Taste der Datenbrille; Das Sprechen eines Sprachbefehls, wobei der Sprachbefehl insbesondere ein vorher über eine andere Vorrichtung als die Datenbrille mitgeteilter Sprachbefehl ist, wobei der Sprachbefehl mittels Mikrofonen der Datenbrille erkannt wird; Das Ausführen einer Handgeste, wobei die Handgeste insbesondere eine vorher über eine andere Vorrichtung als die Datenbrille mitgeteilte Handgeste ist, wobei die Handgeste mittels einer Kamera der Datenbrille erkannt wird; Das Ausführen einer Kopfbewegung, wobei die Kopfbewegung mittels Bewegungssensoren der Datenbrille erkannt wird; Das Ausführen von Augenbewegungen, wobei die Augenbewegungen durch eine Kamera der Datenbrille aufgenommen werden, auch Gazetracking genannt.User confirmation typically includes one or more of the following: pressing a button on the smart glasses; Speaking a voice command, the voice command being in particular a voice command previously communicated via a device other than the data glasses, the voice command being recognized by means of microphones of the data glasses; Executing a hand gesture, the hand gesture being in particular a hand gesture previously communicated via a device other than the data glasses, the hand gesture being recognized by a camera of the data glasses; Performing a head movement, the head movement being detected by means of movement sensors of the data glasses; Carrying out eye movements, the eye movements being recorded by a camera in data glasses, also called gaz tracking.

Die genannte andere Vorrichtung kann ein mobiles Endgerät sein, insbesondere ein Smartphone, das nicht die Datenbrille ist. Auf dem mobilen Endgerät kann eine Anwendung, auch App genannt, installiert sein und ausgeführt werden, über die der Sprachbefehl und die Handgeste übermittelt werden. Auf diese Weise wird die Sicherheit beim Entriegelungsvorgang erhöht. Der Sprachbefehl oder die Handgeste können somit „Codewörter“ sein, die nur dem Benutzer bekannt sind und es nur ihm ermöglichen, das Fahrzeug zu öffnen. Ebenfalls denkbar ist es, dass dem zu entriegelnden Fahrzeug ein bestimmter Sprachbefehl oder eine bestimmte Handgeste zugewiesen ist, die alle, die von diesen „Codewörtern“ Kenntnis haben, nutzen können, um das Fahrzeug zu entriegeln. Hilfreich sind diese Verfahren beispielsweise bei Fahrzeugvermietungen.The other device mentioned can be a mobile terminal, in particular a smartphone, which is not the data glasses. An application, also called an app, can be installed and executed on the mobile device, via which the voice command and the hand gesture are transmitted. In this way, the security during the unlocking process is increased. The voice command or the hand gesture can thus be “code words” that are only known to the user and only allow him to open the vehicle. It is also conceivable that a certain voice command or a certain hand gesture is assigned to the vehicle to be unlocked, which anyone who is familiar with these “code words” can use to unlock the vehicle. These methods are helpful, for example, for vehicle rentals.

Als weiteren Sicherheitsmechanismus kann die Datenbrille eine Kamera umfasst, die das Auge des Benutzers aufnimmt und dazu eingerichtet Eigenarten des Auges, insbesondere die Iris, zu erkennen; wobei das Verfahren ferner folgenden Schritt umfasst: Vor dem Ausgeben einer Anweisung zum Entriegeln des Fahrzeugs: Prüfen, ob die Eigenarten des Auges des Benutzers mit vorgespeicherten Eigenarten übereinstimmen. Somit wird sichergestellt, dass der Träger bzw. Benutzer der Datenbrille eine berechtigte Person ist.As a further security mechanism, the data glasses can include a camera that records the user's eye and is set up to recognize peculiarities of the eye, in particular the iris; the method further comprising the step of: before issuing an instruction to unlock the vehicle: checking whether the characteristics of the user's eye match pre-stored characteristics. This ensures that the wearer or user of the data glasses is an authorized person.

Die Ortung der Datenbrille kann mithilfe von Satellitennavigation, Mobilfunknetzwerken und/oder einer Funkverbindung, beispielsweise Bluetooth, zwischen Datenbrille und Fahrzeug bestimmt werden. Dabei kann das Bestehen einer Funkverbindung zwischen Datenbrille und Fahrzeug bereits als ausreichend für die Ortsbestimmung gesehen werden.The location of the data glasses can be determined with the aid of satellite navigation, mobile radio networks and / or a radio connection, for example Bluetooth, between the data glasses and the vehicle. The existence of a radio link between the data glasses and the vehicle can already be seen as sufficient for the location determination.

Nach dem Ausgeben der Anweisung zum Entriegeln des Fahrzeugs kann ein Kontaktanaloges Hervorheben der Tür des Fahrzeugs folgen. Auf diese Weise wird dem Benutzer angezeigt, dass die Tür jetzt entriegelt ist und geöffnet werden kann. Das Kontaktanaloge Hervorheben wird auch als augmented reality bezeichnet. Die Hervorhebung kann ein Einfärben oder Umranden der Fahrzeugtür sein, oder schlicht ein Punkt auf der Tür oder dem Griff der Tür.After issuing the instruction to unlock the vehicle, a contact analogue can follow highlighting the door of the vehicle. In this way the user is informed that the door is now unlocked and can be opened. Highlighting the contact analogue is also referred to as augmented reality. The highlighting can be coloring or edging the vehicle door, or simply a dot on the door or the handle of the door.

Offenbart wird auch ein Verfahren zur Nutzung einer Datenbrille zum Entriegeln eines Fahrzeugs, umfassend: Bestimmen des Ortes der Datenbrille; Falls die Datenbrille in einer vorbestimmten Entfernung zum Fahrzeug ist: Ausgeben einer Anweisung zum Entriegeln des Fahrzeugs. Im Gegensatz zu vorhergehenden Offenbarung hierin entfällt hier der Schritt der Bestätigung der Entriegelung. Dies ist für den Nutzer noch komfortabler.Also disclosed is a method of using smart glasses to unlock a vehicle, comprising: determining the location of the smart glasses; If the data glasses are at a predetermined distance from the vehicle: issue an instruction to unlock the vehicle. In contrast to the previous disclosure herein, the step of confirming the unlocking is omitted. This is even more convenient for the user.

Ferner wird eine Datenbrille offenbart, umfassend Mittel zum Bestimmen des Ortes der Datenbrille und elektronische Rechenmittel sowie Mittel zur drahtlosen Datenübertragung, wobei die Datenbrille dazu eingerichtet ist, eines der vorstehenden Verfahren auszuführen.Furthermore, data glasses are disclosed, comprising means for determining the location of the data glasses and electronic computing means as well as means for wireless data transmission, the data glasses being set up to carry out one of the above methods.

FigurenlisteFigure list

1 schematically shows data glasses according to an embodiment.
2nd shows a flowchart of a method according to an embodiment.

DETAILLIERTE BESCHREIBUNG DES AUSFÜHRUNGSBEISPIELSDETAILED DESCRIPTION OF THE EMBODIMENT

1 zeigt schematisch eine Datenbrille gemäß einem Ausführungsbeispiel. Die Datenbrille 1 umfasst eine Anzeige 2 (und eine weitere nicht nummerierte Anzeige). Des Weiteren umfasst die Datenbrille 1 eine Recheneinheit 3 mit Bewegungssensorik und ein GPS Modul 4 zur Bestimmung des Ortes. Die Datenbrille wird wie eine typische Sehhilfe auf dem Kopf getragen, wobei die Datenbrille auf der Nase und den Ohren aufliegt. Die Datenbrille führt das in 2 gezeigte Verfahren aus. 1 schematically shows data glasses according to an embodiment. The data glasses 1 includes an ad 2nd (and another unnumbered ad). The data glasses also include 1 a computing unit 3rd with motion sensors and a GPS module 4th to determine the location. The data glasses are worn on the head like a typical visual aid, with the data glasses resting on the nose and ears. The data glasses do that in 2nd shown methods.

2 zeigt ein Ablaufdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel. In einem Schritt S1 wird der Ort der Datenbrille bestimmt. Wenn dieser innerhalb einer vorbestimmten Entfernung (beispielsweise 3m) vom Fahrzeug ist, wird mit den Schritten S2 bis S4 fortgefahren. Im Schritt S2 wird eine Mitteilung auf der Anzeige 2 der Datenbrille ausgegeben, in der gefragt wird, ob das Fahrzeug entriegelt werden soll. Daraufhin nickt der Benutzer, was über die Bewegungssensorik der Datenbrille erfasst wird, Schritt S3. Daraufhin sendet die Datenbrille den Befehl oder die Freigabe über mithilfe von drahtlose Datenübertragung an das Fahrzeug, Schritt S4. Im Folgenden entriegelt das Fahrzeug und lässt den Benutzer die Tür öffnen. 2nd shows a flowchart of a method according to an embodiment. In one step S1 the location of the data glasses is determined. If this is within a predetermined distance (for example 3m) from the vehicle, the steps S2 to S4 continued. In step S2 will display a message 2nd the data glasses issued asking whether the vehicle should be unlocked. The user then nods, which is detected by the movement sensor system of the data glasses S3 . The data glasses then send the command or release to the vehicle using wireless data transmission, step S4 . The vehicle then unlocks and lets the user open the door.

Claims

A method of using smart glasses to unlock a vehicle, comprising: Determining the location of the data glasses; If the smart glasses are at a predetermined distance from the vehicle: Outputting, in particular displaying, a message through the data glasses that the vehicle can be unlocked; Receiving confirmation from the user of the data glasses that the vehicle should be unlocked; In response to receiving the confirmation: issuing an instruction to unlock the vehicle.

Procedure according to Claim 1 wherein the user confirmation includes one or more of the following: pressing a button on the smart glasses; Speaking a voice command, the voice command being in particular a voice command previously communicated via a device other than the data glasses, the voice command being recognized by means of microphones of the data glasses; Executing a hand gesture, the hand gesture being in particular a hand gesture previously communicated via a device other than the data glasses, the hand gesture being recognized by a camera of the data glasses; Performing a head movement, the head movement being detected by means of movement sensors of the data glasses; Carrying out eye movements, the eye movements being recorded by a camera in the data glasses.

Procedure according to Claim 2 , wherein the other device is a mobile terminal, in particular a smartphone, which is not the data glasses.

Method according to one of the preceding claims, wherein the data glasses comprise a camera which records the user's eye and is set up to recognize peculiarities of the eye, in particular the iris; the method further comprising the step of: Before issuing an instruction to unlock the vehicle: Check whether the characteristics of the user's eye match pre-stored characteristics.

Method according to one of the preceding claims, wherein the location of the data glasses with the aid of satellite navigation, mobile radio networks and / or a radio link between data glasses and vehicle is determined.

Method according to one of the preceding claims, further comprising the following step after issuing the instruction to unlock the vehicle: contact analogue highlighting the door of the vehicle.

A method of using smart glasses to unlock a vehicle, comprising: Determining the location of the data glasses; If the smart glasses are at a predetermined distance from the vehicle: Issue an instruction to unlock the vehicle.

Data glasses, comprising means for determining the location of the data glasses and electronic computing means and means for wireless data transmission, the data glasses being set up to carry out a method according to the preceding claims.