DE102015205921A1 - Information types to be displayed on data goggles in the vehicle context - Google Patents
Information types to be displayed on data goggles in the vehicle context Download PDFInfo
- Publication number
- DE102015205921A1 DE102015205921A1 DE102015205921.9A DE102015205921A DE102015205921A1 DE 102015205921 A1 DE102015205921 A1 DE 102015205921A1 DE 102015205921 A DE102015205921 A DE 102015205921A DE 102015205921 A1 DE102015205921 A1 DE 102015205921A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- data
- information
- driver
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000011521 glass Substances 0.000 claims abstract description 70
- 238000000034 method Methods 0.000 claims abstract description 21
- 238000005259 measurement Methods 0.000 claims abstract description 4
- 230000001149 cognitive effect Effects 0.000 claims description 8
- 210000003128 head Anatomy 0.000 claims description 8
- 210000001747 pupil Anatomy 0.000 claims description 4
- 230000000694 effects Effects 0.000 claims description 3
- 230000001133 acceleration Effects 0.000 claims description 2
- 238000012423 maintenance Methods 0.000 claims description 2
- 230000004913 activation Effects 0.000 claims 1
- 230000009849 deactivation Effects 0.000 claims 1
- 230000000007 visual effect Effects 0.000 description 5
- 238000011156 evaluation Methods 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/14—Solving problems related to the presentation of information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Traffic Control Systems (AREA)
Abstract
Offenbart wird ein Verfahren zum Bestimmen anzuzeigender Informationstypen auf einer Datenbrille für den Fahrer eines Fahrzeugs; wobei die Datenbrille über zumindest einen Sensor verfügt, der Messungen am Körper des Fahrers durchführt und Körpereigenschaften ermittelt; wobei das Verfahren umfasst: Ermitteln von Körpereigenschaften des Fahrers durch die Datenbrille; Empfangen von Fahrdaten des Fahrzeugs; Bestimmen der auf der Datenbrille anzuzeigenden Informationstypen abhängig von den Körpereigenschaften und den Fahrdaten.A method is disclosed for determining information types to be displayed on data glasses for the driver of a vehicle; the data goggles having at least one sensor that performs measurements on the body of the driver and determines body characteristics; the method comprising: determining body characteristics of the driver through the data glasses; Receiving driving data of the vehicle; Determine the information types to be displayed on the data glasses depending on the body characteristics and the driving data.
Description
Die Erfindung betrifft ein Verfahren zum Bestimmen anzuzeigender Informationstypen auf einer Datenbrille für den Fahrer eines Fahrzeugs sowie ein Fahrzeug zu demselben Zweck. The invention relates to a method for determining information types to be displayed on data glasses for the driver of a vehicle as well as a vehicle for the same purpose.
Heutzutage sind Verfahren zur Messung der kognitiven Belastung (auch „workload“ genannt) des Fahrers eines Fahrzeugs bekannt. Beispielsweise kann vorgesehen sein, den Fahrer zu warnen, wenn aufgrund verschiedener Fahrdaten (bspw. Lenkfrequenz) ein zu hohes Maß an Müdigkeit/Unaufmerksamkeit detektiert wird. In Forschungssystemen hierzu werden derartige Parameter offline und zur Evaluation des Ablenkungspotentials verschiedener Sekundäraufgaben eingesetzt. Hier kommen Parameter, welche die Fahrleistung des Fahrers betreffen zum Einsatz (Spurhaltegüte ermittelt aus dem Abstand zum Fahrbahnrand mithilfe von Kameraaufnahmen, Abweichungen der durchschnittlichen Geschwindigkeit, Abweichungen der Distanz zum Vorderfahrzeug, Lenkfrequenz, Lenkmoment) genauso wie Parameter, die den unmittelbaren Zustand des Fahrers, also Körpereigenschaften bzw. Vitaldaten des Fahrers, betreffen (Puls, Atmung, Hautleitwert, Pupillometrie). Nowadays, methods of measuring the cognitive load (also called "workload") of the driver of a vehicle are known. For example, it may be provided to warn the driver if an excessive level of fatigue / inattention is detected due to various driving data (eg, steering frequency). In research systems such parameters are used offline and to evaluate the distraction potential of various secondary tasks. Here come parameters that relate to the driving performance of the driver used (Lane Keeping determined from the distance to the lane edge using camera shots, deviations in the average speed, deviations of the distance to the front vehicle, steering frequency, steering torque) as well as parameters that affect the immediate state of the driver, So body properties or vital data of the driver, affect (pulse, respiration, skin conductance, pupillometry).
Die Fahrdaten können vom Fahrzeug-Bus empfangen und interpretiert werden. Körpereigenschaften des Fahrers benötigen zusätzliche Sensorik, die unmittelbar am Fahrer selbst angebracht werden muss. Beispielsweise wird eine Kamera auf dem Kopf des Fahrers montiert und auf dessen Auge gerichtet um Veränderungen seiner Pupillengröße zu erfassen, ein Fingerclip mit entsprechender Sensorik zur Messung seines Hautleitwerts angebracht oder mittels eines Brustgurts sein Herzschlag gemessen. The driving data can be received and interpreted by the vehicle bus. Body characteristics of the driver require additional sensors that must be attached directly to the driver himself. For example, a camera is mounted on the head of the driver and directed to the eye to detect changes in his pupil size, attached a finger clip with appropriate sensors to measure its skin conductance or measured by a chest strap his heartbeat.
Heutzutage sind Datenbrillen (manchmal auch Head-mounted Display, HMD, genannt) bekannt, mit deren Hilfe dem Träger der Datenbrille Informationen angezeigt werden können. Die Datenbrille wird dabei wie eine gewöhnliche Brille, die als Sehhilfe verwendet wird, auf dem Kopf getragen. Gegenüber einer gewöhnlichen Brille umfasst die Datenbrille jedoch eine Anzeige, die beim Tragen der Datenbrille nahe dem oder den Augen des Benutzers angeordnet ist. Die Anzeige kann dabei zwei Teilanzeigen umfassen, eine für jedes Auge. Auf der Anzeige können dem Benutzer Informationen in Form von Text, graphischen Darstellungen oder Mischungen davon angezeigt werden. Die Anzeige kann insbesondere teildurchlässig sein (manchmal auch halbtransparent genannt), also so ausgestaltet sein, dass der Träger auch die Umgebung hinter der Anzeige erkennen kann. In manchen Implementierungen werden dem Träger die Informationen bzw. Hinweise kontaktanalog angezeigt, was manchmal auch als augmented reality bezeichnet wird. Dabei wird dem Träger der Datenbrille die Information an einem Ort angezeigt, der am Ort eines Objektes in der Umgebung orientiert ist, also beispielsweise an das Objekt angrenzend oder dieses überlagernd. Es sind natürlich auch Anzeigen möglich, die sich nicht an der Umgebung orientieren, sondern unabhängig davon auf der Anzeige der Datenbrille angezeigt werden. Zur Realisierung der Kontaktanalogie, muss typischerweise die Position des Objektes in der Umgebung und die Pose der Datenbrille in Relation zum Objekt bekannt sein, also die Position der Datenbrille und die Ausrichtung der Datenbrille. Nowadays, data glasses (sometimes called head-mounted display, HMD) are known, with the help of the wearer of the data glasses information can be displayed. The data glasses are worn like ordinary glasses, which is used as a visual aid on the head. Compared to ordinary glasses, however, the data glasses include a display that is located near the user's eyes when wearing the data glasses. The display can include two partial displays, one for each eye. On the display, information may be displayed to the user in the form of text, graphics or mixtures thereof. In particular, the display can be partially transparent (sometimes also called semitransparent), that is to say configured in such a way that the wearer can also recognize the surroundings behind the display. In some implementations, the information or hints are displayed to the wearer as contact-analogous, sometimes referred to as augmented reality. In this case, the carrier of the data glasses, the information is displayed in a location that is oriented at the location of an object in the environment, so for example, adjacent to the object or this superimposed. Of course, there are also ads possible that are not oriented to the environment, but are displayed independently on the display of the data glasses. In order to realize the contact analogy, typically the position of the object in the environment and the pose of the data glasses in relation to the object must be known, ie the position of the data glasses and the alignment of the data glasses.
Es sind Datenbrillen bekannt geworden, die eine Kamera umfassen, die Aufnahmen in Blickrichtung des Trägers der Datenbrille macht, siehe beispielsweise
Datenbrillen können auch in Fahrzeugen genutzt werden, um kontaktanaloge Informationen anzuzeigen. Diese Informationen können andere Verkehrsteilnehmer oder Objekte im Fahrzeug betreffen. Um kontaktanaloge Informationen anzeigen zu können, muss in den meisten Fällen auch hier die Pose der Datenbrille bekannt sein. Data glasses can also be used in vehicles to display contact-analog information. This information may concern other road users or objects in the vehicle. In order to be able to display contact-analogous information, in most cases the pose of the data goggles must also be known here.
In Fahrsituationen, in denen der Fahrer durch die Primäraufgabe sehr beansprucht wird, können Darstellungen auf der Anzeige einer Datenbrille nachteilig sein. Die Datenbrille befindet sich stets im Blickfeld des Fahrers und zieht dadurch visuelle Aufmerksamkeit auf sich und erschwert gegebenenfalls den Blick auf verkehrsrelevante Bereiche des Umfeldes. In driving situations in which the driver is very stressed by the primary task, representations on the display of data goggles can be disadvantageous. The data glasses are always in the driver's field of vision, attracting visual attention and, if necessary, making it difficult to see traffic-related areas of the environment.
Die umfassende Erfassung von Körpereigenschaften in Echtzeit für den Masseneinsatz ist kaum möglich, da das invasive Anbringen der dafür notwendigen Sensorik (an Körper) nicht akzeptieren würde oder ungenau und verrauscht ist. The comprehensive collection of body properties in real time for mass use is hardly possible, since the invasive attachment of the necessary sensors (to the body) would not accept or is inaccurate and noisy.
Es stellt sich somit die Aufgabe an den Fachmann, den Träger einer Datenbrille und Fahrer eines Fahrzeugs entsprechend der kognitiven Belastung durch die Fahraufgabe mit Informationen zu versorgen. It is therefore the task of the expert to provide the wearer of a data glasses and drivers of a vehicle according to the cognitive load by the driving task with information.
Ein erster Aspekt der Erfindung betrifft ein Verfahren zum Bestimmen anzuzeigender Informationstypen auf einer Datenbrille für den Fahrer eines Fahrzeugs; wobei die Datenbrille über zumindest einen Sensor verfügt, der Messungen am Körper des Fahrers durchführt und Körpereigenschaften ermittelt; wobei das Verfahren umfasst: Ermitteln von Körpereigenschaften des Fahrers durch die Datenbrille; Empfangen von Fahrdaten des Fahrzeugs; Bestimmen der auf der Datenbrille anzuzeigenden Informationstypen abhängig von den Körpereigenschaften und den Fahrdaten. Die anzuzeigenden Informationstypen werden von der Datenbrille angezeigt. Das Bestimmen der anzuzeigenden Informationstypen kann auch darin bestehen, die zu unterdrückenden Informationstypen zu identifizieren und diese insbesondere nicht anzuzeigen. A first aspect of the invention relates to a method for determining information types to be displayed on data glasses for the driver of a vehicle; the data goggles having at least one sensor that performs measurements on the body of the driver and determines body characteristics; the method comprising: determining body characteristics of the driver through the data glasses; Receiving driving data of the vehicle; Determine the information types to be displayed on the data glasses depending on the body characteristics and the driving data. The information types to be displayed are displayed by the data glasses. The determination of the types of information to be displayed can also be to identify the information types to be suppressed and in particular not to display them.
Durch die Verwendung von Sensorik in der Datenbrille wird es möglich, Körpereigenschaften, wie die Pupillengröße oder Herzschlag, ohne möglicherweise nicht akzeptierte Zusatzgeräte zu erfassen. Abhängig davon und von Fahrdaten, beispielsweise der Spurtreue, werden mehr oder weniger verschieden Informationen eingeblendet. Befindet sich der Fahrer und Träger der Datenbrille zum Beispiel an einer unübersichtlichen Kreuzungssituation (festgestellt mithilfe eines Navigationsgerätes und dort gespeicherten schwierigen Verkehrsstellen) und seine Körperdaten weisen auf eine hohe Belastung hin, werden in dieser Situation unwichtige Daten (Informationstypen) ausgeblendet, beispielsweise der Name des gerade abgespielten Musikstückes. Aus den Körpereigenschaften und den Fahrdaten wird meist als Zwischenschritt ein Maß für die kognitive Belastung des Fahrers (die durch die Fahraufgabe und andere Tätigkeiten entsteht) errechnet. Liegt diese über einem Schwellwert, wird begonnen die Darstellungen bestimmter Informationstypen auf der Datenbrille zu unterdrücken. The use of sensors in the data glasses makes it possible to detect body characteristics, such as pupil size or heartbeat, without potentially unacceptable accessories. Depending on this and driving data, for example the directional stability, more or less different information is displayed. For example, if the driver and wearer of the data glasses are in a confusing intersection situation (detected by a navigation device and difficult traffic areas stored there) and his body data indicate a high load, in this situation unimportant data (information types) is hidden, for example the name of the person currently playing piece of music. From the body characteristics and the driving data is usually calculated as an intermediate step, a measure of the cognitive load on the driver (which is caused by the driving task and other activities). If this is above a threshold value, the representations of certain types of information on the data glasses are started to be suppressed.
Der Fahrer trägt also ein Head-Mounted Display, in dem Anzeigen (bspw. fahrrelevante Daten, Infotainmentdarstellungen) halbtransparent über der Fahrszene angezeigt werden. Anders als beispielsweise bei einer Anzeige im Armaturenbrett verlangen die Darstellungen in der Datenbrille nicht bei jeder Blickzuwendung eine komplette Blickabwendung von der Fahrszene und damit dem Umfeld des Fahrzeugs. Stattdessen genügt ein schneller Fokuswechsel auf die angezeigten Inhalte. Um den Fahrer in Phasen, in denen die Fahraufgabe anspruchsvoll ist, nicht zusätzlich zu belasten, werden in diesen Fällen bestimmte Elemente der Anzeige ausgeblendet. Anders als bei früheren Systemen wird ein Großteil der hierfür notwendigen Sensorik in dem Head-Mounted Display eingebaut und müssen nicht extra am Körper des Fahrers angebracht werden. Diese Parameter werden zur Feststellung des aktuellen Workloads beliebig mit Parametern, welche die aktuelle Fahrleistung oder Fahrsituation des Fahrers betreffen, kombiniert. Diese Parameter können zur Feststellung des aktuellen Workloads beliebig mit Parametern, welche die aktuelle Fahrleistung des Fahrers betreffen, kombiniert werden. Wird beim Fahrer ein Workload festgestellt, der ein bestimmtes Maß überschreitet, können nun Maßnahmen ergriffen werden, um den Fahrer informatorisch zu entlasten. The driver thus carries a head-mounted display in which displays (for example, driving-relevant data, infotainment representations) are displayed semi-transparently over the driving scene. In contrast to, for example, an indication in the dashboard, the representations in the data glasses do not require a complete avertion of the driving scene and thus the surroundings of the vehicle with every glance. Instead, a quick change of focus to the content displayed is sufficient. In these cases, in order to avoid placing an additional burden on the driver during phases in which the driving task is demanding, certain elements of the display are hidden. Unlike previous systems, much of the necessary sensor technology is built into the head-mounted display and does not need to be attached to the driver's body. These parameters are arbitrarily combined to determine the current workload with parameters that relate to the current driving performance or driving situation of the driver. These parameters can be arbitrarily combined to determine the current workload with parameters that relate to the current driving performance of the driver. If the driver detects a workload that exceeds a certain level, measures can now be taken to relieve the driver of information.
Ein weiterer Vorteil des erfindungsgemäßen Verfahrens ist, dass in einem Gerät, dass der Fahrer trägt (die Datenbrille), alle Sensoren umfasst sind und der Fahrer durch die Anzeige der Datenbrille einen direkten Vorteil der Datenbrille erlebt. Aus diesem Grund wird erwartet, dass die Akzeptanz für Messgeräte in Datenbrillen größer ist als für reine Messgeräte. Des Weiteren ermöglicht die Verbringung der Messgeräte in der Datenbrille eine Auswertung der Körpereigenschaften und einen Empfang der Fahrdaten in der Datenbrille, so dass direkt dort, wo die Anzeige vorgenommen wird, auch die entsprechende Information unterdrückt werden kann. Dies minimiert den Kommunikationsaufwand zwischen Fahrzeug und Datenbrille, weil nur die Fahrdaten übermittelt werden müssen. A further advantage of the method according to the invention is that in a device that the driver is wearing (the data glasses), all sensors are included and the driver experiences a direct advantage of the data glasses by the display of the data glasses. For this reason, it is expected that the acceptance of measuring devices in data glasses is greater than for pure measuring devices. Furthermore, the shipment of the measuring devices in the data glasses allows an evaluation of the body characteristics and a reception of the driving data in the data glasses, so that directly where the display is made, the corresponding information can be suppressed. This minimizes the communication effort between the vehicle and the data glasses because only the driving data has to be transmitted.
Die Datenbrille bestimmt insbesondere eine oder mehrere der folgenden Körpereigenschaften: Eigenschaften der Augenpupillen des Fahrers mithilfe einer in oder an der Datenbrille angeordneten Kamera (Messung der Pupillometrie); Den Herzschlag mithilfe von Sensoren, insbesondere kapazitiven Sensoren, in dem Teil der Brillenbügel, die gewöhnlich Hautkontakt haben; Den Hautleitwert mithilfe von Sensoren, insbesondere kapazitiven Sensoren, in dem Teil der Brillenbügel, die gewöhnlich Hautkontakt haben (am Ohr (kapazitiv) und/oder an Schläfe (kapazitiv)). Specifically, the data glasses determine one or more of the following body characteristics: characteristics of the driver's eye pupil using a camera placed in or on the data goggles (measurement of pupillometry); The heartbeat using sensors, in particular capacitive sensors, in the part of the temples that usually have skin contact; The skin conductance by means of sensors, in particular capacitive sensors, in the part of the temples which usually have skin contact (on the ear (capacitive) and / or on temples (capacitive)).
In bevorzugten Implementierung sind die Fahrdaten die Abweichungen der Geschwindigkeit des Fahrzeugs von der durchschnittlichen Geschwindigkeit, Abweichungen der Distanz zum Vorderfahrzeug, die Lenkfrequenz des Fahrzeugs, das aufgebrachte Lenkmoment, die Beschleunigung des Fahrzeugs, die Neigung des Fahrzeugs, die ununterbrochene Fahrtdauer des Fahrzeugs, Spurhaltegüte, eine Position an einer als schwierig eingestuften Verkehrsstelle, und/oder den Verlauf der Fahrtätigkeit des Fahrers umfassen. Diese Fahrdaten können Fahrdaten sein, die auch für andere Zwecke im Fahrzeug erhoben werden, beispielsweise für aktive Sicherheitssysteme, die den Fahrzustand des Fahrzeugs regeln und auch in der Lage sind Notbremsungen oder automatisierte Notführungen des Fahrzeugs durchzuführen. In preferred implementation, the driving data are the deviations of the speed of the vehicle from the average speed, deviations of the distance to the front vehicle, the steering frequency of the vehicle, the applied steering torque, the acceleration of the vehicle, the inclination of the vehicle, the uninterrupted travel time of the vehicle, tracking quality, a position on a classified as difficult traffic location, and / or the course of the driver's driving activity. This driving data can be driving data that is also collected for other purposes in the vehicle, for example for active safety systems that regulate the driving state of the vehicle and are also able to perform emergency braking or automated emergency guidance of the vehicle.
In einer Implementierung wird beim Bestimmen der anzuzeigenden Informationsmenge auch die Kopfpose oder Teile davon berücksichtigt; wobei die Kopfpose insbesondere mithilfe einer Kamera der Datenbrille bestimmt wird, die Aufnahmen der Umgebung des Trägers der Datenbrille macht. Somit ist eine Kombination der aktuellen Kopfdrehung des Fahrers bzw. dessen Pose mit den bereits berücksichtigten Körpereigenschaften und Fahrdaten kann weiteren Aufschluss über die Belastung des Fahrers liefern. Wenn beispielsweise häufig und weite Kopfdrehungen ausgeführt werden, kann davon ausgegangen werden, dass der Fahrer das Umfeld großräumig absucht bzw. beobachtet. In diesem Fall werden dann unnötige Darstellungen (Informationstypen) ausgeblendet. In one implementation, when determining the amount of information to be displayed, the head pose or portions thereof are also considered; in particular, the head pose is determined by means of a camera of the data glasses, which takes pictures of the surroundings of the wearer of the data glasses. Thus, a combination of the current head rotation of the driver or his pose with the already taken into account body characteristics and driving data can provide further information about the burden of the driver. If, for example, frequent and wide head turns are carried out, it can be assumed that the driver searches or observes the surroundings over a large area. In this case, unnecessary representations (information types) are hidden.
Das Bestimmen der anzuzeigenden Informationsmenge wird typischerweise mithilfe einer Zuordnung von Körpereigenschaften und Fahrdaten zu Informationstypen ausgeführt. Dazu ist meist in der Datenbrille oder im Fahrzeug eine Tabelle abgelegt, die diese Beziehung herstellt. Es kann auch eine Zuordnung des Maßes für die kognitive Belastung oder des Maßes für die Belastung durch die Fahraufgabe zu Informationstypen vorgesehen sein. Die aufgelisteten Informationstypen sind entweder solche, deren Anzeige zugelassen wird, oder solche deren Anzeige unterdrückt wird. Dabei ist das Maß für die kognitive Belastung oder Belastung durch die Fahraufgabe abhängig von den Körpereigenschaften und Fahrdaten. Determining the amount of information to be displayed is typically accomplished by associating body properties and driving data with information types. For this purpose, a table is usually stored in the data glasses or in the vehicle, which establishes this relationship. An assignment of the measure for the cognitive load or the measure for the load of the driving task to information types can also be provided. The information types listed are either those whose ad is allowed or whose ad is suppressed. The measure of the cognitive load or load of the driving task depends on the body characteristics and driving data.
In einer Weiterbildung umfasst das Verfahren ferner: Bestimmen der Art der Ausführung einer Funktion des Fahrzeugs abhängig von den Körpereigenschaften und den Fahrdaten. Die Art der Ausführung der Funktion kann eines oder mehrere der Folgenden sein: die Aktivierung oder Deaktivierung einer Anzeige des Fahrzeugs; die Anzeige oder das Ausblenden von Informationen auf der Anzeige des Fahrzeugs abhängig vom Informationstyp; das Unterdrücken oder Verzögern von nicht auf die Fahrzeugführung bezogenen Aufgaben, insbesondere eingehende Telefonanrufe und/oder Fahrzeugwartungsanzeigen; der Ausgabeweges einer Information, insbesondere Navigationshinweisen, von der Darstellung auf einer Anzeige des Fahrzeugs zu einer Ausgabe über Lautsprecher und/oder Unterdrücken der Darstellung der Information auf der Anzeige des Fahrzeugs; das Ändern der Beleuchtung des Innenraums des Fahrzeugs; das Ändern der akustischen Ausgaben des Fahrzeugs im Innenraum, insbesondere der Musikausgabe. Durch das Workload-abhängige Wechseln der Ausgabemodalität (akustische, statt visuelle Information) kann die visuelle Auffassungskapazität des Fahrers vollständiger für die Durchführung der Fahraufgabe entlastet werden. In a further development, the method further comprises: determining the type of execution of a function of the vehicle depending on the body characteristics and the driving data. The manner of performing the function may be one or more of the following: enabling or disabling an indication of the vehicle; displaying or hiding information on the display of the vehicle depending on the type of information; suppressing or delaying non-vehicle-related tasks, in particular incoming telephone calls and / or vehicle maintenance messages; the output path of information, in particular navigation instructions, from the representation on a display of the vehicle to an output via loudspeakers and / or suppressing the representation of the information on the display of the vehicle; changing the illumination of the interior of the vehicle; changing the acoustic outputs of the vehicle in the interior, especially the music output. The workload-dependent change of output modality (audible, rather than visual information) can more fully relieve the driver's visual comprehension capacity of performing the driving task.
Somit wird die festgestellte Belastung des Fahrers nicht nur für die Anpassung der Darstellung auf der Datenbrille verwendet sondern auch für Funktionen des Fahrzeugs, die den Fahrer ablenken könnten. Thus, the detected load of the driver is used not only for the adaptation of the representation on the data glasses but also for functions of the vehicle that could distract the driver.
Ein anderer Aspekt der Erfindung betrifft ein System umfassend ein Fahrzeug und eine Datenbrille, wobei das System zur Ausführung einer der vorhergehenden Verfahren eingerichtet ist. Die Schritte des Verfahrens können allein im Fahrzeug, allein in der Datenbrille oder verteilt auf Fahrzeug und Datenbrille ausgeführt werden. Beispielsweise kann die Bestimmung der anzuzeigenden Informationstypen auf der Datenbrille oder im Fahrzeug ausgeführt werden. Im letzten Fall würden nicht anzuzeigende Informationen erst gar nicht zur Datenbrille übertragen. Allerdings müssten hierfür die Körpereigenschaften von der Datenbrille zum Fahrzeug übertragen werden. Another aspect of the invention relates to a system comprising a vehicle and smart glasses, the system being arranged to carry out any of the foregoing methods. The steps of the method can be carried out alone in the vehicle, alone in the data glasses or distributed on the vehicle and data glasses. For example, the determination of the types of information to be displayed on the data glasses or in the vehicle can be performed. In the latter case, information not to be displayed would not even be transmitted to the data glasses. However, for this purpose, the body properties would have to be transferred from the data glasses to the vehicle.
KURZE BESCHREIBUNG DER ZEICHNUNG BRIEF DESCRIPTION OF THE DRAWING
Gleiche Bezugszeichen beziehen sich auf sich entsprechende Elemente über die Figuren hinweg. Like reference numerals refer to corresponding elements throughout the figures.
DETAILLIERTE BESCHREIBUNG DER AUSFÜHRUNGSBEISPIELE DETAILED DESCRIPTION OF THE EMBODIMENTS
Die Datenbrille
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- WO 2013/012914 [0005] WO 2013/012914 [0005]
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015205921.9A DE102015205921A1 (en) | 2015-04-01 | 2015-04-01 | Information types to be displayed on data goggles in the vehicle context |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015205921.9A DE102015205921A1 (en) | 2015-04-01 | 2015-04-01 | Information types to be displayed on data goggles in the vehicle context |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102015205921A1 true DE102015205921A1 (en) | 2016-10-06 |
Family
ID=56937276
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102015205921.9A Pending DE102015205921A1 (en) | 2015-04-01 | 2015-04-01 | Information types to be displayed on data goggles in the vehicle context |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102015205921A1 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102017209798A1 (en) * | 2017-06-09 | 2018-12-13 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for operating a display system in a motor vehicle |
WO2020020509A1 (en) | 2018-07-25 | 2020-01-30 | Audi Ag | Method and system for evaluating virtual content reproduced in motor vehicles |
CN113835225A (en) * | 2020-06-24 | 2021-12-24 | 宏碁股份有限公司 | Head-mounted display device and image display method using same |
CN114312306A (en) * | 2022-01-04 | 2022-04-12 | 一汽解放汽车有限公司 | Driving glasses control method, driving glasses, computer device and storage medium |
DE102021119275A1 (en) | 2021-07-26 | 2023-01-26 | Bayerische Motoren Werke Aktiengesellschaft | Positioning of content displayed on data glasses in a contact-analogous manner in a vehicle |
DE102022200312A1 (en) | 2022-01-13 | 2023-07-13 | Robert Bosch Gesellschaft mit beschränkter Haftung | Sensor arrangement for attachment to a user's head |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013012914A2 (en) | 2011-07-20 | 2013-01-24 | Google Inc. | Dynamic control of an active input region of a user interface |
-
2015
- 2015-04-01 DE DE102015205921.9A patent/DE102015205921A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013012914A2 (en) | 2011-07-20 | 2013-01-24 | Google Inc. | Dynamic control of an active input region of a user interface |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102017209798A1 (en) * | 2017-06-09 | 2018-12-13 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for operating a display system in a motor vehicle |
WO2020020509A1 (en) | 2018-07-25 | 2020-01-30 | Audi Ag | Method and system for evaluating virtual content reproduced in motor vehicles |
US11327559B2 (en) | 2018-07-25 | 2022-05-10 | Audi Ag | Method and system for evaluating virtual content reproduced in motor vehicles |
CN113835225A (en) * | 2020-06-24 | 2021-12-24 | 宏碁股份有限公司 | Head-mounted display device and image display method using same |
CN113835225B (en) * | 2020-06-24 | 2023-08-08 | 宏碁股份有限公司 | Head-mounted display device and picture display method using same |
DE102021119275A1 (en) | 2021-07-26 | 2023-01-26 | Bayerische Motoren Werke Aktiengesellschaft | Positioning of content displayed on data glasses in a contact-analogous manner in a vehicle |
CN114312306A (en) * | 2022-01-04 | 2022-04-12 | 一汽解放汽车有限公司 | Driving glasses control method, driving glasses, computer device and storage medium |
CN114312306B (en) * | 2022-01-04 | 2024-03-19 | 一汽解放汽车有限公司 | Control method of driving glasses, computer device and storage medium |
DE102022200312A1 (en) | 2022-01-13 | 2023-07-13 | Robert Bosch Gesellschaft mit beschränkter Haftung | Sensor arrangement for attachment to a user's head |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102015205921A1 (en) | Information types to be displayed on data goggles in the vehicle context | |
DE102018207069B4 (en) | Method and control unit for operating an autonomous vehicle | |
DE112016005784B4 (en) | Visual perception assistance system and visual perception target object detection system | |
DE102015115666A1 (en) | Performance driving system and performance driving method | |
DE102015201456B4 (en) | Method and system for issuing a warning message in a vehicle | |
DE102017110283A1 (en) | CONTROLLING FUNCTIONS AND EXPENSES OF AUTONOMOUS VEHICLES BASED ON A POSITION AND ATTENTION FROM OCCUPANTS | |
WO2017108286A1 (en) | Method for operating a virtual reality system, and virtual reality system | |
DE102014207807A1 (en) | Personal driver assistance | |
DE102011056714A1 (en) | System standby switch for a human-machine interaction control system with eye tracking | |
DE102015105494A1 (en) | Systems and methods for designing physiological driver data based on vehicle events | |
DE102015003882A1 (en) | Method for operating a arranged in a motor vehicle virtual reality glasses and virtual reality system | |
DE102012109624A1 (en) | Vehicle installation and method for assessing and communicating the condition of a driver | |
DE102016121625A1 (en) | Apparatus and method for monitoring a concentration of a driver by eye tracking | |
DE102015220398A1 (en) | Method for transmitting information to a driver of a motor vehicle and adaptive driver assistance system | |
DE102014222355A1 (en) | Fatigue detection with sensors of data glasses | |
DE102018201509A1 (en) | Method and device for operating a display system with data glasses | |
DE102015223248A1 (en) | Method for a driver assistance system | |
DE102019201407A1 (en) | Method and device for controlling a driver's attention | |
DE102017211028A1 (en) | A method of warning a passenger in a vehicle | |
DE102018201768A1 (en) | A method of displaying information in a head-up display of a vehicle, a display system for a vehicle, and a vehicle having a display system | |
DE102016121279A1 (en) | ON THE CONNECTIVITY OF A PORTABLE DEVICE BASED VEHICLE CONTROL | |
WO2017067732A1 (en) | Protective helmet, method for sensing a viewing direction, method for driver assistance, in particular for providing warning, method for menu control | |
DE102019115522A1 (en) | Method and system for avoiding kinetosis and / or boredom for a vehicle | |
DE112019007195T5 (en) | DISPLAY CONTROL DEVICE, DISPLAY CONTROL METHOD AND DISPLAY CONTROL PROGRAM | |
DE102016225262A1 (en) | Method and device for operating a display system with data glasses |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R163 | Identified publications notified | ||
R016 | Response to examination communication |