DE102007005028B4 - Method and device for displaying information on a projection screen in a vehicle - Google Patents

Method and device for displaying information on a projection screen in a vehicle Download PDF

Info

Publication number
DE102007005028B4
DE102007005028B4 DE102007005028.5A DE102007005028A DE102007005028B4 DE 102007005028 B4 DE102007005028 B4 DE 102007005028B4 DE 102007005028 A DE102007005028 A DE 102007005028A DE 102007005028 B4 DE102007005028 B4 DE 102007005028B4
Authority
DE
Germany
Prior art keywords
person
vehicle
information
projection surface
projector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE102007005028.5A
Other languages
German (de)
Other versions
DE102007005028A1 (en
Inventor
Dr. Gottwaldt Lars
Roland Penner
Simone Wilsdorf
Alexander Siebeneich
Maja Schumann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102007005028.5A priority Critical patent/DE102007005028B4/en
Publication of DE102007005028A1 publication Critical patent/DE102007005028A1/en
Application granted granted Critical
Publication of DE102007005028B4 publication Critical patent/DE102007005028B4/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/656Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being a passenger
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

Verfahren zum Wiedergeben von Information auf einer Projektionsfläche (11) in einem Fahrzeug (1) für eine im Fahrzeug (1) befindliche Person (3), bei dem- die Blickrichtung (B) der Person (3) erfasst wird und- die Information auf eine undurchsichtige Projektionsfläche (11) in dem Fahrzeug (1) projiziert wird, die sich in Blickrichtung (B) der Person (3) oder nahe der Blickrichtung (B) der Person (3) befindet, dadurch gekennzeichnet, dass, wenn die Blickrichtung der Person nicht auf eine undurchsichtige Projektionsfläche gerichtet ist, in Abhängigkeit von der Blickrichtung der Person (3) entschieden wird, ob eine Wiedergabe der Information auf eine zur Blickrichtung nächstgelegene undurchsichtige Projektionsfläche in dem Fahrzeug (1) erfolgt.A method for displaying information on a projection surface (11) in a vehicle (1) for a person (3) located in the vehicle (1), in which the line of sight (B) of the person (3) is detected and the information an opaque projection surface (11) is projected in the vehicle (1), which is in the line of sight (B) of the person (3) or close to the line of sight (B) of the person (3), characterized in that when the line of sight of the person is not directed at an opaque projection surface, depending on the viewing direction of the person (3), a decision is made as to whether the information is to be reproduced on an opaque projection surface in the vehicle (1) closest to the viewing direction.

Description

Die vorliegende Erfindung betrifft ein Verfahren und eine Vorrichtung zum Wiedergeben von Information auf einer Projektionsfläche in einem Fahrzeug für eine im Fahrzeug befindliche Person. Hierbei wird zumindest ein im Fahrzeug angeordneter Projektor zur Projektion der Information auf einer Projektionsfläche in dem Fahrzeug verwendet. Ferner ist eine Einrichtung zum Erfassen der Blickrichtung der Person vorgesehen. Mit dem Projektor und der Blickrichtungserfassungseinrichtung ist eine Steuereinrichtung gekoppelt, mit welcher die Projektionsrichtung des Projektors in Abhängigkeit von der Blickrichtung der Person steuerbar ist.The present invention relates to a method and a device for reproducing information on a projection surface in a vehicle for a person in the vehicle. In this case, at least one projector arranged in the vehicle is used to project the information onto a projection surface in the vehicle. A device for detecting the line of sight of the person is also provided. A control device is coupled to the projector and the viewing direction detection device, with which the projection direction of the projector can be controlled depending on the viewing direction of the person.

Üblicherweise sind in einem Kraftfahrzeug Anzeigeeinrichtungen vorgesehen, die den Fahrzeuginsassen verschiedenartige Informationen anzeigen können. Für den Fahrer ist ein sog. Kombiinstrument so angeordnet, dass Information unterhalb der üblichen Blickrichtung des Fahrers in Fahrtrichtung angezeigt wird. Des Weiteren kann in der Mitte zwischen dem Fahrer und dem Beifahrer das Display einer Multifunktionsbedieneinheit angeordnet sein, welches vom Fahrer und Beifahrer gleichermaßen abgelesen werden kann. Im Fahrzeug ist es insbesondere für den Fahrer wichtig, dass er bestimmte Informationen, wie z.B. Warnhinweise oder Navigationsinformationen, schnell und sicher erfassen kann. Des Weiteren besteht ein Bedürfnis, den Mitfahrern beispielsweise Entertainment-Daten anzuzeigen.Display devices are usually provided in a motor vehicle, which can display various types of information to the vehicle occupants. A so-called instrument cluster is arranged for the driver in such a way that information is displayed below the driver's usual viewing direction in the direction of travel. Furthermore, the display of a multifunction control unit can be arranged in the middle between the driver and the front passenger, which can be read by the driver and front passenger alike. In the vehicle, it is particularly important for the driver to be able to quickly and safely record certain information, such as warnings or navigation information. There is also a need to display entertainment data, for example, to the passengers.

In der WO 2005/054786 A1 wird eine Verfahren und Vorrichtung vorgeschlagen, um Informationen für den Betreiber eines Fortbewegungsmittels darzustellen. Dabei wird die Information im peripheren Blickfeld des Fahrers in einem Blickfeld, in welchem der Fahrer die Information nur über peripheres Sehen erfassen kann, oder im Blickfeld des Fahrers, welches sich direkt in Blickrichtung des Fahrers befindet, angezeigt. Dabei kann der Fahrer selbst entscheiden, welche Informationen in welchem Blickfeld angezeigt werden sollen.In the WO 2005/054786 A1 a method and device is proposed to present information to the operator of a means of transport. At this time, the information is displayed in the driver's peripheral vision in a field of vision in which the driver can grasp the information only through peripheral vision, or in the driver's field of vision that is directly in the driver's line of vision. The driver can decide for himself which information should be displayed in which field of vision.

Aus der DE 102 15 893 C1 ist eine Projektionseinrichtung zur Wiedergabe von optischen Informations- und Entertainment-Daten in Personentransportmitteln bekannt. Die Einrichtung umfasst zur Bilderzeugung einen Laserprojektor, der eine integrierte Ablenkeinrichtung aufweist, mittels der ein oder mehrere Laserstrahlen rasterförmig auf Projektionsflächen im Innenbereich des Personentransportmittels gerichtet werden. Dabei können simultan unterschiedliche visuelle Informationen auf verschiedene Projektionsflächen projiziert werden. Durch diese Einrichtung können insbesondere verschiedene Entertainment-Daten, wie z.B. die Wiedergabe von Internetdaten und gleichzeitig die Wiedergabe von Videodaten für die Fontpassagiere auf separaten Projektionsflächen bereitgestellt werden.From the DE 102 15 893 C1 a projection device for reproducing optical information and entertainment data in means of passenger transport is known. The device comprises a laser projector for image generation, which has an integrated deflection device, by means of which one or more laser beams are directed in a grid pattern onto projection surfaces in the interior of the means of passenger transport. Different visual information can be projected simultaneously onto different projection surfaces. With this device, in particular, various entertainment data, such as the playback of Internet data and at the same time the playback of video data, can be made available for the font passengers on separate projection surfaces.

Die DE 10 2005 020 260 A1 beschreibt eine Anzeigesystem für ein Fahrzeug mit einer Vielzahl an Projektionsflächen an verschiedenen Positionen im Fahrzeuginnenraum, sowie einen Projektor, der diese Projektionsflächen belichten kann. Die Auswahl der anzusteuernden Projektionsfläche erfolgt insbesondere anhand des Nutzungszustands und/oder der Fahrsituation des Kraftfahrzeugs.the DE 10 2005 020 260 A1 describes a display system for a vehicle with a large number of projection surfaces at different positions in the vehicle interior, as well as a projector that can illuminate these projection surfaces. The projection surface to be controlled is selected in particular on the basis of the usage status and/or the driving situation of the motor vehicle.

Des Weiteren ist es bekannt, die Blickrichtung des Fahrers zu erfassen und die Information als sog. Head-up-Display in Blickrichtung des Fahrers in die Windschutzscheibe zu projizieren. Derartige Vorrichtungen sind beispielsweise in der DE 199 51 001 C2 , der DE 10 2004 031 311 A1 und der DE 10 2004 034 358 A1 beschrieben.Furthermore, it is known to detect the driver's viewing direction and to project the information as a so-called head-up display onto the windshield in the driver's viewing direction. Such devices are for example in DE 199 51 001 C2 , the DE 10 2004 031 311 A1 and the DE 10 2004 034 358 A1 described.

Des Weiteren sind unter dem Begriff „Augmented Reality“ Systeme bekannt, die beispielsweise bei der Entwicklung und dem Design von Kraftfahrzeugen die reale Welt, d.h. reale Gegenstände, mit zusätzlichen virtuellen, computergenerierten Informationen anreichert oder die visuelle Darstellung dem Betrachter vollständig computergeneriert stereoskopisch darstellt. Ein solches System ist beispielsweise in der DE 101 34 430 A1 beschrieben. Für derartige Systeme ist es jedoch zumeist erforderlich, dass der Benutzer einen Datenhelm trägt. Ferner ist der Systemaufbau sehr aufwändig und teuer, so dass ein Einsatz im Innenraum eines Fahrzeugs nicht möglich ist.Furthermore, the term "augmented reality" is known for systems which, for example in the development and design of motor vehicles, enrich the real world, ie real objects, with additional virtual, computer-generated information or present the viewer with a fully computer-generated visual representation in stereoscopic form. Such a system is, for example, in DE 101 34 430 A1 described. For systems of this type, however, it is usually necessary for the user to wear a data helmet. Furthermore, the system structure is very complex and expensive, so that it cannot be used in the interior of a vehicle.

Es ist die Aufgabe der vorliegenden Erfindung, ein Verfahren und eine Vorrichtung der eingangs genannten Art bereitzustellen, bei denen einer Person im Fahrzeug insbesondere dem Fahrer die Information so bereitgestellt werden kann, dass sie von der Person selbst dann schnell und sicher erfasst werden kann, wenn sie nicht in Fahrtrichtung durch die Windschutzscheibe blickt.It is the object of the present invention to provide a method and a device of the type mentioned in which a person in the vehicle, in particular the driver, can be provided with the information in such a way that it can be quickly and reliably detected by the person even if she is not looking through the windshield in the direction of travel.

Erfindungsgemäß wird diese Aufgabe durch ein Verfahren mit den Merkmalen des Anspruchs 1 und einer Vorrichtung mit den Merkmalen des Anspruchs 6 gelöst. Vorteilhafte Aus- und Weiterbildungen ergeben sich aus den Unteransprüchen.According to the invention, this object is achieved by a method having the features of claim 1 and a device having the features of claim 6. Advantageous training and further developments result from the dependent claims.

Bei dem erfindungsgemäßen Verfahren wird die Blickrichtung der Person, die sich im Fahrzeug befindet, erfasst. Die Information wird dann auf eine undurchsichtige Projektionsfläche in dem Fahrzeug projiziert, die sich in Blickrichtung der Person oder nahe der Blickrichtung der Person befindet. Bei dem erfindungsgemäßen Verfahren ist man somit bei der Projektion der Information nicht an das sog. Head-up-Display in der Windschutzscheibe in Blickrichtung des Fahrers gebunden. Vielmehr werden die undurchsichtigen Flächen im Innenraum des Fahrzeugs als Projektionsfläche für die Darstellung der Information genutzt. Dies ist insbesondere dann vorteilhaft, wenn die Information, wie beispielsweise eine Warnmeldung, vom Fahrer sehr schnell erfasst werden soll, der Fahrer jedoch nicht durch die Windschutzscheibe in Fahrtrichtung blickt, sondern in anderer Richtung auf eine Fläche im Innenraum des Fahrzeugs. In diesem Fall kann sichergestellt werden, dass der Fahrer die Information auch dann schnell wahrnimmt, wenn er beispielsweise in Richtung des Handschuhfachs des Beifahrers oder sogar kurzzeitig nach hinten schaut. Gegenüber herkömmlichen Verfahren zur Projektion von Entertainment-Daten hat das erfindungsgemäße Verfahren den Vorteil, dass die Information variabel dort dargestellt wird, wo die Person, d.h. insbesondere der Fahrer, hinschaut.In the method according to the invention, the viewing direction of the person who is in the vehicle is recorded. The information is then projected onto an opaque projection surface in the vehicle which is in the person's line of sight or close to the person's line of sight. With the method according to the invention, the projection of the information is therefore not tied to the so-called head-up display in the windshield in the driver's line of sight. Rather, they will opaque surfaces in the interior of the vehicle as a projection surface for displaying the information. This is particularly advantageous if the information, such as a warning message, is to be received by the driver very quickly, but the driver is not looking through the windshield in the direction of travel, but in a different direction at an area in the interior of the vehicle. In this case, it can be ensured that the driver also perceives the information quickly if, for example, he looks in the direction of the passenger's glove compartment or even briefly backwards. Compared to conventional methods for projecting entertainment data, the method according to the invention has the advantage that the information is displayed variably where the person, ie in particular the driver, is looking.

Um die Blickrichtung zu erfassen, kann die Position und die Ausrichtung der Augen und/oder des Kopfes der Person verfolgt werden. Dabei kann die Blickrichtung beispielsweise mittels einer Kamera und einer zugeordneten Auswerteeinheit oder eines Laserstrahls, welcher einen vorgegebenen Raumwinkel abtastet, erfasst werden. Wenn sich die Blickrichtung der Person verändert, wird auch die Projektionsfläche in Abhängigkeit von der Blickrichtung der Person verändert. Auf diese Weise kann die Projektionsfläche mit der Blickrichtung der Person wandern, so dass sie immer im Sichtfeld des Benutzers bleibt.In order to detect gaze direction, the position and orientation of the person's eyes and/or head can be tracked. In this case, the line of sight can be recorded, for example, by means of a camera and an associated evaluation unit or a laser beam, which scans a predetermined solid angle. If the person's line of sight changes, the projection surface is also changed depending on the person's line of sight. In this way, the projection surface can move with the person's line of sight, so that it always remains in the user's field of vision.

Wenn die Blickrichtung der Person nicht auf eine undurchsichtige Projektionsfläche gerichtet ist, kann die Information möglicherweise gar nicht wiedergegeben werden. In diesem Fall kann die Information jedoch auf die zur Blickrichtung nächstgelegene undurchsichtige Projektionsfläche in dem Fahrzeug projiziert werden. Erfindungsgemäß wird jedoch dann in Abhängigkeit von der Blickrichtung der Person entschieden, ob eine Wiedergabe der Information erfolgt. Beispielsweise kann die Information auf der nächstgelegenen undurchsichtigen Projektionsfläche nur dann wiedergegeben werden, wenn der Blick der Person nicht in Fahrtrichtung durch die Windschutzscheibe gerichtet ist.If the person's line of sight is not directed towards an opaque projection surface, the information may not be displayed at all. In this case, however, the information can be projected onto the opaque projection surface in the vehicle that is closest to the viewing direction. According to the invention, however, a decision is then made as a function of the person's viewing direction as to whether the information is to be reproduced. For example, the information can only be reproduced on the nearest opaque projection surface if the person's gaze is not directed through the windshield in the direction of travel.

Gemäß einer weiteren bevorzugten Ausgestaltung des Verfahrens wird bei der Projektion der Information die Form der Projektionsfläche berücksichtigt. Es kann insbesondere eine Verzerrung der Bilddaten zur Korrektur dieser Effekte durchgeführt werden, da die Normale der gesamten Projektionsfläche üblicherweise nicht in Richtung der projizierenden Lichtstrahlen gerichtet ist. Hierfür kann die Form der Projektionsfläche im Raum erfasst werden und die Wiedergabe der Information daraufhin so berechnet werden, dass die Darstellung der Information derart erfolgt, dass sie aus der Blickrichtung der Person so unverzerrt wie möglich erscheint.According to a further preferred embodiment of the method, the shape of the projection surface is taken into account when the information is projected. In particular, the image data can be distorted in order to correct these effects, since the normal of the entire projection surface is usually not directed in the direction of the projecting light beams. For this purpose, the shape of the projection surface can be recorded in space and the reproduction of the information can then be calculated in such a way that the information is presented in such a way that it appears as undistorted as possible from the direction of view of the person.

Die hierfür nötige Verzerrung der Bilddaten wird bevorzugt in Abhängigkeit eines Bildes der Projektionsfläche berechnet, das mittels einer im Bereich des Kopfes eines möglichen Fahrzeuginsassen angeordneten so genannten Kopfnullkamera aufgenommen wird. Unter einer Kopfnullkamera wird im Sinne der Erfindung insbesondere eine Kamera verstanden, die im Bereich eines Kopfes eines möglichen Fahrers des Fahrzeugs angeordnet ist und mittels der ein Bild von verschiedenen möglichen Projektionsflächen aufgenommen werden kann. Das Bild dieser Kopfnullkamera entspricht somit im Wesentlichen einem Bild, das ein möglicher Fahrer des Fahrzeugs sehen würde. Das Bild der Kopfnullkamera wird bei der Herstellung des Fahrzeugs erzeugt. Im bestimmungsgemäßen Betrieb des Fahrzeugs befindet sich die Kopfnullkamera nicht mehr im Fahrzeug. Die vorab aufgenommenen Bilder dieser Kamera sind jedoch z.B. in der Steuereinrichtung oder einem separaten Speicher gespeichert. Ein Verzerrungsmodul kann dann eine Verzerrung des Bildes mit den wiederzugebenden Informationen in Abhängigkeit von der Form der Projektionsfläche erzeugen, auf welche die Information projiziert werden soll. Bei der Herstellung dieses Verzerrungsmoduls wird mittels des Projektors oder eines vergleichbaren Projektors ein Musterbild dargestellt und von der Kopfnullkamera aufgenommen. Das Musterbild kann dann mittels des Verzerrungsmoduls bzw. einer inversen Einrichtung des Verzerrungsmoduls zu einem Testbild verzerrt werden. Dabei kann z. B. das Verzerrungsmodul durch iteratives Durchlaufen eines Optimierungsalgorithmus so verändert werden, dass das Testbild im Wesentlichen dem mittels der Kopfnullkamera aufgenommenen Musterbild entspricht. Die Angleichung des Testbildes an das von der Kopfnullkamera aufgenommenen Musterbild betrifft die Lage von Pixeln und/oder deren Farbe. Die Veränderung des Verzerrungsmoduls erfolgt insbesondere durch Veränderung von Parametern eines dem Verzerrungsmoduls zugrunde liegenden Modells.The distortion of the image data required for this is preferably calculated as a function of an image of the projection surface, which is recorded by means of a so-called head zero camera arranged in the area of the head of a possible vehicle occupant. In the context of the invention, a head zero camera is understood to mean, in particular, a camera which is arranged in the area of a head of a possible driver of the vehicle and by means of which an image of various possible projection surfaces can be recorded. The image of this head zero camera thus essentially corresponds to an image that a possible driver of the vehicle would see. The image from the head zero camera is generated when the vehicle is manufactured. When the vehicle is operated as intended, the head zero camera is no longer in the vehicle. However, the prerecorded images of this camera are stored in, for example, the controller or a separate memory. A distortion module can then generate a distortion of the image with the information to be displayed depending on the shape of the projection surface onto which the information is to be projected. During the production of this distortion module, a sample image is displayed using the projector or a comparable projector and recorded by the head zero camera. The pattern image can then be distorted into a test image by means of the distortion module or an inverse device of the distortion module. In doing so, e.g. B. the distortion module can be changed by iteratively running through an optimization algorithm in such a way that the test image essentially corresponds to the sample image recorded by means of the head zero camera. The adjustment of the test image to the sample image recorded by the head zero camera relates to the position of pixels and/or their color. The change in the distortion modulus takes place in particular by changing parameters of a model on which the distortion modulus is based.

Des Weiteren kann anstatt der Kopfnullkamera auf die Konstruktionsdaten des Fahrzeugs zurückgegriffen werden, um die Verzerrung der Bilddaten zu berechnen. In diesem Fall wird angenommen, dass sich der Kopf des betreffenden Fahrzeuginsassen an einer bestimmten Position oberhalb des entsprechenden Sitzes befindet.Furthermore, instead of the head zero camera, the design data of the vehicle can be used to calculate the distortion of the image data. In this case, it is assumed that the head of the vehicle occupant in question is located at a specific position above the corresponding seat.

Des Weiteren kann die Information auf verschiedene undurchsichtige Projektionsflächen im Fahrzeug mittels zumindest zweier Projektoren projiziert werden. Vorzugsweise werden genau zwei Projektoren verwendet. Diese Anzahl an Projektoren ist ausreichend, um nahezu den gesamten Fahrzeuginnenraum als digitale Anzeigefläche zu nutzen, wobei die einzelnen Flächen nur jeweils temporär benötigt werden.Furthermore, the information can be projected onto various opaque projection surfaces in the vehicle using at least two projectors. Exactly two projectors are preferably used. This number of projectors is sufficient to cover almost the entire vehicle interior interior space as a digital display area, whereby the individual areas are only required temporarily.

Bei der erfindungsgemäßen Vorrichtung ist mit der Steuereinrichtung erfassbar, ob in Blickrichtung der Person eine undurchsichtige Projektionsfläche im Fahrzeug angeordnet ist und die Steuereinrichtung steuert den Projektor so an, dass die Information auf eine undurchsichtige Projektionsfläche in Blickrichtung der Person oder nahe der Blickrichtung der Person projiziert wird. Die Steuereinrichtung kann beispielsweise mittels optischer Mittel, wie z.B. der Reflexion elektromagnetischer Strahlung oder mittels einer Kamera erfassen, ob in Blickrichtung der Person eine undurchsichtige Projektionsfläche im Fahrzeug angeordnet ist. Die Steuereinrichtung ist dabei derart ausgebildet, dass, wenn die Blickrichtung der Person nicht auf eine undurchsichtige Projektionsfläche gerichtet ist, in Abhängigkeit von der Blickrichtung der Person entschieden wird, ob eine Wiedergabe der Information auf eine zur Blickrichtung nächstgelegene undurchsichtige Projektionsfläche in dem Fahrzeug erfolgt.In the device according to the invention, the control device can detect whether an opaque projection surface is arranged in the vehicle in the person's line of sight, and the control device controls the projector in such a way that the information is projected onto an opaque projection surface in the person's line of sight or near the person's line of sight . The control device can, for example, use optical means, such as the reflection of electromagnetic radiation, or a camera to detect whether an opaque projection surface is arranged in the vehicle in the person's line of sight. The control device is designed in such a way that if the person's line of sight is not directed at an opaque projection surface, a decision is made depending on the line of sight of the person as to whether the information is to be reproduced on an opaque projection surface in the vehicle that is closest to the line of sight.

Mit der Blickrichtungserfassungseinrichtung sind vorzugsweise die Position und Ausrichtung der Augen und/oder des Kopfes der Person verfolgbar. Wenn sich die Blickrichtung der Person verändert, ist mit der Steuereinrichtung die Projektionsfläche des Projektors in Abhängigkeit von der Blickrichtung der Person veränderbar.The position and alignment of the eyes and/or the head of the person can preferably be tracked with the line of sight detection device. If the person's viewing direction changes, the projection surface of the projector can be changed with the control device depending on the person's viewing direction.

Gemäß einem Ausführungsbeispiel der erfindungsgemäßen Vorrichtung umfasst der Projektor eine optische Ablenkeinrichtung, die mit der Steuereinrichtung gekoppelt ist und mit der das von dem Projektor emittierte Licht in Abhängigkeit von einem Steuersignal der Steuervorrichtung so ablenkbar ist, dass die Information auf verschiedene undurchsichtige Projektionsflächen projizierbar ist.According to an exemplary embodiment of the device according to the invention, the projector comprises an optical deflection device which is coupled to the control device and with which the light emitted by the projector can be deflected as a function of a control signal from the control device such that the information can be projected onto various opaque projection surfaces.

Gemäß einem anderen Ausführungsbeispiel der erfindungsgemäßen Vorrichtung ist der Projektor mit Stellmitteln gekoppelt, die wiederum mit der Steuereinrichtung gekoppelt sind, und mit welchen die Position des Projektors in Abhängigkeit von dem Steuersignal der Steuervorrichtung veränderbar ist, so dass die Information auf verschiedene Projektionsflächen projizierbar ist. Die Stellmittel können beispielsweise den Projektor mechanisch verschieben und ihn um verschiedene Achsen schwenken.According to another exemplary embodiment of the device according to the invention, the projector is coupled to adjusting means, which in turn are coupled to the control device and with which the position of the projector can be changed as a function of the control signal from the control device, so that the information can be projected onto different projection surfaces. The adjusting means can, for example, move the projector mechanically and swivel it around different axes.

Der Projektor umfasst vorzugsweise als Lichtquelle mehrere lichtemittierende Dioden oder einen Laser. Des Weiteren können auch Projektoren mit herkömmlichen Projektorlampen, wie Halogenbirnen, verwendet werden, wobei die Lichtquelle und die weiteren optischen Komponenten auch räumlich getrennt angeordnet sein können. Die Vorrichtung kann zumindest zwei Projektoren, insbesondere genau zwei Projektoren, umfassen, mit welchen die Information auf verschiedene undurchsichtige Projektionsflächen im Fahrzeug projizierbar sind.The projector preferably comprises a plurality of light-emitting diodes or a laser as the light source. Furthermore, projectors with conventional projector lamps, such as halogen bulbs, can also be used, in which case the light source and the further optical components can also be arranged spatially separately. The device can include at least two projectors, in particular exactly two projectors, with which the information can be projected onto various opaque projection surfaces in the vehicle.

Mittels des erfindungsgemäßen Verfahrens und der erfindungsgemäßen Vorrichtung lassen sich im Fahrzeug verschiedene Anwendungen realisieren. Hierzu zählt die Wiedergabe von Entertainment-, Infotainment- und Sicherheitsdaten. Ferner können Raumeffekte im Fahrzeug realisiert werden. Schließlich kann die Wiedergabe der Information herkömmliche Instrumentierungen anhand mechanischer Anzeigeeinrichtungen oder herkömmlicher Displays ersetzen.Various applications can be implemented in the vehicle by means of the method according to the invention and the device according to the invention. This includes the playback of entertainment, infotainment and safety data. Furthermore, spatial effects can be realized in the vehicle. Finally, the display of information can replace traditional instrumentation using mechanical indicators or traditional displays.

Im Bereich der Wiedergabe von Entertainment-Daten lassen sich insbesondere die undurchsichtigen Flächen vor den Rücksitzen und vor dem Beifahrersitz nutzen. Im Bereich der Infotainment-Daten können Informationen eines Reiseführers oder Fahrwegsinformationen und Sonderziele beweglich und nicht an eine bestimmte Projektionsfläche gebunden wiedergeben werden.The opaque surfaces in front of the rear seats and in front of the front passenger seat can be used in particular to play back entertainment data. In the area of infotainment data, information from a travel guide or route information and points of interest can be displayed in a flexible manner and not tied to a specific projection surface.

Außerdem lassen sich nichttransparente Scheiben als Wiedergabeflächen, z.B. für von außen sichtbare Werbung, nutzen.In addition, non-transparent panes can be used as display surfaces, e.g. for advertising visible from the outside.

Im Bereich der Darstellung von Sicherheits-Daten lässt sich ein quasi transparentes Fahrzeug realisieren, indem als Information die Bilder wiedergegeben werden, welche für die Person von der undurchsichtigen Projektionsfläche verdeckt sind.In the field of displaying security data, a quasi-transparent vehicle can be implemented, in that the images that are hidden from the person by the opaque projection surface are reproduced as information.

Des Weiteren können mit dem erfindungsgemäßen Verfahren und der erfindungsgemäßen Vorrichtung Stimmungen erzeugt werden, indem beispielsweise der Fahrzeughimmel auf bestimmte Weise beleuchtet wird. Es lässt sich auf diese Weise eine ambiente Beleuchtung und eine interne Umfeldbeleuchtung schaffen. Hierbei ist es beispielsweise auch möglich, für Kinder bestimmte Bilder an den Fahrzeughimmel zu projizieren, um diese zu unterhalten oder zu beruhigen. Hierfür kann beispielsweise ein mobiles Projektionsgerät verwendet werden, das in den Fahrzeugfont unterhalb des Fahrzeugshimmels eingesetzt werden kann, um die Bilder an den Fahrzeughimmel zu projizieren.Furthermore, moods can be generated with the method according to the invention and the device according to the invention, for example by illuminating the roof of the vehicle in a specific way. In this way, ambient lighting and internal ambient lighting can be created. Here, it is also possible, for example, to project images intended for children onto the roof of the vehicle in order to entertain or calm them down. For this purpose, for example, a mobile projection device can be used, which can be used in the vehicle front below the vehicle headliner in order to project the images onto the vehicle headliner.

Die Erfindung wird nun anhand eines Ausführungsbeispiels mit Bezug zu der beigefügten Zeichnung erläutert.The invention will now be explained using an exemplary embodiment with reference to the attached drawing.

Die Figur zeigt schematisch den Aufbau eines Ausführungsbeispiels der erfindungsgemäßen Vorrichtung.The figure shows schematically the structure of an embodiment of the device according to the invention.

Das Ausführungsbeispiel der erfindungsgemäßen Vorrichtung gibt Information auf einer Projektionsfläche im Innenraum 2 eines Fahrzeugs 1 für eine oder mehrere der darin befindlichen Personen wieder. In dem in der Figur gezeigten Beispiel wird die Information dem Fahrer 3 des Fahrzeugs 1 angezeigt. Der Fahrer 3 blickt mit seinen Augen 4 in die Blickrichtung B.The embodiment of the device according to the invention provides information on a project tion surface in the interior 2 of a vehicle 1 for one or more of the people inside again. In the example shown in the figure, the information is displayed to the driver 3 of the vehicle 1 . The driver 3 looks with his eyes 4 in the viewing direction B.

Die Blickrichtung B des Fahrers 3 wird von einer Einrichtung 5 erfasst. Die Blickrichtungserfassung kann auf an sich bekannte Art und Weise erfolgen. Beispielsweise kann die Blickrichtungserfassungseinrichtung 5 eine Kamera umfassen, welche den Kopf des Fahrers 3 in Richtung des Pfeils A aufnimmt. Das Kamerabild wird dann durch eine Bildanalyse ausgewertet, woraus die Blickrichtung des Fahrers 3 gewonnen wird. Ferner kann die Blickrichtungserfassungseinrichtung auch einen Laser umfassen, welcher den Bereich, in welchem sich der Kopf des Fahrers 3 üblicherweise aufhält, abtastet. Auch hieraus kann die Blickrichtung des Fahrers 3 gewonnen werden. Weitere Details einer möglichen Ausgestaltung der Blickrichtungserfassungseinrichtung 5 sind beispielsweise in der DE 103 39 314 B3 und der DE 198 52 873 A1 und dem in diesen Druckschriften zitierten Stand der Technik beschrieben.The line of sight B of the driver 3 is detected by a device 5 . The viewing direction can be detected in a manner known per se. For example, the viewing direction detection device 5 can include a camera which records the head of the driver 3 in the direction of the arrow A. The camera image is then evaluated by an image analysis, from which the viewing direction of the driver 3 is obtained. Furthermore, the viewing direction detection device can also include a laser, which scans the area in which the head of the driver 3 is usually located. The viewing direction of the driver 3 can also be obtained from this. Further details of a possible configuration of the line of sight detection device 5 are, for example, in FIG DE 103 39 314 B3 and the DE 198 52 873 A1 and the prior art cited in these publications.

Zusätzlich zur Blickrichtung des Fahrers wird auch die Position und gegebenenfalls die Ausrichtung der Augen 4 des Fahrers 3 im Fahrzeuginnenraum 2 ermittelt, so dass sich in Verbindung mit der Blickrichtung B eindeutig bestimmen lässt, welchen Teil des Innenraums 2 des Fahrzeugs 1 der Fahrer 3 betrachtet.In addition to the driver's viewing direction, the position and, if necessary, the orientation of the eyes 4 of the driver 3 in the vehicle interior 2 is also determined, so that in connection with the viewing direction B it can be clearly determined which part of the interior 2 of the vehicle 1 the driver 3 is looking at.

Die Blickrichtung B des Fahrers 3 sowie die Position seiner Augen 4 wird von der Blickrichtungserfassungseinrichtung 5 an eine Steuereinrichtung 6 übertragen. Die Steuereinrichtung 6 ist mit weiteren Einrichtungen des Fahrzeugs beispielsweise über einen Fahrzeugbus 7 verbunden. Beispielsweise kann die Steuereinrichtung 6 mit einer Einrichtung zum Erzeugen von Anzeigedaten, die üblicherweise auf einem Multifunktionsdisplay im Fahrzeug 1 angezeigt werden, verbunden sein. Über den Fahrzeugbus 7 erhält die Steuereinrichtung somit die Daten für die Information, welche auf der Projektionsfläche in dem Fahrzeug 1 wiedergegeben werden soll.The viewing direction B of the driver 3 and the position of his eyes 4 are transmitted from the viewing direction detection device 5 to a control device 6 . The control device 6 is connected to other devices of the vehicle, for example via a vehicle bus 7 . For example, the control device 6 can be connected to a device for generating display data that is usually displayed on a multifunction display in the vehicle 1 . The control device thus receives the data for the information which is to be reproduced on the projection surface in the vehicle 1 via the vehicle bus 7 .

Die Steuereinrichtung 6 ist mit einem Projektor 8 oder mehreren Projektoren verbunden. Der Projektor 8 wird sowohl hinsichtlich seiner Projektionsrichtung P als auch hinsichtlich der Daten für die Informationswiedergabe von der Steuereinrichtung 6 gesteuert. Bei dem in der Figur gezeigten Ausführungsbeispiel ist der Projektor 8 mit Stellmitteln 9 verbunden, welche die Position und Ausrichtung des Projektors 8 mechanisch verändern können. Der Projektor 8 ist am Fahrzeughimmel vorne mittig befestigt. Alternativ kann der Projektor 8 oder ein weiterer Projektor hinten am Fahrzeughimmel mittig befestigt sein.The control device 6 is connected to a projector 8 or to multiple projectors. The projector 8 is controlled by the control device 6 both with regard to its projection direction P and with regard to the data for the information reproduction. In the embodiment shown in the figure, the projector 8 is connected to adjusting means 9, which can change the position and orientation of the projector 8 mechanically. The projector 8 is fastened in the center of the headliner at the front. Alternatively, the projector 8 or another projector can be attached centrally at the rear of the vehicle headliner.

Anstatt der Stellmittel 9 könnte auch bei einem anderen Ausführungsbeispiel eine optische Ablenkeinrichtung vorgesehen sein, welche die Projektionsrichtung P des an sich ortsfesten Projektors 8 so steuert, dass sie in Richtung der gewünschten Projektionsfläche 11 gerichtet ist.Instead of the adjusting means 9, an optical deflection device could also be provided in another exemplary embodiment, which controls the projection direction P of the projector 8, which is stationary per se, in such a way that it is directed in the direction of the desired projection surface 11.

Bei dem Projektor 8 handelt es sich um einen LED- oder Laserprojektor.The projector 8 is an LED or laser projector.

Die Steuereinrichtung 6 errechnet aus der Blickrichtung B des Fahrers 3 sowie der Position der Augen 4 den Bereich der Oberfläche im Innenraum des Fahrzeugs 2, den der Fahrer 3 betrachtet. Aus gespeicherten Daten zu dem Fahrzeugmodell kann die Steuereinrichtung ermitteln, ob es sich bei diesem Bereich um eine undurchsichtige Fläche oder eine durchsichtige Fläche, wie z.B. ein Fenster, handelt. In dem in der Figur gezeigten Ausführungsbeispiel blickt der Fahrer 3 auf den Bereich 10 oberhalb des Handschuhfachs des Beifahrers. Da dieser Bereich undurchsichtig ist, kann er als Projektionsfläche für die wiederzugebende Information dienen. Die Steuereinrichtung 6 richtet somit mittels der Stellmittel 9 den Projektor 8 so aus, dass die Information auf einer undurchsichtigen Projektionsfläche 11 in Blickrichtung B des Fahrers 3 projiziert wird. In dem in der Figur gezeigten Beispiel wird ein Warnhinweis 12 auf die undurchsichtige Projektionsfläche 11 projiziert, den der Fahrer 3 sofort erfassen kann, da er direkt auf die Projektionsfläche 11 blickt.From the viewing direction B of the driver 3 and the position of the eyes 4, the control device 6 calculates the area of the surface in the interior of the vehicle 2 which the driver 3 is looking at. From stored data on the vehicle model, the control device can determine whether this area is an opaque area or a transparent area, such as a window. In the exemplary embodiment shown in the figure, the driver 3 looks at the area 10 above the passenger's glove compartment. Since this area is opaque, it can serve as a projection surface for the information to be reproduced. The control device 6 thus aligns the projector 8 by means of the adjusting means 9 in such a way that the information is projected onto an opaque projection surface 11 in the viewing direction B of the driver 3 . In the example shown in the figure, a warning 12 is projected onto the opaque projection surface 11 , which the driver 3 can grasp immediately since he is looking directly at the projection surface 11 .

Die Steuereinrichtung 6 umfasst ferner ein Verzerrungsmodul, mit welchem Daten zur Wiedergabe der Information berechnet werden, welche die Form der Projektionsfläche im Raum berücksichtigen, um dem Fahrer 3 das projizierte Bild so verzerrungsfrei wie möglich bereitzustellen. Die Korrektur der Verzeichnung durch die Projektion kann z.B. gemäß einem Verfahren erfolgen, das in dem Buch Luhmann, T., Nahbereichsphotogrammetrie Grundlagen - Methoden - Anwendungen, Wichmann 2003, beschrieben ist. Das Verzerrungsmodul kann bei der Berechnung der Bilddaten z.B. CAD-Daten des Fahrzeuginnenraums 2 berücksichtigen, um die Form der Projektionsfläche zu bestimmen. Des Weiteren können für bestimmte Projektionsflächen vorab Verzerrungsmodule geschaffen werden, indem Musterbilder auf die Projektionsflächen mittels des Projektors 8 projiziert werden, die anschließend mittels einer Kopfnullkamera aufgenommen werden. Daraufhin wird das Musterbild mittels des Verzerrungsmoduls bzw. dessen Inversen zu einem Testbild verzerrt. Nun wird eine Kostenfunktion in Bezug auf die Abweichung des Testbildes von dem mittels der Kopfnullkamera aufgenommenen Musterbildes erstellt. Diese kann z. B. das Quadrat des Abstandes einzelner Pixel sein. Daraufhin folgt eine Abfrage, ob die Kostenfunktion einen hinreichend kleinen Wert liefert. Ist dies nicht der Fall, werden Modellparameter (Zustandsvektor) des Verzerrungsmoduls entsprechend einer Optimierungsstrategie derart verändert, dass sich das Testbild dem mittels der Kopfnullkamera aufgenommenen Musterbildes annähert. Liefert die Kostenfunktion dagegen einen hinreichenden kleinen Wert, werden die Modellparameter (Zustandsvektor) des Verzerrungsmoduls gespeichert.The control device 6 also includes a distortion module, with which data for the reproduction of the information are calculated, which take into account the shape of the projection surface in space, in order to provide the driver 3 with the projected image with as little distortion as possible. The distortion caused by the projection can be corrected, for example, according to a method that is described in the book Luhmann, T., Nahbereichsphotogrammetrie Fundamentals - Methods - Applications, Wichmann 2003. When calculating the image data, the distortion module can, for example, take CAD data of the vehicle interior 2 into account in order to determine the shape of the projection surface. Furthermore, distortion modules can be created in advance for specific projection surfaces in that pattern images are projected onto the projection surfaces using the projector 8 and are then recorded using a head zero camera. The pattern image is then distorted into a test image by means of the distortion module or its inverse. A cost function is now created in relation to the deviation of the test image from the sample image recorded using the head zero camera. This can e.g. B. the square of the distance be single pixels. This is followed by a query as to whether the cost function supplies a sufficiently small value. If this is not the case, model parameters (state vector) of the distortion module are changed according to an optimization strategy in such a way that the test image approximates the sample image recorded using the head zero camera. If, on the other hand, the cost function supplies a sufficiently small value, the model parameters (state vector) of the distortion module are stored.

Ein entsprechendes Verfahren kann auch in Bezug auf die Farbe von Pixeln bei der Projektion durchgeführt werden, da die Farbe der Projektionsfläche üblicherweise nicht einer weißen Leinwand ähnelt und gegebenenfalls auch nicht einfarbig ist.A corresponding method can also be carried out with regard to the color of pixels during the projection, since the color of the projection surface usually does not resemble a white screen and may also not be monochromatic.

Ändert sich die Blickrichtung B des Fahrers 3, wird dies von der Blickrichtungserfassungseinrichtung 5 erfasst, woraufhin die Steuereinrichtung 6 die Projektionsrichtung P des Projektors 8 so ändert, dass die Projektionsfläche 11 fortwährend in Blickrichtung B des Fahrers bleibt. Blickt der Fahrer 3 durch ein Fenster, d.h. eine durchsichtige Fläche, wie z.B. nach vorn durch die Windschutzscheibe, wählt die Steuereinrichtung 6 eine undurchsichtige Projektionsfläche nahe der Blickrichtung B des Fahrers 3 aus.If the viewing direction B of the driver 3 changes, this is detected by the viewing direction detection device 5, whereupon the control device 6 changes the projection direction P of the projector 8 such that the projection surface 11 remains in the driver's viewing direction B. If the driver 3 looks through a window, i.e. a transparent surface, such as forwards through the windshield, the control device 6 selects an opaque projection surface close to the line of sight B of the driver 3 .

Bezugszeichenlistereference list

11
Fahrzeugvehicle
22
Innenraum des Fahrzeugsinterior of the vehicle
33
Fahrerdriver
44
Augen des Fahrerseyes of the driver
55
Blickrichtungserfassungseinrichtungline of sight detection device
66
Steuereinrichtungcontrol device
77
Fahrzeugbusvehicle bus
88th
Projektorprojector
99
Stellmittelsetting means
1010
undurchsichtige Flächeopaque surface
1111
undurchsichtige Projektionsflächeopaque projection surface
1212
wiedergegebene Informationreproduced information

Claims (13)

Verfahren zum Wiedergeben von Information auf einer Projektionsfläche (11) in einem Fahrzeug (1) für eine im Fahrzeug (1) befindliche Person (3), bei dem - die Blickrichtung (B) der Person (3) erfasst wird und - die Information auf eine undurchsichtige Projektionsfläche (11) in dem Fahrzeug (1) projiziert wird, die sich in Blickrichtung (B) der Person (3) oder nahe der Blickrichtung (B) der Person (3) befindet, dadurch gekennzeichnet, dass, wenn die Blickrichtung der Person nicht auf eine undurchsichtige Projektionsfläche gerichtet ist, in Abhängigkeit von der Blickrichtung der Person (3) entschieden wird, ob eine Wiedergabe der Information auf eine zur Blickrichtung nächstgelegene undurchsichtige Projektionsfläche in dem Fahrzeug (1) erfolgt.Method for displaying information on a projection surface (11) in a vehicle (1) for a person (3) located in the vehicle (1), in which - the line of sight (B) of the person (3) is detected and - the information an opaque projection surface (11) is projected in the vehicle (1), which is in the viewing direction (B) of the person (3) or near the viewing direction (B) of the person (3), characterized in that when the viewing direction of the person is not directed at an opaque projection surface, depending on the viewing direction of the person (3), a decision is made as to whether the information is to be reproduced on an opaque projection surface in the vehicle (1) closest to the viewing direction. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Position und Ausrichtung der Augen und/oder des Kopfes der Person (3) verfolgt werden, um die Blickrichtung (B) zu erfassen.procedure after claim 1 , characterized in that the position and orientation of the eyes and/or the head of the person (3) are tracked in order to detect the line of sight (B). Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass sich die Projektionsfläche (11) in Abhängigkeit von der Blickrichtung (B) der Person (3) verändert, wenn sich die Blickrichtung (B) der Person (3) verändert.procedure after claim 1 or 2 , characterized in that the projection surface (11) changes depending on the viewing direction (B) of the person (3) when the viewing direction (B) of the person (3) changes. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass bei der Projektion der Information die Form der Projektionsfläche (11) berücksichtigt wird.Method according to one of the preceding claims, characterized in that the shape of the projection surface (11) is taken into account when the information is projected. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass die Information auf verschiedene undurchsichtige Projektionsflächen im Fahrzeug mittels zumindest zweier Projektoren projiziert wird.Method according to one of the preceding claims, characterized in that the information is projected onto various opaque projection surfaces in the vehicle by means of at least two projectors. Vorrichtung zum Wiedergeben von Information auf einer Projektionsfläche (11) in einem Fahrzeug (1) für eine im Fahrzeug (1) befindliche Person (3), umfassend: - zumindest einen im Fahrzeug (1) angeordneten Projektor (8) zur Projektion der Information auf einer Projektionsfläche (11) in dem Fahrzeug (1), - eine Einrichtung (5) zum Erfassen der Blickrichtung (B) der Person (3) und - eine mit dem Projektor (8) und der Blickrichtungserfassungseinrichtung (5) gekoppelte Steuereinrichtung (6), mit welcher die Projektionsrichtung (P) des Projektors (8) in Abhängigkeit von der Blickrichtung (B) der Person (3) steuerbar ist, - wobei mit der Steuereinrichtung (6) erfassbar ist, ob in Blickrichtung (B) der Person (3) eine undurchsichtige Projektionsfläche (11) im Fahrzeug (1) angeordnet ist, und - die Steuereinrichtung (6) den Projektor (8) so ansteuert, dass die Information auf eine undurchsichtige Projektionsfläche (11) in Blickrichtung (B) der Person (3) oder nahe der Blickrichtung (B) der Person (3) projiziert wird, dadurch gekennzeichnet, dass die Steuereinrichtung (6) derart ausgebildet ist, dass, wenn die Blickrichtung der Person nicht auf eine undurchsichtige Projektionsfläche gerichtet ist, in Abhängigkeit von der Blickrichtung der Person (3) entschieden wird, ob eine Wiedergabe der Information auf eine zur Blickrichtung nächstgelegene undurchsichtige Projektionsfläche in dem Fahrzeug erfolgt.Device for reproducing information on a projection surface (11) in a vehicle (1) for a person (3) located in the vehicle (1), comprising: - at least one projector (8) arranged in the vehicle (1) for projecting the information a projection surface (11) in the vehicle (1), - a device (5) for detecting the line of sight (B) of the person (3) and - a control device (6) coupled to the projector (8) and the line of sight detection device (5) , with which the projection direction (P) of the projector (8) can be controlled depending on the viewing direction (B) of the person (3), - it being possible to detect with the control device (6) whether in the viewing direction (B) of the person (3 ) an opaque projection surface (11) is arranged in the vehicle (1), and - the control device (6) controls the projector (8) in such a way that the information is projected onto an opaque projection surface (11) in the direction (B) of the person (3) or near the line of sight (B) of the person son (3) is projected, characterized in that the control device (6) is designed in such a way that, if the line of sight of the person is not directed onto an opaque projection surface, a decision is made as a function of the line of sight of the person (3) as to whether a Again The information is transmitted to an opaque projection surface in the vehicle that is closest to the viewing direction. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, dass mit der Blickrichtungserfassungseinrichtung (5) die Position und Ausrichtung der Augen und/oder des Kopfes der Person (3) verfolgbar sind.device after claim 6 , characterized in that the position and alignment of the eyes and/or the head of the person (3) can be tracked with the viewing direction detection device (5). Vorrichtung nach Anspruch 6 oder 7, dadurch gekennzeichnet, dass mit der Steuereinrichtung (6) die Projektionsfläche (11) des Projektors (8) in Abhängigkeit von der Blickrichtung (B) der Person (3) veränderbar ist, wenn sich die Blickrichtung (B) der Person verändert.device after claim 6 or 7 , characterized in that the projection surface (11) of the projector (8) can be changed with the control device (6) depending on the viewing direction (B) of the person (3) when the viewing direction (B) of the person changes. Vorrichtung nach einem der Ansprüche 6 bis 8, dadurch gekennzeichnet, dass der Projektor (8) eine optische Ablenkeinrichtung umfasst, die mit der Steuereinrichtung (6) gekoppelt ist und mit der das von dem Projektor (8) emittierte Licht in Abhängigkeit von einem Steuersignal der Steuereinrichtung (6) so ablenkbar ist, dass die Information auf verschiedene undurchsichtige Projektionsflächen (11) projizierbar ist.Device according to one of Claims 6 until 8th , characterized in that the projector (8) comprises an optical deflection device which is coupled to the control device (6) and with which the light emitted by the projector (8) can be deflected as a function of a control signal from the control device (6), that the information can be projected onto various opaque projection surfaces (11). Vorrichtung nach einem der Ansprüche 6 bis 8, dadurch gekennzeichnet, dass der Projektor (8) mit Stellmitteln (9) gekoppelt ist, die mit der Steuereinrichtung (6) gekoppelt sind und mit welchen die Position des Projektors (8) in Abhängigkeit von einem Steuersignal der Steuereinrichtung (6) veränderbar ist, so dass die Information auf verschiedene Projektionsflächen (11) projizierbar ist.Device according to one of Claims 6 until 8th , characterized in that the projector (8) is coupled to adjusting means (9) which are coupled to the control device (6) and with which the position of the projector (8) can be changed as a function of a control signal from the control device (6), so that the information can be projected onto different projection surfaces (11). Vorrichtung nach einem der Ansprüche 6 bis 10, dadurch gekennzeichnet, dass der Projektor (8) als Lichtquelle mehrere lichtemittierende Dioden umfasst.Device according to one of Claims 6 until 10 , characterized in that the projector (8) comprises a plurality of light-emitting diodes as a light source. Vorrichtung nach einem der Ansprüche 6 bis 10, dadurch gekennzeichnet, dass der Projektor (8) als Lichtquelle zumindest einen Laser umfasst.Device according to one of Claims 6 until 10 , characterized in that the projector (8) comprises at least one laser as a light source. Vorrichtung nach einem der Ansprüche 6 bis 10, dadurch gekennzeichnet, dass die Vorrichtung zumindest zwei Projektoren umfasst, mit welchen die Information auf verschiedene undurchsichtige Projektionsflächen (11) im Fahrzeug (1) projizierbar ist.Device according to one of Claims 6 until 10 , characterized in that the device comprises at least two projectors, with which the information on different opaque projection surfaces (11) in the vehicle (1) can be projected.
DE102007005028.5A 2007-02-01 2007-02-01 Method and device for displaying information on a projection screen in a vehicle Expired - Fee Related DE102007005028B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102007005028.5A DE102007005028B4 (en) 2007-02-01 2007-02-01 Method and device for displaying information on a projection screen in a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102007005028.5A DE102007005028B4 (en) 2007-02-01 2007-02-01 Method and device for displaying information on a projection screen in a vehicle

Publications (2)

Publication Number Publication Date
DE102007005028A1 DE102007005028A1 (en) 2008-08-07
DE102007005028B4 true DE102007005028B4 (en) 2022-10-27

Family

ID=39587182

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102007005028.5A Expired - Fee Related DE102007005028B4 (en) 2007-02-01 2007-02-01 Method and device for displaying information on a projection screen in a vehicle

Country Status (1)

Country Link
DE (1) DE102007005028B4 (en)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2390139B1 (en) * 2010-05-31 2012-12-19 Volvo Car Corporation Interior lighting and illumination control
DE102010022735B4 (en) * 2010-06-04 2022-07-07 Volkswagen Ag Method for projecting a graphic onto a projection surface, in particular onto a surface of a motor vehicle and method for manufacturing a motor vehicle
DE102011082617A1 (en) * 2011-09-13 2013-03-14 Continental Automotive Gmbh Display and operating system for a motor vehicle
US8733938B2 (en) * 2012-03-07 2014-05-27 GM Global Technology Operations LLC Virtual convertible tops, sunroofs, and back windows, and systems and methods for providing same
US9760698B2 (en) 2013-09-17 2017-09-12 Toyota Motor Sales, U.S.A., Inc. Integrated wearable article for interactive vehicle control system
US9902266B2 (en) * 2013-09-17 2018-02-27 Toyota Motor Engineering & Manufacturing North America, Inc. Interactive vehicle window display system with personal convenience reminders
CN105722716B (en) * 2013-11-18 2018-05-15 罗伯特·博世有限公司 Internal display system and method
DE102013224132A1 (en) 2013-11-26 2015-05-28 Volkswagen Aktiengesellschaft Projection device and method for projecting
DE102015204745A1 (en) * 2015-03-17 2016-09-22 Bayerische Motoren Werke Aktiengesellschaft Apparatus and method for rendering data in an augmented reality
DE102015204743A1 (en) * 2015-03-17 2016-09-22 Bayerische Motoren Werke Aktiengesellschaft Apparatus and method for rendering data in an augmented reality
DE102017113781B4 (en) 2017-06-21 2023-10-05 SMR Patents S.à.r.l. Method for operating a display device for a motor vehicle and motor vehicle
DE102017218960B4 (en) * 2017-10-24 2019-06-06 Audi Ag Projection arrangement and vehicle with a projection arrangement
DE102018200498A1 (en) 2018-01-12 2019-07-18 Audi Ag A display device and method for projecting an image to a virtual position while a vehicle is traveling
DE102018206656B4 (en) * 2018-04-30 2024-03-21 Audi Ag Display device for a motor vehicle and motor vehicle
DE202018103771U1 (en) * 2018-07-02 2019-10-14 Washtec Holding Gmbh Device for displaying information in a vehicle treatment plant
EP3659847B1 (en) * 2018-11-30 2020-10-07 Audi Ag Display device for a motor vehicle, method for operating a display of a motor vehicle, control module, and motor vehicle
DE102019211415B3 (en) * 2019-07-31 2021-02-04 Volkswagen Aktiengesellschaft Method for generating a light-based assistance function in a vehicle

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19852873A1 (en) 1998-11-16 2000-05-25 Trw Automotive Electron & Comp Setting up at least one optical device in vehicle involves e.g. setting angular position of information output surface or influencing optical element depending on measured eye position
DE10134430A1 (en) 2001-07-19 2003-01-30 Daimler Chrysler Ag Immersive stereoscopic projection system for use in virtual reality with software corrected projection onto a concave projection screen and floor and masking of non-visible regions
DE19951001C2 (en) 1999-10-22 2003-06-18 Bosch Gmbh Robert Device for displaying information in a vehicle
DE10215893C1 (en) 2002-04-11 2003-10-23 Daimler Chrysler Ag Projection device and projection method
DE10339314B3 (en) 2003-08-27 2005-04-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method for display control of different information in a vehicle and opto-acoustic information unit
WO2005054786A1 (en) 2003-12-01 2005-06-16 Volvo Technology Corporation Method and system for presenting information
DE102004031311A1 (en) 2004-06-29 2006-01-19 Robert Bosch Gmbh Information representing device for e.g. aircraft, has optical system representing pupil of user of image sensor, and common optical system over which image is projected on projection surface and pupil of user is imageable
DE102004034358A1 (en) 2004-07-13 2006-02-09 Volkswagen Ag Head up information display for automobile drivers uses a laser projection onto the windscreen
DE102005020260A1 (en) 2005-04-30 2006-04-20 Daimlerchrysler Ag Display system for motor vehicle has display surfaces formed at different positions within motor vehicle interior as variable size projection surfaces

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10037573B4 (en) * 2000-08-02 2005-05-19 Robert Bosch Gmbh Navigation method in a motor vehicle
JP3711864B2 (en) * 2000-12-01 2005-11-02 日産自動車株式会社 Vehicle display device
DE10334720A1 (en) * 2003-07-30 2005-03-03 Bayerische Motoren Werke Ag Projection of image information onto a presentation surface within a presentation space, e.g. a motor vehicle interior, whereby a control unit controls a projection unit taking into account information about the projection surface

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19852873A1 (en) 1998-11-16 2000-05-25 Trw Automotive Electron & Comp Setting up at least one optical device in vehicle involves e.g. setting angular position of information output surface or influencing optical element depending on measured eye position
DE19951001C2 (en) 1999-10-22 2003-06-18 Bosch Gmbh Robert Device for displaying information in a vehicle
DE10134430A1 (en) 2001-07-19 2003-01-30 Daimler Chrysler Ag Immersive stereoscopic projection system for use in virtual reality with software corrected projection onto a concave projection screen and floor and masking of non-visible regions
DE10215893C1 (en) 2002-04-11 2003-10-23 Daimler Chrysler Ag Projection device and projection method
DE10339314B3 (en) 2003-08-27 2005-04-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method for display control of different information in a vehicle and opto-acoustic information unit
WO2005054786A1 (en) 2003-12-01 2005-06-16 Volvo Technology Corporation Method and system for presenting information
DE102004031311A1 (en) 2004-06-29 2006-01-19 Robert Bosch Gmbh Information representing device for e.g. aircraft, has optical system representing pupil of user of image sensor, and common optical system over which image is projected on projection surface and pupil of user is imageable
DE102004034358A1 (en) 2004-07-13 2006-02-09 Volkswagen Ag Head up information display for automobile drivers uses a laser projection onto the windscreen
DE102005020260A1 (en) 2005-04-30 2006-04-20 Daimlerchrysler Ag Display system for motor vehicle has display surfaces formed at different positions within motor vehicle interior as variable size projection surfaces

Also Published As

Publication number Publication date
DE102007005028A1 (en) 2008-08-07

Similar Documents

Publication Publication Date Title
DE102007005028B4 (en) Method and device for displaying information on a projection screen in a vehicle
DE112018001655B4 (en) Display device and moving body with the display device
DE102013203162B4 (en) Virtual convertible tops, sun roofs and rear windows, and systems and methods for providing the same
EP1783531B1 (en) Projection display
EP2616869B1 (en) Head-up display
EP3847499B1 (en) Method for operating a field-of-vision display device for a motor vehicle
CN106163872A (en) For showing equipment and the method for information
DE19802220A1 (en) Information display device used with computer or onboard automobile
DE10059315A1 (en) Arrangement and method for monitoring the surroundings of a vehicle
DE112015001200T5 (en) Light emitting vehicle display device and vehicle display system
DE102010038825A1 (en) The image display control device
DE102017218960B4 (en) Projection arrangement and vehicle with a projection arrangement
DE102018213820A1 (en) Method for operating a field of view display device for a motor vehicle
CN110337377A (en) The method of motor vehicle with display device and the display device for running motor vehicle
DE112017006061T5 (en) MULTI-DEPTH APPARATUS
DE112019000329B4 (en) DISPLAY SYSTEM, MOVABLE OBJECT AND DESIGN METHOD
DE10242262A1 (en) Stereo vision system for assisting night vision in vehicles has arrangement for generating stereoscopic reproduction of image signals acquired by at least two night vision-compatible cameras
DE112017006057T5 (en) MORE DEPTH AUGMENTED REALITY DISPLAY
DE102007037852A1 (en) Kinetosis disturbances reducing method for use in e.g. person motor vehicle, involves producing visual effect during riding, where visual effect communicates movement effect, which corresponds to momentary movement of vehicle
DE102017120358A1 (en) Method for controlling a light module of a lighting unit of a vehicle, lighting unit, computer program product and computer-readable medium
EP4083681A1 (en) Aperture for adjusting the position of a virtual image projected onto a windscreen of a vehicle by means of a head-up display
EP3296795B1 (en) Method for displaying an image object in a vehicle on a display seen inside and outside the vehicle
DE102018216409A1 (en) Method, device and means of transportation for a kinetose-avoiding representation of a liquid in a display in a means of transportation
DE102020102742A1 (en) Motor vehicle with a lighting device for its interior
DE102011080556B4 (en) Video system for a motor vehicle and method for operating a video system

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
R012 Request for examination validly filed

Effective date: 20131025

R016 Response to examination communication
R016 Response to examination communication
R016 Response to examination communication
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee