DE102018207653A1 - Display device for displaying virtual reality with a touch-sensitive operating unit; Display system; operating system - Google Patents
Display device for displaying virtual reality with a touch-sensitive operating unit; Display system; operating system Download PDFInfo
- Publication number
- DE102018207653A1 DE102018207653A1 DE102018207653.7A DE102018207653A DE102018207653A1 DE 102018207653 A1 DE102018207653 A1 DE 102018207653A1 DE 102018207653 A DE102018207653 A DE 102018207653A DE 102018207653 A1 DE102018207653 A1 DE 102018207653A1
- Authority
- DE
- Germany
- Prior art keywords
- unit
- display device
- image content
- digital image
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0176—Head mounted characterised by mechanical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/22—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
- G02B30/25—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type using polarisation techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03547—Touch pads, in which fingers can move on a surface
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
Abstract
Die Erfindung betrifft ein Anzeigegerät (1) zum Darstellen virtueller Realität. Um eine verbesserte Steuerung einer virtuellen Umgebung zu ermöglichen weist das Anzeigegerät (1) folgende Komponenten auf:- Eine Befestigungseinheit (2), welche dazu ausgebildet ist, das Anzeigegerät (1) an einem Kopf (23) eines Nutzers (9) zu befestigen,- eine Darstellungseinheit (3), welche dazu ausgebildet ist, einen digitalen Bildinhalt auf einer ersten Seite (6) dazustellen, und- eine berührungsempfindlichen Bedieneinheit (4), die auf einer der ersten gegenüberliegenden zweiten Seite (7) der Darstellungseinheit (3) angeordnet ist.The invention relates to a display device (1) for displaying virtual reality. In order to enable improved control of a virtual environment, the display device (1) has the following components: a fastening unit (2) which is designed to fasten the display device (1) to a head (23) of a user (9), a display unit (3) adapted to display a digital image content on a first page (6), and a touch-sensitive operating unit (4) arranged on one of the first opposite second side (7) of the display unit (3) is.
Description
Die Erfindung betrifft ein Anzeigegerät zum Darstellen virtueller Realität. Weitere Aspekte der Erfindung betreffen ein Anzeigesystem und ein Bediensystem jeweils mit einem solchen Anzeigegerät.The invention relates to a display device for displaying virtual reality. Further aspects of the invention relate to a display system and an operating system each with such a display device.
Anwendungen virtueller Realität sind aus dem Stand der Technik bekannt. Zum Darstellen virtueller Realität sind hierfür geeignete Anzeigegeräte bekannt, insbesondere so genannte VR-Brillen. Bei einer VR-Brille handelt es sich um ein Anzeigegerät, welches nach Art einer Brille ausgeführt ist und an einem Kopf eines Nutzers befestigt wird. Ein solches Anzeigegerät weist somit eine Befestigungseinheit auf, welche es ermöglicht, das Anzeigegerät an einem Kopf eines Nutzers zu befestigen, sodass eine Darstellungseinheit des Anzeigegeräts, beispielsweise ein Display, in eine bestimmungsgemäße Position relativ zu dem Kopf des Nutzers beziehungsweise relativ zu Augen des Nutzers gebracht werden kann.Virtual reality applications are known in the art. For displaying virtual reality suitable display devices are known for this, in particular so-called VR glasses. A VR glasses is a display device, which is designed in the manner of glasses and is attached to a user's head. Such a display device thus has a fastening unit which makes it possible to attach the display device to a user's head so that a display unit of the display device, for example a display, is brought into a proper position relative to the head of the user or relative to the user's eyes can be.
Im Rahmen der virtuellen Realität kann ein digitaler Bildinhalt durch das Anzeigegerät dargestellt werden, welcher eine künstliche dreidimensionale Umgebung simuliert. In diesem Kontext ist häufig von Immersion die Rede, also einem Effekt, der ein Bewusstsein des Nutzers, illusorischen Stimuli ausgesetzt zu sein, weit in den Hintergrund treten lässt. Mit anderen Worten dienen gattungsgemäße Anzeigegeräte zum Darstellen virtueller Realität dazu, dem Nutzer eine möglichst realistische Simulation der dreidimensionalen Umgebung bereitzustellen. So wird es dem Nutzer mittels des Anzeigegeräts beispielsweise ermöglicht, durch den künstlichen dreidimensionalen Raum zu navigieren und sich durch den digitalen Bildinhalt dargestellte Objekte aus verschiedenen Perspektiven anzusehen. Insbesondere kann dem Nutzer ermöglicht werden, derartig dargestellte Objekte aus Perspektiven anzusehen, welche in der realen Umgebung nicht umsetzbar sind.In the context of virtual reality, a digital image content can be displayed by the display device, which simulates an artificial three-dimensional environment. In this context, immersion is often talked about, an effect that lets the user's awareness of being exposed to illusory stimuli fade into the background. In other words, generic display devices for displaying virtual reality serve to provide the user with a realistic simulation of the three-dimensional environment. For example, the display device allows the user to navigate through the artificial three-dimensional space and to view objects represented by the digital image content from different perspectives. In particular, the user can be allowed to view objects represented in this way from perspectives that are not realizable in the real environment.
Um dieses Navigieren zu ermöglichen beziehungsweise eine Steuerung des Bildinhalts zu ermöglichen, können dem Nutzer externe Steuergeräte, beispielsweise eine Maus, eine Tastatur, ein Joystick (Steuerhebel für Computerspiele) oder eine Mischform aus den genannten Steuergeräten bereitgestellt werden. Derartige Steuergeräte sind für den Nutzer jedoch zumeist nicht intuitiv bedienbar, sodass das Gefühl der Immersion beziehungsweise der Realitätsgrad der Simulation aufgrund der kontraintuitiven Steuerung herabgesetzt wird.In order to enable this navigation or to enable control of the image content, the user can be provided with external control devices, for example a mouse, a keyboard, a joystick (control lever for computer games) or a mixed form of said control devices. However, such control devices are usually not intuitively operable for the user, so that the feeling of immersion or the degree of reality of the simulation is reduced due to the counterintuitive control.
Es ist Aufgabe der vorliegenden Erfindung, eine verbesserte Steuerung einer virtuellen Umgebung zu ermöglichen.It is an object of the present invention to enable an improved control of a virtual environment.
Diese Aufgabe wird erfindungsgemäß gelöst durch die Gegenstände der unabhängigen Patentansprüche. Vorteilhafte Ausführungsformen mit zweckmäßigen Weiterbildungen sind Gegenstand der Unteransprüche.This object is achieved by the subject matters of the independent claims. Advantageous embodiments with expedient developments are the subject of the dependent claims.
Ein erster Aspekt der Erfindung betrifft ein Anzeigegerät zum Darstellen virtueller Realität, mit
- - einer Befestigungseinheit, welche dazu ausgebildet ist, das Anzeigegerät an einem Kopf eines Nutzers zu befestigen,
- - einer Darstellungseinheit, welche dazu ausgebildet ist, einen digitalen Bildinhalt auf einer ersten Seite dazustellen, und
- - einer berührungsempfindlichen Bedieneinheit, die auf einer der ersten gegenüberliegenden zweiten Seite der Darstellungseinheit angeordnet ist.
- a fixing unit adapted to fix the display device to a user's head,
- a display unit adapted to display a digital image content on a first page, and
- - A touch-sensitive control unit, which is arranged on one of the first opposite second side of the display unit.
Das erfindungsgemäße Anzeigegerät kann insbesondere als VR-Brille, also als Brille zum Anzeigen virtueller Realität, ausgeführt sein. Die Befestigungseinheit kann beispielsweise ein Gummiband oder einen Gurt aufweisen, die eine Befestigung an dem Kopf des Nutzers durch zumindest teilweises Umschließen des Kopfs des Nutzers ermöglicht. Alternativ oder zusätzlich kann die Befestigungseinheit einen nach einer Seite hin offenen Hohlkörper umfassen, der derart ausgeformt ist, um ein Abstützen der Befestigungseinheit an Wangen und/oder einer Stirn des Nutzers zu ermöglichen. Die offene Seite des Hohlkörpers zeigt bei bestimmungsgemäßer Anordnung an dem Kopf des Nutzers insbesondere in Richtung der Augen des Nutzers. Der Hohlkörper kann beispielsweise zur Befestigung an dem Kopf des Nutzers mittels des Gurtes oder des Gummibands ausgeführt sein.The display device according to the invention can be embodied, in particular, as VR glasses, that is to say as glasses for displaying virtual reality. For example, the attachment unit may include a rubber band or strap that allows attachment to the user's head by at least partially enclosing the user's head. Alternatively or additionally, the fastening unit may comprise a hollow body which is open towards one side and which is shaped in such a way as to enable the fastening unit to be supported on cheeks and / or a user's forehead. The open side of the hollow body shows when properly arranged on the head of the user, especially in the direction of the user's eyes. The hollow body may for example be designed for attachment to the head of the user by means of the belt or rubber band.
Die Darstellungseinheit weist vorteilhafter Weise zumindest ein Display zum Darstellen des digitalen Bildinhalts auf. Die erste Seite der Darstellungseinheit kann diejenige Seite des zumindest einen Bildschirms sein, welche zur Bilddarstellung ausgebildet ist. Wenn das Anzeigegerät in einer bestimmungsgemäßen Position an dem Kopf des Nutzers befestigt ist, ist die erste Seite der Darstellungseinheit in Richtung des Nutzers, insbesondere in Richtung dessen Augen, ausgerichtet.The presentation unit advantageously has at least one display for displaying the digital image content. The first side of the presentation unit may be that side of the at least one screen which is designed for image representation. When the display device is mounted in a proper position on the user's head, the first side of the display unit is oriented towards the user, especially in the direction of his eyes.
Ist das Anzeigegerät in der bestimmungsgemäßen Position an dem Kopf des Nutzers befestigt, so ist die zweite Seite der Darstellungseinheit insbesondere die dem Nutzer abgewandte Seite der Darstellungseinheit. Mit anderen Worten ist die Befestigungseinheit an einer Rückseite der Darstellungseinheit angeordnet, wobei der Begriff „Rückseite“ hierbei auf die Bilddarstellung durch die Darstellungseinheit bezogen ist. Die berührungsempfindliche Bedieneinheit, die Teil des Anzeigegeräts ist, ermöglicht es dem Nutzer intuitiv mit dem digitalen Bildinhalt zu interagieren. Insbesondere ermöglicht die Befestigungseinheit des erfindungsgemäßen Anzeigegeräts eine Interaktion des Nutzers mit einem durch den digitalen Bildinhalt Objekt genau an der Stelle, an der das Objekt dargestellt wird.If the display device is fastened to the user's head in the intended position, then the second side of the display unit is in particular the side of the display unit facing away from the user. In other words, the fastening unit is arranged on a rear side of the display unit, wherein the term "rear side" is here based on the image representation by the display unit. The touch-sensitive operating unit, which is part of the display device, allows the user to intuitively interact with the digital image content. In particular, the Mounting unit of the display device according to the invention an interaction of the user with an object through the digital image content exactly at the point at which the object is displayed.
Gemäß einer Weiterbildung ist vorgesehen, dass die Bedieneinheit dazu ausgebildet ist, nur auf einer der Darstellungseinheit abgewandten Seite der Bedieneinheit eine Bedienung zu erfassen. Dadurch ist keine Bedienung der Bedieneinheit durch die Darstellungseinheit hindurch möglich. Die Bedienung der berührungsempfindlichen Bedieneinheit ist somit nur von der der Darstellungseinheit abgewandten Seite der Bedieneinheit her möglich.According to a further development, it is provided that the operating unit is designed to detect an operation only on a side of the operating unit facing away from the display unit. As a result, no operation of the operating unit through the display unit is possible. The operation of the touch-sensitive control unit is thus possible only from the side facing away from the display unit of the control unit.
Gemäß einer Weiterbildung ist vorgesehen, dass die Bedieneinheit als Touchpad ausgeführt ist, dessen Abmessungen insbesondere zumindest im Wesentlichen Abmessungen der Darstellungseinheit entsprechen. Mit anderen Worten kann die berührungsempfindliche Bedieneinheit als Touchpad ausgeführt sein. In weiterer Ausgestaltung können die Abmessungen des Touchpads zumindest im Wesentlichen den Abmessungen der Darstellungseinheit entsprechen. Mit anderen Worten kann die gesamte zweite Seite der Darstellungseinheit mit dem Touchpad versehen sein. Insbesondere ist das Touchpad zumindest im Wesentlichen genauso groß wie der zumindest eine Bildschirm der Darstellungseinheit und bezüglich der zweiten Seite deckungsgleich zu diesem an der Darstellungseinheit angeordnet.According to a further development, it is provided that the operating unit is designed as a touchpad, whose dimensions correspond in particular at least substantially to the dimensions of the display unit. In other words, the touch-sensitive operating unit can be designed as a touchpad. In a further embodiment, the dimensions of the touchpad can at least substantially correspond to the dimensions of the display unit. In other words, the entire second side of the display unit may be provided with the touchpad. In particular, the touchpad is at least substantially the same size as the at least one screen of the display unit and arranged with respect to the second side congruent to this on the display unit.
Gemäß einer Weiterbildung ist vorgesehen, dass die Darstellungseinheit dazu ausgebildet ist, den digitalen Bildinhalt nur in Raumrichtungen abzustrahlen, die der Bedieneinheit abgewandt sind. Mit anderen Worten ist die Darstellungseinheit relativ zu der Bedieneinheit derart ausgerichtet, dass der digitale Bildinhalt nicht in Richtung der Bedieneinheit abgestrahlt wird. Dadurch wird der Eindruck erzeugt, die Bedienung erfolgt innerhalb einer Bildebene der Darstellungseinheit.According to a further development, it is provided that the display unit is designed to radiate the digital image content only in spatial directions that are remote from the operating unit. In other words, the display unit is oriented relative to the operating unit such that the digital image content is not emitted in the direction of the operating unit. This creates the impression that the operation takes place within an image plane of the presentation unit.
Gemäß einer Weiterbildung ist vorgesehen, dass das Anzeigegerät dazu ausgebildet ist, den digitalen Bildinhalt für zwei Augen des Nutzers auf unterschiedliche Weise darzustellen, sodass eine stereoskopische Darstellung des digitalen Bildinhalts erzeugt wird. Hierzu kann die Darstellungseinheit dazu ausgebildet sein, den digitalen Bildinhalt in unterschiedliche Raumrichtungen auf unterschiedliche Weise darzustellen. Beispielsweise weist das Anzeigegerät hierzu eine Shuttereinrichtung nach Art einer Shutterbrille oder eine Polarisationsfilter auf. Die Funktionsweise einer Shutterbrille oder eines Polarisationsfilters sind aus dem Stand der Technik bekannt. Alternativ kann die Darstellungseinheit zwei Bildschirme umfassen, wobei die zwei Bildschirme derart angeordnet sind, dass diese den Bildinhalt für zwei unterschiedliche Raumrichtungen, insbesondere die Augen des Nutzers bei bestimmungsgemäßer Befestigung am Kopf des Nutzers, darstellen können. Beispielsweise kann hierfür ein Blickschutz an dem Anzeigegerät vorgesehen sein. Auf diese Weise wird die stereoskopische Darstellung des digitalen Bildinhalts ermöglicht. Die stereoskopische Darstellung wiederum ermöglicht eine dreidimensional erscheinende Darstellung des digitalen Bildinhalts.According to one embodiment, it is provided that the display device is designed to display the digital image content for two eyes of the user in different ways, so that a stereoscopic representation of the digital image content is generated. For this purpose, the presentation unit can be designed to display the digital image content in different spatial directions in different ways. For example, the display device for this purpose has a shutter device in the manner of a shutter glasses or a polarizing filter. The operation of a shutter glasses or a polarizing filter are known from the prior art. Alternatively, the display unit may comprise two screens, wherein the two screens are arranged such that they can display the image content for two different spatial directions, in particular the eyes of the user when properly attached to the head of the user. For example, this may be a privacy on the display device provided. In this way, the stereoscopic representation of the digital image content is made possible. The stereoscopic representation in turn allows a three-dimensional appearance of the digital image content.
Gemäß einer Weiterbildung ist vorgesehen, dass die Bedieneinheit eine Bedienfläche aufweist und die Bedieneinheit dazu ausgebildet ist, einer Berührung der Bedienfläche eine Koordinate bezüglich der Bedieneinheit zuzuordnen. Vorteilhafter Weise charakterisiert die zugeordnete Koordinate, an welchem Punkt der Bedienfläche die Berührung erfasst wurde. Die Bedieneinheit kann demnach dazu ausgebildet sein, die Position einer Berührung der Bedienfläche durch die Koordinate zu beschreiben. Insbesondere ist die Bedieneinheit dazu ausgebildet, der Berührung zwei Koordinaten als die genannte Koordinate zuzuordnen, welche die Berührung der zweidimensionalen Bedienfläche eindeutig beschreiben. Auf diese Weise kann eine Betätigung der Bedienfläche charakterisiert werden.According to a further development, it is provided that the operating unit has an operating surface and the operating unit is designed to assign a coordinate with respect to the operating unit to a touch of the operating surface. Advantageously, the assigned coordinate characterizes at which point of the operating surface the touch has been detected. The operating unit can therefore be designed to describe the position of a touch of the operating surface through the coordinate. In particular, the operating unit is designed to assign to the touch two coordinates as the said coordinate, which uniquely describe the contact of the two-dimensional operating surface. In this way, an actuation of the operating surface can be characterized.
Gemäß einer Weiterbildung ist vorgesehen, dass das Anzeigegerät zusätzlich eine Recheneinheit aufweist, die dazu ausgebildet ist, der Koordinate bezüglich der Bedienfläche eine virtuelle Koordinate in dem digitalen Bildinhalt zuzuordnen. Insbesondere ist die Recheneinheit dazu ausgebildet, im Rahmen einer Koordinatentransformation einen Zusammenhang zwischen der Koordinate bezüglich der Bedienfläche und dem digitalen Bildinhalt herzustellen. Beispielsweise ist die Recheneinheit dazu ausgebildet, die Koordinate beziehungsweise die Berührung der Bedienfläche mittels Koordinatentransformation auf den virtuellen Bildinhalt zu projizieren. Auf diese Weise kann die Bedienung der Bedieneinheit besonders vorteilhaft mit dem digitalen Bildinhalt verknüpft werden.According to a further development, it is provided that the display device additionally has a computing unit which is designed to associate with the coordinate with respect to the operating surface a virtual coordinate in the digital image content. In particular, the arithmetic unit is designed to establish a relationship between the coordinate with respect to the operating surface and the digital image content within the framework of a coordinate transformation. For example, the arithmetic unit is designed to project the coordinate or the touch of the control surface by means of coordinate transformation to the virtual image content. In this way, the operation of the operating unit can be particularly advantageous linked to the digital image content.
Gemäß einer Weiterbildung ist vorgesehen, dass die Recheneinheit dazu eingerichtet ist, der Koordinate bezüglich der Bedienfläche, welche zweidimensional ist, eine dreidimensionale virtuelle Koordinate in dem digitalen Bildinhalt zuzuordnen. Die zweidimensionale Koordinate bezüglich der Bedienfläche wird im Rahmen der Koordinatentransformation somit auf den dreidimensionalen digitalen Bildinhalt projiziert. Auf diese Weise kann einem Punkt der Bedienfläche, in welchem eine Berührung registriert wird, ein Punkt in der dreidimensionalen Umgebung, welche durch den digitalen Bildinhalt simuliert wird, zugeordnet werden.According to a further development, it is provided that the arithmetic unit is set up to associate with the coordinate with respect to the operating surface, which is two-dimensional, a three-dimensional virtual coordinate in the digital image content. The two-dimensional coordinate with respect to the control surface is thus projected onto the three-dimensional digital image content within the framework of the coordinate transformation. In this way, a point in the control surface in which a touch is registered can be assigned a point in the three-dimensional environment which is simulated by the digital image content.
Gemäß einer Weiterbildung ist vorgesehen, dass die Bedieneinheit einen kapazitiven oder einen resistiven Sensor umfasst. Insbesondere ist der kapazitive oder resistive Sensor Teil des Touchpads. Durch den kapazitiven oder resistiven Sensor kann die Bedienfläche bereitgestellt sein. Dementsprechend können Abmessungen des kapazitiven Sensors beziehungsweise des resistiven Sensors zumindest im Wesentlichen den Abmessungen der Darstellungseinheit entsprechen. Ein kapazitiver oder resistiver Sensor ist eine einfache Möglichkeit, eine berührungsempfindliche Bedieneinheit bereitzustellen.According to a development, it is provided that the operating unit has a capacitive or a resistive sensor. In particular, the capacitive or resistive sensor is part of the touchpad. The operating surface can be provided by the capacitive or resistive sensor. Accordingly, dimensions of the capacitive sensor or the resistive sensor can at least substantially correspond to the dimensions of the display unit. A capacitive or resistive sensor is an easy way to provide a touch-sensitive control panel.
Ein zweiter Aspekt der Erfindung betrifft ein Anzeigesystem mit einem Anzeigegerät der genannten Art und einer Bildquelle, insbesondere einem Multimediagerät, zum Bereitstellen des digitalen Bildinhalts für das Anzeigegerät, wobei die Bedieneinheit dazu ausgebildet ist, aus einer durch sie registrierten Bedienhandlung ein Steuerungssignal zu gewinnen, und wobei die Bildquelle, insbesondere das Multimediagerät, dazu ausgebildet ist, diese Steuerungssignal einem Objekt, welches Teil des digitalen Bildinhalts ist, zuzuordnen und eine Darstellung des Objekts entsprechend dem Steuerungssignal zu verändern. Das Verändern der Darstellung des Objekts kann beispielsweise durchgeführt werden, durch Vergrößern oder Verkleinern des Objekts („Zoomen“), durch Rotieren oder Verschieben des Objekts, durch Hervorheben des Objekts oder durch Anzeigen eines Cursors auf dem Objekt. Das Zuordnen des Steuersignals zu dem Objekt erfolgt insbesondere basierend auf dem zuvor beschriebenen Zuordnen einer Koordinate. Mit anderen Worten kann das Steuerungssignal dem Objekt dadurch zugeordnet werden, dass eine Koordinate der Bedienhandlung bezüglich der Bedienfläche auf den digitalen Bildinhalt, insbesondere auf das Objekt, transformiert wird. Beispielsweise ist das Objekt, welches der Bedienhandlung zuzuordnen ist, an einer virtuellen Koordinate in dem digitalen Bildinhalt verortet, wobei die virtuelle Koordinate der Koordinate bezüglich der Bedienfläche zugeordnet ist, an welcher die Bedienhandlung registriert wird.A second aspect of the invention relates to a display system having a display device of the type mentioned and an image source, in particular a multimedia device, for providing the digital image content to the display device, wherein the control unit is adapted to obtain a control signal from a control action registered by it, and wherein the image source, in particular the multimedia device, is adapted to associate this control signal with an object which is part of the digital image content and to modify a representation of the object in accordance with the control signal. For example, changing the appearance of the object may be accomplished by zooming in or out of the object ("zooming"), rotating or moving the object, highlighting the object, or displaying a cursor on the object. The assignment of the control signal to the object takes place in particular based on the previously described assignment of a coordinate. In other words, the control signal can be assigned to the object by transforming a coordinate of the operator action with respect to the control surface to the digital image content, in particular to the object. For example, the object to be associated with the operator action is located at a virtual coordinate in the digital image content, the virtual coordinate being assigned to the coordinate with respect to the operator interface at which the operator action is registered.
In weiterer Ausgestaltung kann die Bedieneinheit dazu ausgebildet sein, so genannte Gesten als Bedienhandlungen zu erfassen. Beispiele für solche Gesten sind einmal tippen („Klick“), doppelt tippen („Doppelklick“), dreifach Tippen („Dreifachklick“), vergrößern oder verkleinern des Objekts durch Auseinanderziehen oder Zusammenschieben zweier Finger durch den Nutzer im Rahmen der Bedienhandlung oder beliebige andere Gesten, welche insbesondere aus dem Umfeld von Tabletcomputern oder Mobilfunkgeräten (Smartphones) bekannt sind. Auf diese Weise kann eine intuitive Bedienung, welche für den Benutzer insbesondere bereits aus anderen Bereichen bekannt ist, auch beim Darstellen virtueller Realität genutzt werden.In a further embodiment, the operating unit may be designed to detect so-called gestures as operator actions. Examples of such gestures are once tap ("click"), double tap ("double-click"), triple tap ("triple-click"), zoom in or out of the object by pulling or pushing together two fingers by the user in the context of the operation or any other Gestures, which are known in particular from the environment of tablet computers or mobile devices (smartphones). In this way, an intuitive operation, which is already known in particular for the user from other areas, can also be used when visualizing virtual reality.
Ein weiterer Aspekt der Erfindung betrifft ein Bediensystem mit einem zuvor beschriebenen Anzeigegerät und einem Handsensor zur Anordnung an einer Hand des Nutzers, wobei das System dazu ausgebildet ist, eine Bedienung der berührungsempfindlichen Bedieneinheit abhängig von einer Relativposition zwischen dem Anzeigegerät und dem Handsensor freizugeben. Sind der Handsensor und das Anzeigegerät bestimmungsgemäß an dem Nutzer angeordnet, so kann die Relativposition zwischen dem Anzeigegerät und dem Handsensor eine Relativposition der Hand des Nutzers bezüglich dem Kopf des Nutzers charakterisieren. Bei dem Handsensor handelt es sich beispielsweise um einen Ring, einen Armreif oder einen Handschuh.A further aspect of the invention relates to an operating system with a previously described display device and a hand sensor for placement on the user's hand, wherein the system is designed to enable an operation of the touch-sensitive operating unit depending on a relative position between the display device and the hand sensor. If the hand-held sensor and the display device are arranged on the user as intended, the relative position between the display device and the hand-held sensor can characterize a relative position of the user's hand with respect to the user's head. The hand sensor is, for example, a ring, a bracelet or a glove.
Das Freigeben der Bedienhandlung kann dem Nutzer durch eine Einblendung von Markierungspunkten in dem digitalen Bildinhalt visualisiert werden. Die Markierungspunkte können dem Nutzer eine mögliche Bedienhandlung anzeigen. Insbesondere ist das Bediensystem dazu ausgebildet, diese Markierungspunkte abhängig von der Relativposition zwischen dem Anzeigegerät und dem Handsensor als Teil des digitalen Bildinhalts anzuzeigen. Insbesondere ist das Bediensystem dazu ausgebildet, die Bedienung der Bedieneinheit nur dann freizugeben, wenn sich der Handsensor in einem vorgegebenen Bereich um das Anzeigegerät herum befindet. Dementsprechend kann das Bediensystem dazu ausgebildet sein, die Markierungspunkte nur dann als Teil des digitalen Bildinhalts darzustellen, wenn sich der Handsensor in dem vorgegebenen Bereich um die Bedieneinheit befindet. Die Markierungspunkte können beispielsweise Punkte des digitalen Bildinhalts beziehungsweise des durch den digitalen Bildinhalt dargestellten Objekts, repräsentieren, an welchen die Darstellung des Objekts entsprechend einer Bedienhandlung veränderbar ist.The release of the operating action can be visualized to the user by an insertion of marker points in the digital image content. The marker points can show the user a possible operator action. In particular, the operating system is designed to display these marking points as part of the digital image content depending on the relative position between the display device and the hand-held sensor. In particular, the operating system is designed to release the operation of the operating unit only when the hand-held sensor is located in a predetermined area around the display unit. Accordingly, the operating system may be configured to display the marker points as part of the digital image content only when the hand-held sensor is in the predetermined area around the control unit. The marker points can represent, for example, points of the digital image content or of the object represented by the digital image content, at which the representation of the object can be changed in accordance with an operator action.
Bei der Bildquelle, insbesondere dem Multimediagerät, kann es sich beispielsweise um einen Computer, einen Laptop, einen Tabletcomputer, eine Spielekonsole, ein Mobiltelefon, insbesondere ein Smartphone, einen Fernseher oder um ein beliebiges anders Multimediagerät handeln.The image source, in particular the multimedia device, may be, for example, a computer, a laptop, a tablet computer, a game console, a mobile phone, in particular a smartphone, a television or any other multimedia device.
Die Recheneinheit zum Transformieren der Koordinate bezüglich der Bedienfläche in die, insbesondere dreidimensionale, virtuelle Koordinate bezüglich des digitalen Bildinhalts kann Teil der Bildquelle, insbesondere des Multimediageräts, sein. In diesem Fall in die Recheneinheit vorteilhafter Weise in der Bildquelle, insbesondere dem Multimediagerät, verortet. The arithmetic unit for transforming the coordinate with respect to the operating surface into the, in particular three-dimensional, virtual coordinate with respect to the digital image content may be part of the image source, in particular of the multimedia device. In this case, advantageously located in the arithmetic unit in the image source, in particular the multimedia device.
Gemäß einer Weiterbildung kann vorgesehen sein, dass das Bediensystem zusätzlich die Bildquelle, insbesondere das Multimediagerät, umfasst. In diesem Fall kann das Anzeigen der Markierungspunkte durch die Bildquelle, insbesondere das Multimediagerät, erfolgen. Insbesondere werden die Markierungspunkte bei dem Bereitstellen des digitalen Bildinhalts durch die Bildquelle, insbesondere das Multimediagerät, abhängig von der Relativposition zwischen dem Anzeigegerät und dem Handsensor als zusätzlicher Teil des digitalen Bildinhalts beziehungsweise als optionaler Teil des digitalen Bildinhalts bereitgestellt. Insbesondere ist die Bildquelle, insbesondere das Multimediagerät, dazu ausgebildet, die Markierungspunkte nur dann als Teil des digitalen Bildinhalts darzustellen, wenn sich der Handsensor in dem vorgegebenen Bereich um die Bedieneinheit befindet. Hierfür kann das Anzeigegerät zum Übermitteln eines Positionssignals an die Bildquelle, insbesondere das Multimediagerät, ausgebildet sein. Das Positionssignal kann angeben, ob sich der Handsensor in dem vorgegebenen Bereich um die Bedieneinheit befindet. Dementsprechend kann die Bildquelle, insbesondere das Multimediagerät, dazu ausgebildet sein, die Markierungspunkte abhängig von dem Positionssignal als Teil des digitalen Bildinhalts darzustellen.According to a development it can be provided that the operating system additionally comprises the image source, in particular the multimedia device. In this case, displaying the Marking points by the image source, in particular the multimedia device done. In particular, the marker points are provided in the provision of the digital image content by the image source, in particular the multimedia device, depending on the relative position between the display device and the hand sensor as an additional part of the digital image content or as an optional part of the digital image content. In particular, the image source, in particular the multimedia device, is designed to display the marker points only as part of the digital image content if the manual sensor is located in the predetermined region around the operator control unit. For this purpose, the display device for transmitting a position signal to the image source, in particular the multimedia device, be formed. The position signal may indicate whether the hand-held sensor is in the predetermined area around the operating unit. Accordingly, the image source, in particular the multimedia device, may be configured to display the marker points as part of the digital image content depending on the position signal.
Die Erfindung wird nachfolgend anhand mehrerer Zeichnungen genauer erläutert.The invention will be explained in more detail with reference to several drawings.
Dabei zeigen:
-
1 ein Anzeigegerät zum Darstellen virtueller Realität mit einer berührungsempfindlichen Bedieneinheit in einer schematischen Perspektivansicht; -
2 dasselbe Anzeigegerät in einer schematischen Schnittansicht; -
3 ein Bediensystem umfassend das Anzeigegerät und einen Handsensor in einem ersten Nutzungsfall; und -
4 das Bediensystem in einem zweiten Nutzungsfall.
-
1 a display device for displaying virtual reality with a touch-sensitive control unit in a schematic perspective view; -
2 the same display device in a schematic sectional view; -
3 an operating system comprising the display device and a hand sensor in a first use case; and -
4 the operating system in a second use case.
In
Auf der zweiten Seite
Relativ zu der Bedieneinheit
Beispielsweise ist das Anzeigegerät
Das Anzeigegerät
Vorliegend ist die Recheneinheit
In
Zuletzt zeigen die
Alternativ kann das Anzeigegerät
Die Freigabe der berührungsempfindlichen Bedieneinheit
Zusammenfassend ist durch das Ausführungsbeispiel gezeigt, wie eine intuitivere Art der Bedienung des Anzeigegeräts
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018207653.7A DE102018207653A1 (en) | 2018-05-16 | 2018-05-16 | Display device for displaying virtual reality with a touch-sensitive operating unit; Display system; operating system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018207653.7A DE102018207653A1 (en) | 2018-05-16 | 2018-05-16 | Display device for displaying virtual reality with a touch-sensitive operating unit; Display system; operating system |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102018207653A1 true DE102018207653A1 (en) | 2019-11-21 |
Family
ID=68419715
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102018207653.7A Ceased DE102018207653A1 (en) | 2018-05-16 | 2018-05-16 | Display device for displaying virtual reality with a touch-sensitive operating unit; Display system; operating system |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102018207653A1 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110194029A1 (en) * | 2010-02-05 | 2011-08-11 | Kopin Corporation | Touch sensor for controlling eyewear |
US20130335573A1 (en) * | 2012-06-15 | 2013-12-19 | Qualcomm Incorporated | Input method designed for augmented reality goggles |
US20160379413A1 (en) * | 2014-01-23 | 2016-12-29 | Sony Corporation | Image display device and image display method |
-
2018
- 2018-05-16 DE DE102018207653.7A patent/DE102018207653A1/en not_active Ceased
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110194029A1 (en) * | 2010-02-05 | 2011-08-11 | Kopin Corporation | Touch sensor for controlling eyewear |
US20130335573A1 (en) * | 2012-06-15 | 2013-12-19 | Qualcomm Incorporated | Input method designed for augmented reality goggles |
US20160379413A1 (en) * | 2014-01-23 | 2016-12-29 | Sony Corporation | Image display device and image display method |
Non-Patent Citations (1)
Title |
---|
LEE, Jihyun, et al. Exploring the front touch interface for virtual reality headsets. In: Proceedings of the 2016 CHI Conference Extended Abstracts on Human Factors in Computing Systems. ACM, 2016. S. 2585-2591. * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2989524B1 (en) | Method for interacting with an object displayed on data eyeglasses | |
DE102015103735A1 (en) | Method and device for testing a device to be operated in an aircraft | |
DE102009034413B4 (en) | Recognition of compound gestures | |
DE19958443C2 (en) | operating device | |
DE102009023875A1 (en) | Gesture recognition interface system with vertical display area | |
DE112015005721T5 (en) | ELECTIVE PAIRWISE ASSIGNING AN APPLICATION TO A PHYSICAL DISPLAY SET OUT IN A VIRTUAL FIELD | |
DE102009025236A1 (en) | Interface system for gesture recognition with a light-scattering screen | |
DE102014106960A1 (en) | Method for displaying a virtual interaction on at least one screen and input device, system and method for a virtual application by means of a computing unit | |
DE102012020607B4 (en) | A motor vehicle with a gesture control device and method for controlling a selection element | |
DE102012014098A1 (en) | Method for imitating the touch screen control by a mouse | |
WO2011020683A1 (en) | Continuous determination of a perspective | |
EP3400515A1 (en) | User interface comprising a plurality of display units, and method for positioning contents on a plurality of display units | |
DE10132243A1 (en) | Wireless interaction system for virtual reality applications | |
DE102012220062A1 (en) | SETTING MULTIPLE USER INPUT PARAMETERS | |
DE102013109268A1 (en) | input devices | |
DE102018207653A1 (en) | Display device for displaying virtual reality with a touch-sensitive operating unit; Display system; operating system | |
EP2753951A1 (en) | Interaction with a three-dimensional virtual scenario | |
DE102014009699B4 (en) | Method for operating a display device and system with a display device | |
WO2006032442A1 (en) | Control device for displays | |
EP3274789B1 (en) | Motor vehicle simulation system for simulating a virtual environment with a virtual motor vehicle and method for simulating a virtual environment | |
DE102013014889A1 (en) | Mouse pointer control for an operating device | |
DE102013021814A1 (en) | Control device with eyetracker | |
EP1881398A1 (en) | Method for positioning a cursor on a touch-sensitive screen | |
DE19805529C2 (en) | Medical imaging system | |
Bibb | Determining principles for the development of mixed reality systems for command and control applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R002 | Refusal decision in examination/registration proceedings | ||
R003 | Refusal decision now final |