DE102008004980A1 - Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output - Google Patents

Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output Download PDF

Info

Publication number
DE102008004980A1
DE102008004980A1 DE200810004980 DE102008004980A DE102008004980A1 DE 102008004980 A1 DE102008004980 A1 DE 102008004980A1 DE 200810004980 DE200810004980 DE 200810004980 DE 102008004980 A DE102008004980 A DE 102008004980A DE 102008004980 A1 DE102008004980 A1 DE 102008004980A1
Authority
DE
Germany
Prior art keywords
objects
controls
come
sensors
controls come
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE200810004980
Other languages
German (de)
Inventor
Hansjörg Lienert
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to DE200810004980 priority Critical patent/DE102008004980A1/en
Publication of DE102008004980A1 publication Critical patent/DE102008004980A1/en
Ceased legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0384Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The device is embedded in environment, and is based on usage of mobile and immobile symbolic control elements. Arbitrary objects are used as control elements and for data input and output. One or more predefined spatial positions are used as sensitive areas for data input and output. Change of characteristics of the control elements is used as trigger for the data input and output. The control elements are provided with one or more Radio-frequency identification (RFID)readers or RFID antennas and one or more Global positioning systemreceivers.

Description

Die Erfindung betriff eine Einrichtung nach dem Oberbegriff von Anspruch 1, durch welche die Interaktion zwischen Mensch und Maschine, bzw. zwischen Mensch und einer DV-Anlage hinsichtlich der Einfachheit der Bedienung erleichtert und hinsichtlich der Effizienz und der Eingabe-/Ausgabemöglichkeiten gegenüber bislang bekannten Systemen erheblich erweitert wird.The Invention relates to a device according to the preamble of claim 1, through which the interaction between man and machine, or between Human and a computer system in terms of ease of operation and in terms of ease the efficiency and the input / output possibilities compared to so far considerably extended to known systems.

Die Interaktion mit DV-Anlagen erfolgt überwiegend durch Verwendung von Tastaturen und Zeigegeräten, wobei ein Bildschirm als Repräsentationsfläche für Zustände in den Daten und für die Darstellung von Steuerelementen und deren Zustand verwendet wird. Diese Art der Benutzerschnittstelle ist insbesondere im Bürobereich etabliert Zusätzlich hat die Bedeutung der Spracherkennung in den letzten 20 Jahren kontinuierlich zugenommen, und durch die Entwicklung von Algorithmen für die Geräuschunterdrückung und durch den Abgleich der erkannten Worte mit semantischen Netzwerken qualitative Fortschritte gemacht. Insbesondere in Bereichen, in denen ein berufsspezifisches Vokabular bedeutend ist, wie z. B. in der Juris Prudenz, und in der Medizin wird Spracherkennung in zunehmendem Maß für die Texteingabe und zu Steuervorgängen von Robotern beispielsweise im Rahmen von Operationen eingesetzt.The Interaction with computer systems takes place predominantly through use keyboards and pointing devices, a screen as a representation surface for states in the Data and for the appearance of controls and their state used becomes. This type of user interface is especially in the office area has established additionally the importance of speech recognition in the last 20 years continuously increased, and by the development of algorithms for noise suppression and by matching the recognized words with semantic networks made qualitative progress. Especially in areas, in where a vocabulary specific to a profession is important, such as B. in Juris Prudenz, and in medicine, speech recognition is in increasing degree of text input and to tax transactions used by robots, for example, in the context of operations.

Die beschriebenen Vorrichtungen setzen voraus, dass sich der Anwender in der Nähe des Computers bzw. des Bildschirms, der Tastatur, der Maus befindet. Es liegt eine mehr oder weniger starke Ortsbindung vor.The described devices assume that the user near computer or screen, keyboard, mouse. There is a more or less strong location binding.

Ein Nachteil der herkömmlichen Benutzerschnittstelle liegt darin, dass Kenntnisse des Betriebssystems und der Eingabe-/Ausgabekonventionen vorliegen müssen. Bei besonderen Personengruppen wie beispielsweise bei Blinden, bei Personen mit kognitiven und motorischen Störungen, und bei älteren Menschen kann das Fehlen dieser Kenntnisse eine unüberwindbare Barriere darstellen.One Disadvantage of the conventional User interface is that knowledge of the operating system and the input / output conventions must be present. For special groups of people such as in the blind, in persons with cognitive and motor disturbances, and older ones People, the lack of this knowledge can be an insurmountable Represent barrier.

Während ein gut sehender Anwender beispielsweise ein PC-System via Maus relativ einfach steuern kann, indem er Steuerelemente anklickt, muss ein blinder unvergleichlich mehr wissen, um einen Computer steuern zu können. Er muss wissen, wie er das System dazu veranlasst, ihm diejenigen Informationsteile vom Bildschirm vorzulesen oder auf der Braillezeile anzuzeigen, für die er sich gerade interessiert. Er muss ferner wissen, wie man die einzelnen Steuerelemente wie Schalter, Radio-Buttons, Checkboxen, kombinierte Eingabefelder usw. bedient. Bei der Bedienung des Internets über Browser beispielsweise stellen die ScreenReader, mit deren Hilfe Blinde Computer bedienen hunderte von Befehlen zur Verfügung. So gibt es beispielsweise Befehle, um die nächste Überschrift einer bestimmten Ebene anzuspringen oder die vorige Überschrift auf der Ebene. Es gibt Befehle, um Listen von Steuerelementen zu bekommen usw. Je komplexer das Know-how ist, um ein Computersystem zu bedienen, desto größer sind die Hürden für besondere Personengruppen Ein älterer Wissenschaftler beispielsweise, der den Anschluss an die PC-Technik nicht erhalten hat, weil er in seinem Bereich Hilfskräfte für die Bedienung der DV hatte oder weil er mit Großrechner gearbeitet hat, und der erblindet ist, interessiert sich möglicherweise weiterhin für das Wissensgebiet, auf dem er gearbeitet hat. Die beschriebenen Hürden können sich für ihn als unüberwindbare Barriere hinsichtlich des Zugangs zu aktuellen Informationen erweisen. Das Hören von Podcasts beispielsweise, was heutzutage für 12-Jährige kein Problem ist, wäre für ihn damit ausgeschlossen.While a good-looking user, for example, a PC system via mouse relative You can simply control by clicking controls blind incomparably know more to control a computer too can. He needs to know how he causes the system to give him those pieces of information read from the screen or display on the Braille display, for the he is currently interested. He must also know how to use the individual controls such as switches, radio buttons, checkboxes, combined input fields, etc. operated. When operating the Internet via browser, for example make the ScreenReader, with the help of which blind computers operate hundreds of commands available. For example, there are commands for the next heading of a particular heading Level or the previous heading at the level. It gives commands to get lists of controls, etc. Je more complex the know-how In order to operate a computer system, the hurdles to special are greater Groups of persons An older one For example, scientists who connect to the PC technology did not receive, because he is in his area auxiliary staff for the operation the DV had or because he has worked with mainframe, and who is blind, may continue to be interested in the field of knowledge, on which he worked. The hurdles described can be insurmountable for him Barrier to accessing up-to-date information. Listening For example, podcasts, which is not a problem for 12-year-olds today, would be for him locked out.

Die Fixierung auf Ein-/Ausgabeterminals (Monitor, Tastatur und Maus) reduzieren den Umgang mit Informationen hinsichtlich der sensorischen Reize und sind mit einer Ortsbindung verbunden. Im Bereich des CBT (Computer Based Training) und des E-Learning, ist festzustellen, dass Lernsoftware die Lernmöglichkeiten zwar erheblich erweitert haben, das Lernen wird jedoch durch das Medium selbst monoton. Wenn Lernen immer am selben Ort (Monitor, Tastatur) erfolgt, immer in der gleichen sitzenden Haltung und lediglich reduziert auf visuelle und auditive Reize, wird eine Vielzahl anderer Sinneskanäle und Repräsentationsformen für Informationen nicht genutzt. Der Mensch ist im Lauf der Evolution nicht an eine derartige Arbeitshaltung adaptiert worden.The Fixation on input / output terminals (monitor, keyboard and mouse) reduce the handling of information regarding the sensory stimuli and are connected with a location binding. In the area of the CBT (computer Based Training) and e-learning, it is noted that educational software the learning opportunities However, learning has been greatly enhanced by the Medium itself monotone. If learning always in the same place (monitor, keyboard) done, always in the same sitting posture and only reduced on visual and auditory stimuli, becomes a variety of other sensory channels and forms of representation for information not used. Man is not one in the course of evolution Such work attitude has been adapted.

Bekannt sind weiterhin I/O-Vorrichtungen bei denen DV-Anlagen über Gesten und Mimik gesteuert werden. Derartige Systeme werden u. a. für Behinderte eingesetzt, die motorische Defizite haben und Tastaturen und Mäuse schlecht oder gar nicht benutzen können. Derartige Systeme bieten alternative Eingabemöglichkeiten, sind aber mit dem Nachteil verbunden, dass der Anwender eine Vielzahl von Gesten und deren Zuordnung zu Steuerbefehlen für die DV-Anlage lernen muss.Known are still I / O devices where DV systems via gestures and facial expressions are controlled. Such systems are u. a. for disabled people used, which have motor deficiencies and keyboards and mice bad or not at all. Such systems offer alternative input options but are included connected to the disadvantage that the user a variety of gestures and their assignment to control commands for the DP system must learn.

Zweck der Erfindung ist, das Userinterface in das Umfeld des Anwenders zu verlegen, bzw. es in dieses zu erweitern. Prinzipiell sollen beliebige Objekte für die Ein-/Ausgabe verwendet werden können Ferner sollen beliebige Orte für die Ein-/Ausgabe verwendet werden können. Die semantische Zuschreibung zu Objekten und Orten kann dabei individuell und/oder intersubjektiv vereinbart erfolgen.purpose The invention is the user interface in the environment of the user to relocate, or to extend it into this. In principle, should any objects for the input / output can be used Furthermore, any Places for the input / output can be used. The semantic attribution to objects and places can thereby individually and / or intersubjectively agreed.

Als Steuerelemente werden in diesem Text beliebige Objekte bezeichnet, die zu Zwecken der Datenein- und -ausgabe eingesetzt werden. Definierte Raumpositionen, die zu Zwecken der Datenein- und -ausgabe verwendet werden, werden ebenfalls als Steuerelement bezeichnet.Controls in this text are any objects that are used for purposes of data input and output. Defined space positions used for data input and output purposes will also be used referred to as a control.

Unter dem Begriff Aktoren, werden Ausgabevorrichtungen verstanden, die für zwecke der Datenausgabe eingesetzt werden.Under The term actuators, output devices are understood that for purposes the data output are used.

Unter dem Begriff virtuelle Steuerelemente werden definierte Raumpositionen verstanden, die für Zwecke der Datenein- und -ausgabe verwendet werden.Under The term virtual controls become defined spatial positions understood that for Purposes of data input and output.

Die Erfindung betrifft eine Vorrichtung für die Mensch-Maschine-Kommunikation, die in die Umwelt eingebettet ist, und auf der Verwendung mobiler und immobiler, symbolischer Steuerelemente sowie der Verwendung definierter Raumpositionen als Steuerelemente basiert.The The invention relates to a device for human-machine communication, that is embedded in the environment, and more mobile to use and immobile, symbolic controls and usage defined room positions based as controls.

Die Benutzeroberfläche eines DV-Systems wird in das Lebensumfeld der Benutzer verlagert. Die Begrenzung auf einen Ort, (Monitor, Tastatur, Maus) wird aufgehoben. Beliebige Objekte und beliebige räumliche Bereiche können für die Datenein- und -ausgabe verwendet werden. Damit kann der Anwender ein großes, räumliches Repräsentationssystem für Steuerelemente verwenden. Die Bewegung im Raum kommt als zusätzliches Repräsentationssystem dazu, da Verknüpfungen zwischen der Bewegung zu einem Punkt und dem entsprechenden Objekt als symbolisches Steuerelement erforderlich sind.The user interface of a computer system is shifted into the living environment of the users. The limitation on a location (monitor, keyboard, mouse) is canceled. Any objects and any spatial areas can be used for data entry. and output can be used. This allows the user a large, spatial Representation system for controls use. The movement in space comes as an additional system of representation to do that, there are shortcuts between the movement to a point and the corresponding object are required as a symbolic control.

Die Erfindung betrifft eine Vorrichtung, dadurch gekennzeichnet, dass beliebige Objekte als Steuerelemente und damit für die Datenein- und -ausgabe verwendet werden.The The invention relates to a device, characterized in that Any objects as controls and thus for the data input and output be used.

Es können dabei alle Objekte aus dem Umfeld eingesetzt werden, die sich dort bereits befinden. Es können aber auch spezielle Arrangements verwendet werden, bei denen vorzugsweise kleine Objekte benutzt werden, z. B. ein kleiner Telefonhörer, um eine Telefonverbindung aufzubauen, ein Taxi, um ein Taxi sofort per Mail zu bestellen. Ein Vorteil der Verwendung von Symbolen, die bereits mit einer allgemeingültigen Bedeutung versehen sind, besteht darin, dass keine Lernphase für die Bedienung des Systems erforderlich ist, da auf bereits bestehende semantische Zuschreibungen zurückgegriffen werden kann.It can All objects of the environment are used, which are there already located. It can but also special arrangements can be used where preferably small objects are used, for. B. a small telephone receiver to to establish a telephone connection, a taxi to a taxi immediately order by mail. An advantage of using symbols, already with a universal Meaning, is that no learning phase for the operation of the system is necessary, since on already existing semantic Attributions attributed can be.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass eine oder mehrere vordefinierte Raumpositionen als sensitive Bereiche für Datenein- und -ausgabe und damit als Steuerelemente verwendet werden.The Invention further relates to a device, characterized that one or more predefined spatial positions are sensitive Areas for Data input and output and thus used as controls.

Auch Raumpositionen verfügen teilweise über allgemeingültige Bedeutungszuschreibungen. So ist der Bereich einer Türe symbolisch beispielsweise damit verbunden, dass Dinge aus dem Haus hinaus- oder hineinkommen. Die Erledigung einer Aufgabe, der ein Objekt zugeschrieben wurde, kann in ihrer Priorität dadurch verändert werden, dass das Objekt an einer vordefinierten Stelle des Raumes nach oben oder unten gehalten wird. Hierbei korreliert die Position oben und unten mit hoher und niedriger Priorität. Ein in seiner Kommunikationsfähigkeit behinderter Mensch könnte auf diese Weise etwa ausdrücken, wie wichtig ihm eine bestimmte Sache ist. Das Erfassen der Positionen im Raum kann durch ein beliebiges, technisches Verfahren erfolgen.Also Room positions partly over general Attributions of meaning. So the area of a door is symbolic for example, that things go out of the house or enter. The completion of a task, an object can be changed in their priority by that the object is at a predefined location of the room upwards or kept down. Here the position correlates above and down with high and low priority. A disabled in his communication skills Human could to express in this way, how important a certain thing is to him. The capturing of the positions in the room can be done by any, technical procedure.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Änderung von Eigenschaften der Steuerelemente als Trigger für die Datenein- und oder -ausgabe eingesetzt werden.The Invention further relates to a device, characterized that change properties of the controls as triggers for data entry. and or output.

Eigenschaften der Objekte, die als Steuerelemente verwendet werden, können alle physikalischen Eigenschaften und auch die Lage der Objekte im Raum sein.properties The objects that are used as controls can all be physical properties and also the location of objects in space be.

Indem beispielsweise eine Karte vor eine CD gehalten wird, wobei die Karte eine Note zeigt, könnte die CD bzw. ihr Inhalt abgespielt werden. Indem die Karte mit der anderen Seite an die CD gehalten wird, und die andere Seite Buchstaben zeigt, könnten die Angaben zur CD abgerufen werden, bzw. die Texte der Songs. Auch hierbei handelt es sich um eine symbolische Kommunikation mit einem DV-System, wobei in diesem Beispiel ein passives Objekt als Steuerelement verwendet wird, nämlich eine Karte.By doing For example, a card is held in front of a CD, the card could show a note the CD or its contents are played. By the card with the the other side is held to the CD, and the other side letters shows that could Information about the CD are retrieved, or the lyrics of the songs. Also this is a symbolic communication with a DV system, where in this example a passive object as a control is used, namely a map.

Andere Änderungen von Eigenschaften von Objekten, kann z. B. das Drehen eines Objektes im Raum sein oder das Verschieben von Zeigern an einem Objekt, welches eine Uhr modellhaft repräsentiert.Other changes properties of objects, such as B. the rotation of an object be in space or move pointers to an object, which a clock represents a model.

Andere Eigenschaften könnte z. B. die Temperatur sein. Indem ein Anwender seine Hand auf ein Objekt legt, wobei das Objekt einen Wärmesensor beinhaltet, ändern sich die Eigenschaften des Objekts. Die Temperaturänderung kann als Trigger für die Dateneingabe verwendet werden. Bei diesem Beispiel handelt es sich um ein Objekt, das mit Sensoren und mit entsprechender Steuerelektronik ausgestattet ist.Other Properties could z. B. be the temperature. By placing a user's hand on an object sets, where the object includes a thermal sensor, change the properties of the object. The temperature change can be used as a trigger for data entry be used. This example is an object equipped with sensors and corresponding control electronics is.

Eine andere Eigenschaft kann z. B. das Aussenden von Licht sein. Emittiert ein Objekt Licht, kann das für den Anwender als Information dafür verwendet werden, dass er das Objekt jetzt für die Dateneingabe verwenden kann. Das Steuerelement ist in dem Moment also sensitiv. Ist das Licht aus, stellt dieser Zustand symbolisch Inaktivität dar.A other property can be z. B. be the emission of light. issued an object light, that can be for the user as information for it can be used to now use the object for data entry can. The control is so sensitive at the moment. Is this Light off, this state symbolizes inactivity.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass das Bewegen eines oder mehrerer Objekte an einen oder mehrere vordefinierte Bereiche als Trigger für die Datenein- und oder -ausgabe eingesetzt wird.The invention further relates to a device, characterized in that the moving of a or multiple objects to one or more predefined areas as triggers for data input and / or output.

Aus diesem Anspruch ergibt sich u. a. dass durch die Kombinationsmöglichkeiten vieler Objekte eine große Zahl an Ausdrucksmöglichkeiten entsteht. Damit kann ein Anwender auch mit relativ wenigen Objekten eine Vielzahl von Willensäußerungen abgeben.Out this claim is u. a. that through the combination possibilities many objects a big one Number of expressions arises. This allows a user with relatively few objects a variety of wills submit.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Änderungen der Objekteigenschaften und Objektpositionen durch beliebige technische Verfahren registriert werden.The Invention further relates to a device, characterized that the changes the object properties and object positions by any technical Procedure to be registered.

Die Position eines Objektes im Raum kann z. B. dadurch ermittelt werden, dass das Objekt mit einem RFID-Transponder ausgestattet wird und sich im Raum ein oder mehrere RFID-Reader befinden. Die Identität und die Positionen von Objekten können ferner über optische Mustererkennung erfolgen.The Position of an object in space can, for. B. be determined thereby that the object is equipped with an RFID transponder and There are one or more RFID readers in the room. The identity and the Positions of objects can also be visual Pattern recognition done.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Bedeutungszuschreibung zu den Objekten, die als Steuerelemente verwendet werden, und die Bedeutungszuschreibung zu den sensitiven Bereichen variabel ist und vom Anwender definierbar ist.The Invention further relates to a device, characterized that attribution of meaning to the objects used as controls become, and the attribution of meaning to the sensitive areas is variable and can be defined by the user.

Neben den allgemeingültigen Bedeutungszuschreibungen wie beispielsweise einer durchgestrichenen Zigarette als Zeichen für Rauchverbot können ein und demselben Objekt von Mensch zu Mensch unterschiedliche Bedeutungen zugeschrieben werden.Next the universal one Meaning ascriptions such as a crossed out Cigarette as a sign of No smoking one and the same object different meanings from person to person be attributed.

Die Erfindung beinhaltet die Möglichkeit, dass die Bedeutungszuschreibung vom Anwender optional variabel vorgenommen werden kann.The Invention includes the possibility that the attribution of meaning by the user optionally made variable can be.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass das Objekt oder die Objekte, die als Steuerelemente eingesetzt werden, mit Sensoren und Aktoren versehen sind, wobei die Sensoren zur Dateneingabe und die Aktoren für die Datenausgabe verwendet werden.The Invention further relates to a device, characterized that object or objects used as controls are provided with sensors and actuators, the sensors used for data entry and the actuators for data output become.

Objekte, die mit Sensoren und Aktoren und einer entsprechenden Elektronik versehen sind und drahtlos mit einer DV-Anlage kommunizieren, bieten vielfältige Ein- und Ausgabemöglichkeiten.objects those with sensors and actuators and corresponding electronics and communicate wirelessly with a computer system. and output options.

Während ein herkömmliches Userinterface auf den Bildschirmbereich beschränkt ist, wobei einzelne Bereiche für spezielle Steuerzwecke als Steuerelemente reserviert sind (Schalter, Radio-Buttons, Checkboxen usw.) bietet das erfindungsgemäße Verfahren die Möglichkeit, das Userinterface in das komplette Lebensumfeld zu erweitern. Was im Rahmen eines herkömmlichen Userinterface etwa als Schalter auf dem Bildschirm dargestellt wird, und ein sensitiver Bereich für die Aktivierung per Maus oder per Tastatur verwendet wird, kann als ausgelagertes Steuerelement z. B. dadurch realisiert werden, dass ein Objekt, welches ein Display und eine Eingabevorrichtung enthält an einer beliebigen Raumposition angeordnet wird. Die Datenein- und Ausgabe kann damit nicht nur vor dem Monitor, sondern prinzipiell überall erfolgen, wo das Objekt angeordnet werden kann. Mit derartigen Steuerelementen lassen sich beispielsweise Kommunikationsprozesse optimieren, die mit Raumpositionen in Verbindung stehen.While a conventional User interface is limited to the screen area, with individual areas for special Control purposes are reserved as controls (switches, radio buttons, checkboxes etc.) provides the inventive method the possibility, to extend the user interface into the complete living environment. What in the context of a conventional User interface is displayed as a switch on the screen, for example, and a sensitive area for activation via mouse or keyboard can be used as an outsourced control z. B. be realized thereby that an object, which is a display and an input device contains is arranged at any spatial position. The data and output can be done not just in front of the monitor, but in principle everywhere, where the object can be arranged. With such controls For example, it is possible to optimize communication processes that communicate with room locations.

Einem Mitarbeiter einer Firma kann man mit der erfindungsgemäßen Vorrichtung beispielsweise eine Information an einem bestimmten Ort übergeben. Dabei wird die Bewegung des Mitarbeiters von einem technischen System registriert. Wenn er sich zu einem bestimmten Ort bewegt, wird er beispielsweise akustisch darauf aufmerksam gemacht, dass er von einem Objekt, welches über ein Display verfügt, Informationen ablesen kann bzw. soll. Die Informationsübergabe wird damit raumabhängig gesteuert.a Employees of a company can be with the device according to the invention For example, pass information at a specific location. The movement of the employee becomes a technical system registered. If he moves to a certain place, he will for example, acoustically warned that he is from an object which over a display has, Can read information or should. The information transfer becomes space dependent controlled.

Soll beispielsweise eine Reparatur oder ein Technikcheck bei nächster passender Gelegenheit an einem Gerät im Keller vorgenommen werden, kann die erfindungsgemäße Vorrichtung dafür sorgen, dass der Techniker die Information dann bekommt, wenn er sich im Keller befindet. Es entfällt die Notwendigkeit, einen Auftrag zu übergeben, der vom Techniker verwaltet werden muss, damit er ihn dann ausführt, wenn er einen Weg in den Keller hat.Should For example, a repair or a technical check at next suitable Opportunity on a device be made in the basement, the device of the invention ensure, that the technician gets the information when he is in the Cellar is located. It is omitted the need to hand over an order from the technician must be managed so that he then executes him, if he has a way in the Cellar has.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass das Bewegen von Objekten in räumlichen Strukturen, diesen Strukturen zuvor zugeschriebene Informationen abruft.The Invention further relates to a device, characterized that moving objects in spatial structures, this Structures retrieves previously attributed information.

Mit dieser Vorrichtung kann beispielsweise eine Zuordnung von räumlichen Strukturen wie Häusern, Etagen und Räumen zu hierarchisch gegliederten Informationen vorgenommen werden.With This device can, for example, an assignment of spatial Structures like houses, Floors and rooms to hierarchically structured information to be made.

Indem sich ein Anwender in Räumen bewegt und beispielsweise RFID-Chips mit einem Reader scannt, können den Räumlichkeiten entsprechend zugeordnete Informationen abgerufen werden. Diese Vorrichtung kann z. B. im Bereich des E-Learning eingesetzt werden. Wissen wird üblicherweise gegliedert in Kapitel und Unterkapitel. Verbindet man räumliche Gliederungen mit inhaltlichen Gliederungen kann sich ein Lernender durch Räume bewegen und damit assoziierte Informationen abrufen. Im Gehirn entsteht eine Verbindung zwischen dem Wissen und den Räumlichkeiten, wobei die Struktur des Wissens durch die räumliche Repräsentation erheblich leichter erschlossen und gespeichert werden kann.By doing a user in rooms moved and, for example, RFID chips scanned with a reader, the premises correspondingly assigned information is retrieved. This device can z. B. be used in the field of e-learning. Knowledge becomes common divided into chapters and subchapters. Connecting spatial Outlines with content divisions can become a learner through spaces move and retrieve associated information. In the brain arises a connection between the knowledge and the premises, the structure of knowledge through the spatial representation much easier to access and store.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass der Anwender durch das Bewegen von Objekten in räumlichen Strukturen, den Strukturelementen Informationen zuordnet.The Invention further relates to a device, characterized that the user by moving objects in spatial Structures to which information is assigned to structural elements.

Das erfindungsgemäße Verfahren sieht z. B. die Möglichkeit vor, dass ein Anwender Objekte bewegt, die mit einem Display ausgestattet sind. Auf dem Display werden Teile einer wissenschaftlichen Arbeit dargestellt.The inventive method sees z. B. the possibility For example, a user moves objects that are equipped with a display are. On display will be parts of a scientific paper shown.

Die Position der Objekte (Steuerelemente) wird mit einem technischen Verfahren erfasst. Durch die räumliche Anordnung die der Anwender vornimmt, also durch die Art und Weise, wie er die Steuerelemente anordnet, werden den Informationen Strukturinformationen zugeordnet, d. h. die Gliederung eines Dokumentes kann faktisch durch das Verschieben von materiellen Objekten erfolgen.The Position of the objects (controls) comes with a technical Procedure recorded. By the spatial Arrangement that the user makes, so by the way, how he arranges the controls becomes the information structure information assigned, d. H. the structure of a document can in fact done by moving material objects.

In einer anderen Ausfertigung der Vorrichtung kann beispielsweise durch das Beladen eines Behälters, wie z. B. eines Koffers, automatisch eine Packinglist generiert werden. Die Objekte, die dem Koffer zugeordnet werden, werden dabei genau wie der Koffer bzw. Behälter selbst identifiziert. Das Zuordnen der Gegenstände zu der Struktur generiert im Hintergrund automatisch eine Liste.In another copy of the device can, for example, by loading a container, such as As a suitcase, automatically generates a Packinglist become. The objects that are assigned to the suitcase will be included just like the suitcase or container self identified. The mapping of the objects to the structure is generated in the background automatically a list.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, drahtlos mit einer DV-Anlage kommunizieren.The Invention further relates to a device, characterized that the objects that are used as controls are wireless communicate with a computer system.

Die drahtlose Anbindung der Steuerelemente an eine DV-Anlage bietet den Vorteil, dass sie mit geringem Aufwand je nach Bedarf unterschiedlich angeordnet werden können.The wireless connection of the controls to a computer system the advantage that they are arranged differently with little effort as needed can be.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren RFID-Readern und einer oder mehreren RFID-Antennen ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more RFID readers and one or more RFID antennas are equipped.

Der Einsatz von RFID hat den Vorteil, dass Gegenstände, die mit RFID-Transpondern versehen sind, eindeutig identifiziert werden können. Die begrenzte Reichweite bietet ferner den Vorteil, dass der Ort der Erfassung der Gegenstände relativ genau bestimmt werden kann, indem die Position der Reader bekannt ist.Of the Use of RFID has the advantage of having items with RFID transponders provided, can be clearly identified. The limited range further provides the advantage that the location of the detection of the objects relative can be determined exactly by the position of the reader known is.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Bar-Code-Readern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more bar code readers are equipped.

Der Einsatz von Bar-Codes bietet ein preisgünstiges Verfahren, um Gegenstände mit Bar-Code-Etiketten zu kennzeichnen.Of the Use of bar codes provides a low-priced method to deal with items Bar code labels to mark.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Wärmesensoren ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more heat sensors are equipped.

Mit Wärmesensoren ausgestattete Objekte (Steuerelemente) können beispielsweise die Anwesenheit einer Person registrieren. Ferner können derartig ausgestaltete Steuerelemente dafür eingesetzt werden, um Dateneingabe durch Berühren von Gegenständen zu ermöglichen.With heat sensors equipped objects (controls) can, for example, the presence register a person. Furthermore, such configured Controls for it can be used to data entry by touching objects enable.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Kameras ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more cameras are equipped.

Der Einsatz von Kameras bedeutet, dass Mustererkennung für die Objekterkennung eingesetzt werden kann. Wird beispielsweise ein Objekt als Symbol verwendet, welches ein Auto darstellt, wobei sich in dem Objekt eine Kamera befindet, kann die Dateneingabe etwa folgendermaßen erfolgen:
Der Anwender hält ein Objekt vor das Auto, das ein Ölkännchen repräsentiert. Auto in Verbindung mit Ölkännchen könnte als Auftrag für einen Ölwechsel interpretiert werden.
The use of cameras means that pattern recognition can be used for object recognition. For example, if an object is used as a symbol representing a car with a camera in the object, data entry may be as follows:
The user holds an object in front of the car, which represents an oil can. Auto in conjunction with oil jug could be interpreted as an order for an oil change.

Das Auto in Verbindung mit einem Objekt, das einen Zapfhahn darstellt, kann als Tankauftrag interpretiert werden.The Car in conjunction with an object that represents a tap, can be interpreted as a tank order.

Das Auto in Verbindung mit einem Foto oder Objekt, welches einen Kunden repräsentiert, könnte einen Auftrag zu einer Fahrt zu dem Kunden bedeuten.The Car in conjunction with a photo or object representing a customer represents could one Order to signify a trip to the customer.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Lichtsensoren ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more light sensors.

Derartige Objekte, können z. B. als Steuerelemente verwendet werden, indem sie mit einem Laserpointer angestrahlt werden. Damit ist z. B. ein Userinterface realisierbar, welches sich über eine große Wand erstreckt und aus vielen Steuerelementen besteht.such Objects, can z. B. can be used as controls by using a laser pointer be illuminated. This is z. B. a user interface feasible, which is about a big Wall extends and consists of many controls.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Mikrofonen ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more microphones.

Dadurch dass verschiedene Objekte bzw. Steuerelemente symbolisch verschiedenen Aufgaben oder Personen zugeordnet werden können, erlaubt die Vorrichtung beispiels weise, dass Arbeitsaufträge mündlich in die Steuerelemente hineingesprochen werden. Die Steuerelemente werden zu diesem Zweck visuell und symbolisch gekennzeichnet, z. B. durch Fotos der Mitarbeiter, denen Aufträge gegeben werden sollen.The fact that different objects or controls can be symbolically assigned to different tasks or people, allows the device example, that working verbally into the controls. The controls are visually and symbolically marked for this purpose, e.g. For example, by photos of the employees who are to be given orders.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Bewegungssensoren ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more motion sensors.

Durch die Verwendung von Bewegungssensoren kann beispielsweise Erschütterung festgestellt werden. Durch einfaches Berühren oder Klopfen auf Steuerelemente, kann dadurch z. B. die Dateneingabe aktiviert werden, bzw. es Können Eingaben vorgenommen werden.By For example, the use of motion sensors can be shocking be determined. By simply touching or tapping on controls, can z. B. the data input can be activated, or it can inputs be made.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Touchscreens versehen sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more touch screens are provided.

Dadurch, dass die Steuerelemente symbolisch verschiedenen Funktionen zugeordnet werden können, kann auch die Dateneingabe via Touchscreen unmittelbar auf diese Funktionen bezogen werden.Thereby, that the controls are symbolically assigned to different functions can be can also data entry via touch screen directly on this Functions are related.

Auch mit dieser Ausführung der Vorrichtung ist es möglich, Arbeitsaufträge verschiedenen Personen über die entsprechenden Objekte zu übergeben. Alternativ lassen sich auch diverse Arbeitsprozesse oder Teile von Maschinen steuern, wobei einem zu steuernden Teil jeweils ein Steuerelement zugeordnet werden kann.Also with this version the device it is possible work orders different people over to pass the corresponding objects. alternative can also be various work processes or parts of machines control, wherein a part to be controlled in each case a control can be assigned.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren versehen sind, die die Lage des oder der Objekte im Raum registrieren.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more sensors are provided which the location of or register the objects in the room.

Diese Ausführung der Vorrichtung erlaubt es, die Dateneingabe beispielsweise über das Drehen von Objekten zu steuern. Werden die Flächen eines Würfels beispielsweise mit sechs verschiedenen Symbolen versehen, kann die Dateneingabe dadurch erfolgen, dass der Würfel jeweils in einer anderen Lage an ein Steuerelement oder an eine bestimmte Raumposition gehalten wird.These execution the device allows the data input, for example via the Turning objects to control. For example, the faces of a cube become provided with six different symbols, data entry done by making the cube each in a different position to a control or to a certain spatial position is maintained.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer Empfangseinrichtung für elektromagnetische Wellen ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with a receiving device for electromagnetic waves are equipped.

Durch diese Ausgestaltung der Vorrichtung ist es möglich, die Steuerelemente einzeln zu aktivieren und Dateneingabevorgänge auszulösen.By This embodiment of the device, it is possible, the controls individually enable and trigger data input operations.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind, die chemische Stoffe registrieren können.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more sensors are equipped, the chemical substances can register.

Durch diese Ausgestaltung der Erfindung ist es beispielsweise möglich die Dateneingabe über Aromastoffe zu aktivieren.By This embodiment of the invention, it is possible, for example, the Data input via flavorings to activate.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind, die Druck registrieren können.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more sensors that register pressure can.

Mit einer Ausführung dieser Vorrichtung ist es möglich Daten einzugeben, indem auf Objekte, die auf dem Boden liegen, getreten wird.With an execution This device is possible Enter data by stepping on objects lying on the ground becomes.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind die Radioaktivität registrieren können.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more sensors are equipped to register the radioactivity can.

Es sind Gebrauchsgegenstände bekannt, die eine minimal höhere Radioaktivität aufweisen als das übrige Umfeld. Mit einer Ausführung der Erfindung, die Radioaktivitätswerte registrieren kann, ist das Auslösen von Dateneingabevorgängen möglich.It are everyday objects known to be a slightly higher radioactivity have as the rest Environment. With an execution invention, the radioactivity values can register is the triggering of data input operations possible.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Chronometern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more chronometers are equipped.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren GPS-Empfängern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more GPS receivers are equipped.

Durch die Auswertung des GPS-Signals ist eine Positionsbestimmung möglich. Bei Ankunft eines Objekts an einer definierten Position, können damit beispielsweise Daten abgerufen werden. Eine Zuordnung von räumlichen Strukturen zu inhaltlichen Strukturen in Informationen ist damit möglich.By the evaluation of the GPS signal, a position determination is possible. at Arrival of an object at a defined position, can use it For example, data is retrieved. An assignment of spatial Structures for content structures in information is thus possible.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Schrittzählern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more pedometer are equipped.

Die Ausfertigung der Vorrichtung mit Schrittzählern erlaubt die Registrierung von Positionsänderungen selbst, wenn kein GPS-Signal verfügbar ist.The Making the device with pedometer allows registration of position changes even if no GPS signal is available.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind, die Verformung registrieren können.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more sensors that register deformation can.

Indem Steuerelemente über den Verformungsgrad Dateneingabevorgänge auslösen können, ist es beispielsweise möglich, durch verbiegen einer Karte Daten einzugeben.By doing Controls over For example, it can trigger the degree of deformation data input operations possible, by bending a card to enter data.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Keyboards ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more keyboards.

Eine vorteilhafte Ausgestaltung der Erfindung sieht Tastaturen an den Steuerelementen vor. Damit können ebenfalls Dateneingabevorgänge vorgenommen werden, die definierten Objekten bzw. Funktionen zugeordnet werden.A advantageous embodiment of the invention provides keyboards to the Controls. With that you can also data input operations be made assigned to the defined objects or functions become.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Trackballs ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more trackballs are equipped.

Trackballs als Zeigeeinrichtung erlauben ebenfalls die Dateneingabe. Dadurch dass die Dateneingabe an einem definierten Steuerelement vorgenommen wird, kann ein direkter Bezug zu einer definierten Funktion hergestellt werden.trackballs as a pointing device also allow data entry. Thereby that data entry is made to a defined control a direct relation to a defined function can be established become.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer Vorrichtung für die Richtungsbestimmung akustischer Signale ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with a device for the direction determination of acoustic signals are equipped.

Die akustische Ortungsvorrichtung erlaubt die Dateneingabe in Abhängigkeit von der Richtung einer oder mehrerer Schallquellen.The Acoustic locating device allows data entry depending on from the direction of one or more sound sources.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Schiebereglern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more sliders.

Schieberegler erlauben eine schnelle und intuitive Eingabe von Werten. Durch die Zuordnung zu definierten Steuerelementen, kann die Dateneingabe unmittelbar auf eine entsprechend definierte Funktion erfolgen.slider allow fast and intuitive input of values. By the Assignment to defined controls, data entry can be immediate to a correspondingly defined function.

Die Erfindung betrifft ferner eine Vorrichtung und oder einem oder mehreren Ansprüchen 11 bis 31, dadurch gekennzeichnet, dass die Objekte über eine Elektronik verfügen, die die Daten der Sensoren verarbeitet und die Aktoren steuert und die uni- oder bidirektionale Kommunikation mit einer DV-Anlage steuert.The The invention further relates to a device and or one or more claims 11 to 31, characterized in that the objects over a Have electronics, which processes the data from the sensors and controls the actuators and controls the uni- or bidirectional communication with a computer system.

Die aktiven Steuerelemente sind erfindungsgemäß als unabhängige elektronische Einheiten ausgelegt, die die Signale der Sensoren verarbeiten und die Aktoren, also die Ausgabevorrichtungen steuern.The active controls are inventively independent electronic units designed to process the signals from the sensors and the actuators, So control the output devices.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Displays als Bildanzeigevorrichtung ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more displays equipped as an image display device are.

Während herkömmliche Anzeigegeräte wie z. B. Monitore die Bedieneroberfläche eines DV-Systems komplett anzeigen, sieht die erfindungsgemäße Vorrichtung vor, Steuerelemente optional und zusätzlich an beliebigen Stellen im Umfeld des Anwenders zu platzieren.While conventional displays such as As monitors complete the user interface of a computer system show, the device according to the invention provides controls optional and additional anywhere in the user's environment.

Damit ist es beispielsweise möglich, dem Anwender, der sich innerhalb von Räumlichkeiten bewegt, orts- und kontextabhängige Informationen über ein Display eines Steuerelements zu übergeben. Es ist ferner möglich Darstellungen von Text auf mehrere bewegliche Steuerelemente aufzuteilen, um diese Teile beispielsweise in unterschiedlichen räumlichen Anordnungen zu verwenden.In order to is it possible, for example, the user who moves within premises, and contextual Information about a To pass the display of a control. It is also possible Splitting representations of text into multiple moving controls for example, these parts in different spatial arrangements to use.

Während bei herkömmlichen Bedieneroberflächen beispielsweise zwei oder mehrere Textfelder auf einer Repräsentationsfläche abgebildet werden, ermöglicht die erfindungsgemäße Vorrichtung, mehrere Textteile mehreren Objekten als Steuerelemente zuzuordnen und das Userinterface damit im Raum zu verteilen.While at usual user interfaces For example, two or more text fields are displayed on a representation surface become possible the device according to the invention, to associate multiple pieces of text with multiple objects as controls and to distribute the user interface with it in the room.

Die Verteilung der Datenausgabe auf das komplette Umfeld des oder der Anwender bietet den Vorteil, dass der Anwender orts- und kontextabhängig informiert werden kann. Befindet er sich beispielsweise gerade an Ort A, kann er in diesem Augenblick eine Information erfassen, die ihn auffordert, von diesem Ort einen Gegenstand mitzubringen.The Distribution of data output to the entire environment of the or The advantage for the user is that the user is informed depending on the location and the context can be. For example, if he is currently at location A, he can at that moment he is gathering information that asks him to bring an item from this place.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Schallgebern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more sounders are equipped.

Herkömmliche Benutzerschnittstellen bieten Audioausgabe über zwei Lautsprecher an. Surroundsysteme verwenden bis zu sieben einzelne Kanäle. Die Lautsprecher sind üblicherweise via Kabel an einer DV-Anlage angeschlossen.conventional User interfaces offer audio output through two speakers. surround systems use up to seven individual channels. The speakers are common connected via cable to a computer system.

Die erfindungsgemäße Vorrichtung sieht vor, dass beliebig viele Objekte als Steuerelemente eingesetzt werden können, die im Raum beliebig verteilt werden können. Es ist somit möglich, dem Anwender spezifische Informationen an beliebigen Orten akustisch zukommen zu lassen.The inventive device provides that any number of objects can be used as controls that can be distributed anywhere in the room. It is thus possible to the user provide specific information acoustically at any location.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Lichtgebern ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more light generators.

Zweck der an den unabhängigen Steuerelementen angebrachten Lichtgebern ist, dem oder den Anwendern, Signale an beliebigen Orten übermitteln zu können. Es ist damit beispielsweise möglich, den Anwender auf definierte Zustände in den Daten aufmerksam zu machen, wenn er sich an einen definierten Ort begibt.purpose the at the independent Control elements, the user (s), Transmit signals to any location can. For example, it is possible the user to defined states to draw attention to the data if it adheres to a defined Place goes.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit Motoren und Antriebsvorrichtungen versehen sind.The Invention further relates to a device, characterized that the objects that are used as controls come with Motors and drive devices are provided.

Die erfindungsgemäße Vorrichtung sieht vor, dass die unabhängigen Steuerelemente optional mit einem eigenen Antrieb versehen sich und sich damit im Raum bewegen können.The inventive device provides that the independent Control elements optionally have their own drive and be able to move in space with it.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Vibratoren ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more vibrators.

Für die Signal- bzw. Informationsübermittlung sieht die erfindungsgemäße Vorrichtung vor, Vibratoren einzusetzen. Diese haben den Zweck die Informationsübermittlung unabhängig von visuellen und akustischen Signalen zu ermöglichen. Der Anwender kann informiert werden, ohne dass er ein Display in Evidenz halten muss oder auf bestimmte Geräusche achten muss.For the signal or information transmission sees the device according to the invention to use vibrators. These have the purpose of transmitting information independently of visual and audible signals. The user can be informed without having to keep a display in evidence or to certain sounds must pay attention.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen versehen sind, die die Form und oder die Oberflächenbeschaffenheit des oder der Objekte verändern können.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more devices are provided, the shape and or the surface texture change the object or objects can.

Für die Datenausgabe sieht die erfindungsgemäße Vorrichtung vor Oberflächenänderungen zu verwenden. Taktile Darstellungen sind beispielsweise für Blinde von Vorteil.For data output sees the device according to the invention before surface changes to use. Tactile representations are for blind people, for example advantageous.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Anzeigevorrichtungen für Blindenschrift ausgestattet sind.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more braille display devices are.

Die erfindungsgemäße Ausstattung der Steuerelemente mit Anzeigevorrichtungen für Blindenschrift, bietet den Vorteil, dass Blinde Zugang zu den auf den Steuerelementen ausgegebenen Informationen bekommen.The Equipment according to the invention The braille display controls provide the Advantage that blind access to the output on the controls Get information.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen ausgestattet sind, die Gerüche emittieren können.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more devices that emit odors can.

Die erfindungsgemäße Ausstattung der Steuerelemente mit Geruchsgebern bietet den Vorteil, dass der Anwender Informationen erhalten kann, ohne dass er die Steuerelemente visuell in Evidenz halten muss oder ohne dass er sich im Bereich der akustischen Reichweite der Schallgeber der Steuerelemente befinden muss.The Equipment according to the invention The controls with odor sensors offers the advantage that the Users can get information without giving the controls visually in evidence or without being in the field the acoustic range of the sounder of the controls are located got to.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen ausgestattet sind, die Luftströme erzeugen können.The Invention further relates to a device, characterized that the objects that are used as controls come with equipped with one or more devices that generate air currents can.

Die erfindungsgemäße Ausstattung der Steuerelemente mit einer Vorrichtung, die Luftströme erzeugen kann, bietet den Vorteil, dass der Anwender Informationen erhalten kann, ohne dass er die Steuerelemente visuell in Evidenz halten muss oder ohne dass er sich im Bereich der akustischen Reichweite der Schallgeber der Steuerelemente befinden muss.The Equipment according to the invention the controls with a device that generate air currents can, offers the advantage that the user will receive information without being able to visually keep the controls in evidence must or without being in the range of the acoustic range the sounder of the controls must be located.

Die Erfindung betrifft ferner eine Vorrichtung, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen versehen sind, die elektromagnetische Wellen generieren können.The Invention further relates to a device, characterized that the objects that are used as controls come with one or more devices are provided, the electromagnetic Can generate waves.

Die erfindungsgemäße Ausstattung der Steuerelemente mit einer elektronischen Vorrichtung, die elektromagnetische Wellen generieren kann, hat den Vorteil, dass dadurch Objekte, die sich in der Nähe der Steuerelemente befinden, mit Signalen versorgt werden können.The Equipment according to the invention the controls with an electronic device that electromagnetic Can generate waves, has the advantage that by doing objects, the close by of the controls can be supplied with signals.

Die Erfindung betrifft ferner eine Vorrichtung und oder einem oder mehreren Ansprüchen 11 bis 43 dadurch gekennzeichnet, dass das oder die Objekte, die als Steuerelemente eingesetzt werden, über eine Elektronik verfügt, die die Aktoren steuert.The The invention further relates to a device and or one or more claims 11 to 43, characterized in that the object or objects that be used as controls, has an electronics, the controls the actuators.

Um die diversen Ausgabevorrichtungen (Aktoren) steuern zu können, sieht die erfindungsgemäße Vorrichtung vor, die Steuerelemente mit einer Steuerelektronik auszustatten.Around the various output devices (actuators) to be able to control sees the device according to the invention to equip the controls with control electronics.

Die Erfindung betrifft ferner eine Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass einer oder mehrere Bereiche im Raum als Repräsentationsbereich für virtuelle Steuerelemente verwendet werden.The invention further relates to a device according to one or more of the preceding claims, characterized in that one or more Other areas in the room are used as a representation area for virtual controls.

Ein virtueller Repräsentationsbereich kann beispielsweise eine Projektionsfläche sein, auf die eine visuelle, symbolische Darstellung projiziert wird. Indem der Anwender ein Steuerelement in die Nähe der Projektionsfläche bringt, wird die Dateneingabe ausgelöst.One virtual representation area may for example be a projection surface onto which a visual, symbolic representation is projected. By the user Control close to the projection brings, data entry is triggered.

Die Erfindung betrifft ferner eine Vorrichtung nach einem oder mehreren der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Relation des oder der Objekte, die als Steuerelemente verwendet werden untereinander und zu dem oder den virtuellen Steuerelementen im Raum, durch ein technisches Überwachungssystem realisiert wird, welches das oder die Objekte und ihre Relation zueinander und die Relation zu Raumpositionen registriert.The The invention further relates to a device according to one or more the aforementioned claims, characterized in that the relation of the object (s), which are used as controls among themselves and to the or the virtual controls in the room, through a technical monitoring system which realizes the object or objects and their relation registered to each other and the relation to spatial positions.

Damit die Positionen der Steuerelemente erfasst werden, sieht die erfindungsgemäße Vorrichtung ein beliebiges technisches Verfahren vor. Die Positionserfassung kann beispielsweise über Mustererkennung und oder via RFID erfolgen.In order to the positions of the controls are detected, sees the device according to the invention any technical procedure. The position detection can, for example, over Pattern recognition and or via RFID.

Die Erfindung betrifft ferner eine Vorrichtung und oder einem oder mehreren anderen, vorgenannten Ansprüchen, dadurch gekennzeichnet, dass das oder die die mit Sensoren und oder Aktoren versehenen Objekte, die als Steuerelemente verwendet werden, ihre Energie drahtlos aus der Umwelt beziehen.The The invention further relates to a device and or one or more other, aforementioned claims, characterized in that the or the with sensors and or or Actuators provide objects that are used as controls to draw their energy wirelessly from the environment.

Um den Wartungsaufwand der aktiven Steuerelemente gering zu halten und das Austauschen von Batterien oder Akkus zu vermeiden, sieht die erfindungsgemäße Vorrichtung vor, dass die Steuerelemente die Energie für den Betrieb aus ihrem Umfeld entnehmen.Around keep the maintenance of the active controls low and to avoid replacing batteries or rechargeable batteries the device according to the invention For example, the controls extract the power to operate from their environment.

Die Erfindung betrifft ferner eine Vorrichtung nach einem oder mehreren der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Dateneingabe durch eine oder mehrere der vorgenannten Vorrichtungen erst dann erfolgt, wenn der Anwender eine entsprechende bestätigende Willensäußerung abgibt.The The invention further relates to a device according to one or more the aforementioned claims, characterized in that the data entry is by one or more the aforementioned devices only takes place when the user a corresponding confirming Expressing will.

Um Fehlbedienungen zu vermeiden, sieht die erfindungsgemäße Vorrichtung vor, einen Bestätigungszyklus vor das Auslösen der Dateneingabe zu setzen. Wird beispielsweise Steuerelement A in die Nähe von Steuerelement B gebracht und das Zusammenführen dieser beiden Steuerelemente ist mit Funktion F verbunden, würde die Funktion unmittelbar ausgelöst. Das birgt die Gefahr einer versehentlichen Auslösung. Um dieses Problem zu lösen, wird vorgeschlagen, den Anwender zu informieren, dass ein zustand eingetreten ist, der die Funktion F auslösen kann. Erst nach einer weiteren Willensäußerung, d. h. Dateneingabe, löst die Vorrichtung die Funktion aus.Around To avoid incorrect operations, sees the device according to the invention before, a confirmation cycle before the trigger to set the data entry. For example, if control A in the vicinity brought by control B and the merging of these two controls is connected to function F would the function is triggered immediately. This carries the risk of accidental release. To this problem too to solve, It is suggested to inform the user that a condition occurred, which can trigger the function F. Only after another Expression of will, d. H. Data input, triggers the device off the function.

Durch die erfindungsgemäße Vorrichtung werden mithin u. a. folgende Probleme gelöst:

  • – Die Wissensmenge, die für die Bedienung einer DV-Anlage erforderlich ist, wird reduziert. Damit wird die Hürde, die bezüglich der Bedienbarkeit einer DV-Anlage besteht, vermindert und gleichzeitig erhalten Personen, die durch die beschriebene Hürde ausgegrenzt sind, Zugang zu Funktionen der DV-Anlage. Damit können moderne IUK-Technologien von mehr Personen zu Bildungs-Unterhaltungs- und Arbeitszwecken eingesetzt werden, was unmittelbare wirtschaftliche Implikationen hat und zusätzlich zur Kostenreduktion beiträgt.
  • – Das Ausmaß der sensorischen und motorischen Fähigkeiten, die für die Bedienung eines DV-Systems erforderlich sind, und als Hürde für die Bedienung derselben fungiert, wird reduziert. Damit erhalten beispielsweise Personen mit motorischen Einschränkungen die Möglichkeit, ein DV-System zu bedienen, bzw. es effizienter bedienen zu können, bzw. zusätzliche Funktionen zu nutzen.
  • – Das Userinterface, welches üblicherweise konzentriert und limitiert aus Bildschirm, Tastatur und Maus besteht, wird in die Realwelt verlegt. Der Begriff Realwelt wird hier als Gegensatz für die virtuelle Darstellung von Informationen via Monitor verwendet. Auf dem Monitor werden Objekte virtuell und grafisch erzeugt. Den Objekten wie z. B. Schaltern wird eine Bedeutung zugeschrieben. Durch Aktivieren der Schalter, bzw. der Steuerelemente werden Aktionen ausgelöst. Demgegenüber erweitert die erfindungsgemäße Vorrichtung das Userinterface auf prinzipiell alle Objekte und räumlichen Bereiche der Realwelt.
  • – Durch den Rückgriff auf Symbole, die a priori mit einer intersubjektiven Bedeutungszuschreibung verbunden sind, entfällt eine Vorbereitungsphase, während derer Symbole und deren Zuschreibung zu Steuerbefehlen für die DV-Anlage festgelegt und erlernt werden müssen, bzw. wird diese Phase wesentlich verkürzt.
  • – Bei Menschen, bei denen das Schriftzentrum im Gehirn gestört ist, besteht u. U. das Problem, dass sie Schrift nicht mehr lesen können. Sie können aber dennoch hochkomplexe Texte verstehen, wenn sie sie hören. U. a. in solchen Fällen bietet die Interaktionsmöglichkeit mit einem DV-System mit Hilfe von Symbolen einen alternativen Kommunikationsweg.
  • – Die räumliche Begrenzung auf Terminals mit Monitor, Tastatur und Maus wird aufgehoben und grundsätzlich das komplette Lebensumfeld als mögliche Benutzerschnittstelle verwendet. Dadurch wird der Raum selbst als Repräsentationsmedium für Informationen und virtuelle Steuerelemente zugänglich gemacht.
  • – Zweck der Erfindung ist es ferner allen Personengruppen ein effizientes Userinterface zu bieten, um Datenein- und -ausgabevorgänge intuitiver, schneller und effizienter zu machen. Wo bei heute üblichen Benutzerschnittstellen umfangreiches Know-how für das Auslösen von Funktionen erforderlich ist, die in der Software verschachtelt und versteckt angeordnet sind, bietet die erfindungsgemäße Vorrichtung die Möglichkeit, Willensäußerungen intuitiv und symbolisch abzugeben und Zustände in den Daten ebenfalls intuitiv und symbolisch zu erfassen. Dies hat erhebliche Kostenspareffekte.
Consequently, the following problems are solved by the device according to the invention:
  • - The amount of knowledge required to operate a DV equipment is reduced. Thus, the hurdle that exists with regard to the usability of a computer system is reduced, and at the same time people who are excluded by the described hurdle, access to functions of the computer system. This allows more people to use modern ICT technologies for educational, entertainment and work purposes, which has immediate economic implications and additionally contributes to cost reduction.
  • - The level of sensory and motor skills required to operate a DV system and act as a barrier to its operation is reduced. For example, this gives people with motor impairments the opportunity to operate a computer system, or to operate it more efficiently, or to use additional functions.
  • - The user interface, which is usually concentrated and limited to screen, keyboard and mouse, will be relocated to the real world. The term real world is used here as a contrast to the virtual representation of information via the monitor. Objects are created virtually and graphically on the monitor. The objects such. B. switches is attributed a meaning. Activating the switches or the controls will trigger actions. In contrast, the device according to the invention extends the user interface to all objects and spatial areas of the real world in principle.
  • - The use of symbols that are a priori associated with an intersubjective attribution of meaning, eliminates a preparation phase during which symbols and their attribution to control commands for the computer system must be set or learned, or this phase is significantly shortened.
  • - In humans, in which the writing center is disturbed in the brain, u. The problem is that they can not read writing. But you can still understand highly complex texts when they hear them. U. a. In such cases, the possibility of interaction with a computer system with the help of symbols offers an alternative means of communication.
  • - The spatial limit on terminals with monitor, keyboard and mouse is removed and basically the entire living environment is used as a possible user interface. As a result, the room itself becomes a representation medium for information and virtual controls made accessible.
  • The purpose of the invention is also to provide all groups of people with an efficient user interface to make data input and output operations more intuitive, faster and more efficient. Where today's usual user interfaces extensive know-how for triggering functions is required, which are nested and hidden in the software, the device of the invention provides the ability to intuitively and symbolically submit wills and also to capture states in the data intuitively and symbolically , This has significant cost savings.

Als Lösung wird vorgeschlagen, das komplette Umfeld des Benutzers als mögliche i/o-Schnittstelle zu verwenden. Dabei können beliebige, passive Objekte als Steuerelemente verwendet werden. Es können weiterhin mit Elektronik ausgestattete Objekte verwendet werden, die über Sensoren und Aktoren verfügen. Ferner sollen definierte Raumpositionen für die Datenein- und -ausgabe verwendet werden, wobei das Bewegen von Objekten, denen eine symbolische Bedeutung zugeschrieben wurde zu den definierten Bereichen im Raum bewegt werden und damit die Dateneingabe ausgelöst wird. Nachdem sich die Eigenschaften der Objekte, die als Steuerelemente verwendet werden, ändern können, z. B. dadurch, dass ein Objekt über ein Display verfügt, können gleichen Objekten variable Bedeutungen zugeschrieben werden.When solution It is suggested that the complete environment of the user as a possible I / O interface too use. It can Any passive objects can be used as controls. It can continue to use electronics-equipped objects, the above Sensors and actuators feature. Furthermore, defined spatial positions for the data input and output be used, moving objects that have a symbolic Meaning was attributed to the defined areas in space be moved and thus the data input is triggered. After the properties of the objects that are used as controls; B. in that an object over a display can be the same Objects are attributed variable meanings.

Um die Funktionsweise der Erfindung erklären zu können, seien hier einige Anwendungsbeispiele aufgeführt:Around To explain the operation of the invention, here are some examples listed:

* Beispiel:* Example:

In einem Büro besteht in wiederkehrenden Zyklen die Notwendigkeit, Verbrauchsmaterial nachzubestellen. Um beispielsweise Kugelschreiber nachzubestellen, hält der Anwender einen Kugelschreiber an ein Symbol, das sich an der Wand befindet. Das Symbol kann ein Papierausdruck sein, der die Firma darstellt, bei der üblicherweise Büromaterial bestellt wird. Indem der Kugelschreiber vor den Papierausdruck gehalten wird, wird eine Nachbestellung ausgelöst. In diesem Beispiel wird der Kugelschreiber über eine technische Vorrichtung identifiziert, z. B. via optische Mustererkennung. Der räumliche Bereich, in welchem sich der Papierausdruck befindet, wird als sensitiver Bereich für Bestellungen definiert. Alternativ wird der Papierausdruck als Objekt selbst als Symbol für eine Bestellung bei dem Büromateriallieferanten definiert.In an office In recurring cycles there is a need for consumables reorder. For example, to reorder ballpoint pens, holds the User attaches a ballpoint pen to a symbol that sticks to the wall located. The symbol may be a hard copy of the company represents, at the usual office supplies is ordered. By holding the pen in front of the paper printout will be, a reorder will be triggered. In this example will the pen over a technical device identified, for. B. via optical pattern recognition. The spatial The area in which the paper print is located becomes more sensitive Area for Orders defined. Alternatively, the paper term becomes an object even as a symbol for an order from the office supplies supplier Are defined.

* Beispiel:* Example:

Ein älterer Mensch, der den Umgang mit dem PC nicht erlernt hat, steht vor einer Wand, an der sich Symbole befinden. Bei den Symbolen kann es sich um Holzplättchen, Plastikplättchen oder Kartons handeln, die beschriftet sind und Namen von Podcasts aufweisen. Indem der Anwender einen drahtlosen BlueTooth-RFID-Reader an eines der Symbole hält, wird der entsprechende Podcast gestartet. Der Benutzer will den Podcast nach Abhören löschen. Zu diesem Zweck scannt er mit dem RFID-Reader eine kleine Mülltonne, die sich ebenfalls an der Wand befindet. Der Podcast wird gelöscht. Der Anwender will eine Podcastepisode speichern. Zu diesem Zweck scannt er einen kleinen Plastiksafe, der als Symbol für Archivieren ebenfalls an der Wand befestigt ist. Der Podcast wird dadurch in ein Archivverzeichnis verschoben.An elderly person, who has not learned how to use the PC, stands in front of a wall, where there are symbols. The symbols can be wooden tiles, plastic plates or cartons that are labeled and names of podcasts exhibit. By giving the user a wireless BlueTooth RFID reader holding on to one of the symbols, the corresponding podcast is started. The user wants the Podcast after listening Clear. For this purpose, he scans a small dustbin with the RFID reader, which is also on the wall. The podcast will be deleted. Of the User wants to save a podcast episode. Scans for this purpose He also has a small plastic safe, which also symbolizes archiving the wall is attached. The podcast will be moved to an archive directory.

* Beispiel:* Example:

Eine Branchensoftware ist sehr komplex und das Userinterface ist hierarchisch und tief verschachtelt. Anwender haben Schwierigkeiten, bestimmte Funktionsgruppen zu finden. Es dauert sehr lange, den entsprechenden Weg zu den gewünschten Funktionen zu finden. Um einen Direktzugriff zu bieten, werden Gegenständen symbolische Funktionen zugeordnet. Indem ein derartiges Symbol beispielsweise an eine Stelle gehalten wird, an der sich ein RFID-Reader befindet, erfolgt ein Direktzugriff auf die entsprechende Stelle im Userinterface der Software.A Industry software is very complex and the user interface is hierarchical and deeply nested. Users have difficulties with certain functional groups to find. It takes a long time to find the way to the desired functions to find. To provide direct access, items become symbolic Functions assigned. By such a symbol, for example is held in a place where an RFID reader is located, there is a direct access to the corresponding location in the user interface the software.

* Beispiel:* Example:

Ein Mensch hat durch einen Unfall oder durch eine Krankheit massive kognitive Störungen. Das Sprachzentrum ist gestört, er kann sich verbal nicht äußern. Gleichzeitig ist er nicht mehr in der Lage, seinen Willen durch Schrift zu äußern. Um seine Kommunikationsmöglichkeiten zu verbessern, werden in seinem Lebensumfeld viele Objekte angeordnet, denen eine symbolische Bedeutung innewohnt bzw. denen eine Bedeutung zugeschrieben werden.One Human beings are massive because of an accident or illness cognitive disorders. The Language Center is disturbed, he can not speak verbally. simultaneously he is no longer able to express his will through writing. Around his communication possibilities to improve, many objects are arranged in its living environment, which have a symbolic meaning or meaning be attributed.

Indem der Anwender beispielsweise ein Holzobjekt, das einen Hund darstellt, in die Nähe eines anderen Objektes hält, das einen Futternapf darstellt, kann er den Wunsch äußern, dass der Hund gefüttert werden soll. Indem er das Objekt das den Futternapf darstellt an ein anderes Objekt hält, welches einen Einkaufswagen zeigt, bzw. repräsentiert, kann er mitteilen, dass Hundefutter gekauft werden soll. Das Erfassen der Objekte und ihrer Relation zueinander kann durch ein beliebiges technisches Verfahren erfolgen.By doing the user for example a wooden object representing a dog, in the vicinity holding another object, which represents a feeding bowl, he can express the wish that the dog will be fed should. By presenting the object representing the food bowl to another Object stops, which shows or represents a shopping cart, he can tell that dog food should be bought. Capturing the objects and their relation to each other can be determined by any technical Procedure done.

* An einer Wand befinden sich Fotos, die Personen darstellen. Alternativ werden Fotos von Menschen auf einem Monitor angezeigt. Indem der Anwender ein Objekt, aus Plastik, Holz usw. in die Hand nimmt, das ein Telefon darstellt und das Objekt vor eines der Fotos hält, wird eine Telefonverbindung zu der betreffenden Person aufgebaut.* There are photos on a wall depicting people. Alternatively, photos of people are displayed on a monitor. By picking up an object made of plastic, wood, etc. that represents a telephone and the object before holding one of the photos, a telephone connection is established to the person concerned.

* Ein E-Learning-System, welches u. a. Multiple-Choice-Aufgaben stellt, und spielerische Elemente enthält, soll den Anwendern die Möglichkeit bieten, das Themengebiet der Fragen intuitiv zu bestimmen. Zu diesem Zweck befinden sich Objekte, die verschiedene Themengebiete symbolisch darstellen auf einer Fläche oder in einer Schachtel. Ein Anwender nimmt z. B. eine kleine Weltkugel in die Hand und hält sie an einen vordefinierten Bereich. Die Weltkugel wird als Objekt identifiziert und das E-Learning-System bzw. -Spiel stellt die nächste Frage auf den Themenbereich Geographie bezogen.* An e-learning system, which u. a. Poses multiple choice tasks, and contains playful elements, should give users the opportunity to to intuitively determine the topic of the questions. To this end There are objects that symbolize different topics pose on a plane or in a box. A user takes z. B. a small globe in the hand and holds to a predefined area. The globe is called an object identified and the e-learning system or game asks the next question related to the topic geography.

Man erkennt mithin, dass die Erfindung eine Vorrichtung für die Mensch-Maschine-Kommunikation betrifft, die in die Umwelt eingebettet ist, und auf der Verwendung mobiler und immobiler, symbolischer Steuerelemente sowie der Verwendung definierter Raumpositionen als Steuerelemente basiert. Beispielsweise wird die Benutzeroberfläche eines DV-Systems in das Lebensumfeld der Benutzer verlagert. Die Begrenzung auf einen Ort, (Monitor, Tastatur, Maus) wird aufgehoben. Beliebige Objekte und beliebige räumliche Bereiche können für die Datenein- und -ausgabe verwendet werden. Damit kann der Anwender ein großes, räumliches Repräsentationssystem für Steuerelemente verwenden. Die Bewegung im Raum kommt als zusätzliches Repräsentationssystem dazu, da Verknüpfungen zwischen der Bewegung zu einem Punkt und dem entsprechenden Objekt als symbolisches Steuerelement erforderlich sind.you recognizes that the invention relates to a device for human-machine communication, that is embedded in the environment, and more mobile to use and immobile, symbolic controls and usage defined room positions based as controls. For example becomes the user interface of a computer system into the user's living environment. The Limitation to a place (monitor, keyboard, mouse) is canceled. Any objects and any spatial areas can be used for data entry. and output can be used. This allows the user a large, spatial system of representation for controls use. The movement in space comes as an additional system of representation to do that, there are shortcuts between the movement to a point and the corresponding object are required as a symbolic control.

Claims (48)

Vorrichtung für die Mensch-Maschine-Kommunikation, die in die Umwelt eingebettet ist, und auf der Verwendung mobiler und immobiler, symbolischer Steuerelemente basiert.Device for the human-machine communication embedded in the environment is, and on the use of mobile and immobile, symbolic controls based. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass beliebige Objekte als Steuerelemente und damit für die Datenein- und -ausgabe verwendet werden.Device according to claim 1, characterized in that any objects as controls and thus for data entry. and output can be used. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass eine oder mehrere vordefinierte Raumpositionen als sensitive Bereiche für Datenein- und -ausgabe und damit als Steuerelemente verwendet werden.Device according to claim 1, characterized in that that one or more predefined spatial positions are sensitive Areas for Data input and output and thus used as controls. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass die Änderung von Eigenschaften der Steuerelemente als Trigger für die Datenein- und/oder -ausgabe eingesetzt werden.Device according to one or more of the above claims, characterized in that the change of properties of Controls as triggers for the data input and / or output are used. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass das Bewegen eines oder mehrerer Objekte an einen oder mehrere vordefinierte Bereiche als Trigger für die Datenein- und/oder -ausgabe eingesetzt wird.Device according to one or more of the above claims, characterized in that the moving one or more objects to one or more predefined areas as triggers for data entry. and / or output is used. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass die Änderungen der Objekteigenschaften und Objektpositionen durch beliebige technische Verfahren registriert werden.Device according to one or more of the above claims, characterized in that the changes of the object properties and object positions registered by any technical method become. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass die Bedeutungszuschreibung zu den Objekten, die als Steuerelemente verwendet werden, und die Bedeutungszuschreibung zu den sensitiven Bereichen variabel ist und vom Anwender definierbar ist.Device according to one or more of the above claims, characterized in that the attribution of meaning to the objects, which are used as controls, and the meaning attribution is variable to the sensitive areas and can be defined by the user is. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass das Objekt oder die Objekte, die als Steuerelemente eingesetzt werden, mit Sensoren und Aktoren versehen sind, wobei die Sensoren zur Dateneingabe und die Aktoren für die Datenausgabe verwendet werden.Device according to one or more of the above claims, characterized in that the object or objects that as Controls are used, provided with sensors and actuators are, with the sensors for data input and the actuators for data output be used. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass das Bewegen von Objekten in räumlichen Strukturen, diesen Strukturen zuvor zugeschriebene Informationen abruft.Device according to one or more of the above claims, characterized in that the moving of objects in spatial Structures, information previously attributed to these structures retrieves. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass der Anwender durch das Bewegen von Objekten in räumlichen Strukturen, den Strukturelementen Informationen zuordnet.Device according to one or more of the above claims, characterized in that the user by moving Objects in spatial Structures to which information is assigned to structural elements. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, drahtlos mit einer DV-Anlage kommunizieren.Device according to claim 8, characterized in that that the objects that are used as controls are wireless communicate with a computer system. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren RFID-Readern und einer oder mehreren RFID-Antennen ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more RFID readers and one or more RFID antennas are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Bar-Code-Readern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more bar code readers are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Wärmesensoren ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more heat sensors are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Kameras ausgestattet sind.Apparatus according to claim 8, characterized ge indicates that the objects used as controls are equipped with one or more cameras. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Lichtsensoren ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more light sensors. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Mikrofonen ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more microphones. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Bewegungssensoren ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more motion sensors. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Touchscreens versehen sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more touch screens are provided. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren versehen sind, die die Lage des oder der Objekte im Raum registrieren.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more sensors are provided which the location of or register the objects in the room. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer Empfangseinrichtung für elektromagnetische Wellen ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with a receiving device for electromagnetic waves are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind, die chemische Stoffe registrieren können.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more sensors are equipped, the chemical substances can register. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind, die Druck registrieren können.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more sensors that can register pressure. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind die Radioaktivität registrieren können.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more sensors are equipped to register the radioactivity can. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Chronometern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more chronometers are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren GPS-Empfängern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more GPS receivers are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Schrittzählern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more pedometer are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Sensoren ausgestattet sind, die Verformung registrieren können.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more sensors that register deformation can. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Keyboards ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more keyboards. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Trackballs ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more trackballs are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer Vorrichtung für die Richtungsbestimmung akustischer Signale ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with a device for the Direction determination of acoustic signals are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Schiebereglern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more sliders. Vorrichtung nach Anspruch 8 und/oder einem oder mehreren Ansprüchen 11 bis 31, dadurch gekennzeichnet, dass die Objekte über eine Elektronik verfügen, die die Daten der Sensoren verarbeitet und die Aktoren steuert und die uni- oder bidirektionale Kommunikation mit einer DV-Anlage steuert.Apparatus according to claim 8 and / or one or several claims 11 to 31, characterized in that the objects over a Have electronics, which processes the data from the sensors and controls the actuators and controls the uni- or bidirectional communication with a computer system. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Displays als Bildanzeigevorrichtung ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more displays are equipped as an image display device. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Schallgebern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more sounders are equipped. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Lichtgebern ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more light generators. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit Motoren und Antriebsvorrichtungen versehen sind.Apparatus according to claim 8, characterized ge indicates that the objects used as controls are provided with motors and drive devices. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einem oder mehreren Vibratoren ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more vibrators. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen versehen sind, die die Form und/oder die Oberflächenbeschaffenheit des oder der Objekte verändern können.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more devices are provided, the shape and / or the surface finish change the object or objects can. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Anzeigevorrichtungen für Blindenschrift ausgestattet sind.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more braille display devices. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen ausgestattet sind, die Gerüche emittieren können.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more devices that emit odors can. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen ausgestattet sind, die Luftströme erzeugen können.Device according to claim 8, characterized in that that the objects that are used as controls come with equipped with one or more devices that generate air currents can. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Objekte, die als Steuerelemente eingesetzt werden, mit einer oder mehreren Vorrichtungen versehen sind, die elektromagnetische Wellen generieren können.Device according to claim 8, characterized in that that the objects that are used as controls come with one or more devices are provided, the electromagnetic waves can generate. Vorrichtung nach Anspruch 8 und/oder einem oder mehreren Ansprüchen 11 bis 43 dadurch gekennzeichnet, dass das oder die Objekte, die als Steuerelemente eingesetzt werden, über eine Elektronik verfügt, die die Aktoren steuert.Apparatus according to claim 8 and / or one or several claims 11 to 43, characterized in that the object or objects that be used as controls, has an electronics, the controls the actuators. Vorrichtung nach einem oder mehreren vorgenannten Ansprüchen, dadurch gekennzeichnet, dass einer oder mehrere Bereiche im Raum als Repräsentationsbereich für virtuelle Steuerelemente verwendet werden.Device according to one or more of the above claims, characterized in that one or more areas in the room as a representation area for virtual Controls are used. Vorrichtung nach einem oder mehreren der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Relation des oder der Objekte, die als Steuerelemente verwendet werden untereinander und zu dem oder den virtuellen Steuerelementen im Raum, durch ein technisches Überwachungssystem realisiert wird, welches das oder die Objekte und ihre Relation zueinander und die Relation zu Raumpositionen registriert.Device according to one or more of the aforementioned Claims, characterized in that the relation of the object (s), which are used as controls among themselves and to the or the virtual controls in the room, through a technical monitoring system which realizes the object or objects and their relation registered to each other and the relation to spatial positions. Vorrichtung nach Anspruch 8 und/oder einem oder mehreren anderen, vorgenannten Ansprüchen, dadurch gekennzeichnet, dass das oder die die mit Sensoren und/oder Aktoren versehenen Objekte, die als Steuerelemente verwendet werden, ihre Energie drahtlos aus der Umwelt beziehen.Apparatus according to claim 8 and / or one or several other, aforementioned claims, characterized that the one or more provided with sensors and / or actuators objects, which are used as controls, their power from wireless relate to the environment. Vorrichtung nach einem oder mehreren der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Dateneingabe durch eine oder mehrere der vorgenannten Vorrichtungen erst dann erfolgt, wenn der Anwender eine entsprechende bestätigende Willensäußerung abgibt.Device according to one or more of the aforementioned Claims, characterized in that the data entry is by one or more the aforementioned devices only takes place when the user a corresponding confirmatory Expressing will.
DE200810004980 2008-01-17 2008-01-17 Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output Ceased DE102008004980A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE200810004980 DE102008004980A1 (en) 2008-01-17 2008-01-17 Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE200810004980 DE102008004980A1 (en) 2008-01-17 2008-01-17 Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output

Publications (1)

Publication Number Publication Date
DE102008004980A1 true DE102008004980A1 (en) 2009-08-06

Family

ID=40821956

Family Applications (1)

Application Number Title Priority Date Filing Date
DE200810004980 Ceased DE102008004980A1 (en) 2008-01-17 2008-01-17 Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output

Country Status (1)

Country Link
DE (1) DE102008004980A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009021729A1 (en) * 2009-05-11 2010-11-18 Michael Weinig Ag Machine for machining workpieces made of wood, plastic and the like

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4201934A1 (en) * 1992-01-24 1993-07-29 Siemens Ag Interactive computer system e.g. mouse with hand gesture controlled operation - has 2 or 3 dimensional user surface that allows one or two hand input control of computer
DE29921674U1 (en) * 1999-12-09 2001-01-18 Delmia Gmbh Work system for the execution of planning tasks and modeling tasks

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4201934A1 (en) * 1992-01-24 1993-07-29 Siemens Ag Interactive computer system e.g. mouse with hand gesture controlled operation - has 2 or 3 dimensional user surface that allows one or two hand input control of computer
DE29921674U1 (en) * 1999-12-09 2001-01-18 Delmia Gmbh Work system for the execution of planning tasks and modeling tasks

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009021729A1 (en) * 2009-05-11 2010-11-18 Michael Weinig Ag Machine for machining workpieces made of wood, plastic and the like

Similar Documents

Publication Publication Date Title
Wickens et al. Engineering psychology and human performance
Dix Human–computer interaction, foundations and new paradigms
Hommel The theory of event coding (TEC) as embodied-cognition framework
Kaptelinin et al. Activity theory in HCI: Fundamentals and reflections
Wandke* Assistance in human–machine interaction: a conceptual framework and a proposal for a taxonomy
DE202017104779U1 (en) Radar-based gesture interface
DE112018006197T5 (en) INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHODS AND RECORDING MEDIUM
DE112018003273T5 (en) INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND RECORDING MEDIUM
WO2009062677A2 (en) Multimode user interface of a driver assistance system for inputting and presentation of information
Abbott et al. Emerging issues and current trends in assistive technology use 2007–2010: practising, assisting and enabling learning for all
EP3040817A1 (en) Device and method for inputting a text using virtual control elements with haptic feedback for simulating key haptics, especially in a motor vehicle
Grassmann et al. How two word-trained dogs integrate pointing and naming
Leporini et al. Design guidelines for an interactive 3D model as a supporting tool for exploring a cultural site by visually impaired and sighted people
CN108885530A (en) Visual user interface control is operated with ink order
Grigg Materials and tools as catalysts of invention in graphic design ideation
Wall et al. Providing external memory aids in haptic visualisations for blind computer users
DE102008004980A1 (en) Device for human-machine-communication, is embedded in environment, and is based on usage of mobile and immobile symbolic control elements, where arbitrary objects are used as control elements and for data input and output
Thunberg et al. Social robots in care homes for older adults: observations from participatory design workshops
EP3966063A1 (en) Method and operating system for detecting a user input for a device of a vehicle
DE102020125344B4 (en) Robot system
EP2713343A2 (en) Interactive panel and home control system
EP3392545B1 (en) Communication device
EP3108332A1 (en) User interface and method for switching from a first operating mode of a user interface to a 3d gesture mode
DE202010006503U1 (en) Device for controlling a screen reader
Braun et al. Demands on user interfaces for people with intellectual disabilities, their requirements, and adjustments

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
OP8 Request for examination as to paragraph 44 patent law
R082 Change of representative

Representative=s name: PATENTANWAELTE OLBRICHT, BUCHHOLD, KEULERTZ PA, DE

R002 Refusal decision in examination/registration proceedings
R003 Refusal decision now final

Effective date: 20121113