DE112012001663T5 - Verfahren, Vorrichtung und Computerprogramm zur Steuerung des Zustands einer Vorrichtung durch den Benutzer - Google Patents

Verfahren, Vorrichtung und Computerprogramm zur Steuerung des Zustands einer Vorrichtung durch den Benutzer Download PDF

Info

Publication number
DE112012001663T5
DE112012001663T5 DE112012001663.7T DE112012001663T DE112012001663T5 DE 112012001663 T5 DE112012001663 T5 DE 112012001663T5 DE 112012001663 T DE112012001663 T DE 112012001663T DE 112012001663 T5 DE112012001663 T5 DE 112012001663T5
Authority
DE
Germany
Prior art keywords
predefined
detector
phase
user gesture
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE112012001663.7T
Other languages
English (en)
Inventor
John Samuels
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Technologies Oy
Original Assignee
Nokia Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Inc filed Critical Nokia Inc
Publication of DE112012001663T5 publication Critical patent/DE112012001663T5/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional [3D], e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/041012.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Verfahren, das Folgendes aufweist: Ausführen von Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen unter Einsatz mindestens des ersten Detektors einer vordefinierten ersten Phase einer vordefinierten Benutzergeste, Erfassen unter Einsatz mindestens eines zweiten Detektors einer zweiten vordefinierten Phase der vordefinierten Benutzergeste, und als Reaktion auf das Erfassen sowohl der vordefinierten ersten Phase als auch der vordefinierten zweiten Phase der vordefinierten Benutzergeste, Umschalten zwischen Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand.

Description

  • TECHNISCHES GEBIET
  • Ausführungsformen der vorliegenden Erfindung betreffen ein Verfahren, Vorrichtung und Computerprogramm zur Steuerung des Zustands einer Vorrichtung durch den Benutzer.
  • STAND DER TECHNIK
  • Der Betrieb einer Vorrichtung kann unter Einsatz einer Zustandsmaschine dargestellt werden, die die verschiedenen Zustände, die die Vorrichtung haben kann, und wie Übergänge zwischen Zuständen auftreten können, anzeigt.
  • In bestimmten Fällen ist es wünschenswert, dass ein Übergang von einem Zustand auf einen anderen Zustand als Reaktion auf eine Benutzereingabe erfolgt.
  • Ein Benutzer muss sich unter bestimmten Umständen erinnern, welche Benutzereingabe erforderlich ist, um einen bestimmten Zustandsübergang zu verursachen. Es wäre dann wünschenswert, wenn die erforderliche Benutzereingabe leicht zu merken und intuitiv wäre.
  • KURZDARSTELLUNG
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird ein Verfahren bereitgestellt, das Folgendes aufweist: Ausführen einer Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen unter Einsatz mindestens des ersten Detektors einer vordefinierten ersten Phase einer vordefinierten Benutzergeste, Erfassen unter Einsatz mindestens eines zweiten Detektors einer vordefinierten zweiten Phase der vordefinierten Benutzergeste und als Reaktion auf das Erfassen sowohl der vordefinierten ersten Phase als auch der vordefinierten zweiten Phase der vordefinierten Benutzergeste, Umschalten zwischen Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand.
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird ein Verfahren bereitgestellt, das Folgendes aufweist: Aktivieren eines ersten Benutzergestendetektors, Aktivieren eines zweiten Benutzergestendetektors und Umschalten vom Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand auf Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand erst, nachdem der erste Detektor eine vordefinierte erste Phase einer vordefinierten Benutzergeste erfasst hat und der zweite Detektor die vordefinierte zweite Phase der vordefinierten Benutzergeste erfasst hat.
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird eine Vorrichtung bereitgestellt, die Folgendes aufweist: mindestens einen Prozessor und mindestens einen Speicher, der Computerprogrammcode enthält, wobei der mindestens eine Speicher und der Computerprogrammcode konfiguriert sind, um mit dem mindestens einen Prozessor die Vorrichtung zu veranlassen, mindestens Folgendes auszuführen:
    Erfassen unter Einsatz von Eingaben von mindestens dem ersten Detektor einer vordefinierten ersten Phase einer vordefinierten Benutzergeste,
    Erfassen unter Einsatz von Eingaben von mindestens einem zweiten Detektor einer vordefinierten zweiten Phase der vordefinierten Benutzergeste und
    als Reaktion auf das Erfassen sowohl der vordefinierten ersten Phase als auch der vordefinierten zweiten Phase der vordefinierten Benutzergeste Veranlassen des Umschaltens zwischen Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand.
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird eine Vorrichtung bereitgestellt, die Folgendes aufweist: einen ersten Benutzergestendetektor, der konfiguriert ist, um mindestens eine erste Phase einer vorbestimmten Benutzergeste zu erfassen, einen zweiten Benutzergestendetektor, der konfiguriert ist, um mindestens eine zweite darauf folgende Phase der vorbestimmten Benutzergeste zu erfassen, eine Steuerschaltung, die konfiguriert ist, um die Vorrichtung vom Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand auf Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand umzuschalten, nachdem der erste Detektor die erste vordefinierte Phase der vordefinierten Benutzergeste erfasst hat und der zweite Detektor die vordefinierte zweite Phase der vordefinierten Benutzergeste erfasst hat.
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird ein Verfahren bereitgestellt, das Folgendes aufweist: Betreiben einer Vorrichtung in einem ersten Zustand, Ausführen einer Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen unter Einsatz mindestens eines ersten Detektors einer vordefinierten ersten Phase einer vordefinierten Benutzergeste, Erfassen unter Einsatz mindestens des zweiten Detektors einer vordefinierten zweiten Phase der vordefinierten Benutzergeste, und als Reaktion auf das Erfassen unter Einsatz mindestens des ersten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste und als Reaktion auf das Erfassen unter Einsatz mindestens des zweiten Detektors der vordefinierten zweiten Phase der vordefinierten Benutzergeste, Umschalten von dem Betrieb der Vorrichtung in dem ersten Zustand auf Betrieb der Vorrichtung in einem zweiten Zustand.
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird ein Verfahren bereitgestellt, das Folgendes aufweist: Betreiben einer Vorrichtung in einem ersten Zustand, Ausführen der Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen unter Einsatz mindestens eines ersten Detektors aber nicht des zweiten Detektors einer vordefinierten ersten Phase einer vordefinierten Benutzergeste, Erfassen unter Einsatz mindestens des zweiten Detektors einer vordefinierten zweiten Phase der vordefinierten Benutzergeste, und als Reaktion auf das Erfassen unter Einsatz mindestens des ersten Detektors der ersten vordefinierten Phase der vordefinierten Benutzergeste und als Reaktion auf das Erfassen unter Einsatz mindestens des zweiten Detektors der vordefinierten zweiten Phase der vordefinierten Benutzergeste, Umschalten von dem Betrieb der Vorrichtung in dem ersten Zustand auf Betrieb der Vorrichtung in einem zweiten Zustand.
  • Gemäß verschiedenen aber nicht unbedingt allen Ausführungsformen der Erfindung, wird eine Vorrichtung bereitgestellt, die Folgendes aufweist:
    Mittel zum Ausführen einer Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors,
    Mittel zum Erfassen unter Einsatz mindestens des ersten Detektors einer vordefinierten ersten Phase einer vordefinierten Benutzergeste,
    Mittel zum Erfassen unter Einsatz mindestens eines zweiten Detektors einer vordefinierten zweiten Phase der vordefinierten Benutzergeste, und Mittel, die auf das Erfassen sowohl der ersten vordefinierten Phase als auch der zweiten vordefinierten Phase der vordefinierten Benutzergeste reagieren, um zwischen Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand umzuschalten.
  • KURZE BESCHREIBUNG
  • Zum besseren Verständnis verschiedener Beispiele von Ausführungsformen der vorliegenden Erfindung wird nun lediglich beispielhaft auf die anliegenden Zeichnungen Bezug genommen, in denen:
    Verfahren, Vorrichtung und Computerprogramm zur Steuerung des Zustands einer Vorrichtung durch den Benutzer.
  • 1 eine Vorrichtung veranschaulicht, das einen ersten Detektor, einen zweiten Detektor und eine Steuerschaltung aufweist,
  • 2 ein Beispiel einer Vorrichtung veranschaulicht, das ein berührungsempfindliches Display als einen ersten Detektor hat,
  • 3 ein Beispiel einer Steuerschaltung veranschaulicht,
  • 4 ein Verfahren zum Ausführen eines Zustandsübergangs veranschaulicht,
  • 5 eine andere Ausführungsform des in 4 veranschaulichten Verfahrens veranschaulicht,
  • 6 ein Verfahren zum Ausführen eines anderen Zustandsübergangs veranschaulicht, und
  • 7 einen Träger für ein Computerprogramm veranschaulicht.
  • AUSFÜHRLICHE BESCHREIBUNG
  • Die Figuren veranschaulichen eine Vorrichtung 10, die Folgendes aufweist: einen ersten (Benutzergesten)Detektor 2, der konfiguriert ist, um mindestens eine erste Phase 5 einer vorbestimmten Benutzergeste zu erfassen, einen zweiten (Benutzergesten)Detektor 4, der konfiguriert ist, um mindestens eine zweite darauf folgende Phase 7 der vorbestimmten Benutzergeste zu erfassen, und eine Steuerschaltung 8, die konfiguriert ist, um die Vorrichtung 10 vom Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand auf Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand umzuschalten, nachdem sowohl der erste Detektor 2 die erste vordefinierte Phase 5 der vordefinierten Benutzergeste erfasst hat und der zweite Detektor 4 die vordefinierte zweite Phase 7 der vordefinierten Benutzergeste erfasst hat. Die Steuerschaltung 8 kann konfiguriert sein, um Energie zu sparen, indem sie den zweiten Detektor 5 erst aktiviert, nachdem der erste Detektor die vordefinierte erste Phase der vordefinierten Benutzergeste erfasst hat.
  • Die Figuren veranschaulichen auch ein Verfahren 30, das Folgendes aufweist: Betrieb 31 in einem zweidimensionalen Benutzerschnittstellenzustand, Ausführen 32 einer Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors 2, Erfassen 33 unter Einsatz mindestens des ersten Detektors 2 einer vordefinierten ersten Phase einer vordefinierten Benutzergeste, Erfassen 35 unter Einsatz mindestens des zweiten Detektors 4 einer vordefinierten zweiten Phase der vordefinierten Benutzergeste, und als Reaktion auf das Erfassen sowohl der vordefinierten ersten Phase als auch der vordefinierten zweiten Phase der vordefinierten Benutzergeste, Umschalten vom Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand auf einen Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand. Die Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors 4 kann als Reaktion auf das Erfassen des Einsatzes mindestens des ersten Detektors 2 der vordefinierten ersten Phase der vordefinierten Benutzergeste aktiviert werden.
  • 1 veranschaulicht eine Vorrichtung 10, die einen ersten Detektor 2, einen zweiten Detektor 4 und eine Steuerschaltung 8 aufweist.
  • Die Vorrichtung 10 kann eine tragbare Vorrichtung sein. Sie kann zum Beispiel eine handgetragene Vorrichtung sein, die eine Vorrichtung ist, die bemessen ist, um in einer Handfläche der Hand eines Benutzers oder innerhalb der Jackentasche eines Benutzers getragen zu werden. Die Vorrichtung 10 kann zusätzliche Schaltungen und Bauteile aufweisen, die nicht veranschaulicht sind, und die Funktionen zusätzlich zu den unten beschriebenen ausführen können. Die Vorrichtung 10 kann zum Beispiel als ein Medienwiedergabegerät und/oder als eine Kommunikationsvorrichtung und/oder als eine Medienaufzeichnungsvorrichtung und/oder als eine Navigationsvorrichtung und/oder als eine Speichervorrichtung und/oder als eine Clientvorrichtung usw. arbeiten.
  • Die Steuerschaltung 8 ist konfiguriert, um das Umschalten zwischen einem zweidimensionalen Benutzerschnittstellenzustand und einem dreidimensionalen Benutzerschnittstellenzustand zu ermöglichen.
  • Das Umschalten tritt ein, wenn ein Benutzer eine Geste (siehe ein Beispiel in 2) ausführt, die eine erste Phase 5 gefolgt von einer zweiten Phase 7 hat. Die Geste ist, wie auch die erste Phase 5 und die zweite Phase 7, vordefiniert.
  • Eine Geste beinhaltet die Bewegung eines Gegenstands. Der Gegenstand hat eine Verlagerung d(t) in einem Koordinatensystem, und die Geste wird von der Bahn der Bewegung definiert, das heißt, wie sich d(t) im Laufe der Zeit ändert. Ein Gegenstand kann zum Beispiel irgendein Element sein, dessen Bahn unter Einsatz des ersten Detektors 2 und des zweiten Detektors 4 verfolgt werden kann. Er kann zum Beispiel die Hand oder die Hände eines Benutzers sein, der oder die Finger eines Benutzers, oder rs kann zum Beispiel ein Gegenstand sein, der von einem Benutzer getragen oder gehalten wird.
  • Eine Geste kann in Phasen (Zeitspannen) unterteilt werden, die getrennt sind und einander nicht überlappen. Eine erste Phase geht einer zweiten Phase voraus. Die zweite Phase kann unmittelbar auf die erste Phase folgen oder es kann zwischen der ersten Phase und der zweiten Phase ein Zeitintervall bestehen.
  • Die erste Phase kann zum Beispiel in einem ersten Zeitsegment zwischen einer Zeit t1 und einer Zeit t2 auftreten, und die zweite Phase kann zum Beispiel in einem angrenzenden folgendes Zeitsegment zwischen den Zeiten t2 und t3 auftreten.
  • Der erste Detektor 2 ist konfiguriert, um mindestens eine erste Phase 5 einer vorbestimmten Benutzergeste zu erfassen. Erfassen bedeutet in diesem Zusammenhang, dass der Detektor Messungen ausführt, die verwendet werden können, um zu identifizieren oder zu erkennen, dass die erste Phase 5 der vorbestimmten Geste abgeschlossen wurde. Der erste Detektor 2 kann konfiguriert sein oder nicht, um diese Messungen zu verarbeiten, um zu identifizieren oder zu erkennen, dass die erste Phase 5 der vorbestimmten Geste abgeschlossen wurde.
  • Der erste Detektor 2 kann nicht in der Lage sein, die zweite Phase 7 der vorbestimmten Geste genau zu erfassen.
  • Der zweite Detektor 2 ist jedoch konfiguriert, um mindestens die zweite Phase 7 der vorbestimmten Benutzergeste zu erfassen. Erfassen bedeutet in diesem Zusammenhang, dass der Detektor Messungen ausführt, die verwendet werden können, um zu identifizieren oder zu erkennen, dass die zweite Phase 7 der vorbestimmten Geste abgeschlossen wurde. Der zweite Detektor 4 kann konfiguriert sein oder nicht, um diese Messungen zu verarbeiten, um zu identifizieren oder zu erkennen, dass die zweite Phase 7 der vorbestimmten Geste abgeschlossen wurde.
  • Als ein Beispiel kann die vordefinierte Geste eine erste vordefinierte Phase aufweisen, die Bewegung im Wesentlichen in einer ersten Ebene aufweist, und eine vordefinierte zweite Phase, die Bewegung im Wesentlichen außerhalb der ersten Ebene aufweist. Bei diesem Beispiel kann die erste Ebene eine kartesische Ebene sein, die von zwei orthogonalen Basen (zum Beispiel x, y) definiert ist, und die erste Geste kann durch (x(t), y(t)) definiert sein. Die vordefinierte zweite Phase involviert Bewegung mit einer Komponente, die zu einer dritten Basis (z), die zu den zwei Basen (x, y) orthogonal ist, parallel ist. Die zweite Geste kann definiert sein von (x(t), y(t), z(t)), wobei mindestens z(t) mit der Zeit variiert.
  • Bei diesem Beispiel sollte der erste Detektor 2 fähig sein, (x, y) oder Variationen in (x, y) zu messen, wenn z = 0. Ein Beispiel für einen geeigneten ersten Detektor ist eine berührungsempfindliche Vorrichtung, wie zum Beispiel ein berührungsempfindliches Display. Eine berührungsempfindliche Vorrichtung hat eine Eingabeoberfläche. Diese Oberfläche definiert eine Ebene, innerhalb welcher die vorab definierte erste Phase 5 der Geste gemacht werden kann. In dem Fall eines berührungsempfindlichen Displays, ist diese Oberfläche auch eine Displayoberfläche.
  • Bei diesem Beispiel sollte der zweite Detektor 4 fähig sein, mindestens Bewegung im Wesentlichen außerhalb der ersten Ebene zu messen, das heißt, fähig sein, Bewegung in der dritten Dimension (z) oder Variationen in (z) zu messen. Er kann auch fähig sein, dreidimensionale Bewegung zu messen, das heißt (x, y, z) oder Variationen in (x, y, z) zu messen.
  • Ein Beispiel eines geeigneten zweiten Detektors 4 ist ein Näherungsdetektor, der einen Parameter misst, der mit einem Trennungsabstand des Objekts, das die Geste ausführt, von der Vorrichtung 10 variiert.
  • Der Näherungsdetektor kann ein passiver Detektor sein. Er kann zum Beispiel einen Kapazitätswert messen, der sich mit einem Trennungsabstand eines Benutzers von der Vorrichtung 10 ändert.
  • Der Näherungsdetektor kann alternativ ein aktiver Detektor sein. Er kann zum Beispiel einen Sender umfassen, der Energie sendet (zum Beispiel Schallwellen oder elektromagnetische Wellen) und Energie misst (z. B. Schallwellen oder elektromagnetische Wellen), die von dem Objekt, das die Geste ausführt, reflektiert werden. Ein solcher Näherungsdetektor kann zum Beispiel verwendet werden, um eine Laufzeit zwischen der Vorrichtung 10 und dem Objekt, das die Geste ausführt, zu messen. Das kann verwirklicht werden, indem die Energie als ein Impuls gesendet wird und indem eine Zeit zwischen dem Senden des Impulses und dem Empfang des reflektierten Impulses gemessen wird. Alternativ kann ein solcher Näherungsdetektor zum Beispiel ein Dopplerradar sein, der einen Frequenzverschiebungsdetektor umfasst, der verwendet wird, um eine Dopplerfrequenzverschiebung zwischen der Frequenz der gesendeten Energie und der Frequenz der empfangenen Energie zu messen.
  • Ein anderes Beispiel eines geeigneten zweiten Detektors 4 ist ein Lokalisierungsdetektor, der fähig ist, eine Lokalisierung in drei Dimensionen des Objekts, das die Geste ausführt, zu erfassen. Ein solcher zweiter Detektor kann zum Beispiel einen oder mehrere Detektoren aufweisen.
  • Eine Vielzahl von Näherungsdetektoren (zum Beispiel drei oder mehr nicht gefluchtete Detektoren) kann beispielsweise verwendet werden, um einen Trennungsabstand von jedem Näherungsdetektor zu schätzen. Eine Kenntnis der Trennungsvektoren zwischen den Näherungsdetektoren ermöglicht es, das Objekt, das die Geste ausführt, durch Trilateration zu lokalisieren.
  • Eine einzige Kamera kann zum Beispiel kombiniert mit einem Näherungsdetektor verwendet werden. Der Näherungsdetektor ist fähig, eine Ebene zu positionieren, in welcher das Objekt liegt, und die Kamera ist fähig, das Objekt innerhalb dieser Ebene zu positionieren.
  • Eine Vielzahl von Kameras kann zum Beispiel in Kombination verwendet werden. Die Kameras sind fähig, das Objekt, das die Geste ausführt, durch Auflösen stereoskopischer Bilder zu positionieren.
  • Eine Kamera kann eine passive Vorrichtung sein, die einen oder mehrere Lichtsensoren zum Erfassen von Umgebungslicht aufweist, das von dem Objekt, das die Geste ausführt, reflektiert oder abgegeben wird, oder kann eine aktive Vorrichtung sein, die zusätzlich einen Sender aufweist, um Licht (zum Beispiel Infrarotlicht) zur Reflektion durch das Objekt, das die Geste ausführt, zu senden.
  • Wie oben erwähnt, ist die Steuerschaltung 8 konfiguriert, um ein Umschalten zwischen einem zweidimensionalen Benutzerschnittstellenzustand und einem dreidimensionalen Benutzerschnittstellenzustand zu ermöglichen.
  • Ein zweidimensionaler Benutzerschnittstellenzustand kann ein Zustand einer Zustandsmaschine für die Vorrichtung 10 sein. Er kann ein Zustand sein, der die Benutzereingabe auf Eingabe in zwei Dimensionen beschränkt, zum Beispiel, indem der erste Detektor 2 als eine berührungsempfindliche Vorrichtung verwendet wird. Er kann auch oder alternativ ein Zustand sein, der Ausgabe zu einem Benutzer auf eine zweidimensionale Darstellung beschränkt. Eine grafische Benutzerschnittstelle kann beispielsweise als eine zweidimensionale Anordnung von Symbolen statt einer dreidimensionalen Anordnung von Symbolen präsentiert werden. Inhalt, der auf einem Display (nicht gezeigt) angezeigt wird, kann zum Beispiel zweidimensionaler Inhalt statt dreidimensionaler Inhalt sein.
  • Ein zweidimensionaler Benutzerschnittstellenzustand kann für Anwendungen, wie zum Beispiel elektronische Bücher, E-Mail, Internetnutzung usw. geeignet sein.
  • Ein dreidimensionaler Benutzerschnittstellenzustand kann ein Zustand einer Zustandsmaschine für die Vorrichtung 10 sein. Er kann ein Zustand sein, der die Benutzereingabe auf Eingabe in drei Dimensionen beschränkt, zum Beispiel, indem der zweite Detektor 4 als dreidimensionaler Gestendetektor verwendet wird. Er kann auch oder alternativ ein Zustand sein, der Ausgabe zu einem Benutzer auf eine dreidimensionale Darstellung beschränkt. Eine grafische Benutzerschnittstelle kann beispielsweise als eine zweidimensionale Anordnung von Symbolen statt einer dreidimensionalen Anordnung von Symbolen präsentiert werden. Inhalt, der auf einem Display (nicht gezeigt) angezeigt wird, kann zum Beispiel dreidimensionaler Inhalt statt zweidimensionalem Inhalt sein.
  • Ein dreidimensionaler Benutzerschnittstellenzustand kann für Anwendungen, wie zum Beispiel Videowiedergabe und Benutzeranwendungen geeignet sein. Ein Beispiel einer Benutzeranwendung ist eine Rotationskartei von Kontakten.
  • Die Steuerschaltung 8 kann konfiguriert sein, um das Umschalten zwischen einem zweidimensionalen Benutzerschnittstellenzustand und einem dreidimensionalen Benutzerschnittstellenzustand zu ermöglichen, während eine Anwendung läuft, ohne die Anwendung zu schließen und wieder zu öffnen, und während der aktuelle Kontext der Anwendung erhalten bleibt. Eine Rotationskartei von Kontakten kann zum Beispiel in einer flachen zweidimensionalen Ansicht in dem ersten Benutzerschnittstellenzustand dargestellt werden, und die Rotationskartei von Kontakten kann in einer tiefen dreidimensionalen Ansicht in dem zweiten Benutzerschnittstellenzustand angezeigt werden.
  • Der erste Detektor 2 muss während des zweidimensionalen Benutzerschnittstellenzustands betriebsfähig sein, weil er verwendet wird, um die erste Phase der vordefinierten Benutzergeste zu erfassen, was eine notwendige aber nicht hinreichende Bedingung zum Auslösen eines Übergangs von dem zweidimensionalen Benutzerschnittstellenzustand auf den dreidimensionalen Benutzerschnittstellenzustand ist.
  • Der zweite Detektor 4 braucht während des zweidimensionalen Benutzerschnittstellenzustands nicht betriebsfähig zu sein, weil er nicht verwendet wird, um die erste Phase der vordefinierten Benutzergeste zu erfassen. Der zweite Detektor 4 muss jedoch betriebsfähig sein, nachdem die erste Phase der vordefinierten Benutzergeste erfasst wurde, so dass die zweite Phase der vordefinierten Benutzergeste erfasst werden kann, was den Übergang von dem zweidimensionalen Benutzerschnittstellenzustand auf den dreidimensionalen Benutzerschnittstellenzustands verursacht.
  • Die Steuerschaltung 8 kann daher konfiguriert sein, um selektiv den zweiten Detektor 4 zu aktivieren und zu deaktivieren. Der zweite Detektor 4 kann zum Beispiel während des ersten Benutzerschnittstellenzustands deaktiviert sein, bis die Steuerschaltung 8 erkennt, dass der erste Detektor 2 die erste Phase 5 der vordefinierten Benutzergeste erfasst hat. Dann aktiviert sie den zweiten Detektor 4, so dass die zweite Phase der vordefinierten Benutzergeste von dem zweiten Detektor 4 erfasst und von der Steuerschaltung 8 erkannt werden kann.
  • In diesem Kontext kann Deaktivieren erfordern, dass der zweite Detektor 4 ausgeschaltet ist, oder kann erfordern, dass er sich in einem Zustand mit niedrigem Energieverbrauch befindet.
  • In diesem Kontext kann Aktivieren erfordern, dass der zweite Detektor 4 eingeschaltet ist, oder kann erfordern, dass er sich in einem Zustand mit hohem Energieverbrauch befindet.
  • Die Steuerschaltung 8 ist daher konfiguriert, um den ersten Benutzergestendetektor 2 zu aktivieren, um den zweiten Benutzergestendetektor 4 erst zu aktivieren, nachdem der erste Detektor die vordefinierte erste Phase 5 der vordefinierten Benutzergeste erfasst, und um die Vorrichtung vom Betrieb in dem zweidimensionalen Benutzerschnittstellenzustand auf den Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand umzuschalten, wenn der zweite Detektor 4 die vordefinierte zweite Phase 7 der vordefinierten Benutzergeste erfasst.
  • 4 veranschaulicht ein geeignetes Verfahren 30.
  • An Block 31 arbeitet die Vorrichtung 10 in einem zweidimensionalen Benutzerschnittstellenzustand.
  • An Block 32 führt die Vorrichtung 10 Benutzereingabeerfassen aus, indem mindestens der erste Detektor 2 verwendet wird, aber nicht der zweite Detektor 4.
  • An Block 33 entscheidet die Vorrichtung 10, ob sie unter Einsatz mindestens des ersten Detektors 2 eine vordefinierte erste Phase 5 einer vordefinierten Benutzergeste erfasst hat.
  • Wenn die Vorrichtung 10 unter Einsatz mindestens des ersten Detektors 2 eine vordefinierte erste Phase 5 einer vordefinierten Benutzergeste erfasst hat, geht das Verfahren zu Block 34 weiter.
  • Wenn die Vorrichtung 10 unter Einsatz mindestens des ersten Detektors 2 keine vordefinierte erste Phase 5 einer vordefinierten Benutzergeste erfasst hat, geht das Verfahren zu Block 32 zurück.
  • An Block 34 aktiviert die Vorrichtung 10 den zweiten Detektor 4 und führt Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors 4 aus.
  • An Block 35 entscheidet die Vorrichtung 10, ob sie unter Einsatz mindestens des zweiten Detektors 4 eine vordefinierte erste Phase 7 einer vordefinierten Benutzergeste erfasst hat.
  • Wenn die Vorrichtung 10 unter Einsatz mindestens des zweiten Detektors 4 eine vordefinierte zweite Phase 7 einer vordefinierten Benutzergeste erfasst hat, geht das Verfahren zu Block 36 weiter.
  • Wenn die Vorrichtung 10 unter Einsatz mindestens des zweiten Detektors 4 keine vordefinierte zweite Phase 7 einer vordefinierten Benutzergeste erfasst hat, geht das Verfahren zu Block 37 weiter.
  • An Block 36 wird die Vorrichtung 10 vom Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand auf Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand umgeschaltet.
  • In dem dreidimensionalen Benutzerschnittstellenzustand kann optional dreidimensionale Benutzereingabenerfassung auftreten (Block 40).
  • In dem dreidimensionalen Benutzerschnittstellenzustand kann der erste Detektor 2 optional deaktiviert werden (Block 41).
  • Zurückkommend auf Block 37, ist dort ein Rückkehrweg zu Block 32 über Block 39 vorgesehen, und ein Rückkehrweg zu Block 35 ist über Block 38 vorgesehen. Block 38 stellt auch einen Rückkehrweg zu Block 32 über Block 39 bereit.
  • Block 37 ist optional und testet eine Timeout-Bedingung. Falls, wenn das Verfahren zu Block 37 weitergeht, ein Timer abgelaufen ist, geht das Verfahren von Block 37 zu Block 39 weiter und der Timer wird zurückgesetzt. Falls, wenn das Verfahren zu Block 37 weitergeht, der Timer nicht abgelaufen ist, geht das Verfahren von Block 37 zu Block 38 weiter. Die Timeout-Bedingung erlaubt eine Verzögerung zwischen der ersten Phase der vordefinierten Geste und der zweiten Phase 7. der vordefinierten Geste. Die Verzögerung kann programmiert werden, indem eingestellt wird, wie lange es dauert, bis der Timer abläuft.
  • Block 38 ist optional und testet eine Escape-Bedingung. Falls, wenn das Verfahren zu Block 37 weitergeht, eine Escape-Bedingung existiert, geht das Verfahren von Block 38 zu Block 39 weiter und die Bedingung wird zurückgestellt. Falls, wenn das Verfahren zu Block 38 weitergeht, keine Escape-Bedingung existiert, geht das Verfahren von Block 38 zu Block 35 weiter. Die Escape-Bedingung erlaubt es dem Verfahren, von einem Warten auf die Erfassung der zweiten Phase 7 loszukommen, ob nun ein Timeout implementiert ist oder nicht. Die Escape-Bedingung kann programmiert werden.
  • Ein Beispiel einer Escape-Bedingung ist, dass auf die erfasste erste Phase 5 eine andere Geste als die zweite Phase der vordefinierten Geste folgt. Eine Escape-Bedingung kann zum Beispiel existieren, falls der erste Detektor 2 eine Benutzergeste im Anschluss an die vordefinierte erste Phase 5 der vordefinierten Benutzergeste erfasst, die nicht zu der vordefinierten ersten Phase 5 der vordefinierten Benutzergeste gehört. Eine andere Escape-Bedingung kann zum Beispiel existieren, falls der zweite Detektor 4 eine Benutzergeste im Anschluss an die vordefinierte erste Phase 5 der vordefinierten Benutzergeste erfasst, die nicht zu der vordefinierten zweiten Phase 7 der vordefinierten Benutzergeste gehört.
  • An Block 39 wird der zweite Detektor 4 bei diesem Beispiel deaktiviert. Dies stoppt das Erfassen der vordefinierten zweiten Phase 7 der vordefinierten Benutzergeste.
  • 2 veranschaulicht ein Beispiel einer Vorrichtung 10 wie oben beschrieben. Bei diesem Beispiel hat die Vorrichtung 10 ein äußeres Gehäuse 12, das ein berührungsempfindliches Display 14 aufweist. Das äußere Gehäuse ist tragbar.
  • Das berührungsempfindliche Display 14 arbeitet als der erste Detektor 2. Es kann zum Beispiel ein kapazitives oder resistives berührungsempfindliches Display sein.
  • Das berührungsempfindliche Display 14 hat eine zweidimensionale (kartesische) Oberfläche 16 und ist konfiguriert, um Benutzerbewegung eines Berührungspunkts oder von Berührungspunkten über die Oberfläche 16 zu messen.
  • Der zweite Detektor 4 ist nicht veranschaulicht und kann hinter dem berührungsempfindlichen Display 14 positioniert sein. Der zweite Detektor 4 ist konfiguriert, um Benutzerbewegung mindestens in eine Richtung senkrecht zu der zweidimensionalen Oberfläche 16 zu messen.
  • Der zweite Detektor 4 kann zum Beispiel einen Näherungsdetektor und/oder einen Lokalisierungsdetektor, wie oben beschrieben, umfassen.
  • Bei diesem Beispiel weist die vordefinierte erste Phase 5 der vordefinierten Benutzergeste Bewegung von zwei gleichzeitigen Berührungspunkten 3A, 3B auf der Oberfläche 16 der berührungsempfindlichen Vorrichtung 14 auf. Bei dem veranschaulichten Beispiel weist die erste Phase 5 der vordefinierten Benutzergeste relative Bewegung 5A, 5B der Vielzahl gleichzeitiger Berührungspunkte 3A, 3B auf dem berührungsempfindlichen Display 14 auf. Die gleichzeitigen Berührungspunkte 3A, 3B werden zueinander bewegt, bis sie sich treffen oder fast treffen 3A', 3B'.
  • Bei der Fortsetzung dieses Beispiels weist die vordefinierte zweite Phase 7 der vordefinierten Benutzergeste Bewegung in eine Richtung auf, die für die vordefinierte erste Phase 5 der vordefinierten Benutzergeste nicht erforderlich ist. Die vordefinierte zweite Phase 7 der vordefinierten Benutzergeste weist Bewegung von der Vorrichtung 10 weg auf. Die Bewegung ist bei diesem Beispiel im Wesentlichen senkrecht zu der Oberfläche 16 des berührungsempfindlichen Displays 14.
  • Die veranschaulichte vordefinierte Benutzergeste kann von einem Benutzer ausgeführt werden, indem er eine Daumenspitze auf dem berührungsempfindlichen Display 14 zum Beispiel an dem Berührungspunkt 3A platziert und eine Spitze eines Fingers auf dem berührungsempfindlichen Display 14 zum Beispiel an dem Berührungspunkt 3B platziert. Die erste Phase 5 der vordefinierten Benutzergeste wird durch Ausführen einer Kneifgeste verwirklicht, die 5A, 5B, die Daumenspitze und die Fingerspitze, zueinander bringt 3A', 3B', während sie noch mit dem berührungsempfindlichen Display 14 in Berührung sind. Die zweite Phase 7 der vordefinierten Benutzergeste wird verwirklicht, indem unmittelbar eine Herausziehgeste ausgeführt wird, die die zusammenkneifende Daumenspitze und Fingerspitze von dem berührungsempfindlichen Display 14 weg bewegt. Die vordefinierte Geste weist in Abfolge eine Kneifgeste und eine Herausziehgeste auf, so als wollte man das Display kneifen und herausziehen oder auswärts ziehen.
  • Es kann bei bestimmten Ausführungsformen möglich sein, dass ein Benutzer die erste Phase und/oder die zweite Phase der vordefinierten Benutzergeste programmiert. Die Vorrichtung 10 kann zum Beispiel die vordefinierte Benutzergeste von einem Beispiel, das von einem Benutzer ausgeführt wird, lernen. Die Vorrichtung speichert dann die gelernte Geste so, dass sie im Hinblick auf zukünftigen Gebrauch vordefiniert ist.
  • Obwohl die vordefinierte Benutzergeste als eine Geste mit zwei Phasen beschrieben wurde, kann sie mehr als zwei Phasen haben.
  • 5 veranschaulicht eine andere Ausführungsform des Verfahrens 30. Sie veranschaulicht eine Abfolge von Blöcken 45, 46, die Block 33 in dem in 4 veranschaulichten Verfahren 30 ersetzen kann.
  • In 4 kann es vorkommen, dass nur der erste Detektor 2, zum Beispiel das berührungsempfindliche Display 14, verwendet wird, um die erste Phase 5 der vordefinierten Geste zu erfassen. Bei anderen Ausführungsformen können jedoch ein zusätzlicher Detektor oder Detektoren 6 (in 1 als optional veranschaulicht) zusätzlich verwendet werden, um die erste Phase der vordefinierten Geste zu erfassen.
  • Der erste Detektor 2 kann zum Beispiel zum Erfassen eines ersten Teils der ersten Phase der vordefinierten Geste verwendet werden. Falls der erste Detektor 2 ein berührungsempfindliches Display 14 ist, kann der erste Teil Bewegung eines oder mehrerer Berührungspunkte auf der Oberfläche 16 des berührungsempfindlichen Displays umfassen.
  • Der zusätzliche Detektor 6 kann zum Beispiel zum Erfassen eines zweiten Teils der ersten Phase der vordefinierten Geste verwendet werden. Der zweite Teil der ersten Phase kann Bewegung in eine zusätzliche Dimension zur Bewegung, die von dem ersten Detektor 2 erfasst wurde, involvieren. Falls der zusätzliche Detektor ein Näherungsdetektor ist, kann der zweite Teil Bewegung des Objekts, das die Geste ausführt, von der Vorrichtung 10 weg aufweisen.
  • Der zusätzliche Detektor kann ein Näherungsdetektor mit niedrigem Stromverbrauch sein, der weniger präzise ist als ein Detektor 4 mit hohem Stromverbrauch.
  • Unter Bezugnahme auf 5 gelangt man von Block 32 des Verfahrens 30 der 4 zu Block 45. Falls an Block 45 ein erster Teil der ersten Phase der vordefinierten Geste unter Einsatz des ersten Detektors 2 erfasst wird, geht das Verfahren weiter zu Block 46, und wenn nicht, geht das Verfahren zu Block 32 des Verfahrens 30 der 4.
  • Wenn an Block 46 ein zweiter Teil der ersten Phase der vordefinierten Geste unter Einsatz des oder der zusätzlichen Detektoren 6 erfasst wird, geht das Verfahren zu Block 34 in 4 weiter und, wenn er nicht erfasst wurde, geht das Verfahren zu Block 32 in 4 weiter.
  • 6 veranschaulicht ein Verfahren 50 zum Zurückkehren von dem dreidimensionalen Benutzerschnittstellenzustands zu dem zweidimensionalen Benutzerschnittstellenzustand.
  • Die Vorrichtung 10 arbeitet anfänglich in dem dreidimensionalen Benutzerschnittstellenzustand.
  • An Block 51 führt die Vorrichtung Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors 4 durch.
  • Falls die Vorrichtung 10 unter Einsatz mindestens des zweiten Detektors 4 eine vordefinierte anfängliche Phase einer vordefinierten zusätzlichen Benutzergeste erfasst hat, geht das Verfahren zu Block 52 (oder 53) weiter.
  • Falls die Vorrichtung 10 unter Einsatz mindestens des zweiten Detektors 4 nicht eine vordefinierte anfängliche Phase einer vordefinierten zusätzlichen Benutzergeste erfasst hat, wiederholt das Verfahren.
  • Wenn an dem optionalen Block 52 der erste Detektor 2 deaktiviert ist, wird er aktiviert. Dann geht das Verfahren zu Block 53 weiter.
  • An Block 53 wird mindestens der erste Detektor 2 verwendet, um eine vordefinierte Endphase der zusätzlichen vordefinierten Benutzergeste zu erfassen.
  • Falls die Vorrichtung 10 unter Einsatz mindestens des ersten Detektors 2 eine vordefinierte Endphase der vordefinierten zusätzlichen Benutzergeste erfasst hat, geht das Verfahren zu Block 54 weiter.
  • Falls die Vorrichtung 10 unter Einsatz mindestens des ersten Detektors 2 nicht eine vordefinierte Endphase der vordefinierten zusätzlichen Benutzergeste erfasst hat, geht das Verfahren zu Block 57 weiter.
  • An Block 54 schaltet die Steuerschaltung 8 der Vorrichtung 10 den Benutzerschnittstellenzustand von dem dreidimensionalen Benutzerschnittstellenzustand zu dem zweidimensionalen Benutzerschnittstellenzustands um.
  • In dem zweidimensionalen Benutzerschnittstellenzustand tritt zweidimensionale Gestenerfassung auf (Block 55).
  • In dem zweidimensionalen Benutzerschnittstellenzustand kann der zweite Detektor 2 optional deaktiviert werden (Block 56).
  • Unter Rückkehr zu Block 57, ist ein Rückkehrweg zu Block 51 über Block 59 vorgesehen, und ein Rückkehrweg zu Block 53 ist über Block 58 vorgesehen. Block 58 stellt einen Rückkehrweg zu Block 51 über Block 54 bereit.
  • Block 57 ist ein Timeout-Block ähnlich wie Block 37 in 4. Block 58 ist ein Escape-Block ähnlich wie Block 38 in 4.
  • Block 59 ist optional, an diesem Block wird der erste Detektor 2 deaktiviert. Dieser Block ist im Allgemeinen vorhanden, wenn der optionale Block 52 vorhanden ist.
  • Die vordefinierte anfängliche Phase einer vordefinierten zusätzlichen Benutzergeste kann ähnliche Merkmale haben wie die zweite Phase 7 der vordefinierten Geste, die oben beschrieben wurde, nur dass sie in eine entgegengesetzte Richtung geht. Die vordefinierte anfängliche Phase der vordefinierten zusätzlichen Benutzergeste kann zum Beispiel involvieren, dass sich das Objekt, das die Geste definiert, zu der Vorrichtung 10 hinbewegt.
  • Die vordefinierte Endphase der vordefinierten zusätzlichen Benutzergeste kann ähnliche Merkmale wie die erste Phase 5 der vordefinierten Geste, die oben beschrieben wurde, haben. Die vordefinierte anfängliche Endphase der vordefinierten zusätzlichen Benutzergeste kann zum Beispiel involvieren, dass das Objekt, das die Geste definiert, das berührungsempfindliche Display 14 berührt.
  • Die vordefinierte zusätzliche Benutzergeste kann zum Beispiel von einem Benutzer ausgeführt werden, der seine flache Hand oder Fingerspitze zu einem berührungsempfindlichen Display 14 schiebt (vordefinierte anfängliche Phase), bis sie das berührungsempfindliche Display berührt (vordefinierte Endphase). Die vordefinierte zusätzliche Benutzergeste umfasst in Abfolge eine Schubgeste und eine Berührungsgeste, so als würde die dreidimensionale Benutzerbedienfläche durch den Benutzer gegen das Display in eine zweidimensionale Benutzerbedienfläche komprimiert.
  • Die Umsetzung der Steuerschaltung 8 kann in Hardware allein (eine Schaltung, ein Prozessor usw.) sein, kann bestimmte Aspekte in Software inklusive Firmware allein haben, oder kann eine Kombination von Hardware und Software (inklusive Firmware) sein.
  • Die Steuerschaltung 8 kann unter Einsatz von Anweisungen umgesetzt werden, die Hardwarefunktionalität ermöglichen, zum Beispiel durch Einsatz ausführbarer Computerprogrammanweisungen in einem Allzweck- oder Spezialzweckprozessor, die auf einem computerlesbaren Speichermedium (Festplatte, Speicher usw.) gespeichert sein können, um von einem solchen Prozessor ausgeführt zu werden.
  • 3 veranschaulicht ein Beispiel einer Steuerschaltung 8. Bei diesem Beispiel weist die Steuerschaltung 8 einen Prozessor 20 und einen Speicher 22 auf.
  • Der Prozessor 20 ist konfiguriert, um aus einem Speicher 22 zu lesen und in ihn zu schreiben. Der Prozessor 20 kann auch eine Ausgangsschnittstelle aufweisen, über welche Daten und/oder Befehle von dem Prozessor ausgegeben werden, und eine Eingabebedienfläche, über welche Daten und/oder Befehle zu dem Prozessor eingegeben werden.
  • Der Speicher 22 speichert ein Computerprogramm 24, das Computerprogrammanweisungen enthält, die den Betrieb der Vorrichtung 10 steuern, wenn sie in den Prozessor 20 geladen werden. Die Computerprogrammanweisungen 24 stellen die Logik und die Routinen bereit, die es der Vorrichtung ermöglichen, die in den 4, 5 und 6 veranschaulichten Verfahren auszuführen. Der Prozessor 20 ist durch Lesen des Speichers 22 fähig, das Computerprogramm 24 zu laden und auszuführen.
  • Gemäß diesem Beispiel weist die Vorrichtung 10 daher Folgendes auf: mindestens einen Prozessor 20 und mindestens einen Speicher 22, der Computerprogrammcode 24 enthält, wobei der mindestens eine Speicher 22 und der Computerprogrammcode 24 konfiguriert sind, um mit dem mindestens einen Prozessor die Vorrichtung zu veranlassen, mindestens Folgendes auszuführen: Aktivieren eines ersten Benutzergestendetektors, Aktivieren eines zweiten Benutzergestendetektors, und Umschalten vom Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand auf Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand, nachdem der erste Detektor eine vordefinierte erste Phase einer vordefinierten Benutzergeste erfasst und der zweite Detektor eine vordefinierte zweite Phase der vordefinierten Benutzergeste erfasst.
  • Der zweite Benutzergestendetektor könnte erst aktiviert werden, nachdem der erste Detektor eine vordefinierte erste Phase einer vordefinierten ersten Benutzergeste erfasst hat.
  • Das Computerprogramm 24 kann die Vorrichtung 10 über jeden geeigneten Liefermechanismus 28, wie in 7 veranschaulicht, erreichen. Der Liefermechanismus 28 kann zum Beispiel ein computerlesbarer Speicherträger, ein Computerprogrammprodukt, eine Speichervorrichtung, ein Aufzeichnungsträger, wie zum Beispiel ein Compact Disc Nurlesespeicher (CD-ROM) oder eine Digital Versatile Disc (DVD), oder ein Erzeugnis, das das Computerprogramm 24 konkret verkörpert, sein. Der Liefermechanismus kann ein Signal sein, das konfiguriert ist, um das Computerprogramm 24 zuverlässig zu übertragen.
  • Die Vorrichtung 10 kann das Computerprogramm 24 als ein Computerdatensignal verbreiten oder senden.
  • Obwohl der Speicher 22 als ein einzelnes Bauteil veranschaulicht ist, kann er als ein oder mehrere separate Bauteile umgesetzt sein, von welchen einige oder alle integriert/entfernbar sein können und/oder permanente/halb-permanente/dynamische/zwischengespeicherte Speicherung ermöglichen können.
  • Verweise auf ein „computerlesbares Speichermedium”, „Computerprogrammprodukt”, „konkret verkörpertes Computerprogramm” usw. oder einen „Controller”, „Computer”, „Prozessor” usw. sollten als nicht nur Computer einschließend verstanden werden, die unterschiedliche Architekturen haben, wie zum Beispiel Architekturen mit einem/mehreren Prozessoren und sequenzielle (Von Neumann)/parallele Architekturen, sondern auch spezialisierte Schaltungen, wie zum Beispiel Field-Programmable Gate Arrays (FPGA), anwendungsspezifische Schaltungen (Application Specific Circuits, ASIC), Signalverarbeitungsvorrichtungen und andere Verarbeitungsschaltungen. Verweise auf ein Computerprogramm, Anweisungen, Code usw. sollten als Software für einen programmierbaren Prozessor oder Firmware umfassend verstanden werden, wie zum Beispiel der programmierbare Inhalt einer Hardwarevorrichtung, ob es sich nun um Anweisungen für den Prozessor oder Konfigurationseinstellungen für Vorrichtungen mit festgelegter Funktion, Gate Array oder programmierbare Logikvorrichtungen usw. handelt.
  • Wie er bei dieser Anwendung verwendet wird, betrifft der Begriff „Schaltung” alles folgende:
    • (a) Schaltungsumsetzungen nur aus Hardware (wie zum Beispiel Umsetzungen nur in analoger und/oder digitaler Schaltung) und
    • (b) Kombinationen von Schaltungen und Software (und/oder Firmware), wie zum Beispiel (je nach Fall): (i) eine Kombination aus einem oder mehreren Prozessoren oder (ii) Teilen von Prozessor(en)/Software (inklusive digitale(r) Signalprozessor(en), Software und ein oder mehrere Speicher, die zusammen arbeiten, um eine Vorrichtung, wie zum Beispiel ein Mobiltelefon oder einen Server zu veranlassen, verschiedene Funktionen auszuführen), und
    • (c) Schaltungen, wie zum Beispiel ein oder mehrere Mikroprozessoren oder ein Teil eines oder mehrerer Mikroprozessoren, der/die Software oder Firmware für den Betrieb erfordern, sogar wenn die Software oder Firmware physikalisch nicht vorhanden ist.
  • Diese Definition von „Schaltung” gilt für alle Verwendungen dieses Begriffs in dieser Anmeldung, inklusive in allen Ansprüchen. Als ein weiteres Beispiel, wie in dieser Anmeldung verwendet, könnte der Begriff „Schaltung” auch eine Umsetzung nur eines Prozessors (oder mehrerer Prozessoren) oder einer Teils eines Prozessors und seine (oder ihre) begleitende Software und/oder Firmware abdecken. Der Begriff „Schaltung” würde zum Beispiel und falls für das spezielle Anspruchselement zutreffend, eine in eine integrierte Schaltung zur Basisbandverabeitung oder eine integrierte Schaltung für einen Anwendungsprozessor für ein Mobiltelefon abdecken oder eine ähnliche integrierte Schaltung in einem Server, einer Vorrichtung in einem zellularen Netzwerk oder einer anderen Netzwerkvorrichtung decken.
  • Wie hier verwendet, betrifft „Modul” eine Einheit oder eine Vorrichtung, die/das bestimmte Teile/Bauteile ausschließt, die von einem Endhersteller oder einem Benutzer hinzugefügt werden. Die Steuerschaltung 8 könnte ein Modul sein, wie auch der erste Detektor 2 und der zweite Detektor 4.
  • Die Blöcke, die in den 4, 5 und 6 veranschaulicht sind, können Schritte in einem Verfahren und/oder Codeabschnitte in dem Computerprogramm 24 darstellen. Die Veranschaulichung einer bestimmten Reihenfolge der Blöcke bedingt nicht unbedingt, dass es eine erforderliche oder bevorzugte Reihenfolge für die Blöcke gibt, und die Reihenfolge und die Anordnung der Blöcke kann variiert werden. Des Weiteren ist es möglich, dass bestimmte Blöcke weggelassen werden.
  • Obwohl Ausführungsformen der vorliegenden Erfindung in den oben stehenden Absätzen unter Bezugnahme auf verschiedene Beispiele beschrieben wurden, muss man verstehen, dass Änderungen an den gegebenen Beispielen erfolgen können, ohne den Geltungsbereich der beanspruchten Erfindung zu verlassen.
  • Merkmale, die in der oben stehenden Beschreibung beschrieben sind, können in anderen Kombinationen als den explizit beschriebenen Kombinationen verwendet werden.
  • Obwohl Funktionen unter Bezugnahme auf bestimmte Merkmale beschrieben wurden, können diese Funktionen durch andere Merkmale, ob sie nun beschrieben sind oder nicht, ausführbar sein.
  • Obwohl Merkmale unter Bezugnahme auf bestimmte Ausführungsformen beschrieben wurden, können diese Merkmale auch in anderen Ausführungsformen ob sie nun beschrieben sind oder nicht, vorhanden sein.
  • Obwohl die oben stehende Spezifikation bemüht ist, die Aufmerksamkeit auf diejenigen Merkmale der Erfindung zu lenken, die als besonders bedeutend betrachtet werden, ist klar, dass die Anmelderin den Schutz in Zusammenhang mit allen patentfähigen Merkmalen oder Kombination von Merkmalen, auf die hier hingewiesen wird und/oder die in den Zeichnungen gezeigt sind, beansprucht, ob dies nun besonders hervorgehoben wurde oder nicht.

Claims (40)

  1. Verfahren, das Folgendes aufweist: Ausführen einer Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen unter Einsatz mindestens des ersten Detektors einer vordefinierten ersten Phase einer vordefinierten Benutzergeste, Erfassen unter Einsatz mindestens eines zweiten Detektors einer vordefinierten zweiten Phase einer vordefinierten Benutzergeste, als Reaktion auf das Erfassen sowohl der vordefinierten ersten Phase als auch der vordefinierten zweiten Phase der vordefinierten Benutzergeste, Umschalten zwischen einem Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und einem Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand.
  2. Verfahren nach Anspruch 1, wobei das Ausführen der Benutzereingabenerfassung unter Einsatz mindestens eines zweiten Detektors als Reaktion auf das Erfassen unter Einsatz mindestens des ersten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste erfolgt.
  3. Verfahren nach Anspruch 1 oder 2, wobei das Ausführen der Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors den Einsatz des zweiten Detektors nicht involviert.
  4. Verfahren nach einem der vorhergehenden Ansprüche, umfassend Stoppen des Erfassens der vordefinierten zweiten Phase der vordefinierten Benutzergeste nach einer Timeout-Zeitspanne ohne Erfassen der vordefinierten zweiten Phase der vordefinierten Benutzergeste.
  5. Verfahren nach einem der vorhergehenden Ansprüche, umfassend Stoppen des Erfassens der vordefinierten zweiten Phase der vordefinierten Benutzergeste, nachdem unter Einsatz mindestens des ersten Detektors eine Benutzergeste im Anschluss an die vordefinierte erste Phase einer vordefinierten Benutzergeste erfasst wird, die nicht zu der vordefinierten ersten Phase der vordefinierten Benutzergeste gehört.
  6. Verfahren nach einem der vorhergehenden Ansprüche, wobei der erste Detektor eine berührungsempfindliche Vorrichtung ist, die konfiguriert ist, um Berührung auf einer zweidimensionalen Oberfläche zu erfassen.
  7. Verfahren nach einem der vorhergehenden Ansprüche, wobei der erste Detektor ein berührungsempfindliches Display ist, das konfiguriert ist, um Berührung auf einer zweidimensionalen Oberfläche eines Displays zu erfassen.
  8. Verfahren nach Anspruch 6 oder 7, wobei der zweite Detektor eine Vorrichtung ist, die konfiguriert ist, um Benutzerbewegung mindestens in eine Richtung senkrecht zu der zweidimensionalen Oberfläche zu messen.
  9. Verfahren nach einem der vorhergehenden Ansprüche, wobei der zweite Detektor eine Kamera umfasst.
  10. Verfahren nach einem der vorhergehenden Ansprüche, wobei der zweite Detektor einen Näherungsdetektor umfasst.
  11. Verfahren nach einem der vorhergehenden Ansprüche, wobei der zweite Detektor einen Sender, einen Empfänger und einen Frequenzverschiebungsdetektor umfasst.
  12. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte erste Phase der vordefinierten Benutzergeste Bewegung im Wesentlichen in einer ersten Ebene aufweist und wobei die vordefinierte zweite Phase der vordefinierten Benutzergeste Bewegung im Wesentlichen außerhalb der ersten Ebene aufweist.
  13. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte erste Phase der vordefinierten Benutzergeste Bewegung mindestens eines Berührungspunkts auf einer berührungsempfindlichen Vorrichtung aufweist.
  14. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte erste Phase der vordefinierten Benutzergeste eine Vielzahl gleichzeitiger Berührungspunkte auf einer berührungsempfindlichen Vorrichtung aufweist.
  15. Verfahren nach Anspruch 14, wobei die vordefinierte erste Phase der vordefinierten Benutzergeste relative Bewegung der Vielzahl gleichzeitiger Berührungspunkte auf der berührungsempfindlichen Vorrichtung aufweist.
  16. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte erste Phase der vordefinierten Benutzergeste eine Kneifgeste auf einer berührungsempfindlichen Vorrichtung aufweist.
  17. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte erste Phase der vordefinierten Benutzergeste vom Benutzer programmiert werden kann.
  18. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte zweite Phase der vordefinierten Benutzergeste Bewegung in eine Richtung umfasst, die für die vordefinierte erste Phase der vordefinierten Benutzergeste nicht erforderlich ist.
  19. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte zweite Phase der vordefinierten Benutzergeste Bewegung von dem ersten Detektor und dem zweiten Detektor weg aufweist.
  20. Verfahren nach einem der vorhergehenden Ansprüche, wobei die vordefinierte zweite Phase der vordefinierten Benutzergeste vom Benutzer programmiert werden kann.
  21. Verfahren nach einem der vorhergehenden Ansprüche, wobei das Ausführen der Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors aber ohne Einsatz eines zweiten Detektors das Ausführen einer Benutzereingabenerfassung unter Einsatz nur eines ersten Detektors und ohne Einsatz eines zweiten Detektors umfasst, wobei das Erfassen unter Einsatz mindestens des ersten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste das Erfassen unter Einsatz nur des ersten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste umfasst, und wobei das Ausführen der Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors auf das Erfassen unter Einsatz nur des ersten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste hin erfolgt.
  22. Verfahren nach einem der Ansprüche 1 bis 20, wobei das Ausführen der Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors aber ohne Einsatz eines zweiten Detektors das Ausführen der Benutzereingabenerfassung unter Einsatz des ersten Detektors und eines zusätzlichen Detektors aber ohne Einsatz eines zweiten Detektors umfasst, wobei das Erfassen unter Einsatz mindestens des ersten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste das Erfassen der vordefinierten ersten Phase der vordefinierten Benutzergeste unter Einsatz des ersten Detektors und des zusätzlichen Detektors umfasst, und wobei das Ausführen der Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors auf das Erfassen unter Einsatz des ersten Detektors und des zweiten Detektors der vordefinierten ersten Phase der vordefinierten Benutzergeste hin erfolgt.
  23. Verfahren nach Anspruch 22, wobei der zusätzliche Detektor Bewegung in einer zusätzlichen Dimension zur Bewegung, die von dem ersten Detektor erfasst wird, erfasst.
  24. Verfahren nach Anspruch 23, wobei der zweite Detektor Bewegung mindestens in der zusätzlichen Dimension zur Bewegung, die von dem ersten Detektor erfasst wird, erfasst, aber präziser als der zusätzliche Detektor.
  25. Verfahren nach einem der vorhergehenden Ansprüche, das Folgendes aufweist: Betrieb in dem dreidimensionalen Benutzerschnittstellenzustand, Ausführen der Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors, Erfassen unter Einsatz mindestens des zweiten Detektors einer vordefinierten anfänglichen Phase einer zusätzlichen vordefinierten Benutzergeste, Erfassen unter Einsatz mindestens des ersten Detektors einer vordefinierten Endphase der zusätzlichen vordefinierten Benutzergeste, und als Reaktion auf das Erfassen der vordefinierten Endphase der zusätzlichen vordefinierten Benutzergeste unter Einsatz mindestens des ersten Detektors, Umschalten von einem Betrieb in dem dreidimensionalen Benutzerschnittstellenzustand zu einem Betrieb in dem zweidimensionalen Benutzerschnittstellenzustand.
  26. Verfahren nach Anspruch 25, das ferner Folgendes aufweist: als Reaktion auf das Erfassen der vordefinierten ersten Phase der vordefinierten Benutzergeste unter Einsatz mindestens des ersten Detektors, Starten der Benutzereingabenerfassung unter Einsatz mindestens des zweiten Detektors.
  27. Verfahren, das Folgendes aufweist: Aktivieren eines ersten Benutzergestendetektors, Aktivieren eines zweiten Benutzergestendetektors, und Umschalten zwischen Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand, erst nachdem der erste Detektor eine vordefinierte erste Phase einer vordefinierten Benutzergeste erfasst hat und der zweite Detektor die vordefinierte zweite Phase der vordefinierten Benutzergeste erfasst hat.
  28. Verfahren nach Anspruch 27, wobei der zweite Benutzergestendetektor erst aktiviert wird, nachdem der erste Detektor eine vordefinierte erste Phase einer vordefinierten Benutzergeste erfasst hat.
  29. Computerprogramm, das, wenn es in einen Prozessor einer Vorrichtung geladen wird, es der Vorrichtung ermöglicht, das Verfahren eines der Ansprüche 1 bis 28 auszuführen.
  30. Vorrichtung, die Mittel zum Ausführen des Verfahrens eines der Ansprüche 1 bis 28 aufweist.
  31. Vorrichtung, die Folgendes aufweist: mindestens einen Prozessor und mindestens einen Speicher, der Computerprogrammcode enthält, wobei der mindestens ein Speicher und der Computerprogrammcode konfiguriert sind, um mit dem mindestens einen Prozessor die Vorrichtung mindestens zum Ausführen des Verfahrens eines der Ansprüche 1 bis 28 zu veranlassen.
  32. Vorrichtung, die Folgendes aufweist: einen ersten Benutzergestendetektor, der konfiguriert ist, um mindestens eine erste Phase einer vorbestimmten Benutzergeste zu erfassen, einen zweiten Benutzergestendetektor, der konfiguriert ist, um mindestens eine zweite darauf folgende Phase der vorbestimmten Benutzergeste zu erfassen, eine Steuerschaltung, die konfiguriert ist, um die Vorrichtung zwischen einem Betrieb in einem zweidimensionalen Benutzerschnittstellenzustand und einem Betrieb in einem dreidimensionalen Benutzerschnittstellenzustand umzuschalten, nachdem der erste Detektor die vordefinierte erste Phase der vordefinierten Benutzergeste erfasst hat und der zweite Detektor die vordefinierte zweite Phase der vordefinierten Benutzergeste erfasst hat.
  33. Vorrichtung nach Anspruch 32, wobei die Steuerschaltung konfiguriert ist, um den zweiten Benutzergestendetektor erst zu aktivieren, nachdem der erste Detektor die vordefinierte erste Phase der vordefinierten Benutzergeste erfasst hat.
  34. Vorrichtung nach Anspruch 32 oder 33, wobei der erste Detektor eine berührungsempfindliche Vorrichtung ist, die konfiguriert ist, um Berührung auf einer zweidimensionalen Oberfläche zu erfassen.
  35. Vorrichtung nach Anspruch 32, 33 oder 34, wobei der erste Detektor eine berührungsempfindliche Vorrichtung ist, die konfiguriert ist, um Berührung auf einer zweidimensionalen Oberfläche eines Displays zu erfassen.
  36. Vorrichtung nach einem der Ansprüche 32 bis 35, wobei der zweite Detektor eine Vorrichtung ist, die konfiguriert ist, um Benutzerbewegung mindestens in eine Richtung senkrecht zu der zweidimensionalen Oberfläche zu messen.
  37. Vorrichtung nach einem der Ansprüche 32 bis 36, wobei der zweite Detektor eine Kamera, einen Näherungsdetektor und/oder einen Sender, einen Empfänger und einen Frequenzverschiebungsdetektor aufweist.
  38. Vorrichtung nach einem der Ansprüche 32 bis 37, die ein hand-tragbares externes Gehäuse aufweist.
  39. Verfahren, das Folgendes aufweist: Betrieb einer Vorrichtung in einem ersten Zustand, Ausführen von Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen einer vordefinierten ersten Phase einer vordefinierten Benutzergeste unter Einsatz mindestens eines ersten Detektors, Erfassen unter Einsatz mindestens des zweiten Detektors einer vordefinierten zweiten Phase einer vordefinierten Benutzergeste, und als Reaktion auf das Erfassen der vordefinierten ersten Phase der vordefinierten Benutzergeste unter Einsatz mindestens des ersten Detektors und als Reaktion auf das Erfassen der vordefinierten zweiten Phase der vordefinierten Benutzergeste unter Einsatz mindestens des zweiten Detektors, Umschalten vom Betrieb der Vorrichtung in dem ersten Zustand auf den Betrieb der Vorrichtung in einem zweiten Zustand.
  40. Verfahren, das Folgendes aufweist: Betrieb einer Vorrichtung in einem ersten Zustand, Ausführen einer Benutzereingabenerfassung unter Einsatz mindestens eines ersten Detektors, Erfassen einer vordefinierten ersten Phase einer vordefinierten Benutzergeste unter Einsatz mindestens eines ersten Detektors aber nicht des zweiten Detektors, Erfassen einer vordefinierten zweiten Phase der vordefinierten Benutzergeste unter Einsatz mindestens des zweiten Detektors, und als Reaktion auf das Erfassen der vordefinierten ersten Phase der vordefinierten Benutzergeste unter Einsatz mindestens des ersten Detektors und als Reaktion auf das Erfassen der vordefinierten zweiten Phase der vordefinierten Benutzergeste unter Einsatz mindestens des zweiten Detektors, Umschalten vom Betrieb der Vorrichtung in dem ersten Zustand auf Betrieb der Vorrichtung in einem zweiten Zustand.
DE112012001663.7T 2011-04-13 2012-04-12 Verfahren, Vorrichtung und Computerprogramm zur Steuerung des Zustands einer Vorrichtung durch den Benutzer Withdrawn DE112012001663T5 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GBGB-1106271.8 2011-04-13
GB1106271.8A GB2490108B (en) 2011-04-13 2011-04-13 A method, apparatus and computer program for user control of a state of an apparatus
PCT/IB2012/051794 WO2012140593A2 (en) 2011-04-13 2012-04-12 A method, apparatus and computer program for user control of a state of an apparatus

Publications (1)

Publication Number Publication Date
DE112012001663T5 true DE112012001663T5 (de) 2014-01-09

Family

ID=44123048

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112012001663.7T Withdrawn DE112012001663T5 (de) 2011-04-13 2012-04-12 Verfahren, Vorrichtung und Computerprogramm zur Steuerung des Zustands einer Vorrichtung durch den Benutzer

Country Status (5)

Country Link
US (1) US11112872B2 (de)
CN (1) CN103547989B (de)
DE (1) DE112012001663T5 (de)
GB (1) GB2490108B (de)
WO (1) WO2012140593A2 (de)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10331219B2 (en) 2013-01-04 2019-06-25 Lenovo (Singaore) Pte. Ltd. Identification and use of gestures in proximity to a sensor
US9398221B2 (en) 2013-07-01 2016-07-19 Blackberry Limited Camera control using ambient light sensors
US9256290B2 (en) 2013-07-01 2016-02-09 Blackberry Limited Gesture detection using ambient light sensors
US9342671B2 (en) 2013-07-01 2016-05-17 Blackberry Limited Password by touch-less gesture
US9323336B2 (en) 2013-07-01 2016-04-26 Blackberry Limited Gesture detection using ambient light sensors
US9423913B2 (en) 2013-07-01 2016-08-23 Blackberry Limited Performance control of ambient light sensors
US9489051B2 (en) 2013-07-01 2016-11-08 Blackberry Limited Display navigation using touch-less gestures
US9367137B2 (en) 2013-07-01 2016-06-14 Blackberry Limited Alarm operation by touch-less gesture
EP2821886A1 (de) * 2013-07-01 2015-01-07 BlackBerry Limited Berührungslose Benutzerschnittstelle mit Verwendung von Umgebungslichtsensoren
US9405461B2 (en) 2013-07-09 2016-08-02 Blackberry Limited Operating a device using touchless and touchscreen gestures
EP2824539B1 (de) * 2013-07-09 2019-09-04 BlackBerry Limited Betrieb einer Vorrichtung durch Verwenden berührungsloser Gesten und Berührungsbildschirmgesten
US9304596B2 (en) 2013-07-24 2016-04-05 Blackberry Limited Backlight for touchless gesture detection
US9465448B2 (en) 2013-07-24 2016-10-11 Blackberry Limited Backlight for touchless gesture detection
US9194741B2 (en) 2013-09-06 2015-11-24 Blackberry Limited Device having light intensity measurement in presence of shadows
US9542004B1 (en) * 2013-09-24 2017-01-10 Amazon Technologies, Inc. Gesture-based flash
GB2519558A (en) 2013-10-24 2015-04-29 Ibm Touchscreen device with motion sensor
CN106502570B (zh) * 2016-10-25 2020-07-31 科世达(上海)管理有限公司 一种手势识别的方法、装置及车载系统
WO2019050274A1 (en) * 2017-09-06 2019-03-14 Samsung Electronics Co., Ltd. SEMANTIC DIMENSIONS IN A USER INTERFACE
DE102017125070A1 (de) * 2017-10-26 2019-05-02 Jacques Tchouangueu Verfahren und Vorrichtung zur Eröffnung einer Mensch-Maschine-Kommunikation
US10592013B2 (en) * 2018-04-25 2020-03-17 Microsoft Technology Licensing, Llc Systems and methods for unifying two-dimensional and three-dimensional interfaces
WO2020133078A1 (zh) * 2018-12-27 2020-07-02 深圳市优必选科技有限公司 一种机器人操作控制方法、手势识别装置以及机器人
CN112286339B (zh) * 2019-07-23 2022-12-16 哈尔滨拓博科技有限公司 一种多维手势识别装置、方法、电子设备和存储介质
US11467254B2 (en) * 2020-02-27 2022-10-11 Samsung Electronics Co., Ltd. Method and apparatus of radar-based activity detection

Family Cites Families (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5454043A (en) 1993-07-30 1995-09-26 Mitsubishi Electric Research Laboratories, Inc. Dynamic and static hand gesture recognition through low-level image analysis
US6088023A (en) * 1996-12-10 2000-07-11 Willow Design, Inc. Integrated pointing and drawing graphics system for computers
US5986357A (en) * 1997-02-04 1999-11-16 Mytech Corporation Occupancy sensor and method of operating same
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7840912B2 (en) * 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US6229542B1 (en) 1998-07-10 2001-05-08 Intel Corporation Method and apparatus for managing windows in three dimensions in a two dimensional windowing system
US6822662B1 (en) 1999-03-31 2004-11-23 International Business Machines Corporation User selected display of two-dimensional window in three dimensions on a computer screen
US6492979B1 (en) * 1999-09-07 2002-12-10 Elo Touchsystems, Inc. Dual sensor touchscreen utilizing projective-capacitive and force touch sensors
KR100404285B1 (ko) 2000-02-09 2003-11-03 (주) 고미드 2차원/3차원 겸용 웹 브라우징 방법 및 이를 저장하고 있는 기록매체
US6791536B2 (en) * 2000-11-10 2004-09-14 Microsoft Corporation Simulating gestures of a pointing device using a stylus and providing feedback thereto
US6977645B2 (en) * 2001-03-16 2005-12-20 Agilent Technologies, Inc. Portable electronic device with mouse-like capabilities
US7068256B1 (en) * 2001-11-20 2006-06-27 Palm, Inc. Entering and exiting power modes and activating hand writing presentation display triggered by electronic muscle material
JP2005518612A (ja) * 2002-02-26 2005-06-23 サーク・コーポレーション 高精細用および低精細用の分解能を有するタッチパッド
US20050052427A1 (en) * 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
TWI291161B (en) * 2004-07-15 2007-12-11 N trig ltd Automatic switching for a dual mode digitizer
US7728316B2 (en) * 2005-09-30 2010-06-01 Apple Inc. Integrated proximity sensor and light sensor
US7620316B2 (en) * 2005-11-28 2009-11-17 Navisense Method and device for touchless control of a camera
US20070175322A1 (en) * 2006-02-02 2007-08-02 Xpresense Llc RF-based dynamic remote control device based on generating and sensing of electrical field in vicinity of the operator
US8587526B2 (en) * 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
US8589824B2 (en) * 2006-07-13 2013-11-19 Northrop Grumman Systems Corporation Gesture recognition interface system
US8180114B2 (en) * 2006-07-13 2012-05-15 Northrop Grumman Systems Corporation Gesture recognition interface system with vertical display
US8970501B2 (en) * 2007-01-03 2015-03-03 Apple Inc. Proximity and multi-touch sensor detection and demodulation
US8713458B2 (en) * 2007-02-15 2014-04-29 Nokia Corporation Visualization of information associated with applications in user interfaces
HUE047118T2 (hu) * 2007-03-23 2020-04-28 Qualcomm Inc Többszenzoros adatgyûjtés és/vagy feldolgozás
US9394756B2 (en) * 2007-04-02 2016-07-19 Halliburton Energy Services, Inc. Timeline from slumber to collection of RFID tags in a well environment
CN101500328A (zh) * 2008-02-02 2009-08-05 德信智能手机技术(北京)有限公司 一种在手机上实现三维交互的装置和方法
US8054300B2 (en) * 2008-06-17 2011-11-08 Apple Inc. Capacitive sensor panel having dynamically reconfigurable sensor size and shape
KR101517967B1 (ko) * 2008-07-07 2015-05-06 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US20100031202A1 (en) * 2008-08-04 2010-02-04 Microsoft Corporation User-defined gesture set for surface computing
KR101555055B1 (ko) 2008-10-10 2015-09-22 엘지전자 주식회사 이동단말기 및 그 디스플레이방법
KR20100041006A (ko) * 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
US8433138B2 (en) * 2008-10-29 2013-04-30 Nokia Corporation Interaction using touch and non-touch gestures
KR20100048090A (ko) * 2008-10-30 2010-05-11 삼성전자주식회사 터치와 모션을 통해 제어 명령을 생성하는 인터페이스 장치, 인터페이스 시스템 및 이를 이용한 인터페이스 방법
US8451236B2 (en) * 2008-12-22 2013-05-28 Hewlett-Packard Development Company L.P. Touch-sensitive display screen with absolute and relative input modes
CN102362251B (zh) * 2008-12-30 2016-02-10 法国电信公司 用于提供对应用程序的增强控制的用户界面
WO2010091496A1 (en) * 2009-01-05 2010-08-19 Smart Technologies Ulc Gesture recognition method and interactive input system employing same
US8704767B2 (en) * 2009-01-29 2014-04-22 Microsoft Corporation Environmental gesture recognition
EP2399182B1 (de) * 2009-02-20 2014-04-09 Koninklijke Philips N.V. System, verfahren und vorrichtung zum bewirken, dass eine einrichtung in einen aktiven modus eintritt
US20100241999A1 (en) * 2009-03-19 2010-09-23 Microsoft Corporation Canvas Manipulation Using 3D Spatial Gestures
US8289316B1 (en) * 2009-04-01 2012-10-16 Perceptive Pixel Inc. Controlling distribution of error in 2D and 3D manipulation
KR101593598B1 (ko) * 2009-04-03 2016-02-12 삼성전자주식회사 휴대단말에서 제스처를 이용한 기능 실행 방법
US8269175B2 (en) * 2009-05-22 2012-09-18 Motorola Mobility Llc Electronic device with sensing assembly and method for detecting gestures of geometric shapes
US9086875B2 (en) * 2009-06-05 2015-07-21 Qualcomm Incorporated Controlling power consumption of a mobile device based on gesture recognition
KR20100136649A (ko) * 2009-06-19 2010-12-29 삼성전자주식회사 휴대단말기의 근접 센서를 이용한 사용자 인터페이스 구현 방법 및 장치
US9174123B2 (en) * 2009-11-09 2015-11-03 Invensense, Inc. Handheld computer systems and techniques for character and command recognition related to human movements
KR101688655B1 (ko) * 2009-12-03 2016-12-21 엘지전자 주식회사 사용자의 프레전스 검출에 의한 제스쳐 인식 장치의 전력 제어 방법
KR101652110B1 (ko) * 2009-12-03 2016-08-29 엘지전자 주식회사 사용자의 제스쳐로 제어가능한 장치의 전력 제어 방법
US20110148786A1 (en) * 2009-12-18 2011-06-23 Synaptics Incorporated Method and apparatus for changing operating modes
US8232990B2 (en) * 2010-01-05 2012-07-31 Apple Inc. Working with 3D objects
US8866791B2 (en) * 2010-01-06 2014-10-21 Apple Inc. Portable electronic device having mode dependent user input controls
US9268404B2 (en) * 2010-01-08 2016-02-23 Microsoft Technology Licensing, Llc Application gesture interpretation
US8760631B2 (en) * 2010-01-27 2014-06-24 Intersil Americas Inc. Distance sensing by IQ domain differentiation of time of flight (TOF) measurements
IL204436A (en) * 2010-03-11 2016-03-31 Deutsche Telekom Ag A system and method for remote control of online TV by waving hands
EP2369443B1 (de) * 2010-03-25 2017-01-11 BlackBerry Limited System und Verfahren für Gestenerkennung und Rückmeldung
US8826184B2 (en) * 2010-04-05 2014-09-02 Lg Electronics Inc. Mobile terminal and image display controlling method thereof
KR101334107B1 (ko) * 2010-04-22 2013-12-16 주식회사 굿소프트웨어랩 차량용 멀티미디어 제어를 위한 사용자 인터페이스 장치 및 방법
US9201511B1 (en) * 2010-04-23 2015-12-01 Cypress Semiconductor Corporation Optical navigation sensor and method
US8296151B2 (en) * 2010-06-18 2012-10-23 Microsoft Corporation Compound gesture-speech commands
US8581844B2 (en) * 2010-06-23 2013-11-12 Google Inc. Switching between a first operational mode and a second operational mode using a natural motion gesture
US20130155031A1 (en) * 2010-06-29 2013-06-20 Elliptic Laboratories As User control of electronic devices
EP2402511B1 (de) * 2010-07-02 2016-03-02 IHC Holland IE B.V. Vorlage und Verfahren zur Installation mehrerer Fundamentelemente in einer Untertagegrundformation
US20120092286A1 (en) * 2010-10-19 2012-04-19 Microsoft Corporation Synthetic Gesture Trace Generator
US9043732B2 (en) * 2010-10-21 2015-05-26 Nokia Corporation Apparatus and method for user input for controlling displayed information
US8816964B2 (en) * 2010-11-26 2014-08-26 Mckesson Financial Holdings Sensor-augmented, gesture-enabled keyboard and associated apparatus and computer-readable storage medium
US9049663B2 (en) * 2010-12-10 2015-06-02 Qualcomm Incorporated Processing involving multiple sensors
US9131060B2 (en) * 2010-12-16 2015-09-08 Google Technology Holdings LLC System and method for adapting an attribute magnification for a mobile communication device
US8635560B2 (en) * 2011-01-21 2014-01-21 Blackberry Limited System and method for reducing power consumption in an electronic device having a touch-sensitive display
US8717318B2 (en) * 2011-03-29 2014-05-06 Intel Corporation Continued virtual links between gestures and user interface elements
US20120280900A1 (en) * 2011-05-06 2012-11-08 Nokia Corporation Gesture recognition using plural sensors
US9329703B2 (en) * 2011-06-22 2016-05-03 Apple Inc. Intelligent stylus
US9176608B1 (en) * 2011-06-27 2015-11-03 Amazon Technologies, Inc. Camera based sensor for motion detection
US8891868B1 (en) * 2011-08-04 2014-11-18 Amazon Technologies, Inc. Recognizing gestures captured by video
WO2013021385A2 (en) * 2011-08-11 2013-02-14 Eyesight Mobile Technologies Ltd. Gesture based interface system and method
US9389690B2 (en) * 2012-03-01 2016-07-12 Qualcomm Incorporated Gesture detection based on information from multiple types of sensors
US9063574B1 (en) * 2012-03-14 2015-06-23 Amazon Technologies, Inc. Motion detection systems for electronic devices
US9170676B2 (en) * 2013-03-15 2015-10-27 Qualcomm Incorporated Enhancing touch inputs with gestures

Also Published As

Publication number Publication date
CN103547989B (zh) 2018-10-26
US11112872B2 (en) 2021-09-07
US20140033141A1 (en) 2014-01-30
WO2012140593A2 (en) 2012-10-18
GB2490108A (en) 2012-10-24
GB201106271D0 (en) 2011-05-25
CN103547989A (zh) 2014-01-29
WO2012140593A3 (en) 2013-01-17
GB2490108B (en) 2018-01-17

Similar Documents

Publication Publication Date Title
US11112872B2 (en) Method, apparatus and computer program for user control of a state of an apparatus
GB2498299B (en) Evaluating an input relative to a display
US9201545B2 (en) Motion feedback
US20150286281A1 (en) Generating a screenshot
CN105786238B (zh) 利用多个发射器频率感测对象
US20150007069A1 (en) Electronic device capable of reconfiguring displayed icons and method thereof
US9965174B2 (en) Multitouch gestures for a measurement system
CN105045445B (zh) 用于噪声测量的驱动传感器电极
EP3451128A1 (de) Interaktionserfassung
JP6231618B2 (ja) 特にタッチ・ジェスチャ・オフセットに関する、方法、記憶媒体およびシステム
DE102014114711A1 (de) Informationsverarbeitungsverfahren und erste elektronische Vorrichtung
US20120191394A1 (en) Latency Measurement
CN106662946A (zh) 3d姿态识别
DE202007018940U1 (de) Bewegungserkennung für einen Digitalisierer
CN102902467A (zh) 一种终端设备的文本光标定位方法及其终端设备
CN104238669A (zh) 一种控制移动终端摄像头旋转的方法、装置及移动终端
US9229618B2 (en) Turning pages of an electronic document by means of a single snap gesture
DE102011114151A1 (de) Ausdehnen des berührbaren bereichs eines berührungsbildschirms über die grenzen des bildschirms hinaus
CN103902174B (zh) 一种显示方法和设备
US10466840B2 (en) Apparatus, method and computer program for enabling a user to make user inputs
US10963123B2 (en) Computer system and method for changing display of components shown on a display device
EP3640773B1 (de) Eingabestift mit distanzmesser
CN105094721B (zh) 一种信息处理方法及电子设备
CN104035578A (zh) 控制电容式触屏终端的方法及装置
US20200174648A1 (en) Computer system and method for changing display of components shown on a display device

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R081 Change of applicant/patentee

Owner name: NOKIA TECHNOLOGIES OY, FI

Free format text: FORMER OWNER: NOKIA CORP., 02610 ESPOO, FI

R082 Change of representative

Representative=s name: COHAUSZ & FLORACK PATENT- UND RECHTSANWAELTE P, DE

R081 Change of applicant/patentee

Owner name: NOKIA TECHNOLOGIES OY, FI

Free format text: FORMER OWNER: NOKIA CORPORATION, ESPOO, FI

Owner name: NOKIA TECHNOLOGIES OY, FI

Free format text: FORMER OWNER: NOKIA CORPORATION, 02610 ESPOO, FI

R082 Change of representative

Representative=s name: COHAUSZ & FLORACK PATENT- UND RECHTSANWAELTE P, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee