DE102004008253A1 - Verfahren zum Abschätzen einer virtuellen Schreibebene - Google Patents

Verfahren zum Abschätzen einer virtuellen Schreibebene Download PDF

Info

Publication number
DE102004008253A1
DE102004008253A1 DE102004008253A DE102004008253A DE102004008253A1 DE 102004008253 A1 DE102004008253 A1 DE 102004008253A1 DE 102004008253 A DE102004008253 A DE 102004008253A DE 102004008253 A DE102004008253 A DE 102004008253A DE 102004008253 A1 DE102004008253 A1 DE 102004008253A1
Authority
DE
Germany
Prior art keywords
location points
level
virtual
projected
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102004008253A
Other languages
English (en)
Inventor
Henry Feil
Ewald Frensch
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Priority to DE102004008253A priority Critical patent/DE102004008253A1/de
Priority to PCT/EP2005/050506 priority patent/WO2005081095A2/de
Publication of DE102004008253A1 publication Critical patent/DE102004008253A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/22Character recognition characterised by the type of writing
    • G06V30/228Character recognition characterised by the type of writing of three-dimensional handwriting, e.g. writing in the air

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Position Input By Displaying (AREA)
  • Processing Or Creating Images (AREA)

Abstract

Offenbart ist ein Verfahren zum Abschätzen einer virtuellen Schreibebene (VSE) bei der Eingabe von Steueranweisungen durch Bewegungen im dreidimensionalen Raum. Zunächst wird eine Bewegung einer Eingabevorrichtung in einem von drei Richtungsvektoren aufgespannten dreidimensionalen Raum erfasst, indem zu bestimmten Zeiten Ortspunkte (OP) in dem dreidimensionalen Raum ermittelt werden, welche die Kurve (BT') der Bewegung der Eingabevorrichtung repräsentieren. Anschließend werden die ermittelten Ortspunkte auf eine erste Ebene (XYE), welche von dem ersten und dem zweiten Richtungsvektor gebildet wird, projiziert, so dass erste projizierte Ortspunkte auf der ersten Ebene erzeugt werden. Ferner werden die ermittelten Ortspunkte auf eine zweite Ebene (YZE), welche von dem dritten und zweiten Richtungsvektor gebildet wird, projiziert, so dass zweite projizierte Ortspunkte auf der zweiten Ebene erzeugt werden. Schließlcih wird eine erste und zweite Regressionsgerade durch die jeweiligen ersten und zweiten projizierten Ortspunkte bestimmt, um einen ersten und zweiten virtuellen Richtungsvektor zum Aufspannen der virtuellen Schreibebene zu erhalten.

Description

  • Die vorliegende Erfindung betrifft ein Verfahren zum Abschätzen einer virtuellen Schreibebene, insbesondere für tragbare Eingabevorrichtungen, mittels welchen im dreidimensionalen Raum Schriftzeichen oder allgemein Steueranweisungen auf einer gedachten oder virtuellen Schreibebene "geschrieben" werden können.
  • Die Miniaturisierung von tragbaren elektronischen Geräten, wie Mobiltelefonen oder Organizern, bringt eine Verringerung der Bedienungselemente mit sich, und führt teilweise bis zu einem vollkommenen Verzicht auf mechanische Tasten bzw. Tastaturen. Jedoch stellt sich dabei dann immer mehr das Problem der Eingabe von differenzierten Steueranweisungen, wie beispielsweise von Schriftzeichen bei einer Schrifteingabe. Bei größeren tragbaren Geräten ist hierzu ein berührungssensitives Display, ein sogenannter "Touch Screen" vorgesehen, auf dem mittels eines speziellen Stifts Zeichen bzw. Schriftzeichen geschrieben werden können, welche dann mittels einer speziellen Schrifterkennungssoftware als Schriftzeichen oder Steueranweisungen erkannt werden. Bei kleineren tragbaren Geräten, welche zumeist auch ein kleines Display aufweisen, ist die gerade beschriebene Methode zum Eingeben von Zeichen oder Steueranweisungen jedoch mühsam oder ganz unmöglich.
  • Zur Verbesserung der Eingabemöglichkeit insbesondere von kleinen tragbaren elektronischen Geräten ist es dabei möglich, dass ein Benutzer Schriftzeichen oder allgemein Steueranweisungen mit dem Gerät im dreidimensionalen Raum schreibt bzw. das Gerät im dreidimensionalen Raum entsprechend einem Schriftzeichen oder einer Steueranweisung zugeordneten Symbol bewegt. Es wird dabei davon ausgegangen, dass die Bewegung dabei (entsprechend einer herkömmlichen Schreibbewegung auf einer Unterlage) in einer gedachten oder virtuellen Ebene erfolgt. Da jedoch bei einer freien Bewegung im Raum keine Un terlage vorhanden ist, wird die Bewegung des Benutzers um die gedachte Ebene schwanken, was die Analyse der Bewegung bei der Bestimmung der dieser zugeordneten Steueranweisung erschwert bzw. verschlechtert.
  • Es ist somit die Aufgabe der vorliegenden Erfindung, eine bequeme Möglichkeit zur Verbesserung der Eingabe von Schriftzeichen und Steueranweisungen durch Bewegungen im dreidimensionalen Raum schaffen.
  • Diese Aufgabe wird durch die unabhängigen Ansprüche gelöst. Vorteilhafte Ausgestaltungen sind Gegenstand der Unteransprüche.
  • Ein Verfahren zum Abschätzen einer virtuellen Schreibebene bei der Eingabe von Steueranweisungen durch Bewegungen im dreidimensionalen Raum umfasst folgende Schritte. Zunächst wird eine Bewegung einer Eingabevorrichtung in einem von drei (linear unabhängigen) Richtungsvektoren aufgespannten dreidimensionalen Raum erfasst, indem zu bestimmten Zeiten Ortspunkte in dem dreidimensionalen Raum ermittelt werden, welche die Kurve der Bewegung der Eingabevorrichtung repräsentieren. Als Eingabevorrichtungen können beispielsweise tragbare elektronische Vorrichtungen, wie Mobilfunkgeräte, Mobiltelefone oder kleine tragbare Computer bzw. Uhren verwendet werden. Anschließend werden die ermittelten Ortspunkte auf eine erste Ebene, welche von dem ersten und dem zweiten Richtungsvektor gebildet wird, projiziert, so dass erste projizierte Ortspunkte auf der ersten Ebene erzeugt werden. Ferner werden die ermittelten Ortspunkte auf eine zweite Ebene, welche von dem dritten und zweiten Richtungsvektor gebildet wird, projiziert, so dass zweite projizierte Ortspunkte auf der zweiten Ebene erzeugt werden. Schließlich wird eine erste Regressionsgerade durch die ersten projizierten Ortspunkte bestimmt, um einen ersten virtuellen Richtungsvektor zum Aufspannen der virtuellen Schreibebene zu erhalten, und es wird eine zweite Regressionsgerade durch die zweiten projizierten Ortspunkte bestimmt, um einen zweiten virtuellen Richtungsvektor zum Aufspannen der virtuellen Schreibebene zu erhalten.
  • Vorteilhafterweise legen der erste, zweite und dritte Richtungsvektor ein kartesisches Koordinatensystem fest, und können dabei eine X-Achse, Y-Achse bzw. Z-Achse repräsentieren.
  • Die Ermittlung der Ortspunkte kann gemäß einer vorteilhaften Ausgestaltung durch Erfassung der Beschleunigung der Eingabevorrichtung und zweifacher Integration über die Zeit zu den bestimmten Zeiten ermittelt werden. Somit werden Ortspunkte ermittelt, die auf eine Bewegungskurve der Eingabevorrichtung liegen. Es ist dabei möglich, noch während der Bewegung der Eingabevorrichtung die Zeit-Integration vorzunehmen, oder die erfassten Beschleunigungsdaten zwischenzuspeichern und erst nach Beendigung einer Bewegung mittels Zeit-Integration in Ortspunkte umzuwandeln. Es ist jedoch auch denkbar, die Bewegungskurve (bzw. die diese repräsentierenden Ortspunkte) der Eingabevorrichtung mittels anderer Verfahren als der Beschleunigungsmessung zu ermitteln. Beispielsweise kann die Ortsposition der Eingabevorrichtung zu bestimmten Zeiten mittels eines optischen bzw. stereoskopischen Verfahrens ermittelt werden, bei dem Bilder der Eingabevorrichtung oder eines markanten Abschnitts von dieser von zwei Kameras aus verschiedenen Perspektiven genommen werden, und durch Vergleich der Position der Eingabevorrichtung auf den beiden Bildern deren räumliche Position bestimmt wird.
  • Gemäß einer vorteilhaften Ausgestaltung können die jeweiligen Regressionsgeraden derart bestimmt werden, dass die Summe der quadrierten Abweichungen der jeweiligen projizierten Ortspunkte von den jeweiligen Regressionsgeraden ein Minimum wird.
  • Für eine verbesserte Erkennung von Schriftzeichen oder Steueranweisungen können die zu Beginn ermittelten Ortspunkte auf die virtuelle Schreibebene projiziert werden. Anschließend können die auf die virtuelle Schreibebene projizierten Ortspunkte derart analysiert werden, um daraus Schriftzeichen oder Symbole zu erkennen. Die erkannten Schriftzeichen oder Symbole können dann als Steueranweisungen für die Eingabevorrichtung interpretiert werden. Ferner können die interpretierten Steueranweisungen in der Eingabevorrichtung verarbeitet und/oder über eine Schnittstelle an eine Datenverarbeitungsanlage übertragen werden. Dabei ist es möglich, die ganzen oben erwähnten Verfahrensschritte bzgl. der Erfassung bzw. Ermittlung der Ortspunkte, der Abschätzung bzw. Bestimmung der virtuellen Schreibebene oder der Analyse der auf die virtuelle Schreibebene projizierten Ortspunkte in der Eingabevorrichtung durchzuführen. Als Schnittstelle kann dabei ein Funkmodul, wie ein "Bluetooth"-Funkmodul oder eine Infrarotschnittstelle verwendet, um die Steueranweisungen an ein externes Gerät, wie einen Computer (als Datenverarbeitungsanlage) zu übertragen.
  • Gemäß einem weiteren Aspekt wird eine tragbare elektronische Vorrichtung als Eingabevorrichtung zum Durchführen eines oben dargestellten Verfahrens geschaffen. Insbesondere umfasst die Vorrichtung dabei einen Beschleunigungssensor zum Erfassen einer Bewegung der Vorrichtung in einem von drei Richtungsvektoren aufgespannten dreidimensionalen Raum und zum Ausgeben von entsprechenden Beschleunigungsdaten, und eine Konvertierungseinrichtung zum Umwandeln der Beschleunigungsdaten in eine Bewegungskurve der Vorrichtung, indem zu bestimmten Zeiten Ortspunkte in dem dreidimensionalen Raum ermittelt werden, welche die Kurve der Bewegung der Vorrichtung repräsentieren. Außerdem ist eine Verarbeitungseinrichtung vorgesehen, die dafür eingerichtet ist, die ermittelten Ortspunkte auf eine erste Ebene, welche von dem ersten und dem zweiten Richtungsvektor gebildet wird, zu projizieren, so dass erste projizierte Ortspunkte auf der ersten Ebene erzeugt werden; die ermittelten Ortspunkte auf eine zweite Ebene, welche von dem dritten und zweiten Richtungsvektor gebildet wird, zu projizieren, so dass zweite projizierte Ortspunkte auf der zweiten Ebene erzeugt werden; eine erste Regressionsgerade durch die ersten projizierten Ortspunkte zu bestimmen, um einen ersten virtuellen Richtungsvektor zum Aufspannen der virtuellen Schreibebene zu erhalten; und eine zweite Regressionsgerade durch die zweiten projizierten Ortspunkte zu bestimmen, um einen zweiten virtuellen Richtungsvektor zum Aufspannen der virtuellen Schreibebene zu erhalten, und die ermittelten Ortspunkte auf die virtuelle Schreibebene zu projizieren. Das tragbare elektronische Gerät hat ferner eine Auswerteeinrichtung zum Analysieren der auf die virtuelle Schreibebene projizierten Ortspunkte derart, um daraus Schriftzeichen oder Symbole zu erkennen.
  • Bevorzugte Ausführungsformen der vorliegenden Erfindung werden nachfolgend Bezug nehmend auf die beiliegenden Zeichnungen näher erläutert. Es zeigen:
  • 1 eine schematische Darstellung einer tragbaren elektronischen Vorrichtung in Form eines Mobiltelefons gemäß einer bevorzugten Ausführungsform;
  • 2 eine schematische Darstellung des Ablaufs der Erfassung einer Bewegung der in 1 gezeigten Vorrichtung und der Analyse der Bewegung;
  • 3 eine schematische Darstellung einer virtuellen Schreibebene, in deren Nähe Ortspunkte angeordnet sind, welche die Bewegungskurve einer Eingabevorrichtung repräsentieren;
  • 4 eine schematische Darstellung der Schreibebene in einem dreidimensionalen Raum, welcher durch ein kartesisches Koordinatensystem aufgespannt wird;
  • 5 einen Ausschnitt aus einer ersten Ebene, welche von dem X- und Y-Vektor des Koordinatensystems aus 4 aufgespannt wird, zur Erläuterung der Bestimmung einer ersten Regressionsgeraden durch auf diese erste Ebene projizierte Ortspunkte.
  • Gemäß einer bevorzugten Ausführungsform der vorliegenden Erfindung wird vorgeschlagen, eine Bewegung eines tragbaren elektronischen Geräts, das als Eingabevorrichtung verwendbar ist, mittels einer Beschleunigungsmessung zu erfassen. Ein derartiges Gerät ist nun in 1 in der Form eines Mobiltelefons MT dargestellt. Das Mobiltelefon MT weist dabei von oben nach unten betrachtet einen Lautsprecher LS zum Ausgeben eines akustischen Signals sowie ein Display bzw. eine Anzeigeeinrichtung DSP zum Ausgeben eines optischen Signals, insbesondere zum Anzeigen von Zeichen und Symbolen, auf. Ferner umfasst das Mobiltelefon MT einen Beschleunigungssensor BS, der drei Sensorabschnitte S1, S2 und S3 aufweist. Derartige Sensorabschnitt sind dabei vorteilhafter Weise senkrecht zueinander angeordnet, um dreidimensionale Bewegungen, d. h. Bewegungen jeweils in einer X-, Y- und Z-Dimension, zu erfassen. Ein derartiger Sensorabschnitt kann dabei beispielsweise einen induktiven Beschleunigungssensor, piezoelektrischen Beschleunigungssensor oder kapazitiven Beschleunigungssensor umfassen. Das physikalische Prinzip, das dahinter steckt, beruht auf der Tatsache, dass sich die Kapazität eines Plattenkondensators mit einer vorgegebenen Querschnittsfläche bei Veränderung des Abstands der Elektrodenplatten verändert. Ein Messelement eines Beschleunigungssensors ist jedoch kein einfacher, sondern ein erweiterter Plattenkondensator, der durch eine zusätzliche Elektrodenplatte in zwei Teilkondensatoren geteilt ist. Während die zwei äußeren Elektrodenplatten fest montiert sind, ist eine mittlere Elektrodenplatte (welche zwischen den fest montierten Platten angeordnet ist) elastisch gelagert und hat zudem eine fixe Masse. Wirkt auf die mittlere Elektrodenplatte (aufgrund einer Bewegung bzw. Be schleunigung) also eine Kraft, so verschiebt sie sich um eine gewisse Distanz. Ist die Kraft weg, so geht sie wieder in ihre ursprüngliche Position zurück. Dadurch verändern sich die Abstände zwischen der ersten fixen und der mittleren Elektrodenplatte und der zweiten fixen und der mittleren Elektrodenplatte und somit auch die jeweiligen Kapazitäten. Dieser komplexe Kondensator mit der mittleren zusätzlichen Elektrode lässt sich für die Beschleunigungsmessung vorteilhaft nutzen. Wie bereits erwähnt, ist die mittlere Elektrodenplatte elastisch gelagert. Ihr mechanisches Verhalten auf Grund der Trägheit gibt die Möglichkeit, Beschleunigungen auf elektrische Art zu messen. Zudem lässt sich diese Bauart mit den drei Elektroden für eine Brückenschaltung elegant ausnützen, weil dies als Ergebnis einen linearen Zusammenhang zwischen Beschleunigung und zu messender Spannung liefert.
  • Sind die drei Sensorabschnitte S1 bis S3, wie oben erwähnt, senkrecht zueinander ausgerichtet (beispielsweise S1 in der X-Dimension, S2 in der Y-Dimension und S3 in der Z-Dimension), so sind sie nun in der Lage, eine dreidimensionale Bewegung des Mobiltelefons MT zu erfassen. Die jeweiligen erfassten Bewegungen in den einzelnen Dimensionen bzw, die jeweiligen Beschleunigungen werden in Form von Bewegungs- oder Beschleunigungsdaten BD (vgl. dazu auch 2) einer Konvertierungseinrichtung KE zugeführt. Das heißt, es werden vorteilhafter Weise die Beschleunigungen von dem Sensor BS erfasst und in digitaler Form der Konvertierungseinrichtung KE zugeführt. In der Konvertierungseinrichtung KE werden die jeweiligen Beschleunigungen bzw. Beschleunigungsdaten zweifach numerisch über die Zeit integriert, was sehr wenig Rechenzeit in Anspruch nimmt. Somit können die Aufgaben einer Konvertierungseinrichtung durch einen digitalen Signalprozessor oder sogar durch eine Mikroprozessor eines mobilen Geräts, wie eines Mobiltelefons, durchgeführt werden (beide Prozessoren sind ohnehin schon in einem solchen Gerät vorhanden). Die nun durch die Integration berechneten Positionsdaten ergeben schließlich eine Bewegungskurve oder Kurve im Ortsraum BT (vergleiche wiederum 2) des Mobiltelefons. Diese Kurve oder mehrere Kurven werden dann in einer Auswerteeinrichtung AE analysiert, um daraus Zeichen bzw. Schriftzeiten oder Symbole herzuleiten. Insbesondere kann die Auswerteeinrichtung durch eine Schrifterkennungssoftware realisiert werden.
  • Die von der Auswerteeinrichtung AE erkannten Zeichen oder Symbole können dann von der Anzeigeeinrichtung DSP dargestellt werden.
  • Das Mobiltelefon gemäß 1 hat ferner eine Schalteinrichtung SE in Form einer an der Seite angebrachten Taste, die dazu dient, die Aufzeichnung einer Bewegungskurve zu beginnen und zu beenden. Das bedeutet, wird die Taste SE gedrückt, so beginnt im Mobiltelefon MT die Aufzeichnung der Bewegung des Mobiltelefons und somit die Aufzeichnung dessen Bewegungskurve. Nachdem beispielsweise der Benutzer mit dem Mobiltelefon einen Buchstaben oder ein Schriftzeichen in die Luft geschrieben hat, kann er die Aufzeichnung der Bewegung durch Loslassen der Taste SE wieder beenden. Ansprechend auf das Loslassen der Taste findet nun eine Umwandlung der Beschleunigungsdaten durch die Einrichtungen KE und AE statt.
  • Es sei nun auf 2 verwiesen, in der noch einmal kurz die einzelnen Verfahrensschritte vom Erfassen der Bewegung des mobilen Geräts, wie des Mobiltelefons MT zum Anzeigen einer Gruppe von erkannten Schriftzeichen dargestellt ist.
  • Dabei wird in Schritt S1 von einem Beschleunigungssensor die Bewegung des mobilen Geräts, wie des Mobiltelefons MT erfasst und es werden Beschleunigungsdaten BD insbesondere in digitaler Form einer Konvertierungseinrichtung KE zugeführt. In dieser erfolgt gemäß einem Schritt S2 eine zweifache Integration der Beschleunigungsdaten BD über die Zeit, um schließlich eine Bewegungskurve oder Ortskurve der Bewegung des mobilen Geräts zu erhalten. Genauer gesagt, erfolgt vorteil hafterweise zu bestimmten Zeiten bzw. in bestimmten Zeitintervallen eine zweifache Integration der Beschleunigungsdaten über die Zeit, so dass Ortspunkte OP (vgl. 3) entlang der Kurve der Bewegung des Mobiltelefons MT erhalten werden. Es sei bemerkt, dass die in Schritt S1 erhaltenen Bewegungsdaten bzw. Beschleunigungsdaten auch anders als in Schritt S2 beschrieben verarbeitet werden können. Beispielsweise können mittels lediglich einfacher Integration Geschwindigkeitsdaten bzw. Impulsdaten des Mobiltelefons berechnet werden, um schließlich eine Bewegungstrajektorie mit einer Komponente im Ortsraum und einer Komponente im Impulsraum zu erhalten. Die erhaltene Bewegungskurve BT (bzw. die die Bewegungskurve repräsentierenden Ortspunkte) wird in Schritt S3 einem Analysevorgang bzw. einer Schrifterkennung in der Auswerteeinrichtung AE zugeführt, um schließlich den Bewegungskurven entsprechende Zeichen oder Symbole herzuleiten. Werden von der Auswerteeinrichtung AE Zeichen oder Symbole erkannt, so kann ein Erkennen beispielsweise mittels eines akustischen Signals (z.B. durch einen einfachen Ton oder durch eine akustische Ausgabe des Zeichens oder Symbols) über den Lautsprecher LS dem Benutzer mitgeteilt werden. Je nachdem, ob es sich bei den erkannten Zeichen oder Symbolen um Schriftzeichen oder Steueranweisungen handelt, können die Zeichen entweder auf der Anzeigeeinrichtung DSP als Schriftzeichen SZ in Schritt 4 angezeigt werden oder können an eine Steuereinrichtung (nicht dargestellt) des Mobiltelefons gegeben werden, damit diese entsprechende Funktionen ausführt.
  • Es sei nun auf 3 verwiesen, in der eine virtuelle Schreibebene VSE dargestellt ist, um die eine Bewegungskurve BT' bzw. die die Bewegungskurve repräsentierenden Ortspunkte OP streuen. Die soll beispielhaft anhand der Ortspunkte OP1 und OP2 veranschaulicht werden, wobei sich der Ortspunkt OP1 oberhalb der virtuellen Schreibebene VSE und der Ortspunkt OP2 unterhalb der virtuellen Schreibebene VSE befindet. Es wird dabei davon ausgegangen, dass bei einer Eingabe von Zeichen oder Steueranweisungen mittels einer frei im Raum beweg lichen Eingabevorrichtung, wie einem bezüglich den 1 und 2 erläuterten Mobiltelefon MT mit Beschleunigungssensoren, ein Benutzer die Eingabevorrichtung in einer gedachten oder virtuellen Schreibebene bewegt, um wie auf herkömmliche Weise bei der Benutzung einer Unterlage das jeweilige Zeichen oder das einer Steueranweisung zugeordnete Symbol zu "schreiben". Die Aufzeichnung einer Bewegung kann beispielsweise mittels eines Schalters an der Eingabevorrichtung begonnen und wieder beendet werden (vgl. 1). Um nun die im Raum erfassten bzw. ermittelten Ortspunkte einer Analyse unterziehen zu können, um aus den Ortspunkten Zeichen oder Steueranweisungen abzuleiten, ist es nun notwendig, die vom Benutzer gedachte oder virtuelle Schreibebene abzuschätzen.
  • Diese Abschätzung kann folgendermaßen geschehen. Wie es in 3 oder besser in 4 gezeigt ist, wurden für eine Ortskurve BT' Ortspunkte OP ermittelt, die um die virtuelle Schreibebene VSE streuen. Die virtuelle Schreibebene VSE befindet sich dabei in einem dreidimensionalen Raum, welcher durch einen X-Vektor X, einen Y-Vektor Y und Z-Vektor Z als drei ein kartesisches Koordinatensystem repräsentierende Richtungsvektoren aufgespannt ist. Zunächst werden nun die ermittelten Ortspunkte OP auf eine erste Ebene XYE projiziert, welche von dem X-Vektor X und dem Y-Vektor Y gebildet wird, so dass erste projizierte Ortspunkte POP1 auf der ersten Ebene XYE erhalten werden. Entsprechend werden die ermittelten Ortspunkte OP auf eine zweite Ebene YZE projiziert, welche von dem Z-Vektor Z und dem Y-Vektor Y gebildet wird, so dass zweite projizierte Ortspunkte POP2 auf der zweiten Ebene YZE erzeugt werden. Nun gilt es eine erste Regressionsgerade durch die ersten projizierten Ortspunkte POP1 zu bestimmen, um einen ersten virtuellen Richtungsvektor VSV1 zum Aufspannen der virtuellen Schreibebene VSE zu erhalten. Außerdem muss eine zweite Regressionsgerade durch die zweiten projizierten Ortspunkte POP2 bestimmt werden, um einen zweiten virtuellen Richtungsvektor VSV2 zum Aufspannen der virtuellen Schreibebene zu erhalten. Wie es beispielsweise wieder in 3 zu sehen ist, sind die beiden Vektoren VSV1 und VSV2 linear unabhängig (sie stehen hier sogar senkrecht zueinander), so dass sie die virtuelle Schreibebene VSE aufspannen können. Somit ist das Problem der Bestimmung der virtuellen Schreibebene auf die Bestimmung von jeweiligen zwei Regressionsgeraden in der ersten Ebene XYE und der zweiten Ebene YZE reduziert.
  • Die Bestimmung der einer jeweiligen Regressionsgeraden kann nach der Fehlerquadratmethode erfolgen, d.h. einer Methode, bei der die Summe der quadrierten Abweichungen der jeweiligen projizierten Ortspunkte POP1, POP2 von den jeweiligen Regressionsgeraden VSV1, VSV2 (die jeweiligen virtuellen Richtungsvektoren werden hier mit den Regressionsgeraden gleichgesetzt) ein Minimum wird.
  • Es sei nun beispielhaft die Bestimmung der Regressionsgeraden VSV1 in der ersten Ebene XYE anhand von 5 erläutert. Zunächst wird dabei der funktionale Zusammenhang y = f(x) festgestellt, wobei für den Erwartungswert für die Y-Koordinate in Abhängigkeit von der X-Koordinate eines projizierten Ortspunkts POP1 ein linearer Zusammenhang hergestellt werden kann. Das bedeutet die Regressionsgerade VSV1 kann durch den Zusammenhang y = a + bx beschrieben werden. Der Regressionskoeffizient a (Absolutglied oder Achsenabschnitt der linearen Regressionsfunktion) gibt den durchschnittlichen Wert des erklärten Merkmals y an, wenn das erklärende Merkmal x den Wert x = 0 annimmt. Der Regressionskoeffizient b gibt an, um wieviel sich der Wert des Merkmals y durchschnittlich verändert, wenn sich der Wert des Merkmals x um eine Einheit ändert.
  • Nun gilt es die Regressionskoeffizienten a und b so zu bestimmen, dass die Summe der quadrierten Abweichungen der projizierten Ortspunkte POP1 (mit den jeweiligen Ortskoordinaten: x1, y1; x2, y2; x3, y3; x4, y4; xn, yn, wobei in der folgenden Gleichung der Index "i" die gerade gezeigten Indizes "1" bis "n" repräsentiert) ein Minimum einnimmt, was durch folgende Gleichung ausgedrückt werden kann:
    Figure 00120001
  • Eine ausführliche Erläuterung zur Berechnung der Regressionskoeffizienten a und b zur Bestimmung einer Regressionsgeraden findet sich beispielsweise in Bronstein (Kapitel 5.2.4 'Korrelation und Regression' ab Seite 692 in der 24ten Auflage).
  • Entsprechend kann die Regressionsgerade VSV2 in der zweiten Ebene YZE bestimmt werden, wobei hier die Regressionskoeffizienten a' und b' einer Regressionsgeraden y = a' + b'z zu bestimmen sind durch die Bedingung:
    Figure 00120002
  • Sind nun alle Regressionskoeffizienten bestimmt, so können die Regressionsgeraden und somit die die virtuelle Schreibebene aufspannenden Richtungsvektoren VSV1 und VSV2 berechnet werden. Anschließend können nun die ermittelten Ortspunkte OP auf die virtuelle Schreibebene VSE projiziert werden.
  • Eine derartige Abschätzung der virtuellen Schreibebene VSE sowie die Projektion der ermittelten dreidimensionalen Ortspunkte OP auf diese Ebene kann von einer Verarbeitungseinrichtung durchgeführt werden, welche eine separate Einrichtung oder eine Teileinrichtung bereits bestehenden Komponenten einer Eingabevorrichtung, wie dem in 1 gezeigten Mobiltelefon MT, darstellt. Hier kann die Verarbeitungseinrichtung VE beispielsweise Teil der Analyseeinrichtung AE sein.
  • Da sich während der Eingabe mehrerer Zeichen oder Symbole die virtuelle Schreibebene verändern kann, ist es vorteilhaft, in bestimmten Zeitintervallen eine erneute Abschätzung der virtuellen Schreibebene VSE durchzuführen, um hinreichend gute Schätzungen für die virtuelle Schreibebene und somit die projizierten Ortspunkte OP bzw. Bewegungskurven BT, BT' für entsprechende Zeichen oder Steueranweisungen zu haben.
  • Die auf die virtuelle Schreibebene projizierten Ortspunkte können dann der Analyseeinrichtung AE (sofern die Verarbeitungseinrichtung VE nicht schon Teil der Analyseeinrichtung ist) zugeführt werden, um daraus Schriftzeichen oder Steueranweisungen zugeordnete Symbole zu erkennen. Die erkannten Schriftzeichen oder Symbole können dann von einer Steuereinrichtung STE als Steueranweisungen für das Mobiltelefon MT interpretiert werden, und beispielsweise dazu dienen einen Telefonanruf einzuleiten, ein Telefonbuch zu öffnen, usw. Es ist ferner denkbar, die erkannten und eventuell verarbeiteten Steueranweisungen über eine Schnittstelle an eine Datenverarbeitungsanlage, wie einen tragbaren (Laptop, PDR: personal digital assistant) oder stationären Computer (PC: Personal Computer), zu übertragen. Als Schnittstelle kann hierbei ein Funkmodul FM, insbesondere in der Ausführung eines "Bluetooth"-Funkmoduls, ein Infrarotmodul, usw. verwendet werden.

Claims (11)

  1. Verfahren zum Abschätzen einer virtuellen Schreibebene (VSE) mit folgenden Schritten: Erfassen einer Bewegung einer Eingabevorrichtung in einem von drei Richtungsvektoren aufgespannten dreidimensionalen Raum, indem zu bestimmten Zeiten Ortspunkte (OP; OP1, OP2) in dem dreidimensionalen Raum ermittelt werden, welche die Kurve (BT') der Bewegung der Eingabevorrichtung repräsentieren; Projizieren der ermittelten Ortspunkte (OP) auf eine erste Ebene (XYE), welche von dem ersten (X) und dem zweiten Richtungsvektor (Y) gebildet wird, so dass erste projizierte Ortspunkte (POP1) auf der ersten Ebene erzeugt werden; Projizieren der ermittelten Ortspunkte (OP) auf eine zweite Ebene (YZE), welche von dem dritten (Z) und zweiten (Y) Richtungsvektor gebildet wird, so dass zweite projizierte Ortspunkte (POP2) auf der zweiten Ebene erzeugt werden; Bestimmen einer ersten Regressionsgeraden durch die ersten projizierten Ortspunkte (POP1), um einen ersten virtuellen Richtungsvektor (VSV1) zum Aufspannen der virtuellen Schreibebene zu erhalten; Bestimmen einer zweiten Regressionsgeraden durch die zweiten projizierten Ortspunkte (POP2), um einen zweiten virtuellen Richtungsvektor (VSV2) zum Aufspannen der virtuellen Schreibebene zu erhalten.
  2. Verfahren nach Anspruch 1, bei dem der erste, zweite und dritte Richtungsvektor ein kartesisches Koordinatensystem festlegen.
  3. Verfahren nach Anspruch 1 oder 2, bei dem die Ortspunkte durch Erfassung der Beschleunigung der Eingabevorrichtung und zweifacher Integration über die Zeit zu den bestimmten Zeiten ermittelt werden.
  4. Verfahren nach einem der Ansprüche 1 bis 3, bei dem die jeweiligen Regressionsgeraden derart bestimmt werden, dass die Summe der quadrierten Abweichungen der jeweiligen projizierten Ortspunkte von den jeweiligen Regressionsgeraden ein Minimum wird.
  5. Verfahren nach einem der Ansprüche 1 bis 4, bei dem die ermittelten Ortspunkte auf die virtuelle Schreibebene projiziert werden.
  6. Verfahren nach Anspruch 5, bei dem die auf die virtuelle Schreibebene projizierten Ortspunkte derart analysiert werden, um daraus Schriftzeichen (SZ) oder Symbole zu erkennen.
  7. Verfahren nach Anspruch 6, bei dem die erkannten Schriftzeichen (SZ) oder Symbole als Steueranweisungen für die Eingabevorrichtung interpretiert werden.
  8. Verfahren nach Anspruch 7, bei dem die interpretierten Steueranweisungen in der Eingabevorrichtung verarbeitet und/oder über eine Schnittstelle (FM) an eine Datenverarbeitungsanlage übertragen werden.
  9. Tragbare elektronische Vorrichtung (MT) als Eingabevorrichtung zum Durchführen eines Verfahrens gemäß den Ansprüchen 1 bis 9.
  10. Vorrichtung nach Anspruch 9, mit folgenden Merkmalen: einem Beschleunigungssensor (BS) zum Erfassen einer Bewegung der Vorrichtung in einem von drei Richtungsvektoren aufgespannten dreidimensionalen Raum und zum Ausgeben von entsprechenden Beschleunigungsdaten (BD); einer Konvertierungseinrichtung (KE) zum Umwandeln der Beschleunigungsdaten (BD) in eine Bewegungskurve (BT) der Vorrichtung, indem zu bestimmten Zeiten Ortspunkte (OP; OP1, OP2) in dem dreidimensionalen Raum ermittelt werden, welche die Kurve (BT') der Bewegung der Vorrichtung repräsentieren; einer Verarbeitungseinrichtung die dafür eingerichtet ist: die ermittelten Ortspunkte (OP) auf eine erste Ebene (XYE), welche von dem ersten (X) und dem zweiten (Y) Richtungsvektor gebildet wird, zu projizieren, so dass erste projizierte Ortspunkte (POP1) auf der ersten Ebene erzeugt werden; die ermittelten Ortspunkte (OP) auf eine zweite Ebene (YZE), welche von dem dritten (Z) und zweiten (Y) Richtungsvektor gebildet wird, zu projizieren, so dass zweite projizierte Ortspunkte (POP2) auf der zweiten Ebene erzeugt werden; eine erste Regressionsgeraden durch die ersten projizierten Ortspunkte zu bestimmen, um einen ersten virtuellen Richtungsvektor (VSV1) zum Aufspannen der virtuellen Schreibebene (VSE) zu erhalten; eine zweite Regressionsgeraden durch die zweiten projizierten Ortspunkte zu bestimmen, um einen zweiten virtuellen Richtungsvektor (VSV2) zum Aufspannen der virtuellen Schreibebene zu erhalten; die ermittelten Ortspunkte auf die virtuelle Schreibebene zu projizieren; einer Auswerteeinrichtung (AE) zum Analysieren der auf die virtuelle Schreibebene projizierten Ortspunkte derart, um daraus Schriftzeichen (SZ) oder Symbole zu erkennen.
  11. Vorrichtung nach einem der Ansprüche 9 oder 10, welche als ein Mobilfunkgerät, ein Mobiltelefon (MT), ein kleiner tragbarer Computer oder als eine Uhr ausgebildet ist.
DE102004008253A 2004-02-19 2004-02-19 Verfahren zum Abschätzen einer virtuellen Schreibebene Withdrawn DE102004008253A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102004008253A DE102004008253A1 (de) 2004-02-19 2004-02-19 Verfahren zum Abschätzen einer virtuellen Schreibebene
PCT/EP2005/050506 WO2005081095A2 (de) 2004-02-19 2005-02-07 Verfahren zum abschätzen einer virtuellen schreibebene

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102004008253A DE102004008253A1 (de) 2004-02-19 2004-02-19 Verfahren zum Abschätzen einer virtuellen Schreibebene

Publications (1)

Publication Number Publication Date
DE102004008253A1 true DE102004008253A1 (de) 2005-09-15

Family

ID=34853547

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102004008253A Withdrawn DE102004008253A1 (de) 2004-02-19 2004-02-19 Verfahren zum Abschätzen einer virtuellen Schreibebene

Country Status (2)

Country Link
DE (1) DE102004008253A1 (de)
WO (1) WO2005081095A2 (de)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10187341A (ja) * 1996-12-26 1998-07-14 Brother Ind Ltd 画像認識装置
WO2004029866A1 (en) * 2002-09-28 2004-04-08 Koninklijke Philips Electronics N.V. Method and system for three-dimensional handwriting recognition
EP1460577A2 (de) * 2003-03-17 2004-09-22 Samsung Electronics Co., Ltd. Bewegungsdetektion für Handschriftenerkennung

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0728591A (ja) * 1993-05-13 1995-01-31 Toshiba Corp 空間操作マウスシステム及び空間動作パターン入力方法
US5598187A (en) * 1993-05-13 1997-01-28 Kabushiki Kaisha Toshiba Spatial motion pattern input system and input method
US5902968A (en) * 1996-02-20 1999-05-11 Ricoh Company, Ltd. Pen-shaped handwriting input apparatus using accelerometers and gyroscopes and an associated operational device for determining pen movement
SE9800851D0 (sv) * 1998-03-16 1998-03-16 Johan Ullman Anordning för teckeninmatning
WO1999048268A1 (de) * 1998-03-19 1999-09-23 Siemens Aktiengesellschaft Vorrichtung zur mobilen kommunikation
DE19937307A1 (de) * 1998-08-10 2000-02-17 Deutsch Zentr Luft & Raumfahrt Verfahren zum Auslösen von technischen Steueroperationen und/oder zum Auslösen der Ausführung von technischen Funktionen sowie Anordnung zur Durchführung des Verfahrens
DE10065621A1 (de) * 2000-12-29 2002-07-18 Kurt Haider Elektronisches Eingabegerät

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10187341A (ja) * 1996-12-26 1998-07-14 Brother Ind Ltd 画像認識装置
WO2004029866A1 (en) * 2002-09-28 2004-04-08 Koninklijke Philips Electronics N.V. Method and system for three-dimensional handwriting recognition
EP1460577A2 (de) * 2003-03-17 2004-09-22 Samsung Electronics Co., Ltd. Bewegungsdetektion für Handschriftenerkennung

Also Published As

Publication number Publication date
WO2005081095A2 (de) 2005-09-01
WO2005081095A3 (de) 2005-11-17

Similar Documents

Publication Publication Date Title
DE112010002760B4 (de) Benutzerschnittstelle
DE112009002612B4 (de) Anzeige-Eingabevorrichtung, Navigationssystem mit einer Anzeige-Eingabevorrichtung sowie Fahrzeuginformationssystem mit einer Anzeige-Eingabevorrichtung
DE112017008192T5 (de) Bedienunterstützungseinrichtung, Berührungsfeldeinrichtung und Berührungsfeldeingabesystem
DE10310794B4 (de) Bedieneinrichtung und Kommunikationsgerät
DE102010007455B4 (de) System und Verfahren zum berührungslosen Erfassen und Erkennen von Gesten in einem dreidimensionalen Raum
DE112011100087T5 (de) Gestenerkennung auf einer tragbaren Vorrichtung mit einem kraftempfindlichen Gehäuse
DE202005021492U1 (de) Elektronische Vorrichtung mit berührungsempfindlicher Eingabeeinrichtung
DE112014006608T5 (de) Kräfteaufteilung für Multi-Touch-Eingabevorrichtungen elektronischer Vorrichtungen
DE202008005342U1 (de) Elektronische Vorrichtung
DE202013012353U1 (de) Mobiles Endgerät und Steuerverfahren dafür
DE102010028983A1 (de) Zweidimensionale Berührungssensoren
DE102010038655A1 (de) Verfahren und Vorrichtung für das Zoomen mit einer einzigen Berührung unter Verwendung einer Spiraldrehung
DE112013003647T5 (de) Gesten- und Berührungseingabeerfassung durch Kraftabtastung
DE112016006646T5 (de) Koordinatenkorrekturvorrichtung, koordinatenkorrekturverfahren und koordinatenkorrekturprogramm
DE112013004585T5 (de) Inkrementelle merkmalbasierte Gestentastatur-Dekodierung
DE102005021527A1 (de) Anordnung zum Eingeben von Schriftzeichen
DE102007032753A1 (de) Mobiles Endgerät mit einer Dreheingabevorrichtung und Verfahren zur Empfindlichkeitseinstellung unter Verwendung derselben
DE202008005343U1 (de) Elektronische Vorrichtung mit behinderungsfreier Bedienung
DE102012207026A1 (de) Sensorzeit (Sensor Time)
DE202008005341U1 (de) Elektronische Vorrichtung
DE112020004536T5 (de) Dynamische flexschaltung für kamera mit bewegbarem bildsensor
DE102014219602B4 (de) Elektronische Vorrichtung und Informationsverarbeitungsverfahren
DE102012103911A1 (de) Messvorrichtung für dimensionelle Mess- und Kenngrößen mit separater Steuereinrichtung
DE112017005980T5 (de) Anzeigesteuervorrichtung, anzeigesteuerverfahren und computerprogramm
DE602004009402T2 (de) Daumenrad und Schalter für ein mobiles elektronisches Gerät und Verfahren dafür

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
OP8 Request for examination as to paragraph 44 patent law
8130 Withdrawal