JP2010536076A - 仮想キーパッドシステム及び方法 - Google Patents

仮想キーパッドシステム及び方法 Download PDF

Info

Publication number
JP2010536076A
JP2010536076A JP2010515128A JP2010515128A JP2010536076A JP 2010536076 A JP2010536076 A JP 2010536076A JP 2010515128 A JP2010515128 A JP 2010515128A JP 2010515128 A JP2010515128 A JP 2010515128A JP 2010536076 A JP2010536076 A JP 2010536076A
Authority
JP
Japan
Prior art keywords
key
touchpad
keypad
zone
keys
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010515128A
Other languages
English (en)
Other versions
JP5323070B2 (ja
Inventor
モーリン フィリップ
クライゼ デビッド
リガツィオ ルカ
ベプレック ピーター
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Publication of JP2010536076A publication Critical patent/JP2010536076A/ja
Application granted granted Critical
Publication of JP5323070B2 publication Critical patent/JP5323070B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1698Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a sending/receiving arrangement to establish a cordless communication link, e.g. radio or infrared link, integrated cellular phone
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0237Character input methods using prediction or retrieval techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42226Reprogrammable remote control devices
    • H04N21/42227Reprogrammable remote control devices the keys being reprogrammable, e.g. soft keys
    • H04N21/42228Reprogrammable remote control devices the keys being reprogrammable, e.g. soft keys the reprogrammable keys being displayed on a display screen in order to reduce the number of keys on the remote control device itself
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

テキストを入力するための仮想キーパッドシステムであって、複数のタッチゾーンに分割された少なくとも1つのタッチパッドが組み込まれたリモートコントローラと、前記リモートコントローラとデータ通信し、かつ、前記タッチパッドの各タッチゾーンにキーがマッピングされたキーパッドを含むユーザインタフェースを表示する表示装置と、特定の文字を選択するための所定のタッチゾーンを押圧しているオペレータに応答して、1つ以上の次のもっともらしいキーを予測するために1つ以上のキー予測方法を実行する予測モジュールと、前記1つ以上の次のもっともらしいキーに基づいて、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングするキーマッピングモジュールとを備える仮想キーパッドシステムを提供する。

Description

本発明は、リモートコントローラからのテキスト入力を認識するための方法とシステムに関する。
多くの家電製品は、遠隔制御装置を搭載している。これらの遠隔制御装置は、電子製品にさまざまな命令を通信することができる。電子製品が技術的に進歩するにつれ、遠隔制御装置の操作は複雑化している。例えば、現代のテレビのリモートコントローラには、ボリューム、チャンネルの選択、メニューの選択及び画像視聴のための選択ボタンを含めることができる。リモートコントローラを操作するには、ユーザは、視聴中の番組から目を逸らせて、そのボタンを注視する時間をとらなければならない。そのため、視聴者にとって非常に気が散ることがある。
加えて、オンラインショッピングのような多くのインターネットベースのサービスが、テレビを通して提供されている。そのような新サービスに対応するためには、キーパッドボタンのような追加的な選択ボタンを、遠隔制御装置に含めなければならない。新規な選択ボタンを含めると、遠隔制御装置のコストが高くつくばかりか、装置を複雑化することにもなる。そのような課題に対処するため、さまざまな解決法が提案されてきた。米国特許第6765557号明細書には、対話型テレビのような家庭用娯楽装置を制御するためのタッチパッドの使用に関する技術が、1つの解決法として記載されている。しかしながら、この解決法は、ユーザにとって不便であるという課題を解消するには十分とは言えない。
このセクションの記載は、本願の開示に関連した背景情報を単に提供するものであり、従来技術を構成しなくてもよい。
テキストを入力するための仮想キーパッドシステムであって、複数のタッチゾーンに分割された少なくとも1つのタッチパッドが組み込まれたリモートコントローラと、前記リモートコントローラとデータ通信し、かつ、前記タッチパッドの各タッチゾーンにキーがマッピングされたキーパッドを含むユーザインタフェースを表示する表示装置と、特定の文字を選択するための所定のタッチゾーンを押圧しているオペレータに応答して、1つ以上の次のもっともらしいキーを予測するために1つ以上のキー予測方法を実行する予測モジュールと、前記1つ以上の次のもっともらしいキーに基づいて、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングするキーマッピングモジュールとを備える仮想キーパッドシステムを提供する。
さらなる適用可能領域を、本願明細書の記載により明らかにする。これらの説明及び具体例は、単に例示を目的とするものであり、本願の開示範囲を限定する意図はないと理解されるべきである。
[本願の背景技術に関する詳細情報]
本願は、2007年6月28日及び2007年10月24日にそれぞれ出願された、米国特許出願番号60/946858及び11/977346の利益を請求する。上記出願の全開示内容を、ここでの引用により援用する。
本願明細書において記載されている図面は、単に例示を目的とするものであり、いかなる形であれ本願の教示範囲を限定することを意図しない。
図1は、本願の開示のさまざまな態様に係るテキスト入力システムを説明する図である。 図2Aは、本願の開示のさまざまな態様に係るタッチパッドを有する図1のテキスト入力システムのリモートコントローラを説明する図である。 図2Bは、本願の開示のさまざまな態様に係る図2Aのリモートコントローラの内部構成要素を説明するブロック図である。 図3は、本願の開示のさまざまな態様に係る図1のテキスト入力システムの仮想キーパッドモジュールを説明するデータフロー図である。 図4Aは、本願の開示のさまざまな態様に係る縦方向位置で保持されているリモートコントローラを説明する図である。 図4Bは、本願の開示のさまざまな態様に係る横方向位置で保持されているリモートコントローラを説明する図である。 図5は、タッチパッドのXY座標とキーパッドのキーとの間のマッピングを説明するテーブルである。 図6は、タッチパッドの座標とキーパッドのキー間の再マッピングを説明するテーブルである。 図7は、本願の開示のさまざまな態様に係る仮想キーパッドのグラフィカルユーザインターフェースの第1の実施形態を説明する図である。 図8Aは、本願の開示のさまざまな態様に係る仮想キーパッドのグラフィカルユーザインターフェースの第2の実施形態を説明する図である。 図8Bは、本願の開示のさまざまな態様に係る仮想キーパッドのグラフィカルユーザインターフェースの第3の実施形態を説明する図である。 図9は、本願の開示のさまざまな態様に係る仮想キーパッドのグラフィカルユーザインターフェースの第4の実施形態を説明する図である。 図10は、本願の開示のさまざまな態様に係る仮想キーパッドのグラフィカルユーザインターフェースの第5の実施形態を説明する図である。
以下の説明は、本質的に例示に過ぎず、本願の教示、それらの適用例又は用途を限定することを意図しない。図面全体にわたって、対応する参照符号は、類似又は対応する部分及び特徴を示していると理解されるべきである。ここで用いられるように、モジュール又はサブモジュールという語は、1つ以上のソフトウェア又はファームウェアプログラムを実行するプロセッサ(共有、専用又は集合)及びメモリ、及び/又は、上述の機能及び/又はその組み合わせを提供することができる他の適切な構成要素を指すことがある。
図1をここで参照すると、図1は、本願の開示のさまざまな態様に従って実装される例示的なテキスト入力システム10を表す。例示的なテキスト入力システム10は、表示装置14を通して配信されるさまざまなサービスと相互作用するための、ユーザが英数字を入力しやすいようにする仮想キーパッドモジュール12を含む。表示装置14は、テレビ(図示されるように)、プロジェクタ及びスクリーン、又は、コンピュータであってもよいが、これらに限定されない。例えば、これらのサービスは、オンラインショッピング及び映画配信などのインターネットベースのサービスであってもよい。仮想キーパッドモジュール12は、グラフィカルユーザインターフェース(GUI)18を介して、ユーザにフィードバックする。後で詳しく述べるように、GUI18は仮想キーパッド20を含む。
さまざまな実施形態において、仮想キーパッドモジュール12を、表示装置14の内部に実装することができる。さまざまな他の実施形態において、仮想キーパッドモジュール12は、表示装置14とは独立して(例えば、セットトップボックス(図示せず)などに)実装され、表示装置14とデータ通信を行うことができる。考察しやすくするために、表示装置14の内部に実装されている仮想キーパッドモジュール12を前提にしてこれ以降の開示を行う。
テキスト入力システム10は、さらに、ユーザ入力に応答して表示装置14に対し1つ以上の信号を生成するリモートコントローラ16を含む。仮想キーパッドモジュール12は、信号を受信して処理する。信号に基づいて、仮想キーパッドモジュール12は、リモートコントローラ16の方位と保持位置とを決定し、テキスト入力を認識し、かつ/又は、グラフィカルユーザインターフェース(GUI)18を介して、ユーザに、視覚的フィードバックを行う。特に、仮想キーパッドモジュール12は、人間のタイピング(つまり、クリック)エラーを補償する選択自動修正方法を実装する。例えば、テキストを素早く入力しようとするとき、ユーザは、意図する位置に届かなかったり行き過ぎたりして、そばの意図しないキーをクリックしてしまうことが多々ある。仮想キーパッドモジュール12は、ユーザによって最も入力されそうな文字を決定するために、予測方法と自動修正方法の組合せを用いる。
ある実施形態では、入力速度が速い場合、起こりうる行き過ぎや未達を補償するために、ある予測方法が用いられる。さらに詳細に後述するように、次の文字の予測リストにはないキーの起動エリアを減少させる(又はゼロにする)とともに、可能性のあるキーの起動エリアを拡張するために、予測を用いることができる。しかしながら、これらの予測方法によって予測を生成できない場合、入力速度が早くても、仮想キーパッドモジュール12は、選択自動修正方法を使用不能にし、デフォルトモード(すなわち、起動エリアを拡張又は減少しない)に戻る。一般的に、クリックエラーは相互作用が遅いときには起こらないと仮定されるので、仮想キーパッドモジュール12は、相互作用が遅くなるときも、選択自動修正方法を使用不能にすることができる。
図2A及び2Bは、本願の開示のさまざまな態様に従った例示的なリモートコントローラ16を説明する。図2Aに示すように、リモートコントローラ16の外装には、タッチパッド22と1つ以上のソフトキー24a〜24dとが備えられる。さまざまな実施形態において、タッチパッド22の1つ以上の座標によって定義されるタッチゾーンを、仮想キーパッド20(図1)の特定のキーにマッピングすることができる。
ユーザは、関連付けられたタッチゾーン上又はその近くのタッチパッド22に親指か他の指をそっと置くこと(FingerDownイベント)、タッチパッド22に沿って関連付けられたタッチゾーン上へ指をドラッグすること(FingerDragイベント)、及び/又は、タッチパッド22から指を離すこと(FingerUpイベント)により、仮想キーパッド20の特定のキーを選択することができる。ユーザは、タッチパッド22上に指がある間に(すなわち、FingerDownイベントとFingerUpイベントとの間に)、より強い力を加え(FingerPressイベント)、続いて、その力を解放する(FingerReleaseイベント)ことにより、タッチパッド22上でクリックしてキーを選択することができる。
さまざまな他の実施形態において、相対的アクセス法を、キーを選択するための代替的又は第2の方法として用いることができる。相対的アクセス法では、ユーザの親指又は他の指の位置がタッチパッド22の現在の座標又はタッチゾーンにあると仮定する。ユーザによる次のジェスチャは、その座標又はタッチゾーンに対し相対的に解釈される。これにより、選択精度の調整が可能になる。
リモートコントローラ16の重要な機能(例えば、ボリューム、チャンネル及びミュートなど)を、タッチパッド22の特定の選択ボタン26a〜26dに関連付けることができる。この選択ボタン26a〜26dを、タッチパッド22(図示されるように)上に描かれるか照らされる特定のタッチパッドボタンによって、又はGUI18(図1)の仮想キーパッド20(図1)にオーバーレイ表示されるボタンによって、示すことができる。これにより、ユーザは、表示装置14(図1)に表示されているコンテンツから目を逸らす必要もなく暗闇でもリモートコントローラ16を使用できる。
これらの機能は、単にボタンを触るか、特定のジェスチャを行うことにより制御可能である。ある実施例においては、タッチパッド22の右面上で親指又は他の指を上下にスライドすることが、ボリュームの上下動作のトリガとなる。別の実施例では、タッチパッド22の上面上で指を左右にスライドすることが、チャンネルの上下動作のトリガとなる。
さまざまな実施形態において、リモートコントローラ16の本体には柔らかい材料を用いてもよく、それにより強く握ることも可能になる。特に、GUI18(図1)が選択肢(例えば、スライドショーで「next」ボタン)を提示せずに確認のために単に待機している場面では、ユーザは、ある動作のトリガとしてリモートコントローラ16を強く握る場合がある。
図2Bに示すように、リモートコントローラ16は、入力センサ30、出力アクチュエータ32、入力コントローラ34、出力コントローラ36、プロセスハンドラ38、ワイヤレス送信機40(例えば、RF、Bluetoothなど)及び/又はそれらの組合せを内部構成要素として備えるが、これらに限定されるものではない。以下に、入力センサ30を備えるセンサが実行する動作の例について説明する。入力センサ30には、タッチパッドセンサ42を含めることができる。タッチパッドセンサ42は、タッチパッド22(図2A)上の少なくとも2つの接触点を同時に選択できるように並べて搭載される複数の単一位置記録タッチパッドセンサである。あるいは、タッチパッドセンサ42は、同等の精度で、同時に2つの接触点を記録することができる単一の複数タッチ可能タッチパッドセンサであってもよい。さまざまな実施形態において、タッチパッドセンサ42は、タッチパッド22(図2A)をクリック可能にするために押圧情報を記録することができる。
入力センサ30には、また、1つ以上の選択ボタンセンサ44、1つ以上のタッチパッドボタンセンサ46、1つ以上の加速度計48、及び、1つ以上の保持センサ50を含めることができる。例えば、保持センサ50は、リモートコントローラ16の境界周辺に、及び/又は、リモートコントローラ16の後部に配置される容量性センサであってもよい。保持センサ50は、ユーザが保持センサ50近くのリモートコントローラ16のエリアに触れているかどうかを示す。加速度計48は、リモートコントローラ16の位置を示す3軸加速度計であってもよい。入力コントローラ34は、動作中の全センサからリアルタイムデータを読み出す。さまざまな実施形態において、消費電力を減らすため、いくつかのセンサは常に動作中でなくてもよい。プロセスハンドラ38は、送信されるデータを集めてパケットを形成し、かつ/又は、ローカル動作を実行するために1つ以上の動作中のセンサからのリアルタイムデータを処理する。RF送信機40(RFドライバ40)は、表示装置14(図1)に対し、パケット形式の信号を生成する。
出力アクチュエータ32には、スクリーン上のGUI18との相互作用状態が特定の状態であれば、タッチパッドボタン26a〜26dを表示するための1つ以上のLEDパネル52を含めることができる。出力アクチュエータ32には、ユーザに対し、追加的又は代替的に、充分な触覚的フィードバックを行うためのアクチュエータを含めることができる(例えば、振動アクチュエータ54、光アクチュエータ55及び/又はスピーカアクチュエータ56など)。以上が、出力アクチュエータ32が行う動作の一例である。出力コントローラ36は、動作中の全アクチュエータの状態を更新する。
図3をここで参照すると、データフロー図は、より詳細に例示的な仮想キーパッドモジュール12を説明する図である。本開示に従った仮想キーパッドモジュール12のさまざまな実施形態においては、任意の数のサブモジュールを含めてもよい。すでに明らかなように、図3に示されるサブモジュールを、同様にテキスト入力を実行するように、結合し、及び/又は、さらに分割してもよい。データ入力70、72、74、及び76は、リモートコントローラ16(図1)から、及び/又は、表示装置14(図1)内部の他のモジュール(図示せず)から、仮想キーパッドモジュール12へ引き渡される。さまざまな実施形態において、仮想キーパッドモジュール12は、方位認識モジュール60、手位置認識モジュール62、予測モジュール64、キー入力モジュール66、キーマッピングモジュール67、及び、GUI管理モジュール68を備える。以下では、各モジュールが実行する動作の一例を説明する。方位認識モジュール60は、保持センサ50(図2B)及び加速度計48(図2B)から引き渡されるデータに基づいて、リモートコントローラ16の向きを決定する。例えば、ユーザは、図4Aに示すように縦方向位置で、又は、図4Bに示すように横方向位置で、リモートコントローラ16(図2A)を保持している場合がある。さまざまな実施形態において、方位認識モジュール60は、人工ニューラルネットワーク(ANN)を手段として用いることにより、方位を決定する。ANNは、横方向位置状況及び縦方向位置状況を示すデータを用いて訓練可能である。
1つの実施例において、方位は、センサのデータを用いてANNを訓練することにより特定される。このセンサのデータには、n個の容量性の保持位置センサの3次元加速度(accx、accy、accz)と動作状態とを含めることができる。このセンサは、人間の皮膚が近くにある場合には1を示し、近くにない場合には0を示す信号を送る。これらのn+3で表される値は、リモートコントローラ16(図2A)が水平であるか垂直であるかを決定するために、単一のパーセプトロン又は線形分類器に入力される。パーセプトロン係数を、製造者によって、データベース上で訓練し、ハードコード化してもよい。手位置認識モジュール62は、保持センサ50(図2B)及び加速度計48(図2B)から引き渡されるデータに基づいて、リモートコントローラ16(図2A)の保持スタイルを決定する。例えば、リモートコントローラ16(図2A)が片手と両手のいずれで保持されていかを決定するために、さらに、片手で保持されている場合には、左手と右手のいずれで保持されているかを決定するために、センサのデータ70及び72を用いてもよい。さまざまな実施形態において、手位置認識モジュール62は、ANNを手段として用いて保持スタイルを決定する。このANNは、右手の状況、左手の状況、及び両手の状況を示すデータを用いて訓練することができる。
ある実施例においては、上述したのと同様に手の位置が特定される。複数のパーセプトロンを、1つ以上の二分決定(例えば、左手、右手、両手を示す)を決定するために実装してもよい。
さらに詳細に後述するように、方位及び保持スタイルを決定することで、テキスト入力方法とGUI18(図1)の視覚及び触覚を自動的に適応させることによって、ユーザへの対応能力を仮想キーパッドモジュール12に与える。このようにして方位及び保持位置を特定すれば、ユーザは、個人的な好みや実際の使用状況(例えば、立つ、座る、横になるなど)に基づき、最も便利な方法でリモートコントローラ16(図2A)を保持可能になる。暗い部屋でリモートコントローラ16(図2A)を操作する場合、ユーザは、それをどのように保持しているかについて心配することなく、リモートコントローラ16(図2A)を手にとって操作することができる。
手位置認識モジュール62は、保持センサデータ70、加速度計データ72、追加的なセンサ情報(例えば、ユーザの手のひらの画像)及び/又はバイオセンサの組合せに基づいて、さらにユーザ承認を実行することができる。このデータを、完全にユーザの身元を特定、又は、より広くユーザが属するカテゴリー(例えば、左利き、右利き、子供、大人、老人など)を推定するために用いることができる。例えば、ペアレンタルコントロール、個人化及びプロフィールの切り替えのために、ユーザ識別を用いることができる。GUI18(図1)を適応させるためにユーザをカテゴリー化することができる。
キーマッピングモジュール67は、タッチパッド22(図2A)の座標又はタッチゾーンと、キーパッドのキー及び/又はタッチパッド選択ボタンとの関連を示すマップを生成する。さまざまな実施形態において、キーマッピングモジュール67は、それぞれ、方位認識モジュール60及び手位置認識モジュール62からそれぞれ特定される方位情報と手位置情報とに基づいてマップを生成する。キーマッピングモジュール67は、タッチゾーンのXY座標のそれぞれにキーパッドのキーを関連付けることにより、タッチパッド22のタッチゾーンをキーパッドのキーにマッピングする。このとき、タッチゾーンは、タッチパッド22の1つ以上のXY座標によって定義される。キーマッピングモジュール67は、上述のマッピングによりマップを生成する。このとき、生成されたマップは、タッチパッド22の座標によって定義される2次元のルックアップテーブルである。例えば、図5に示すように、マップは、タッチパッド22(図2A)の各々の座標に、キーパッドのキー及び/又はタッチパッドの選択ボタンを割り当てるために用いる2次元(XY)のテーブル80であってもよい。さらに詳細に後述するように、その後、このマップは、行われる動作を決定するためにキー入力モジュール66によって参照可能であり、GUI18(図1)を生成するためにGUI管理モジュール68によって参照可能である。
図3を再度参照すると、キー入力モジュール66は、タッチパッドセンサデータ74及び/又は加速度計データ72を処理する。さまざまな実施形態において、キー入力モジュール66は、タッチパッド22(図2A)の座標となるタッチパッドセンサデータ74を解釈し、当該座標に基づき、行われるであろう動作を決定する。例えば、キー入力モジュール66は、タッチパッドセンサデータ74を受信することができ、データ74からの特定の座標を決定することができ、キーマッピングモジュール67によって生成されるマップを参照することができる。キー入力モジュール66は、マップのエントリに基づいて、例えば、ユーザの指がキーパッドの特定のキーの上方に留まっており、特定のテキストを入力しようとしていると予測することができる。
さまざまな実施形態において、キー入力モジュール66は、加速度計データ72をとるべき動作として解釈する。例えば、加速度計データ72は、ユーザが、例えば、大文字モードを選択するために、急速にリモートコントローラ16(図2A)を持ち上げたかどうかを示すことができる。例えば、加速度計データ72は、ユーザが、例えば、小文字モードを選択するために、急速にリモートコントローラ16(図2A)を下げた場合に、そうと示すことができる。
テキストが入力される精度及び速度を向上させるために、予測モジュール64は、ユーザが選択しようとしているキー及び/又は語の予測を生成する。予測モジュール64は、タッチパッドセンサデータ74に基づいて、及び/又は、前に入力されたテキストを決定することにより、予測を生成する。さまざまな実施形態において、予測モジュール64は、1つ以上の次キー予測方法、例えば、言語モデル方法、軌道分析法、手運動分析法、タイミング分析法及び/又はこれらの組み合わせなどを実行する。つまり、予測モジュール64は、特定の文字を選択するために所定のタッチゾーンを押圧しているオペレータに応答して、1つ以上の次のもっともらしいキーを予測するための1つ以上のキー予測方法を実行する。なお、オペレータとは、タッチパッド22を操作するための、ユーザの指やタッチペンなどである。
ある実施例において、予測モジュール64は、前に入力されたテキストに基づいて次のキーを予測するための、当業界で知られる1つ以上の言語モデルを用いる。言語モデルは、例えば、オペレータによって選択された前の文字に基づいて、1つ以上の次のもっともらしいキーを予測する。例えば、部分的な語『pr』が入力された場合、言語モデルは、母音が後に続きそうであり、文字『r』が続く可能性はないと予測することができる。
他の実施例では、予測モジュール64は、部分的な語の入力から、完全な語として信頼性が高い候補のリストを提供するための1つ以上の言語モデルを用いる。この場合、言語モデルは、オペレータによって選択された前の文字に基づいて、もっともらしい語のリストを生成する。完全な語は、自動完成のためにユーザが選択可能である。例えば、部分的な語『Pan』が入力された場合、『Panasonic』や『Pan−American』を含むリストを生成することができる。残りの文字をタイプする代わりに、ユーザは、単に完全な語の1つを選択することができる。
さまざまな実施形態において、言語モデルは、以前に入力された語に基づいて単語予測を生成することができる。例えば、一旦選択された単語は記憶可能であり、言語モデルは、記憶された単語を優先するよう適応可能である。
さらに別の実施例において、タッチパッドセンサデータ74によって示されるように、タッチパッド22(図2A)上のユーザの親指又は他の指の動きの方向及び/又は速度を含む将来の経路推定に基づいて、可能性のある次のキーを予測するために、軌道分析法を実行することができる。軌道分析法では、タッチパッド22上のオペレータの動きの方向に基づいて、次のもっともらしいキーが予測される。例えば、ユーザが最初に『k』キーを選び、言語モデルが次のキーは『l』、『e』、『a』のうちのいずれか1つでありうると予測した場合、ユーザの指が向かっている方向と動きの速度とを決定し、それにより1つ以上の選択肢を排除するように、タッチパッドセンサデータ74を評価することができる。
例えば、軌道分析法は、キー『k』の座標と次の指の動きとを決定する。XY座標の履歴から、将来の経路が決定される。経路には、短期の予測(精度に優れる)と、より長期の予測(精度で劣る)とからなる許容範囲が含まれる。将来の経路推定が、予測されたキーの座標から離れる方へ向かっている場合、この選択肢は排除される。例えば、経路がUp/Left対角線に向かっている場合、キー『e』と『a』とは排除され、キー『l』が予測された次のキーとして選択される。
別の例では、手位置認識モジュール62によって提供される保持スタイル情報と、予測モジュール64によって提供される予測とを用いて、手運動分析法を実行してもよい。手運動分析法では、次のもっともらしいキーは、タッチパッド22上で移動している手の検出に基づいて予測される。手運動分析法では、リモートコントローラ16(図2A)が両手と片手のいずれで保持されるかを評価することができる。リモートコントローラ16(図2A)が両手で保持され、かつ、右手又は左手による運動が検出された場合、動いていない手と関連付けられた選択肢は排除されるだろう。
例えば、ユーザが最初に『k』キーを選択し、予測モジュール64が次のキーは『l』、『e』、『a』のうちのいずれか1つでありうると予測し、かつ、右手の運動が検出された場合、キー『e』と『a』は排除され、キー『l』が予測された次のキーとして選択される。
さらに別の実施例において、予測モジュール64が、次キー予測方法のいずれによっても、適切な次のキー又は単語を予測することができない場合、タイミング分析法を実行してもよい。そのような場合とは、ユーザが名字又はパスワードなどの固有名詞を入力する場合などである。タイミング分析法では、あるキーから次のキーに移動するためにユーザが要した時間を評価する。つまり、タイミング分析法では、次のもっともらしいキーは、タッチパッド22上のオペレータの動きのタイミングに基づいて予測される。より具体的には、タイミング分析法では、タイミングが予め定められた制限を越える場合には、次のもっともらしいキーを予測しない。このとき、キーマッピングモジュール67は、タッチパッド22のタッチゾーンを、次のもっともらしいキーがないことに基づいて、キーパッドのキーに再マッピングする。ユーザの指がもっとゆっくり移動する場合、固有名詞が入力されている可能性がより高い。その場合、予測は無視される。
予測モジュール64によって提供される予測に基づいて、キーマッピングモジュール67は、タッチパッド22(図2A)の座標を、仮想キーパッド20(図1)のキーに再マッピングすることができる。つまり、キーマッピングモジュール67は、予測モジュール64によって予測された1つ以上の次のもっともらしいキーに基づいて、キーパッドのキーにタッチパッド22のタッチゾーンを再マッピングする。さまざまな実施形態において、予測された次のキーと関連付けられた座標を、キーへのアクセスを容易にするために拡大することができる。例えば、図6に示すように、予測された次のキーが『p』である場合、キー『o』又は『l』に以前マッピングされていた座標が、今回キー『p』にマッピングされるように、マップを調整してもよい。このようにして、ユーザが『l』キーの上方に実際に留まっている場合に、ユーザがタッチパッド22(図2A)をクリックしたときは、『p』キーが選択され入力される。
図3を再度参照すると、さまざまな実施形態で、キーマッピングモジュール67は、ユーザの指の動きの相対的な速度に基づいて、座標をキーに再マッピングすることができる。例えば、キーマッピングモジュール67は、より速い動きが検出された場合、予測されたキーがより大きなタッチゾーンエリアにマッピングされるように、座標を再マッピングすることができる。キーマッピングモジュール67は、より遅い運動が検出された場合、原座標を保持するか原座標に再マッピングすることができる。キーマッピングモジュール67は、速くも遅くもない運動が検出された場合、より大きなエリアと最初のエリアとの間でエリアを拡大したり縮小することができる。
GUI管理モジュール68は、GUI18を表示するためのGUIデータ76を生成する。GUI18は、リモートコントローラ16(図2A)を用いて実行する動きを示しているユーザに、視覚的フィードバックを行う。図7〜10の例示的なGUI18に示すように、GUI18には、複数の英数字キー90、1つ以上の選択ボタン92、選択リスト94、テキスト表示ボックス96、タイトルバー98及び/又はこれらの組合せからなる仮想キーパッド20を含めてもよい。
後述するように、タッチパッド22は、2つの操作ゾーン(第1操作ゾーン及び第2操作ゾーン)に分割される。キーマッピングモジュール67は、タッチパッド22の第1操作ゾーンにキーパッドの第1サブセットキーをマッピングし、タッチパッド22の第2操作ゾーンにキーパッドの第2サブセットキーをマッピングする。例えば、第1操作ゾーンは、タッチパッド22の上部又は右側のゾーンに相当し、第2操作ゾーンは、タッチパッドの下部又は左側のゾーンに相当するように分割される。ここで、第1サブセット及び第2サブセットは、例えば、キーパッドの複数のキーの集まりを示す。さまざまな実施形態において、GUI管理モジュール68は、手位置認識モジュール62及び方位認識モジュール60でそれぞれ決定した保持位置及び方位に基づいて、仮想キーパッド20を表示する。例えば、図7に示すように、横方向位置でリモートコントローラ16(図2A)を保持するために両手が用いられる場合、仮想キーパッド20及びタッチパッド22を、2つのゾーン100及び102(例えば、左右)に分割してもよい。右側のゾーン102のキーを、タッチパッド22の第1ゾーン104と関連付け、左側のゾーン100のキーを、タッチパッド22の第2ゾーン106と関連付けてもよい。ユーザは、右の親指又は他の指で右側のゾーン102のキー90を選択することができ、左の親指又は他の指で左側のゾーン100のキー90を選択することができる。ユーザが、どのキー90をどの指で選択するか決定できるように、ゾーン100及び102それぞれのキー90に特定の色をつけたりシェーディングを施すことにより、それらを区別してもよい。これにより、典型的なキーボード上でテキストを入力するように、自然なテキスト入力が可能になる。
この例では、2つの最も可能性が高い語(例えば『Panasonic』と『Pan America』)を表示することにより、予測された語(自動完成)を選択可能になる。この選択ボタン92は、自動完成選択ボタンである。ユーザが選択ボタン92の1つを選択すると、選択ボタン92に表示された可能性が高い語が、表示ボックス96上の完全な語として表示される。例えば、これら2つの語を、選択ボタン92に表示してもよい。リモートコントローラ16の上部に位置するソフトキー24b及び24dを人差し指で押すことにより、又は、タッチパッド22の指定された位置にある専用のゾーンに親指又は他の指をドラッグすることにより、ユーザは、選択ボタン92を選択することができる。
さまざまな実施形態において、タッチパッド22と仮想キーパッド20をそれぞれ2つのゾーンに分割する場合、それぞれの2つのエリア間に重複部分ができるように座標をマッピングすることができる。つまり、キーマッピングモジュール67は、第1サブセットキーの第3サブセットキーを第2操作ゾーンにマッピングし、第2サブセットキーの第4サブセットキーを第1操作ゾーンにマッピングする。例えば、第3サブセットキーは、第1サブセットキー(図7のゾーン100に含まれるキー)の『t』、『g』、及び『b』の文字によって指定されるキーを含む。同様に、第4サブセットキーは、第2サブセットキー(図7のゾーン102に含まれるキー)の『y』、『h』、及び『n』の文字によって指定されるキーを含む。これにより、分割されたゾーン間の境界付近のキーは、タッチパッド22上のいずれのゾーンでも操作可能になる。例えば、左のキーボードエリアの文字『g』は、第2ゾーン106のタッチパッド22で選択されるだけでなく、第1ゾーンのタッチパッド22によっても選択可能である。重複キーは、シェーディング又は色によってGUI18上で識別可能である。
別の実施例で、図8A及び8Bをここで参照すると、横方向位置でリモートコントローラ16を保持するために両手が用いられる場合、タッチパッド22を、2つのゾーン108及び110、又は112及び114に分割することができる。しかしながら、仮想キーパッド20は、分割されない。タッチパッド22の第1ゾーン110又は114を、仮想キーパッド20全体に関連付けて、『Key−Entry Zone』と称してもよい。タッチパッド22の第2ゾーン108又は112を、自動完成ボタン92(図7)又は選択リスト94(自動完成選択リスト)に関連付けて、『Auto−Completion Zone』と称してもよい。ユーザが『Auto−Completion Zone』のタッチパッド22に触れた場合に、自動完成ボタン92又は選択リスト94を、表示してもよい。ユーザインタフェースには、自動完成単語の有用性と状態とを信号で送信するための小さく視覚的な通知を含めてもよい。このようにすれば、ユーザが自動完成を使用すると決定しない限り、それに関して煩わされることはない。
さまざまな実施形態において、タッチパッド22のゾーン108及び110、又は112及び114を、ユーザ識別の結果に基づいて構成してもよい。例えば、右利きのユーザの場合、右側のゾーン110を、多くの場合に使用する『Key−Entry Zone』に関連づけ、左側のゾーン108を、『Auto−Completion Zone』に関連付けてもよい。同様に、左利きのユーザに対しては、左側のゾーン108を、多くの場合使用する『Key−Entry Zone』に関連付け、右側のゾーン110を、『Auto−Completion Zone』に関連付けてもよい。
さらに別の実施例で、ここで図9を参照すると、縦方向位置でリモートコントローラ16を保持するのに片手が用いられる場合、タッチパッド22は、複数のゾーンに分割される。しかしながら、仮想キーパッド20は、分割されない。タッチパッド22に1つだけのゾーンが、常時ユーザに用いられる。ユーザは、タッチパッド22全体から仮想キーパッド20全体にアクセス可能である。このようなタッチパッド22は、主に『Key−Entry Zone』として機能する。自動完成が必要な場合、ユーザは、単純なジェスチャにより、タッチパッドを『Auto−Completion Zone』に切り替えることができる。このようなジェスチャには、親指又は他の指をタッチパッド22の特定のエリア(例えば右下)へ動かすことや、タッチパッド22に沿って急速に右から左へ指をスライドすることが含まれるが、これらに限定されない。
図7〜9に示される実施例のいずれにおいても、ユーザは、タッチパッド22上で親指又は他の指をドラッグすることにより、キー90を選択することができる。この動きに反応して、1つ以上のスクリーン上のポインタ(例えば、カーソル、親指又は他の指のイラストなど)を、ターゲットとなるキー90へスライドする。スクリーン上のポインタは、手の位置(例えば、左手だけ、右手だけ、又は両手)に従って表示可能である。クリック可能なタッチパッド22をクリックすることにより、及び/又は解放することにより、キー90を選択できる。ポインタとして指を表示する場合は、タッチパッドの表面で指をドラッグするのではなく押圧することを示すために異なる指姿勢を用いて表示することができる。キーと関連付けられ選択された文字は、テキスト表示ボックス96に表示される。
さまざまな実施形態で、図10をここで参照すると、GUI管理モジュール68は、予測された次のキーと、キーマッピングモジュール67(図3)によって実行される座標の再マッピングとに基づいて、仮想キーパッド20のキー90を表示する。例えば、次のもっともらしいキーを知ることにより、GUI管理モジュール68(図3)は、座標のマッピングに基づいて、最も可能性があるキー116を強調及び/又は拡大することができる。つまり、ユーザインタフェース上のキーパッドの配置は、予測モジュール64によって予測された1つ以上の次のもっともらしいキーに基づいて修正される。より具体的には、ユーザインタフェース上のキーパッドの1つ以上のキーは、予測モジュール64によって予測された1つ以上の次のもっともらしいキーに基づいて、強調又は拡大される。以上の処理は、GUI管理モジュール68によって実行される。しかしながら、ユーザが急速にカーソルを移動していない、又は、ユーザが所定の座標の上方に指を留めている場合には、強調された及び/又は拡大されたキー116を、タッチパッド22の原座標に再マッピングし、後に、強調された及び/又は拡大されたキーを、元のサイズに戻すことができる。
当業者であれば、前述の説明から、本願の開示による広い教示をさまざまな形態で実装可能であると解釈するであろう。したがって、この開示は特定の実施例と関連して記載されてはいるものの、当該図面及び明細書と以下の請求項とを考察すれば、他の変形例が可能であることが当業者にとっては明らかであるから、本開示の真の範囲はこれら特定の実施例に限定されてはならない。

Claims (26)

  1. テキストを入力するための仮想キーパッドシステムであって、
    複数のタッチゾーンに分割された少なくとも1つのタッチパッドが組み込まれたリモートコントローラと、
    前記リモートコントローラとデータ通信し、かつ、前記タッチパッドの各タッチゾーンにキーがマッピングされたキーパッドを含むユーザインタフェースを表示する表示装置と、
    特定の文字を選択するための所定のタッチゾーンを押圧しているオペレータに応答して、1つ以上の次のもっともらしいキーを予測するために1つ以上のキー予測方法を実行する予測モジュールと、
    前記1つ以上の次のもっともらしいキーに基づいて、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングするキーマッピングモジュールとを備える
    仮想キーパッドシステム。
  2. 前記ユーザインタフェース上の前記キーパッドの配置は、前記1つ以上の次のもっともらしいキーに基づいて修正される
    請求項1記載のシステム。
  3. 前記ユーザインタフェース上の前記キーパッドの1つ以上のキーは、前記1つ以上の次のもっともらしいキーに基づいて拡大される
    請求項2記載のシステム。
  4. 前記ユーザインタフェース上の前記キーパッドの1つ以上のキーは、前記1つ以上の次のもっともらしいキーに基づいて強調される
    請求項2記載のシステム。
  5. 前記システムは、さらに、
    前記オペレータによって選択された前の文字に基づいて、前記1つ以上の次のもっともらしいキーを予測する言語モデルを備える
    請求項1記載のシステム。
  6. 前記言語モデルは、さらに、前記オペレータによって選択された前の文字に基づいて、もっともらしい語のリストを生成する
    請求項5記載のシステム。
  7. 前記1つ以上のキー予測方法には、タッチパッド上でオペレータが動作する方向に基づいて前記次のもっともらしいキーを予測する軌道分析法が含まれる
    請求項1記載のシステム。
  8. 前記1つ以上のキー予測方法には、タッチパッド上でのいずれかの手の動きの検出結果に基づいて前記次のもっともらしいキーを予測する手運動分析法が含まれる
    請求項1記載のシステム。
  9. 前記タッチパッドは、2つの操作ゾーンに分割され、
    前記キーマッピングモジュールは、前記タッチパッドの第1操作ゾーンに前記キーパッドの第1サブセットキーをマッピングし、前記タッチパッドの第2操作ゾーンに前記キーパッドの第2サブセットキーをマッピングする
    請求項1記載のシステム。
  10. 前記第1操作ゾーンは、前記タッチパッドの上部ゾーンに相当し、
    前記第2操作ゾーンは、前記タッチパッドの下部ゾーンに相当する
    請求項9記載のシステム。
  11. 前記第1操作ゾーンは、前記タッチパッドの右側ゾーンに相当し、
    前記第2操作ゾーンは、前記タッチパッドの左側ゾーンに相当する
    請求項9記載のシステム。
  12. 前記ユーザインタフェースは、自動完成選択ボタン及び自動完成選択リストのうち少なくとも1つを含む
    請求項1記載のシステム。
  13. 前記タッチパッドは、2つの操作ゾーンに分割され、
    前記キーマッピングモジュールは、前記キーパッドの前記キーに第1操作ゾーンをマッピングし、前記自動完成選択ボタン及び前記自動完成選択リストのうち少なくとも1つに第2操作ゾーンをマッピングする
    請求項12記載のシステム。
  14. 前記キーマッピングモジュールは、前記第2操作ゾーンに前記第1サブセットキーの第3サブセットキーをマッピングし、前記第1操作ゾーンに前記第2サブセットキーの第4サブセットキーをマッピングする
    請求項9記載のシステム。
  15. 前記第3サブセットキーは、文字『t』、『g』及び『b』として指定されたキーを含み、
    前記第4サブセットキーは、文字『y』、『h』及び『n』として指定されたキーを含む
    請求項14記載のシステム。
  16. 前記キー予測方法には、前記次のもっともらしいキーを前記タッチパッド上でオペレータが動作するタイミングに基づいて予測するタイミング分析法が含まれる
    請求項1記載のシステム。
  17. 前記タイミング分析法においては、タイミングが予め定められた制限を越える場合には、次のもっともらしいキーを予測しない
    請求項16記載のシステム。
  18. 前記キーマッピングモジュールは、次のもっともらしいキーがないことに基づいて、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングする
    請求項17記載のシステム。
  19. 前記タッチゾーンは、前記タッチパッドの1つ以上のXY座標によって定義され、
    前記キーマッピングモジュールは、前記タッチゾーンのXY座標のそれぞれに前記キーパッドのキーを関連付けることにより、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンをマッピングする
    請求項1記載のシステム。
  20. 前記キーマッピングモジュールは、前記マッピングによってマップを生成し、
    前記マップは、前記タッチパッドの前記座標によって定義された2次元のルックアップテーブルである
    請求項19記載のシステム。
  21. テキストを入力するための仮想キーパッドシステムであって、
    複数のタッチゾーンに分割された少なくとも1つのタッチパッドが組み込まれたリモートコントローラと、
    前記リモートコントローラとデータ通信し、かつ、前記タッチパッド上の各タッチゾーンにキーが関連付けられたキーパッドと、前記キーパッドからの入力を表示するためのエリアとを表示し、かつ、所定のタッチゾーンを押圧しているオペレータに応答して、前記所定のタッチゾーンに関連付けられた前記キーの文字を自身の入力エリアに表示する表示装置と、
    前記入力エリアに表示された文字を受信するよう適応し、受信した文字列の中で次の最ももっともらしい文字を予測する言語モデルと、
    前記言語モデルからの出力に基づいて所望のキーの入力を容易にするために前記キーパッドの各キーを配置するモジュールとを備える
    仮想キーパッドシステム。
  22. 前記配置には、前記言語モデルからの出力に基づいて前記キーパッド上のキーを拡大することが含まれる
    請求項21記載のシステム。
  23. テキストを入力するための仮想キーパッドシステムであって、
    複数のタッチゾーンに分割された少なくとも1つのタッチパッドが組み込まれたリモートコントローラと、
    前記リモートコントローラとデータ通信し、かつ、前記タッチパッドのタッチゾーンに各キーがマッピングされたキーパッドを含むユーザインタフェースを表示する表示装置と、
    1つ以上の次のもっともらしいキーを予測するための1つ以上のキー予測方法を実行する予測モジュールと、
    前記1つ以上の次のもっともらしいキーに基づいて、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングするキーマッピングモジュールと、
    前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングすることにより、前記キーパッドの配置を修正するユーザインタフェース管理モジュールと、
    所定のタッチゾーンを押圧しているオペレータに応答して、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングすることにより、キーを選択するテキスト入力モジュールとを備える
    仮想キーパッドシステム。
  24. 前記ユーザインタフェース管理モジュールは、前記キーパッドの前記キーに前記タッチパッドの前記タッチゾーンを再マッピングすることにより、前記キーパッドの1つ以上のキーを拡大する
    請求項23記載のシステム。
  25. 前記キーマッピングモジュールは、前記1つ以上の次のもっともらしいキーに基づき、前記キーパッドの動的に選択された部分に対応するタッチパッドに再び焦点を合わせる
    請求項1記載の仮想キーパッドシステム。
  26. 前記キーマッピングモジュールは、前記キーパッドの前記1つ以上の次のもっともらしいキーに対応するタッチパッドの主要部分に再び焦点を合わせる
    請求項1記載の仮想キーパッドシステム。
JP2010515128A 2007-06-28 2008-06-26 仮想キーパッドシステム Active JP5323070B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US94685807P 2007-06-28 2007-06-28
US60/946,858 2007-06-28
US11/977,346 2007-10-24
US11/977,346 US8065624B2 (en) 2007-06-28 2007-10-24 Virtual keypad systems and methods
PCT/US2008/068384 WO2009006221A1 (en) 2007-06-28 2008-06-26 Virtual keypad systems and methods

Publications (2)

Publication Number Publication Date
JP2010536076A true JP2010536076A (ja) 2010-11-25
JP5323070B2 JP5323070B2 (ja) 2013-10-23

Family

ID=40162292

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010515128A Active JP5323070B2 (ja) 2007-06-28 2008-06-26 仮想キーパッドシステム

Country Status (4)

Country Link
US (2) US8065624B2 (ja)
EP (1) EP2160672A4 (ja)
JP (1) JP5323070B2 (ja)
WO (1) WO2009006221A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011154573A (ja) * 2010-01-27 2011-08-11 Kyocera Corp 携帯電子機器
JP5541166B2 (ja) * 2009-01-20 2014-07-09 日本電気株式会社 入力装置、情報処理装置、入力方法およびプログラム
JP2014533866A (ja) * 2011-11-23 2014-12-15 マイクロソフト コーポレーション タッチ・センサーの動的スケーリング
JP2022529856A (ja) * 2019-04-26 2022-06-24 ソニー・インタラクティブエンタテインメント エルエルシー タッチパッド入力を備えたゲームコントローラ

Families Citing this family (428)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7821503B2 (en) * 2003-04-09 2010-10-26 Tegic Communications, Inc. Touch screen and graphical user interface
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
US7286115B2 (en) * 2000-05-26 2007-10-23 Tegic Communications, Inc. Directional input system with automatic correction
US7750891B2 (en) 2003-04-09 2010-07-06 Tegic Communications, Inc. Selective input system based on tracking of motion parameters of an input device
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US7669134B1 (en) * 2003-05-02 2010-02-23 Apple Inc. Method and apparatus for displaying information during an instant messaging session
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US9304675B2 (en) * 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7779364B2 (en) * 2007-01-26 2010-08-17 Kabushiki Kaisha Toshiba System and method for generating a graphical user input interface via an associated display
US8225203B2 (en) 2007-02-01 2012-07-17 Nuance Communications, Inc. Spell-check for a keyboard system with automatic correction
US8201087B2 (en) 2007-02-01 2012-06-12 Tegic Communications, Inc. Spell-check for a keyboard system with automatic correction
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8065624B2 (en) * 2007-06-28 2011-11-22 Panasonic Corporation Virtual keypad systems and methods
KR101470413B1 (ko) * 2007-09-20 2014-12-10 삼성전자주식회사 사용자 명령 입력 방법 및 이를 적용한 영상기기와입력기기
US20100299710A1 (en) * 2007-09-20 2010-11-25 Samsung Electronics Co. Ltd. Method for inputting user command and video apparatus and input apparatus employing the same
US8631358B2 (en) 2007-10-10 2014-01-14 Apple Inc. Variable device graphical user interface
US20090102818A1 (en) * 2007-10-22 2009-04-23 Motorola, Inc. Method and device for error-free keypad input
TWI448138B (zh) * 2007-11-08 2014-08-01 Htc Corp 顯示撥號資訊的方法與使用該方法的行動通訊裝置
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8407603B2 (en) * 2008-01-06 2013-03-26 Apple Inc. Portable electronic device for instant messaging multiple recipients
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8933876B2 (en) 2010-12-13 2015-01-13 Apple Inc. Three dimensional user interface session control
US9035876B2 (en) 2008-01-14 2015-05-19 Apple Inc. Three-dimensional user interface session control
US20090185080A1 (en) * 2008-01-18 2009-07-23 Imu Solutions, Inc. Controlling an electronic device by changing an angular orientation of a remote wireless-controller
US20090193361A1 (en) * 2008-01-30 2009-07-30 Research In Motion Limited Electronic device and method of controlling same
US9520743B2 (en) * 2008-03-27 2016-12-13 Echostar Technologies L.L.C. Reduction of power consumption in remote control electronics
US8624844B2 (en) 2008-04-01 2014-01-07 Litl Llc Portable computer with multiple display configurations
US8612888B2 (en) 2008-04-01 2013-12-17 Litl, Llc Method and apparatus for managing digital media content
US9003315B2 (en) 2008-04-01 2015-04-07 Litl Llc System and method for streamlining user interaction with electronic content
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US7907060B2 (en) * 2008-05-08 2011-03-15 Echostar Technologies L.L.C. Systems, methods and apparatus for detecting replacement of a battery in a remote control
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
CN101598966A (zh) * 2008-06-06 2009-12-09 深圳富泰宏精密工业有限公司 显示双画面的触控装置及其控制方法
US8305249B2 (en) * 2008-07-18 2012-11-06 EchoStar Technologies, L.L.C. Systems and methods for controlling power consumption in electronic devices
FR2934067B1 (fr) * 2008-07-21 2013-01-25 Dav Dispositif de commande a retour haptique et procede de commande correspondant
US20100020036A1 (en) * 2008-07-23 2010-01-28 Edward Hui Portable electronic device and method of controlling same
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
TWI360762B (en) * 2008-09-05 2012-03-21 Mitake Information Corp On-screen virtual keyboard system
US8750938B2 (en) 2008-09-29 2014-06-10 Microsoft Corporation Glow touch feedback for virtual input devices
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US8786551B2 (en) * 2008-12-11 2014-07-22 Verizon Patent And Licensing Inc. Predictive keypad/keyboard lighting to guide input
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US20100164756A1 (en) * 2008-12-30 2010-07-01 Nokia Corporation Electronic device user input
EP2389622A1 (en) * 2009-01-26 2011-11-30 Zrro Technologies (2009) Ltd. Device and method for monitoring an object's behavior
FR2941546B1 (fr) * 2009-01-27 2011-02-04 Wyplay Procede optimise de saisie de caracteres alphanumeriques a partir d'une telecommande
US8326358B2 (en) 2009-01-30 2012-12-04 Research In Motion Limited System and method for access control in a portable electronic device
RU2011134935A (ru) * 2009-02-04 2013-03-10 Кейлесс Системз Лтд. Система ввода данных
US8583421B2 (en) * 2009-03-06 2013-11-12 Motorola Mobility Llc Method and apparatus for psychomotor and psycholinguistic prediction on touch based device
US8134475B2 (en) 2009-03-16 2012-03-13 Echostar Technologies L.L.C. Backlighting remote controls
GB201108200D0 (en) * 2011-05-16 2011-06-29 Touchtype Ltd User input prediction
GB201016385D0 (en) * 2010-09-29 2010-11-10 Touchtype Ltd System and method for inputting text into electronic devices
US20100245268A1 (en) * 2009-03-30 2010-09-30 Stg Interactive S.A. User-friendly process for interacting with informational content on touchscreen devices
KR20100118366A (ko) * 2009-04-28 2010-11-05 삼성전자주식회사 휴대 단말기의 터치스크린 운용 방법 및 이를 지원하는 휴대 단말기
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9043718B2 (en) * 2009-06-05 2015-05-26 Blackberry Limited System and method for applying a text prediction algorithm to a virtual keyboard
US20100310136A1 (en) * 2009-06-09 2010-12-09 Sony Ericsson Mobile Communications Ab Distinguishing right-hand input and left-hand input based on finger recognition
US20100315266A1 (en) * 2009-06-15 2010-12-16 Microsoft Corporation Predictive interfaces with usability constraints
EP2264563A1 (en) * 2009-06-19 2010-12-22 Tegic Communications, Inc. Virtual keyboard system with automatic correction
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
TWI460623B (zh) * 2009-07-14 2014-11-11 Htc Corp 觸控式電子裝置及其相關控制方法
EP2284653A1 (en) * 2009-08-14 2011-02-16 Research In Motion Limited Electronic device with touch-sensitive display and method of facilitating input at the electronic device
US20110041056A1 (en) * 2009-08-14 2011-02-17 Research In Motion Limited Electronic device with touch-sensitive display and method of facilitating input at the electronic device
US20110077470A1 (en) * 2009-09-30 2011-03-31 Nellcor Puritan Bennett Llc Patient Monitor Symmetry Control
US8261211B2 (en) * 2009-10-01 2012-09-04 Microsoft Corporation Monitoring pointer trajectory and modifying display interface
US8347221B2 (en) * 2009-10-07 2013-01-01 Research In Motion Limited Touch-sensitive display and method of control
KR101058525B1 (ko) 2009-10-09 2011-08-23 삼성전자주식회사 텍스트 입력방법 및 이를 적용한 디스플레이 장치
KR101595029B1 (ko) * 2009-11-18 2016-02-17 엘지전자 주식회사 이동단말기 및 그 제어방법
US20110154260A1 (en) * 2009-12-17 2011-06-23 Motorola Inc Method and apparatus for displaying information in an electronic device
US20110148762A1 (en) * 2009-12-22 2011-06-23 Universal Electronics Inc. System and method for multi-mode command input
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
US20110187647A1 (en) * 2010-02-04 2011-08-04 Charles Howard Woloszynski Method and apparatus for virtual keyboard interactions from secondary surfaces
EP2357220A1 (en) * 2010-02-10 2011-08-17 The Procter & Gamble Company Cleaning composition comprising amylase variants with high stability in the presence of a chelating agent
US8782556B2 (en) 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8456435B2 (en) 2010-02-26 2013-06-04 Research In Motion Limited Electronic device with touch-sensitive display and method of facilitating input at the electronic device
EP2369445B1 (en) * 2010-02-26 2016-08-17 BlackBerry Limited Electronic device with touch-sensitive display and method of facilitating input at the electronic device
CN102473074A (zh) 2010-05-20 2012-05-23 松下电器产业株式会社 操作装置、操作方法、程序、记录介质以及集成电路
US8648809B2 (en) * 2010-06-16 2014-02-11 International Business Machines Corporation Reconfiguration of virtual keyboard
EP2407859A1 (de) * 2010-07-16 2012-01-18 Gigaset Communications GmbH Dynamische Anpassung einer Bedienfläche auf einem Sensorbildschirm
WO2012011044A1 (en) 2010-07-20 2012-01-26 Primesense Ltd. Interactive reality augmentation for natural interaction
US9201501B2 (en) 2010-07-20 2015-12-01 Apple Inc. Adaptive projector
KR101701932B1 (ko) * 2010-07-22 2017-02-13 삼성전자 주식회사 입력 디바이스와 이의 제어 방법
TWI427507B (zh) * 2010-07-29 2014-02-21 Hon Hai Prec Ind Co Ltd 手持裝置及其輸入字元之方法
US9639265B2 (en) 2010-09-03 2017-05-02 Microsoft Technology Licensing, Llc Distance-time based hit-testing for displayed target graphical elements
US8959013B2 (en) * 2010-09-27 2015-02-17 Apple Inc. Virtual keyboard for a non-tactile three dimensional user interface
GB201200643D0 (en) 2012-01-16 2012-02-29 Touchtype Ltd System and method for inputting text
JP5782699B2 (ja) * 2010-10-15 2015-09-24 ソニー株式会社 情報処理装置、情報処理装置の入力制御方法及びプログラム
WO2012054062A1 (en) 2010-10-22 2012-04-26 Hewlett-Packard Development Company, L.P. User interface for facilitating character input
TWI416374B (zh) * 2010-10-26 2013-11-21 Wistron Corp 輸入方法、輸入裝置及電腦系統
TW201222396A (en) * 2010-11-22 2012-06-01 Acer Inc Touch-controlled apparatus and method for displaying a virtual keyboard on the touch-controlled apparatus thereof
US20120131490A1 (en) * 2010-11-22 2012-05-24 Shao-Chieh Lin Touch-controlled device and method for displaying a virtual keyboard on the touch-controlled device thereof
US10262324B2 (en) 2010-11-29 2019-04-16 Biocatch Ltd. System, device, and method of differentiating among users based on user-specific page navigation sequence
US10586036B2 (en) 2010-11-29 2020-03-10 Biocatch Ltd. System, device, and method of recovery and resetting of user authentication factor
US11269977B2 (en) 2010-11-29 2022-03-08 Biocatch Ltd. System, apparatus, and method of collecting and processing data in electronic devices
US10474815B2 (en) 2010-11-29 2019-11-12 Biocatch Ltd. System, device, and method of detecting malicious automatic script and code injection
US10917431B2 (en) * 2010-11-29 2021-02-09 Biocatch Ltd. System, method, and device of authenticating a user based on selfie image or selfie video
US10685355B2 (en) 2016-12-04 2020-06-16 Biocatch Ltd. Method, device, and system of detecting mule accounts and accounts used for money laundering
US10949757B2 (en) 2010-11-29 2021-03-16 Biocatch Ltd. System, device, and method of detecting user identity based on motor-control loop model
US10728761B2 (en) 2010-11-29 2020-07-28 Biocatch Ltd. Method, device, and system of detecting a lie of a user who inputs data
US11210674B2 (en) 2010-11-29 2021-12-28 Biocatch Ltd. Method, device, and system of detecting mule accounts and accounts used for money laundering
US10298614B2 (en) * 2010-11-29 2019-05-21 Biocatch Ltd. System, device, and method of generating and managing behavioral biometric cookies
US10404729B2 (en) 2010-11-29 2019-09-03 Biocatch Ltd. Device, method, and system of generating fraud-alerts for cyber-attacks
US10834590B2 (en) 2010-11-29 2020-11-10 Biocatch Ltd. Method, device, and system of differentiating between a cyber-attacker and a legitimate user
US10949514B2 (en) 2010-11-29 2021-03-16 Biocatch Ltd. Device, system, and method of differentiating among users based on detection of hardware components
US10776476B2 (en) 2010-11-29 2020-09-15 Biocatch Ltd. System, device, and method of visual login
US10747305B2 (en) 2010-11-29 2020-08-18 Biocatch Ltd. Method, system, and device of authenticating identity of a user of an electronic device
US20190158535A1 (en) 2017-11-21 2019-05-23 Biocatch Ltd. Device, System, and Method of Detecting Vishing Attacks
US10897482B2 (en) 2010-11-29 2021-01-19 Biocatch Ltd. Method, device, and system of back-coloring, forward-coloring, and fraud detection
US10621585B2 (en) 2010-11-29 2020-04-14 Biocatch Ltd. Contextual mapping of web-pages, and generation of fraud-relatedness score-values
US10970394B2 (en) 2017-11-21 2021-04-06 Biocatch Ltd. System, device, and method of detecting vishing attacks
US10069837B2 (en) 2015-07-09 2018-09-04 Biocatch Ltd. Detection of proxy server
US11223619B2 (en) 2010-11-29 2022-01-11 Biocatch Ltd. Device, system, and method of user authentication based on user-specific characteristics of task performance
CN102479046B (zh) * 2010-11-30 2013-09-25 英业达股份有限公司 触控装置及其操作方法
US8872762B2 (en) 2010-12-08 2014-10-28 Primesense Ltd. Three dimensional user interface cursor control
KR101821160B1 (ko) * 2010-12-10 2018-03-08 삼성전자 주식회사 휴대단말에서 사용자 키패드 제공 방법 및 장치
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9354804B2 (en) 2010-12-29 2016-05-31 Microsoft Technology Licensing, Llc Touch event anticipation in a computing device
US9201185B2 (en) 2011-02-04 2015-12-01 Microsoft Technology Licensing, Llc Directional backlighting for display panels
US9285874B2 (en) 2011-02-09 2016-03-15 Apple Inc. Gaze detection in a 3D mapping environment
US11087659B2 (en) * 2011-03-11 2021-08-10 Cox Communications, Inc. System, method and device for presenting different functional displays when orientation of the device changes
US8719724B2 (en) 2011-03-16 2014-05-06 Honeywell International Inc. Method for enlarging characters displayed on an adaptive touch screen key pad
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8881051B2 (en) 2011-07-05 2014-11-04 Primesense Ltd Zoom-based gesture user interface
US9459758B2 (en) 2011-07-05 2016-10-04 Apple Inc. Gesture-based interface with enhanced features
US9377865B2 (en) 2011-07-05 2016-06-28 Apple Inc. Zoom-based gesture user interface
US9030498B2 (en) 2011-08-15 2015-05-12 Apple Inc. Combining explicit select gestures and timeclick in a non-tactile three dimensional user interface
US9098189B2 (en) 2011-08-15 2015-08-04 Telefonaktiebolaget L M Ericsson (Publ) Resizing selection zones on a touch sensitive display responsive to likelihood of selection
US9218063B2 (en) 2011-08-24 2015-12-22 Apple Inc. Sessionless pointing user interface
US9122311B2 (en) 2011-08-24 2015-09-01 Apple Inc. Visual feedback for tactile and non-tactile user interfaces
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9262076B2 (en) * 2011-09-12 2016-02-16 Microsoft Technology Licensing, Llc Soft keyboard interface
KR20130034765A (ko) * 2011-09-29 2013-04-08 삼성전자주식회사 휴대 단말기의 펜 입력 방법 및 장치
US8490008B2 (en) 2011-11-10 2013-07-16 Research In Motion Limited Touchscreen keyboard predictive display and generation of a set of characters
US9715489B2 (en) 2011-11-10 2017-07-25 Blackberry Limited Displaying a prediction candidate after a typing mistake
US9652448B2 (en) 2011-11-10 2017-05-16 Blackberry Limited Methods and systems for removing or replacing on-keyboard prediction candidates
US9122672B2 (en) 2011-11-10 2015-09-01 Blackberry Limited In-letter word prediction for virtual keyboard
US9310889B2 (en) 2011-11-10 2016-04-12 Blackberry Limited Touchscreen keyboard predictive display and generation of a set of characters
KR20130054579A (ko) * 2011-11-17 2013-05-27 삼성전자주식회사 디스플레이장치 및 그 제어방법
JP5413448B2 (ja) * 2011-12-23 2014-02-12 株式会社デンソー 表示システム、表示装置、及び操作装置
EP2799954B1 (en) * 2011-12-28 2020-01-15 Hiroyuki Ikeda Portable terminal
US9519419B2 (en) * 2012-01-17 2016-12-13 Microsoft Technology Licensing, Llc Skinnable touch device grip patterns
US9557913B2 (en) 2012-01-19 2017-01-31 Blackberry Limited Virtual keyboard display having a ticker proximate to the virtual keyboard
CA2789827C (en) 2012-01-19 2017-06-13 Research In Motion Limited Virtual keyboard providing an indication of received input
US9052414B2 (en) 2012-02-07 2015-06-09 Microsoft Technology Licensing, Llc Virtual image device
US9354748B2 (en) 2012-02-13 2016-05-31 Microsoft Technology Licensing, Llc Optical stylus interaction
US9244612B1 (en) * 2012-02-16 2016-01-26 Google Inc. Key selection of a graphical keyboard based on user input posture
DE112012000189B4 (de) 2012-02-24 2023-06-15 Blackberry Limited Berührungsbildschirm-Tastatur zum Vorsehen von Wortvorhersagen in Partitionen der Berührungsbildschirm-Tastatur in naher Assoziation mit Kandidaten-Buchstaben
CA2865272C (en) 2012-02-24 2019-11-05 Blackberry Limited Virtual keyboard with dynamically reconfigurable layout
US9229534B2 (en) 2012-02-28 2016-01-05 Apple Inc. Asymmetric mapping for tactile and non-tactile user interfaces
US8749529B2 (en) 2012-03-01 2014-06-10 Microsoft Corporation Sensor-in-pixel display system with near infrared filter
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9075566B2 (en) 2012-03-02 2015-07-07 Microsoft Technoogy Licensing, LLC Flexible hinge spine
US9460029B2 (en) 2012-03-02 2016-10-04 Microsoft Technology Licensing, Llc Pressure sensitive keys
US9870066B2 (en) 2012-03-02 2018-01-16 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9064654B2 (en) 2012-03-02 2015-06-23 Microsoft Technology Licensing, Llc Method of manufacturing an input device
USRE48963E1 (en) 2012-03-02 2022-03-08 Microsoft Technology Licensing, Llc Connection device for computing devices
US9298236B2 (en) 2012-03-02 2016-03-29 Microsoft Technology Licensing, Llc Multi-stage power adapter configured to provide a first power level upon initial connection of the power adapter to the host device and a second power level thereafter upon notification from the host device to the power adapter
US9360893B2 (en) 2012-03-02 2016-06-07 Microsoft Technology Licensing, Llc Input device writing surface
US9426905B2 (en) 2012-03-02 2016-08-23 Microsoft Technology Licensing, Llc Connection device for computing devices
US8873227B2 (en) 2012-03-02 2014-10-28 Microsoft Corporation Flexible hinge support layer
WO2013133478A1 (en) 2012-03-04 2013-09-12 Lg Electronics Inc. Portable device and control method thereof
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
AU2013239179B2 (en) 2012-03-26 2015-08-20 Apple Inc. Enhanced virtual touchpad and touchscreen
US9201510B2 (en) 2012-04-16 2015-12-01 Blackberry Limited Method and device having touchscreen keyboard with visual cues
JP5966557B2 (ja) * 2012-04-19 2016-08-10 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び、情報処理システム
CN103379217B (zh) * 2012-04-28 2015-09-09 阿里巴巴集团控股有限公司 一种手持设备中输入内容自动补全的方法、装置和服务器
US9292192B2 (en) 2012-04-30 2016-03-22 Blackberry Limited Method and apparatus for text selection
US10025487B2 (en) 2012-04-30 2018-07-17 Blackberry Limited Method and apparatus for text selection
US20130285927A1 (en) * 2012-04-30 2013-10-31 Research In Motion Limited Touchscreen keyboard with correction of previously input text
US9354805B2 (en) 2012-04-30 2016-05-31 Blackberry Limited Method and apparatus for text selection
KR101901611B1 (ko) * 2012-05-09 2018-09-27 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US8884881B2 (en) 2012-05-11 2014-11-11 Blackberry Limited Portable electronic device and method of controlling same
EP2662752B1 (en) * 2012-05-11 2017-09-13 BlackBerry Limited Apparatus and method for character entry in a portable electronic device
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US20130300590A1 (en) 2012-05-14 2013-11-14 Paul Henry Dietz Audio Feedback
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9207860B2 (en) 2012-05-25 2015-12-08 Blackberry Limited Method and apparatus for detecting a gesture
US10031556B2 (en) 2012-06-08 2018-07-24 Microsoft Technology Licensing, Llc User experience adaptation
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9019615B2 (en) 2012-06-12 2015-04-28 Microsoft Technology Licensing, Llc Wide field-of-view virtual image projector
US8947353B2 (en) 2012-06-12 2015-02-03 Microsoft Corporation Photosensor array gesture detection
US9684382B2 (en) 2012-06-13 2017-06-20 Microsoft Technology Licensing, Llc Input device configuration having capacitive and pressure sensors
US9063693B2 (en) 2012-06-13 2015-06-23 Microsoft Technology Licensing, Llc Peripheral device storage
US9073123B2 (en) 2012-06-13 2015-07-07 Microsoft Technology Licensing, Llc Housing vents
US9459160B2 (en) 2012-06-13 2016-10-04 Microsoft Technology Licensing, Llc Input device sensor configuration
JP6071107B2 (ja) 2012-06-14 2017-02-01 裕行 池田 携帯端末
US9256089B2 (en) 2012-06-15 2016-02-09 Microsoft Technology Licensing, Llc Object-detecting backlight unit
US20130346904A1 (en) * 2012-06-26 2013-12-26 International Business Machines Corporation Targeted key press zones on an interactive display
US9116552B2 (en) 2012-06-27 2015-08-25 Blackberry Limited Touchscreen keyboard providing selection of word predictions in partitions of the touchscreen keyboard
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9355345B2 (en) 2012-07-23 2016-05-31 Microsoft Technology Licensing, Llc Transparent tags with encoded data
US9298295B2 (en) * 2012-07-25 2016-03-29 Facebook, Inc. Gestures for auto-correct
US9836213B2 (en) * 2012-07-27 2017-12-05 Symbol Technologies, Llc Enhanced user interface for pressure sensitive touch screen
US8964379B2 (en) 2012-08-20 2015-02-24 Microsoft Corporation Switchable magnetic lock
US20140063067A1 (en) * 2012-08-31 2014-03-06 Research In Motion Limited Method to select word by swiping capacitive keyboard
US9063653B2 (en) 2012-08-31 2015-06-23 Blackberry Limited Ranking predictions based on typing speed and typing confidence
US9524290B2 (en) 2012-08-31 2016-12-20 Blackberry Limited Scoring predictions based on prediction length and typing speed
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
WO2014047161A2 (en) * 2012-09-18 2014-03-27 Google Inc. Posture-adaptive selection
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US9152173B2 (en) 2012-10-09 2015-10-06 Microsoft Technology Licensing, Llc Transparent display device
US8654030B1 (en) 2012-10-16 2014-02-18 Microsoft Corporation Antenna placement
CN104870123B (zh) 2012-10-17 2016-12-14 微软技术许可有限责任公司 金属合金注射成型突起
US9035884B2 (en) 2012-10-17 2015-05-19 Nuance Communications, Inc. Subscription updates in multiple device language models
WO2014059618A1 (en) 2012-10-17 2014-04-24 Microsoft Corporation Graphic formation via material ablation
EP2908971B1 (en) 2012-10-17 2018-01-03 Microsoft Technology Licensing, LLC Metal alloy injection molding overflows
US9304595B2 (en) * 2012-10-19 2016-04-05 Google Inc. Gesture-keyboard decoding using gesture path deviation
US8704792B1 (en) 2012-10-19 2014-04-22 Google Inc. Density-based filtering of gesture events associated with a user interface of a computing device
US8952892B2 (en) 2012-11-01 2015-02-10 Microsoft Corporation Input location correction tables for input panels
US8786767B2 (en) 2012-11-02 2014-07-22 Microsoft Corporation Rapid synchronized lighting and shuttering
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
CN103809898A (zh) * 2012-11-14 2014-05-21 宇瞻科技股份有限公司 智能型输入方法
US9411510B2 (en) * 2012-12-07 2016-08-09 Apple Inc. Techniques for preventing typographical errors on soft keyboards
US9513748B2 (en) 2012-12-13 2016-12-06 Microsoft Technology Licensing, Llc Combined display panel circuit
KR101717179B1 (ko) * 2013-01-07 2017-03-16 삼성전자주식회사 디스플레이 장치, 그의 ui 표시 방법 및 컴퓨터 판독가능 기록매체
US20140208258A1 (en) * 2013-01-22 2014-07-24 Jenny Yuen Predictive Input Using Custom Dictionaries
US9176538B2 (en) 2013-02-05 2015-11-03 Microsoft Technology Licensing, Llc Input device configurations
CN104969289B (zh) 2013-02-07 2021-05-28 苹果公司 数字助理的语音触发器
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
US9638835B2 (en) 2013-03-05 2017-05-02 Microsoft Technology Licensing, Llc Asymmetric aberration correcting lens
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10120540B2 (en) * 2013-03-14 2018-11-06 Samsung Electronics Co., Ltd. Visual feedback for user interface navigation on television system
EP2778859B1 (en) 2013-03-15 2015-07-08 BlackBerry Limited Method and apparatus for word prediction using the position of a non-typing digit
KR101759009B1 (ko) 2013-03-15 2017-07-17 애플 인크. 적어도 부분적인 보이스 커맨드 시스템을 트레이닝시키는 것
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9348429B2 (en) 2013-03-15 2016-05-24 Blackberry Limited Method and apparatus for word prediction using the position of a non-typing digit
US9304549B2 (en) 2013-03-28 2016-04-05 Microsoft Technology Licensing, Llc Hinge mechanism for rotatable component attachment
US20160062646A1 (en) * 2013-04-29 2016-03-03 Hewlett-Packard Development Company, L.P. Device for Displaying a Received User Interface
US9552777B2 (en) 2013-05-10 2017-01-24 Microsoft Technology Licensing, Llc Phase control backlight
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
KR101959188B1 (ko) 2013-06-09 2019-07-02 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014200731A1 (en) 2013-06-13 2014-12-18 Apple Inc. System and method for emergency calls initiated by voice command
US9454251B1 (en) 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
CN104349195A (zh) * 2013-07-26 2015-02-11 天津富纳源创科技有限公司 智能电视的多用途遥控器的控制方法及控制系统
KR101749009B1 (ko) 2013-08-06 2017-06-19 애플 인크. 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화
TN2016000116A1 (en) * 2013-10-07 2017-10-06 Oslabs Pte Ltd An indian language keypad
FR3014572B1 (fr) * 2013-12-05 2016-01-01 Op3Ft Procede de commande de l'interaction avec un ecran tactile et equipement mettant en oeuvre ce procede
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
CN114895839A (zh) * 2014-01-06 2022-08-12 华为终端有限公司 应用程序显示方法和终端
US9317072B2 (en) 2014-01-28 2016-04-19 Microsoft Technology Licensing, Llc Hinge mechanism with preset positions
US9759854B2 (en) 2014-02-17 2017-09-12 Microsoft Technology Licensing, Llc Input device outer layer and backlighting
US9477337B2 (en) 2014-03-14 2016-10-25 Microsoft Technology Licensing, Llc Conductive trace routing for display and bezel sensors
US10120420B2 (en) 2014-03-21 2018-11-06 Microsoft Technology Licensing, Llc Lockable display and techniques enabling use of lockable displays
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10440001B2 (en) * 2014-06-18 2019-10-08 Dell Products, Lp Method to securely authenticate management server over un-encrypted remote console connection
US9477653B2 (en) 2014-06-26 2016-10-25 Blackberry Limited Character entry for an electronic device using a position sensing keyboard
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9930167B2 (en) * 2014-07-07 2018-03-27 Verizon Patent And Licensing Inc. Messaging application with in-application search functionality
US10324733B2 (en) 2014-07-30 2019-06-18 Microsoft Technology Licensing, Llc Shutdown notifications
US20160034131A1 (en) * 2014-07-31 2016-02-04 Sony Corporation Methods and systems of a graphical user interface shift
US9513671B2 (en) 2014-08-01 2016-12-06 Microsoft Technology Licensing, Llc Peripheral retention device
US10534532B2 (en) * 2014-08-08 2020-01-14 Samsung Electronics Co., Ltd. Electronic device and method for processing letter input in electronic device
US10191986B2 (en) 2014-08-11 2019-01-29 Microsoft Technology Licensing, Llc Web resource compatibility with web applications
US9705637B2 (en) 2014-08-19 2017-07-11 Microsoft Technology Licensing, Llc Guard band utilization for wireless data communication
US9397723B2 (en) 2014-08-26 2016-07-19 Microsoft Technology Licensing, Llc Spread spectrum wireless over non-contiguous channels
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9424048B2 (en) 2014-09-15 2016-08-23 Microsoft Technology Licensing, Llc Inductive peripheral retention device
US9606986B2 (en) 2014-09-29 2017-03-28 Apple Inc. Integrated word N-gram and class M-gram language models
US9447620B2 (en) 2014-09-30 2016-09-20 Microsoft Technology Licensing, Llc Hinge mechanism with multiple preset positions
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9727231B2 (en) 2014-11-19 2017-08-08 Honda Motor Co., Ltd. System and method for providing absolute coordinate and zone mapping between a touchpad and a display screen
US20170371515A1 (en) 2014-11-19 2017-12-28 Honda Motor Co., Ltd. System and method for providing absolute and zone coordinate mapping with graphic animations
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
CN107408013B (zh) * 2015-03-13 2020-07-10 京瓷办公信息系统株式会社 信息处理装置、画面显示方法以及计算机可读介质
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9779225B2 (en) 2015-04-08 2017-10-03 Google Inc. Method and system to provide access to secure features of a device
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
CN104850239B (zh) * 2015-04-23 2018-06-19 百度在线网络技术(北京)有限公司 一种用于确定键盘显示状态的方法与设备
US10001857B2 (en) 2015-05-13 2018-06-19 Seiko Epson Corporation Display apparatus and method of controlling display apparatus
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10067670B2 (en) * 2015-05-19 2018-09-04 Google Llc Multi-switch option scanning
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10222889B2 (en) 2015-06-03 2019-03-05 Microsoft Technology Licensing, Llc Force inputs and cursor control
US10416799B2 (en) 2015-06-03 2019-09-17 Microsoft Technology Licensing, Llc Force sensing and inadvertent input control of an input device
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US9752361B2 (en) 2015-06-18 2017-09-05 Microsoft Technology Licensing, Llc Multistage hinge
GB2539705B (en) 2015-06-25 2017-10-25 Aimbrain Solutions Ltd Conditional behavioural biometrics
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US9864415B2 (en) 2015-06-30 2018-01-09 Microsoft Technology Licensing, Llc Multistage friction hinge
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10061385B2 (en) 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10344797B2 (en) 2016-04-05 2019-07-09 Microsoft Technology Licensing, Llc Hinge with multiple preset positions
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
GB2552032B (en) 2016-07-08 2019-05-22 Aimbrain Solutions Ltd Step-up authentication
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10037057B2 (en) 2016-09-22 2018-07-31 Microsoft Technology Licensing, Llc Friction hinge
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10579784B2 (en) 2016-11-02 2020-03-03 Biocatch Ltd. System, device, and method of secure utilization of fingerprints for user authentication
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
DE212017000015U1 (de) * 2017-03-03 2018-02-27 Google Llc Systeme zum Detektieren einer unzweckmässigen Implementierung einer Präsentation von Inhaltselementen durch Anwendungen, die auf Client-Geräten ablaufen
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10397262B2 (en) 2017-07-20 2019-08-27 Biocatch Ltd. Device, system, and method of detecting overlay malware
US10417339B2 (en) 2017-08-18 2019-09-17 Kyocera Document Solutions Inc. Suggestion of alternate user input using different user interface
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
KR20190065746A (ko) * 2017-12-04 2019-06-12 삼성전자주식회사 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
CN111866565B (zh) * 2019-04-26 2022-09-02 三星电子株式会社 显示装置及显示装置的控制方法
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
USD951286S1 (en) * 2019-11-19 2022-05-10 Johnson Systems Inc. Display screen with graphical user interface
EP3832434A1 (en) * 2019-12-03 2021-06-09 XRSpace CO., LTD. Behavior-based configuration method and behavior-based configuration system
US11181988B1 (en) 2020-08-31 2021-11-23 Apple Inc. Incorporating user feedback into text prediction models via joint reward planning
CN113448465A (zh) * 2021-06-29 2021-09-28 腾讯科技(深圳)有限公司 虚拟光标的控制方法、装置和存储介质及电子设备
US11606353B2 (en) 2021-07-22 2023-03-14 Biocatch Ltd. System, device, and method of generating and utilizing one-time passwords

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09160910A (ja) * 1995-12-04 1997-06-20 Matsushita Electric Ind Co Ltd ソフトウェアキーボード表示方式
JP2003530772A (ja) * 2000-04-10 2003-10-14 インターリンク エレクトロニクス インコーポレイテッド 画面マッピングのためのタッチ・パッドを有するリモートコントロール
JP2006293797A (ja) * 2005-04-13 2006-10-26 Sharp Corp 情報端末装置、情報入力方法、情報入力プログラム、及び記録媒体

Family Cites Families (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0649030Y2 (ja) * 1989-04-05 1994-12-12 パイオニア株式会社 データ入力装置
US5128672A (en) * 1990-10-30 1992-07-07 Apple Computer, Inc. Dynamic predictive keyboard
JPH07117868B2 (ja) * 1991-04-30 1995-12-18 インターナショナル・ビジネス・マシーンズ・コーポレイション タツチ型作動キーボード定義方法及び装置
US5963671A (en) * 1991-11-27 1999-10-05 International Business Machines Corporation Enhancement of soft keyboard operations using trigram prediction
JPH08221169A (ja) 1995-02-14 1996-08-30 Matsushita Electric Ind Co Ltd ソフトウェアキーボード表示方法とその装置
US5652630A (en) * 1995-05-31 1997-07-29 International Business Machines Corporation Video receiver display, three axis remote control, and microcontroller for executing programs
US5724106A (en) * 1995-07-17 1998-03-03 Gateway 2000, Inc. Hand held remote control device with trigger button
JPH09251347A (ja) 1996-03-15 1997-09-22 Matsushita Electric Ind Co Ltd 座標入力装置
US6222528B1 (en) * 1997-03-07 2001-04-24 Cirque Corporation Method and apparatus for data input
US7800592B2 (en) * 2005-03-04 2010-09-21 Apple Inc. Hand held electronic device with multiple touch sensing devices
US6359270B1 (en) * 1998-09-04 2002-03-19 Ncr Corporation Communications module mounting for domestic appliance
US7750891B2 (en) * 2003-04-09 2010-07-06 Tegic Communications, Inc. Selective input system based on tracking of motion parameters of an input device
US6396523B1 (en) * 1999-07-29 2002-05-28 Interlink Electronics, Inc. Home entertainment device remote control
AU780674B2 (en) * 1999-10-27 2005-04-07 Keyless Systems Ltd. Integrated keypad system
US8271336B2 (en) * 1999-11-22 2012-09-18 Accenture Global Services Gmbh Increased visibility during order management in a network-based supply chain environment
US20010030667A1 (en) * 2000-04-10 2001-10-18 Kelts Brett R. Interactive display interface for information objects
US20020093535A1 (en) * 2001-01-17 2002-07-18 Murphy Michael William User interface for character entry using a minimum number of selection keys
US6520699B2 (en) * 2001-02-16 2003-02-18 Toshiyasu Abe Keyboard
US6692170B2 (en) * 2001-02-21 2004-02-17 Eli Abir Method and apparatus for text input
US6724370B2 (en) * 2001-04-12 2004-04-20 International Business Machines Corporation Touchscreen user interface
CN101727276A (zh) * 2001-07-12 2010-06-09 本杰明·菲罗兹·加萨比安 通过小型数据输入单元增强数据输入的特征
TWI235942B (en) * 2001-10-29 2005-07-11 Oqo Inc Keyboard with variable-sized key
US7002553B2 (en) * 2001-12-27 2006-02-21 Mark Shkolnikov Active keyboard system for handheld electronic devices
US20030197736A1 (en) * 2002-01-16 2003-10-23 Murphy Michael W. User interface for character entry using a minimum number of selection keys
SG125895A1 (en) * 2002-04-04 2006-10-30 Xrgomics Pte Ltd Reduced keyboard system that emulates qwerty-type mapping and typing
JP4109902B2 (ja) * 2002-05-27 2008-07-02 キヤノン株式会社 表示装置
US20040080487A1 (en) * 2002-10-29 2004-04-29 Griffin Jason T. Electronic device having keyboard for thumb typing
US7098896B2 (en) * 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
US7382358B2 (en) * 2003-01-16 2008-06-03 Forword Input, Inc. System and method for continuous stroke word-based text input
US7453439B1 (en) * 2003-01-16 2008-11-18 Forward Input Inc. System and method for continuous stroke word-based text input
US20040239624A1 (en) * 2003-04-02 2004-12-02 Artoun Ramian Freehand symbolic input apparatus and method
CA2522604A1 (en) * 2003-04-18 2004-11-04 Benjamin Firooz Ghassabian Systems to enhance data entry in mobile and fixed environment
KR100593982B1 (ko) * 2003-11-06 2006-06-30 삼성전자주식회사 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체
US20050141770A1 (en) * 2003-12-30 2005-06-30 Nokia Corporation Split on-screen keyboard
US20050162402A1 (en) * 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
WO2005081894A2 (en) * 2004-02-23 2005-09-09 Hillcrest Laboratories, Inc. Keyboardless text entry
US8095364B2 (en) * 2004-06-02 2012-01-10 Tegic Communications, Inc. Multimodal disambiguation of speech recognition
NZ589653A (en) * 2004-06-04 2012-10-26 Keyless Systems Ltd System to enhance data entry in mobile and fixed environment
KR100678945B1 (ko) * 2004-12-03 2007-02-07 삼성전자주식회사 터치패드 입력 정보 처리 장치 및 방법
US8552984B2 (en) * 2005-01-13 2013-10-08 602531 British Columbia Ltd. Method, system, apparatus and computer-readable media for directing input associated with keyboard-type device
US7630980B2 (en) * 2005-01-21 2009-12-08 Prashant Parikh Automatic dynamic contextual data entry completion system
US20090135162A1 (en) * 2005-03-10 2009-05-28 Koninklijke Philips Electronics, N.V. System and Method For Detecting the Location, Size and Shape of Multiple Objects That Interact With a Touch Screen Display
US20060227032A1 (en) * 2005-04-11 2006-10-12 Alberto Vidal Apparatus and method to facilitate universal remote control
US7382357B2 (en) * 2005-04-25 2008-06-03 Avago Technologies Ecbu Ip Pte Ltd User interface incorporating emulated hard keys
US8117540B2 (en) * 2005-05-18 2012-02-14 Neuer Wall Treuhand Gmbh Method and device incorporating improved text input mechanism
US8036878B2 (en) * 2005-05-18 2011-10-11 Never Wall Treuhand GmbH Device incorporating improved text input mechanism
CA2612489A1 (en) * 2005-06-16 2007-10-11 Firooz Ghassabian Data entry system
US7737999B2 (en) * 2005-08-26 2010-06-15 Veveo, Inc. User interface for visual cooperation between text input and display device
US7443316B2 (en) * 2005-09-01 2008-10-28 Motorola, Inc. Entering a character into an electronic device
US7539472B2 (en) * 2005-09-13 2009-05-26 Microsoft Corporation Type-ahead keypad input for an input device
US7542029B2 (en) * 2005-09-20 2009-06-02 Cliff Kushler System and method for a user interface for text editing and menu selection
US8689147B2 (en) * 2005-10-07 2014-04-01 Blackberry Limited System and method for using navigational and other commands on a mobile communication device
US7869832B2 (en) * 2005-10-07 2011-01-11 Research In Motion Limited Device, system, and method for informing users of functions and characters associated with telephone keys
US7649478B1 (en) * 2005-11-03 2010-01-19 Hyoungsoo Yoon Data entry using sequential keystrokes
US7716603B2 (en) * 2005-12-09 2010-05-11 Sony Corporation On screen display for alpha-numeric input
JP2007221604A (ja) * 2006-02-17 2007-08-30 Canon Inc 画像形成装置
US7657526B2 (en) * 2006-03-06 2010-02-02 Veveo, Inc. Methods and systems for selecting and presenting content based on activity level spikes associated with the content
US8296484B2 (en) * 2006-03-30 2012-10-23 Harris Corporation Alphanumeric data entry apparatus and method using multicharacter keys of a keypad
US7477165B2 (en) * 2006-04-06 2009-01-13 Research In Motion Limited Handheld electronic device and method for learning contextual data during disambiguation of text input
EP2016513A4 (en) * 2006-04-20 2010-03-03 Veveo Inc USER INTERFACE METHODS AND SYSTEMS FOR SELECTING AND PRESENTING CONTENT BASED ON NAVIGATION AND USER SELECTION ACTIONS ASSOCIATED WITH THE CONTENT
KR100690961B1 (ko) * 2006-06-30 2007-03-09 삼성전자주식회사 이동통신단말기의 문자 입력 방법 및 그 장치
US8786554B2 (en) * 2006-07-10 2014-07-22 Atmel Corporation Priority and combination suppression techniques (PST/CST) for a capacitive keyboard
WO2008063987A2 (en) * 2006-11-13 2008-05-29 Veveo, Inc. Method of and system for selecting and presenting content based on user identification
ATE497206T1 (de) * 2006-12-29 2011-02-15 Research In Motion Ltd Tragbare elektronische vorrichtung mit eingabebestätigung und entsprechendes verfahren
US7957955B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Method and system for providing word recommendations for text input
US8373655B2 (en) * 2007-01-05 2013-02-12 Apple Inc. Adaptive acceleration of mouse cursor
US8078978B2 (en) * 2007-10-19 2011-12-13 Google Inc. Method and system for predicting text
JP2010521022A (ja) * 2007-02-23 2010-06-17 ティーピーアイ カンパニー リミテッド デジタル機器に使われるポインティング装置を利用した仮想キーボード入力システム
US8330625B2 (en) * 2007-03-30 2012-12-11 Honeywell International Inc. Aircraft systems with flight management systems that display reports
WO2008148009A1 (en) * 2007-05-25 2008-12-04 Veveo, Inc. Method and system for unified searching across and within multiple documents
US8065624B2 (en) * 2007-06-28 2011-11-22 Panasonic Corporation Virtual keypad systems and methods
US8316035B2 (en) * 2008-01-16 2012-11-20 International Business Machines Corporation Systems and arrangements of text type-ahead
WO2009137000A2 (en) * 2008-04-18 2009-11-12 Cirque Corporation A method and system for performing scrolling by movement of a pointing object in a curvilinear path on a touchpad
EP2389622A1 (en) * 2009-01-26 2011-11-30 Zrro Technologies (2009) Ltd. Device and method for monitoring an object's behavior
US8749589B2 (en) * 2009-03-31 2014-06-10 Dell Products L.P. Information handling system with touch pad and point stick
KR20100116058A (ko) * 2009-04-21 2010-10-29 삼성전자주식회사 휴대단말에서 멀티터치 입력 처리 방법
US20110279354A1 (en) * 2010-05-12 2011-11-17 Aaron Tang Computer with tv mode
US9436219B2 (en) * 2010-05-12 2016-09-06 Litl Llc Remote control to operate computer system
US9626429B2 (en) * 2010-11-10 2017-04-18 Nuance Communications, Inc. Text entry with word prediction, completion, or correction supplemented by search of shared corpus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09160910A (ja) * 1995-12-04 1997-06-20 Matsushita Electric Ind Co Ltd ソフトウェアキーボード表示方式
JP2003530772A (ja) * 2000-04-10 2003-10-14 インターリンク エレクトロニクス インコーポレイテッド 画面マッピングのためのタッチ・パッドを有するリモートコントロール
JP2006293797A (ja) * 2005-04-13 2006-10-26 Sharp Corp 情報端末装置、情報入力方法、情報入力プログラム、及び記録媒体

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5541166B2 (ja) * 2009-01-20 2014-07-09 日本電気株式会社 入力装置、情報処理装置、入力方法およびプログラム
JP2011154573A (ja) * 2010-01-27 2011-08-11 Kyocera Corp 携帯電子機器
JP2014533866A (ja) * 2011-11-23 2014-12-15 マイクロソフト コーポレーション タッチ・センサーの動的スケーリング
JP2022529856A (ja) * 2019-04-26 2022-06-24 ソニー・インタラクティブエンタテインメント エルエルシー タッチパッド入力を備えたゲームコントローラ
JP7315705B2 (ja) 2019-04-26 2023-07-26 ソニー・インタラクティブエンタテインメント エルエルシー タッチパッド入力を備えたゲームコントローラ

Also Published As

Publication number Publication date
WO2009006221A1 (en) 2009-01-08
EP2160672A4 (en) 2011-07-27
US20090007001A1 (en) 2009-01-01
US8065624B2 (en) 2011-11-22
US20100164897A1 (en) 2010-07-01
JP5323070B2 (ja) 2013-10-23
EP2160672A1 (en) 2010-03-10

Similar Documents

Publication Publication Date Title
JP5323070B2 (ja) 仮想キーパッドシステム
US20220261112A1 (en) Systems, devices, and methods for touch-free typing
US8125440B2 (en) Method and device for controlling and inputting data
US9710085B2 (en) Pointer display device, pointer display/detection method, pointer display/detection program and information apparatus
JP5730667B2 (ja) デュアルスクリーン上のユーザジェスチャのための方法及びデュアルスクリーンデバイス
US20160364138A1 (en) Front touchscreen and back touchpad operated user interface employing semi-persistent button groups
US20170017393A1 (en) Method for controlling interactive objects from a touchpad of a computerized device
US20110209087A1 (en) Method and device for controlling an inputting data
US20050162402A1 (en) Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
US20100259482A1 (en) Keyboard gesturing
KR20130088752A (ko) 다방향 버튼, 키 및 키보드
US10928906B2 (en) Data entry device for entering characters by a finger with haptic feedback
US20210247849A1 (en) Input device, signal processing unit thereto, and method to control the input device
US20110126100A1 (en) Method of providing gui for guiding start position of user operation and digital device using the same
CN111007977A (zh) 智能虚拟交互方法及装置
Benko et al. Imprecision, inaccuracy, and frustration: The tale of touch input
US20230236673A1 (en) Non-standard keyboard input system
US20180011612A1 (en) A method for layout and selection of the menu elements in man-machine interface
CN114040857A (zh) 用于运行车辆中的操作系统的方法和车辆中的操作系统
Ni A framework of freehand gesture interaction: techniques, guidelines, and applications
KR20150049661A (ko) 터치패드 입력 정보 처리 장치 및 방법
Gaur AUGMENTED TOUCH INTERACTIONS WITH FINGER CONTACT SHAPE AND ORIENTATION
CN111566602A (zh) 具有改进的触摸界面的计算机设备及相应的方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110525

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121022

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130716

R150 Certificate of patent or registration of utility model

Ref document number: 5323070

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250