JP2019109909A - ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 - Google Patents
ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 Download PDFInfo
- Publication number
- JP2019109909A JP2019109909A JP2019019630A JP2019019630A JP2019109909A JP 2019109909 A JP2019109909 A JP 2019109909A JP 2019019630 A JP2019019630 A JP 2019019630A JP 2019019630 A JP2019019630 A JP 2019019630A JP 2019109909 A JP2019109909 A JP 2019109909A
- Authority
- JP
- Japan
- Prior art keywords
- handheld device
- sensor
- sensor signal
- gripping
- pressure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
Abstract
【課題】検出されたユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置を提供する。【解決手段】ハンドヘルド装置10のディスプレイ12において第1のGUI構成に従ってグラフィカルユーザインターフェース(GUI)を表示するステップと、ハンドヘルド装置10に結合されるセンサ18からハンドヘルド装置10との接触を示すセンサ信号を受信するステップと、センサ信号に少なくとも部分的に基づいて把持接触を決定するステップと、把持接触に少なくとも部分的に基づいて第2のGUI構成を決定するステップと、第2のGUI構成に従ってディスプレイ12にGUIを表示するステップとを含む。【選択図】図1
Description
本発明は、概して、グラフィカルユーザインターフェースを表示するための方法及び装置に関し、より詳細には、ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置に関する。
現在、電話をかけること及びテキストメッセージを送信することから、ビデオの記録、写真の撮影及びインターネットのブラウジングにまで及ぶ無数のタスクを実行するためにハンドヘルド装置が使用されている。ハンドヘルド装置、特にタッチスクリーンを備えるハンドヘルド装置を使用する場合、通常のユーザは、様々な要因(例えば、実行されるタスク、手の利用可能性、快適性、嗜好等)により様々な異なるやり方でハンドヘルド装置を掴む又は握ることが多い。例えば、テキストメッセージ又はEメールを作成するとき、ユーザは装置を水平又は横長方向に回して、両手の親指を使ってメッセージを作成するために2つの手で装置を把持することが多い。しかしながら、ユーザの利用可能な手が1つしかない場合(例えば、片手でコーヒーカップを持って立っている場合)、ユーザはハンドヘルド装置を垂直又は縦長方向に把持して1本の親指でメッセージを作成することを選ぶことが多い。この行動に適合するために、現在のハンドヘルド装置はディスプレイを回転させ、場合によってはハンドヘルド装置が垂直方向であるか又は水平方向であるかに基づいてユーザインターフェースを変更する。便利な一方で、垂直又は水平方向のみに基づくユーザインターフェースの調節は、ユーザが装置を両手に対して片手で持っているかどうか、又はユーザが使用している片手の又は両手の把持の種類を考慮に入れない荒削りなツールである。結果として、現在の装置は、ハンドヘルド装置が垂直に向けられている間にユーザが使用する場合がある様々な握り又は掴み、又はハンドヘルド装置が垂直に向けられているときにユーザが使用する場合がある様々な握り又は掴みに関してユーザインターフェースの構成を調節しない。
本開示は、概して、ハンドヘルド装置のディスプレイにおいて第1のGUI構成に従ってグラフィカルユーザインターフェース(GUI)を表示するステップと、ハンドヘルド装置に結合されるセンサからハンドヘルド装置との接触を示すセンサ信号を受信するステップと、センサ信号に少なくとも部分的に基づいて把持接触を決定するステップと、把持接触に少なくとも部分的に基づいて第2のGUI構成を決定するステップと、第2のGUI構成に従ってディスプレイにGUIを表示するステップとを含む方法に関する。別の実施形態は、このような方法を実行するためのプロセッサ実行可能ソフトウェアプログラムコードで符号化されたコンピュータ可読媒体を含む。
本明細書に開示の例示の実施形態は、本発明を限定又は定義するために言及されるのではなく、その理解を支援するための例示を提供するものである。例示の実施形態は、詳細な説明において検討されており、そこには本発明の更なる説明が提供されている。本発明の様々な実施形態によってもたらされる利点は、本明細書を吟味することにより更に理解され得る。
本開示のこうした及び他の特徴、態様、及び利点は、添付の図面を参照して以下の詳細な説明を読むと更によく理解される。
本開示による実施形態は、ユーザの接触に基づいてグラフィカルGUI構成を表示するための方法及びハンドヘルド装置を提供する。特に、ユーザがハンドヘルド装置をどのように握るか又は掴むかに基づいて様々なグラフィカルGUI構成が表示される。
(例示的な実施形態)
1つの例示的な実施形態では、タッチスクリーン携帯電話は、携帯電話の側部に加えられる圧力を検出及び測定するように構成される2つの圧力センサを備える。ハンドヘルド装置は、圧力測定値を処理して、ユーザが携帯電話をどのように握っているか又は掴んでいるかを決定する。
1つの例示的な実施形態では、タッチスクリーン携帯電話は、携帯電話の側部に加えられる圧力を検出及び測定するように構成される2つの圧力センサを備える。ハンドヘルド装置は、圧力測定値を処理して、ユーザが携帯電話をどのように握っているか又は掴んでいるかを決定する。
特定の例示において、携帯電話は、相互作用可能な地図アプリケーションを表示しており、ユーザが携帯電話を右手で垂直方向に握っているように握りを変えたことを決定する。これに応じて、携帯電話は、インターフェースコントロールがディスプレイの右側に位置するように携帯電話に表示される相互作用可能な地図アプリケーションのGUIを構成する。携帯電話を右手で垂直に握る場合、ユーザの右親指は、通常は自由に移動可能であり、相互作用可能な地図アプリケーションのGUIと相互作用するために最も好都合な指であってもよい。ユーザの右親指の近くにインターフェースコントロールを配置するように相互作用可能な地図アプリケーションのGUIを構成することによって、携帯電話はGUIの使用可能性を最大化する。
ユーザが引き続き携帯電話の把持を変更すると、携帯電話は、携帯電話に適用される新しい把持をそれぞれ決定して、様々な把持に基づいてGUIを表示する。例えば、ユーザは、左手で携帯電話の左側を掴み且つ右手で携帯電話の右側を掴んで携帯電話を水平方向に握っているように携帯電話の把持を調節してもよい。これに応じて、携帯電話は、インターフェースコントロールがユーザの親指に近接してディスプレイの左及び右側に位置するように相互作用可能な地図アプリケーションに対するGUIを構成する。携帯電話をこのように握る場合、ユーザの親指は、一般的に邪魔がなく、図11に示されるようにGUIと相互作用するために最も好都合な指である。再度、ユーザの把持に基づいてGUIを修正することによって、携帯電話は携帯電話のユーザビリティを最大限に高めるように相互作用可能な地図アプリケーションのGUIを構成する。
(例示的な装置)
次に図1を参照すると、本開示の一実施形態によるハンドヘルド装置を例示するブロック図が示される。ハンドヘルド装置10はプロセッサ14を備える。また、ハンドヘルド装置10は、メモリ16、ディスプレイ12、入力装置15、及びセンサ18を備え、全てはプロセッサ14と通信する。一実施形態では、ハンドヘルド装置10は携帯電話である。他の実施形態では、ハンドヘルド装置10は、MP3プレーヤ、デジタルカメラ、ハンドヘルドビデオゲーム装置、タブレットコンピュータ、又はディスプレイを備える任意の他のハンドヘルド装置であってもよい。
次に図1を参照すると、本開示の一実施形態によるハンドヘルド装置を例示するブロック図が示される。ハンドヘルド装置10はプロセッサ14を備える。また、ハンドヘルド装置10は、メモリ16、ディスプレイ12、入力装置15、及びセンサ18を備え、全てはプロセッサ14と通信する。一実施形態では、ハンドヘルド装置10は携帯電話である。他の実施形態では、ハンドヘルド装置10は、MP3プレーヤ、デジタルカメラ、ハンドヘルドビデオゲーム装置、タブレットコンピュータ、又はディスプレイを備える任意の他のハンドヘルド装置であってもよい。
一部の実施形態では、ハンドヘルド装置10は、ディスプレイ12及び入力装置15の両方として機能するタッチスクリーンを備える。他の実施形態では、入力装置15は、1つ以上のボタン、トラックボール、スクロールホイール、タッチパッド、及び/又は当業者には周知の他の入力装置を含んでもよい。一部の実施形態では、ハンドヘルド装置10は、ネットワークと及び/又は別の装置と通信するための通信要素を更に備える。例えば、通信要素は、無線ネットワーク装置、セルラネットワークと通信するためのモジュール及びアンテナ、又は別の装置と直接通信するためのモジュール及びアンテナであってもよい。また、ハンドヘルド装置10は、プロセッサ14によって実行可能なソフトウェアプログラムコードを記憶するメモリ16を備える。例えば、メモリ16は、オペレーティングシステム及びユーザアプリケーションのためのプログラムコードを記憶するランダムアクセスメモリを含んでもよい。例えば、メモリ16は、地図アプリケーション、Eメールアプリケーション、メッセージングアプリケーション、カメラアプリケーション、インターネットブラウザアプリケーション、ミュージックアプリケーション、カレンダアプリケーション、又は任意の他のアプリケーションを含むユーザアプリケーションを含んでもよい。
図1のブロック図において「センサ18」とラベルされた2つのボックスの存在は、本開示による特定の実施形態を特定の数のセンサに限定することを意図していない。むしろ、本開示による様々な実施形態が1つのセンサ、2つのセンサ又は任意の数のセンサを含んでもよいことを示すことを意図している。例えば、図2は、ハンドヘルド装置10の各側部に1つ位置する2つのセンサ18を含む本開示による一実施形態によるハンドヘルド装置10を例示する。図3は、ハンドヘルド装置10の各側部に1つ位置する2つのセンサ18、及びハンドヘルド装置10の上部に位置する追加のセンサ18を含む本開示による一実施形態によるハンドヘルド装置10を例示する。図4によって例示される更に別の実施形態では、ハンドヘルド装置10は、9つのセンサ18、すなわちハンドヘルド装置10の各側部に位置する4つのセンサ18、及びハンドヘルド装置10の上部に位置する追加のセンサ18を含む。追加の実施形態は、1つ以上のセンサ18を含んでもよい。更に、他の実施形態は、背後、底、及び/又はハンドヘルド装置10の外面に位置する1つ以上のセンサ18を含んでもよい。更に、様々な実施形態における1つ以上のセンサ18は、変化するサイズ及び形状を有する感知領域を有してもよい。例えば、図4に示されるように、ハンドヘルド装置10の上部に位置するセンサ18は、ハンドヘルド装置10の左及び右側に位置するセンサ18の円形感知領域より広い領域を有する楕円形感知領域を有してもよい。つまり、本開示は、ハンドヘルド装置10の1つ以上の外面の各々に位置する領域及び/又は形状が変化し得る感知領域を有する1つ以上のセンサ18を含む複数の実施形態を考えている。
複数の実施形態によるセンサ18は、当業者であればハンドヘルド装置10に加えられる把持接触を検出するために使用することを知っている任意の種類のセンサであってもよい。一実施形態では、センサ18は圧力センサである。例えば、センサ18は、抵抗性圧力センサ、圧電性圧力センサ、歪みゲージ、又は当技術分野で周知の任意の種類の圧力センサであってもよい。別の実施形態では、センサ18は、接触の領域及び/又は寸法を決定することが可能なセンサである。例えば、センサ18は、容量性センサ又は接触の領域及び/又は寸法を決定することが可能な当技術分野で周知の任意の他の種類のセンサであってもよい。
更に、ユーザによって加えられる把持接触を検出することを可能にする当業者には周知の任意の方式で、1つ以上のセンサ18ハンドヘルド装置10に統合されてもよい。例えば、圧電性センサが、ハンドヘルド装置10に加えられる把持接触を示す筐体の僅かな変形を検出することができるように、ハンドヘルド装置10の筐体に内部的に結合されてもよい。別の実施形態では、ハンドヘルド装置10の筐体の外面に1つ以上の容量性センサが結合されてもよい。別の例示の実施形態では、ハンドヘルド装置10に加えられる把持力が感知パッドに直接加えられ得るように、力感応抵抗の感知パッドがハンドヘルド装置10の筐体の表面に統合されてもよい。他の実施形態では、ハンドヘルド装置10の筐体の外面に1つ以上の圧力センサが結合される。
一実施形態では、ハンドヘルド装置10は、加速度計、ジャイロスコープ、圧電性センサ、又はハンドヘルド装置10の加速度、移動及び/又は方向を検出するための他の適切なセンサを備えてもよい。このような実施形態では、検出された方向は、ハンドヘルド装置に加えられる把持接触を決定するために検出された圧力と併せて使用されてもよい。例えば、ハンドヘルド装置10は、加速度計を使用して水平方向を検出すること及び1つ以上の圧力センサ18を使用して(図11に示されるように)ユーザが各端部で電話を握っていることを示す圧力を検出することによって、水平方向に向けられた両手の握りがハンドヘルド装置10に加えられていることを決定してもよい。他の実施形態では、1つ以上の圧力センサ18によって検出される圧力に基づいて方向が決定される。
(例示の把持接触)
図6−14は、本開示の実施形態によるハンドヘルド装置との把持接触(本明細書では把持とも呼ばれる)の例示を示す。特に、図6は、例示的な垂直に向けられた左手の把持を示す。図7は、例示的な垂直に向けられた右手の把持を示す。図8は、例示的な垂直に向けられた両手の把持を示す。図9は、例示的な水平に向けられた左手の把持を示す。図10は、例示的な水平に向けられた右手の把持を示す。図11は、例示的な水平に向けられた両手の把持を示す。図12は、例示的な右手のカメラの把持を示す。図13は、例示的な左手のカメラの把持を示す。図14は、例示的な両手のカメラの把持を示す。しかしながら、図6〜14によって示される例示的な把持接触は例であり、本開示によって考えられる把持接触はこうした例示的な実施形態に限定されない。ユーザがハンドヘルド装置を握るために使用し得る把持接触の全ての変形が本開示によって考えられる。
図6−14は、本開示の実施形態によるハンドヘルド装置との把持接触(本明細書では把持とも呼ばれる)の例示を示す。特に、図6は、例示的な垂直に向けられた左手の把持を示す。図7は、例示的な垂直に向けられた右手の把持を示す。図8は、例示的な垂直に向けられた両手の把持を示す。図9は、例示的な水平に向けられた左手の把持を示す。図10は、例示的な水平に向けられた右手の把持を示す。図11は、例示的な水平に向けられた両手の把持を示す。図12は、例示的な右手のカメラの把持を示す。図13は、例示的な左手のカメラの把持を示す。図14は、例示的な両手のカメラの把持を示す。しかしながら、図6〜14によって示される例示的な把持接触は例であり、本開示によって考えられる把持接触はこうした例示的な実施形態に限定されない。ユーザがハンドヘルド装置を握るために使用し得る把持接触の全ての変形が本開示によって考えられる。
(例示的なハンドヘルド装置の動作)
図5は、一実施形態によるハンドヘルド装置の動作を示す流れ図である。特に、図5は、ハンドヘルド装置のユーザの把持に基づいてGUI構成を提供するためにハンドヘルド装置によって実行されるステップを示す。各ステップがどのように実行され得るかの理解を支援するために、以下の記載は、図1に示されるハンドヘルド装置の例示的なブロック図との関連で提供される。しかしながら、本開示による実施形態は、代替的な実施形態で実装されてもよい。
図5は、一実施形態によるハンドヘルド装置の動作を示す流れ図である。特に、図5は、ハンドヘルド装置のユーザの把持に基づいてGUI構成を提供するためにハンドヘルド装置によって実行されるステップを示す。各ステップがどのように実行され得るかの理解を支援するために、以下の記載は、図1に示されるハンドヘルド装置の例示的なブロック図との関連で提供される。しかしながら、本開示による実施形態は、代替的な実施形態で実装されてもよい。
ステップ51で開始すると、ハンドヘルド装置10は、第1の構成によるGUIを表示する。第1のGUI構成は、ハンドヘルド装置10によって認識可能な任意の把持接触又は把持接触の欠如に関係付けられる任意のGUI構成であってもよい。例えば、ハンドヘルド装置10が図5のステップ52−56の以前の反復における把持接触に従ったという検出に基づいてハンドヘルド装置10の水平に向けられた右手の把持に関係付けられるGUI構成を表示していてもよい。別の例示では、ハンドヘルド装置10は、把持接触がないこと及び未知の把持接触に関係付けられるデフォルトのGUI構成を表示していてもよい。
ステップ52において、ハンドヘルド装置のプロセッサ14が、センサ18によって取得される測定値を示すセンサ信号を受信する。例えば、一実施形態では、ハンドヘルド装置10は圧力センサ18を備え、プロセッサ14によって受信されるセンサ信号は、センサ18が閾値の大きさを超えるセンサ18に加えられる圧力を検出するかどうかを示す。
別の実施形態では、プロセッサ14によって受信されるセンサ信号は、センサ18に加えられる圧力の強度値を示す。このような実施形態では、センサ信号は、センサに圧力が加えられていないことをセンサが検出するゼロの強度値を示してもよい。別の実施形態では、センサ18は、圧力が検出されなければセンサ信号を提供しない。更に別の実施形態では、ハンドヘルド装置10は容量性センサ18を備え、プロセッサ14によって受信されるセンサ信号は、センサ18に加えられる接触の領域及び/又は寸法を示す。この実施形態では、次にハンドヘルド装置10は、センサ18に加えられる接触の領域及び/又は寸法に基づいて加えられた圧力を決定してもよい。
別の実施形態では、プロセッサ14によって受信されるセンサ信号は、センサ18に加えられる圧力の強度値を示す。このような実施形態では、センサ信号は、センサに圧力が加えられていないことをセンサが検出するゼロの強度値を示してもよい。別の実施形態では、センサ18は、圧力が検出されなければセンサ信号を提供しない。更に別の実施形態では、ハンドヘルド装置10は容量性センサ18を備え、プロセッサ14によって受信されるセンサ信号は、センサ18に加えられる接触の領域及び/又は寸法を示す。この実施形態では、次にハンドヘルド装置10は、センサ18に加えられる接触の領域及び/又は寸法に基づいて加えられた圧力を決定してもよい。
上記のように、ハンドヘルド装置10は複数のセンサ18を備えてもよい。このような実施形態では、プロセッサ14は、複数のセンサ18の2つ以上によって検出される圧力又は接触の領域及び/又は寸法を示す信号を受信する。他の実施形態では、複数のセンサ18の各々によって検出される圧力又は接触の領域及び/又は寸法は、ハンドヘルド装置10のプロセッサ14によって受信される。
一実施形態では、プロセッサ14は、1つ以上のセンサ18の出力を定期的に確認することでセンサ信号を受信する。別の実施形態では、プロセッサ14は、センサ18の1つ以上のセンサ測定値の変化を示すハードウェアインタラプトを受信すると1つ以上のセンサ18の出力を確認する。代替的な実施形態では、プロセッサ14は、センサ18の1つ以上のセンサ測定値の変化を示すソフトウェアインタラプトを受信すると1つ以上のセンサ18の出力を確認する。
ステップ53において、ハンドヘルド装置10は、1つ以上のセンサ信号を処理して、特定の把持接触がハンドヘルド装置10に加えられていること、又は把持接触が現在のところ加えられていないことを決定する。一実施形態では、プロセッサ14は、ハンドヘルド装置10の1つ以上のセンサ18の各々に対応するセンサ信号を受信する。この実施形態では、プロセッサ14によって受信される各センサ信号は、対応するセンサ18が要求される閾値を超える圧力又は接触の存在(例えば、1のバイナリ値)又は不存在(例えば、0のバイナリ値)を検出することを示す。クライアント装置10のメモリ16が、把持接触を表すセンサ18のバイナリ値の可能な順列に対応する一組のマップを含んでもよい。例えば、クライアント装置10が4つのセンサ18を有する場合、クライアント装置のメモリ16は以下の組のマップを含んでもよい。0000,0001,0010,0011,0100,0101,0110,0111,1000,1001,1010,1011,1100,1101,1110,及び1111である。ここで、各ビットは特定のセンサを表し、各マップは特定の把持接触に関係付けられる。一部の実施形態では、1つより多くのマップが特定の把持接触に対応してもよい。各センサ18に対応するセンサ信号を受信すると、プロセッサ14は、各センサ信号に対応するバイナリ値を決定し、バイナリ値をマップの組と比較し、それによって適切なマップ及び対応する把持接触を決定してもよい。
別の実施形態では、プロセッサ14は、クライアント装置10の各センサ18に対応するセンサ信号を受信する。プロセッサ14によって受信される各センサ信号は、対応するセンサ18で検出される圧力の測定値を示す。別の実施形態では、プロセッサ14によって受信される各センサ信号は、対応するセンサ18で検出される接触の領域及び/又は寸法の測定値を示し、プロセッサ14は対応する圧力測定値を計算する。可能な圧力測定値の範囲は、対応する値を有する各小区域に再分割されてもよい。クライアント装置10のメモリ16が、把持接触を表す各センサ18に対応する再分割された圧力測定値の可能な順列に対応する一組のマップを含んでもよい。例えば、クライアント装置10が2つのセンサ18を有し、センサごとの範囲圧力強度が4つの小区域に再分割される場合、クライアント装置のメモリ16は以下の組のマップを含んでもよい。0000,0001,0010,0011,0100,0101,0110,0111,1000,1001,1010,1011,1100,1101,1110,及び1111である。ここで、最初の2ビットは第1のセンサ18を表し、2番目の2ビットは第2のセンサ18を表し、各マップは特定の把持接触に関係付けられる。一部の実施形態では、1つより多くのマップが特定の把持接触に対応してもよい。各センサ18に対応するセンサ信号を受信すると、プロセッサ14は、各センサ信号に対応する小区域値を決定し、その値をマップの組と比較し、それによって適切なマップ及び対応する把持接触を決定してもよい。
他の実施形態では、プロセッサ14は、ハンドヘルド装置10のセンサ18のサブセットに対応するセンサ信号を受信する。例えば、プロセッサ14は、圧力又は接触の領域及び/又は寸法の存在を検出しているハンドヘルド装置10の1つ以上のセンサ18の各々からセンサ信号を受信するが、圧力又は接触が加えられない又は要求される閾値を下回る圧力が加えられるセンサ18からは受信しなくてもよい。一実施形態では、ハンドヘルド装置10は、プロセッサ14がセンサ信号を受信しなかったセンサ18に対してデフォルト値(例えば、無圧力又は非接触に対して0のバイナリ値)を推定して、把持接触を決定するために上記のように適切なマップを決定する。
他の実施形態では、十進法、十六進法、又は任意の他の種類の数を用いるマップが使用されてもよい。更なる実施形態では、マップは全く使用されなくてもよい。例えば、一実施形態では、プロセッサ14は、ハンドヘルド装置10のセンサ18に関する圧力又は接触の領域及び/又は寸法の測定値を示すセンサ信号を受信して、他のセンサ18に関する測定値に対して特定のセンサ18に関する測定値を評価することによって把持接触を決定するアルゴリズムによって測定値を処理する。例えば、ハンドヘルド装置10がハンドヘルド装置10の各側にセンサ18を備え、左センサ18に加えられる圧力及び左センサ18に加えられる圧力よりも大きな強度である右センサ18に加えられる圧力を検出する場合、ハンドヘルド装置はユーザが左手にハンドヘルド装置を握っていることを決定する。
別の実施形態では、アルゴリズムは把持接触を決定するために実際の及び相対の測定値の両方を使用してもよい。更に別の実施形態では、把持接触を決定するために経時的な圧力測定値の値が使用される。別の実施形態では、ハンドヘルド装置10のユーザの感情/気分を決定するために経時的な圧力測定値の値が使用される。
別の実施形態では、アルゴリズムは把持接触を決定するために実際の及び相対の測定値の両方を使用してもよい。更に別の実施形態では、把持接触を決定するために経時的な圧力測定値の値が使用される。別の実施形態では、ハンドヘルド装置10のユーザの感情/気分を決定するために経時的な圧力測定値の値が使用される。
把持接触を検出することに加えて、ハンドヘルド装置10は把持接触の欠如を検出してもよい。一実施形態では、ハンドヘルド装置10は、全てのセンサ18が加えられる圧力を感知しないことに基づいて把持接触の欠如を決定する。別の実施形態では、ハンドヘルド装置10は、ハンドヘルド装置10がテーブル又は類似の表面に横たわっていることを決定することによって(例えば、ハンドヘルド装置10の背面に位置するセンサ18だけで圧力を検出することによって)把持接触の欠如を決定する。
一実施形態では、ステップ52及び53でハンドヘルド装置10に加えられる把持接触又はその欠如を決定するためにハンドヘルド装置10によって実行される動作は、メモリ16に記憶され且つプロセッサ14によって実行可能なソフトウェアプログラムコードを含むオペレーティングシステムソフトウェアモジュール又は類似のソフトウェアパッケージによって実行される。ステップ53で把持接触を決定した後、オペレーティングシステムソフトウェアモジュールは、アプリケーション層がステップ54で把持接触に基づいてGUI構成を決定し得るように、ハンドヘルド装置10のオペレーティングシステムのアプリケーション層に把持接触情報を提供するであろう。別の実施形態では、把持接触情報はハンドヘルド装置10で実行する1つ以上のアプリケーションに提供され、それにより1つ以上のアプリケーションは把持接触又はその欠如に基づいてGUI構成を決定してもよい。把持接触情報は、オペレーティングシステム層間のアプリケーションプログラムインターフェース、グローバルデータ構造、メッセージングを使用して、又は当業者に周知の任意の他の手段を介してアプリケーション層及び/又は1つ以上のアプリケーションに提供されてもよい。
ステップ54では、ハンドヘルド装置10は、ハンドヘルド装置10に決定された把持接触又は現在加えられている把持接触の欠如に基づいてGUI構成を決定する。一実施形態では、メモリ16は、ステップ52で検出された把持接触によって取得され得るGUI構成のデータベースを含む。別の実施形態では、メモリ16は、特定の把持接触に基づいて、及び把持接触が検出されるときに表示される特定のスクリーンに基づいて取得され得るGUI構成のデータベースを含む。例えば、ハンドヘルド装置10は、垂直に向けられた左手の把持がハンドヘルド装置10に加えられるとホームスクリーンを表示してもよい。ハンドヘルド装置10は、垂直に向けられた左手の把持の適用及びホームスクリーンのアクティブ状態に基づいてデータベースからGUI構成を取得する。別の実施形態では、ハンドヘルド装置10のメモリ16は、ハンドヘルド装置10で実行され得るアプリケーションのためのプログラムコードを含む。ここでアプリケーションプログラムコードは、GUI構成、及び表示されているアプリケーションスクリーンに基づく把持接触のGUI構成へのマッピングを含む。例えば、ハンドヘルド装置10が水平に向けられた両手の把持を検出するときに、ハンドヘルド装置10に文字通信アプリケーションのテキストメッセージ作成スクリーンが表示されてもよい。検出された把持接触及びテキストメッセージ作成スクリーンのアクティブ状態に基づいて、文字通信アプリケーションは、テキストメッセージ作成スクリーンを表示している間、把持接触のGUI構成へのマッピングに基づいてGUI構成を決定する。別の実施形態では、ハンドヘルド装置10は、ハンドヘルド装置10に加えられる把持接触の検出に基づいてアプリケーション又は特定の機能が立ち上げられることを決定する。例えば、ハンドヘルド装置10は、特定の把持接触(例えば、図12〜14の例示的なカメラ把持)に基づいてカメラアプリケーションを立ち上げるように構成されてもよい。次に、カメラアプリケーションは、ハンドヘルド装置10に現在加えられている把持接触に基づいて特定のGUI構成を決定してもよい。
一実施形態では、ハンドヘルド装置10は、ハンドヘルド装置10に加えられる決定された把持接触に基づいて及びハンドヘルド装置10の検出された移動又は加速度に基づいてGUI構成を決定する。例えば、ハンドヘルド装置10は、車両の移動中にユーザがハンドヘルド装置10に垂直に向けられた左手の把持を加えていることを決定して、検出された移動及び把持接触に基づいて特定のGUI構成を決定してもよい。一実施形態では、テキストメッセージングアプリケーションの作成スクリーンは、垂直に向けられた左手の把持の検出及び移動が検出されないことに対して特定のキーボード構成を表示するが、ハンドヘルド装置10が垂直に向けられた左手の把持がハンドヘルド装置10に加えられていることを決定し、またハンドヘルド装置10が移動中の車にあることも決定する場合にはキーボードを表示しない。
ステップ55では、ハンドヘルド装置10のディスプレイ12は、検出された把持接触に基づいてステップ54で検出されたGUI構成を提示する。決定されたGUI構成が既に表示されている場合、ハンドヘルド装置10は単に現在のGUI構成を表示し続ける。
検出された把持接触に基づいてステップ54で検出されたGUI構成が現在表示されているGUI構成とは異なる場合、ハンドヘルド装置10は、ステップ54で決定されたGUI構成に従ってディスプレイを更新する。別の実施形態では、ハンドヘルド装置10は、アプリケーション又は特定の機能及び検出された把持接触に基づいてステップ54で決定された対応するGUI構成を開始し、決定されたGUI構成に基づいてディスプレイ12を更新する。ハンドヘルド装置10がユーザ入力を受信する前にセンサ信号を受信する場合、方法はステップ52に戻る。ハンドヘルド装置がユーザ入力を受信すると、方法はステップ56に進む。
検出された把持接触に基づいてステップ54で検出されたGUI構成が現在表示されているGUI構成とは異なる場合、ハンドヘルド装置10は、ステップ54で決定されたGUI構成に従ってディスプレイを更新する。別の実施形態では、ハンドヘルド装置10は、アプリケーション又は特定の機能及び検出された把持接触に基づいてステップ54で決定された対応するGUI構成を開始し、決定されたGUI構成に基づいてディスプレイ12を更新する。ハンドヘルド装置10がユーザ入力を受信する前にセンサ信号を受信する場合、方法はステップ52に戻る。ハンドヘルド装置がユーザ入力を受信すると、方法はステップ56に進む。
本開示の目的で、ユーザ入力は、物理的コントロール(例えば、物理ボタン、スイッチ、スクロールホイール、又は当業者には周知の任意の他の物理的コントロール)の任意の操作、又は、タップし、押し、押してホールドし、スワイプし、又は例えば押すこと、ドラッグすること若しくは1つ以上の接触点の特徴を変更することによって、タッチスクリーン若しくはタッチパッドとの静的または動的な接触を介する任意の他の入力を提供するために、1つ以上の指、スタイラス若しくは類似の入力機構を使用することによるスクリーンに表示されたコントロール若しくはオブジェクトの操作であってもよい(本明細書では集合的に「ジェスチャ」と呼ばれる)。以下に検討されるように、一部の実施形態では、ユーザ入力は、把持接触、及び特定の把持接触によって提供される圧力の変化を更に含んでもよい。一実施形態では、ユーザ入力は音声を含んでもよい。別の実施形態では、ユーザ入力は、ユーザによって実行されるハンドヘルド装置10の揺動、回転及び/又は任意の他の物理的運動を含むハンドヘルド装置10を物理的に動かすことを含む。
ステップ56において、ユーザは、ハンドヘルド装置10の表示されたGUI構成と相互作用する。例えば、ユーザは、垂直に向けられた右手の把持を利用している間、ハンドヘルド装置10においてグラフィカル地図アプリケーションを使用していてもよい。マッピングアプリケーションは、垂直方向で地図を表示して、ディスプレイ12の右側に容易にアクセスし得るユーザの右手親指に最も近いハンドヘルド装置のディスプレイ12の右側において地図を観察するためのズーム及びパン制御を表示するGUI構成を使用するように構成されてもよい。有利なことに、表示されたGUI構成はハンドヘルド装置10のユーザの把持に基づくので、ユーザの把持に基づいて変化しない又は垂直/水平方向に基づく構成に限定されている静的GUIよりも便利なGUIを提供するように構成されてもよい。
ステップ57において、ハンドヘルド装置は、表示されたGUI構成に基づいてユーザ入力を解釈する。例えば、上記のマッピングアプリケーションの例では、ディスプレイ12の右側の領域のユーザのタップは、垂直に向けられた右手の把持のためのGUI構成に従ってズーム又はパン制御の操作として解釈されるであろう。別の実施形態では、ユーザ入力はスクリーン遷移を引き起こしてもよい。後続のスクリーンは、現在加えられている把持接触に基づく複数のGUI構成の1つであってもよい。例えば、上記のマッピングアプリケーションの例では、ユーザが地図検索ダイアログを立ち上げるためにボタンを押す場合、表示されたGUI構成は、垂直に向けられた右手の把持に基づいてディスプレイ12の右側に沿って検索ダイアログ及びキーパッドを含んでもよい。
図5のハンドヘルド装置の操作を例示する流れ図によって表される方法は反復処理であり、このステップは異なる順序で実行されてもよい。例えば、処理はステップ55でGUIを表示するステップから、ユーザによるハンドヘルド装置10の把持の適用又は変更の結果としてステップ52で1つ以上のセンサ信号を受信するステップに進んでもよい。同様に、処理はステップ57で表示されたGUIに基づいてユーザ入力を解釈して、次にユーザによるハンドヘルド装置10の把持の適用又は変更の結果としてステップ52で1つ以上のセンサ信号を受信することに進んでもよい。更に、上記のように、ステップ57において表示されたGUIに基づくユーザ入力の解釈がスクリーン遷移を引き起こしてもよい。従って、処理は、遷移に従って表示されたスクリーンのための適切なGUI構成を決定するためにステップ57からステップ54に進んでもよい。最後に、処理は、ステップ57において表示されたGUIに基づいてユーザ入力を解釈して、次にステップ56において追加のユーザ入力を受信することに進んでもよい。
(例示的なGUI構成)
図15A−Gは、本開示による様々な実施形態に従うGUI構成を例示する。図15Aは、図11によって示される把持等の水平に向けられた両手の把持でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、テキストメッセージ作成スクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。水平に向けられた両手の把持の検出に基づいて、ハンドヘルド装置1500は、水平に向けられたテキストメッセージ作成領域1510及びタッチスクリーン1502の底部に広がるキーボード1512を含むGUI構成が表示されるべきであると決定する。この構成により、ユーザがテキストメッセージを作成するために両親指を使用することが可能になる。水平に向けられた両手の把持を利用してテキストメッセージを作成している間、ユーザは把持を変更してもよい。例えば、ユーザは、ハンドヘルド装置1500の左手の把持を開放して、水平に向けられた右手の把持をもたらしてもよい。
図15A−Gは、本開示による様々な実施形態に従うGUI構成を例示する。図15Aは、図11によって示される把持等の水平に向けられた両手の把持でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、テキストメッセージ作成スクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。水平に向けられた両手の把持の検出に基づいて、ハンドヘルド装置1500は、水平に向けられたテキストメッセージ作成領域1510及びタッチスクリーン1502の底部に広がるキーボード1512を含むGUI構成が表示されるべきであると決定する。この構成により、ユーザがテキストメッセージを作成するために両親指を使用することが可能になる。水平に向けられた両手の把持を利用してテキストメッセージを作成している間、ユーザは把持を変更してもよい。例えば、ユーザは、ハンドヘルド装置1500の左手の把持を開放して、水平に向けられた右手の把持をもたらしてもよい。
図15Bは、図10によって示される把持等の水平に向けられた右手の把持でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、テキストメッセージ作成スクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。水平に向けられた右手の把持の検出に基づいて、ハンドヘルド装置1500は、水平に向けられたテキストメッセージ作成領域1520及びタッチスクリーン1502の右側に配置されるキーボード1522を含むGUI構成が表示されるべきであると決定する。この構成によって、ユーザが右親指、即ちタッチスクリーンの近くに位置する親指のみを使用して、テキストメッセージを作成することが可能になる。従って、ハンドヘルド装置1500は、テキストメッセージ作成スクリーンのGUIをユーザの把持に基づいてユーザビリティを最適化するように構成することができる。水平に向けられた右手の把持を利用してテキストメッセージを作成している間、ユーザは把持を再び変更してもよい。例えば、ユーザは、ハンドヘルド装置1500を垂直位置に回して、右手で握って、垂直に向けられた右手の把持をもたらしてもよい。
図15Cは、垂直に向けられた右手の把持(例えば、図7を参照)、垂直に向けられた左手の把持(例えば、図6を参照)、垂直に向けられた両手の把持(例えば、図8を参照)でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、テキストメッセージ作成スクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。垂直に向けられた右手の把持、垂直に向けられた左手の把持又は垂直に向けられた両手の把持の検出に基づいて、ハンドヘルド装置1500は、垂直に向けられたテキストメッセージ作成領域1530及びタッチスクリーン1502の底部に広がるキーボード1532を含むGUI構成が表示されるべきであると決定する。この実施形態では、垂直に向けられた右手の把持又は左手の把持を利用している間、ユーザの親指がディスプレイの全幅に容易に届くことができる。従って、垂直に向けられた右手の把持、垂直に向けられた左手の把持又は垂直に向けられた両手の把持のために単一のGUI構成が使用されてもよい。他の実施形態では、垂直に向けられた把持の各々に対して、テキストメッセージの作成のための異なるGUI構成が使用されてもよい。例えば、垂直位置にハンドヘルド装置1500を握っている間にタッチスクリーン1502の全幅に典型的なユーザの親指が届くことができないような幅をハンドヘルド装置1500のタッチスクリーン1502が有する場合、図15Bの例示的な実施形態に類似したスクリーンの適切な側にキーパッドを配置するGUI構成が利用されてもよい。
ステップ54に関して上記されたように、一実施形態では、ハンドヘルド装置1500は、1つ以上の特定の把持接触を検出すると現在表示されていない異なるアプリケーション又は機能を立ち上げ又は遷移するように構成されてもよい。例えば、一実施形態では、ユーザが展開中のイベントを見るときにテキストメッセージを作成中であり、イベントのビデオをキャプチャしたいと決断してから、右手のカメラ把持(例えば、図12参照)、左手のカメラ把持(例えば、図13参照)、又は両手のカメラ把持(例えば、図14参照)で電話を把持して、カメラアプリケーションを立ち上げ又はカメラ機能に遷移してもよい。
図15Dは、右手のカメラ把持(例えば、図12を参照)でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、カメラスクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。右手のカメラ把持の検出に基づいて、ハンドヘルド装置1500は、タッチスクリーン1502の左端からカメラ機能を操作するためのユーザインターフェースコントロールを表示するタッチスクリーン1502の右側に配置されたカメラコントロール領域1542に広がる水平に向けられたファインダ領域1540を含むGUI構成を決定する。図15Dに示された実施形態では、ユーザインターフェースコントロールは、写真モードボタン1544、ビデオモードボタン1546、及びシャッター/記録ボタン1548を含む。他の実施形態では、追加の又は代替的なコントロール(例えば、ズームコントロール、タイマコントロール、照明モードコントロール等)が表示されてもよい。
同様に、図15Eは、左手のカメラ把持(例えば、図13を参照)でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、カメラスクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。左手のカメラ把持の検出に基づいて、ハンドヘルド装置1500は、タッチスクリーン1502の右端からカメラ機能を操作するためのユーザインターフェースコントロールを表示するタッチスクリーン1502の左側に配置されたカメラコントロール領域1552に広がる水平に向けられたファインダ領域1550を含むGUI構成を決定する。図15Eに示された実施形態では、ユーザインターフェースコントロールは、写真モードボタン1554、ビデオモードボタン1556、及びシャッター/記録ボタン1558を含む。他の実施形態では、追加の又は代替的なコントロール(例えば、ズームコントロール、タイマコントロール、照明モードコントロール等)が表示されてもよい。
右手のカメラ把持及び左手のカメラ把持に関する図15D及び15Eの構成は、それぞれ、ユーザがカメラを制御するためにタッチスクリーン1502の近くに配置された親指を使用することを可能にする。従って、ハンドヘルド装置1500は、カメラスクリーンのGUIをユーザの把持に基づいてユーザビリティを最適化するように構成することができる。別の実施形態では、ユーザは、両手のカメラ把持(例えば、図14参照)をハンドヘルド装置1500に適用してもよい。両手のカメラ把持の場合、両方のユーザの親指がタッチスクリーン1502の近くに配置されるであろう。一実施形態では、両手のカメラ把持が適用されると、ハンドヘルド装置1500は、デフォルトの左手のカメラ把持に使用された同じカメラスクリーンのGUI構成になる。別の実施形態では、両手のカメラ把持が適用されると、ハンドヘルド装置1500は、デフォルトの右手のカメラ把持に使用された同じカメラスクリーンのGUI構成になる。更に別の実施形態では、両手のカメラ把持が加えられると、ハンドヘルド装置1500は、タッチスクリーン1502の両側に同一のユーザインターフェースコントロール(例えば、写真モードボタン1554、ビデオモードボタン1556、及びシャッター/記録ボタン1558)を表示するであろう。
更なる実施形態では、両手のカメラ把持が加えられると、ハンドヘルド装置1500は、両手のカメラ把持での最適なユーザビリティに設計されたカメラスクリーンのGUI構成を表示する。
更なる実施形態では、両手のカメラ把持が加えられると、ハンドヘルド装置1500は、両手のカメラ把持での最適なユーザビリティに設計されたカメラスクリーンのGUI構成を表示する。
上記の3つのカメラ把持の何れか1つを適用することによりハンドヘルド装置1500のカメラ機能に遷移した後、ユーザは、縦長フォーマットで写真又はビデオをキャプチャするためにハンドヘルド装置1500を垂直方向に回転させることを決定してもよい。例えば、ユーザは、ハンドヘルド装置1500を垂直位置に回して、右手で握って、垂直に向けられた右手の把持をもたらしてもよい。代替的に、ユーザは、ハンドヘルド装置を左手で握って、垂直に向けられた左手の把持をもたらしてもよい。
図15Fは、カメラ機能がアクティブな状態で垂直に向けられた右手の把持でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、カメラスクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。垂直に向けられた右手の把持の検出に基づいて、ハンドヘルド装置1500は、タッチスクリーン1502の上端からカメラ機能を操作するためのユーザインターフェースコントロールを表示するタッチスクリーン1502の底部に配置されたカメラコントロール領域1562に広がる垂直に向けられたファインダ領域1560を含むGUI構成を決定する。図15Fに示された実施形態では、ユーザインターフェースコントロールは、写真モードボタン1564、ビデオモードボタン1566、及びシャッター/記録ボタン1568を含む。ユーザの右手親指による便利な操作を可能にするために、シャッター/記録ボタン1568は、カメラコントロール領域1562の右側に向かって配置される。他の実施形態では、追加の又は代替的なコントロール(例えば、ズームコントロール、タイマコントロール、照明モードコントロール等)が表示されてもよい。
図15Gは、カメラ機能がアクティブな状態で垂直に向けられた左手の把持でハンドヘルド装置1500をユーザが握っていることをハンドヘルド装置1500が決定すると、カメラスクリーンのためのGUI構成を表示するハンドヘルド装置1500を示す。垂直に向けられた左手の把持の検出に基づいて、ハンドヘルド装置1500は、タッチスクリーン1502の上端からカメラ機能を操作するためのユーザインターフェースコントロールを表示するタッチスクリーン1502の底部に配置されたカメラコントロール領域1572に広がる垂直に向けられたファインダ領域1570を含むGUI構成を決定する。図15Fに示された実施形態では、ユーザインターフェースコントロールは、写真モードボタン1574、ビデオモードボタン1576、及びシャッター/記録ボタン1578を含む。ユーザの右手親指による便利な操作を可能にするために、シャッター/記録ボタン1578は、カメラコントロール領域1572の左側に向かって配置される。他の実施形態では、追加の又は代替的なコントロール(例えば、ズームコントロール、タイマコントロール、照明モードコントロール等)が表示されてもよい。
別の実施形態では、ユーザは、カメラ機能がアクティブな状態のハンドヘルド装置1500に垂直に向けられた両手の把持を加えてもよい。垂直に向けられた両手の把持の場合、両方のユーザの親指がタッチスクリーン1502の近くに配置されるであろう。一実施形態では、カメラ機能がアクティブな状態で垂直に向けられた両手のカメラ把持が適用されると、ハンドヘルド装置1500は、カメラ機能がアクティブな状態で垂直に向けられた左手の把持に使用されたデフォルトの同じカメラスクリーンのGUI構成になる。別の実施形態では、垂直に向けられた両手の把持が適用されると、ハンドヘルド装置1500は、カメラ機能がアクティブな状態で垂直に向けられた右手の把持に使用されたデフォルトの同じカメラスクリーンのGUI構成になる。更に別の実施形態では、垂直に向けられた両手の把持が加えられると、ハンドヘルド装置1500は、タッチスクリーン1502の両側に同一のユーザインターフェースコントロールを表示するであろう。追加の実施形態では、垂直に向けられた両手の把持が加えられると、ハンドヘルド装置1500は、垂直に向けられた両手の把持での最適なユーザビリティに設計されたカメラスクリーンのGUI構成を表示する。
(ユーザ入力としての把持接触)
ハンドヘルド装置に加えられる把持接触に基づいてGUI構成を提供することに加えて、本開示は、ユーザ入力として把持接触を解釈するハンドヘルド装置を更に考えている。
1つの例示的な実施形態では、ユーザは、左右の人差し指でハンドヘルド装置に両手のカメラ把持を加えてハンドヘルド装置の上隅を押し付けるとき、カメラアプリケーションをズームさせるために中央に向かってハンドヘルド装置の筐体の上部に沿って左又は右の何れかの人差し指をスライドしてもよく、ズーム選択を取り消すために指を再び元の位置にスライドさせてもよい。別の例示的な実施形態では、ユーザは、左右の人差し指でハンドヘルド装置に両手のカメラ把持を加えてハンドヘルド装置の上隅を押し付けるとき、カメラアプリケーションに写真を撮らせ、ビデオの記録を開始させ、音量を変更させ、又はカメラアプリケーションの設計に従って任意の他の動作を実行させるために何れかの人差し指に加えられる圧力を増加してもよい。別の例示的な実施形態では、特定のユーザを識別するために特定の把持接触及び関連する圧力情報が使用される。一実施形態では、この機能性はハンドヘルド装置10及び/又はその中に含まれている特定の機能性/情報を解除するために使用される。例えば、ハンドヘルド装置10は、ユーザがハンドヘルド装置を解除するために特定の把持(例えば、ユーザの親指と人差し指の間で反対の隅におけるハンドヘルド装置10の面の上部及び底部を挟むこと、ハンドヘルド装置10の側部を特定の位置で絞ること、又はハンドヘルド装置10が検出することができる任意の他の把持接触)を入力することを可能にする電話ロック設定を提供してもよい。別の実施形態では、ハンドヘルド装置10は、キーパッドロックのため又はアプリケーション若しくは特定の機密情報を含むファイル(例えば、パスワード保管アプリケーション、銀行取引アプリケーション、連絡先アプリケーション、ノートパッドアプリケーション、事業用の秘密戦略情報を含むファイル、又は任意の他のアプリケーション若しくはファイル)をロックするための類似の構成及び機能性を可能にしてもよい。
ハンドヘルド装置に加えられる把持接触に基づいてGUI構成を提供することに加えて、本開示は、ユーザ入力として把持接触を解釈するハンドヘルド装置を更に考えている。
1つの例示的な実施形態では、ユーザは、左右の人差し指でハンドヘルド装置に両手のカメラ把持を加えてハンドヘルド装置の上隅を押し付けるとき、カメラアプリケーションをズームさせるために中央に向かってハンドヘルド装置の筐体の上部に沿って左又は右の何れかの人差し指をスライドしてもよく、ズーム選択を取り消すために指を再び元の位置にスライドさせてもよい。別の例示的な実施形態では、ユーザは、左右の人差し指でハンドヘルド装置に両手のカメラ把持を加えてハンドヘルド装置の上隅を押し付けるとき、カメラアプリケーションに写真を撮らせ、ビデオの記録を開始させ、音量を変更させ、又はカメラアプリケーションの設計に従って任意の他の動作を実行させるために何れかの人差し指に加えられる圧力を増加してもよい。別の例示的な実施形態では、特定のユーザを識別するために特定の把持接触及び関連する圧力情報が使用される。一実施形態では、この機能性はハンドヘルド装置10及び/又はその中に含まれている特定の機能性/情報を解除するために使用される。例えば、ハンドヘルド装置10は、ユーザがハンドヘルド装置を解除するために特定の把持(例えば、ユーザの親指と人差し指の間で反対の隅におけるハンドヘルド装置10の面の上部及び底部を挟むこと、ハンドヘルド装置10の側部を特定の位置で絞ること、又はハンドヘルド装置10が検出することができる任意の他の把持接触)を入力することを可能にする電話ロック設定を提供してもよい。別の実施形態では、ハンドヘルド装置10は、キーパッドロックのため又はアプリケーション若しくは特定の機密情報を含むファイル(例えば、パスワード保管アプリケーション、銀行取引アプリケーション、連絡先アプリケーション、ノートパッドアプリケーション、事業用の秘密戦略情報を含むファイル、又は任意の他のアプリケーション若しくはファイル)をロックするための類似の構成及び機能性を可能にしてもよい。
本開示は、検出された1つ以上の特定の把持接触、ハンドヘルド装置10に加えられる圧力の大きさ、又は加えられる圧力のタイミングに基づいてユーザの感情又は気分が検出される実施形態を更に考えている。感情、気分又は1つ以上のセンサによって検出される他の生理的データに基づいて、ハンドヘルド装置10が特定のGUI構成及び/又は適合した機能性を提供してもよい。一実施形態では、ハンドヘルド装置10によって出力される触覚効果は、検出されたユーザの感情/気分に基づいて変更されてもよい(例えば、強度の減少/増加)。
別の実施形態では、あるハンドヘルド装置10のユーザ(「ユーザA」)が把持接触及び把持接触によって加えられる圧力の変化の形態でハンドヘルド装置10に情報を入力して、これらは順に別のハンドヘルド装置10及びそのユーザ(「ユーザB」)に伝達されてもよく、それによってユーザAの感情の手掛かり又は気分の状態をユーザBに提供してもよい。一実施形態では、ユーザAの感情及び/又は気分がユーザBのハンドヘルド装置10を介してユーザBに提供されて、ユーザAのハンドヘルド装置10から受信した感情及び/又は気分の情報に基づいて触覚効果が出力される。他の実施形態では、音声及び/又は視覚効果が使用されてもよい。1つの特定の実施形態では、ユーザAは、把持接触を解釈して把持接触に基づく情報をユーザBのハンドヘルド装置10で実行されている視覚的ハンドシェイクアプリケーションに送信する視覚的ハンドシェイクアプリケーションを実行しているハンドヘルド装置10に一定の又は変化する圧力の把持接触を入力する。受信した情報に基づいて、ユーザBのハンドヘルド装置は、ユーザAの把持接触を表す1つ以上の触覚効果を出力する。
本開示は、当業者であればハンドヘルド装置のユーザインターフェースを設計する工程で有益と認められる全ての変形を含む多数のアプリケーション又は機能性に関連して把持接触をユーザ入力と解釈する多数の変形を考えている。
(触覚)
一実施形態では、ハンドヘルド装置10は、触覚効果を出力するための1つ以上のハードウェア構成要素(例えば、当業者には周知の様々なアクチュエータ)を備え、1つ以上の上記の態様でハンドヘルド装置10によって検出される把持接触に基づいて触覚効果を出力する。例えば、一実施形態では、ハンドヘルド装置10のメモリ16は、様々な把持接触に関係付けられ、検出された把持接触の持続中に単一のインスタンスとして又は繰り返しパターンで把持接触の検出に応じて出力される触覚効果(例えば、振動、パルス、ポップ、衝撃(jolt)及び/又はこれらの組み合わせ)のセット又はライブラリを含む。別の実施形態では、触覚効果は、把持接触によってハンドヘルド装置10に加えられ且つハンドヘルド装置10によって感知される圧力の大きさの変化に基づいて強度及び/又は周波数が変化するであろう。例えば、垂直に向けられた右手の把持の検出に応じて鼓動に似た触覚効果が出力されてもよい。また、触覚効果は、ユーザがその把持接触によって加えられる圧力を増加させると強度及び/又は周波数が高められてもよく、ユーザがその把持接触によって加えられる圧力を減少させると強度及び/又は周波数が弱められてもよい。一実施形態では、ハンドヘルド装置10によって出力される触覚効果(例えば、鼓動の触覚効果)は、特定の把持接触の検出だけに基づいてもよい。例えば、ハンドヘルド装置10は、ハンドヘルド装置10が逆さまであることをユーザに知らせるために逆さまで垂直に向けられた右手の把持の検出に応じて衝撃の触覚効果を出力してもよい。
一実施形態では、ハンドヘルド装置10は、触覚効果を出力するための1つ以上のハードウェア構成要素(例えば、当業者には周知の様々なアクチュエータ)を備え、1つ以上の上記の態様でハンドヘルド装置10によって検出される把持接触に基づいて触覚効果を出力する。例えば、一実施形態では、ハンドヘルド装置10のメモリ16は、様々な把持接触に関係付けられ、検出された把持接触の持続中に単一のインスタンスとして又は繰り返しパターンで把持接触の検出に応じて出力される触覚効果(例えば、振動、パルス、ポップ、衝撃(jolt)及び/又はこれらの組み合わせ)のセット又はライブラリを含む。別の実施形態では、触覚効果は、把持接触によってハンドヘルド装置10に加えられ且つハンドヘルド装置10によって感知される圧力の大きさの変化に基づいて強度及び/又は周波数が変化するであろう。例えば、垂直に向けられた右手の把持の検出に応じて鼓動に似た触覚効果が出力されてもよい。また、触覚効果は、ユーザがその把持接触によって加えられる圧力を増加させると強度及び/又は周波数が高められてもよく、ユーザがその把持接触によって加えられる圧力を減少させると強度及び/又は周波数が弱められてもよい。一実施形態では、ハンドヘルド装置10によって出力される触覚効果(例えば、鼓動の触覚効果)は、特定の把持接触の検出だけに基づいてもよい。例えば、ハンドヘルド装置10は、ハンドヘルド装置10が逆さまであることをユーザに知らせるために逆さまで垂直に向けられた右手の把持の検出に応じて衝撃の触覚効果を出力してもよい。
別の実施形態では、ハンドヘルド装置10は、検出された把持接触及び現在表示されているGUI及び/又はハンドヘルド装置10のユーザによって実行されている動作に基づいて触覚効果を出力する。例えば、ユーザが垂直に向けられた左手の把持でハンドヘルド装置10を把持することは、左親指がタッチスクリーンでリストをフリングしてハンドヘルド装置10によって表示されるスクロールリストをアクティブにして、同時に、ハンドヘルド装置10に加えられる把持接触の大きさを増加又は減少させることによってスクロールの速度を操作してもよい。リストのスクロール中に、ハンドヘルド装置10は、把持接触によって加えられる圧力の大きさに基づいてスクロールしているリスト及び/又はリスト内のアイテムに関係付けられる触覚効果の出力の強度を変化させる。
上記の触覚に関連する実施形態は例示であり、本開示の範囲を全く限定するものではない。本開示は、当業者であればハンドヘルド装置のユーザインターフェースを設計する工程で有益と認めるであろう全ての変形を含む多数のアプリケーション又は機能性に関連してハンドヘルド装置に加えられる把持接触の性質、変化及び強度に基づいて触覚効果を決定及び出力する多数の変形が考えられる。
(一般事項)
本明細書に記載の方法及びシステムは様々な機械で実行するソフトウェアに関して記載されているが、方法及びシステムは、例えば、様々な方法を特別に実行するためのFPGA(field−programmable gate array)等の特別に構成されたハードウェアとして実装されてもよい。例えば、実施形態は、デジタル電子回路で、又は、コンピュータハードウェア、ファームウェア、ソフトウェア若しくはこれらの組み合わせで実装され得る。一実施形態では、装置は、1つ又は複数のプロセッサを備えてもよい。プロセッサは、プロセッサに結合されるRAM(random access memory)等のコンピュータ可読媒体を備える。プロセッサは、メモリに記憶されたコンピュータ実行可能プログラム命令を実行する。例えば、画像を編集するために1つ以上のコンピュータプログラムを実行する。このようなプロセッサは、マイクロプロセッサ、DSP(digital signal processor)、ASIC(application−specific integrated circuit)、FPGA(field programmable gate array)、及び状態機械を含む。このようなプロセッサは、PLC、PIC(programmable interrupt controller)、PLD(programmable logic device)、PROM(programmable read−only memorie)、EPROM又はEEPROM(electronically programmable read−only memorie)、又は他の類似の装置等のプログラム可能電子装置を更に備えてもよい。
本明細書に記載の方法及びシステムは様々な機械で実行するソフトウェアに関して記載されているが、方法及びシステムは、例えば、様々な方法を特別に実行するためのFPGA(field−programmable gate array)等の特別に構成されたハードウェアとして実装されてもよい。例えば、実施形態は、デジタル電子回路で、又は、コンピュータハードウェア、ファームウェア、ソフトウェア若しくはこれらの組み合わせで実装され得る。一実施形態では、装置は、1つ又は複数のプロセッサを備えてもよい。プロセッサは、プロセッサに結合されるRAM(random access memory)等のコンピュータ可読媒体を備える。プロセッサは、メモリに記憶されたコンピュータ実行可能プログラム命令を実行する。例えば、画像を編集するために1つ以上のコンピュータプログラムを実行する。このようなプロセッサは、マイクロプロセッサ、DSP(digital signal processor)、ASIC(application−specific integrated circuit)、FPGA(field programmable gate array)、及び状態機械を含む。このようなプロセッサは、PLC、PIC(programmable interrupt controller)、PLD(programmable logic device)、PROM(programmable read−only memorie)、EPROM又はEEPROM(electronically programmable read−only memorie)、又は他の類似の装置等のプログラム可能電子装置を更に備えてもよい。
このようなプロセッサは、媒体、例えば、プロセッサによって実行されると、プロセッサによって遂行又は支援される本明細書に記載のステップをプロセッサに実行させることが出来る命令を記憶し得るコンピュータ可読媒体を備え、又はこれと通信してもよい。コンピュータ可読媒体の実施形態は、限定されないが、プロセッサ、例えばウェブサーバのプロセッサにコンピュータ可読命令を提供することが出来る電子、光学、磁気又は他の記憶装置を備えてもよい。媒体の他の例は、限定されないが、フロッピー(登録商標)ディスク、CD−ROM、磁気ディスク、メモリチップ、ROM、RAM、ASIC、構成プロセッサ、全ての光学媒体、全ての磁気テープ若しくは他の磁気媒体、又はコンピュータプロセッサが読み取り可能な任意の他の媒体を含む。記載されたプロセッサ及び処理は、1つ以上の構造内にあってもよく、1つ以上の構造を通じて分散されてもよい。プロセッサは、本明細書に記載の1つ以上の方法(又は方法の一部)を実行するためのコードを備えてもよい。
本発明の一部の実施形態の上記の説明は、例示及び説明のためにのみ示されているのであって、網羅的であること又は開示された厳密な形態に本発明を限定することは意図されていない。その多くの修正及び適合が、本発明の精神及び範囲から逸脱することなく当業者には明らかであろう。
本明細書における「一実施形態」又は「ある実施形態」への言及は、特定の機能、構造、操作、又は実施形態と関連して記載される他の特徴が本発明の少なくとも1つの実装に含まれ得ることを意味する。本発明は、このように記載された特定の実施形態に制限されない。明細書の様々な場所における「一実施形態において」又は「ある実施形態において」という句の出現は、必ずしも同じ実施形態への言及ではない。任意の特定の機能、構造、操作、又は「一実施形態」に関連する本明細書に記載の他の特徴は、他の機能、構造、操作、又は任意の他の実施形態に関して記載された他の特徴と結合されてもよい。
Claims (32)
- ハンドヘルド装置のディスプレイにおいて第1のGUI構成に従ってグラフィカルユーザインターフェース(GUI)を表示するステップと、
センサからセンサ信号を受信するステップであって、前記センサは前記ハンドヘルド装置に結合され、前記センサ信号は前記ハンドヘルド装置との接触を示すステップと、
前記センサ信号に少なくとも部分的に基づいて把持接触を決定するステップと、
前記把持接触に少なくとも部分的に基づいて第2のGUI構成を決定するステップと、
前記第2のGUI構成に従って前記ディスプレイにおいて前記GUIを表示するステップと
を含む、方法。 - 前記センサ信号に基づいて圧力を決定するステップを更に含む、請求項1に記載の方法。
- 前記圧力の決定は、前記センサ信号に少なくとも部分的に基づいて前記圧力の大きさを決定することを含む、請求項2に記載の方法。
- 決定された前記圧力の大きさに基づいて触覚効果を出力するステップを更に含む、請求項3に記載の方法。
- 前記把持接触の決定は前記圧力の大きさに基づく、請求項3に記載の方法。
- 前記ハンドヘルド装置は筐体を含み、前記センサは前記ハンドヘルド装置に結合される複数の圧力センサを含み、前記複数の圧力センサの中の1つ以上の圧力センサが前記筐体に結合される、請求項2に記載の方法。
- 前記センサは複数のセンサの中の第1のセンサであり、前記センサ信号は前記第1のセンサから受信される第1のセンサ信号であり、前記複数のセンサの中の第2のセンサから第2のセンサ信号を受信するステップを更に含み、前記把持接触を決定するステップは前記第1のセンサ信号及び前記第2のセンサ信号に少なくとも部分的に基づく、請求項1に記載の方法。
- 決定された把持接触は、垂直に向けられた左手の把持、垂直に向けられた右手の把持、垂直に向けられた両手の把持、水平に向けられた左手の把持、水平に向けられた右手の把持、又は水平に向けられた両手の把持の1つである、請求項1に記載の方法。
- ハンドヘルド装置のディスプレイにおいて第1のGUI構成に従ってグラフィカルユーザインターフェース(GUI)を表示すること、
センサからセンサ信号を受信することであって、前記センサは前記ハンドヘルド装置に結合され、前記センサ信号は前記ハンドヘルド装置との接触を示すこと、
前記センサ信号に少なくとも部分的に基づいて把持接触を決定すること、
前記把持接触に少なくとも部分的に基づいて第2のGUI構成を決定すること、及び
前記第2のGUI構成に従って前記ディスプレイにおいて前記GUIを表示すること
を行うようにプロセッサによって実行可能なソフトウェアプログラムコードを含む、コンピュータ可読媒体。 - 前記センサ信号に基づいて圧力を決定することを行うようにプロセッサによって実行可能なソフトウェアプログラムコードを更に含む、請求項9に記載のコンピュータ可読媒体。
- 前記圧力の決定は、前記センサ信号に少なくとも部分的に基づいて前記圧力の大きさを決定することを含む、請求項10に記載のコンピュータ可読媒体。
- 決定された圧力の大きさに基づいて前記ハンドヘルド装置のアクチュエータに触覚効果を出力させることを行うようにプロセッサによって実行可能なソフトウェアプログラムコードを更に含む、請求項11に記載のコンピュータ可読媒体。
- 前記把持接触の決定は前記圧力の大きさに基づく、請求項11に記載のコンピュータ可読媒体。
- 前記ハンドヘルド装置は筐体を含み、前記センサは前記ハンドヘルド装置に結合される複数の圧力センサを含み、前記複数の圧力センサの中の1つ以上の圧力センサが前記筐体に結合される、請求項10に記載のコンピュータ可読媒体。
- 前記センサは複数のセンサの中の第1のセンサであり、前記センサ信号は前記第1のセンサから受信される第1のセンサ信号であり、
前記複数のセンサの中の第2のセンサから第2のセンサ信号を受信することを行うようにプロセッサによって実行可能なソフトウェアプログラムコードを更に含み、
前記把持接触を決定することは前記第1のセンサ信号及び前記第2のセンサ信号に少なくとも部分的に基づく、請求項9に記載のコンピュータ可読媒体。 - 決定された把持接触は、垂直に向けられた左手の把持、垂直に向けられた右手の把持、垂直に向けられた両手の把持、水平に向けられた左手の把持、水平に向けられた右手の把持、又は水平に向けられた両手の把持の1つである、請求項9に記載のコンピュータ可読媒体。
- プロセッサと、
ディスプレイと、
ハンドヘルド装置に結合されるセンサと、
前記プロセッサと通信するメモリであって、
前記ディスプレイにおいて第1のGUI構成に従ってグラフィカルユーザインターフェース(GUI)を表示すること、
前記センサからセンサ信号を受信することであって、前記センサ信号は前記ハンドヘルド装置との接触を示すこと、
前記センサ信号に少なくとも部分的に基づいて把持接触を決定すること、
前記把持接触に少なくとも部分的に基づいて第2のGUI構成を決定すること、及び
前記第2のGUI構成に従って前記ディスプレイにおいて前記GUIを表示すること
を行うように前記プロセッサによって実行可能なコンピュータプログラムコードを含むメモリと
を備える、ハンドヘルド装置。 - 前記メモリは、前記センサ信号に基づいて圧力を決定することを行うように前記プロセッサによって実行可能なソフトウェアプログラムコードを更に含む、請求項17に記載のハンドヘルド装置。
- 前記圧力の決定は、前記センサ信号に少なくとも部分的に基づいて前記圧力の大きさを決定することを含む、請求項18に記載のハンドヘルド装置。
- 前記プロセッサと通信するアクチュエータを更に備え、前記メモリは、決定された前記圧力の大きさに基づいて触覚効果を前記アクチュエータに出力させることを行うように前記プロセッサによって実行可能なコンピュータプログラムを更に含む、請求項19に記載のハンドヘルド装置。
- 前記把持接触の決定は前記圧力の大きさに基づく、請求項19に記載のハンドヘルド装置。
- 筐体を更に備え、前記センサは前記ハンドヘルド装置に結合される複数の圧力センサを含み、前記複数の圧力センサの中の1つ以上が前記筐体に結合される、請求項18に記載のハンドヘルド装置。
- 前記センサは複数のセンサの中の第1のセンサであり、前記センサ信号は前記第1のセンサから受信される第1のセンサ信号であり、
前記メモリは、前記複数のセンサの中の第2のセンサから第2のセンサ信号を受信することを行うように前記プロセッサによって実行可能なソフトウェアプログラムコードを更に含み、
前記把持接触を決定することは、前記第1のセンサ信号及び前記第2のセンサ信号に少なくとも部分的に基づく、請求項17に記載のハンドヘルド装置。 - 決定された把持接触は、垂直に向けられた左手の把持、垂直に向けられた右手の把持、垂直に向けられた両手の把持、水平に向けられた左手の把持、水平に向けられた右手の把持、又は水平に向けられた両手の把持の1つである、請求項17に記載のハンドヘルド装置。
- センサからセンサ信号を受信するステップであって、前記センサはハンドヘルド装置に結合され、前記センサ信号は前記ハンドヘルド装置との接触を示すステップと、
前記センサ信号に少なくとも部分的に基づいて把持接触を決定するステップと、
前記把持接触に基づいて把持接触情報を提供するステップと
を含む、方法。 - 前記センサ信号に基づいて圧力を決定するステップを更に含む、請求項25に記載の方法。
- 前記圧力の決定は、前記センサ信号に少なくとも部分的に基づいて前記圧力の大きさを決定することを含む、請求項26に記載の方法。
- 前記把持接触の決定は前記圧力の大きさに基づく、請求項27に記載の方法。
- 前記ハンドヘルド装置は筐体を含み、前記センサは前記ハンドヘルド装置に結合される複数の圧力センサを含み、前記複数の圧力センサの中の1つ以上の圧力センサが前記筐体に結合される、請求項26に記載の方法。
- 前記センサは複数のセンサの中の第1のセンサであり、前記センサ信号は前記第1のセンサから受信される第1のセンサ信号であり、前記複数のセンサの中の第2のセンサから第2のセンサ信号を受信するステップを更に含み、前記把持接触を決定するステップは前記第1のセンサ信号及び前記第2のセンサ信号に少なくとも部分的に基づく、請求項25に記載の方法。
- 決定された把持接触は、垂直に向けられた左手の把持、垂直に向けられた右手の把持、垂直に向けられた両手の把持、水平に向けられた左手の把持、水平に向けられた右手の把持、又は水平に向けられた両手の把持の1つである、請求項25に記載の方法。
- 把持接触情報を提供するステップは、前記把持接触情報を取得するためのアプリケーションプログラミングインターフェースを提供することを含む、請求項25に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/800,264 | 2013-03-13 | ||
US13/800,264 US9904394B2 (en) | 2013-03-13 | 2013-03-13 | Method and devices for displaying graphical user interfaces based on user contact |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014048612A Division JP6479322B2 (ja) | 2013-03-13 | 2014-03-12 | ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019109909A true JP2019109909A (ja) | 2019-07-04 |
Family
ID=50287870
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014048612A Expired - Fee Related JP6479322B2 (ja) | 2013-03-13 | 2014-03-12 | ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 |
JP2019019630A Withdrawn JP2019109909A (ja) | 2013-03-13 | 2019-02-06 | ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014048612A Expired - Fee Related JP6479322B2 (ja) | 2013-03-13 | 2014-03-12 | ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 |
Country Status (5)
Country | Link |
---|---|
US (2) | US9904394B2 (ja) |
EP (3) | EP3557400A1 (ja) |
JP (2) | JP6479322B2 (ja) |
KR (1) | KR20140112418A (ja) |
CN (2) | CN110275605A (ja) |
Families Citing this family (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9484046B2 (en) * | 2010-11-04 | 2016-11-01 | Digimarc Corporation | Smartphone-based methods and systems |
EP2758956B1 (en) | 2011-09-23 | 2021-03-10 | Digimarc Corporation | Context-based smartphone sensor logic |
US9311640B2 (en) | 2014-02-11 | 2016-04-12 | Digimarc Corporation | Methods and arrangements for smartphone payments and transactions |
US9207764B2 (en) * | 2013-09-18 | 2015-12-08 | Immersion Corporation | Orientation adjustable multi-channel haptic device |
CN104601767A (zh) * | 2013-10-31 | 2015-05-06 | 深圳富泰宏精密工业有限公司 | 手机拨号键盘管理方法及系统 |
KR102155091B1 (ko) * | 2014-01-22 | 2020-09-11 | 엘지전자 주식회사 | 이동단말기 및 그 제어방법 |
US9836084B2 (en) | 2014-03-28 | 2017-12-05 | Intel Corporation | Inferred undocking for hybrid tablet computer |
CN203930584U (zh) * | 2014-04-22 | 2014-11-05 | 何衢 | 一种移动终端 |
US10304163B2 (en) * | 2014-09-08 | 2019-05-28 | Apple Inc. | Landscape springboard |
US10504323B2 (en) | 2014-09-26 | 2019-12-10 | Video Gaming Technologies, Inc. | Methods and systems for interacting with a player using a gaming machine |
FR3030070B1 (fr) * | 2014-12-15 | 2018-02-02 | Dav | Dispositif et procede de commande pour vehicule automobile |
US9612680B2 (en) * | 2015-01-28 | 2017-04-04 | Qualcomm Incorporated | Optimizing the use of sensors to improve pressure sensing |
WO2016119827A1 (en) * | 2015-01-28 | 2016-08-04 | Huawei Technologies Co., Ltd. | Hand or finger detection device and a method thereof |
CN105988692A (zh) * | 2015-02-02 | 2016-10-05 | 中兴通讯股份有限公司 | 手持电子设备和控制手持电子设备的方法及装置 |
CN106161913A (zh) * | 2015-03-26 | 2016-11-23 | 阿里巴巴集团控股有限公司 | 一种移动设备的拍摄方法和装置 |
KR102247742B1 (ko) | 2015-04-21 | 2021-05-04 | 삼성전자주식회사 | 애플리케이션 프로세서와 시스템 온 칩 |
WO2016169005A1 (zh) * | 2015-04-22 | 2016-10-27 | 华为技术有限公司 | 一种终端天线调节方法及装置 |
CN104767890B (zh) * | 2015-04-23 | 2017-11-07 | 广东欧珀移动通信有限公司 | 基于手持设备的闹钟控制方法及装置 |
US10372212B2 (en) * | 2015-05-29 | 2019-08-06 | Google Llc | Techniques for simulated physical interaction between users via their mobile computing devices |
KR20160144179A (ko) * | 2015-06-08 | 2016-12-16 | 임재현 | 카메라를 포함하는 사용자 단말에서 사용자 인터페이스를 제공하는 방법 |
CN105245698A (zh) * | 2015-09-23 | 2016-01-13 | 努比亚技术有限公司 | 一种控制铃声的方法及装置 |
CN106610746A (zh) * | 2015-10-26 | 2017-05-03 | 青岛海信移动通信技术股份有限公司 | 一种移动终端及其控制方法 |
US9898130B2 (en) * | 2016-03-31 | 2018-02-20 | Synaptics Incorporated | Grip management |
US10462364B2 (en) * | 2016-10-25 | 2019-10-29 | Hewlett-Packard Development Company, L.P. | Electronic devices having multiple position cameras |
US10095342B2 (en) | 2016-11-14 | 2018-10-09 | Google Llc | Apparatus for sensing user input |
US10534435B2 (en) | 2016-11-18 | 2020-01-14 | Immersion Corporation | Handheld interface device having a plurality of electrostatic friction (ESF) electrodes |
KR102654621B1 (ko) * | 2016-12-08 | 2024-04-04 | 삼성전자주식회사 | 객체를 디스플레이하기 위한 방법 및 그 전자 장치 |
US10318144B2 (en) * | 2017-02-22 | 2019-06-11 | International Business Machines Corporation | Providing force input to an application |
US10001808B1 (en) | 2017-03-29 | 2018-06-19 | Google Llc | Mobile device accessory equipped to communicate with mobile device |
US10013081B1 (en) | 2017-04-04 | 2018-07-03 | Google Llc | Electronic circuit and method to account for strain gauge variation |
US10635255B2 (en) * | 2017-04-18 | 2020-04-28 | Google Llc | Electronic device response to force-sensitive interface |
US10514797B2 (en) | 2017-04-18 | 2019-12-24 | Google Llc | Force-sensitive user input interface for an electronic device |
US10537795B2 (en) | 2017-04-26 | 2020-01-21 | Facebook Technologies, Llc | Hand-held controller using LED tracking ring |
WO2019017153A1 (ja) * | 2017-07-20 | 2019-01-24 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
US20190026120A1 (en) * | 2017-07-21 | 2019-01-24 | International Business Machines Corporation | Customizing mobile device operation based on touch points |
US10871851B2 (en) * | 2017-08-22 | 2020-12-22 | Blackberry Limited | Electronic device and method for one-handed operation |
CN107566632A (zh) * | 2017-08-29 | 2018-01-09 | 广东欧珀移动通信有限公司 | 输入法界面显示方法、装置及终端 |
CN109597512A (zh) * | 2017-09-30 | 2019-04-09 | 南昌欧菲生物识别技术有限公司 | 电子装置 |
CN109710099A (zh) * | 2017-10-26 | 2019-05-03 | 南昌欧菲生物识别技术有限公司 | 电子装置 |
CN109710115A (zh) * | 2017-10-26 | 2019-05-03 | 南昌欧菲生物识别技术有限公司 | 电子装置 |
US10912990B2 (en) * | 2017-12-29 | 2021-02-09 | Facebook Technologies, Llc | Hand-held controller using sensors for hand disambiguation |
US10399492B1 (en) * | 2018-05-02 | 2019-09-03 | GM Global Technology Operations LLC | Automatic reconfiguration and calibration of haptic seats |
KR102473627B1 (ko) * | 2018-05-17 | 2022-12-02 | 삼성디스플레이 주식회사 | 압력 센서 및 이를 포함하는 표시 장치 |
KR102581974B1 (ko) * | 2018-07-31 | 2023-09-22 | 삼성디스플레이 주식회사 | 압력 센서 및 이를 포함하는 표시 장치 |
KR102582316B1 (ko) | 2018-08-20 | 2023-09-25 | 삼성디스플레이 주식회사 | 표시 장치 |
US10838541B2 (en) * | 2018-09-03 | 2020-11-17 | Htc Corporation | Method for operating handheld device, handheld device and computer-readable recording medium thereof |
US11226698B2 (en) * | 2018-09-20 | 2022-01-18 | Motorola Mobility Llc | Inconspicuous sensing system across multiple surfaces |
KR102644091B1 (ko) * | 2018-12-20 | 2024-03-06 | 삼성디스플레이 주식회사 | 표시 장치 |
FR3091371B1 (fr) * | 2018-12-27 | 2021-06-25 | Forecomm | Interface tactile d’affichage et de manipulation d’un document et procédé de mise en œuvre. |
US11385784B2 (en) * | 2019-01-31 | 2022-07-12 | Citrix Systems, Inc. | Systems and methods for configuring the user interface of a mobile device |
CN110138933A (zh) * | 2019-04-22 | 2019-08-16 | 珠海格力电器股份有限公司 | 基于折叠屏的拍照面板布局控制方法、系统及智能终端 |
US11320984B2 (en) * | 2019-08-19 | 2022-05-03 | Motorola Mobility Llc | Pressure sensing device interface representation |
NL2027963B1 (en) * | 2021-04-14 | 2022-10-25 | Microsoft Technology Licensing Llc | Touch-sensitive input device |
Family Cites Families (196)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3157853A (en) | 1957-12-06 | 1964-11-17 | Hirsch Joseph | Tactile communication system |
US2972140A (en) | 1958-09-23 | 1961-02-14 | Hirsch Joseph | Apparatus and method for communication through the sense of touch |
GB958325A (en) | 1962-07-08 | 1964-05-21 | Communications Patents Ltd | Improvements in or relating to ground-based flight training or simulating apparatus |
US3497668A (en) | 1966-08-25 | 1970-02-24 | Joseph Hirsch | Tactile control system |
US3517446A (en) | 1967-04-19 | 1970-06-30 | Singer General Precision | Vehicle trainer controls and control loading |
US3623064A (en) | 1968-10-11 | 1971-11-23 | Bell & Howell Co | Paging receiver having cycling eccentric mass |
US3903614A (en) | 1970-03-27 | 1975-09-09 | Singer Co | Apparatus for simulating aircraft control loading |
US3838397A (en) | 1973-04-25 | 1974-09-24 | Rockwell International Corp | Fuel injection pulse width computer |
US3902687A (en) | 1973-06-25 | 1975-09-02 | Robert E Hightower | Aircraft indicator system |
US3911416A (en) | 1974-08-05 | 1975-10-07 | Motorola Inc | Silent call pager |
US4160508A (en) | 1977-08-19 | 1979-07-10 | Nasa | Controller arm for a remotely related slave arm |
US4127752A (en) | 1977-10-13 | 1978-11-28 | Sheldahl, Inc. | Tactile touch switch panel |
US4262549A (en) | 1978-05-10 | 1981-04-21 | Schwellenbach Donald D | Variable mechanical vibrator |
US4311980A (en) | 1978-10-12 | 1982-01-19 | Fabrica Italiana Magneti Marelli, S.P.A. | Device for pressure measurement using a resistor strain gauge |
US4236325A (en) | 1978-12-26 | 1980-12-02 | The Singer Company | Simulator control loading inertia compensator |
US4464117A (en) | 1980-08-27 | 1984-08-07 | Dr. Ing. Reiner Foerst Gmbh | Driving simulator apparatus |
US4362408A (en) | 1980-12-01 | 1982-12-07 | Ncr Corporation | Means for avoiding accidental actuation of a critical function key |
US4333070A (en) | 1981-02-06 | 1982-06-01 | Barnes Robert W | Motor vehicle fuel-waste indicator |
US4599070A (en) | 1981-07-29 | 1986-07-08 | Control Interface Company Limited | Aircraft simulator and simulated control system therefor |
DE3380420D1 (en) | 1982-01-22 | 1989-09-21 | British Aerospace | Control apparatus |
US4484191A (en) | 1982-06-14 | 1984-11-20 | Vavra George S | Tactile signaling systems for aircraft |
GB2142711A (en) | 1983-07-04 | 1985-01-23 | Philips Electronic Associated | Manually operable x-y signal generator |
JPS60159500U (ja) | 1984-03-31 | 1985-10-23 | 星野楽器株式会社 | 電子ドラムのパツド |
US4581491A (en) | 1984-05-04 | 1986-04-08 | Research Corporation | Wearable tactile sensory aid providing information on voice pitch and intonation patterns |
SE443057B (sv) | 1984-08-09 | 1986-02-10 | Tecator Ab | Anordning och sett for registrering av en utmed en strecka gjord analog legesangivelse som en digital signal |
US4791416A (en) | 1985-02-05 | 1988-12-13 | Zenith Electronics Corporation | Touch control system for controllable apparatus |
US5078152A (en) | 1985-06-23 | 1992-01-07 | Loredan Biomedical, Inc. | Method for diagnosis and/or training of proprioceptor feedback capabilities in a muscle and joint system of a human patient |
GB2180342B (en) | 1985-08-14 | 1989-10-25 | Alcom Limited | Pressure sensitive device |
US4713007A (en) | 1985-10-11 | 1987-12-15 | Alban Eugene P | Aircraft controls simulator |
US5275174B1 (en) | 1985-10-30 | 1998-08-04 | Jonathan A Cook | Repetitive strain injury assessment |
NL8503096A (nl) | 1985-11-11 | 1987-06-01 | Fokker Bv | Simulator van mechanische eigenschappen van een besturingssysteem. |
US4891764A (en) | 1985-12-06 | 1990-01-02 | Tensor Development Inc. | Program controlled force measurement and control system |
US4934694A (en) | 1985-12-06 | 1990-06-19 | Mcintosh James L | Computer controlled exercise system |
US4823106A (en) | 1986-07-10 | 1989-04-18 | Tapeswitch Corporation Of America | Tape element and methods, for heating, pressure measurement and circuit fabrication |
US4795296A (en) | 1986-11-17 | 1989-01-03 | California Institute Of Technology | Hand-held robot end effector controller having movement and force control |
US4821030A (en) | 1986-12-19 | 1989-04-11 | Tektronix, Inc. | Touchscreen feedback system |
US4794392A (en) | 1987-02-20 | 1988-12-27 | Motorola, Inc. | Vibrator alert device for a communication receiver |
GB2204131B (en) | 1987-04-28 | 1991-04-17 | Ibm | Graphics input tablet |
US4840634A (en) | 1987-06-10 | 1989-06-20 | Clayton Foundation For Research | Calibration controller for controlling electrically operated machines |
JPS643664A (en) | 1987-06-26 | 1989-01-09 | Hitachi Ltd | Laser beam marking device |
GB8801951D0 (en) | 1988-01-29 | 1988-02-24 | British Aerospace | Control apparatus |
US5038089A (en) | 1988-03-23 | 1991-08-06 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Synchronized computational architecture for generalized bilateral control of robot arms |
US4885565A (en) | 1988-06-01 | 1989-12-05 | General Motors Corporation | Touchscreen CRT with tactile feedback |
NL8801653A (nl) | 1988-06-29 | 1990-01-16 | Stork Kwant Bv | Besturingsstelsel. |
JP2926721B2 (ja) | 1988-10-20 | 1999-07-28 | スズキ株式会社 | スタビライザ取付構造 |
US4930770A (en) | 1988-12-01 | 1990-06-05 | Baker Norman A | Eccentrically loaded computerized positive/negative exercise machine |
JPH02185278A (ja) | 1989-01-12 | 1990-07-19 | Taito Corp | 光線銃射撃ゲーム装置 |
US5116051A (en) | 1989-01-12 | 1992-05-26 | Atari Games Corporation | Strain gauge pressure-sensitive video game control |
JPH0721710B2 (ja) | 1989-01-25 | 1995-03-08 | ヤマハ株式会社 | パッド付電子鍵盤楽器 |
US5019761A (en) | 1989-02-21 | 1991-05-28 | Kraft Brett W | Force feedback control for backhoe |
US5390296A (en) | 1989-08-30 | 1995-02-14 | Comshare Incorporated | Method and apparatus for calculation with display data |
US5182557A (en) | 1989-09-20 | 1993-01-26 | Semborg Recrob, Corp. | Motorized joystick |
US4983786A (en) | 1990-01-17 | 1991-01-08 | The University Of British Columbia | XY velocity controller |
US5022407A (en) | 1990-01-24 | 1991-06-11 | Topical Testing, Inc. | Apparatus for automated tactile testing |
US5631861A (en) | 1990-02-02 | 1997-05-20 | Virtual Technologies, Inc. | Force feedback and texture simulating interface device |
US5241308A (en) | 1990-02-22 | 1993-08-31 | Paragon Systems, Inc. | Force sensitive touch panel |
GB9004690D0 (en) | 1990-03-02 | 1990-04-25 | Black & Decker Inc | Flange mounting arrangement |
US5035242A (en) | 1990-04-16 | 1991-07-30 | David Franklin | Method and apparatus for sound responsive tactile stimulation of deaf individuals |
JPH047371A (ja) | 1990-04-25 | 1992-01-10 | Canon Inc | 画像記録用インク |
JPH0685820B2 (ja) | 1990-04-25 | 1994-11-02 | 株式会社エポック社 | 体感ゲーム機 |
US5022384A (en) | 1990-05-14 | 1991-06-11 | Capitol Systems | Vibrating/massage chair |
US5547382A (en) | 1990-06-28 | 1996-08-20 | Honda Giken Kogyo Kabushiki Kaisha | Riding simulation system for motorcycles |
US5165897A (en) | 1990-08-10 | 1992-11-24 | Tini Alloy Company | Programmable tactile stimulator array system and method of operation |
US5053585A (en) | 1990-10-12 | 1991-10-01 | Interlink Electronics, Incorporated | Multipurpose keyboard using digitizer pad featuring spatial minimization of a pressure contact area and method of making same |
JP3219761B2 (ja) | 1990-11-19 | 2001-10-15 | ソニー株式会社 | リモートコマンダー |
US5212473A (en) | 1991-02-21 | 1993-05-18 | Typeright Keyboard Corp. | Membrane keyboard and method of using same |
US5334027A (en) | 1991-02-25 | 1994-08-02 | Terry Wherlock | Big game fish training and exercise device and method |
US5240417A (en) | 1991-03-14 | 1993-08-31 | Atari Games Corporation | System and method for bicycle riding simulation |
DE69212149D1 (de) | 1991-03-21 | 1996-08-14 | Atari Games Corp | Fahrtsimulator mit überkreuzter netzwerkrückkoppelung |
US5351412A (en) | 1991-06-11 | 1994-10-04 | International Business Machines Corporation | Micro positioning device |
US5175459A (en) | 1991-08-19 | 1992-12-29 | Motorola, Inc. | Low profile vibratory alerting device |
US5889670A (en) | 1991-10-24 | 1999-03-30 | Immersion Corporation | Method and apparatus for tactilely responsive user interface |
US5271290A (en) | 1991-10-29 | 1993-12-21 | United Kingdom Atomic Energy Authority | Actuator assembly |
US5335557A (en) | 1991-11-26 | 1994-08-09 | Taizo Yasutake | Touch sensitive input control device |
US5309140A (en) | 1991-11-26 | 1994-05-03 | The United States Of America As Represented By The Secretary Of The Navy | Feedback system for remotely operated vehicles |
US6597347B1 (en) | 1991-11-26 | 2003-07-22 | Itu Research Inc. | Methods and apparatus for providing touch-sensitive input in multiple degrees of freedom |
US5402680A (en) | 1991-12-10 | 1995-04-04 | Canon Kabushiki Kaisha | Velocity sensor and semiconductor exposing apparatus using such a sensor |
JPH05192449A (ja) | 1992-01-20 | 1993-08-03 | Taito Corp | ビデオ式銃撃戦ゲーム装置及びその装置を制御する方法 |
JP2812598B2 (ja) | 1992-01-21 | 1998-10-22 | 株式会社日立ビルシステム | 昇降路内機器揚重装置 |
US6344791B1 (en) | 1998-07-24 | 2002-02-05 | Brad A. Armstrong | Variable sensor with tactile feedback |
US5246316A (en) | 1992-03-06 | 1993-09-21 | Excellon Automation | Work table orientation apparatus and method |
US5437607A (en) | 1992-06-02 | 1995-08-01 | Hwe, Inc. | Vibrating massage apparatus |
US5402499A (en) | 1992-08-07 | 1995-03-28 | Lsi Logic Corporation | Multimedia controller |
US5283970A (en) | 1992-09-25 | 1994-02-08 | Strombecker Corporation | Toy guns |
US5629594A (en) | 1992-12-02 | 1997-05-13 | Cybernet Systems Corporation | Force feedback system |
US6131097A (en) | 1992-12-02 | 2000-10-10 | Immersion Corporation | Haptic authoring |
US5355148A (en) | 1993-01-14 | 1994-10-11 | Ast Research, Inc. | Fingerpoint mouse |
US5451924A (en) | 1993-01-14 | 1995-09-19 | Massachusetts Institute Of Technology | Apparatus for providing sensory substitution of force feedback |
US5785630A (en) | 1993-02-02 | 1998-07-28 | Tectrix Fitness Equipment, Inc. | Interactive exercise apparatus |
US5390128A (en) | 1993-04-12 | 1995-02-14 | Cargill Detroit Corporation | Robotic processing and inspection system |
US5436622A (en) | 1993-07-06 | 1995-07-25 | Motorola, Inc. | Variable frequency vibratory alert method and structure |
US5466213A (en) | 1993-07-06 | 1995-11-14 | Massachusetts Institute Of Technology | Interactive robotic therapist |
JP2856036B2 (ja) | 1993-07-12 | 1999-02-10 | 株式会社セガ・エンタープライゼス | スライド式振動機構を備えたゲーム機用ガンユニット及びゲーム装置 |
EP0660258B1 (en) | 1993-12-20 | 2000-03-08 | Seiko Epson Corporation | Electronic pointing device |
US5461711A (en) | 1993-12-22 | 1995-10-24 | Interval Research Corporation | Method and system for spatial accessing of time-based information |
WO1995020787A1 (en) | 1994-01-27 | 1995-08-03 | Exos, Inc. | Multimode feedback display technology |
US5514150A (en) | 1994-03-03 | 1996-05-07 | Lsi Logic Corporation | Micromachined conveyor devices |
US5521336A (en) | 1994-05-23 | 1996-05-28 | International Business Machines Corporation | Simplified digital pad sensor |
US6160489A (en) | 1994-06-23 | 2000-12-12 | Motorola, Inc. | Wireless communication device adapted to generate a plurality of distinctive tactile alert patterns |
US5575761A (en) | 1994-07-27 | 1996-11-19 | Hajianpour; Mohammed-Ali | Massage device applying variable-frequency vibration in a variable pulse sequence |
US5496174A (en) | 1994-08-04 | 1996-03-05 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Method and device for producing a tactile display using an electrorheological fluid |
US5684722A (en) | 1994-09-21 | 1997-11-04 | Thorner; Craig | Apparatus and method for generating a control signal for a tactile sensation generator |
US6422941B1 (en) | 1994-09-21 | 2002-07-23 | Craig Thorner | Universal tactile feedback system for computer video games and simulations |
US5766016A (en) | 1994-11-14 | 1998-06-16 | Georgia Tech Research Corporation | Surgical simulator and method for simulating surgical procedure |
JPH08221173A (ja) | 1995-02-09 | 1996-08-30 | Hitachi Ltd | 入力装置 |
US6473069B1 (en) | 1995-11-13 | 2002-10-29 | Cirque Corporation | Apparatus and method for tactile feedback from input device |
US5767457A (en) | 1995-11-13 | 1998-06-16 | Cirque Corporation | Apparatus and method for audible feedback from input device |
US6111577A (en) | 1996-04-04 | 2000-08-29 | Massachusetts Institute Of Technology | Method and apparatus for determining forces to be applied to a user through a haptic interface |
US6374255B1 (en) | 1996-05-21 | 2002-04-16 | Immersion Corporation | Haptic authoring |
US5857986A (en) | 1996-05-24 | 1999-01-12 | Moriyasu; Hiro | Interactive vibrator for multimedia |
FI962692A (fi) | 1996-06-28 | 1997-12-29 | Nokia Mobile Phones Ltd | Kosketusherkkä näyttö ja päätelaite |
US5791992A (en) | 1996-07-31 | 1998-08-11 | International Business Machines Corporation | Video game system with internet cartridge |
US5943044A (en) * | 1996-08-05 | 1999-08-24 | Interlink Electronics | Force sensing semiconductive touchpad |
US6154201A (en) | 1996-11-26 | 2000-11-28 | Immersion Corporation | Control knob with multiple degrees of freedom and force feedback |
JP3441607B2 (ja) | 1996-12-11 | 2003-09-02 | シャープ株式会社 | 入力装置 |
US6118435A (en) | 1997-04-10 | 2000-09-12 | Idec Izumi Corporation | Display unit with touch panel |
JPH1124834A (ja) | 1997-05-09 | 1999-01-29 | Teruki Fujiyama | 入力装置 |
US6097964A (en) | 1997-09-04 | 2000-08-01 | Nokia Mobile Phones Limited | Navigation key for a handset |
JP4567817B2 (ja) | 1997-09-11 | 2010-10-20 | ソニー株式会社 | 情報処理装置及びその制御方法 |
US5887995A (en) | 1997-09-23 | 1999-03-30 | Compaq Computer Corporation | Touchpad overlay with tactile response |
US5917906A (en) | 1997-10-01 | 1999-06-29 | Ericsson Inc. | Touch pad with tactile feature |
US6219034B1 (en) | 1998-02-23 | 2001-04-17 | Kristofer E. Elbing | Tactile computer interface |
US6198206B1 (en) | 1998-03-20 | 2001-03-06 | Active Control Experts, Inc. | Inertial/audio unit and construction |
US6078126A (en) | 1998-05-29 | 2000-06-20 | Motorola, Inc. | Resonant piezoelectric alerting device |
US5977867A (en) | 1998-05-29 | 1999-11-02 | Nortel Networks Corporation | Touch pad panel with tactile feedback |
US5945772A (en) | 1998-05-29 | 1999-08-31 | Motorla, Inc. | Damped resonant piezoelectric alerting device |
US6369803B2 (en) | 1998-06-12 | 2002-04-09 | Nortel Networks Limited | Active edge user interface |
US6429846B2 (en) | 1998-06-23 | 2002-08-06 | Immersion Corporation | Haptic feedback for touchpads and other touch controls |
US6292173B1 (en) | 1998-09-11 | 2001-09-18 | Stmicroelectronics S.R.L. | Touchpad computer input system and method |
US6373463B1 (en) | 1998-10-14 | 2002-04-16 | Honeywell International Inc. | Cursor control system with tactile feedback |
DE19849460B4 (de) | 1998-10-28 | 2009-11-05 | Völckers, Oliver | Numerische digitale Telefontastatur für ein Telefongerät mit einem Display und Verfahren zur schnellen Textauswahl aus einer Liste mittels der numerischen Telefontastatur |
US6225976B1 (en) | 1998-10-30 | 2001-05-01 | Interlink Electronics, Inc. | Remote computer input peripheral |
US6218966B1 (en) | 1998-11-05 | 2001-04-17 | International Business Machines Corporation | Tactile feedback keyboard |
US6781569B1 (en) | 1999-06-11 | 2004-08-24 | Immersion Corporation | Hand controller |
JP2000299575A (ja) | 1999-04-12 | 2000-10-24 | Sony Corp | 入力装置 |
KR20010028369A (ko) | 1999-09-21 | 2001-04-06 | 심재붕 | 컴퓨터용 마우스 |
US6388655B1 (en) | 1999-11-08 | 2002-05-14 | Wing-Keung Leung | Method of touch control of an input device and such a device |
US6597384B1 (en) * | 1999-12-22 | 2003-07-22 | Intel Corporation | Automatic reorienting of screen orientation using touch sensitive system |
US6822635B2 (en) * | 2000-01-19 | 2004-11-23 | Immersion Corporation | Haptic interface for laptop computers and other portable devices |
JP2001222379A (ja) | 2000-02-10 | 2001-08-17 | Fujitsu Ltd | ポインティングデバイス |
JP2001265485A (ja) | 2000-03-17 | 2001-09-28 | Sharp Corp | キースイッチ構造及びそれを用いた携帯用機器 |
JP2001290572A (ja) | 2000-04-05 | 2001-10-19 | Fuji Xerox Co Ltd | 情報処理装置 |
JP2001296950A (ja) | 2000-04-14 | 2001-10-26 | Fuji Xerox Co Ltd | 触力覚呈示装置及び記録媒体 |
JP4420364B2 (ja) | 2000-06-06 | 2010-02-24 | Smk株式会社 | タッチパネルの押圧感発生装置 |
JP3949912B2 (ja) | 2000-08-08 | 2007-07-25 | 株式会社エヌ・ティ・ティ・ドコモ | 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法 |
US6751635B1 (en) | 2000-08-18 | 2004-06-15 | Network Appliance, Inc. | File deletion and truncation using a zombie file space |
DE10046099A1 (de) | 2000-09-18 | 2002-04-04 | Siemens Ag | Berührungssensitive Anzeige mit taktiler Rückkopplung |
AU2002213017A1 (en) | 2000-10-10 | 2002-04-22 | Motorola Inc., A Corporation Of The State Of Delaware | Data entry device |
US6543487B2 (en) | 2001-02-08 | 2003-04-08 | Air Logistics Corporation | Method of securing a curing composite substrate wrap to a structure |
JP2002259059A (ja) | 2001-03-05 | 2002-09-13 | Sony Corp | 入力装置 |
US6844873B2 (en) | 2001-03-09 | 2005-01-18 | Peter W. Johnson | Reverse cantilever assembly for input devices |
US6885876B2 (en) | 2001-03-12 | 2005-04-26 | Nokia Mobile Phones Ltd. | Mobile phone featuring audio-modulated vibrotactile module |
US6801191B2 (en) | 2001-04-27 | 2004-10-05 | Matsushita Electric Industrial Co., Ltd. | Input device and inputting method with input device |
US7202851B2 (en) | 2001-05-04 | 2007-04-10 | Immersion Medical Inc. | Haptic interface for palpation simulation |
US6963762B2 (en) | 2001-05-23 | 2005-11-08 | Nokia Corporation | Mobile phone using tactile icons |
US6657617B2 (en) | 2001-06-25 | 2003-12-02 | International Business Machines Corporation | Method, apparatus and computer program product for three dimensional text creation |
CN101231553B (zh) | 2001-11-01 | 2012-08-22 | 伊梅森公司 | 用于提供触感的方法和系统 |
US6976562B1 (en) | 2003-08-28 | 2005-12-20 | Bte Technologies, Inc. | Method of calibrating a brake system for stationary equipment and apparatus using the same |
US20060066569A1 (en) | 2003-12-08 | 2006-03-30 | Immersion Corporation, A Delaware Corporation | Methods and systems for providing haptic messaging to handheld communication devices |
US7112737B2 (en) * | 2003-12-31 | 2006-09-26 | Immersion Corporation | System and method for providing a haptic effect to a musical instrument |
JP2007518096A (ja) | 2004-01-15 | 2007-07-05 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ルックアップテーブルを介して達成されるイベントの位置決め |
US20060038774A1 (en) * | 2004-08-20 | 2006-02-23 | Mese John C | System and method for automatically establishing handedness settings of embedded input device |
US7462798B2 (en) * | 2005-04-27 | 2008-12-09 | Aruze Corp. | Gaming machine |
KR100639066B1 (ko) | 2005-07-22 | 2006-10-30 | 한국과학기술원 | 열전달이 가능한 컴퓨터용 마우스 시스템 |
US20070033522A1 (en) * | 2005-08-02 | 2007-02-08 | Lin Frank L | System and method for dynamic resizing of web-based GUIs |
US20070236474A1 (en) * | 2006-04-10 | 2007-10-11 | Immersion Corporation | Touch Panel with a Haptically Generated Reference Key |
JP2008033739A (ja) * | 2006-07-31 | 2008-02-14 | Sony Corp | 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置 |
US8564544B2 (en) | 2006-09-06 | 2013-10-22 | Apple Inc. | Touch screen device, method, and graphical user interface for customizing display of content category icons |
US8988359B2 (en) * | 2007-06-19 | 2015-03-24 | Nokia Corporation | Moving buttons |
US20090002178A1 (en) * | 2007-06-29 | 2009-01-01 | Microsoft Corporation | Dynamic mood sensing |
JP2009163278A (ja) | 2007-12-21 | 2009-07-23 | Toshiba Corp | 携帯型機器 |
JP2009169820A (ja) * | 2008-01-18 | 2009-07-30 | Panasonic Corp | 携帯端末 |
US20090280860A1 (en) * | 2008-05-12 | 2009-11-12 | Sony Ericsson Mobile Communications Ab | Mobile phone with directional force feedback and method |
JP2010015551A (ja) * | 2008-06-03 | 2010-01-21 | Univ Of Electro-Communications | 触覚情報提示装置及び触覚情報提示システム |
KR101486581B1 (ko) * | 2008-07-01 | 2015-02-04 | 엘지전자 주식회사 | 휴대 단말기 및 그 구동 방법 |
EP2175344B1 (en) * | 2008-10-06 | 2020-02-12 | Samsung Electronics Co., Ltd. | Method and apparatus for displaying graphical user interface depending on a user's contact pattern |
KR20100039194A (ko) | 2008-10-06 | 2010-04-15 | 삼성전자주식회사 | 사용자 접촉 패턴에 따른 GUI(Graphic User Interface) 표시 방법 및 이를 구비하는 장치 |
EP2175343A1 (en) * | 2008-10-08 | 2010-04-14 | Research in Motion Limited | A method and handheld electronic device having a graphical user interface which arranges icons dynamically |
US8004391B2 (en) * | 2008-11-19 | 2011-08-23 | Immersion Corporation | Method and apparatus for generating mood-based haptic feedback |
KR20100065640A (ko) | 2008-12-08 | 2010-06-17 | 삼성전자주식회사 | 터치스크린의 햅틱 피드백 방법 |
JP4725818B2 (ja) * | 2009-02-20 | 2011-07-13 | ソニー株式会社 | 入力装置および方法、情報処理システム、並びにプログラム |
JP2010286986A (ja) * | 2009-06-10 | 2010-12-24 | Funai Electric Co Ltd | 携帯端末装置 |
US9323398B2 (en) | 2009-07-10 | 2016-04-26 | Apple Inc. | Touch and hover sensing |
US8599152B1 (en) * | 2010-06-25 | 2013-12-03 | Sprint Communications Company L.P. | Intelligent touch screen keyboard |
US8798534B2 (en) | 2010-07-09 | 2014-08-05 | Digimarc Corporation | Mobile devices and methods employing haptics |
KR101187980B1 (ko) * | 2010-08-13 | 2012-10-05 | 삼성전기주식회사 | 햅틱 피드백 디바이스 및 이를 포함하는 전자 장치 |
WO2012108719A2 (en) * | 2011-02-10 | 2012-08-16 | Samsung Electronics Co., Ltd. | Mobile terminal and method for controlling the same in consideration of communication environment |
JP2012181625A (ja) * | 2011-02-28 | 2012-09-20 | Toshiba Corp | 電子機器 |
CN103620928A (zh) | 2011-03-17 | 2014-03-05 | 联合活跃驱动公司 | 多个同步振动致动器的非对称总体振动波形 |
US20130002565A1 (en) | 2011-06-28 | 2013-01-03 | Microsoft Corporation | Detecting portable device orientation and user posture via touch sensors |
JP5588931B2 (ja) * | 2011-06-29 | 2014-09-10 | 株式会社Nttドコモ | 移動情報端末、配置領域取得方法、プログラム |
US20120223880A1 (en) * | 2012-02-15 | 2012-09-06 | Immersion Corporation | Method and apparatus for producing a dynamic haptic effect |
US20130229396A1 (en) * | 2012-03-05 | 2013-09-05 | Kenneth J. Huebner | Surface aware, object aware, and image aware handheld projector |
US8928593B2 (en) * | 2012-03-11 | 2015-01-06 | Beijing Hefengxin Keji Co. Ltd. | Selecting and updating location of virtual keyboard in a GUI layout in response to orientation change of a portable device |
KR20140044237A (ko) | 2012-10-04 | 2014-04-14 | 삼성전자주식회사 | 플렉서블 장치 및 그의 제어 방법 |
CN102937873B (zh) | 2012-10-12 | 2015-09-16 | 天津三星通信技术研究有限公司 | 在便携式终端中进行键盘输入的方法和设备 |
-
2013
- 2013-03-13 US US13/800,264 patent/US9904394B2/en active Active
-
2014
- 2014-03-07 EP EP19172524.1A patent/EP3557400A1/en not_active Withdrawn
- 2014-03-07 EP EP16200104.4A patent/EP3168713B1/en active Active
- 2014-03-07 EP EP14158395.5A patent/EP2784630A1/en not_active Ceased
- 2014-03-10 KR KR1020140027625A patent/KR20140112418A/ko not_active Application Discontinuation
- 2014-03-12 JP JP2014048612A patent/JP6479322B2/ja not_active Expired - Fee Related
- 2014-03-13 CN CN201910270048.7A patent/CN110275605A/zh active Pending
- 2014-03-13 CN CN201410093611.5A patent/CN104049734B/zh not_active Expired - Fee Related
-
2018
- 2018-01-03 US US15/861,254 patent/US20180136774A1/en not_active Abandoned
-
2019
- 2019-02-06 JP JP2019019630A patent/JP2019109909A/ja not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
EP3557400A1 (en) | 2019-10-23 |
EP3168713A1 (en) | 2017-05-17 |
US20140282051A1 (en) | 2014-09-18 |
CN104049734A (zh) | 2014-09-17 |
JP6479322B2 (ja) | 2019-03-06 |
US9904394B2 (en) | 2018-02-27 |
EP2784630A1 (en) | 2014-10-01 |
CN110275605A (zh) | 2019-09-24 |
CN104049734B (zh) | 2019-05-03 |
JP2014179085A (ja) | 2014-09-25 |
US20180136774A1 (en) | 2018-05-17 |
KR20140112418A (ko) | 2014-09-23 |
EP3168713B1 (en) | 2019-05-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2019109909A (ja) | ユーザの接触に基づいてグラフィカルユーザインターフェースを表示するための方法及び装置 | |
EP2805220B1 (en) | Skinnable touch device grip patterns | |
US10353570B1 (en) | Thumb touch interface | |
KR100801089B1 (ko) | 터치 및 드래그를 이용하여 제어 가능한 모바일 장치 및 그조작 방법 | |
US20090307633A1 (en) | Acceleration navigation of media device displays | |
JP5483908B2 (ja) | インターフェース再構成モードを有する携帯用電子装置 | |
US8508475B2 (en) | User interface elements positioned for display | |
US10248224B2 (en) | Input based on interactions with a physical hinge | |
US20120169776A1 (en) | Method and apparatus for controlling a zoom function | |
US20150160770A1 (en) | Contact signature control of device | |
KR101679379B1 (ko) | 힘 감지 제스처 인식을 위한 방법 및 디바이스 | |
KR20130129220A (ko) | 컴퓨팅 디바이스의 의도적 이동을 수반하는 제스처를 검출하는 방법 | |
EP2504749A1 (en) | Method of modifying commands on a touch screen user interface | |
WO2013033309A1 (en) | Receiving input at a computing device | |
US11789541B2 (en) | Adjusting haptic feedback through touch-sensitive input devices | |
EP2879038A1 (en) | Input system with parallel input data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190306 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190306 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20200127 |