JP6082458B2 - ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース - Google Patents

ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース Download PDF

Info

Publication number
JP6082458B2
JP6082458B2 JP2015511645A JP2015511645A JP6082458B2 JP 6082458 B2 JP6082458 B2 JP 6082458B2 JP 2015511645 A JP2015511645 A JP 2015511645A JP 2015511645 A JP2015511645 A JP 2015511645A JP 6082458 B2 JP6082458 B2 JP 6082458B2
Authority
JP
Japan
Prior art keywords
user interface
touch
movement
sensitive surface
contact
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015511645A
Other languages
English (en)
Other versions
JP2015521316A (ja
Inventor
ジェフリー, トリア バーンスタイン,
ジェフリー, トリア バーンスタイン,
ジュリアン ミッシグ,
ジュリアン ミッシグ,
アヴィ イー. シェプリンスキー,
アヴィ イー. シェプリンスキー,
メイ‐リー コーエ,
メイ‐リー コーエ,
ビアンカ シー. コスタンゾ,
ビアンカ シー. コスタンゾ,
レイチェル エー. ルース,
レイチェル エー. ルース,
マシュー エヴァンス,
マシュー エヴァンス,
サミュエル エム. ロバーツ,
サミュエル エム. ロバーツ,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2015521316A publication Critical patent/JP2015521316A/ja
Application granted granted Critical
Publication of JP6082458B2 publication Critical patent/JP6082458B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

<技術分野>
本出願は、全般的に、タッチ感知面を備える電子デバイスに関し、その電子デバイスとしては、ユーザインタフェースを操作するための入力を検出するタッチ感知面を備える、電子デバイスが挙げられるが、これに限定されない。
コンピュータ及び他の電子計算デバイス用の入力デバイスとしてのタッチ感知面の使用は、近年では、著しく増大している。例示的なタッチ感知面としては、タッチパッド及びタッチスクリーンディスプレイが挙げられる。そのような表面は、ディスプレイ上のユーザインタフェースオブジェクトを操作するために、広範に使用される。
例示的な操作としては、1つ以上のユーザインタフェースオブジェクトの位置及び/又はサイズを調節すること、あるいは、ボタンをアクティブにするか、又はユーザインタフェースオブジェクトによって表されるファイル/アプリケーションを開くこと、並びに1つ以上のユーザインタフェースオブジェクトにメタデータを関連付けること、又は他の方式でユーザインタフェースを操作することが挙げられる。例示的なユーザインタフェースオブジェクトとしては、デジタル画像、ビデオ、テキスト、アイコン、ボタンなどの制御要素、及び他のグラフィックが挙げられる。ユーザは、一部の状況では、ファイル管理プログラム(例えば、Apple Inc.(Cupertino,California)によるFinder(登録商標))、画像管理アプリケーション(例えば、Apple Inc.(Cupertino,California)によるAperture(登録商標)又はiPhoto(登録商標))、デジタルコンテンツ(例えば、ビデオ及び音楽)管理アプリケーション(例えば、Apple Inc.(Cupertino,California)によるiTunes(登録商標))、描画アプリケーション、プレゼンテーションアプリケーション(例えば、Apple Inc.(Cupertino,California)によるKeynote(登録商標))、ワードプロセッシングアプリケーション(例えば、Apple Inc.(Cupertino,California)によるPages(登録商標))、ウェブサイト作成アプリケーション(例えば、Apple Inc.(Cupertino,California)によるiWeb(商標))、ディスクオーサリングアプリケーション(例えば、Apple Inc.(Cupertino,California)によるiDVD(登録商標))、又はスプレッドシートアプリケーション(例えば、Apple Inc.(Cupertino,California)によるNumbers(登録商標))内のユーザインタフェースオブジェクトに対して、そのような操作を実行することが必要となる。
しかしながら、これらの操作を実行するための既存の方法は、煩雑かつ非効率的である。加えて、既存の方法は必要以上に時間を要し、それによってエネルギーを無駄にしてしまう。この後者の考慮事項は、バッテリ動作デバイスにおいては特に重要である。
したがって、ユーザインタフェースを操作するための、より速く、より効率的な方法及びインタフェースを備える、電子デバイスが必要とされている。そのような方法及びインタフェースは、ユーザインタフェースを操作するための従来の方法を、任意選択的に補完するか、又は置き換える。このような方法及びインタフェースは、ユーザの認識負担を軽減し、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作デバイスの場合、このような方法及びインタフェースにより、電力を保存し、バッテリの充電の間の時間を増やす。
タッチ感知面を備える電子デバイス用のユーザインタフェースに関連する、上記の欠陥及び他の問題点は、開示されるデバイスによって低減されるか、又は取り除かれる。いくつかの実施形態において、このデバイスは、デスクトップコンピュータである。いくつかの実施形態において、このデバイスは、ポータブル(例えば、ノートブックコンピュータ、タブレットコンピュータ、又はハンドヘルドデバイス)である。いくつかの実施形態において、このデバイスは、タッチパッドを有する。いくつかの実施形態では、このデバイスは、タッチ感知ディスプレイ(別名「タッチスクリーン」又は「タッチスクリーンディスプレイ」)を有する。いくつかの実施形態において、このデバイスは、グラフィカルユーザインタフェース(GUI)、1つ以上のプロセッサ、メモリ、及び複数の機能を実行するためにメモリに記憶された1つ以上のモジュール、プログラム、又は命令セットを有する。いくつかの実施形態において、ユーザは主にタッチ感知面上での指の接触及びジェスチャを介してGUIと対話する。いくつかの実施形態では、それらの機能としては、任意選択的に、画像編集、描画、プレゼンテイング、ワードプロセッシング、ウェブサイトの作成、ディスクオーサリング、スプレッドシートの作成、ゲームプレイ、電話をかけること、テレビ会議、電子メール、インスタントメッセージング、トレーニングサポート、デジタル写真撮影、デジタルビデオ撮影、ウェブブラウジング、デジタル音楽の再生、及び/又はデジタルビデオの再生が挙げられる。これらの機能を実行するための実行可能命令は、1つ以上のプロセッサによる実行のために構成された、非一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に、任意選択的に含まれる。
ユーザインタフェース内で実行される動作の触知フィードバックを提供する、より多くの方法及びインタフェースを備えた電子デバイスが必要とされている。このような方法及びインタフェースは、ユーザインタフェース内で実行される動作に関するフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。このような方法及びインタフェースは、ユーザの認識負担を軽減し、より効率的なヒューマン−マシンインタフェースを作り出す。
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を備えた電子デバイスにおいて実行される。方法は、ディスプレイ上にユーザインタフェースオブジェクトを表示するステップと、タッチ感知面上で接触を検出するステップと、ユーザインタフェースオブジェクト上での動作の実行に対応するタッチ感知面を横切る接触の第1の動きを検出するステップと、第1の動きの検出に応じて動作を実行し、タッチ感知面上に第1の触知出力を生成するステップとを含む。方法は、ユーザインタフェースオブジェクト上での動作の反転に対応するタッチ感知面を横切る接触の第2の動きを検出するステップと、第2の動きの検出に応じて動作を反転し、タッチ感知面上に第2の触知出力を生成するステップとを更に含む。
いくつかの実施形態によれば、電子デバイスは、ユーザインタフェースオブジェクトを表示するように構成された表示ユニットと、ユーザによる接触を検出するように構成されたタッチ感知面ユニットと、表示ユニット及びタッチ感知面ユニットに結合された処理ユニットとを含む。処理ユニットは、タッチ感知面ユニット上の接触を検出し、ユーザインタフェースオブジェクト上での動作の実行に対応するタッチ感知面ユニットを横切る接触の第1の動きを検出し、第1の動きの検出に応じて動作を実行し、タッチ感知面ユニット上に第1の触知出力を生成するように構成されている。処理ユニットは、ユーザインタフェースオブジェクト上での動作の反転に対応するタッチ感知面ユニットを横切る接触の第2の動きを検出し、第2の動きの検出に応じて動作を反転し、第1の触知出力とは異なる第2の触知出力をタッチ感知面ユニット上に生成するように、更に構成されている。
このように、ディスプレイ及びタッチ感知面を備えた電子デバイスは、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するより多くの方法及びインタフェースを備えることにより、このようなデバイスの有効性、効率、及びユーザ満足度を向上させる。このような方法及びインタフェースは、ユーザインタフェース内で実行される動作のフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。
ユーザインタフェースオブジェクトのz順序の変更を示すためのより高速かつより効率的な方法及びインタフェースを備えた電子デバイスが必要とされている。このような方法及びインタフェースは、ユーザインタフェースオブジェクトのz順序の変更を示す従来の方法を補完し又はこれらに取って代わることができる。このような方法及びインタフェースは、ユーザの認識負担を軽減し、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作デバイスの場合、このような方法及びインタフェースにより、電力を保存し、バッテリの充電の間の時間を増やす。
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を備えた電子デバイスにおいて実行される。方法は、ディスプレイ上に複数のユーザインタフェースオブジェクトを表示するステップであって、この複数のユーザインタフェースオブジェクトはz順序を有し、かつ第1のユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを含み、この第1のユーザインタフェースオブジェクトはz順序内で第2のユーザインタフェースオブジェクトよりも上位にある、この表示するステップと、タッチ感知面上の接触を検出している間に第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップと、この要求に応じて第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させるステップと、第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトの少なくとも一部と重畳するとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップと連動して第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力をタッチ感知面上に生成するステップと、第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトと重畳しないとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力の生成を見合わせるステップとを含む。
いくつかの実施形態によれば、電子デバイスは、表示ユニット上に複数のユーザインタフェースオブジェクトを表示するように構成された表示ユニットであって、複数のユーザインタフェースオブジェクトはz順序を有し、かつ第1のユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを含み、第1のユーザインタフェースオブジェクトはz順序内で第2のユーザインタフェースオブジェクトよりも上位にある、この表示ユニットと、接触を受けるように構成されたタッチ感知面ユニットと、表示ユニット及びタッチ感知面ユニットに結合された処理ユニットとを含む。処理ユニットは、タッチ感知面ユニット上で接触を検出している間に第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取り、この要求に応じて第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させ、第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトの少なくとも一部と重畳しているとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップと連動して第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力をタッチ感知面ユニット上に生成し、第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトと重畳しないとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力を生成するステップを見合わせるように構成されている。
このように、ディスプレイ及びタッチ感知面を備えた電子デバイスは、ユーザインタフェースオブジェクトのz順序の変更を示すためのより高速でより効率的な方法及びインタフェースを備えており、これにより、このようなデバイスの有効性、効率、及びユーザ満足度が向上する。このような方法及びインタフェースは、ユーザインタフェースオブジェクトのz順序の変更を示す従来の方法を補完し、又はこれらに取って代わることができる。
あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するためのより高速でより効率的な方法及びインタフェースを備えた電子デバイスが必要とされている。このような方法及びインタフェースは、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。このような方法及びインタフェースは、ユーザの認識負荷を軽減し、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作デバイスの場合、このような方法及びインタフェースにより、電力が節約され、バッテリを充電する間隔が増大する。
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を備えた電子デバイスにおいて実施される。方法は、ディスプレイ上にそれぞれのコンテンツに関連付けられるパラメータを制御するためのコントロールを表示するステップを含む。方法は、更に、パラメータを調節するためのタッチ感知面上でのジェスチャを検出するステップを含む。この方法は、ジェスチャの検出に応じて、ジェスチャの範囲に対応するパラメータの調節を判定するステップと、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、タッチ感知面上にそれぞれの触知出力を生成するステップと、パラメータの調節が1つ以上の定義済みの調節限度を超えないとの判定に従って、タッチ感知面上にそれぞれの触知出力を生成せずにパラメータの調節を実行するステップとを更に含む。
いくつかの実施形態によれば、電子デバイスは、それぞれのコンテンツに関連付けられるパラメータを制御するためのコントロールを表示するように構成された表示ユニットと、ユーザによる接触を受けるように構成されたタッチ感知面ユニットと、表示ユニット及びタッチ感知面ユニットに結合された処理ユニットとを含む。処理ユニットは、表示ユニット上にそれぞれのコンテンツに関連付けられるパラメータを制御するためのコントロールの表示を可能とし、パラメータを調節するためのタッチ感知面ユニット上でのジェスチャを検出するように構成されている。処理ユニットは、ジェスチャの検出に応じてジェスチャの範囲に対応するパラメータの調節を判定し、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従ってタッチ感知面ユニット上にそれぞれの触知出力を生成し、パラメータの調節が1つ以上の定義済みの調節限度を超えないとの判定に従って、タッチ感知面ユニット上にそれぞれの触知出力を生成せずにパラメータの調節を実行するように、更に構成されている。
このように、ディスプレイ及びタッチ感知面を備えた電子デバイスは、あるアクションが定義済みの調節限度を超えるパラメータの調節をもたらす時にフィードバックを提供するためのより高速でより効率的な方法及びインタフェースを備えており、これにより、このようなデバイスの有効性、効率性、及びユーザ満足度が向上する。このような方法及びインタフェースは、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。
時計に対応するフィードバックを提供するより多くの方法及びインタフェースを備えた電子デバイスが必要とされている。このような方法及びインタフェースは、時計を表示する従来の方法を補完し、又はこれらに取って代わることができる。このような方法及びインタフェースは、ユーザの認識負担を軽減し、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作デバイスの場合、このような方法及びインタフェースにより、電力を保存し、バッテリの充電の間の時間を増やす。
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を備えた電子デバイスにおいて実行される。方法は、ディスプレイ上に時計の描画を表示するステップと、時計の描画の上にあるフォーカスセレクタの動きを検出するステップと、時計の描画の上にあるフォーカスセレクタを検出している間にタッチ感知面ユニット上の規則的なパターンの触知出力を含む時計に対応する触知フィードバックを提供するステップとを含む。方法は、更に、触知フィードバックを提供している間に時計の描画から遠ざかるフォーカスセレクタの動きを検出するステップと、時計の描画から遠ざかるフォーカスセレクタの動きの検出に応じて時計に対応する触知フィードバックの提供を停止するステップとを含む。
いくつかの実施形態によれば、電子デバイスは、時計の描画を表示するように構成された表示ユニットと、タッチ感知面ユニットと、表示ユニット及びタッチ感知面ユニットに結合された処理ユニットとを含む。処理ユニットは、時計の描画の上にあるフォーカスセレクタの動きを検出し、時計の描画の上にあるフォーカスセレクタを検出している間に、タッチ感知面ユニット上の規則的なパターンの触知出力を含む時計に対応する触知フィードバックを提供するように構成されている。処理ユニットは、触知フィードバックを提供している間に時計の描画から遠ざかるフォーカスセレクタの動きを検出し、時計の描画から遠ざかるフォーカスセレクタの動きの検出に応じて時計に対応する触知フィードバックの提供を停止するように、更に構成されている。
このように、ディスプレイ及びタッチ感知面を備えた電子デバイスは、時計に対応するフィードバックを提供するより多くの方法及びインタフェースを備えることにより、このようなデバイスの有効性、効率、及びユーザ満足度を向上させる。このような方法及びインタフェースは、時計に対応するフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。
楽曲のビートに対応するフィードバックを提供するためのより高速でより効率的な方法及びインタフェースを備えた電子デバイスが必要とされている。このような方法及びインタフェースは、楽曲のビートに対応するフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。このような方法及びインタフェースは、ユーザの認識負担を軽減し、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作デバイスの場合、このような方法及びインタフェースにより、電力が節約され、バッテリを充電する間隔が増大する。
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を備えた電子デバイスにおいて実施される。方法は、ディスプレイ上に楽曲の描画を表示するステップを含む。方法は、更に、楽曲の描画の上にあるフォーカスセレクタの動きを検出するステップを含む。方法は、更に、楽曲の描画の上のフォーカスセレクタを検出している間に、楽曲のビートの少なくともサブセットに対応する触知フィードバックを提供するステップを含む。方法は、更に、触知フィードバックを提供した後に、楽曲の描画から遠ざかるフォーカスセレクタの動きを検出するステップを含む。方法は、更に、楽曲の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、楽曲のビートに対応する触知フィードバックの提供を停止するステップを含む。
いくつかの実施形態によれば、電子デバイスは、楽曲の描画を表示するように構成された表示ユニットと、ユーザによる接触を受けるように構成されたタッチ感知面ユニットと、表示ユニット及びタッチ感知面ユニットに結合された処理ユニットとを含む。処理ユニットは、楽曲の描画の表示を可能とし、楽曲の描画の上にあるフォーカスセレクタの動きを検出するように構成されている。処理ユニットは、楽曲の描画の上のフォーカスセレクタを検出している間に楽曲のビートの少なくともサブセットに対応する触知フィードバックを提供するように、更に構成されている。処理ユニットは、触知フィードバックを提供した後に楽曲の描画から遠ざかるフォーカスセレクタの動きを検出するように、更に構成されている。処理ユニットは、楽曲の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、楽曲のビートに対応する触知フィードバックの提供を停止するように、更に構成されている。
このように、ディスプレイ及びタッチ感知面を備えた電子デバイスは、楽曲のビートに対応するフィードバックを提供するためのより高速かつより効率的な方法及びインタフェースを備えており、これにより、このようなデバイスの有効性、効率、及びユーザ満足度が向上する。このような方法及びインタフェースは、楽曲のビートに対応するフィードバックを提供する従来の方法を補完し、又はこれらに取って代わることができる。
いくつかの実施形態によれば、電子デバイスは、ディスプレイ、タッチ感知面、タッチ感知面との接触の強度を検出するための任意選択の1つ以上のセンサ、1つ以上のプロセッサ、メモリ、及び1つ以上のプログラムを含み、この1つ以上のプログラムは、メモリ内に記憶されて、1つ以上のプロセッサによって実行されるように構成され、1つ以上のプログラムは、パラグラフ[0058]で言及される方法のうちのいずれかの動作を実行するための、命令を含む。いくつかの実施形態によれば、ディスプレイ、タッチ感知面、タッチ感知面との接触の強度を検出するための任意選択の1つ以上のセンサ、メモリ、及びメモリ内に記憶された1つ以上のプログラムを実行するための1つ以上のプロセッサを備える電子デバイス上の、グラフィカルユーザインタフェースは、パラグラフ[0058]で言及される方法のうちのいずれかで表示される要素のうちの1つ以上を含み、それらの要素は、パラグラフ[0058]で言及される方法のうちのいずれかで説明されるように、入力に応答して更新される。いくつかの実施形態によれば、コンピュータ可読記憶媒体は、その内部に命令を記憶しており、その命令は、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための任意選択の1つ以上のセンサを備える電子デバイスによって実行されると、パラグラフ[0058]で言及される方法のうちのいずれかの動作を、そのデバイスに実行させる。いくつかの実施形態によれば、電子デバイスは、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための任意選択の1つ以上のセンサ、及び、パラグラフ[0058]で言及される方法のうちのいずれかの動作を実行するための手段を含む。いくつかの実施形態によれば、ディスプレイ及びタッチ感知面、タッチ感知面との接触の強度を検出するための任意選択の1つ以上のセンサを備える電子デバイス内で使用するための、情報処理装置が、パラグラフ[0058]で言及される方法のうちのいずれかの動作を実行するための手段を含む。
説明される様々な実施形態のより良好な理解のために、以下の図面と併せて、以下の「実施形態の説明」を参照されたく、類似の参照番号は、それらの図の全体を通じて対応する部分を指す。
いくつかの実施形態に係る、タッチ感知ディスプレイを備えたポータブル多機能デバイスを示すブロック図である。
いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。
いくつかの実施形態に係る、タッチスクリーンを備えたポータブル多機能デバイスを示す図である。
いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を備えた例示的な多機能デバイスのブロック図である。
いくつかの実施形態に係る、ポータブル多機能デバイスにおけるアプリケーションのメニューのための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、ディスプレイとは別個のタッチ感知面を備えた多機能デバイスのための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する方法を図示したフローチャートである。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する方法を図示したフローチャートである。 いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する方法を図示したフローチャートである。
いくつかの実施形態に係る電子デバイスの機能ブロック図である。
いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示す方法を図示したフローチャートである。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示す方法を図示したフローチャートである。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示す方法を図示したフローチャートである。 いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示す方法を図示したフローチャートである。
いくつかの実施形態に係る電子デバイスの機能ブロック図である。
いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための方法を図示したフローチャートである。 いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための方法を図示したフローチャートである。
いくつかの実施形態に係る電子デバイスの機能ブロック図である。
いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、時計に対応する触知フィードバックを提供する方法を図示したフローチャートである。 いくつかの実施形態に係る、時計に対応する触知フィードバックを提供する方法を図示したフローチャートである。
いくつかの実施形態に係る電子デバイスの機能ブロック図である。
いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、触知出力を生成するための動き特性の例示的な波形を示す図である。 いくつかの実施形態に係る、触知出力を生成するための動き特性の例示的な波形を示す図である。 いくつかの実施形態に係る、触知出力を生成するための動き特性の例示的な波形を示す図である。
いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供する方法を図示したフローチャートである。 いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供する方法を図示したフローチャートである。
いくつかの実施形態に係る電子デバイスの機能ブロック図である。
本明細書で説明される方法、デバイス、及びGUIは、ユーザインタフェースオブジェクトの操作を、より効率的かつユーザにとって直感的にさせる、視覚フィードバック及び/又は触知フィードバックを提供する。例えば、トラックパッドのクリック動作が、アクティブ化閾値に到達するために必要な接触強度(例えば、接触力、接触圧、又はそれらの代替)から切り離されるシステムでは、そのデバイスは、異なるアクティブ化イベントに関する異なる触知出力(例えば、「異なるクリック」)を生成することができる(例えば、それにより、特定の結果を達成するクリックは、結果を生み出さないクリック、又はその特定の結果とは異なる結果を達成するクリックから差異化される)。更に加えて、触知出力は、ユーザインタフェースオブジェクトが、特定の位置、境界、若しくは方向に移動される場合、又はイベントがデバイスで発生する場合に、触知出力(例えば、「戻り止め」)が生成されるなどの、接触の強度の増大に関連しない他のイベントに応答して生成することができる。
更に加えて、トラックパッド又はタッチスクリーンディスプレイが、1つ又は2つよりも多くの(例えば、単純なオン/オフ、2値強度判定よりも多くの)特定の強度値を含む、接触強度の範囲に敏感であるシステムでは、ユーザインタフェースは、その範囲内での接触の強度を示す応答(例えば、視覚又は触知キュー)を提供することができる。いくつかの実装では、入力に対する事前アクティブ化閾値応答及び/又は事後アクティブ化閾値応答が、連続アニメーションとして表示される。そのような応答の一実施例として、動作を実行するためのアクティブ化閾値を依然として下回る、接触強度の増大の検出に応答して、その動作のプレビューが表示される。そのような応答の別の実施例として、動作に関するアクティブ化閾値に到達した後でさえも、その動作に関連付けられたアニメーションが継続する。これらの実施例の双方とも、ユーザの接触の力又は圧力に対する継続的応答をユーザに提供するものであり、このことにより、より豊かでより直感的な視覚フィードバック及び/又は触覚フィードバックが、ユーザに提供される。より具体的には、そのような継続的な力応答は、軽く押圧することにより、動作をプレビューし、かつ/又は深く押圧することにより、その動作に対応する既定のユーザインタフェース状態を押し「退ける」か若しくは「完遂する」ことが可能であるという経験を、ユーザに与える。
加えて、接触強度の範囲に敏感であるタッチ感知面を備えるデバイスに関しては、そのデバイスによって複数の接触強度しきい値を監視することができ、異なる機能を異なる接触強度しきい値にマッピングすることができる。このことは、第2の「深い押圧」強度しきい値での接触の強度の増大、又はその強度しきい値を超える接触の強度の増大が、接触の強度が第1の「アクティブ化」強度しきい値と第2の「深い押圧」強度しきい値との間である場合に実行される動作とは異なる動作を、デバイスに実行させることになることを知っているユーザに、拡張機能への容易なアクセスを提供する、利用可能な「ジェスチャ空間」を増大させるために役立つ。第1の「アクティブ化」強度しきい値での周知の機能性を維持しつつ、第2の「深い押圧」強度しきい値に追加機能性を割り当てる有利な点は、追加機能性によって一部の状況では混乱する、経験の浅いユーザが、第1の「アクティブ化」強度しきい値までの強度を単に適用することによって、周知の機能性を使用することができる一方で、より経験豊富なユーザが、第2の「深い押圧」強度しきい値での強度を適用することによって、その追加機能性を活用することができる点である。
更に加えて、接触強度の範囲に敏感であるタッチ感知面を備えるデバイスに関しては、そのデバイスは、単一の継続的接触でユーザが複雑な動作を実行することを可能にすることによって、追加機能性を提供することができる。例えば、オブジェクトのグループを選択する場合、ユーザは、タッチ感知面の周囲で継続的接触を移動させることができ、ドラッグしつつ押圧する(例えば、「深い押圧」強度しきい値よりも大きい強度を適用する)ことにより、追加要素を選択に加えることができる。この方式で、ユーザは、ユーザインタフェースと直感的に対話することができ、接触と共により強く押圧することにより、ユーザインタフェース内のオブジェクトは、「より定着した」ものとなる。
クリック動作が、アクティブ化しきい値に到達するために必要な力から切り離され、かつ/又は、デバイスが広範囲の接触強度に敏感な、デバイス上の直感的なユーザインタフェースを提供するための、数多くの異なる手法を、以下で説明する。これらの手法のうちの1つ以上を(任意選択的に、互いを併用して)使用することは、ユーザに追加情報及び追加機能性を直感的に提供するために役立ち、それにより、ユーザの認識負担が軽減され、ヒューマン−マシンインタフェースが改善される。そのようなヒューマン−マシンインタフェースの改善により、ユーザは、より速く、より効率的にデバイスを使用することが可能となる。バッテリ動作デバイスに関しては、これらの改善により、電力が節約され、バッテリを充電する間隔が増大する。説明を容易にするために、これらの手法のいくつかの例示的実施例を含めるためのシステム、方法、及びインタフェースを、次のように以下で説明する。
●多くの電子デバイスは、ユーザインタフェースオブジェクトを含むグラフィカルユーザインタフェースを有する。通常は、インタフェースオブジェクト上で実行することのできる多くの動作が存在する。例えば、インタフェースオブジェクトは、ガイドラインに取り付けたり又はガイドラインから取り出したりすることができる。中には、ある動作が実行されたか、又はそれが反転したかを示す視覚的なフィードバックを提供するユーザインタフェースもある。しかし、状況によっては、ユーザは視覚的なフィードバックに気づかないであろうし、したがって、その動作が実行されたのか、又はそれが反転したのかについて混乱するであろう。下記に説明する実施形態は、実行される動作に対応してユーザのために触知出力を生成することによりこれらの方法を改良し、これにより、より便利かつ効率的なユーザインタフェースを提供する。具体的には、図5A〜5Oは、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する例示的なユーザインタフェースを図示している。図6A〜6Cは、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する方法を図示したフローチャートである。更に、図5A〜5O中のユーザインタフェースは、図6A〜6Cを参照して下記に説明するプロセスを図示するために使用される。
●多くの電子デバイスが、レイヤー順序(例えば、z順序又はユーザインタフェースオブジェクトの前後順)を有するユーザインタフェースオブジェクトを表示する。状況によっては、ユーザは、ディスプレイ上でこのようなオブジェクトを再配置することによりこのようなオブジェクトと対話し、重畳したオブジェクトは、それらの前後順に従ってディスプレイ上に表示される(例えば、2つのオブジェクトが重畳している箇所では、もう一方のオブジェクトの「前」にあるオブジェクトが表示される)。ディスプレイ上でのオブジェクトの再配置に加え、ユーザは、ディスプレイ上のオブジェクトの前後順を変更したいと思うことがよくある。いくつかの方法において、z順序の変更は視覚的なフィードバックによって示される。しかし、状況によっては、ユーザは視覚的なフィードバックに気づかないであろうし、したがって、その動作が実行されたかについて混乱するであろう。下記に説明する実施形態は、オブジェクトが相互に重畳しており、これらのz順序が変更された時に、触知出力を提供することによりこれらの方法を改良し、これにより、より便利かつ効率的なユーザインタフェースを提供する。具体的には、図8A〜8Sが、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを図示している。図9A〜9Dは、ユーザインタフェースオブジェクトのz順序の変更を示す方法を図示したフローチャートである。図8A〜8S中のユーザインタフェースは、図9A〜9D中のプロセスを図示するために使用される。
●多くの電子デバイスは、ユーザインタフェースオブジェクトのサイズなどの1つ以上の関連付けられるパラメータを調節することにより操作できるユーザインタフェースオブジェクトを表示するグラフィカルユーザインタフェースを有する。実用的な理由から、これらパラメータのうちのいくつかは、これらユーザインタフェースオブジェクトに一般的に割り当てられる定義済みの調節限度を有し、これらユーザインタフェースオブジェクトのプロパティを調節できる範囲を制限している。ユーザインタフェースによっては、定義済みの調節限度を超えたかを示す視覚的なフィードバックを提供するものもある。しかし、状況によっては、ユーザは視覚的なフィードバックに気づかないであろうし、したがって定義済みの調節限度を超えたか否かについて混乱するであろう。下記に説明する実施形態は、あるアクションが定義済みの調節限度を超えるパラメータの調節をもたらす時に触知フィードバックを提供することにより、複雑なユーザインタフェースをナビゲートするユーザに対するフィードバックを生成するための改良された方法及びユーザインタフェースを提供し、これにより、より便利かつ効率的なユーザインタフェースを提供する。具体的には、図11A〜11Tは、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを図示している。図12A〜12Bは、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供する方法を図示したフローチャートである。図11A〜11T中のユーザインタフェースは、図12A〜12D中のプロセスを図示するために使用される。
●多くの電子デバイスは、時計の描画を含むグラフィカルユーザインタフェースを有する。ユーザが時計に対応するフィードバックを受け取るための効率的でかつ便利な方法の提供が、しばしば必要とされる。ユーザインタフェースによっては、時計上の時間の経過を示す視覚的なフィードバックを提供するものもある。しかし、状況によっては、ユーザは、別のタスクを実行している時には時計から目を離し又は注意が散漫となってしまうであろうし、視覚的なフィードバックに注意を向けることができないであろう。下記の実施形態は、ユーザに対して時計に対応する触知出力(例えば、「チクタク」パターンの触知出力)を生成することによりこれらの方法を改良し、これにより、ユーザが時計上の時間の経過をモニタしている間に異なる視覚要素に注意を払うことを可能とすることによってより便利かつ効率的なユーザインタフェースを提供する。具体的には、図14A〜14Jは、いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを図示している。これらの図中のユーザインタフェースは、図15A〜15Bを参照して下記に説明するプロセスを含め、以下に説明するプロセスを例示するために使用される。
●多くの電子デバイスは、楽曲の描画(例えば、楽曲のアルバムのカバーアートのグラフィック描画、楽曲が現在再生中であることを示す領域、又は楽曲に対応した楽譜のグラフィック描画内の楽曲の音符)を示すアプリケーションウィンドウを表示するグラフィカルユーザインタフェースを有する。音声要素及び視覚要素の両方を有するアプリケーション(例えば、音楽再生、作曲、ビデオ再生、又は映像合成のアプリケーション)に対応するアプリケーションウィンドウを含むユーザインタフェース環境の複雑さを考慮すると、ユーザがユーザインタフェース環境内をより効率よくかつ便利にナビゲートすることを可能とするフィードバックの提供が必要とされている。ユーザインタフェースによっては、楽曲の音符を示す視覚的なフィードバックを提供するものもある。しかし、状況によっては、ユーザは、別のタスクを実行している時には楽曲の音符を示す視覚的なフィードバックを提供するユーザインタフェースの領域から目を離し又は注意が散漫となってしまうであろうし、視覚的なフィードバックに注意を払うことができないであろう。下記に説明する実施形態は、楽曲の音符に対応する触知出力を生成することにより複雑なユーザインタフェース環境をナビゲートするユーザに対するフィードバックを生成するための改良された方法及びユーザインタフェースを提供し、これにより、ユーザが楽曲の音符をモニタしている間に異なる視覚要素に注意を払うことを可能とすることによってより便利かつ効率的なユーザインタフェースを提供する。より具体的には、これらの方法及びユーザインタフェースは、ディスプレイ上に描画された楽曲のビートに対応するフィードバックを提供する。下記において、図17A〜17Lは、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを図示している。図18A〜18Bは、楽曲のビートに対応するフィードバックを提供する方法を図示したフローチャートである。図17A〜17L中のユーザインタフェースは、図18A〜18B中のプロセスを図示するために使用される。
例示的なデバイス
実施例が添付の図面に示されている実施形態が、詳細に参照される。以下の詳細な説明では、説明される様々な実施形態の完全な理解を提供するために、数多くの具体的な詳細が記載される。しかしながら、説明される様々な実施形態は、これらの具体的な詳細を伴わずとも実践することができる点が、当業者には明らかとなるであろう。他の例においては、周知の方法、手続き、構成要素、回路、及びネットワークは、実施形態の態様を不必要に不明瞭なものとしないよう、詳細には説明されていない。
本明細書では、第1、第2などの用語は、一部の実例で、様々な要素を説明するために使用されるが、これらの要素は、それらの用語によって限定されるべきではないことも理解されるであろう。これらの用語は、ある要素を別の要素と区別するためのみに使用される。例えば、説明される様々な実施形態の範囲から逸脱することなく、第1の接触を第2の接触と呼ぶことが可能であり、同様に、第2の接触を第1の接触と呼ぶことが可能である。第1の接触及び第2の接触は両方接触であるが、それらは同じ接触ではない。
本明細書で説明される様々な実施形態の説明で使用される用語法は、特定の実施形態を説明することのみを目的とするものであって、限定することを意図するものではない。説明される様々な実施形態の説明及び添付の特許請求の範囲で使用される時、単数形「a」、「an」、及び「the」は、文脈がそうではないことを明確に示さない限り、複数形もまた含むことが意図される。本明細書で使用される時に、用語「及び/又は」が、関連するリスト化された項目のうちの1つ以上の任意の全ての可能な組合せを指し、これを含むことをも理解されるであろう。更に、用語「includes(含む)、「including(含む)」、「comprises(含む)」及び/又は「comprising(含む)」が、本明細書で使用される時に、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はその群の存在又は追加を除外しないことが理解されるであろう。
本明細書で使用される時、用語「if(〜の場合には)」は、任意選択的に、文脈に応じて「when(の時〜)」、「upon(〜する際)」、「in response to determining(〜という判定に応答して)」、又は「in response to detecting(〜の検出に応答して)」を意味するものと解釈される。同様に、語句「if it is determined(〜と判定される場合には)」又は「if(a stated condition or event)is detected((記述される条件又はイベント)が検出される場合には)」は、任意選択的に、文脈に応じて「upon determining(〜と判定される際)」、又は「in response to determining(〜との判定に応答して)」、又は「upon detecting(the stated condition or event)((記述される条件又はイベント)が検出される際)」、又は「in response to detecting(the stated condition or event)((記述される条件又はイベント)の検出に応答して)」を意味するものと解釈される。
電子デバイス、そのようなデバイス用のユーザインタフェース、及びそのようなデバイスを使用するための関連するプロセスの実施形態を説明する。いくつかの実施形態では、このデバイスは、PDA機能及び/又は音楽再生機能などの、他の機能をも含むモバイル電話機などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態は、限定を伴わずに、California州CupertinoのApple Inc.のiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイスを含む。タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を備えるラップトップコンピュータ又はタブレットコンピュータなどの、他のポータブル電子デバイスが、任意選択的に使用される。また、いくつかの実施形態において、このデバイスはポータブル通信デバイスではなく、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を備えたデスクトップコンピュータであることを理解されたい。
以下の考察では、ディスプレイ及びタッチ感知面を含む電子デバイスを説明する。しかしながら、この電子デバイスは、任意選択的に、物理キーボード、マウス、及び/又はジョイスティックなどの、1つ以上の他の物理ユーザインタフェースデバイスを含むことを理解されたい。
そのデバイスは、一般的に、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、ビデオ会議アプリケーション、電子メールアプリケーション、インスタントメッセージアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽再生アプリケーション、及び/又はデジタルビデオ再生アプリケーションのうちの1つ以上など、さまざまなアプリケーションをサポートする。
このデバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも1つの共通の物理ユーザインタフェースデバイスを、任意選択的に使用する。タッチ感知面の1つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーションごとに、及び/若しくはそれぞれのアプリケーション内で、任意選択的に、調節並びに/又は変更される。この方式で、そのデバイスの共通の(タッチ感知面などの)物理アーキテクチャは、ユーザにとって直観的かつ透過的なユーザインタフェースを有する様々なアプリケーションを、任意選択的にサポートする。
タッチ感知ディスプレイを備えたポータブルデバイスの実施形態に注目を向ける。図1Aは、いくつかの実施形態に係る、タッチ感知ディスプレイ112を備えたポータブル多機能デバイス100を示すブロック図である。タッチ感知ディスプレイ112は、便宜上「タッチスクリーン」と呼ばれる場合があり、タッチ感知ディスプレイシステムとして既知であるか、又はそのように呼ばれる場合もある。デバイス100は、メモリ102(1つ以上のコンピュータ可読記憶媒体を任意選択的に含む)、メモリコントローラ122、1つ以上の処理ユニット(CPU)120、周辺機器インタフェース118、RF回路108、オーディオ回路110、スピーカ111、マイクロホン113、入出力(I/O)サブシステム106、他の入力又は制御デバイス116、及び外部ポート124を含む。デバイス100は、任意選択的に、1つ以上の光センサ164を含む。デバイス100は、デバイス100(例えば、デバイス100のタッチ感知ディスプレイシステム112などのタッチ感知面)上の接触の強度を検出するための、1つ以上の強度センサ165を、任意選択的に含む。デバイス100は、デバイス100上に触知出力を生成する(例えば、デバイス100のタッチ感知ディスプレイシステム112又はデバイス300のタッチパッド355などの、タッチ感知面上に触知出力を生成する)ための、1つ以上の触知出力発生器167を、任意選択的に含む。これらの構成要素は、任意選択的に、1つ以上の通信バス又は信号線103を介して通信する。
本明細書及び特許請求の範囲で使用される時、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指接触)の力又は圧力(単位面積当りの力)、あるいはタッチ感知面上の接触の力又は圧力の代替物(代用物)を指す。接触の強度は、少なくとも4つの別個の値を含む値の範囲、より典型的には、数百個の(例えば、少なくとも256個の)別個の値を含む、値の範囲を有する。接触の強度は、任意選択的に、様々な手法、及び様々なセンサ、若しくはセンサの組み合わせを使用して、判定(又は、測定)される。例えば、タッチ感知面の下、又はタッチ感知面に隣接する、1つ以上の力センサを任意選択的に使用して、そのタッチ感知面上の様々な点で力を測定する。いくつかの実装では、複数の力センサからの力測定値を組み合わせて(例えば、加重平均で)、推定される接触の力を判定する。同様に、スタイラスの感圧性先端部を任意選択的に使用して、タッチ感知面上のスタイラスの圧力を判定する。あるいは、タッチ感知面上で検出される接触区域のサイズ及び/又はその変化、接触に近接するタッチ感知面の静電容量及び/又はその変化、並びに/あるいは接触に近接するタッチ感知面の抵抗及び/又はその変化が、任意選択的に、タッチ感知面上の接触の力又は圧力の代替物として使用される。いくつかの実装では、これらの接触力又は圧力の代替測定値を直接使用して、強度しきい値が超過されているか否かを判定する(例えば、この強度しきい値は、代替測定値に対応する単位で説明される)。いくつかの実装では、これらの接触力又は圧力の代替測定値は、推定される力又は圧力に変換され、この推定される力又は圧力を使用して、強度しきい値が超過されているか否かを判定する(例えば、この強度しきい値は、圧力の単位で測定される圧力しきい値である)。
本明細書及び特許請求の範囲で使用される時、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対するデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、デバイスの別の構成要素(例えば、筐体)に対する物理的変位、又はデバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス、又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、指、手のひら、又はユーザの手の他の部分)と接触している状況では、物理的変位によって生成される触知出力は、そのデバイス、又はデバイスの構成要素の物理的特性の、知覚される変化に対応する触感覚として、ユーザによって解釈されることになる。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、任意選択的に、物理作動ボタンの「ダウンクリック」又は「アップクリック」として、ユーザによって解釈される。いくつかの場合には、ユーザは、ユーザの移動によって物理的に押圧される(例えば変位される)、タッチ感知面に関連付けられた物理作動ボタンの移動が存在しない場合であっても、「ダウンクリック」又は「アップクリック」などの触感覚を感じることになる。別の例としては、タッチ感知面の移動は、タッチ感知面の平滑度の変化が存在しない場合であっても、タッチ感知面の「粗さ」として、任意選択的に、ユーザによって解釈又は感知される。ユーザによる、そのような接触の解釈は、ユーザの個別の感覚認知に左右されるものではあるが、大多数のユーザに共通するタッチの感覚認知が、多く存在する。それゆえ、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」、「ダウンクリック」、「粗さ」)に対応するとして説明される場合、特に明記しない限り、生成される触知出力は、その説明される感覚認知を典型的な(又は平均的な)ユーザに対して生じさせる、デバイス又はその構成要素の物理的変位に対応する。
デバイス100は、ポータブル多機能デバイスの一実施例に過ぎず、デバイス100は、示されるものよりも多いか又は少ない構成要素を任意選択的に有するか、2つ以上の構成要素を任意選択的に組み合わせるか、又は構成要素の異なる構成若しくは配置を任意選択的に有することを理解されたい。図1Aに示される様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含めた、ハードウェア、ソフトウェア、あるいはハードウェア及びソフトウェアの双方の組合せとして実装される。
メモリ102は、任意選択的に高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性半導体メモリデバイスなどの、不揮発性メモリも含む。CPU 120及び周辺機器インタフェース118などの、デバイス100の他の構成要素によるメモリ102へのアクセスは、任意選択的に、メモリコントローラ122によって制御される。
周辺機器インタフェース118は、デバイスの入力及び出力周辺機器をCPU 120及びメモリ102に結合するために使用してもよい。1つ以上のプロセッサ120は、デバイス100のためのさまざまな機能を実行するため並びにデータ処理を行うために、メモリ102に記憶されたさまざまなソフトウェアプログラム及び/若しくは命令セットを走らせたり、又は実行したりする。
いくつかの実施形態では、周辺機器インタフェース118、CPU 120、及びメモリコントローラ122は、任意選択的に、チップ104などの単一チップ上に実装される。いくつかの他の実施形態では、それらは、任意選択的に、別個のチップ上に実装される。
RF(無線周波数)回路108は、電磁信号とも呼ばれるRF信号を受信したり送信したりする。RF回路108は、電気信号を電磁信号に、又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路108は、これらの機能を実行するための周知の回路機構を任意選択的に含み、それらの回路機構としては、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(SIM)カード、メモリなどが挙げられるが、これらに限定されない。RF回路108は、ワールドワイドウェブ(WWW)とも称されるインターネットなどのネットワーク、携帯電話ネットワーク、無線ローカルエリアネットワーク(LAN)、及び/又はメトロポリタンエリアネットワーク(MAN)などの、イントラネット及び/又は無線ネットワーク、並びに他のデバイスと、無線通信によって、任意選択的に通信する。無線通信は、複数の通信規格、通信プロトコル、及び通信技術のうちのいずれかを、任意選択的に使用し、それらの通信規格、通信プロトコル、及び通信技術としては、移動通信用のグローバルシステム(GSM(登録商標))、拡張データGSM環境(EDGE)、高速ダウンリンクパケット接続(HSDPA)、高速アップリンクパケット接続(HSUPA)、Evolution,Data−Only(EV−DO)、HSPA、HSPA+、2重セルHSPA(DC−HSPDA)、ロングタームエボリューション(LTE)、近距離無線通信(NFC)、広帯域符号分割多元接続(W−CDMA)、符号分割多元接続(CDMA)、時分割多元接続(TDMA)、Bluetooth(登録商標)、Wireless Fidelity(Wi−Fi)(登録商標)(例えば、IEEE 802.11a、IEEE 802.11b、IEEE 802.11g、及び/又はIEEE 802.11n)、ボイスオーバーインターネットプロトコル(VoIP)、Wi−MAX、電子メール用のプロトコル(例えば、インターネットメッセージアクセスプロトコル(IMAP)及び/又はポストオフィスプロトコル(POP))、インスタントメッセージング(例えば、拡張可能メッセージング及びプレゼンスプロトコル(XMPP)、インスタントメッセージング及びプレゼンス利用拡張向けセッション開始プロトコル(SIMPLE)、インスタントメッセージング及びプレゼンスサービス(IMPS))、及び/又はショートメッセージサービス(SMS)、あるいは本文書の出願日現在までに未だ開発されていない通信プロトコルを含めた任意の他の好適な通信プロトコルが挙げられるが、これらに限定されない。
オーディオ回路110、スピーカ111、及びマイクロホン113は、ユーザとデバイス100との間のオーディオインタフェースを提供する。オーディオ回路110は、周辺機器インタフェース118からオーディオデータを受信し、そのオーディオデータを電気信号に変換し、その電気信号をスピーカ111に送信する。スピーカ111は、その電気信号を人間の耳に聞こえる音波に変換する。オーディオ回路110はまた、マイクロホン113によって音波から変換された電気信号も受信する。オーディオ回路110は、その電気信号をオーディオデータに変換し、そのオーディオデータを、処理のために周辺機器インタフェース118に送信する。オーディオデータは、任意選択的に、周辺機器インタフェース118によって、メモリ102及び/又はRF回路108から取得され、かつ/あるいはメモリ102及び/又はRF回路108に送信される。いくつかの実施形態において、オーディオ回路110は更にヘッドセットジャック(例えば、図2の212)を備える。ヘッドセットジャックは、オーディオ回路110と、出力専用ヘッドホン又は出力(例えば、片耳又は両耳用のヘッドホン)及び入力(例えば、マイクロホン)の両方を持つヘッドセットなどの、取り外し可能なオーディオ入出力周辺機器との間のインタフェースを提供する。
入出力サブシステム106は、周辺機器インタフェース118に、タッチスクリーン112及び他の入力制御デバイス116などのデバイス100の入出力周辺機器を結合する。I/Oサブシステム106は、任意選択的に、ディスプレイコントローラ156、光センサコントローラ158、強度センサコントローラ159、触覚フィードバックコントローラ161、及び他の入力若しくは制御デバイスのための1つ以上の入力コントローラ160を含む。1つ以上の入力コントローラ160は、他の入力又は制御デバイス116から/へ電気信号を受信/送信する。他の入力制御デバイス116は、任意選択的に、物理ボタン(例えば、プッシュボタン、ロッカボタンなど)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。いくつかの代替的実施形態では、入力コントローラ160は、任意選択的に、キーボード、赤外線ポート、USBポート、及びマウスなどのポインタデバイスのうちのいずれかに結合される(又は、いずれにも結合されない)。1つ以上のボタン(例えば、図2の208)は、任意選択的に、スピーカ111及び/又はマイクロホン113の音量調節のためのアップ/ダウンボタンを含む。1つ以上のボタンは、任意選択的に、プッシュボタン(例えば、図2の206)を含む。
タッチ感知ディスプレイ112は、デバイスとユーザとの間の入力インタフェース及び出力インタフェースを提供する。ディスプレイコントローラ156は、タッチスクリーン112から/へ電気信号を受信及び/又は送信する。タッチスクリーン112は、ユーザへ視覚出力を表示する。この視覚出力は、任意選択的に、グラフィック、テキスト、アイコン、ビデオ、及びそれらの任意の組み合わせ(「グラフィック」と総称される)を含む。いくつかの実施形態では、これらの視覚出力の一部又は全ては、ユーザインタフェースオブジェクトに対応する。
タッチスクリーン112は、触覚及び/若しくは触角の接触に基づくユーザからの入力を受け付けるタッチ感知面、センサ、又はセンサのセットを有している。タッチスクリーン112及びディスプレイコントローラ156(メモリ102内の任意の関連モジュール及び/又は命令セットと共に)は、タッチスクリーン112上で接触(及び任意の動き又は接触の中断)を検出し、検出された接触をタッチスクリーン112上に表示されたユーザインタフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ、又は画像)との対話に変換する。ある例示的な実施形態では、タッチスクリーン112とユーザとの間の接触は、ユーザの指に対応する。
タッチスクリーン112は、任意選択的に、LCD(液晶ディスプレイ)技術、LPD(発光ポリマーディスプレイ)技術、又はLED(発光ダイオード)技術を使用するが、他の実施形態では、他のディスプレイ技術が使用される。タッチスクリーン112及びディスプレイコントローラ156は、現在既知の、又は今後開発される複数のタッチ感知技術のうちのいずれかを使用して、接触、及びその接触のあらゆる移動若しくは中断を、任意選択的に検出し、それらの技術としては、静電容量技術、抵抗性技術、赤外線技術、及び表面超音波技術、並びにタッチスクリーン112との1つ以上の接触を判定するための、他の近接センサアレイ又は他の要素が挙げられるが、これらに限定されない。ある例示的な実施形態では、California州CupertinoのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)などにおいて見られるような、投影された相互キャパシタンス検知技術が使用されている。
タッチスクリーン112は、任意選択的に、100dpiを超えるビデオ解像度を有する。いくつかの実施形態において、タッチスクリーンは約160dpiのビデオ解像度を有する。ユーザは、スタイラス、指などの、任意の好適な物体又は付属物を使用して、タッチスクリーン112と任意選択的に接触する。いくつかの実施形態において、ユーザインタフェースは、主として指ベースの接触及びジェスチャで機能するように設計され、タッチスクリーン上の指の接触面積が広いことにより、スタイラスベースの入力よりも精度が低いことがある。いくつかの実施形態において、デバイスは、粗い指ベースの入力を正確なポインタ/カーソル位置又はユーザの望むアクションを実行するためのコマンドへ変換する。
いくつかの実施形態では、タッチスクリーンに加えて、デバイス100は、特定の機能を起動又は停止させるためのタッチパッド(図示せず)を、任意選択的に含む。いくつかの実施形態において、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知エリアである。タッチパッドは、任意選択的に、タッチスクリーン112とは別個のタッチ感知面、又はタッチスクリーンによって形成されるタッチ感知面の拡張部である。
デバイス100は更に、さまざまな構成要素に電力を供給するための電力システム162を含む。電力システム162は、任意選択的に、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態標識(例えば、発光ダイオード(LED))、並びにポータブルデバイス内での電力の生成、管理、及び分配に関連付けられた任意の他の構成要素を含む。
デバイス100はまた、1つ以上の光センサ164も任意選択的に含む。図1Aは、入出力サブシステム106内の光センサコントローラ158に結合された光センサを示す。光センサ164は、電荷結合素子(CCD)又は相補的金属酸化物半導体(CMOS)フォトトランジスタを任意選択的に含む。光センサ164は、1つ以上のレンズを通して投影された、環境からの光を受光し、その光を画像を表すデータに変換する。撮像モジュール143(カメラモジュールとも呼ばれる)と共に、光センサ164は、任意選択的に、静止画像又はビデオを取り込む。いくつかの実施形態では、光センサは、デバイスの前面上のタッチスクリーンディスプレイ112の反対側である、デバイス100の背面上に配置されることにより、タッチスクリーンディスプレイは、静止画像及び/又はビデオ画像の取得のためのビューファインダとして使用することが可能となる。いくつかの実施形態では、別の光センサがデバイスの前面上に配置されることにより、ユーザがタッチスクリーンディスプレイ上で他のテレビ会議の参加者を見る間に、ユーザの画像が、任意選択的に、テレビ会議のために取得される。
デバイス100はまた、1つ以上の接触強度センサ165も任意選択的に含む。図1Aは、I/Oサブシステム106内の強度センサコントローラ159に結合された、接触強度センサを示す。接触強度センサ165は、任意選択的に、1つ以上のピエゾ抵抗歪みゲージ、容量性力センサ、電気式力センサ、圧電力センサ、光学式力センサ、容量性タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(又は、圧力)を測定するために使用されるセンサ)を含む。接触強度センサ165は、環境からの接触強度情報(例えば、圧力情報、又は圧力情報の代用物)を受信する。いくつかの実施形態では、少なくとも1つの接触強度センサは、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)と共に、又は近接して配置される。いくつかの実施形態では、少なくとも1つの接触強度センサは、デバイス100の前面上に配置されるタッチスクリーンディスプレイ112の反対側である、デバイス100の背面上に配置される。
デバイス100はまた、1つ以上の近接センサ166も任意選択的に含む。図1Aは、周辺機器インタフェース118と結合した近接センサ166を示している。あるいは、近接センサ166は、I/Oサブシステム106内の入力コントローラ160に結合される。いくつかの実施形態において、多機能デバイスがユーザの耳の近くに配置されている場合(例えば、ユーザが電話通話を行っている場合)、近接センサがオフになり、タッチスクリーン112が無効になる。
デバイス100はまた、1つ以上の触知出力発生器167も任意選択的に含む。図1Aは、I/Oサブシステム106内の触覚フィードバックコントローラ161に結合された、触知出力発生器を示す。触知出力発生器167は、任意選択的に、スピーカ若しくは他のオーディオ構成要素などの1つ以上の電気音響デバイス、及び/又は、モーター、ソレノイド、電気活性ポリマー、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力発生構成要素(例えば、電気信号を、デバイス上の触知出力に変換する構成要素)などの、電気機械デバイスを含む。接触強度センサ165は、触覚フィードバックモジュール133からの触知フィードバック生成命令を受信して、デバイス100のユーザによって感知することが可能な、デバイス100上の触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力発生器は、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)と共に、又は近接して配置され、任意選択的に、タッチ感知面を垂直方向に(例えば、デバイス100の面内/面外に)又は横方向に(例えば、デバイス100の表面と同じ平面内で前後に)移動させることによって、触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力発生器は、デバイス100の前面上に配置されるタッチスクリーンディスプレイ112の反対側である、デバイス100の背面上に配置される。
デバイス100はまた、1つ以上の加速度計168も任意選択的に含む。図1Aは、周辺機器インタフェース118と結合された加速度計168を示している。あるいは、加速度計168は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。いくつかの実施形態において、情報は、1つ以上の加速度計から受け取ったデータの分析に基づいて、ポートレートビュー又はランドスケープビューでタッチスクリーンディスプレイ上に表示される。デバイス100は、必要に応じて、加速度計(1つ又は複数)168に加えて、磁力計(図示せず)並びにデバイス100の位置及び向き(例えば、ポートレート又はランドスケープ)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信部(図示せず)を備える。
いくつかの実施形態において、メモリ102に記憶されたソフトウェア構成要素は、オペレーティングシステム126、通信モジュール(又は命令セット)128、接触/動きモジュール(又は命令セット)130、グラフィクモジュール(又は命令セット)132、テキスト入力モジュール(又は命令セット)134、全地球測位システム(GPS)モジュール(又は命令セット)135、及びアプリケーション(命令セット)136を含む。更に、いくつかの実施形態において、図1A〜3に示すように、メモリ102はデバイス/グローバル内部状態157を記憶する。デバイス/グローバル内部状態157は、存在する場合には、いずれのアプリケーションが現在アクティブであるかを示す、アクティブアプリケーション状態、いずれのアプリケーション、ビュー、又は他の情報が、タッチスクリーンディスプレイ112の様々な領域を占有するかを示す、ディスプレイ状態、デバイスの様々なセンサ及び入力制御デバイス116から取得した情報を含む、センサ状態、並びにデバイスの場所及び/又は姿勢に関する場所情報のうちの、1つ以上を含む。
オペレーティングシステム126(例えば、Darwin、RTXC、LINUX(登録商標)、UNIX(登録商標)、OS X(登録商標)、WINDOWS(登録商標)、又はVxWorks(登録商標)などの組み込みオペレーティングシステム)は、一般的なシステムタスク(例えば、メモリ管理、記憶デバイス制御、電力管理など)を制御及び管理するためのさまざまなソフトウェア構成要素及び/又はドライバを含み、さまざまなハードウェアとソフトウェア構成要素との間の通信を容易にする。
通信モジュール128は、1つ以上の外部ポート124を介して他のデバイスとの通信を容易にし、RF回路108及び/又は外部ポート124が受信したデータを処理するためのさまざまなソフトウェア構成要素を含む。外部ポート124(例えば、ユニバーサルシリアルバス(USB)、FIREWIREなど)は、直接的に、又はネットワーク(例えば、インターネット、無線LANなど)を介して間接的に他のデバイスに結合するように適合される。いくつかの実施形態において、外部ポートは、iPod(Apple Inc.の商標)デバイス上で使用される30ピンコネクタと同一の、又はこれに類似した及び/若しくは互換性のあるマルチピン(例えば、30ピン)コネクタである。
接触/動きモジュール130は、任意選択的に、(ディスプレイコントローラ156と共に)タッチスクリーン112との接触、及び他のタッチ感知デバイス(例えば、タッチパッド又は物理クリックホイール)との接触を検出する。接触/動きモジュール130は、接触が生じたか否かを判定すること(例えば、指を下ろすイベントを検出すること)、接触の強度(例えば、接触の力若しくは圧力、又は接触の力若しくは圧力の代替物)を判定すること、接触の移動が存在するか否かを判定し、タッチ感知面を横断する移動を追跡すること(例えば、指をドラッグする1つ以上のイベントを検出すること)、及び接触が停止したか否かを判定すること(例えば、指を上げるイベント又は接触の中断を検出すること)などの、接触の検出に関する様々な動作を実行するための、様々なソフトウェア構成要素を含む。接触/動きモジュール130は、タッチ感知面から接触データを受け取る。一連の接触データによって表される、接触の移動を判定することは、任意選択的に、接触の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向の変化)を判定することを含む。これらの動作は、任意選択的に、単一の接触(例えば、1つの指の接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。いくつかの実施形態において、接触/動きモジュール130及びディスプレイコントローラ156は、タッチパッド上の接触を検出する。
いくつかの実施形態では、接触/動きモジュール130は、ユーザによって動作が実行されたか否かを判定するための(例えば、ユーザがアイコン上で「クリック」したか否かを判定するための)、1つ以上の強度閾値のセットを使用する。いくつかの実施形態では、少なくとも強度閾値の部分集合が、ソフトウェアパラメータに従って決定される(例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって決定されるのではなく、デバイス100の物理ハードウェアを変更することなく調節することができる)。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、そのトラックパッド又はタッチスクリーンディスプレイのハードウェアを変更することなく、広範囲の既定の閾値のうちのいずれかに設定することができる。更に加えて、一部の実装では、デバイスのユーザには、(例えば、個別の強度閾値を調節することによって、かつ/又は、システムレベルのクリック「強度」パラメータを使用して、一度に複数の強度閾値を調節することによって)強度閾値のセットのうちの1つ以上を調節するための、ソフトウェア設定が提供される。
接触/動きモジュール130は、任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上での異なるジェスチャは、異なる接触パターン及び接触強度を有する。それゆえ、ジェスチャは、特定の接触パターンを検出することによって、任意選択的に検出される。例えば、フィンガタップジェスチャの検出は、フィンガダウンイベントを検出し、続いてフィンガダウンイベント(例えば、アイコンの位置)と同じ位置(又は、実質的に同じ位置)でのフィンガアップ(リフトオフ)イベントを検出することを含む。他の実施例として、タッチ感知面でのフィンガスワイプジェスチャの検出は、フィンガダウンイベントを検出し、続いて1つ以上のフィンガドラッギングイベントを検出し、その後、フィンガアップ(リフトオフ)イベントを検出することを含む。
グラフィックモジュール132は、表示されるグラフィックの視覚的効果(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚特性)を変更するための構成要素を含めた、タッチスクリーン112又は他のディスプレイ上にグラフィックをレンダリングして表示するための、様々な既知のソフトウェア構成要素を含む。本明細書で使用される時、用語「グラフィック」は、ユーザに対して表示することができる任意のオブジェクトを含み、それらのオブジェクトとしては、テキスト、ウェブページ、アイコン(ソフトキーを含むユーザインタフェースオブジェクトなど)、デジタル画像、ビデオ、アニメーションなどが挙げられるが、これらに限定されない。
いくつかの実施形態において、グラフィクモジュール132は、使用されるグラフィクを表すデータを記憶する。各グラフィックには、任意選択的に、対応するコードが割り当てられる。グラフィクモジュール132は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィクプロパティデータと共に、表示されるグラフィクを指定する1つ以上のコードを受け取り、ディスプレイコントローラ156に出力する画面画像データを生成する。
触覚フィードバックモジュール133は、デバイス100とのユーザ対話に応答して、デバイス100上の1つ以上の場所で触知出力を生成するために、触知出力発生器167によって使用される命令を生成するための、様々なソフトウェア構成要素を含む。
テキスト入力モジュール134は、任意選択的にグラフィックモジュール132の構成要素であり、様々なアプリケーション(例えば、連絡先137、電子メール140、IM 141、ブラウザ147、及びテキスト入力を必要とする任意の他のアプリケーション)でテキストを入力するための、ソフトキーボードを提供する。
GPSモジュール135は、デバイスの位置を判定し、この情報を様々なアプリケーションで使用するために提供する(例えば、ロケーションベースダイアル発呼で使用するための電話138へ、ピクチャ/ビデオのメタデータとしてカメラ143へ、並びに気象ウィジェット、地方のイエローページウィジェット、及び地図/ナビゲーションウィジェットなどのロケーションベースのサービスを提供するアプリケーションへ)。
アプリケーション136は、任意選択的に、以下のモジュール(又は、命令のセット)、又はそれらの部分集合若しくは上位集合を含む。
●連絡先モジュール137(アドレス帳又は連絡先リストと呼ばれる場合もある)、
●電話モジュール138、
●テレビ会議モジュール139、
●電子メールクライアントモジュール140、
●インスタントメッセージング(IM)モジュール141、
●トレーニングサポートモジュール142、
●静止画像及び/又はビデオ画像用のカメラモジュール143、
●画像管理モジュール144、
●ブラウザモジュール147、
●カレンダーモジュール148、
●天気ウィジェット149−1、株価ウィジェット149−2、計算機ウィジェット149−3、アラーム時計ウィジェット149−4、辞書ウィジェット149−5、及びユーザによって取得された他のウィジェット、並びにユーザ作成ウィジェット149−6のうちの1つ以上を任意選択的に含む、ウィジェットモジュール149、
●ユーザ作成ウィジェット149−6を作るためのウィジェット作成モジュール150、
●検索モジュール151、
●任意選択的にビデオ再生モジュール及び音楽再生モジュールから構成される、ビデオ及び音楽再生モジュール152、
●メモモジュール153、
●地図モジュール154、並びに/あるいは
●オンラインビデオモジュール155。
任意選択的にメモリ102内に記憶される他のアプリケーション136の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA(登録商標)対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と共に、連絡先モジュール137は、任意選択的に、(例えば、メモリ102又はメモリ370内の連絡先モジュール137のアプリケーション内部状態192内に記憶される)アドレス帳又は連絡先リストを管理するために使用され、この管理には、アドレス帳に名前を追加すること、アドレス帳から名前を削除すること、電話番号、電子メールアドレス、実際の住所、又は他の情報を名前と関連付けること、画像を名前と関連付けること、名前を分類して並び替えること、電話138、テレビ会議139、電子メール140、又はIM 141などによる通信を開始及び/又は促進するために、電話番号又は電子メールアドレスを提供することなどが含まれる。
RF回路108、オーディオ回路110、スピーカ111、マイクロホン113、タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と共に、電話モジュール138は、電話番号に対応する一連の文字を入力し、アドレス帳137内の1つ以上の電話番号にアクセスし、入力されている電話番号を修正し、対応の電話番号をダイヤルし、会話を遂行し、会話が完了した際に接続を切るか又は電話を切るために、任意選択的に使用される。上述のように、無線通信は、複数の通信規格、通信プロトコル、及び通信技術のうちのいずれかを、任意選択的に使用する。
RF回路108、オーディオ回路110、スピーカ111、マイクロホン113、タッチスクリーン112、ディスプレイコントローラ156、光センサ164、光センサコントローラ158、接触モジュール130、グラフィクモジュール132、テキスト入力モジュール134、連絡先リスト137、及び電話モジュール138と関連して、ビデオ会議モジュール139は、ユーザの指示に従って、ユーザと1人以上の他の参加者との間のビデオ会議を開始し、行い、終了するための実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィクモジュール132、及びテキスト入力モジュール134と関連して、電子メールクライアントモジュール140は、ユーザの指示に応答して、電子メールを作成し、送信し、受信し、管理するための実行可能命令を含む。画像管理モジュール144と関連して、電子メールクライアントモジュール140により、カメラモジュール143で撮影した静止画像又はビデオを作成し、電子メールを送ることが非常に簡単になる。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィクモジュール132、及びテキスト入力モジュール134と関連して、インスタントメッセージモジュール141は、インスタントメッセージに対応する文字のシーケンスを入力したり、入力済みの文字を修正したり、それぞれのインスタントメッセージを送信したり(例えば、電話ベースのインスタントメッセージのためのショートメッセージサービス(SMS)若しくはマルチメディアメッセージサービス(MMS)プロトコルを使用して、又はインターネットベースのインスタントメッセージのためのXMPP、SIMPLE、若しくはIMPSを使用して)、インスタントメッセージを受信して、受信したインスタントメッセージを表示したりするための実行可能命令を含む。いくつかの実施形態では、送信及び/又は受信されるインスタントメッセージは、MMS及び/又は拡張メッセージングサービス(EMS)でサポートされるような、グラフィック、写真、オーディオファイル、ビデオファイル、及び/又は他の添付ファイルを、任意選択的に含む。本明細書で使用される時、「インスタントメッセージング」とは、電話ベースのメッセージ(例えば、SMS又はMMSを使用して送信されるメッセージ)及びインターネットベースのメッセージ(例えば、XMPP、SIMPLE又はIMPSを使用して送信されるメッセージ)の双方を示す。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィクモジュール132、テキスト入力モジュール134、GPSモジュール135、地図モジュール154、及び音楽再生ジュール146と関連して、トレーニングサポートモジュール142は、トレーニングを作成したり(例えば、時間、距離、及び/又はカロリー消費目標に関して)、トレーニングセンサ(スポーツデバイス)と通信したり、トレーニングセンサデータを受信したり、トレーニングを監視するために用いられるセンサを較正したり、トレーニングのための音楽を選択して再生したり、トレーニングデータを表示、記憶、送信したりするための実行可能命令を含む。
タッチスクリーン112、ディスプレイコントローラ156、光センサ(1つ又は複数)164、光センサコントローラ158、接触モジュール130、グラフィクモジュール132、及び画像管理モジュール144と関連して、カメラモジュール143は、静止画像又はビデオ(ビデオストリームを含む)をキャプチャしてメモリ102にそれらを記憶したり、静止画像又はビデオの特徴を変更したり、又はメモリ102から静止画像若しくは動画を削除したりするための実行可能命令を含む。
タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィクモジュール132、テキスト入力モジュール134、及びカメラモジュール143と関連して、画像管理モジュール144は、静止画像及び/又はビデオを配置し、修正し(例えば、編集し)、また別の方法で操作し、ラベルを付け、削除し、提示し(例えば、デジタルスライドショー又はアルバム内で)、並びに記憶したりするための実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィクモジュール132、及びテキスト入力モジュール134と関連して、ブラウザモジュール147は、ウェブページ又はそれらの一部、並びにウェブページにリンクされた添付及び他のファイルを検索し、リンク付け、受信し、表示することを含むユーザの指示に従い、インターネットをブラウズするための実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と共に、カレンダーモジュール148は、カレンダー、及びカレンダーに関連付けられたデータ(例えば、カレンダー項目、to doリストなど)を、ユーザの指示に従って作成し、表示し、修正し、記憶するための、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と共に、ウィジェットモジュール149は、ユーザによって任意選択的にダウンロードされ、使用されるミニアプリケーション(例えば、天気ウィジェット149−1、株価ウィジェット149−2、計算機ウィジェット149−3、アラーム時計ウィジェット149−4、及び辞書ウィジェット149−5)、又はユーザによって作成されるミニアプリケーション(例えば、ユーザ作成ウィジェット149−6)である。いくつかの実施形態において、ウィジェットは、HTML(ハイパーテキストマークアップ言語)ファイル、CSS(カスケーディングスタイルシート)ファイル、及びJavaScript(登録商標)ファイルを含む。いくつかの実施形態では、ウィジェットは、XML(拡張可能マークアップ言語)ファイル及びJavaScript(登録商標)ファイル(例えば、Yahoo!ウィジェット)を含む。
RF回路108、タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と共に、ウィジェット作成モジュール150は、ウィジェットを作成する(例えば、ウェブページのユーザ指定箇所をウィジェットに変える)ために、ユーザによって任意選択的に使用される。
タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィクモジュール132、及びテキスト入力モジュール134と関連して、検索モジュール151は、ユーザの指示に従い、1つ以上の検索判断基準(例えば、1つ以上のユーザ指定の検索語句)と一致する、メモリ102内のテキスト、音楽、音、画像、ビデオ、及び/又は他のファイルを検索するための実行可能命令を含む。
タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィクモジュール132、オーディオ回路110、スピーカ111、RF回路108、及びブラウザモジュール147と関連して、ビデオ及び音楽再生モジュール152は、MP3又はAACファイルなどの1つ以上のファイル形式で記憶された録音済みの音楽又は他のサウンドファイルをユーザがダウンロード及び再生できるようにする実行可能命令、並びにビデオを表示、提示、又は別の方法で再生する(タッチスクリーン112上又は外部ポート124を介して接続された外部のディスプレイ上に)ための実行可能命令を含む。いくつかの実施形態では、デバイス100は、iPod(Apple Inc.の商標)などのMP3プレーヤの機能性を、任意選択的に含む。
タッチスクリーン112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と共に、メモモジュール153は、ユーザの指示に従って、メモ、To Doリストなどを作成及び管理するための、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、及びブラウザモジュール147と共に、地図モジュール154は、ユーザの指示に従って、地図、及び地図に関連付けられたデータ(例えば、運転方向、特定の場所若しくはその付近の店舗及び関心対象の他の地点についてのデータ、並びに場所に基づく他のデータ)を受信し、表示し、修正し、記憶するために、任意選択的に使用される。
タッチスクリーン112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィクモジュール132、オーディオ回路110、スピーカ111、RF回路108、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と関連して、オンラインビデオモジュール155は、ユーザがH.264などの1つ以上のファイル形式のオンラインビデオにアクセスし、ブラウズし、受信し(例えば、ストリーミング及び/又はダウンロードにより)、再生し(例えば、タッチスクリーン上で又は外部ポート124を介して接続された外部のディスプレイ上で)、特定のオンラインビデオへのリンクを含む電子メールを送信し、別の方法で管理できるようにする命令を含む。いくつかの実施形態においては、電子メールクライアントモジュール140ではなく、インスタントメッセージモジュール141が、特定のオンラインビデオへのリンクを送るために用いられる。
上記で識別されたモジュール及びアプリケーションのそれぞれは、1つまたはそれ以上の上記の機能を実行するための実行可能命令セット及び本出願に記載の方法(例えば、コンピュータにより実行される方法及び本明細書に記載の他の情報処理方法)に対応する。これらのモジュール(すなわち、命令のセット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、それゆえ、様々な実施形態では、これらのモジュールの様々な部分集合が、任意選択的に組み合わされるか、又は他の方式で再構成される。いくつかの実施形態では、メモリ102は、上記で特定されたモジュール及びデータ構造の部分集合を、任意選択的に記憶する。更には、メモリ102は、上述されていない追加的モジュール及びデータ構造を、任意選択的に記憶する。
いくつかの実施形態において、デバイス100は、デバイス上の機能の既定のセットの動作が排他的にタッチスクリーン及び/又はタッチパッドを介して実行されるデバイスである。デバイス100の動作に関する主要な入力制御デバイスとして、タッチスクリーン及び/又はタッチパッドを使用することによって、デバイス100上の物理入力制御デバイス(プッシュボタン、ダイヤルなど)の数が、任意選択的に低減される。
排他的にタッチスクリーン及び/又はタッチパッドを介して実行される、既定の機能のセットは、任意選択的に、ユーザインタフェース間のナビゲーションを含む。いくつかの実施形態では、タッチパッドは、ユーザによってタッチされると、デバイス100上に表示されている任意のユーザインタフェースから、メイン、ホーム、又はルートメニューへと、デバイス100をナビゲートする。そのような実施形態では、「メニューボタン」は、タッチパッドを使用して実装される。いくつかの他の実施形態では、メニューボタンは、タッチパッドではなく、物理プッシュボタン又は他の物理入力制御デバイスである。
図1Bは、いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。いくつかの実施形態において、メモリ102(図1A内)又は370(図3)は、イベントソータ170(例えば、オペレーティングシステム126内)及びそれぞれのアプリケーション136−1(例えば、上述のアプリケーション137〜151、155、及び380〜390のいずれか)を含む。
イベントソータ170は、イベント情報を受け取り、イベント情報を配信するアプリケーション136−1及びアプリケーション136−1のアプリケーションビュー191を決定する。イベントソータ170は、イベントモニタ171及びイベントディスパッチャモジュール174を含む。いくつかの実施形態において、アプリケーション136−1は、アプリケーションがアクティブ又は実行中の時、タッチ感知ディスプレイ112で上に表示される現在のアプリケーションビュー(1つ又は複数)を示す、アプリケーション内部状態192を含む。いくつかの実施形態では、デバイス/グローバル内部状態157は、いずれのアプリケーションが現在アクティブであるかを判定するために、イベントソータ170によって使用され、アプリケーション内部状態192は、イベント情報の配信先となるアプリケーションビュー191を決定するために、イベントソータ170によって使用される。
いくつかの実施形態において、アプリケーション内部状態192は、追加情報として、例えば、アプリケーション136−1が実行を再開する際に用いられる再開情報、アプリケーション136−1により表示されている又は表示の準備ができている情報を示すユーザインタフェース状態情報、ユーザがアプリケーション136−1の以前の状態又はビューに戻ることを可能にするための状態の待ち行列、及びユーザが以前にとったアクションのやり直し/アンドゥの待ち行列のうちの1つ以上を含む。
イベントモニタ171は、周辺機器インーフェース118よりイベント情報を受け取る。イベント情報は、サブイベント(例えば、マルチタッチジェスチャの一部としての、タッチ感知ディスプレイ112上のユーザタッチ)の情報を含む。周辺機器インタフェース118は、入出力サブシステム106又は(オーディオ回路110を介して)近接センサ166、加速度計(1つ又は複数)168、及び/若しくはマイクロホン113などのセンサから受け取る情報を送信する。周辺機器インタフェース118が入出力サブシステム106から受け取る情報は、タッチ感知ディスプレイ112又はタッチ感知面からの情報を含む。
いくつかの実施形態において、イベントモニタ171は、所定の間隔で周辺機器インタフェース118に要求を送信する。これに応じて、周辺機器インタフェース118は、イベント情報を送信する。他の実施形態において、周辺機器ンタフェース118は、重要なイベント(例えば、所定のノイズ閾値を超える、及び/又は所定時間以上の入力を受け取ること)がある場合にのみイベント情報を送信する。
いくつかの実施形態において、イベントソータ170は更に、ヒットビュー判定モジュール172及び/又はアクティブイベント認識部判定モジュール173を含む。
ヒットビュー判定モジュール172は、タッチ感知ディスプレイ112が1つ以上のビューを表示した際に、1つ以上のビュー内のどこにおいてサブイベントが発生したかを判定するためのソフトウェア手続きを提供する。ビューは、ユーザがディスプレイ上で見ることができる制御及びその他の要素で構成されている。
アプリケーションに関連付けられたユーザインタフェースの別の態様は、本明細書中では、情報が表示されタッチベースのジェスチャが発生する、アプリケーションビュー又はユーザインタフェースウィンドウと呼ばれることもあるビューのセットである。タッチが検出される、(対応のアプリケーションの)アプリケーションビューは、任意選択的に、そのアプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルのビューは、任意選択的にヒットビューと呼ばれ、適切な入力として認識されるイベントのセットは、少なくとも部分的には、タッチに基づくジェスチャを開始する最初のタッチのヒットビューに基づいて、任意選択的に判定される。
ヒットビュー判定モジュール172は、タッチベースのジェスチャのサブイベントに関連した情報を受け取る。階層として編成された複数のビューがアプリケーションにある場合は、ヒットビュー判定モジュール172は、ヒットビューを、サブイベントを処理すべき階層の中の最低のビューとして識別する。ほとんどの状況では、ヒットビューは、最初のサブイベント(すなわち、イベント又は潜在的なイベントを形成するサブイベントのシーケンスにおける最初のサブイベント)が発生する最低レベルのビューである。ヒットビューがヒットビュー判定モジュールによって識別されると、ヒットビューは、典型的には、それがヒットビューとして識別された、同じタッチ又は入力ソースに関連する全てのサブイベントを受け取る。
アクティブイベント認識部判定モジュール173は、ビュー階層内のどのビュー(1つ又は複数)がサブイベントの特定のシーケンスを受け取るべきかを判定する。いくつかの実施形態において、アクティブイベント認識部判定モジュール173は、ヒットビューのみがサブイベントの特定のシーケンスを受け取るべきであると判定する。他の実施形態において、アクティブイベント認識部判定モジュール173は、サブイベントの物理的な位置を含む全てのビューはアクティブに関わっているビューであると判定し、したがって、全てのアクティブに関わっているビューは、サブイベントの特定のシーケンスを受け取るべきであると判定する。他の実施形態において、タッチサブイベントがある特定のビューに関連付けられた領域に完全に限定されたとしても、階層の上位のビューはアクティブに関わっているビューのままであるであろう。
イベントディスパッチャモジュール174は、イベント情報をイベント認識部(例えば、イベント識別部180)に送信する。アクティブイベント識別部判定モジュール173を含む実施形態において、イベントディスパッチャモジュール174は、アクティブイベント認識部判定モジュール173により判定されたイベント認識部にイベント情報を配信する。いくつかの実施形態において、イベントディスパッチャモジュール174は、それぞれのイベントレシーバーモジュール182により取得されるイベント情報をイベント待ち行列内に記憶する。
いくつかの実施形態において、オペレーティングシステム126は、イベントソータ170を含む。あるいは、アプリケーション136−1がイベントソータ170を含む。更に他の実施形態において、イベントソータ170は、スタンドアロンモジュール、又は接触/動きモジュール130などのメモリ102に記憶された他のモジュールの一部である。
いくつかの実施形態では、アプリケーション136−1は、そのアプリケーションのユーザインタフェースの各ビュー内で発生するタッチイベントを処理するための命令をそれぞれが含む、複数のイベントハンドラ190及び1つ以上のアプリケーションビュー191を含む。アプリケーション136−1のそれぞれのアプリケーションビュー191は、1つ以上のイベント認識部180を含む。典型的に、それぞれのアプリケーョンビュー191は、複数のイベント認識部180を含む。他の実施形態において、イベント認識部180の1つ以上は、ユーザインタフェースキット(図示せず)又はアプリケーション136−1が方法及び他の性質を継承する上位レベルのオブジェクトなど、別個のモジュールの一部である。いくつかの実施形態において、それぞれのイベントハンドラ190は、データアップデータ176、オブジェクトアップデータ177、GUIアップデータ178、及び/又はイベントソータ170から受け取ったイベントデータ179のうちの1つ以上を含む。イベントハンドラ190は、アプリケーション内部状態192を更新するために、任意選択的に、データアップデータ176、オブジェクトアップデータ177、又はGUIアップデータ178を利用するか、若しくは呼び出す。あるいは、アプリケーションビュー191の1つ以上は、1つ以上のそれぞれのイベントハンドラ190を備える。また、いくつかの実施形態において、データアップデータ176、オブジェクトアップデータ177、及びGUIアップデータ178の1つ以上がそれぞれのアプリケーションビュー191内に含まれている。
各イベント認識部180は、イベントソータ170からイベント情報(例えば、イベントデータ179)を受信して、そのイベント情報からイベントを特定する。イベント認識部180は、イベントレシーバー182及びイベントコンパレーター184を含む。いくつかの実施形態では、イベント認識部180はまた、メタデータ183及び(サブイベント配信命令を任意選択的に含む)イベント配信命令188の、少なくとも部分集合も含む。
イベントレシーバー182は、イベントソータ170よりイベント情報を受け取る。イベント情報は、例えば、タッチ又はタッチの動きなどのサブイベントの情報を含む。サブイベントによっては、イベント情報は、サブイベントの位置などの追加情報を更に含む。サブイベントが、タッチの動きに関係する場合、イベント情報はまた、そのサブイベントの速度及び方向も任意選択的に含む。いくつかの実施形態において、イベントは、ある方向から別の方向へ(例えば、ポートレートの向きからランドスケープの向きへ、又はその逆)のデバイスの回転を含み、イベント情報は、デバイスの現在の向き(デバイスの姿勢とも呼ばれる)についての対応する情報を含む。
イベントコンパレーター184は、イベント情報を既定のイベント又はサブイベントの定義と比較し、その比較により、イベント又はサブイベントを判定、又はイベント若しくはサブイベントの状態を判定又は更新する。いくつかの実施形態において、イベントコンパレーター184は、イベント定義186を含む。イベント定義186は、イベントの定義(例えば、サブイベントの既定のシーケンス)、例えば、イベント1(187−1)、イベント2(187−2)、及びその他を含有する。いくつかの実施形態において、イベント187内のサブイベントは、例えば、タッチ開始、タッチ終了、タッチの動き、タッチの中止、及び複数のタッチを含む。ある実施例において、イベント1(187−1)の定義は、表示されたオブジェクト上の2回のタップである。2回のタップは、例えば、表示されたオブジェクト上の所定の段階についての第1のタッチ(タッチ開始)、所定の段階についての第1のリフトオフ(タッチ終了)、表示されたオブジェクト上の所定の段階についての第2のタッチ(タッチ開始)、及び所定の段階についての第2のリフトオフ(タッチ終了)を含む。別の実施形態において、イベント2(187−2)の定義は、表示されたオブジェクト上のドラッギングである。ドラッギングは、例えば、表示されたオブジェクト上の所定の段階についてのタッチ(又は接触)、タッチ感知ディスプレイ112にわたるタッチの動き、及びタッチのリフトオフ(タッチ終了)を含む。いくつかの実施形態において、イベントは、1つ以上の関連するイベントハンドラ190についての情報も含む。
いくつかの実施形態において、イベント定義187は、それぞれのユーザインタフェースオブジェクト用のイベントの定義を含む。いくつかの実施形態において、イベントコンパレーター184は、サブイベントに関連付けられたユーザインタフェースオブジェクトを判定するヒットテストを実行する。例えば、3つのユーザインタフェースオブジェクトがタッチ感知ディスプレイ112に表示されるアプリケーションビューにおいて、タッチ感知ディスプレイ112上でタッチが検出されると、イベントコンパレーター184は、3つのユーザインタフェースオブジェクトのうちのどれがタッチ(サブイベント)に関連付けられているかを判定するためのヒットテストを行う。表示されたそれぞれのオブジェクトが、それぞれのイベントハンドラ190に関連付けられている場合、イベントコンパレーターはヒットテストの結果を用いて、アクティブにする必要のあるイベントハンドラ190を判定する。例えば、イベントコンパレーター184は、サブイベント及びヒットテストのトリガとなるオブジェクトに関連付けられたイベントハンドラを選択する。
いくつかの実施形態では、各イベント187に関する定義はまた、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するか否かが判定されるまで、イベント情報の配信を遅延させる、遅延作用も含む。
それぞれのイベント識別部180は、一連のサブイベントがイベント定義186のイベントのいずれとも一致しないと判断した場合、それぞれのイベント識別部180は、イベント不可能、イベント失敗、又はイベント終了の状態に入り、その後は、タッチベースのジェスチャの次のサブイベントを無視する。この状況では、もしあれば、ヒットビューについてアクティブのままである他のイベント認識部は、進行中のタッチベースのジェスチャのサブイベントの追跡及び処理を続行する。
いくつかの実施形態において、それぞれのイベント認識部180は、構成可能なプロパティ、フラグ、及び/又はイベント配信システムがアクティブに関わっているイベント認識部にどのようにサブイベント配信を実行するかについて示すリストを持つメタデータ183を含む。いくつかの実施形態では、メタデータ183は、イベント認識部が互いにどのように相互作用するか、又は相互作用することが可能になるかを示す、設定可能な特性、フラグ、及び/又はリストを含む。いくつかの実施形態において、メタデータ183は、構成可能なプロパティ、フラグ、及び/又はサブイベントがビュー階層又はプログラム階層内の様々なレベルに配信されるかどうかを示すリストを含む。
いくつかの実施形態において、それぞれのイベント認識部180は、イベントの1つ以上の特定のサブイベントが認識された時に、イベントに関連付けられたイベントハンドラ190を起動する。いくつかの実施形態において、それぞれのイベント認識部180は、イベントハンドラ190に、イベントに関連付けられたイベント情報を配信する。イベントハンドラ190を起動することと、それぞれのヒットビューにサブイベントを送信(及び送信を延期する)することとは、区別される。いくつかの実施形態において、イベント識別部180は、認識されたイベントに関連付けられたフラグをスローし、フラグに関連付けられたイベントハンドラ190はフラグをキャッチし、既定の処理を実行する。
いくつかの実施形態において、イベント配信命令188は、イベントハンドラを起動せずにサブイベントに関するイベント情報を配信するサブイベント配信命令を含む。その代わりに、サブイベント配信命令は、一連のサブイベントに関連したイベントハンドラ又はアクティブに関わっているビューにイベント情報を配信する。一連のサブイベント又はアクティブに関わっているビューに関連付けられているイベントハンドラは、イベント情報を受け取り、所定の処理を実行する。
いくつかの実施形態において、データアップデータ176は、アプリケーション136−1で使用されるデータを作成及び更新する。例えば、データアップデータ176は、連絡先モジュール137で使用される電話番号を更新したり、ビデオ再生モジュール145で使用されるビデオファイルを記憶したりする。いくつかの実施形態において、オブジェクトアップデータ177は、アプリケーション136−1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクトアップデータ176は、新たなユーザインタフェースオブジェクトを作成したり、ユーザインタフェースオブジェクトの位置を更新したりする。GUIアップデータ178は、GUIを更新する。例えば、GUIアップデータ178は、表示情報を準備し、タッチ感知ディスプレイ上に表示するため、表示情報をグラフィクモジュール132に送信する。
いくつかの実施形態では、イベントハンドラ190は、データアップデータ176、オブジェクトアップデータ177、及びGUIアップデータ178を含むか、若しくはそれらに対するアクセスを有する。いくつかの実施形態において、データアップデータ176、オブジェクトアップデータ177、及びGUIアップデータ178は、それぞれのアプリケーション136−1又はアプリケーションビュー191の1つのモジュールに含まれる。他の実施形態において、それらは、2つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の論考はまた、入力デバイスを使用して多機能デバイス100を動作させるための他の形態のユーザ入力にも適用されるが、その全てがタッチスクリーン上で開始されるわけではないことが理解されよう。例えば、単一又は複数のキーボードの押圧若しくは保持に任意選択的に対応する、マウスの移動及びマウスボタンの押圧、タッチパッド上でのタップ、ドラッグ、スクロールなどの接触の移動、ペンスタイラス入力、デバイスの移動、口頭指示、検出される眼球移動、バイオメトリック入力、並びに/あるいは、これらの任意の組み合わせが、認識するべきイベントを定義する、サブイベントに対応する入力として、任意選択的に利用される。
図2は、いくつかの実施形態に係る、タッチスクリーン112を有するポータブル多機能デバイス100を示す図である。このタッチスクリーンは、ユーザインタフェース(UI)200内に、1つ以上のグラフィックを任意選択的に表示する。本実施形態、並びに以下で説明される他の実施形態では、ユーザは、例えば、1本以上の指202(図には正確な縮尺では描かれていない)又は1つ以上のスタイラス203(図には正確な縮尺では描かれていない)を使用して、グラフィク上でジェスチャを実施することによって、グラフィクのうちの1つ以上を選択することが可能となる。いくつかの実施形態において、ユーザが1つ以上のグラフィクとの接触を断った際に、1つ以上のグラフィクの選択が生じる。いくつかの実施形態では、ジェスチャは、1回以上のタップ、1回以上の(左から右、右から左、上方向、及び/又は下方向への)スワイプ、及び/又は、デバイス100と接触した(右から左、左から右、上方向、及び/又は下方向への)指のローリングを、任意選択的に含む。いくつかの実装又は状況では、グラフィックとの不測の接触は、そのグラフィックを選択するものではない。例えば、選択に対応するジェスチャがタップである場合、アプリケーションアイコンの上を掃過するスワイプジェスチャは、対応するアプリケーションを選択するものではない。
デバイス100はまた、「ホーム」又はメニューボタン204などの、1つ以上の物理ボタンも任意選択的に含む。前述のように、メニューボタン204は、デバイス100上で任意選択的に実行されるアプリケーションのセット内の任意のアプリケーション136にナビゲートするために、任意選択的に使用される。あるいは、いくつかの実施形態において、メニューボタンは、タッチスクリーン112に表示されたGUIにおけるソフトキーとして実装されている。
ある実施形態において、デバイス100は、タッチスクリーン112、メニューボタン204、デバイスへの電源をオン/オフしてデバイスをロックするためのプッシュボタン206、音量調整ボタン(1つ又は複数)208、受信者識別モジュール(SIM)カードスロット210、ヘッドセットジャック212、及びドッキング/充電用外部ポート124を含む。プッシュボタン206は、ボタンを押し下げて、既定の時間間隔にわたってボタンを押し下げられた状態で保持することによって、デバイス上の電源をオン/オフし、ボタンを押し下げて、既定の時間間隔が経過する前にボタンを解放することによって、デバイスをロックし、かつ/又は、デバイスをロック解除するか、若しくはロック解除プロセスを開始するために、任意選択的に使用される。代替的実施形態では、デバイス100はまた、マイクロホン113を介して、一部の機能の起動又は停止に関する口頭入力も受け入れる。デバイス100はまた、タッチスクリーン112上の接触の強度を検出するための、1つ以上の接触強度センサ165、及び/又は、デバイス100のユーザに対する触知出力を生成するための、1つ以上の触知出力発生器167も、任意選択的に含む。
図3は、いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を備えた例示的な多機能デバイスのブロック図である。デバイス300は、ポータブルでなくてもよい。いくつかの実施形態では、デバイス300は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディア再生デバイス、ナビゲーションデバイス、教育デバイス(子供の学習玩具など)、ゲームシステム、又は制御デバイス(例えば、家庭用又は産業用コントローラ)である。デバイス300は、典型的には、1つ以上の処理ユニット(CPU)310、1つ以上のネットワーク又は他の通信インタフェース360、メモリ370、及びこれらの構成要素を相互接続するための1つ以上の通信バス320を含む。通信バス320は、システム構成要素間の通信を相互接続及び制御する、(チップセットと呼ばれる場合もある)回路機構を任意選択的に含む。デバイス300は、典型的にはタッチスクリーンディスプレイである、ディスプレイ340を備える、入出力(I/O)インタフェース330を含む。I/Oインタフェース330はまた、キーボード及び/又はマウス(又は他のポインティングデバイス)350並びにタッチパッド355、デバイス300上に触知出力を生成するための(例えば、図1Aを参照して上述された触知出力発生器167と同様の)触知出力発生器357、センサ359(例えば、光センサ、加速度センサ、近接センサ、タッチ感知センサ、及び/又は図1Aを参照して上述された接触強度センサ165と同様の接触強度センサ)も、任意選択的に含む。メモリ370は、DRAM、SRAM、DDR RAM、又は他のランダムアクセス半導体メモリデバイスなどの、高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性半導体記憶デバイスなどの、不揮発性メモリを含む。メモリ370は、CPU 310から遠隔に配置される1つ以上の記憶デバイスを、任意選択的に含む。いくつかの実施形態において、メモリ370は、ポータブル多機能デバイス100(図1A)のメモリ102に記憶されたプログラム、モジュール、及びデータ構造、プログラム、モジュール、及びデータ構造、又はそれらのサブセットを記憶する。更には、メモリ370は、ポータブル多機能デバイス100のメモリ102内には存在しない、追加的なプログラム、モジュール、及びデータ構造を、任意選択的に記憶する。例えば、デバイス300のメモリ370は、描画モジュール380、プレゼンテーションモジュール382、ワードプロセッシングモジュール384、ウェブサイト作成モジュール386、ディスクオーサリングモジュール388、及び/又はスプレッドシートモジュール390を任意選択的に記憶するが、その一方で、ポータブル多機能デバイス100(図1A)のメモリ102は、これらのモジュールを任意選択的に記憶しない。
上記で特定された図3の要素のそれぞれは、任意選択的に、前述のメモリデバイスのうちの1つ以上に記憶される。上記で識別されたそれぞれのモジュールは、上述した機能を実行するための命令セットに対応する。上記で特定されたモジュール又はプログラム(すなわち、命令のセット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実施される必要はなく、それゆえ、様々な実施形態では、これらのモジュールの様々な部分集合は、任意選択的に組み合わされるか、又は他の方式で再構成される。いくつかの実施形態では、メモリ370は、上記で特定されたモジュール及びデータ構造の部分集合を、任意選択的に記憶する。更には、メモリ370は、上述されていない追加的なモジュール及びデータ構造を、任意選択的に記憶する。
ここで、ポータブル多機能デバイス100上に任意選択的に実装される、ユーザインタフェース(「UI」)の実施形態に注意を向ける。
図4Aは、いくつかの実施形態による、ポータブル多機能デバイス100上のアプリケーションのメニューに関する、例示的なユーザインタフェースを示す。同様のユーザインタフェースが、任意選択的に、デバイス300上に実装される。いくつかの実施形態において、ユーザインタフェース400は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
●セルラー信号及びWi−Fi信号などの無線通信に関する信号強度標識402、
●時刻404、
●Bluetooth(登録商標)標識405、
●バッテリ状態標識406、
●以下のような、頻繁に使用されるアプリケーション用のアイコンを有するトレイ408、
○不在着信又は音声メールメッセージの数の標識414を任意選択的に含む、「電話」とラベル付けされる、電話モジュール138用のアイコン416、
○未読電子メールの数の標識410を任意選択的に含む、「メール」とラベル付けされた、電子メールクライアントモジュール140用のアイコン418、
○「ブラウザ」とラベル付けされる、ブラウザモジュール147用のアイコン420、及び
○「iPod」とラベル付けされる、iPod(Apple Inc.の商標)モジュール152とも称されるビデオ及び音楽再生モジュール152用のアイコン422、並びに
●以下のような、他のアプリケーション用のアイコン、
○「テキスト」とラベル付けされる、IMモジュール141用のアイコン424、
○「カレンダー」とラベル付けされる、カレンダーモジュール148用のアイコン426、
○「写真」とラベル付けされる、画像管理モジュール144用のアイコン428、
○「カメラ」とラベル付けされる、カメラモジュール143用のアイコン430、
○「オンラインビデオ」とラベル付けされる、オンラインビデオモジュール155用のアイコン432、
○「株価」とラベル付けされる、株価ウィジェット149−2用のアイコン434、
○「マップ」とラベル付けされる、地図モジュール154用のアイコン436、
○「天気」とラベル付けされる、天気ウィジェット149−1用のアイコン438、
○「時計」とラベル付けされる、アラーム時計ウィジェット149−4用のアイコン440、
○「トレーニングサポート」とラベル付けされる、トレーニングサポートモジュール142用のアイコン442、
○「メモ」とラベル付けされる、メモモジュール153用のアイコン444、及び
○デバイス100及びその様々なアプリケーション136に関する設定へのアクセスを提供する、設定アプリケーション若しくはモジュール用のアイコン446。
図4Aに示すアイコンのラベルは、単なる例示であることに留意されたい。例えば、ビデオ及び音楽再生モジュール152用のアイコン422は、「音楽」又は「音楽プレーヤ」とラベル付けされる。他のラベルが、様々なアプリケーションアイコンのために、任意選択的に使用される。いくつかの実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。いくつかの実施形態では、特定のアプリケーションアイコンに関するラベルは、その特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
図4Bは、ディスプレイ450(例えば、タッチスクリーンディスプレイ112)とは別個のタッチ感知面451(例えば、図3のタブレット又はタッチパッド355)を備えたデバイス(例えば、図3のデバイス300)上の例示的なユーザインタフェースを示す。デバイス300はまた、タッチ感知面451上の接触の強度を検出するための、1つ以上の接触強度センサ(例えば、センサ357のうちの1つ以上)、及び/又はデバイス300のユーザに対する触知出力を生成するための、1つ以上の触知出力発生器359を含む。
以下の実施例のうちの一部は、タッチスクリーンディスプレイ112上の入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、いくつかの実施形態では、デバイスは、図4Bに示すように、ディスプレイとは別個のタッチ感知面上で入力を検出する。いくつかの実施形態において、タッチ感知面(例えば、図4Bの451)は、ディスプレイ(例えば、450)上の主軸(例えば、図4Bの453)に対応する主軸(例えば、図4Bの452)を有する。これらの実施形態によれば、デバイスは、ディスプレイ上のそれぞれの位置に対応する位置(例えば、図4Bにおいて、460は468と対応し、462は470と対応する)でのタッチ感知面451との接触(例えば、図4Bの460及び462)を検出する。このように、タッチ感知面がディスプレイとは別個のものである時、タッチ感知面(例えば、図4Bの451)上でデバイスによって検出されたユーザ入力(例えば、接触460及び462、及びそれらの動き)は、多機能デバイスのディスプレイ(例えば、図4Bの450)上のユーザインタフェースを操作するためにデバイスによって使用される。同様の方法が、本明細書で説明される他のユーザインタフェースに関して、任意選択的に使用されることを理解されたい。
更には、以下の説明は、主に指入力(例えば、指の接触、指のタップジェスチャ、指のスワイプジェスチャ)を参照して説明されるが、いくつかの実施形態では、それらの指入力のうちの1つ以上は、別の入力デバイスからの入力(例えば、マウスに基づく入力又はスタイラス入力)で置き換えられることを理解されたい。例えば、スワイプジェスチャは、(例えば、接触の代わりの)マウスクリックに続いて、(例えば、接触の移動の代わりの)スワイプの経路に沿ったカーソルの移動によって、任意選択的に置き換えられる。別の実施例としては、タップジェスチャは、(例えば、接触の検出に続いて、その接触の検出を停止する代わりの)カーソルがタップジェスチャの場所の上に配置されている間のマウスクリックによって、任意選択的に置き換えられる。同様に、複数のユーザ入力が同時に検出される場合、複数のコンピュータマウスが任意選択的に同時に使用されるか、又は、マウスと指の接触とが任意選択的に同時に使用されることを理解されたい。
本明細書で使用される時、用語「フォーカスセレクタ」とは、ユーザが対話しているユーザインタフェースの現在の部分を示す、入力要素を指す。カーソル又は他の位置マーカーを含む一部の実装では、そのカーソルが「フォーカスセレクタ」の役割を果たすため、特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の上にカーソルが存在する間に、入力(例えば、押圧入力)がタッチ感知面(例えば、図3のタッチパッド355、又は図4Bのタッチ感知面451)上で検出されると、その特定のユーザインタフェース要素が、検出された入力に従って調節される。タッチスクリーンディスプレイ上のユーザインタフェース要素との直接的な対話を可能にする、タッチスクリーンディスプレイ(例えば、図1Aのタッチ感知ディスプレイシステム112、又は図4Aのタッチスクリーン112)を含む一部の実装では、タッチスクリーン上で検出される接触が「フォーカスセレクタ」の役割を果たすため、入力(例えば、接触による押圧入力)が、タッチスクリーンディスプレイ上の特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の場所で検出されると、その特定のユーザインタフェース要素が、検出された入力に従って調節される。一部の実装では、フォーカスは、対応するカーソルの移動又はタッチスクリーンディスプレイ上の接触の移動を伴うことなく(例えば、タブキー又は矢印キーを使用して、1つのボタンから別のボタンにフォーカスを移動させることによって)、ユーザインタフェースの1つの領域からユーザインタフェースの別の領域に移動され、これらの実装では、フォーカスセレクタは、ユーザインタフェースの種々の領域間でのフォーカスの移動に従って移動する。フォーカスセレクタが採用する特定の形態とは関わりなく、フォーカスセレクタは、全般的に、ユーザが意図するユーザインタフェースとの対話を(例えば、ユーザが対話することを意図しているユーザインタフェースの要素を、デバイスに示すことによって)伝達するために、ユーザによって制御される、ユーザインタフェース要素(又は、タッチスクリーンディスプレイ上の接触)である。例えば、タッチ感知面(例えば、タッチパッド又はタッチスクリーン)上で押圧入力が検出される間の、対応のボタンの上のフォーカスセレクタ(例えば、カーソル、接触、又は選択ボックス)の場所は、その対応のボタンを(そのデバイスのディスプレイ上に示される他のユーザインタフェース要素ではなく)アクティブにすることをユーザが意図していることを示すものである。
以下で説明されるユーザインタフェースの図は、1つ以上の強度しきい値(例えば、接触検出強度しきい値IT、軽押圧強度しきい値IT、深い押圧強度しきい値IT、及び/又は1つ以上の他の強度しきい値)に対する、タッチ感知面上の接触の現在の強度を示す、様々な強度の図表を含む。この強度の図表は、典型的には、表示されるユーザインタフェースの一部ではないが、それらの図の解釈に役立てるために提供される。いくつかの実施形態では、軽い押圧強度閾値は、典型的には物理マウスのボタン又はトラックパッドのクリックに関連付けられた動作を、デバイスが実行することになる強度に相当する。いくつかの実施形態では、深い押圧強度閾値は、典型的には物理マウスのボタン又はトラックパッドのクリックに関連付けられた動作とは異なる動作を、デバイスが実行することになる強度に相当する。いくつかの実施形態では、軽い押圧強度しきい値を下回る(例えば、かつ、それを下回ると接触がもはや検出されない公称の接触検出強度しきい値ITを上回る)強度で接触が検出される場合、デバイスは、軽押圧強度しきい値又は深い押圧強度しきい値に関連付けられた動作を実行することなく、タッチ感知面上の接触の移動に従って、フォーカスセレクタを移動させることになる。全般的には、特に明記しない限り、これらの強度閾値は、異なるユーザインタフェースのセット間でも一貫している。
軽い押圧強度しきい値ITを下回る強度から、軽押圧強度しきい値ITと深い押圧強度しきい値ITとの間の強度への、接触の強度の増大は、「軽い押圧」入力と称される場合がある。深い押圧強度しきい値ITを下回る強度から、深い押圧強度しきい値ITを上回る強度への、接触の強度の増大は、「深い押圧」入力と称される場合がある。接触検出強度しきい値ITを下回る強度から、接触検出強度しきい値ITと軽押圧強度しきい値ITとの間の強度への、接触の強度の増大は、タッチ面上の接触の検出と称される場合がある。接触検出強度しきい値ITを上回る強度から、接触強度しきい値ITを下回る強度への、接触の強度の減少は、タッチ面からの接触のリフトオフの検出と称される場合がある。いくつかの実施形態では、ITはゼロである。いくつかの実施形態では、ITはゼロよりも大きい。いくつかの図では、影付きの円又は楕円が、タッチ感知面上の接触の強度を表すために使用される。いくつかの図では、影なしの円又は楕円は、対応の接触の強度を指定することなく、タッチ感知面上の対応の接触を表すために使用される。
本明細書で説明されるいくつかの実施形態では、1つ以上の動作は、対応の押圧入力を含むジェスチャの検出に応答して、又は対応の接触(又は、複数の接触)で実行される対応の押圧入力の検出に応答して実行され、それらの対応の押圧入力は、少なくとも部分的に、押圧入力強度閾値を上回る接触(又は、複数の接触)の強度の増大の検出に基づいて検出される。いくつかの実施形態では、対応の動作は、押圧入力強度閾値を上回る、対応の接触の強度の増大(例えば、対応の押圧入力の「ダウンストローク」)の検出に応答して、実行される。いくつかの実施形態では、押圧入力は、押圧入力強度閾値を上回る、対応の接触の強度の増大、及び後続の押圧入力強度閾値を下回る接触の強度の減少を含み、対応の動作は、その後続の押圧入力閾値を下回る対応の接触の強度の減少(例えば、対応の押圧入力の「アップストローク」)の検出に応答して、実行される。
いくつかの実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある偶発的入力を回避するために、強度ヒステリシスを採用し、デバイスは、押圧入力強度閾値との既定の関連性を有するヒステリシス強度閾値を、定義又は選択する(例えば、ヒステリシス強度閾値は、押圧入力強度閾値よりもX強度単位低いか、又は、ヒステリシス強度閾値は、押圧入力強度閾値の75%、90%、若しくは何らかの妥当な比率である)。それゆえ、いくつかの実施形態では、押圧入力は、押圧入力強度閾値を上回る、対応の接触の強度の増大、及び後続の、押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、対応の動作は、そのヒステリシス強度閾値を下回る、後続の対応の接触の強度の減少(例えば、対応の押圧入力の「アップストローク」)の検出に応答して、実行される。同様に、いくつかの実施形態では、押圧入力は、デバイスが、ヒステリシス強度閾値以下の強度から、押圧入力強度閾値以上の強度への、接触の強度の増大、及び任意選択的に、ヒステリシス強度以下の強度への、後続の接触の強度の減少を検出する場合にのみ、検出され、対応の動作は、その押圧入力(例えば、状況に応じて、接触の強度の増大、又は接触の強度の減少)の検出に応答して、実行される。
説明を容易にするために、押圧入力強度閾値に関連付けられた押圧入力に応答して、又はその押圧入力を含むジェスチャに応答して実行される動作の説明は、押圧入力強度閾値を上回る接触の強度の増大、ヒステリシス強度閾値を下回る強度から押圧入力強度閾値を上回る強度への接触の強度の増大、押圧入力強度閾値を下回る接触の強度の減少、及び/又は押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少のいずれかの検出に応答して、任意選択的にトリガされる。更には、押圧入力強度閾値を下回る、接触の強度の減少の検出に応答して、動作が実行されるとして説明される実施例では、その動作は、押圧入力強度閾値に対応し、かつ押圧入力強度閾値よりも低い、ヒステリシス強度閾値を下回る、接触の強度の減少の検出に応答して、任意選択的に実行される。
ユーザインタフェース及び関連処理
ユーザインタフェース上で実行される動作に関する触知フィードバックの提供
多くの電子デバイスは、ユーザインタフェースオブジェクトを含むグラフィカルユーザインタフェースを有する。通常は、インタフェースオブジェクト上で実行することのできる多くの動作が存在する。例えば、インタフェースオブジェクトは、ガイドラインに取り付けたり又はガイドラインから取り出したりすることができる。別の例としては、ユーザインタフェースオブジェクト(例えば、ファイル)のフォルダ内への移動又はフォルダから外への移動がある。ユーザがこれらのユーザインタフェースオブジェクト上で実行される動作に関するフィードバックを受け取るための効率的でかつ便利な方法の提供が、しばしば必要とされる。下記の実施形態は、実行される動作に対応してユーザのための触知フィードバックを生成することにより、既存の方法を改良する。
図5A〜5Oは、いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供するための例示的なユーザインタフェースを図示している。これらの図中のユーザインタフェースは、図6A〜6Cを参照して下記に説明するプロセスを含め、以下に説明するプロセスを例示するために使用される。
図5Aは、ユーザインタフェースオブジェクトを含むユーザインタフェースの例を図示している。図5A〜5C中のユーザインタフェース10200は、デバイス(例えば、デバイス300)のディスプレイ450上に表示されており、タッチ感知面451上の接触(例えば指による接触)に応答する。ユーザインタフェース10200はユーザインタフェースオブジェクト10202を含んでおり、いくつかの実施形態によれば、オブジェクト配置ガイド10208を含んでいる。図5Aは、更に、タッチ感知面451上の位置10204−aでの接触10204、及び接触10204に対応して表示されたフォーカスセレクタ(例えば、カーソル10206)の描画を図示している。
いくつかの実施形態では、デバイスは、別個のディスプレイ(例えば、ディスプレイ450)及び別個のタッチ感知面(例えば、タッチ感知面451)を備える電子デバイスである。いくつかの実施形態では、デバイスは、ポータブル多機能デバイス100であり、ディスプレイは、タッチ感知ディスプレイシステム112であり、タッチ感知面は、ディスプレイ上に触知出力発生器167を含む(図1A)。説明の便宜上、図5A〜5O及び図6A〜6Cを参照して説明する実施形態について、ディスプレイ450及び別個のタッチ感知面451を参照しながら説明するが、必要に応じて、タッチ感知式ディスプレイシステム112上に図5A〜5Oに示すユーザインタフェースを表示している間のタッチ感知式ディスプレイシステム112上での図5A〜5Oで説明する接触の検出に応じて、タッチ感知式ディスプレイシステム112を備えたデバイス上で類似の動作が実行される。このような実施形態において、フォーカスセレクタは、必要に応じて、カーソル10206の代わりとなる、それぞれの接触、接触に対応する代表的な点(例えば、それぞれの接触の図心若しくはそれぞれの接触に関連付けられる点)、又はタッチ感知式ディスプレイシステム112上で検出される2つ以上の接触の図心である。
図5A〜5Bは、ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドの中に取り付けるステップを含む動作を実行する例を図示している。この例では、デバイスは、接触10204、及び図5A中の位置10204−aから図5B中の位置10204−bまでの接触10204のタッチ感知面451上の動き10210を検出する。オブジェクト配置ガイド10208の取り付け距離内へのユーザインタフェースオブジェクト10206の移動に対応する動き10210の検出に応じて、デバイスがユーザインタフェースオブジェクト10202をオブジェクト配置ガイド10208の中に取り付け、タッチ感知面451上に触知出力10211を生成する。
図5B〜5Cは、ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すことにより図5B〜5Cに示す動作を反転する例を図示している。この例では、デバイスは、接触10204、及び図5B中の位置10204−bから図5C中の位置10204−cまでの接触10204のタッチ感知面451上の動き10212を検出する。ユーザインタフェースオブジェクト10206をオブジェクト配置ガイド10208の取り外し距離又はその先までの移動に対応する動き10212の検出に応じて、デバイスが、ユーザインタフェースオブジェクト10202をオブジェクト配置ガイド10208から(例えば、図5A〜5Bを参照して上記に説明した動作を反転し)取り外す。デバイスはまた、ユーザインタフェースオブジェクト10202のオブジェクト配置ガイド10208からの取り外しに対応する接触10204の動き10212に応じて、タッチ感知面451上に触知出力10213を生成する。
いくつかの実施形態において、デバイスは、図5B中の動き10210と図5C中の動き10212との間のそれぞれの時間量を定義済みの時間閾値と比較する(例えば、デバイスは、動き10210の終了と動き10212の開始との間の一時停止時間の大きさを判定し、この一時停止時間の大きさを定義済みの時間閾値と比較する)。いくつかの実施形態において、デバイスは、動き10210と動き10212との間のぞれぞれの時間量(例えば、一時停止時間)が定義済みの時間閾値よりも小さいとの判定に従って、触知出力10211及び/又は触知出力10213の生成を見合わせる。その一方、いくつかの実施形態において、デバイスは、動き10210と動き10212との間のそれぞれの時間量(例えば、一時停止時間)が定義済みの時間閾値よりも大きいとの判定に従って、上記により詳細に説明したように、触知出力10211及び触知出力10213を生成する。いくつかの実施形態において、それぞれの時間量が定義済みの時間閾値よりも小さい時、動作の実行に対応する触知出力(例えば、触知出力10211)が生成され、動作の反転に対応する触知出力(例えば、触知出力10213)は生成されない。いくつかの実施形態において、それぞれの時間量が定義済みの時間閾値よりも小さい時、動作の実行に対応する触知出力(例えば、触知出力10211)及び動作の反転に対応する触知出力(例えば、触知出力10213)はどちらも生成されない。いくつかの実施形態において、それぞれの時間量が定義済みの時間閾値よりも小さい時、動作の実行に対応する触知出力(例えば、触知出力10211)は生成されず、動作の反転に対応する触知出力(例えば、触知出力10213)が生成される。動作が実行され、迅速に(例えば、定義済みの時間閾値が経過してしまう前に)反転した時に動作の実行及び反転に対応する1つ以上の触知出力を見合わせることにより、ユーザが過失により動作を実行した後に動作を反転させた時の触知出力の発生が防止される。これらの触知出力が生成された場合、おそらくユーザを混乱させ、又は他のより重要な触知的及び視覚的なフィードバックからユーザの注意を逸らせてしまうと考えられる。このように、上述のように1つ以上の定義済みの時間閾値に基づいて触知出力の生成を選択的に抑制する(例えば、見合わせる)ことにより、より効率的かつ直感的なインタフェースが提供され、これにより、ユーザインタフェースと対話する時のユーザエクスペリエンスが改善される。
図5Dは、ユーザインタフェースオブジェクトを含むユーザインタフェースの別の例を図示している。この例では、図5D〜5F中のユーザインタフェース10200が、ユーザインタフェースオブジェクト10222、及びデータを削除の対象としてマーキングするために使用されるゴミ箱フォルダであるフォルダ10228を含んでいる。図5Dは、更に、タッチ感知面451上の位置10224−aでの接触10224、及び接触10224に対応して表示されたフォーカスセレクタ(例えば、カーソル10206)の描画を図示している。
図5D〜5Eは、動作を実行する例を図示している。この例では、動作の実行には、ユーザインタフェースオブジェクトに対応するデータを削除の対象としてマーキングするステップが含まれている。この例では、デバイスは、接触10224、及び図5D中の位置10224−aから図5E中の位置10224−bまでの接触10224のタッチ感知面451上の動き10230を検出する。動き10230の検出に応じて、デバイスが、図5Eに示すように、ユーザインタフェースオブジェクト10222をフォルダ10228の上に移動させ、デバイスが、ユーザインタフェースオブジェクト10222に対応するデータを削除の対象としてマーキングし、タッチ感知面451上に触知出力10231を生成する。必要に応じて、ユーザインタフェースオブジェクトを削除の対象としてマーキングするステップは、接触のリフトオフなどの入力の検出に応じて実行される。
図5E〜5Fは、ユーザインタフェースオブジェクトに対応するデータから削除対象のマーキングを外すことにより、図5D〜5Eに示す動作を反転する例を図示している。この例では、デバイスは、接触10224、及び図5E中の位置10224−bから図5F中の位置10224−cまでの接触10224のタッチ感知面451上の動き10232を検出する。動き10232の検出に応じて、デバイスはユーザインタフェースオブジェクト102 をフォルダのアイコン10228から遠ざかるように移動させ、ユーザインタフェースオブジェクト10202 に対応するデータから削除対象のマーキングを(例えば、図5D及び5Eを参照して上記に説明したデータのマーキング動作を反転させて)外す。デバイスはまた、データユーザインタフェースオブジェクト10222に対応するデータから削除対象のマーキング を外すことに対応する接触10224の動き10232に応じて、タッチ感知面451上に触知出力10233を生成する。接触のリフトオフなどの入力の検出に応じてユーザインタフェースオブジェクトを削除の対象としてマーキングする状況において、図5F中の接触10224は、必要に応じて、図5E中の接触10224とは異なる接触である。
図5Gは、ユーザインタフェースオブジェクトを含むユーザインタフェースの別の例を図示している。この例では、図5G〜5I中のユーザインタフェース10200は、この例ではファイルを表すユーザインタフェースオブジェクト10242、及びファイルシステム内のディレクトリを表すフォルダ10248を含んでいる。図5Gは、更に、タッチ感知面451上の位置10244−aでの接触10244、及び接触10244に対応して表示されたフォーカスセレクタ(例えば、カーソル10206)の描画を図示している。
図5G〜5Hは、動作を実行する別の例を図示している。この例では、動作はファイルをディレクトリに入れるステップを含んでいる。この例では、デバイスは、接触10244、及び図5G中の位置10244−aから図5H中の位置10244−bまでの接触10244のタッチ感知面451上の動き10250を検出する。動き10250の検出に応じて、デバイスが、ユーザインタフェースオブジェクト10242をフォルダ10248の上に移動させ、ユーザインタフェースオブジェクト10242によって表されるファイルをフォルダ10248によって表されるディレクトリの中に入れ、タッチ感知面451上に触知出力10251を生成する。必要に応じて、接触のリフトオフなどの入力の検出に応じて、ユーザインタフェースオブジェクトによって表されるファイルをフォルダの中に入れるステップが実行される。
図5H〜5Iは、ファイルをディレクトリから取り出すことにより図5G〜5Hに示す動作を反転する例を図示している。この例では、デバイスは、接触10244、及び図5H中の位置10244−bから図5I中の位置10244−cまでの接触10244のタッチ感知面451上の動き10252を検出する。動き10252の検出に応じて、デバイスは、ユーザインタフェースオブジェクト10242をフォルダのアイコン10248から遠ざかるように移動させ、ユーザインタフェースオブジェクト10242によって表されるファイルをフォルダ10248によって表されるディレクトリから(例えば、図5G〜5Hを参照して上記に説明した動作を反転して)取り出す。デバイスはまた、ファイルのディレクトリからの取り出しに対応する接触10244の動き10252に応じて、タッチ感知面451上に触知出力10253を生成する。接触のリフトオフなどの入力の検出に応じてユーザインタフェースオブジェクトによって表されるファイルをフォルダの中に入れるステップを実行する状況において、図5I中の接触10244は、必要に応じて、図5H中の接触10244とは異なる接触である。
図5Jは、ユーザインタフェースオブジェクトを含むユーザインタフェースの別の例を図示している。この例では、図5J〜5L中のユーザインタフェース10200は、アプリケーション(又はアプリケーション起動アイコン)に対応するユーザインタフェースオブジェクト10262及びアプリケーション起動領域10268を含んでいる。図5Jは、更に、タッチ感知面451上の位置10264−aでの接触10264、及び接触10264に対応して表示されたフォーカスセレクタ(例えば、カーソル10206)の描画を図示している。
図5J〜5Kは、動作を実行する例を図示している。この例では、動作は、ユーザインタフェースオブジェクトをアプリケーション起動領域の中に配置するステップを含んでいる。この例では、デバイスは、接触10264、及び図5J中の位置10264−aから図5K中の位置10264−bまでの接触10264のタッチ感知面451上の動き10270を検出する。動き10270の検出に応じて、デバイスは、ユーザインタフェースオブジェクト10262をアプリケーション起動領域10268の上に移動させ、ユーザインタフェースオブジェクト10262をアプリケーション起動領域10268の中に配置し、タッチ感知面451上に触知出力10271を生成する。必要に応じて、ユーザインタフェースオブジェクトをアプリケーション起動領域の中に配置するステップは、接触のリフトオフなどの入力の検出に応じて実行される。
図5K〜5Lは、ユーザインタフェースオブジェクトをアプリケーション起動領域から取り出すことによって図5J〜5Kに示す動作を反転する例を図示している。この例では、デバイスは、接触10264、及び図5K中の位置10264−bから図5L中の位置10264−cまでの接触10264のタッチ感知面451上の動き10272を検出する。動き10272の検出に応じて、デバイスは、ユーザインタフェースオブジェクト10262をアプリケーション起動領域10268から遠ざかるように移動させ、ユーザインタフェースオブジェクト10262をアプリケーション起動領域10268から(例えば、図5J〜5Kを参照して上記に説明した動作を反転して)取り出す。デバイスはまた、ユーザインタフェースオブジェクト10262をアプリケーション起動領域10268からの取り外しに対応する接触10264の動き10272に応じて、タッチ感知面451上に触知出力10273を生成する。接触のリフトオフなどの入力の検出に応じてユーザインタフェースオブジェクトをアプリケーション起動領域の中に配置するステップを実行する状況において、図5L中の接触10264は、必要に応じて、図5K中の接触10264とは異なる接触である。
図5M〜5Oは、触知出力を生成するための動き特性の波形の例を図示している。図5Mは、周期10280−1を有する三角波形を図示している。図5Nは周期10280−2を有する方形波形を図示しており、図5Oは周期10280−3を有するのこぎり波形を図示している。上述のように、必要に応じて、動作の実行(例えば、触知出力10211、10231、10251、若しくは10271)又は実行された動作の反転(例えば、触知出力10213、10233、10253、若しくは10273)に対応する触知出力を生成する時に、図5M〜5Oに図示したこれら動き特性のうちの1つが利用される。いくつかの実施形態において、図5A〜5Lを参照して上記に説明した異なる動作に対応する触知出力を生成するために、別の波形が使用される。いくつかの実施形態において、同一の波形を使用して、動作の実行に対応する触知出力(例えば、触知出力10211、10231、10251、又は10271)が生成される。いくつかの実施形態において、同一の波形を使用して、動作の反転に対応する触知出力(例えば、触知出力10213、10233、10253、又は10273)が生成される。いくつかの実施形態において、動作の実行に対応する触知出力(例えば、触知出力10211、10231、10251、若しくは10271)は、動作の反転に対応する触知出力(例えば、触知出力10213、10233、10253、若しくは10273)を生成するために使用される第2の波形とは異なる第1の波形を使用して生成される。
図6A〜6Cは、いくつかの実施形態に係る、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する方法10300を図示したフローチャートである。方法10300は、ディスプレイ及びタッチ感知面を備えた電子デバイス(例えば、図3のデバイス300又は図1Aのポータブル多機能デバイス100)において実行される。いくつかの実施形態において、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面がディスプレイ上にある。いくつかの実施形態において、ディスプレイはタッチ感知面から分離している。方法10300での一部の動作は、任意選択的に組み合わされ、かつ/又は、一部の動作の順序は、任意選択的に変更される。
下記に説明するように、方法10300は、ユーザインタフェース内で実行される動作に関する触知フィードバックを提供する直感的な方法を提供する。この方法は、ユーザインタフェース内で動作を実行する時にユーザにかかる認識負担を軽減することで、より効率的なヒューマンマシンインタフェースを作る。電池駆動式電子デバイスの場合、ユーザがユーザインタフェース内での動作をより速くより効率的に実行することを可能とすることで、電力が節約され、電池充電の時間間隔が延びる。
デバイスが、ユーザインタフェースオブジェクトを表示する(10302)。例えば、図5Aは、グラフィカルユーザインタフェース10200内で表示されているユーザインタフェースオブジェクト10202を示している。デバイスが、タッチ感知面上での接触(例えば、指による接触)を検出する(10304)。例えば、図5Aは、タッチ感知面451上の位置10204−aでの接触10204を示している。
デバイスが、ユーザインタフェースオブジェクト上での動作の実行に対応する、タッチ感知面を横切る接触の第1の動きを検出する(10306)。例えば、図5Bは、接触10204、及びユーザインタフェースオブジェクト10202のオブジェクト配置ガイド10208に対する取り付けに対応するタッチ感知面451上のその後の動き10210を示している。第1の動きの検出(10310)に応じて、デバイスが、動作を実行し(10312)、タッチ感知面上に第1の触知出力を生成する(10314)。例えば、図5Bは、オブジェクト配置ガイド10208に取り付くユーザインタフェースオブジェクト10202、及びタッチ感知面451上に生成される触知出力10211を示している。
デバイスが、ユーザインタフェースオブジェクト上での動作の反転に対応する、タッチ感知面を横切る接触の第2の動きを検出する(10316)。例えば、図5Cは、接触10204、及びユーザインタフェースオブジェクト10202のオブジェクト配置ガイド10208からの取り外しに対応するタッチ感知面上のその後の動き10212を示している。
いくつかの実施形態又は状況において、タッチ感知面を横切る接触の第1の動き及びタッチ感知面を横切る接触の第2の動き(10318)は、タッチ感知面からの接触のリフトオフを検出せずに実行される単一の連続したジェスチャの一部である。いくつかの実施形態において、接触の動きに一時停止がある場合でも、タッチ感知面上で接触が検出され続ける限り、第1の動き及び第2の動きは同一の連続したジェスチャの一部であるとみなされる。いくつかの実施形態において、同じ第1及び第2の同じ動きが2つの異なるジェスチャの一部として検出された(例えば、第1の動きが検出された時と第2の動きが検出された時との間に接触のリフトオフがある)場合、動作の実行及び動作の反転の両方に応じて同一の触知出力が生成される。いくつかの実施形態において、同じ第1及び第2の動きが2つの異なるジェスチャの一部として検出された(例えば、第1の動きが検出された時と第2の動きが検出された時との間に接触のリフトオフがある)場合、動作の実行及び動作の反転の両方に応じて、異なる触知出力がやはり生成される。例えば、図5A〜5Cは、ユーザインタフェースオブジェクト10202のオブジェクト配置ガイド10208への取り付けに対応する位置10204−aから位置10204−bまでの接触10204の移動(図5A〜5Bに示す)、そしてその後の、ユーザインタフェースオブジェクト10202のオブジェクト配置ガイド10208からの取り外しに対応する位置10204−bから位置10204−cまでの接触10204の移動(図5B〜5Cに示す)を示している。この例では、触知出力10211は位置10204−aから位置10204−bまでの接触10204の移動に応じて生成され、触知出力10213は位置10204−bから位置10204−cまでの接触10204の移動に応じて生成される。いくつかの実施形態において、触知出力10213(第2の触知出力と呼ぶこともある)は、それぞれのユーザインタフェースオブジェクト上での前の動作の反転に対応する動きの検出に応じて生成される。いくつかの実施形態において、触知出力10211(第1の触知出力と呼ぶこともある)は、それぞれのユーザインタフェースオブジェクト上の前の動作(例えば直前の動作)の反転ではない動作の実行に対応する動きの検出に応じて生成される。
第2の動きの検出(10320)に応じて、デバイスは動作を反転する(10322)。動作の反転は、必ずしも、その動作を実行するために着手した手順の厳密なミラーイメージの実行を必要としないことが理解されるべきである。例えば、オブジェクトをガイドに取り付けるためには、オブジェクトがガイドから取り付け距離内の位置に移動させられる一方、オブジェクトをガイドから遠ざけるように移動させるためには、接触又はオブジェクトの通る特定の経路に拘わらず、ガイドからの取り外し距離よりも長いオブジェクトの移動に対応する接触の動きが検出される。例えば、図5Cは、オブジェクト配置ガイド10208から外れるユーザインタフェースオブジェクト10202を示しており、タッチ感知面451上に図5Bに示す触知出力10211とは異なる触知出力10213が生成される。
いくつかの実施形態において、動作を実行するステップはユーザインタフェースオブジェクト(例えば、画像、テキストボックス、図形、又はその他何らかの動かすことのできるユーザインタフェースオブジェクト)をそれぞれのオブジェクト配置ガイドに取り付けるステップ(10324)を含み、動作を反転するステップはユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すステップを含む。いくつかの実施形態において、ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドに取り付けるステップは、それぞれのオブジェクト配置ガイドから定義済みの距離内へのユーザインタフェースオブジェクトのユーザによって制御される動きを検出するステップ、及びそれぞれのオブジェクト配置ガイドの定義済みの距離内へのユーザインタフェースオブジェクトのユーザによって制御される動きの検出に応じて、それぞれのユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドに隣接するように(例えば、デバイスによって制御される動きによって)自動的に動かすステップを含む。いくつかの実施形態において、一旦、ユーザインタフェースオブジェクトがそれぞれのオブジェクト配置ガイドに取り付けられてしまうと、タッチ感知面を横切る接触のその後の動きは、定義済みの事前条件が満たされるまでユーザインタフェースオブジェクトを動かさない。具体的には、いくつかの実施形態において、ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すステップは、仮にオブジェクトがそれぞれのオブジェクト配置ガイドに取り付けられていなければ、それぞれのオブジェクト配置ガイドから定義済みの距離よりも遠くまでの、ユーザインタフェースオブジェクトのユーザによって制御される移動に対応するであろう接触の動きを検出するステップ、及びこの接触の動きの検出に応じてタッチ感知面上の接触の動きに従ってそれぞれのユーザインタフェースオブジェクトをディスプレイ上のそれぞれのオブジェクト配置ガイドから離れた場所に(例えば、デバイスによって制御される動きによって)自動的に移動させるステップを含む。例えば、図5A〜5Cは、ユーザインタフェースオブジェクト10202がオブジェクト配置ガイド10208に取り付くステップ(図5A〜5B)、次にユーザインタフェースオブジェクト10202をオブジェクト配置ガイド10208から取り外すステップ(図5B〜5C)を示している。
いくつかの実施形態において、動作を実行するステップはユーザインタフェースオブジェクトに対応するデータを削除の対象としてマーキングする(例えば、ファイルに対応するアイコンをゴミ箱フォルダ又はリサイクルフォルダに入れる)ステップ(10326)を含み、動作を反転するステップはユーザインタフェースオブジェクトに対応するデータから削除の対象とするマーキングを外す(例えば、ファイルに対応するアイコンをゴミ箱フォルダ又はリサイクルフォルダから取り出す/復元する)ステップを含む。例えば、図5D〜5Fは、ユーザインタフェースオブジェクト10222がゴミ箱フォルダ10228の上に移動し、これに応じてデバイスにユーザインタフェースオブジェクト10222に対応するデータを削除の対象としてマーキングさせるステップ(図5D〜5E)、次にユーザインタフェースオブジェクト10222をゴミ箱フォルダ10228から遠ざけるように移動させ、これに応じてデバイスにユーザインタフェースオブジェクト10222に対応するデータから削除の対象とするマーキングを外させるステップ(図5E〜5F)を示している。
いくつかの実施形態において、ユーザインタフェースオブジェクトはファイルに対応し、動作を実行するステップはこのファイルをディレクトリに入れる(10328)ステップを含み、動作を反転するステップはこのファイルをこのディレクトリから取り出すステップを含む。例えば、いくつかの実施形態において、動作を実行するステップはファイルのグラフィック描画であるユーザインタフェースオブジェクトをディレクトリを表すフォルダのアイコンに対応する場所に移動させるステップを含み、動作を反転するステップは、このアイコンをフォルダ/ディレクトリのグラフィック描画から取り出すステップを含む。例えば、図5G〜5Iは、ファイルに対応するユーザインタフェースオブジェクト10242がフォルダ10248の上に移動し、これに応じてデバイスにこのファイルをフォルダ10248によって表されるディレクトリに入れさせるステップ(図5G〜5H)、次にユーザインタフェースオブジェクト10242をフォルダ10248から遠ざけるように移動させ、これに応じてデバイスにこのファイルをこのディレクトリから取り出させるステップ(図5H〜5I)を示している。
いくつかの実施形態において、ユーザインタフェースオブジェクトはアプリケーションに対応し、動作を実行するステップはユーザインタフェースオブジェクトをアプリケーション起動領域内に配置するステップ(10330)を含み、動作を反転するステップはユーザインタフェースオブジェクトをアプリケーション起動領域から取り出すステップを含む。アプリケーション起動領域の例としては、ドック又はクイック起動バーが挙げられる。例えば、図5J〜5Lは、アプリケーションに対応するユーザインタフェースオブジェクト10262がアプリケーション起動領域10268の上に移動し、これに応じてデバイスにユーザインタフェースオブジェクト10262をアプリケーション起動領域10268内に配置するステップ(図5J〜5K)、次にユーザインタフェースオブジェクト10262をアプリケーション起動領域10268から遠ざけるように移動させ、これに応じてデバイスにユーザインタフェースオブジェクト10262をアプリケーション起動領域10268から取り出させるステップ(図5K〜5L)を示している。
第2の動きの検出(10320)に応じて、デバイスは、動作の反転に加えて、第1の触知出力とは異なる第2の触知出力をタッチ感知面上に生成する(10332)。その結果、デバイスは前に実行された動作を元に戻す。いくつかの実施形態において、触知出力の大きさの違いに基づいて、第1の触知出力は第2の触知出力と異なる。いくつかの実施形態において、第1の種類の触知出力は、第1の支配的な動き成分を含むタッチ感知面の動きによって生成される。例えば、生成された動きは、一切の意図されない共振を無視した第1の触知出力の初衝撃に対応する。いくつかの実施形態において、第2の種類の触知出力は、第2の支配的な動き成分を含むタッチ感知面の動きによって生成される。例えば、生成された動きは、一切の意図されない共振を無視した第2の触知出力の初衝撃に対応する。いくつかの実施形態において、第1の支配的な動き成分及び第2の支配的な動き成分は、同じ動き特性及び異なる振幅を有する(10334)。例えば、第1の支配的な動き成分及び第2の支配的な動き成分が方形波、正弦波、のこぎり波、又は三角波などの同じ波形及びほぼ同じ周期を有する時、第1の支配的な動き成分及び第2の支配的な動き成分は同じ動き特性を有する。
いくつかの実施形態において、触知出力の動き特性の違いに基づいて、第1の触知出力は第2の触知出力と異なる。いくつかの実施形態において、第1の種類の触知出力は、第1の支配的な動き成分を含むタッチ感知面の動きによって生成される。例えば、生成された動きは、一切の意図されない共振を無視した第1の触知出力の初衝撃に対応する。いくつかの実施形態において、第2の種類の触知出力は、第2の支配的な動き成分を含むタッチ感知面の動きによって生成される。例えば、生成された動きは、一切の意図されない共振を無視した第2の触知出力の初衝撃に対応する。いくつかの実施形態において、第1の支配的な動き成分及び第2の支配的な動き成分は、異なる動き特性及び同じ振幅を有する(10336)。例えば、第1の支配的な動き成分及び第2の支配的な動き成分が方形波、正弦波、のこぎり波、又は三角波などの異なる波形及び/又はほぼ同じ周期を有する時、第1の支配的な動き成分及び第2の支配的な動き成分は異なる動き特性を有する。
図6A〜6Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の再順序付けをする様々な方法を認識するであろう。更に、本明細書内で説明する他の方法に関して本明細書内で説明する他のプロセスの詳細(例えば、段落[0058]に列挙したもの)にも、図6A〜6Cに関して上述した方法10300に類似したやり方を適用することができることに留意すべきである。例えば、方法10300を参照して上述した接触、動き、ユーザインタフェースオブジェクト、フォーカスセレクタ、及び触知出力は、必要に応じて、本明細書内で説明する他の方法を参照して本明細書内で説明する接触、動き、ユーザインタフェースオブジェクト、フォーカスセレクタ、及び触知出力の特徴(例えば、段落[0058]に列挙したもの)のうちの1つ以上を有する。簡潔にするため、これらの詳細はここでは繰り返さない。
いくつかの実施形態によれば、図7は、説明される様々な実施形態の原理に従って構成された、電子デバイス10400の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を遂行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図7で説明される機能ブロックは、説明される様々な実施形態の原理を実施するために、任意選択的に組み合わされるか又はサブブロックに分離されることが、当業者によって理解されよう。それゆえ、本明細書での説明は、本明細書で説明される機能ブロックの、あらゆる可能な組み合わせ若しくは分離、又は更なる定義を、任意選択的にサポートする。
図7に示すように、電子デバイス10400は、ユーザインタフェースオブジェクトを表示するように構成された表示ユニット10402、ユーザによる接触を検出するように構成されたタッチ感知面ユニット10404、及び表示ユニット10402及びタッチ感知面ユニット10404に結合された処理ユニット10406を含んでいる。いくつかの実施形態において、処理ユニットは、検出ユニット10408、表示可能化ユニット10410、実行ユニット10412、生成ユニット10414、及び反転ユニット10416を含む。
処理ユニット10406は、タッチ感知面ユニット上の接触を検出し、ユーザインタフェースオブジェクト上の動作の実行に対応する、タッチ感知面ユニットを横切る接触の第1の動きを(例えば、検出ユニット10408を用いて)検出し、第1の動きの検出に応じて動作を(例えば、実行ユニット10412を用いて)実行し、タッチ感知面ユニット上に第1の触知出力を(例えば、生成ユニット10414を用いて)生成するように構成されている。処理ユニット10406は、ユーザインタフェースオブジェクト上での動作の反転に対応するタッチ感知面ユニットを横切る接触の第2の動き(例えば、検出ユニット10408を用いて)を検出し、第2の動きの検出に応じて動作を(例えば、反転ユニット10416を用いて)反転し、第1の触知出力とは異なる第2の触知出力を(例えば、生成ユニット10414を用いて)タッチ感知面ユニット上に生成するように、更に構成されている。
いくつかの実施形態において、タッチ感知面ユニットを横切る接触の第1の動き及びタッチ感知面ユニットを横切る接触の第2の動きは、タッチ感知面ユニット10404からの接触のリフトオフを検出せずに実行される単一の連続したジェスチャの一部である。
いくつかの実施形態において、動作を(例えば、実行ユニット10412を用いて)実行するステップはユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドに取り付けるステップを含み、動作を(例えば、反転ユニット10416を用いて)反転するステップはユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すステップを含む。
いくつかの実施形態において、動作を(例えば、実行ユニット10412を用いて)実行するステップはユーザインタフェースオブジェクトに対応するデータを削除の対象としてマーキングするステップを含み、動作を(例えば、反転ユニット10416を用いて)反転するステップはユーザインタフェースオブジェクトに対応するデータから削除の対象とするマーキングを外すステップを含む。
いくつかの実施形態において、ユーザインタフェースオブジェクトはファイルに対応し、動作を(例えば、実行ユニット10412を用いて)実行するステップは、ディレクトリ内にファイルを入れるステップを含み、動作を(例えば、反転ユニット10416を用いて)反転するステップはファイルをディレクトリから取り出すステップを含む。
いくつかの実施形態において、ユーザインタフェースオブジェクトはアプリケーションに対応し、動作を(例えば、実行ユニット10412を用いて)実行するステップはユーザインタフェースオブジェクトをアプリケーション起動領域内に配置するステップを含み、動作を(例えば、反転ユニット10416を用いて)反転するステップはユーザインタフェースオブジェクトをアプリケーション起動領域から取り出すステップを含む。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面ユニットの動きによって(例えば、生成ユニット10414を用いて)生成され、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面ユニットの動きによって(例えば、生成ユニット10414を用いて)生成され、第1の支配的な動き成分及び第2の支配的な動き成分は同じ動き特性及び異なる振幅を有する。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面ユニットの動きによって(例えば、生成ユニット10414を用いて)生成され、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面ユニットの動きによって(例えば、生成ユニット10414を用いて)生成され、第1の支配的な動き成分及び第2の支配的な動き成分は異なる動き特性及び同じ振幅を有する。
上述の情報処理方法は、汎用プロセッサ(例えば、図1A及び図3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実施される。
図6A〜6Cを参照して上述された動作は、図1A〜1B、又は図7に示される構成要素によって、任意選択的に実施される。例えば、検出動作10304及び10306、動作を実行するステップ10312、動作を生成するステップ10314及び10332、並びに動作を反転させるステップ10322は、必要に応じて、イベントソータ170、イベント認識部180、及びイベントハンドラ190によって実行される。イベントソータ170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に渡す。アプリケーション136−1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と照会し、タッチ感知面上の第1の位置の第1の接触がユーザインタフェース上のオブジェクトの選択などの、既定のイベント又はサブイベントに対応するかどうかを判定する。それぞれの既定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連するイベントハンドラ190を起動させる。イベントハンドラ190は、アプリケーション内部状態192を更新するために、データアップデータ176若しくはオブジェクトアップデータ177を、任意選択的に利用するか又は呼び出す。いくつかの実施形態において、イベントハンドラ190は、アプリケーションにより表示されるものを更新するためのそれぞれのGUIアップデータ178にアクセスする。同様に、当業者にとって、他の処理が図1A〜1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
ユーザインタフェースオブジェクトのz順序の変更の表示
多くの電子デバイスが、レイヤー順序(例えば、z順序又はユーザインタフェースオブジェクトの前後順)を有するユーザインタフェースオブジェクトを表示する。ユーザは、通常、ディスプレイ上のこのようなオブジェクトを再配置することによりこのようなオブジェクトと対話し、重畳したオブジェクトは、それらの前後順に従ってディスプレイ上に表示される(例えば、2つのオブジェクトが重畳している箇所では、もう一方のオブジェクトの「前」にあるオブジェクトが表示される)。ディスプレイ上のオブジェクトの再配置に加え、ユーザは、ディスプレイ上のオブジェクトの前後順を変更したいと思うことがよくある。いくつかの方法において、z順序の変更は視覚的に表示される。下記に説明する実施形態は、オブジェクトが相互に重畳しており、これらのz順序が変更された時に、触知出力を提供することによりこれらの方法を改良する。したがって、オブジェクトが重畳しており、したがってz順序の変更に伴ってこれらオブジェクトの互いの覆い方が変る時、ユーザはz順序の変更の触知的並びに視覚的な表示を有する。
図8A〜8Sは、いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示すための例示的なユーザインタフェースを図示している。これらの図のユーザインタフェースは、図9A〜9Dのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。図8A〜8Sは、軽い押圧強度閾値(例えば、「IT」)及び深い押圧強度閾値(例えば、「IT」)を含む複数の強度閾値に対する、タッチ感知面上の接触の現在の強度を示す、強度の図表を含む。いくつかの実施形態では、「IT」を参照して以下で説明されるものと同様の動作は、異なる強度閾値(例えば、「IT」)を参照して実行される。
図8Aは、デバイス(例えば、デバイス300、100)のディスプレイ450(例えば、ディスプレイ340、タッチスクリーン112)上に表示されたユーザインタフェースオブジェクト10506−1及び10506−2を示している。オブジェクト10506は、必要に応じて、それぞれのアプリケーションのウィンドウ、図面内の図形若しくはその他のグラフィックス、又はプレゼンテーション内のオブジェクト(例えば、テキストブロック、画像など)である。オブジェクト10506−1及び10506−2は、z順序に従って表示されている。図8Aにおいて、z順序内でオブジェクト10506−1はオブジェクト10506−2の前(又は「上」)にあり、同様に、z順序内でオブジェクト10506−2はオブジェクト10506−1の裏(又は「後ろ」又は「下」)にある。2つのオブジェクト(例えば、図8A中のオブジェクト10506−1とオブジェクト10506−2と)が重畳しない場合、これらの相互に対するz順序はユーザに対して視覚的に表示できない。図8Dでは、z順序内でオブジェクト10506−1はオブジェクト10506−2の前にあり、オブジェクト10506−1及び10506−2が重畳しておりオブジェクト10506−1がオブジェクト10506−2の少なくとも一部を覆っているので、その相対的なz順序はユーザに対して視覚的に表示されている。
図8Aはまた、ディスプレイ450上に表示されたカーソル10504をも示している。カーソル10504は、フォーカスセレクタの一実施例である。ユーザは、必要に応じて、カーソル10504をオブジェクト10506の上に配置してそのオブジェクトに焦点を合わせる。図8Aではカーソル10504は、オブジェクト10506−1の上に位置している。
図8Bは、タッチ感知面451上で検出された接触10510を示している。タッチ感知面451上で接触10510が検出されている間に、デバイスが、オブジェクト10506−1をz順序内でオブジェクト10506−2の下位に(例えば、図8Cに示すように)移動させる要求を受け取る。デバイスは、必要に応じて、例えば、カーソル10504がオブジェクト10506−1の上に位置している間にタッチ感知面451上で実行されるジェスチャ入力(例えば、接触105010を用いて実行されるジェスチャ)、カーソル50104がオブジェクト10506−1の上に位置している間に強度閾値よりも強くなる接触10510の強度の増加、又はキーボード若しくはその他の入力装置を使用して行われる入力(例えば、キーボードショートカット、キーボード若しくはその他の入力装置を使用したメニューオプションの選択)の形態の要求を受け取る。強度(及び強度の変化)は、必要に応じて、デバイスに含まれている、タッチ感知面451との強度を検出するように構成された1つ以上のセンサによって検出される。いくつかの実施形態において、ユーザは、接触10510がITとITとの間の強度を有する間にタッチ感知面上で接触10510を動かすことによりカーソル10504に関連付けられたオブジェクトを動かすことができる。
要求(例えば、図8B中のITよりも弱い強度から図8C中のITよりも強い強度への接触の強度の増加)に応じて、z順序内でオブジェクト10506−1が10506−2の下位に移動する。図8Cに示すように、オブジェクト10506−1とオブジェクト10506−2とが重畳しない場合、z順序の変更は、必要に応じて、ユーザに対して視覚的に表示されない。オブジェクト10506−1とオブジェクト10506−2とが重畳しないとの判定に従って、オブジェクト10506−1のオブジェクト10506−2よりも下位への移動に関連付けられる触知出力は生成されない。
図8Dは、ディスプレイ450上でオブジェクト10506−1がオブジェクト10506−2の前にあるz順序で表示されたオブジェクト10506−1及び10506−2を示している。図8Dでは、オブジェクト10506−1と10506−2は、オブジェクト10506−1がオブジェクト10506−2の一部を覆って重畳している。カーソル10504は、オブジェクト10506−1の上に位置するように表示されている。例えば、図8Dでは、デバイスは、カーソル10504がオブジェクト10506−1の上にあり接触10512の強度がITとITとの間であった間に、タッチ感知面451上の接触10512の右下への動き10511を検出し、接触10512の動き10511の検出に応じて、デバイスがタッチ感知面上での接触10512の動きに従ってカーソル10504及びオブジェクト10506−1をディスプレイ450上の左下 に移動させた。
図8Dはまた、タッチ感知面451上で検出された接触10512をも示している。タッチ感知面451上で接触10512が検出されている間に、デバイスが、オブジェクト10506−1をz順序でオブジェクト10506−2よりも下位に(例えば、図8C に示すように)移動させる要求を受け取る。デバイスは、必要に応じて、例えば、カーソル10504がオブジェクト10506−1の上に位置している間にタッチ感知面451上で実行されるジェスチャ入力(例えば、接触105012を用いて実行されるジェスチャ)、カーソル10504がオブジェクト10506−1の上に位置している間に強度閾値よりも強くなる接触10512の強度の増加、又はキーボード若しくはその他の入力装置を使用して行われる入力(例えば、キーボードショートカット、キーボード若しくはその他の入力装置を使用したメニューオプションの選択)の形態の要求を受け取る。
図8Eに示すように、要求(例えば、図8D中のITよりも弱い強度から図8E中のITよりも強い強度への接触の強度の増加)に応じて、z順序内でオブジェクト10506−1が10506−2よりも下位に移動する。z順序の変更に伴って、この時点ではオブジェクト10506−2がオブジェクト10506−1の一部を覆っている。オブジェクト10506−1とオブジェクト10506−2とが重畳するとの判定に従って、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動と連動して、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力10513が生成される。ユーザは、触感覚としての接触10512を介して、触知出力を感知することができる。いくつかの実施形態において、触知出力はタッチ感知面451の動きによって生成され、この動きは支配的な動き成分を含み、この支配的な動き成分は、必要に応じて、方形波、正弦波、スクイン波(squine)、のこぎり波、又は三角波などの、ある波長を伴う波形を有する。
多くの電子デバイスが、レイヤー順序(例えば、z順序又はユーザインタフェースオブジェクトの前後順)を有するユーザインタフェースオブジェクトを表示する。ユーザは、通常、ディスプレイ上のこのようなオブジェクトを再配置することによりこのようなオブジェクトと対話し、重畳したオブジェクトは、それらの前後順に従ってディスプレイ上に表示される(例えば、2つのオブジェクトが重畳している箇所では、もう一方のオブジェクトの「前」にあるオブジェクトが表示される)。ディスプレイ上のオブジェクトの再配置に加え、ユーザは、ディスプレイ上のオブジェクトの前後順を変更したいと思うことがよくある。
したがって、2つのオブジェクト間の相対的なz順序が変更された時、この2つのオブジェクトが重畳していれば触知出力(例えば、図8E中の10513)が生成され、この2つのオブジェクトが(例えば、図8Cに示すように)重畳していなければ触知出力は生成されない。触知出力は、z順序の変更がどちらのオブジェクトが他方のオブジェクトによって覆われているかに影響することの表示をユーザに与える。
図8F〜8Iは、z順序を変更するためのコントロールを使用してz順序内でオブジェクトを移動させる例を図示している。図8Fは、ディスプレイ450上に表示されたオブジェクト10506−1及び10506−2及びカーソル10504を示している。オブジェクト10506−1及び10506−2は、z順序内でオブジェクト10506−1がオブジェクト10506−2よりも前にあるz順序で表示されている。また、ディスプレイ450上にはz順序スライダ10514も表示されている。z順序スライダ10514はスライダサム10516−1及び10516−2を含んでいる。サム10516−1はオブジェクト10506−1に対応しており、サム10516−2はオブジェクト10506−2に対応している。z順序スライダ10514上の他のサムに対するサム10516の位置は、これに対応するオブジェクトのz順序内の位置に対応している。例えば、図8Fに示したように、z順序スライダ上でサム10516がより左にあるほどこれに対応するオブジェクト10506がz順序の内でより前方にある。したがって、図示のとおりにオブジェクト10506−1及び10506−2のz順序に対応して、サム10516−1がサム10516−2の左側にある。z順序スライダ10514上でより左にあることとそれに対応するオブジェクトがz順序内でより前方にあることとの間の対応付けは設計上の選択であり、必要に応じて、z順序スライダ10514上でサム10516がより右にあるほどこれに対応するオブジェクト10506がz順序内でより前方にあることが理解されるべきである。
図8Fでは、デバイスがタッチ感知面451上での接触10518の下向きの動き10517を検出し、接触10518の動き10517の検出に応じて、デバイスがカーソル10504をサム10516−1の上に移動させる。図8Gもまた、カーソル10504がサム10516−1の上に位置している間にタッチ感知面451上で検出された接触10518を示している。接触10518を含むジェスチャは、接触10518がITとITとの間の強度を有している間のタッチ感知面451上での接触10518の動き10519を含んでいる。接触10518の動き10519を含むジェスチャの検出に応じて、図8Gに示すように、スライダ10514上でサム10516−2がサム10516−1の左側になるように、サム10516−1がサム10516−2を通り越してスライダ10514上を右方向に移動する。サム10516−1のサム10516−2の右側への動きに応じて、サム10516−1に対応するオブジェクト10506−1がz順序内でオブジェクト10506−2よりも下位に下方向に移動する。オブジェクト10506−1とオブジェクト10506−2とが重畳するとの判定に従って、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動と連動して、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力10513が生成される。ユーザは、触感覚としての接触10518を介して、触知出力を感知することができる。いくつかの実施形態において、触知出力はタッチ感知面451の動きによって生成され、この動きは支配的な動き成分を含み、この支配的な動き成分は、必要に応じて、方形波、正弦波、スクイン波(squine)、のこぎり波、又は三角波などの波形を有する。
図8Iは、z順序内でオブジェクト10506−1をオブジェクト10506−2の前にしてディスプレイ450上に表示された、オブジェクト10506−1及び10516−2、並びにスライダ10514を示している。図8Hでは、デバイスがタッチ感知面451上での接触10520の右下方向の動き10521を検出し、接触10520の動き10521の検出に応じて、デバイスがカーソル10504をサム10516−2の上に移動させる。図8H はまた、ディスプレイ450上に表示されたサム10516−2の上に位置するカーソル10504、及びカーソル10504がサム10516−2の上に位置している間にタッチ感知面451上で検出される接触10520の左への動き10523を含むジェスチャをも示している。接触10520を含むこのジェスチャは、タッチ感知面451上の接触の動き10523を含んでいる。接触10520を含むジェスチャの検出に応じて、図8Iに示すように、スライダ10514上でサム10516−2がサム10516−1の左側になるように、サム10516−2がサム10516−1を通り越してスライダ10514上を左方向に移動する。サム10516−2のサム10516−1の左側への動きに応じて、サム10516−2に対応するオブジェクト10506−2がz順序内でオブジェクト10506−1の前方となる上方に移動する。オブジェクト10506−1とオブジェクト10506−2とが重畳するとの判定に従って、オブジェクト10506−1よりも上位へのオブジェクト10506−2の移動と連動して、オブジェクト10506−1よりも上位へのオブジェクト10506−2の移動に関連付けられる触知出力10513が生成される。ユーザは、触感覚としての接触10520を介して、触知出力を感知することができる。いくつかの実施形態において、触知出力はタッチ感知面451の動きによって生成され、この動きは支配的な動き成分を含み、この支配的な動き成分は、必要に応じて、方形波、正弦波、スクイン波(squine)、のこぎり波、又は三角波などの波形を有する。
いくつかの実施形態において、z順序内でのオブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力は、オブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求を受け取る前のオブジェクト10506−2のz順序内の位置に基づいて判定される波長を有する。
図8Jは、ディスプレイ450上に表示されたユーザインタフェースオブジェクト10506−1、10506−2、及び10506−3を示している。オブジェクト10506−1、10506−2、及び10506−3は、z順序を伴って表示されている。図8Jでは、オブジェクト10506−1がオブジェクト10506−2及び10506−3よりも前にある。オブジェクト10506−3は、オブジェクト10506−2よりも前にあるが、オブジェクト10506−1よりは後ろにある。したがって、図8Jにはそのような順序付けの視覚的な表示はないものの、オブジェクト10506−3はz順序内でオブジェクト10506−1とオブジェクト10506−2との間の中間オブジェクトである。オブジェクト10506−1とオブジェクト10506−3とは重畳しておらず、オブジェクト10506−1とオブジェクト10506−2とが重畳している。カーソル10504はオブジェクト10506−1の上に表示されている。
図8Jは、タッチ感知面451上で検出された接触10524を示している。タッチ感知面451上で接触10524が検出されている間に、デバイスがオブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求(例えば、図8J中のITよりも弱い強度から図8L中のITよりも強い強度への接触10524の強度の増加)を受け取る。デバイスは、必要に応じて、例えば、カーソル10504がオブジェクト10506−1の上に位置している間にタッチ感知面451上で実行されるジェスチャ入力(例えば、接触105024を用いて実行されるジェスチャ)、カーソル10504がオブジェクト10506−1の上に位置している間に強度閾値よりも強くなる接触10524の強度の増加、又はキーボード若しくはその他の入力装置を使用して行われる入力(例えば、キーボードショートカット、キーボード若しくはその他の入力装置を使用したメニューオプションの選択)の形態の要求を受け取る。
この要求の応じて、図8K〜8Lに示すように、(例えば、接触10524が図8K中のITよりも強い強度に達した時に)オブジェクト10506−1がz順序内で中間オブジェクト10506−3よりも下位に移動し、次に(例えば、接触10524が図8M中のITよりも強い強度に達した時に)オブジェクト10506−2よりも下位に移動する。オブジェクト10506−1がオブジェクト10506−3よりも下位に移動すると、オブジェクト10506−1とオブジェクト10506−3とが重畳しないとの判定に従って、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力は生成されない。オブジェクト10506−1がオブジェクト10506−2よりも下位に移動すると、オブジェクト10506−1とオブジェクト10506−2とが重畳するとの判定に従って、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動と連動して、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力10525が生成される。ユーザは、触感覚としての接触10524を介して、触知出力を感知することができる。いくつかの実施形態において、触知出力はタッチ感知面451の動きによって生成され、この動きは支配的な動き成分を含み、この支配的な動き成分は、必要に応じて、方形波、正弦波、スクイン波(squine)、のこぎり波、又は三角波などの波形を有する。
図8Mは、ディスプレイ450上に表示されたユーザインタフェースオブジェクト10506−1、10506−2、及び10506−3を示している。オブジェクト10506−1、10506−2、及び10506−3は、z順序を伴って表示されている。図8Mでは、オブジェクト10506−1がオブジェクト10506−2及び10506−3よりも前にある。オブジェクト10506−3は、オブジェクト10506−2よりも前にあるが、オブジェクト10506−1よりは後ろにある。したがって、10506−3は、z順序内でオブジェクト10506−1とオブジェクト10506−2との間の中間オブジェクトである。オブジェクト10506−1と、オブジェクト10506−2と、オブジェクト10506−3とは重畳している。カーソル10504はオブジェクト10506−1の上に表示されている。
図8Mは、タッチ感知面451上で検出された接触10526を示している。タッチ感知面451上で接触10526が検出されている間に、デバイスがオブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求(例えば、図8M中のITよりも弱い強度から図8O中のITよりも強い強度への接触10526の強度の増加)を受け取る。状況によっては、デバイスは、例えば、カーソル10504がオブジェクト10506−1の上に位置している間にタッチ感知面451上で実行されるジェスチャ入力(例えば、接触10526を用いて実行されるジェスチャ)、カーソル10504がオブジェクト10506−1の上に位置している間に強度閾値よりも強くなる接触10526の強度の増加、又はキーボード若しくはその他の入力装置を使用して行われる入力(例えば、キーボードショートカット、キーボード若しくはその他の入力装置を使用したメニューオプションの選択)の形態の要求を受け取る。
この要求に応じて、図8N〜8Oに示すように、(例えば、接触10524が図8N中のITよりも強い強度に達した時に)オブジェクト10506−1がz順序内でオブジェクト10506−3よりも下位に移動し、次に(例えば、接触10524が図8O中のITよりも強い強度に達した時に)オブジェクト10506−2より下位に移動する。オブジェクト10506−1がオブジェクト10506−3よりも下位に移動すると、オブジェクト10506−1とオブジェクト10506−3とが重畳するとの判定に従って、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動と連動して、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力10527が生成される。ユーザは、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関連付けられるこの触知出力を、触感覚としての接触105026を介して感知することができる。オブジェクト10506−1がオブジェクト10506−2よりも下位に移動すると、オブジェクト10506−1とオブジェクト10506−2とが重畳するとの判定に従って、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動と連動して、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力10528が生成される。ユーザは、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関連付けられたこの触知出力を、触感覚としての接触105026を介して感知することができる。いくつかの実施形態において、触知出力はタッチ感知面451のそれぞれの動きによって生成され、このそれぞれの動きは支配的な動き成分を含み、この支配的な動き成分は、必要に応じて、方形波、正弦波、スクイン波(squine)、のこぎり波、又は三角波などの波形を有する。
いくつかの実施形態において、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力10527(以下「触知出力A」)と、オブジェクト10506−3よりも下位に移動させた後のオブジェクト10506−1のオブジェクト10506−2よりも下位への移動に関連付けられる触知出力10528(以下「触知出力B」)とは異なる。例えば、触知出力A 10527に関する支配的な動き成分は、必要に応じて、触知出力B 10528に関する支配的な動き成分とは異なる波長を有する。いくつかの実施形態において、触知出力A 10527の波長はオブジェクト10506−3のz順序内の位置に基づいて判定され、触知出力B 10528の波長はオブジェクト10506−2のz順序内の位置に基づいて判定される。
いくつかの実施形態において、触知出力A 10527の波長は、z順序内でオブジェクト10506−1とオブジェクト10506−3との間にあってオブジェクト10506−1が重畳するユーザインタフェースオブジェクト10506の数に基づいて判定される。いくつかの実施形態において、触知出力B 10528の波長は、z順序内でオブジェクト10506−1とオブジェクト10506−2との間にあってオブジェクト10506−1が重畳するユーザインタフェースオブジェクト10506の数に基づいて判定される。
オブジェクト10506−1は、必要に応じて、オブジェクト10506−1がオブジェクト10506−2と重畳するかに拘わらず、それぞれのz順序の順番に従って配置されたその他の複数のユーザインタフェースオブジェクトと重畳する。このように、いくつかの実施形態において、z順序は、オブジェクト10506−1、オブジェクト10506−1の後ろにあるその他の複数のユーザインタフェースオブジェクト、そしてオブジェクト10506−2を含む。したがって、オブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求に従ってオブジェクト10506−1がオブジェクト10506−2よりも下位に移動する時、オブジェクト10506−1は、オブジェクト10506−2よりも下位に移動する前にその他複数のユーザインタフェースオブジェクトの各々よりも下位の順番に移動する。オブジェクト10506−1がその下位に移動するその他複数のユーザインタフェースオブジェクトの各々について、オブジェクト10506−1のそれぞれのユーザインタフェースオブジェクトよりも下位への移動と連動して触知出力が生成される。このように、オブジェクト10506−1がその他複数のユーザインタフェースオブジェクトよりも下位に移動するにつれて、一連の触知出力が生成される。いくつかの実施形態において、この一連の触知出力は、数学的な累進に基づいて生成される。例えば、各々次の触知出力は、その前の触知出力の波長の倍の波長を有する。いくつかの他の実施形態において、この一連の触知出力は、音楽的な累進に基づいて生成される。例えば、各々次の触知出力は、ある定義済みの音階内の次の音符又は1オクターブ下の同じ音符に対応する。
図8P〜8Sは、タッチ感知式ディスプレイを備えたデバイス(例えば、タッチスクリーン112を備えたデバイス100)上で実施される、図8A〜8Oを参照しながら上記に説明したユーザインタフェースの例を図示している。図8P〜8Qは、タッチ感知式ディスプレイ112上に表示されたオブジェクト10532−1及び10532−2を示している。重畳していないオブジェクト10532−1及び10532−2は、z順序内でオブジェクト10532−1がオブジェクト10532−2よりも前にあるz順序で表示されている。
図8Pは、タッチ感知式ディスプレイ112上のオブジェクト10532−1の上の位置で検出された接触10534を示している。タッチ感知式ディスプレイ112上で接触10534が検出されている間に、デバイスが、z順序内でオブジェクト10532−1をオブジェクト10532−2よりも下位に移動させる要求を受け取る。デバイスは、必要に応じて、例えば、タッチ感知式ディスプレイ112上で実行されるジェスチャ入力(例えば、オブジェクト10532−1の上の接触10534若しくはタッチ感知式ディスプレイ112上の別の接触を用いて実行されるジェスチャ)、又は強度閾値よりも強くなるオブジェクト10532−1の上の接触10534の強度の増加(例えば、図8P中のITよりも弱い強度から図8Q中のITよりも強い強度への接触10534の強度の増加)の形態の要求を受け取る。
この要求に応じて、図8Qに示すように、z順序内でオブジェクト10532−1がオブジェクト1532−2よりも下位に移動する。オブジェクト10532−1とオブジェクト10532−2とが重畳しないとの判定に従って、オブジェクト10532−2よりも下位へのオブジェクト10532−1の移動に関連付けられる触知出力は生成されない。
図8Rは、タッチ感知式ディスプレイ112上に表示された重畳しているオブジェクト10532−1及び10532−2を示している。オブジェクト10532−1及び10532−2は、z順序内でオブジェクト10532−1がオブジェクト10532−2よりも前にあるz順序で表示されている。図8Rはまた、タッチ感知式ディスプレイ112上のオブジェクト10532−1の上の位置で検出された接触10536を示している。タッチ感知式ディスプレイ112上で接触10536が検出されている間に、デバイスが、z順序内でオブジェクト10532−1をオブジェクト10532−2よりも下位に移動させる要求を受け取る。デバイスは、必要に応じて、例えば、タッチ感知式ディスプレイ112上で実行されるジェスチャ入力(例えば、オブジェクト10532−1の上の接触10536若しくはタッチ感知式ディスプレイ112上の別の接触を用いて実行されるジェスチャ)、又は強度閾値よりも強くなるオブジェクト10532−1の上の接触10536の強度の増加(例えば、図8R中のITよりも弱い強度から図8S中のITよりも強い強度への接触10536の強度の増加)の形態の要求を受け取る。
この要求に応じて、図8Sに示すように、z順序内でオブジェクト10532−1がオブジェクト1532−2よりも下位に移動する。オブジェクト10532−1とオブジェクト10532−2とが重畳するとの判定に従って、オブジェクト10532−2よりも下位へのオブジェクト10532−1の移動と連動して、オブジェクト10532−2よりも下位へのオブジェクト10532−1の移動に関連付けられる触知出力10537が生成される。ユーザは、触感覚としての接触10536を介して、触知出力を感知することができる。いくつかの実施形態において、触知出力はタッチ感知式ディスプレイ112の動きによって生成され、この動きは支配的な動き成分を含み、この支配的な動き成分は、必要に応じて、方形波、正弦波、スクイン波(squine)、のこぎり波、又は三角波などの波形を有する。いくつかの実施形態において、z順序内でのオブジェクト10532−2よりも下位へのオブジェクト10532−1の移動に関連付けられる触知出力は、オブジェクト10532−1をz順序内でオブジェクト10532−2よりも下位に移動させる要求を受け取る前のオブジェクト10532−2のz順序内の位置に基づいて判定される波長を有する。
図9A〜9Dは、いくつかの実施形態に係る、ユーザインタフェースオブジェクトのz順序の変更を示す方法10600を図示したフローチャートである。方法10600は、ディスプレイ及びタッチ感知面を備えた電子デバイス(例えば、図3中のデバイス300又は図1A中のポータブル多機能デバイス100)において実行される。いくつかの実施形態において、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面がディスプレイ上にある。いくつかの実施形態において、ディスプレイはタッチ感知面から分離している。方法10600におけるいくつかの動作は必要に応じて組み合わされ、及び/又はいくつかの動作の順序は必要に応じて変更される。
下記に説明するように、方法10600は、ユーザインタフェースオブジェクトのz順序の変更を示す直感的な方法を提供する。この方法は、ユーザインタフェースオブジェクトのz順序の変更を示す際にユーザにかかる認知負担を軽減することでより効率的なヒューマンマシンインタフェースを作る。電池駆動式電子デバイスの場合、ユーザがユーザインタフェースオブジェクトのz順序の変更をより速くより効率的に知覚することを可能とすることにより、電力が節約され電池の充電の時間間隔が延びる。
デバイスはディスプレイ上に複数のユーザインタフェースオブジェクトを表示する(10602)が、これら複数のユーザインタフェースオブジェクトはz順序を有し、かつ第1のユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを含み、第1のユーザインタフェースオブジェクトはz順序内で第2のユーザインタフェースオブジェクトよりも上位にある。オブジェクト10506−1及び10506−2又はオブジェクト10532−1及び10532−2のような複数のユーザインタフェースオブジェクトは、必要に応じて、それぞれ図8A、8D、又は8Pに示すようにz順序を伴って表示される。図8A及び8Dでは、オブジェクト10506−1は、z順序内でオブジェクト10506−2よりも上位にある。図8Pでは、オブジェクト10532−1は、z順序内でオブジェクト10532−2よりも上位にある。
デバイスは、タッチ感知面上での接触(例えば、指による接触)を検出している間に、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取る(10604)。例えば、タッチ感知面(例えば、タッチ感知面451、タッチ感知式ディスプレイ112)上で接触(例えば、図8A中の接触10510、図8D中の接触10512、図8F中の接触10518、図8H中の接触10520、図8J中の接触10524、図8M中の接触10526、図8Q中の接触10534、図8R中の接触10536)が検出されている間に、オブジェクト10506−1をオブジェクト10506−2よりも下位に移動させる要求が受け取られる。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップは、フォーカスセレクタが第1のユーザインタフェースオブジェクトの上にある間にそれぞれの強度閾値(例えば、深い押圧強度IT)を超える接触の強度の増加を検出するステップを含む(10606)。このように、ユーザは、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に直感的に押し「下げる」ことができる。例えば、接触10501(又は接触10512若しくは10524若しくは10526)の強度は、必要に応じて、接触カーソル10504がオブジェクト10506−1の上に位置している間にITよりも弱い強度からITよりも強い強度に増加する。タッチ感知面がタッチ感知式ディスプレイ(例えば、タッチ感知式ディスプレイ112)である実施形態では、この要求を受け取るステップは、接触が第1のユーザオブジェクト (例えば、オブジェクト10532−1)の上にある間の接触の強度の増加(例えば、深い押圧の強度閾値ITよりも強くなる接触10532又は10536の強度の増加)を検出するステップを含む。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップは、第1のユーザインタフェースオブジェクトのz順序を変更するためのコントロール(例えば、第1のユーザインタフェースオブジェクトのz順序を判定する、第1のユーザインタフェースオブジェクトとは別個の/異なるスライダ又はその他のコントロール)を表示している間に第1のユーザインタフェースオブジェクトをz順序内で下位の方向に移動させるステップに対応するコントロール上の入力を検出するステップを含む(10608)。z順序を変更するためのコントロールは、必要に応じて、スライダ10514(図8F)である。z順序スライダ10514が表示されている間に、オブジェクト10506−1を下位の方向に移動させるステップに対応する入力(例えば、カーソル10504がスライダサム10516−1の上にある間のタッチ感知面451上での接触10518の動き10519を含むジェスチャ)が検出される。接触10518の動き10519を含むジェスチャの検出に応じて、デバイスが、オブジェクト10506−1に対応するサム10516−1をスライダ10514上を移動させ、この移動がオブジェクト10506−1をz順序内で下位の方向に移動させるステップに対応する。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップは、第2のユーザインタフェースオブジェクトのz順序を変更するためのコントロール(例えば、スライダ、又は第1のユーザインタフェースオブジェクトのz順序を判定する、第2のユーザインタフェースオブジェクトとは別個の/異なるその他のコントロール)を表示している間に第2のユーザインタフェースオブジェクトをz順序内で上位の方向に移動させるステップに対応するコントロール上の入力を検出するステップを含む(10610)。z順序を変更するためのコントロールは、必要に応じて、スライダ10514(図8H)である。z順序スライダ10514が表示されている間に、オブジェクト10506−2を上位の方向に移動させるステップに対応する入力(例えば、カーソル10504がスライダサム10516−2の上にある間のタッチ感知面451上での接触10520の動き10523を含むジェスチャ)が検出される。接触10520の動き10523を含むジェスチャの検出に応じて、デバイスが、オブジェクト10506−2に対応するサム10516−2をスライダ10514上を移動させ、この移動がオブジェクト10506−2をz順序内で上位の方向に移動させるステップに対応する。
この要求に応じて(10612)、デバイスが、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる(10614)。この要求に応じて、図8C(又は8E若しくは8G若しくは8I若しくは8L若しくは8O若しくは8Q若しくは8S)に示すように、オブジェクト10506−1(又は10532−1)がz順序内でオブジェクト10506−2(又は1053202)よりも下位に移動する。
第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトの少なくとも一部と重畳するとの判定に従って、デバイスは、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップと連動してタッチ感知面上で第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力(例えば、図8E、8G、若しくは8I中の10513、図8O中の10528、図8L中の10525、又は図8S中の10537)を生成する(10616)。図8D〜8O又は図8R〜8Sに示すようにオブジェクト10506−1及び10506−2(又はオブジェクト10532−1及び10532−2)が重畳している場合、オブジェクト10506−1(又はオブジェクト10532−1)がオブジェクト10506−2(又はオブジェクト10532−2)よりも下位に移動した時にオブジェクト10506−1(又はオブジェクト10532−1)のオブジェクト10506−2(又はオブジェクト10532−2)よりも下位への移動に関連付けられる触知出力が生成される。いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力は、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取る前の第2のユーザインタフェースオブジェクトのz順序内の位置に基づいて判定される波長を有する(例えば、第1のユーザインタフェースオブジェクトがz順序内でより下位に移動するほど触知出力のピッチが低くなる)(10618)。例えば、オブジェクト10506−1をオブジェクト10506−2よりも下位に移動させるステップに関連付けられる触知出力は、オブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求を受け取る前のオブジェクト10506−2のz順序内の位置に基づく波長を有する。
第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトと重畳しないとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力を生成するステップを見合わせる (10620)。図8A〜8C(又は図8P〜8Q)に示すようにオブジェクト10506−1と10506−2と(又はオブジェクト10532−1と10532−2と)が重畳していない場合、オブジェクト10506−1(又はオブジェクト10532−1)がオブジェクト10506−2(又はオブジェクト10532−2)よりも下位に移動した時に、オブジェクト10506−2(又はオブジェクト10532−2)よりも下位へのオブジェクト10506−1(又はオブジェクト10532−1)の移動に関連付けられる触知出力は生成されない。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトの少なくとも一部が第2のユーザインタフェースオブジェクトの少なくとも一部を覆う時、第1のユーザインタフェースオブジェクトは第2のユーザインタフェースオブジェクトの少なくとも一部と重畳する(10622)。いくつかの実施形態において、第1のユーザインタフェースオブジェクトは第2のユーザインタフェースオブジェクトと部分的に重畳する。いくつかの実施形態において、第1のユーザインタフェースオブジェクトは、第2のユーザインタフェースオブジェクトと完全に重畳する(例えば、第1のユーザインタフェースオブジェクトが、第2のユーザインタフェースオブジェクトの全体を覆う)。例えば、図8Aではオブジェクト10506−1と10506−2とは重畳しておらず、図8Dではオブジェクト10506−1と10506−2とは重畳している。
いくつかの実施形態において、複数のユーザインタフェースオブジェクトは中間ユーザインタフェースオブジェクトを含み(10624)、この中間ユーザインタフェースオブジェクトは、z順序内で第1のユーザインタフェースオブジェクトと第2のユーザインタフェースオブジェクトとの間の位置を有する。例えば、図8J及び8Mに示すように、必要に応じて、z順序内でオブジェクト10506−1とオブジェクト10506−2との間に中間オブジェクト10506−3が存在する。いくつかの実施形態において、中間ユーザインタフェースオブジェクトが存在する場合、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求に応じて(10612)、デバイスは、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる前に第1のユーザインタフェースオブジェクトをz順序内で中間ユーザインタフェースオブジェクトよりも下位に移動させる(10630)。第1のユーザインタフェースオブジェクトが中間ユーザインタフェースオブジェクトの少なくとも一部と重畳するとの判定に従って、デバイスは、第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップと連動して第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力を、タッチ感知面上に生成する(10632)。第1のユーザインタフェースオブジェクトが中間ユーザインタフェースオブジェクトと重畳しないとの判定に従って、デバイスは、第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力を生成するステップを見合わせる。オブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求に応じて、図8J〜8Oに示すように、オブジェクト10506−1が、z順序内でオブジェクト10506−2よりも下位に移動する過程でオブジェクト10506−3よりも下位に移動する。図8J〜8Kに示すように、オブジェクト10506−1とオブジェクト10506−3とが重畳しない場合、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力は生成されない。図8M〜8Nに示すように、オブジェクト10506−1とオブジェクト10506−3とが重畳する場合、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関連付けられる触知出力が生成される。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトは中間ユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトと重畳し(10635)、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求に応じて(10612)、デバイスは、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる前の第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる第1の触知出力をタッチ感知面上に生成し(10636)、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる、第1の触知出力とは異なる第2の触知出力をタッチ感知面上に生成する(10638)。例えば、図8Mに示すように、オブジェクト10506−1はオブジェクト10506−3及びオブジェクト10506−2と重畳する。オブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求に応じて、オブジェクト10506−1が、z順序内でオブジェクト10506−3よりも下位に移動し、次にオブジェクト10506−2よりも下位に移動する。オブジェクト10506−1がオブジェクト10506−3及び10506−2と重畳すると、オブジェクト10506−3よりも下位へのオブジェクト10506−1の移動に関する触知出力A 10527が生成され、オブジェクト10506−2よりも下位へのオブジェクト10506−1の移動に関する触知出力B 10528が生成される。触知出力A 10527と触知出力B 10528とは、必要に応じて異なる。例えば、触知出力A 10527と触知出力B 10528とは、必要に応じて、異なる波長又は振幅を有する。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分(例えば、第1の触知出力の初衝撃に対応し、一切の意図されない共振を無視した動き)を含むタッチ感知面の動きによって生成され(10640)、第2の触知出力は第2の支配的な動き成分(例えば、第2の触知出力の初衝撃に対応し、一切の意図されない共振を無視した動き)を含むタッチ感知面の動きによって生成され、第1の支配的な動き成分と第2の支配的な動き成分とは(例えば、方形波、正弦波、方形波と正弦波の組み合わせ、のこぎり波、若しくは三角波などの同じ波形のように同じ動き特性を維持しながらも、及び/又は同じ振幅を維持しながらも)異なる波長を有する。触知出力A 10527及び触知出力B 10528は、異なる波長を有するそれぞれの支配的な動き成分を有する。したがって、オブジェクト10506−3よりも下位への移動に関する触知出力A 10527とオブジェクト10506−2よりも下位への移動に関する触知出力B 10528とを、ユーザは異って感じることができる。
いくつかの実施形態において、第1の触知出力の波長は中間ユーザインタフェースオブジェクトのz順序内の位置に基づいて判定され(10642)、第2の触知出力の波長は第2のユーザインタフェースオブジェクトのz順序内の位置に基づいて判定される(例えば、第1のユーザインタフェースオブジェクトがそれぞれのユーザインタフェースオブジェクトを通り越して移動した時に生成される触知出力は、それぞれのユーザインタフェースオブジェクトのz順序内の絶対的な位置に基づいて判定され、これにより、第1のユーザインタフェースオブジェクトがz順序内でどれだけ下位まで押し下げられたかに関するフィードバックがユーザに提供される)。例えば、図8M〜8Oでは、触知出力A 10527の波長は、必要に応じて、オブジェクト10506−3のz順序内の絶対的な位置に基づいて判定され、触知出力B 10528の波長は、必要に応じて、オブジェクト10506−2のz順序内の絶対的な位置に基づいて判定される。
いくつかの実施形態において、第1の触知出力の波長は、第1のユーザインタフェースオブジェクトが重畳する、z順序内で第1のユーザインタフェースオブジェクトと中間ユーザインタフェースオブジェクトとの間にあるユーザインタフェースオブジェクトの数に基づいて判定される(10644)。例えば、図8M〜8Oでは、触知出力A 10527の波長は、必要に応じて、オブジェクト10506−1と重畳し、z順序内でオブジェクト10506−1とオブジェクト10506−3との間にあるユーザインタフェースオブジェクトの数に基づいて判定される。
いくつかの実施形態において、第2の触知出力の波長は、第1のユーザインタフェースオブジェクトが重畳する、z順序内で第1のユーザインタフェースオブジェクトと第2のユーザインタフェースオブジェクトとの間にあるユーザインタフェースオブジェクトの数に基づいて判定される(例えば、第1のユーザインタフェースオブジェクトがそれぞれのユーザインタフェースオブジェクトを通り越して移動する時に生成される触知出力は、第1のユーザインタフェースオブジェクトとそれぞれのオブジェクトとの間にいくつの他のオブジェクトがあるかに基づいて判定され、これにより、そのユーザインタフェースオブジェクトが、そのユーザインタフェースの大体同じエリア内にあり相互に重畳しているオブジェクトに関する「局所的な」z順序の中のどれだけ下位まで押し下げられたかに関するフィードバックがユーザに提供される)(10646)。例えば、図8M〜8Oでは、触知出力B 10528の波長は、必要に応じて、オブジェクト10506−1とオブジェクト10506−2との間にあってオブジェクト10506−1と重畳するユーザインタフェースオブジェクトの数に基づいて判定される。
いくつ かの実施形態において、第1のユーザインタフェースはそれぞれのz順序の順番に従って配置されたその他複数のユーザインタフェースオブジェクトと重畳し(10648)、z順序内で次の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する次の触知出力(例えば、次の触知出力のピッチ/波長/強度)は、z順序内で前の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する前の触知出力からの数学的な累進に基づく(例えば、各々次の触知出力の波長がその前の触知出力の波長の倍となる)。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトはそれぞれのz順序の順番に従って配置されたその他複数のユーザインタフェースオブジェクトと重畳し(10650)、z順序内で次の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する次の触知出力(例えば、次の触知出力のピッチ/波長/強度)は、z順序内で前の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する前の触知出力からの音楽的な累進に基づく(例えば、各々次の触知出力が、ある定義済みの音階内の次の音符又は1オクターブ下の同じ音符に対応する)。
例えば、状況によっては、オブジェクト10506−1は、オブジェクト10506−1がオブジェクト10506−2と重畳するかに拘わらず、それぞれのz順序の順番に従って配置されたその他の複数のユーザインタフェースオブジェクトと重畳する。このように、いくつかの実施形態において、z順序は、オブジェクト10506−1、オブジェクト10506−1の後ろにあるその他の複数のユーザインタフェースオブジェクト、そしてオブジェクト10506−2を含む。したがって、オブジェクト10506−1をz順序内でオブジェクト10506−2よりも下位に移動させる要求に従ってオブジェクト10506−1がオブジェクト10506−2よりも下位に移動する時、オブジェクト10506−1は、オブジェクト10506−2よりも下位に移動する前にその他複数のユーザインタフェースオブジェクトの各々よりも下位のz順序の順番に移動する。この例では、オブジェクト10506−1がその下位に移動するその他複数のユーザインタフェースオブジェクトの各々について、その他それぞれのユーザインタフェースオブジェクトよりも下位へのオブジェクト10506−1の移動と連動して触知出力が生成される。このように、オブジェクト10506−1がその他複数のユーザインタフェースオブジェクトよりも下位に移動するにつれて、一連の触知出力が生成される。いくつかの実施形態において、この一連の触知出力は、数学的な累進に基づいて生成される。例えば、各々次の触知出力は、その前の触知出力の波長の倍の波長を有する。いくつかの他の実施形態において、この一連の触知出力は、音楽的な累進に基づいて生成される。例えば、各々次の触知出力は、ある定義済みの音階内の次の音符又は1オクターブ下の同じ音符に対応する。
図9A〜9Dにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の再順序付けをする様々な方法を認識するであろう。更に加えて、本明細書で説明される他の方法(例えば、パラグラフ[0058]で列挙されるもの)に関連して本明細書で説明される、他のプロセスの詳細もまた、図9A〜9Dに関連して上述された方法10600と類似の方式で適用可能であることに留意されたい。例えば、方法10600を参照して上記に説明した接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、及びフォーカスセレクタは、必要に応じて、本明細書内で説明する他の方法を参照して本明細書内で説明する接触、ジェスチャ、ユーザインタフェースオブジェクト、触知出力、強度閾値、及びフォーカスセレクタの特徴(例えば、段落[0058]に列挙したもの)のうちの1つ以上を有する。簡潔にするため、これらの詳細はここでは繰り返さない。
いくつかの実施形態によれば、図10は、説明される様々な実施形態の原理に従って構成された、電子デバイス17000の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を遂行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図10で説明される機能ブロックは、説明される様々な実施形態の原理を実施するために、任意選択的に組み合わされるか又はサブブロックに分離されることが、当業者によって理解されよう。それゆえ、本明細書での説明は、本明細書で説明される機能ブロックの、あらゆる可能な組み合わせ若しくは分離、又は更なる定義を、任意選択的にサポートする。
図10に示すように、電子デバイス10700は、表示ユニット10702上に複数のユーザインタフェースオブジェクトを表示するように構成された表示ユニット10702であって、複数のユーザインタフェースオブジェクトはz順序を有し、かつ第1のユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを含み、第1のユーザインタフェースオブジェクトはz順序内で第2のユーザインタフェースオブジェクトよりも上位にある、この表示ユニット10702と、接触を受けるように構成されたタッチ感知面ユニット10704と、表示ユニット10702及びタッチ感知面ユニット10704に結合された処理ユニット10706とを含んでいる。いくつかの実施形態において、処理ユニット10706は、受け取りユニット10708、移動ユニット10710、及び生成ユニット10712を含む。
処理ユニット10706は、タッチ感知面ユニット10704上で接触を検出している間に第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を(例えば、受け取りユニット10708を用いて)受け取り、この要求に応じて第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に(例えば、移動ユニット10710を用いて)移動させ、第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトの少なくとも一部と重畳しているとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップと連動して第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力をタッチ感知面ユニット10704上に(例えば、生成ユニット10712を用いて)生成し、第1のユーザインタフェースオブジェクトが第2のユーザインタフェースオブジェクトと重畳しないとの判定に従って、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力を(例えば、生成ユニット10712を用いて)生成するステップを見合わせるように構成されている。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトの少なくとも一部が第2のユーザインタフェースオブジェクトの少なくとも一部を覆う時、第1のユーザインタフェースオブジェクトは第2のユーザインタフェースオブジェクトの少なくとも一部と重畳する。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップは、フォーカスセレクタが第1のユーザインタフェースオブジェクトの上にある間にそれぞれの強度閾値を超える接触の強度の増加を検出するステップを含む。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップは、第1のユーザインタフェースオブジェクトのz順序を変更するためのコントロールを表示している間に第1のユーザインタフェースオブジェクトをz順序内で下位の方向に移動させるステップに対応するコントロール上の入力を検出するステップを含む。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取るステップは、第2のユーザインタフェースオブジェクトのz順序を変更するためのコントロールを表示している間に第2のユーザインタフェースオブジェクトをz順序内で上位の方向に移動させるステップに対応するコントロール上の入力を検出するステップを含む。
いくつかの実施形態において、複数のユーザインタフェースオブジェクトは中間ユーザインタフェースオブジェクトを含み、この中間ユーザインタフェースオブジェクトは、z順序内で第1のユーザインタフェースオブジェクトと第2のユーザインタフェースオブジェクトとの間の位置を有する。処理ユニット10706は、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求に応じて、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる前に第1のユーザインタフェースオブジェクトをz順序内で中間ユーザインタフェースオブジェクトよりも下位に(例えば、移動ユニット10710を用いて)移動させ、第1のユーザインタフェースオブジェクトが中間ユーザインタフェースオブジェクトの少なくとも一部と重畳しているとの判定に従って、第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップと連動して第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力をタッチ感知面ユニット10704上に(例えば、生成ユニット10712を用いて)生成し、第1のユーザインタフェースオブジェクトが中間ユーザインタフェースオブジェクトと重畳しないとの判定に従って、第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力を(例えば、生成ユニット10712を用いて)生成するステップを見合わせるように構成されている。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトは、中間ユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトと重畳する。処理ユニット10706は、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求に応じて、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる前に第1のユーザインタフェースオブジェクトを中間ユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる第1の触知出力をタッチ感知面ユニット10704上に(例えば、生成ユニット10712を用いて)生成し、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる、第1の触知出力とは異なる第2の触知出力をタッチ感知面ユニット10704上に(例えば、生成ユニット10712を用いて)生成するように構成されている。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面ユニット10704の動きによって生成され、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面ユニット10704の動きによって生成され、第1の支配的な動き成分及び第2の支配的な動き成分は異なる波長を有する。
いくつかの実施形態において、第1の触知出力の波長は、中間ユーザインタフェースオブジェクトのz順序内の位置に基づいて判定され、第2の触知出力の波長は第2のユーザインタフェースオブジェクトのz順序内の位置に基づいて判定される。
いくつかの実施形態において、第1の触知出力の波長は、z順序内で第1のユーザインタフェースオブジェクトと中間ユーザインタフェースオブジェクトとの間にあって第1のユーザインタフェースオブジェクトが重畳するユーザインタフェースオブジェクトの数に基づいて判定される。
いくつかの実施形態において、第2の触知出力の波長は、z順序内で第1のユーザインタフェースオブジェクトと第2のユーザインタフェースオブジェクトとの間にあって第1のユーザインタフェースオブジェクトが重畳するユーザインタフェースオブジェクトの数に基づいて判定される。
いくつかの実施形態において、第1のユーザインタフェースオブジェクトを第2のユーザインタフェースオブジェクトよりも下位に移動させるステップに関連付けられる触知出力は、第1のユーザインタフェースオブジェクトをz順序内で第2のユーザインタフェースオブジェクトよりも下位に移動させる要求を受け取る前の第2のユーザインタフェースオブジェクトのz順序内の位置に基づいて判定される波長を有する。
いくつ かの実施形態において、第1のユーザインタフェースはそれぞれのz順序の順番に従って配置されたその他複数のユーザインタフェースオブジェクトと重畳し、z順序内で次の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する次の触知出力は、z順序内で前の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する前の触知出力からの数学的な累進に基づく。
いくつ かの実施形態において、第1のユーザインタフェースはそれぞれのz順序の順番に従って配置されたその他複数のユーザインタフェースオブジェクトと重畳し、z順序内で次の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する次の触知出力は、z順序内で前の順番のユーザインタフェースオブジェクトよりも下位への第1のユーザインタフェースオブジェクトの移動に対応する前の触知出力からの音楽的な累進に基づく。
上述の情報処理方法は、汎用プロセッサ(例えば、図1A及び3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実施される。
図9A〜9Dを参照して上述された動作は、図1A〜1B、又は図10に示される構成要素によって、任意選択的に実施される。例えば、受け取り動作10640、移動動作10614、生成動作10616、及び見合わせ動作10620は、必要に応じて、イベントソータ170、イベント認識部180、及びイベントハンドラ190によって実行される。イベントソータ170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に渡す。アプリケーション136−1の対応のイベント認識部180は、そのイベント情報を対応のイベント定義186と照会し、タッチ感知面上の第1の場所での第1の接触(又は、デバイスの回転)が、ユーザインタフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、既定のイベント又はサブイベントに対応するか否かを判定する。それぞれの既定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連するイベントハンドラ190を起動させる。イベントハンドラ190は、アプリケーション内部状態192を更新するために、データアップデータ176若しくはオブジェクトアップデータ177を、任意選択的に利用するか又は呼び出す。いくつかの実施形態において、イベントハンドラ190は、アプリケーションにより表示されるものを更新するためのそれぞれのGUIアップデータ178にアクセスする。同様に、当業者にとって、他の処理が図1A〜1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
ユーザに警告する触知フィードバックの提供
多くの電子デバイスは、1つ以上の関連付けられるパラメータを調節することにより操作できるユーザインタフェースオブジェクトを表示するグラフィカルユーザインタフェースを有する。例えば、グラフィカルユーザインタフェースは、必要に応じて、ユーザインタフェース(例えば、マウス、タッチ感知面又はキーボード)によってユーザがカスタム化(例えば、拡大、縮小、トリミング、回転、音量の上昇、音量の低下、あるいは別の方法による視覚又は音声パラメータの操作)することのできる1つ以上のユーザインタフェースオブジェクト(例えば、画像、メディアクリップ、オーディオクリップ、図形、アプリケーションウィンドウ、フォルダ、メニュー、又はステータスバー)を表示する。関連付けられるディスプレイのサイズ上の制約、関連付けられるスピーカの出力上の制約、及びユーザインタフェースオブジェクトに固有の特性(例えば、サイズ、形状、長さ、及び音量)の実用上の配慮から、これらのユーザインタフェースオブジェクトには一般的に定義済みの調節限度が割り当てられ、これらユーザインタフェースオブジェクトのプロパティを調節できる範囲が制限される。ユーザインタフェースオブジェクトに定義済みの調節限度が適用されるユーザインタフェース環境の複雑さを考慮すると、定義済みの調節限度に関してユーザインタフェースオブジェクトのプロパティをユーザがより効率的かつ便利に調節することを可能とするフィードバックを提供し、定義済み調節限度に達し又はこれを超えた時にユーザに警報を出すことが必要とされている。
下記に説明する実施形態は、複雑なユーザインタフェースをナビゲートするユーザに対するフィードバックを生成するための改良された方法及びユーザインタフェースを提供する。より具体的には、これらの方法及びユーザインタフェースは、あるアクションが定義済みの限度を超えるユーザインタフェースオブジェクトのパラメータの調節をもたらす時にユーザに触知フィードバックを提供する。触知フィードバックは、ユーザのアクションが定義済みの調節限度を超えるユーザインタフェースオブジェクトのパラメータの調節をもたらす時にユーザに警告する。このようにすれば、下記に提供する方法及びユーザインタフェースは、音声及び/若しくは視覚フィードバックの代わりに又はこれらに加えて触知フィードバックを提供することにより、ユーザが、許可されているパラメータ調節、禁止されているパラメータ調節、及び推奨されていないパラメータ調節の間でより効率的な識別をすることを可能とする。定義済みの調節限度を超えたことをユーザに警告するためのいくつかの方法は、可聴合図又は視覚的な合図に依存する。しかし、電子デバイスの音量が下げられ又はミュートされ、可聴合図が効果的ではなくなる多くの状況が(例えば、職場で、劇場で、及び様々な社交的な状況で)存在する。都合のよいことに、下記に説明する方法及びユーザインタフェースは、定義済みの調節限度を超えたこと又は超えるであろうことを示す触知フィードバックを提供することにより可聴フィードバックを補足し又はこれに取って代わり、電子デバイスの音量が下げられ又はミュートされている時でも警告を効果的なものとする。
図11A〜11Tは、いくつかの実施形態に係る、あるアクションが定義済みの限度を超えるパラメータの調節をもたらす時にフィードバックを提供するための例示的なユーザインタフェースを図示している。これらの図のユーザインタフェースは、図12A〜12Bのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
図11Aは、いくつかの実施形態に係る、画像10814〜画像10830及びこれら画像のパラメータ(例えば、サイズ)を制御するための制御アイコン10802(例えば、コントロールのサム又はハンドル)を表示する例示的なユーザインタフェース10808を図示している。図11Aでは、ユーザインタフェース10808は、タッチ感知面451及びタッチ感知面との接触の強度を検出する1つ以上のセンサをも併せて含む電子デバイスのディスプレイ450上に表示されている。いくつかの実施形態において、タッチ感知面451は、必要に応じてディスプレイ450又は別個のディスプレイであるタッチスクリーンディスプレイである。ユーザインタフェース10808は、それぞれのコンテンツ(例えば、ユーザインタフェース10808上に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830)に関連付けられるパラメータ(例えば、サイズ)を制御する制御アイコン10802を表示している。図11Aにおいて、ユーザインタフェース10808はまた、タッチ感知面451上の接触を介してユーザによって制御可能なカーソル10806をも表示している。例えば、タッチ感知面451上での接触の動き(例えば、ジェスチャ)の検出は、ユーザインタフェース10808上のカーソル10806の動きに対応する。図11Aにおいて、ユーザインタフェース10808はまた、表示されているコンテンツ(例えば、画像)の複数のサイズに対応するサイズ調節バー10804をも表示している。図11Aでは、サイズ調節バー10804の左右の境界は、表示されているコンテンツ(例えば、画像)の定義済みのサイズ調節限度に対応している。例えば、制御アイコン10802がサイズ調節バー10804の左側境界まで移動すると、表示されているコンテンツ(例えば画像)は定義済みの最小サイズに対応するサイズで表示される(例えば、表示されている画像は許容される最小のサイズに縮小される)。同様に、制御アイコン10802がサイズ調節バー10804の右側境界まで移動すると、表示されているコンテンツ(例えば画像)は定義済みの最大サイズに対応するサイズで表示される(例えば、表示されている画像は許容される最大のサイズに拡大される)。
いくつかの実施形態では、デバイスは、別個のディスプレイ(例えば、ディスプレイ450)及び別個のタッチ感知面(例えば、タッチ感知面451)を備える電子デバイスである。いくつかの実施形態では、デバイスは、ポータブル多機能デバイス100であり、ディスプレイは、タッチ感知ディスプレイシステム112であり、タッチ感知面は、ディスプレイ上に触知出力発生器167を含む(図1A)。説明の便宜上、図11A〜11T及び図12A〜12Bを参照して説明する実施形態については、ディスプレイ450及び別個のタッチ感知面451を参照して説明するが、必要に応じて、図11A〜11Tに示すユーザインタフェースをタッチ感知式ディスプレイシステム112上に表示している間にタッチ感知式ディスプレイシステム112上で図11A〜11Tで説明する接触の動きの検出に応じてタッチ感知式ディスプレイシステム112を備えたデバイス上で類似の動作が実行される。このような実施形態では、フォーカスセレクタは、必要に応じて、カーソル10806の代わりに、それぞれの接触、接触に対応する代表的な点(例えば、それぞれの接触の図心若しくはそれぞれの接触に関連付けられる点)、又はタッチ感知式ディスプレイシステム112上で検出される2つ以上の接触の図心である。
図11A〜11Hは、接触1810及び接触10810の動きを含むジェスチャ(例えば、図11A中の位置10810−aから図11B中の位置10810−bまでの接触10810の動き10812−a、図11B中の位置10810−bから図11C、図11D、図11E、若しくは図11F中の位置10810−cまでの接触10810の動き10812−b、及び/又は図11G若しくは図11H中の位置10810−cからの接触10810のリフトオフ)がタッチ感知面451上で検出されることを図示している。制御アイコン10802が占めるディスプレイ450上のエリアに対応するタッチ感知面451上の位置で接触10810が検出されている(例えば、接触10810は、ユーザインタフェースオブジェクト10802の位置又はその付近にあるカーソル10806のようなディスプレイ上のフォーカスセレクタに対応する)。いくつかの実施形態において、タッチ感知面451 上の接触10810の動きは、(例えば、図11A〜11Fに図示したような)ディスプレイ450上のフォーカスセレクタ(例えば、カーソル10806)の動きに対応する。
図11A〜11Bは、デバイスが、サイズ調節バー10804内の制御アイコン10802の動きに対応するカーソル10806の動きを制御する接触10810の動き10812−aに従って画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズを調節するジェスチャの開始の例を図示している。図11Bでは、定義済みの調節限度を超えていないので、デバイスは、定義済みの調節限度(例えば、サイズ調節バー10804の端部に対応するサイズ限度)を超えるステップに対応する触知出力を生成しない。図11Bは、パラメータ(例えば、サイズ)の調節が1つ以上の定義済みの調節限度を超えないとの(例えば、サイズ調節バー10804の右側境界によって示される定義済みの調節限度内にある、ディスプレイのそれぞれのエリアの中への制御アイコン10802の動きの)判定に従って、電子デバイスが、タッチ感知面上に触知出力を生成せずにパラメータを調節する(例えば、デバイスが、ディスプレイのそれぞれのエリア内の制御アイコン10802の現在位置に対応するパラメータの値に従って、ユーザインタフェース10808内に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズを定義済みの最大サイズ限度よりも小さいサイズにまで拡大する)例を図示している。これに対して、下記に説明する図11C〜11Fは、パラメータ(例えば、サイズ)の調節が1つ以上の定義済みの調節限度を超える(例えば、タッチ感知面451上での接触10810の動きが、サイズ調節バー10804の右側境界によって示される定義済みの限度を超える、表示された画像のサイズ調節に対応する)との判定に従って、触知出力発生器167がタッチ感知面451上に触知出力10832を生成する例を図示している。
図11B〜11Fは、デバイスが、サイズ調節バー10804の端部を越えるカーソル10806の動きを制御する接触10810の動き10812−bを含むジェスチャの継続を検出する様々な例を図示している。図11Cでは、デバイスが、動き10812−bを含むジェスチャの継続の検出に応じて画像のサイズを定義済みの調節限度(例えば、サイズ限度)まで拡大し続け、カーソル10806の動きに従って制御アイコン10802をサイズ調節バー10804の端部を越えて移動させる。図11Dでは、デバイスが、動き10812−bを含むジェスチャの継続の検出に応じて画像のサイズを定義済みの調節限度(例えば、サイズ限度)まで拡大し続け、カーソル10806の動きに従って制御アイコン10802をサイズ調節バー10804の端部まで移動させる。図11Eでは、デバイスが、動き10812−bを含むジェスチャの継続の検出に応じてジェスチャに対応する画像のサイズの拡大を取り消し、カーソル10806の動きに従って制御アイコン10802をサイズ調節バー10804の端部まで移動させる。図11Fでは、デバイスが、動き10812−bを含むジェスチャの継続の検出に応じて画像のサイズを定義済みの調節限度(例えば、サイズ限度)を超えて拡大し続け、カーソル10806の動きに従って制御アイコン10802をサイズ調節バー10804の端部を越えて移動させる。
図11C及び11Fは、デバイスが、ディスプレイ450上に表示されたサイズ調節バー10804の右側境界を通り越したカーソル10806及び制御アイコン10802の動きに対応するタッチ感知面451上の接触10810の動き10812−b(例えば、表示されたコンテンツに関する定義済みの調節限度を超えるパラメータの調節に対応する、ディスプレイのそれぞれのエリアの中へのカーソル10806及び制御アイコン10802の動き)を検出する例を図示している。
図11D〜11Eは、デバイスが、ディスプレイ450上に表示されたサイズ調節バー10804の右側境界を通り越したカーソル10806の動きに対応するタッチ感知面451上の接触10810の動き10812−b(例えば、表示されたコンテンツに関する定義済みの調節限度を超えたパラメータ調節に対応する、ディスプレイのそれぞれのエリアの中への制御アイコン10802の動き)及びディスプレイ上に表示されたサイズ調節バー10804の右側境界への制御アイコン10802の動き(例えば、接触10810の動き10812−bの範囲が定義済みの調節限度を超えるパラメータの調節に対応していながらも、表示されているコンテンツに関する定義済みの調節限度に対応する、ディスプレイのそれぞれのエリアの中への制御アイコン10802の動き)を検出する例を図示している。
図11C〜11Fは、パラメータ(例えば、サイズ)の調節が1つ以上の定義済みの調節限度を超える(例えば、接触10810の動き10812−bの範囲がサイズ調節バー10804の右側境界によって示される定義済み限度を超えた、表示されている画像のサイズ調節に対応する場合)との判定に従って、触知出力発生器167が、ジェスチャが定義済みの調節限度を超えるパラメータの調節に対応することをユーザに示す触知出力10832をタッチ感知面451上に生成する例を図示している。
図11C〜11Dは、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、定義済みの調節限度に達するようにパラメータが調節される(例えば、ユーザインタフェース10808上に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズが定義済みの最大サイズ限度に拡大される)例を図示している。
図11Eは、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、パラメータの調節が取り消される(例えば、ユーザインタフェース10808上に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズが、接触10810の動き10812−a及び10812−bの検出前に画像が表示されていた元のサイズに調節される)例を図示している。
図11Fは、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、定義済みの調節限度を超えるようにパラメータが適宜調節される(例えば、ユーザインタフェース10808上に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズが定義済みの最大サイズ限度を通り越して拡大される)例を図示している。
図11G〜11Hは、デバイスが、図11A〜11Fを参照して上記に説明したジェスチャのうちの1つを実行するために使用される接触10810のリフトオフを検出する様々な例を図示している。図11Gは、図11F中の接触10810のリフトオフに応じて定義済みの調節限度を超えるパラメータの調節が反転しない(例えば、図11F中の定義済みの最大サイズ限度を超えて拡大されたユーザインタフェース10808上に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズが接触10810のリフトオフ後も維持される)例を図示している。この例では、接触10810のリフトオフの検出に応じて、デバイスが制御アイコン10802をスクロールバー10804の端部に戻す。図11Hは、図11F中の接触10810のリフトオフに応じて定義済みの調節限度を超えるパラメータの調節が定義済みの調節限度に合致するように部分的に反転する(例えば、図11F中の定義済みの最大サイズ限度を超えて拡大されたユーザインタフェース10808上に表示されている画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズが接触10810のリフトオフ後に縮小されて定義済みの最大サイズ限度に戻る)例を図示している。図11Gは、図11F中の接触10810のリフトオフに応じて、制御アイコン10802の表示がサイズ調節バー10804の右側境界に対応するように調節される(例えば、サイズ調節バー10804の右側境界に戻る制御アイコン10802の動きの)例を図示している。
図11I〜11Kは、接触10840及びタッチ感知面451上で検出される接触10840の動き10842を含むジェスチャ(例えば、図11I中の位置10840−aから図11J中の位置10840−bまでの接触10840の動き10842−a及び/又は図11J中の位置10840−bから図11K中の位置10840−cまでの接触10840の動き10842−b)を図示している。コントロール10836が占めるディスプレイ450上のエリアに対応するタッチ感知面451上の位置で接触10840が検出されている(例えば、接触10840は、ユーザインタフェースオブジェクト10836の位置又はその付近にあるカーソル10806のようなディスプレイ上のフォーカスセレクタに対応する)。図11I〜11K中のジェスチャは、ディスプレイ450上のフォーカスセレクタ(例えば、カーソル10806)の動きに対応するタッチ感知面451上の接触10840の動き10842を含んでいる。
いくつかの実施形態において、図11I〜11Kに図示したように、コンテンツは音声(例えば、音声10834)を含むメディアクリップ(例えば、メディアクリップ10844、10846、10848、10850、10852、及び/又は10854)であり、パラメータは音量レベル(例えば、音量レベル10836)であり、定義済みの調節限度にはクリップ限度(例えば、クリップ限度10838)が含まれ、コンテンツ内で発生する最大音量は、クリップ限度よりも高い時にクリップ限度を超える。例えば、図11Jに図示したように、電子デバイスは、定義済みの調節限度を超えないパラメータの調節(例えば、音声10834の最大音量が音量クリップ限度10838を超えないような音量レベル10836の上昇)に対応する接触10810の動き10842−aの検出に応じて、タッチ感知面上に触知出力を生成せずにパラメータを調節する。これに対して、図11Kに図示したように、定義済みの調節限度を超えるパラメータの調節(例えば、音声10834の最大音量が音量クリップ限度10838を超えるような音量レベル10836の上昇)に対応する接触10810の動き10842−bの検出に応じて、触知出力発生器167がタッチ感知面451上に触知出力10832を生成する。
図11L〜11Nは、接触10860及びタッチ感知面451上で検出される接触10860の動き10862(例えば、図11L中の位置10860−aから図11M中の位置10860−bまでの接触10860の動き10862−a及び/又は図11M中の位置10860−bから図11N中の位置10860−cまでの接触10860の動き10862−b)を含むジェスチャを図示している。コントロール10858が占めるディスプレイ450上のエリアに対応するタッチ感知面451上の位置で接触10860が検出されている(例えば、接触10860は、ユーザインタフェースオブジェクト10858の位置又はその付近にあるカーソル10864のようなディスプレイ上のフォーカスセレクタに対応する)。図11L〜11N中のジェスチャは、ディスプレイ450上のフォーカスセレクタ(例えば、カーソル10864)の動きに対応するタッチ感知面451上の接触10860の動き10862を含んでいる。
いくつかの実施形態において、図11L〜11Nに図示したように、コンテンツはメディアクリップ(例えば、メディアクリップ10856)であり、パラメータはトリミングマスク(例えばトリミングマスク10858)であり、定義済みの調節限度には時間軸コンテンツの境界(例えば、メディアクリップ10856の右側境界)が含まれ、トリミングマスクは、時間軸コンテンツの境界を越えて拡張すると時間軸コンテンツの境界を越える。例えば、図11Mに図示したように、電子デバイスは、定義済みの調節限度を超えないパラメータ の調節(例えば、メディアクリップ10856の右側境界を越えずにこの右側境界までのトリミングマスク10864の延長)に対応する接触10860の動き10862−aの検出に応じて、タッチ感知面上に触知出力を生成せずにパラメータ(例えば、トリミングマスク10858のサイズ)を調節する。これに対して、図11Nに図示したように、定義済みの調節限度を超えるパラメータの調節(例えば、メディアクリップ10856の右側境界を越えるトリミングマスク10864の延長)に対応する接触10860の動き10862−bの検出に応じて、触知出力発生器167がタッチ感知面451上に触知出力10832を生成する。
図11O〜11Qは、接触10870及びタッチ感知面451上で検出される接触10870の動き10872を含むジェスチャ(例えば、図11O中の位置10870−aから図11P中の位置10870−bまでの接触10870の動き10872−a及び/又は図11P中の位置10870−bから図11Q中の位置10870−cまでの接触10870の動き10872−b)を図示している。コントロール10866が占めるディスプレイ450上のエリアに対応するタッチ感知面451上の位置で接触10870が検出されている(例えば、接触10870は、ユーザインタフェースオブジェクト10866の位置又はその付近にあるカーソル10806のようなディスプレイ上のフォーカスセレクタに対応する)。図11O〜11Q中のジェスチャは、ディスプレイ450上のフォーカスセレクタ(例えば、カーソル10806)の動きに対応するタッチ感知面451上の接触10870の動き10872を含んでいる。
いくつかの実施形態において、図11O〜11Qに図示したように、コンテンツは画像(例えば、画像10868)であり、パラメータはトリミングマスク(例えばトリミングマスク10866)であり、定義済みの調節限度にはコンテンツの境界(例えば、画像10868の外縁)が含まれ、トリミングマスクは、コンテンツの境界を越えて拡張するとコンテンツの境界を越える。例えば、図11Pに図示したように、電子デバイスは、定義済みの調節限度を超えないパラメータの調節(例えば、画像10868の下側及び右側境界を越えずにこの右側境界までのトリミングマスク10866の延長)に対応する接触10870の動き10872−aの検出に応じて、タッチ感知面上に触知出力を生成せずにパラメータ(例えば、トリミングマスク10866のサイズ)を調節する。これに対して、図11Qに図示したように、定義済みの調節限度を超えるパラメータの調節(例えば、画像10868の下側及び右側境界を越えるトリミングマスク10866の延長)に対応する動き10872−bの検出に応じて、触知出力発生器167がタッチ感知面451上に触知出力10832を生成する。
図11R〜11Tは、接触10880及びタッチ感知面451上で検出される接触10880の動き10882を含むジェスチャ(例えば、図11R中の位置10880−aから図11S中の位置10880−bまでの接触10880の動き10882−a及び/又は図11S中の位置10880−bから図11T中の位置10880−cまでの接触10880の動き10882−b)を図示している。コントロール10878が占めるディスプレイ450上のエリアに対応するタッチ感知面451上の位置で接触10880が検出されている(例えば、接触10880は、ユーザインタフェースオブジェクト10878の位置又はその付近にあるカーソル10806のようなディスプレイ上のフォーカスセレクタに対応する)。図11R〜11T中のジェスチャは、ディスプレイ450上のフォーカスセレクタ(例えば、カーソル10806)の動きに対応するタッチ感知面451上の接触10880の動き10882を含んでいる。
いくつかの実施形態において、図11R〜11Tに図示したように、コンテンツは図形(例えば、正方形10876)であり、パラメータは図形調節パラメータ(例えば、正方形10876の角部の丸み)であり、定義済みの調節限度にはそれぞれの図形のそれぞれの部分に対する最大許容調節値(例えば、正方形10876の角部を丸くする最大半径)が含まれる。例えば、図11Sに図示したように、電子デバイスは、定義済みの調節限度を超えない範囲のパラメータの調節(例えば、所定の最大半径を超えずにこの最大半径に合致する半径を使用して正方形10876の角部を丸めること)に対応する動き10882−aの検出に応じて、タッチ感知面上に触知出力を生成せずにパラメータ(例えば、正方形10876の角部の丸み)を調節する。これに対して、図11Tに図示したように、定義済みの調節限度を超えるパラメータの調節(例えば、所定の最大半径を超える半径を使用して正方形10876の角部を丸めること)に対応する動き10882−bの検出に応じて、触知出力発生器167がタッチ感知面451上に触知出力10832を生成する。
図12A〜12Bは、いくつかの実施形態に係る、あるアクションが定義済み限度を超えるパラメータの調節をもたらす時にフィードバックを提供する方法10900を図示したフローチャートである。方法10900は、ディスプレイ及びタッチ感知面を備えた電子デバイス(例えば、図3中のデバイス300又は図1A中のポータブル多機能デバイス100)において実行される。いくつかの実施形態において、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面がディスプレイ上にある。いくつかの実施形態において、ディスプレイはタッチ感知面から分離している。方法10900におけるいくつかの動作は必要に応じて組み合わされ、及び/又はいくつかの動作の順序は必要に応じて変更される。
下記に説明するように、方法10900は、あるアクションが定義済み限度を超えるパラメータの調節をもたらす時にフィードバックを提供する直感的な方法を提供する。この方法は、あるアクションが定義済み限度を超えるパラメータの調節をもたらす時に、フィードバックを検出する時 にユーザにかかる認識負担を軽減することで、より効率的なヒューマンマシンインタフェースを作る。電池駆動式電子デバイスの場合、あるアクションが定義済み限度を超えるパラメータの調節をもたらす時に、ユーザがフィードバックをより速くかつより効率的に検出することを可能とすることにより、電力が節約され、電池充電の時間間隔が延びる。
いくつかの実施形態において、デバイスは、それぞれのコンテンツに関連付けられるパラメータ(例えば、図11A〜11H中の画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズ、図11I〜11K中の音声10834の音量レベル、図11L〜11N中のメディアクリップ10856に適用されるトリミングマスク10858、図11O〜11Q中の画像10868に適用されるトリミングマスク10866、又は図11R〜11T中の正方形10876の角部の丸み)を制御するためのコントロール(例えば、図11A〜11H中のサイズ調節バー10804及び制御アイコン10802を含むサイズ再調節コントロール、図11I〜11K中のコントロール10836、図11L〜11N中のコントロール10858、図11O〜11Q中のコントロール10866、又は図11R〜11T中のコントロール10878)をディスプレイ(例えば、図11A〜11T中のディスプレイ450)上に表示する(10902)。
いくつかの実施形態において、デバイスがコントロールを表示している間に、デバイスは、タッチ感知面(例えば、タッチ感知面451)上でのパラメータを調節するためのジェスチャ(例えば、図11A〜11H中の接触10810の動き10812、図11I〜11K中の接触10840の動き10842、図11L〜11N中の接触10860の動き10862、図11O〜11Q中の接触10870の動き10872、又は図11R〜11T中の接触10880の動き10882)を検出する(10904)。
いくつかの実施形態において、ジェスチャの検出に応じて(10906)、デバイスは、ジェスチャの範囲(例えば、横方向の動きの範囲、回転の範囲、又はタッチ感知面上で検出される接触の強度の増加/減少の範囲)に対応するパラメータの調節を判定する(10908)。
ジェスチャの検出に応じて(10906)、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、デバイスが、タッチ感知面(例えば、タッチ感知面451)上にそれぞれの触知出力(例えば、図11C〜11F、図11K、図11N、図11Q、又は図11T中の触知出力10832)を生成する(10910)。
いくつかの実施形態において、ジェスチャの検出に応じて(10906)、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、デバイスが、パラメータの調節を見合わせる(例えば、要求された調節がパラメータの調節限度を超える場合、パラメータの調節が取り消される)(10912)。例えば、図11C及び11Eに図示したように、接触10810 の動き10812−b を含むジェスチャがサイズ調節バー10804の右側境界に対応する定義済みの調節限度を超える画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズの調節に対応する場合、画像は、図11Eに示すように、ジェスチャ以前の画像のサイズに対応する倍率で表示される。
いくつかの実施形態において、ジェスチャの検出に応じて(10906)、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、デバイスが、定義済みの調節限度に達するようにパラメータを調節する(例えば、パラメータの調節の範囲が、所定の調節限度によって制限される)(10914)。例えば、図11C〜11Dに図示したように、接触10810の動き10812−b を含むジェスチャがサイズ調節バー10804の右側境界に対応する定義済みの調節限度を超える画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズの調節に対応する場合、画像は、図11Dに示すように、定義済みの最大サイズ調節限度に対応する倍率で表示される。いくつかの実施形態において、パラメータはそれぞれの定義済みの調節限度に調節されるが、それぞれの定義済みの調節限度を超えない(例えば、スライダ上のサムはスライダの端部まで調節されるが、それより先には調節されない)。
いくつかの実施形態において、ジェスチャの検出に応じて(10906)、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、デバイスがパラメータの調節を実行する(例えば、パラメータの調節の範囲は、所定の調節限度によって制限されない)(10916)。例えば、図11Fに図示したように、接触10810の動き10812−b がサイズ調節バー10804の右側境界に対応する定義済みの調節限度を超える画像10814、10816、10818、10820、10822、10824、10826、10828、及び10830のサイズの調節に対応する場合、画像は、図11Fに示すように、(例えば、たとえこのような方法でパラメータを調節することによって1つ以上の定義済みの調節限度を超えることとなっても)定義済みの最大サイズ調節限度を超えるサイズに対応する倍率で表示される。例えば、ユーザはトリミングマスクを(例えば、図11Qに示すように)キャンバスの外側にまで又は(例えば、図11Nに示すように)メディアクリップの端部を越えて拡張することができるが、デバイスがユーザに対して、トリミングマスクがキャンバスの外側又はメディアクリップの端部を越えた先にある間にトリミングをすると、それぞれのコンテンツに空白のコンテンツが追加されることを警告する。
いくつかの実施形態において、コンテンツは音声(例えば、図11I〜11K中の音声10834)を含むメディアクリップ(例えば、図11I〜11K中のメディアクリップ10844、10846、10848、10850、10852、及び/又は10854)であり(10918)、パラメータは音量レベル(例えば、図11I〜11K中の音量レベル10836)であり、定義済みの調節限度にはクリッピング限度(例えば、図11I〜11K中のクリッピング限度10838)が含まれ、コンテンツ内で発生する最大音量は、このクリッピング限度よりも高い時(例えば、音声10834の最も高いピークが図11K中のクリッピング限度10838を超える時)にはこのクリッピング限度を超える。いくつかの実施形態において、クリッピング限度はアナログのクリッピング限度である(例えば、クリッピング限度を超える音は増幅器の電源が生成できるよりも大きな出力で信号を生み出すように増幅器に強要し、したがって増幅器はその最大容量までにしか信号を増幅しないように、音は増幅器の物理的/電気的特性によって制限される)。いくつかの実施形態において、クリッピング限度はデジタルのクリッピング限度である(例えば、信号は音の所定の範囲のデジタル表現によって制限され、選択されたデジタル表現の範囲を超える振幅を有する音は最大のデジタル表現として表される)。
いくつかの実施形態において、コンテンツは(10920)メディアクリップ(例えば、図11L〜11N中のメディアクリップ10856)であり、パラメータはトリミングマスク(例えば、図11L〜11N中のトリミングマスク10858)であり、定義済みの調節限度には時間軸コンテンツの境界(例えば、図11L〜11N中のメディアクリップ10856の右側境界)が含まれ、トリミングマスクは、時間軸コンテンツの境界を越えて拡張する(例えば、ユーザがメディアクリップの開始時刻よりも前又はメディアクリップの終了時刻の後にメディアクリップをトリミングすることに対応する動作を実行しようとする)と時間軸コンテンツの境界を越える。例えば、図11Nに図示したように、トリミングマスク10858は、メディアクリップ10856の時間軸コンテンツの右側境界を越えて拡張すると時間軸コンテンツの境界を越える。
いくつかの実施形態において、コンテンツは画像(例えば、図11O〜11Q中の画像10868)であり、パラメータはトリミングマスク(例えば図11O〜11Q中のトリミングマスク10866)であり、定義済みの調節限度にはコンテンツの境界(例えば、図11O〜11Q中の画像10868の外縁)が含まれ、トリミングマスクは、コンテンツの境界を越えて(例えば、画像の境界を越えて)拡張するとコンテンツの境界を越える。例えば、図11Qに図示したように、トリミングマスク10866は、画像10868の下側及び右側の境界を越えて拡張するとコンテンツの境界を越える。
いくつかの実施形態において、コンテンツは図形(例えば、図11R中の正方形10876)であり、パラメータは図形調節パラメータ(例えば、図11R〜11T中の正方形10876の角部の丸みに対応するパラメータ)であり、定義済みの調節限度にはそれぞれの図形のそれぞれの部分に対する最大許容調節値(例えば、図11R〜11T中の正方形10876の角部を丸くする最大半径)が含まれる。いくつかの実施形態において、図形調節パラメータは、例えば、図形の角部の丸み、不透明度、又は線幅である。いくつかの実施形態において、定義済みの調節限度は、例えば、角部を丸めるための最大半径、最低/最高不透明度、又は最小/最大線幅である。
ジェスチャの検出に応じて(10906)、パラメータの調節が1つ以上の定義済みの調節限度を超えないとの判定に従って、デバイスが、タッチ感知面(例えば、タッチ感知面451)上にそれぞれの触知出力(例えば、定義済みの調節限度を超えることに対応する触知出力)を生成せずにパラメータの調節を実行する(10926)。例えば、図11B、11J、11M、11P、及び11Sに図示したように、ジェスチャが定義済みの調節限度を超えない場合、この調節が実行され、タッチ感知面上には触知出力は生成されない。
図12A〜12Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の再順序付けをするさまざまな方法を認識するであろう。さらに加えて、本明細書で説明される他の方法(例えば、パラグラフ[0058]で列挙されるもの)に関連して本明細書で説明される、他のプロセスの詳細もまた、図12A〜12Bに関連して上述された方法10900と類似の方式で適用可能であることに留意されたい。例えば、方法10900を参照して上記に説明した接触、ジェスチャ、ユーザインタフェースオブジェクト、触感覚、及びフォーカスセレクタは、必要に応じて、本明細書内で説明する他の方法を参照して本明細書内で説明する接触、ジェスチャ、ユーザインタフェースオブジェクト、触感覚、及びフォーカスセレクタの特徴(例えば、段落[0058]で列挙したもの)のうちの1つ以上を有する。簡潔にするため、これらの詳細はここでは繰り返さない。
いくつかの実施形態によれば、図13は、説明される様々な実施形態の原理に従って構成された、電子デバイス11000の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を遂行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図13で説明される機能ブロックは、説明される様々な実施形態の原理を実施するために、任意選択的に組み合わされるか又はサブブロックに分離されることが、当業者によって理解されよう。それゆえ、本明細書での説明は、本明細書で説明される機能ブロックの、あらゆる可能な組み合わせ若しくは分離、又は更なる定義を、任意選択的にサポートする。
図13に示すように、電子デバイス11000は、それぞれのコンテンツに関連付けられるパラメータを制御するためのコントロールを表示するように構成された表示ユニット11002、ユーザによる接触を受けるように構成されたタッチ感知面ユニット11004、必要に応じてタッチ感知面ユニット11004との接触の強度を検出するように構成された1つ以上のセンサユニット11006、並びに表示ユニット11002、タッチ感知面ユニット11004、及び必要に応じて1つ以上のセンサユニット11006に結合された処理ユニット11008を含んでいる。いくつかの実施形態において、処理ユニット11008は、表示可能化ユニット11010、検出ユニット11012、判定ユニット11014、生成ユニット11016、及び調節ユニット11018を含む。
いくつかの実施形態において、処理ユニット11008は、それぞれのコンテンツに関連付けられるパラメータを制御するためのコントロールの表示を(例えば、表示可能化ユニット11010を用いて)可能とするように構成されている。いくつかの実施形態において、処理ユニット11008は、タッチ感知面ユニット11004上でのパラメータを調節するジェスチャを(例えば、検出ユニット11012を用いて)検出するように更に構成されており、処理ユニット11008は、ジェスチャの検出に応じて、ジェスチャの範囲に対応するパラメータの調節を(例えば、判定ユニット11014を用いて)判定するように構成されており、処理ユニット11008は、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、タッチ感知面ユニット上にそれぞれの触知出力を(例えば、生成ユニット11016を用いて)生成するように構成されており、処理ユニット11008は、パラメータの調節が1つ以上の定義済みの調節限度を超えないとの判定に従って、タッチ感知面ユニット11004上にそれぞれの触知出力を生成せずにパラメータの調節を(例えば、調節ユニット11018を用いて)実行するように構成されている。
いくつかの実施形態において、処理ユニット11008は、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、(例えば、調節ユニット11018を用いた)パラメータの調節を見合わせるように、更に構成されている。
いくつかの実施形態において、処理ユニット11008は、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、定義済みの調節限度に達するようにパラメータを(例えば、調節ユニット11018を用いて)調節するように、更に構成されている。
いくつかの実施形態において、処理ユニット11008は、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に従って、パラメータの調節を(例えば、調節ユニット11018を用いて)実行するように、更に構成されている。
いくつかの実施形態において、コンテンツは音声を含むメディアクリップであり、パラメータは音量レベルであり、定義済みの調節限度にはクリッピング限度が含まれ、コンテンツ内で発生する最大音量は、クリッピング限度よりも高い時にクリッピング限度を超える。
いくつかの実施形態において、コンテンツはメディアクリップであり、パラメータはトリミングマスクであり、定義済みの調節限度には時間軸コンテンツの境界が含まれ、トリミングマスクは、時間軸コンテンツの境界を越えて拡張すると時間軸コンテンツの境界を越える。
いくつかの実施形態において、コンテンツは画像であり、パラメータはトリミングマスクであり、定義済みの調節限度にはコンテンツの境界が含まれ、トリミングマスクは、コンテンツの境界を越えて拡張するとコンテンツの境界を越える。
いくつかの実施形態において、コンテンツは図形であり、パラメータは図形調節パラメータであり、定義済みの調節限度にはそれぞれの図形のそれぞれの部分に対する最大許容調節値が含まれる。
上述の情報処理方法は、汎用プロセッサ(例えば、図1A及び3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実施される。
図12A〜12Bを参照して上述された動作は、図1A〜1B、又は図13に示される構成要素によって、任意選択的に実施される。例えば、検出動作10904並びに判定動作10908、10910、10912、10914、10916、及び10926は、必要に応じて、イベントソータ170、イベント認識部180、及びイベントハンドラ190によって実行される。イベントソータ170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に渡す。アプリケーション136−1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面上の第1の位置での第1の接触がユーザインタフェース上のオブジェクトの選択、それぞれのコンテンツに関連付けられるパラメータの調節、又は(例えば、パラメータの調節が1つ以上の定義済みの調節限度を超えるとの判定に対応する)触知出力の生成などの定義済みイベント又はサブイベントに対応するかを判定する。それぞれの既定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連するイベントハンドラ190を起動させる。イベントハンドラ190は、アプリケーション内部状態192を更新するために、データアップデータ176若しくはオブジェクトアップデータ177を、任意選択的に利用するか又は呼び出す。いくつかの実施形態において、イベントハンドラ190は、アプリケーションにより表示されるものを更新するためのそれぞれのGUIアップデータ178にアクセスする。同様に、当業者にとって、他の処理が図1A〜1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
時計に対応する触知フィードバックの提供
多くの電子デバイスは、時計の描画を含むグラフィカルユーザインタフェースを有する。例えば、多くのセルラー電話機、ラップトップ、及びタブレットは、グラフィカルユーザインタフェース上に目立つように表示された時計の描画を有する。ユーザが時計に対応するフィードバックを受け取るための効率的でかつ便利な方法の提供が、しばしば必要とされる。下記の実施形態は、ユーザに対して、時計に対応する触知出力(例えば、「チクタク」パターンの触知出力)を生成してフォーカスセレクタが時計の描画の上にあることを示し、必要に応じて、時間経過の進度の表示を提供することにより、既存の方法を改良する。
図14A〜14Jは、いくつかの実施形態に係る、時計に対応する触知フィードバックを提供するための例示的なユーザインタフェースを図示している。これらの図中のユーザインタフェースは、図15A〜15Bを参照して下記に説明するプロセスを含め、以下に説明するプロセスを例示するために使用される。
図14Aは、時計の描画を含むユーザインタフェースの例を図示している。ユーザインタフェース11100は、デバイス(例えば、デバイス300)のディスプレイ450上に表示されており、タッチ感知面451上の接触(例えば指による接触)に応答する。ユーザインタフェース11100は、時計の描画11102を含んでいる。図14Aは、更に、タッチ感知面451上の接触11106、及び、いくつかの実施形態によれば、接触11106に対応して位置11104−aに表示されたフォーカスセレクタ(例えば、カーソル11104)の描画を図示している。
いくつかの実施形態では、デバイスは、ポータブル多機能デバイス100であり、ディスプレイは、タッチ感知ディスプレイシステム112であり、タッチ感知面は、ディスプレイ上に触知出力発生器167を含む(図1A)。説明の便宜上、図14A〜14J及び図15A〜15Bを参照して説明する実施形態について、ディスプレイ450及び別個のタッチ感知面451を参照しながら説明するが、必要に応じて、タッチ感知式ディスプレイシステム112上に図14A〜14Jに示すユーザインタフェースを表示している間のタッチ感知式ディスプレイシステム112上での図14A〜14Jで説明する接触の検出に応じて、タッチ感知式ディスプレイシステム112を備えたデバイス上で類似の動作が実行される。このような実施形態において、フォーカスセレクタは、必要に応じて、カーソル11104の代わりとなる、それぞれの接触、接触に対応する代表的な点(例えば、それぞれの接触の図心若しくはそれぞれの接触に関連付けられる点)、又はタッチ感知式ディスプレイシステム112上で検出される2つ以上の接触の図心である。
図14A及び14Bは、時計の描画の上にあるフォーカスセレクタを検出する例を図示している。この例では、接触11106及び接触11106の動き11108がタッチ感知面451上で検出される。動き11108に対応するフォーカスセレクタ(例えば、カーソル11104)の動きが、フォーカスセレクタ(例えば、カーソル11104)を時計の描画11102の上にない図14A中の位置11104−aから時計の描画11102の上にある図14B中の位置11104−bに移動させ、デバイスが、タッチ感知面451上に触知フィードバック11110(例えば、チクタクの感覚に対応する触知出力の生成)を提供し始める。
図14Cは、時計の描画の上にあるフォーカスセレクタを検出している間に触知フィードバックを提供し続ける例を図示している。この例では、位置11104−bのカーソル11104は時計の描画11102の上にあり、タッチ感知面451上に触知フィードバック11110が継続的に提供される。図14Bを参照して下記に説明するように、触知フィードバック11110は、タッチ感知面451上の規則的なパターンの触知出力を含む。
図14C及び14Dは、時計の描画の上にフォーカスセレクタを維持するフォーカスセレクタの動きの例を図示している。この例では、フォーカスセレクタ(例えば、カーソル11104)は、始めは図14Cに示すように位置11104−bある。図14Dに示すように、タッチ感知面451上で接触11112及び動き11114が検出され、これに対応するカーソル11104の動きがカーソル11104を位置11104−cに移動させる。カーソル11104は位置11104−cにある時には時計の描画11102の上にあるので、タッチ感知面451上に触知フィードバック11110が提供される。いくつかの実施形態において、触知フィードバックの規則的なパターンの周期は、フォーカスセレクタ(例えば、カーソル11104)を時計の描画11102の上に維持するフォーカスセレクタ(例えば、カーソル11104)の動きに基づかない。例えば、いくつかの実施形態において、カーソル11104が時計の描画11102の上に留まっている間、触知フィードバックの規則的なパターンの周期はカーソル11104の動きとは無関係である。
図14D及び14Eは、時計の描画から遠ざかり、したがって時計に対応する触知フィードバックの提供を停止するフォーカスセレクタの動きの例を図示している。この例では、カーソル11104は、始めに図14Dに示すように位置11104−cにある。図14Eに示すように、タッチ感知面451上で接触11116及び動き11118が検出され、これに対応するカーソル11104の動きがカーソル11104を位置11104−dに移動させる。カーソル11104は位置11104−dにある時にはもはや時計の描画11102の上にはないので、タッチ感知面451上にはもはや触知フィードバックは提供されない。
図14F〜14Hは、触知出力を生成するための動き特性の波形の例を図示している。図14Fは、周期11130−1を有する三角波形を図示している。図14Gは周期11130−2を有する方形波形を図示しており、図14Hは周期11130−3を有するのこぎり波形を図示している。いくつかの実施形態において、上記に説明したように、時計に対応する触知フィードバック11110を生成する時に、図14F〜14Hに図示した動き特性のうちの1つが利用される。これらの例では、規則的なパターンは単一波形の反復を含んでいるので、規則的なパターンの周期は規則的なパターン内の個々の波形の周期と同じである。いくつかの実施形態において、規則的なパターンの周期(例えば、ピークからピークまで、又はリーディングエッジからリーディングエッジまで)は1秒である。
いくつかの実施形態によれば、図14I〜14Jは、交互に入れ替わる一連の出力を含む動き特性の波形の例を図示している。いくつかの実施形態において、触知フィードバック11110は、交互に入れ替わる異なる出力特性を有する一連の触知出力を含む。図14Iは、ほぼ同じ周期並びに異なる振幅11132−1及び11132−2を有する交互に入れ替わる一連の方形波を図示している。図14Jは、ほぼ同じ周期及び振幅を有する交互に入れ替わる一連の方形波及びのこぎり波を図示している。いくつかの実施形態において、2つの連続した出力間の時間が1秒又は約1秒となる(例えば、チクとタクとの間の時間が1秒であり、タクとチクとの間の時間が1秒である)ように、規則的なパターンの周期(例えば、同じ動き特性を有する出力のピークからピーク、又はリーディングエッジからリーディングエッジまで)は2秒である。
いくつかの実施形態において、触知フィードバック11110は、図14F〜14Jに示したもの以外のタッチ感知面451上の規則的なパターンの触知出力を含む。例えば、規則的なパターンは、繰り返し生成される一連の長さL(但し、Lは0よりも大きな整数)を有する一連の成分波形(component waveforms)であってもよい。いくつかの実施形態において、一連の成分波形内の少なくとも1つの成分は、他の成分のうちの少なくとも1つと少なくとも1つの点(例えば、振幅、周期、及び/又は形状)において異なる。いくつかの実施形態において、一連の成分波形内の各成分波形が他の成分と少なくとも1つの点(例えば、振幅、周期、及び/又は形状)において異なる一方、他の実施形態では、一連内のいくつかの成分(「反復成分」)が同一(例えば、一連のL成分内のN番目毎の成分が同一)である一方でその他の成分は反復成分とは異なる。これらの実施形態において、規則的なパターンの周期は、一連の成分波形を生成するための周期(即ち、規則的なパターンの最初のインスタンスの開始時点から規則的なパターンの次のインスタンスの開始時点まで)である。
図15A〜15Bは、いくつかの実施形態に係る、時計に対応する触知出力を提供する方法11200を図示したフローチャートである。方法11200は、ディスプレイ及びタッチ感知面を備えた電子デバイス(例えば、図3のデバイス300又は図1Aのポータブル多機能デバイス100)において実行される。いくつかの実施形態において、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面がディスプレイ上にある。いくつかの実施形態において、ディスプレイはタッチ感知面から分離している。方法11200での一部の動作は、任意選択的に組み合わされ、かつ/又は、一部の動作の順序は、任意選択的に変更される。
下記に説明するように、方法11200は、時計に対応する触知フィードバックを提供する直感的な方法を提供する。この方法は、時計を表示している時のユーザにかかる認識負担を軽減することでより効率的なヒューマンマシンインタフェースを作る。電池駆動式電子デバイスの場合、ユーザが時計とより速くかつ効率的に対話することを可能とすることにより、電力が節約され、電池充電の時間間隔が延びる。
デバイスは、時計の描画を表示する(11202)。例えば、図14Aは、グラフィカルユーザインタフェース11100内に表示された時計の描画11102を示している。いくつかの実施形態において、デバイスは、時計の描画の上のフォーカスセレクタを検出する前に、タッチ感知面上に時計に対応する触知フィードバックを提供せずに時計の描画を表示する(例えば、フォーカスセレクタが時計の上に移動する前には時計に対応するチクタク出力は生成されない)(11204)。例えば、図14Aでは、カーソル11104は位置11104−aにあり、時計の描画11102の上にはないので、デバイスは触知フィードバック11110を生成しない。
時計の描画を表示している間に、デバイスが、フォーカスセレクタの時計の描画の上への移動を検出する(11206)。例えば、図14Bに示すように、カーソル11104は、時計の描画の上ではなかった位置11104−aから時計の描画11102の上の位置11104−bに移動する。時計の描画の上のフォーカスセレクタを検出している間、デバイスは、タッチ感知面上の規則的なパターンの触知出力を含む、時計に対応する触知フィードバックを提供する(11208)。例えば、図14Cは、位置11104−bで時計の描画11102の上にあるカーソル11104、及び図14F〜14Jを参照して上記に説明したような規則的なパターンの触知出力を含む、タッチ感知面451上に提供される触知フィードバック11110を示している。
いくつかの実施形態において、規則的なパターンの触知出力内の触知出力は等間隔で生成される(11210)。例えば、いくつかの実施形態において、規則的なパターンの触知出力は、1秒の周期を有する。いくつかの他の実施形態において、規則的なパターンの触知出力は、0.5秒、2秒、又は0.25秒と10秒との間の他の時間長の周期を有する。
いくつかの実施形態において、タッチ感知面上の規則的なパターンの触知出力は、図14F〜14Jを参照して上記に説明した規則的なパターンのうちの1つを含む。例えば、いくつかの実施形態において、タッチ感知面上の規則的なパターンの触知出力は、異なる出力特性を有する交互に入れ替わる一連の触知出力を含む(11212)。例えば、いくつかの実施形態において、タッチ感知面上の触知出力のパターンは、ユーザにとって「タク」触知出力に対応する「タク」感覚とは異なる「チク」触知出力に対応する「チク」感覚を生成するように「チク」触知出力及び「タク」触知出力が選択されたチクタク感覚を生成する。例えば、図14I〜14Jは、交互に入れ替わる一連の出力を含む動き特性の波形の例を図示している。
いくつかの実施形態において、交互に入れ替わる一連の触知出力は、異なる振幅を有する第2の種類の触知出力と交互に入れ替わる第1の種類の触知出力を含む(11214)。例えば、いくつかの実施形態において、図14F〜14Hに図示した動き特性の波形の様々な組み合わせが利用されるであろうと考えられる。いくつかの実施形態において、第1の種類の触知出力は、第1の支配的な動き成分(例えば、第1の触知出力の初衝撃に対応し、一切の意図されない共振を無視した動き)を含むタッチ感知面の動きによって生成される。いくつかの実施形態において、第2の種類の触知出力は、第2の支配的な動き成分(例えば、第2の触知出力の初衝撃に対応し、一切の意図されない共振を無視した動き)を含むタッチ感知面の動きによって生成される。いくつかの実施形態において、第1の支配的な動き成分及び第2の支配的な動き成分は同じ動き特性(例えば、方形波、正弦波、スクイン波(squine)、のこぎり波、若しくは三角波などの同じ波形、及び/又はほぼ同じ幅/周期)並びに異なる振幅を有する。例えば、図14Iは、異なる振幅11132−1及び11132−2を有する交互に入れ替わる方形波を有する動き特性の波形の例を図示している。
いくつかの実施形態において、交互に入れ替わる一連の触知出力は、異なる動き特性を有する第2の種類の触知出力と交互に入れ替わる第1の種類の触知出力を含む(11216)。例えば、いくつかの実施形態において、図14F〜14Hに図示した動き特性の波形の様々な組み合わせが利用されるであろうと考えられる。いくつかの実施形態において、第1の種類の触知出力は、第1の支配的な動き成分(例えば、第1の触知出力の初衝撃に対応し、一切の意図されない共振を無視した動き)を含むタッチ感知面の動きによって生成される。いくつかの実施形態において、第2の種類の触知出力は、第2の支配的な動き成分(例えば、第2の触知出力の初衝撃に対応し、一切の意図されない共振を無視した動き)を含むタッチ感知面の動きによって生成される。いくつかの実施形態において、第1の支配的な動き成分及び第2の支配的な動き成分は、異なる動き特性(例えば、方形波、正弦波、スクイン波(squine)、のこぎり波、若しくは三角波などの異なる波形、及び/又は異なる幅/周期)並びに同じ振幅を有する。例えば、図14Jは、同じ振幅を有し交互に入れ替わる方形波及びのこぎり波を有する動き特性の波形の例を図示している。
いくつかの実施形態において、デバイスは、時計の描画の上にあるフォーカスセレクタを検出している(11218)間に時計の描画の上にフォーカスセレクタを維持するフォーカスセレクタの動きを検出し(11220)、フォーカスセレクタの動きの検出に応じて、デバイスは規則的なパターンの周期を変更せずに時計に対応する触知フィードバックを提供し続ける(11222)。いくつかの実施形態において、規則的なパターンの触知出力の周期は、時計の描画の上にある間のフォーカスセレクタの動きに基づいて変化しない。例えば、これらの実施形態によれば、カーソル11104が図14C中の位置11104−bから図14D中の位置11104−cに移動した時に、触知フィードバック11110の周期は変化しない。
デバイスは、触知フィードバックを提供している間に時計の描画から遠ざかるフォーカスセレクタの動きを検出する(11224)。例えば、図14Eは、時計の描画11102から位置11104−dへと遠ざかりつつあるカーソル11104を示している。デバイスは、時計の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、時計に対応する触知フィードバックの提供を停止する(11226)。例えば、このことは図14D〜14Eに図示されている。図14Dでは、カーソル11104は時計の描画11102の上の位置11104−bにあり、デバイスが触知フィードバック11110を提供する。しかし、図14Eでは、カーソル11104は時計の描画11102から遠ざかって位置11104−dへ移動し、デバイスは触知フィードバック11110の生成を停止する。
図15A〜15Bにおける動作について記載された特定の順序は単なる例示あり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の再順序付けをするさまざまな方法を認識するであろう。さらに加えて、本明細書で説明される他の方法(例えば、パラグラフ[0058]で列挙されるもの)に関連して本明細書で説明される、他のプロセスの詳細もまた、図15A〜15Bに関連して上述された方法11200と類似の方式で適用可能であることに留意されたい。例えば、方法11200に関して上述した接触、フォーカスセレクタ、及び触知フィードバック(例えば、触知出力)は、必要に応じて、本明細書内で説明する他の方法を参照して本明細書内で説明する接触、フォーカスセレクタ、及び触知フィードバック(例えば、触知出力)の特徴(例えば、段落[0058]に列挙したもの)のうちの1つ以上を有する。簡潔にするため、これらの詳細はここでは繰り返さない。
いくつかの実施形態によれば、図16は、説明される様々な実施形態の原理に従って構成された、電子デバイス11300の機能ブロック図を示す。このデバイスの機能ブロックは、説明される様々な実施形態の原理を遂行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図16で説明される機能ブロックは、説明される様々な実施形態の原理を実施するために、任意選択的に組み合わされるか又はサブブロックに分離されることが、当業者によって理解されよう。それゆえ、本明細書での説明は、本明細書で説明される機能ブロックの、あらゆる可能な組み合わせ若しくは分離、又は更なる定義を、任意選択的にサポートする。
図16に示すように、電子デバイス11300は、時計の描画を表示するように構成された表示ユニット11302、タッチ感知面ユニット11304、及び表示ユニット11302及びタッチ感知面ユニット11304に結合された処理ユニット11306を含んでいる。いくつかの実施形態において、処理ユニットは、検出ユニット11308、表示可能化ユニット11310、フィードバックユニット11312、及び生成ユニット11314を含む。
処理ユニット11306は、時計の描画の上にあるフォーカスセレクタの動きを(例えば、検出ユニット11308を用いて)検出し、時計の描画の上にあるフォーカスセレクタを検出している間に、時計に対応しタッチ感知面ユニット上の規則的なパターンの触知出力を含む触知フィードバックを(例えば、フィードバックユニット11312を用いて)提供するように構成されている。処理ユニットは、触知フィードバックを提供している間に時計の描画から遠ざかるフォーカスセレクタの動きを(例えば、検出ユニット11308を用いて)検出し、時計の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、時計に対応する触知フィードバックの(例えば、フィードバックユニット11312を用いた)提供を停止するように、更に構成されている。
いくつかの実施形態において、規則的なパターンの触知出力内の触知出力は、(例えば、生成ユニット11314を用いて)等間隔で生成される。
いくつかの実施形態において、処理ユニット11306は、時計の描画の上にあるフォーカスセレクタを(例えば、検出ユニット11308を用いて)検出している間にフォーカスセレクタを時計の描画の上に維持するフォーカスセレクタの動きを(例えば、検出ユニット11308を用いて)検出し、フォーカスセレクタの動きの検出に応じて、規則的なパターンの周期を変更せずに時計に対応する触知フィードバックを(例えば、フィードバックユニット11312を用いて)提供し続けるように、更に構成されている。
いくつかの実施形態において、処理ユニット11306は、時計の描画の上にあるフォーカスセレクタを検出する前に、タッチ感知面ユニット上に時計に対応する触知フィードバックを提供せずに表示ユニット上に時計の描画を(例えば、表示可能化ユニット11310を用いて)表示するように、更に構成されている。
いくつかの実施形態において、タッチ感知面ユニット上の規則的なパターンの触知出力は、異なる出力特性を有する交互に入れ替わる一連の触知出力を含む。
いくつかの実施形態において、交互に入れ替わる一連の触知出力は第2の種類の触知出力と交互に入れ替わる第1の種類の触知出力を含み、第1の種類の触知出力は第1の支配的な動き成分を含むタッチ感知面ユニットの動きによって(例えば、生成ユニット11314を用いて)生成され、第2の種類の触知出力は第2の支配的な動き成分を含むタッチ感知面ユニットの動きによって(例えば、生成ユニット11314を用いて)生成され、第1の支配的な動き成分及び第2の支配的な動き成分は同じ動き特性及び異なる振幅を有する。
いくつかの実施形態において、交互に入れ替わる一連の触知出力は第2の種類の触知出力と交互に入れ替わる第1の種類の触知出力を含み、第1の種類の触知出力は(例えば、生成ユニット11314を用いた)第1の支配的な動き成分を含むタッチ感知面ユニットの動きによって生成され、第2の種類の触知出力は(例えば、生成ユニット11314を用いた)第2の支配的な動き成分を含むタッチ感知面ユニットの動きによって生成され、第1の支配的な動き成分及び第2の支配的な動き成分は異なる動き特性及び同じ振幅を有する。
上述の情報処理方法は、汎用プロセッサ(例えば、図1A及び3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実施される。
図15A〜15Bを参照して上記に説明した動作は、必要に応じて、図1A〜1B又は図16に示す構成要素によって実行される。例えば、検出動作11206、11220、及び11224、並びに触知フィードバック動作11208は、必要に応じて、イベントソータ170、イベント認識部180、及びイベントハンドラ190によって実行される。イベントソータ170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に渡す。アプリケーション136−1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と照会し、タッチ感知面上の第1の位置の第1の接触がユーザインタフェース上のオブジェクトの選択などの、既定のイベント又はサブイベントに対応するかどうかを判定する。それぞれの既定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連するイベントハンドラ190を起動させる。イベントハンドラ190は、アプリケーション内部状態192を更新するために、データアップデータ176若しくはオブジェクトアップデータ177を、任意選択的に利用するか又は呼び出す。いくつかの実施形態において、イベントハンドラ190は、アプリケーションにより表示されるものを更新するためのそれぞれのGUIアップデータ178にアクセスする。同様に、当業者にとって、他の処理が図1A〜1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
楽曲のビートに対応する触知フィードバックの提供
多くの電子デバイスは、楽曲の描画(例えば、楽曲のアルバムのカバーアートのグラフィック描画、楽曲が現在再生されていることを示す領域、又は楽曲に対応した楽譜のグラフィック描画内の楽曲の音符)を示すアプリケーションウィンドウを表示するグラフィカルユーザインタフェースを有する。例えば、メディアプレーヤのアプリケーションウィンドウ(例えば、オーディオプレーヤ又はビデオプレーヤ)は、必要に応じて、選択された楽曲に関する情報(例えば、名前、作曲家、アーティスト、関連付けられるアルバム、収録日、版元及び/又は楽曲の長さ)を提供する表示領域を含む。同様に、作曲アプリケーションのウィンドウは、必要に応じて、作曲中の楽曲の楽譜の対話型描画を表示し、ユーザが楽譜内に表示された音符を追加し、削除し、又は変更することによって楽曲を操作することを可能とする。音声要素及び視覚要素の両方を有するアプリケーション(例えば、音楽再生、作曲、ビデオ再生、又は映像合成のアプリケーション)に対応するアプリケーションウィンドウを含むユーザインタフェース環境の複雑さを考慮すると、ユーザがユーザインタフェース環境内をより効率よくかつ便利にナビゲートすることを可能とするフィードバックの提供が必要とされている。
下記に説明する実施形態は、複雑なユーザインタフェース環境をナビゲートするユーザに対するフィードバックを生成するための改良された方法及びユーザインタフェースを提供する。より具体的には、これらの方法及びユーザインタフェースは、ディスプレイ上に描画された楽曲のビートに対応するフィードバックを提供する。触知フィードバックが、楽曲のビートの感覚をユーザに提供する。このようにすれば、下記に述べる方法及びユーザインタフェースは、音声フィードバック及び/若しくは視覚フィードバックの代わりに、又はこれらに加えて触知フィードバックを提供することにより、ユーザが音楽のビートをより効率的かつ便利に理解し、加えてその楽曲を全体的により良く理解することを可能とする。例えば、いくつかの実施形態において、(例えば、視覚的な表示に添えるために、又は走っている間に聴くために)ある特定のビートの楽曲を探しているユーザは、ディスプレイ上の楽曲の描画の上にフォーカスセレクタを移動させ、 音楽を聴く必要なく音楽のビートに対応する触知フィードバックを受け取る。同様 に、いくつかの実施形態において、作曲中のユーザは、作曲中の楽曲の描画の上にフォーカスセレクタを移動させ、音楽のビートに対応する触知フィードバックを受け取り、作曲のプロセスをはかどらせる。
楽曲のビートを知覚するいくつかの方法は、ユーザが楽曲を聴き、自らビートを拾うことに依存する。楽曲のビートを知覚する他の方法は、ユーザが音楽のビートに対応する視覚的合図(例えば、ディスプレイ上のフラッシュ又はパルス)を検出することに依存する。しかし、電子デバイスの音量が下げられ又はミュートされ、可聴合図が効果的ではなくなる多くの状況が(例えば、職場で、劇場で、及び様々な社交的な状況で)存在する。都合 のよいことに、下記に説明する方法及びユーザインタフェースは、ユーザインタフェースオブジェクトが選択され及び/又はアクティブ化されたことを示す触知フィードバックを提供することにより、可聴を補足し又はこれに取って代わる。
図17A〜17Lは、いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供するための例示的なユーザインタフェースを図示している。これらの図のユーザインタフェースは、図18A〜18Bのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。図17A〜17B、図17G〜17I、及び図17K〜17Lは、接触検出強度閾値(例えば、「IT」)及び浅い押圧強度閾値(例えば、「IT」を含む複数の強度閾値に対するタッチ感知面上の接触の現在の強度を示す強度図を含んでいる。いくつかの実施形態において、ITを参照して下記に説明するものと同様の動作が、異なる強度閾値(例えば、「IT」)に関連して実行される。いくつかの実施形態において、下記に説明する動作は、接触の強度に左右されない。図17C、17E〜17G、及び17Jは、楽譜、及び触知出力生成イベント(例えば、楽曲のビートの選択又は再生)に応じてタッチ感知面上に生成される触知出力に対応する波形の振幅(例えば、大振幅「A」又は小振幅「A」)及び形状(例えば、方形波又はのこぎり波)を示す波形図を含んでいる。これらの楽譜及び波形図は、通常は表示されるユーザインタフェースの一部ではないが、図の理解を助けるために提供されている。
図17Aは、1つ以上のユーザインタフェースオブジェクトを表示する例示的なユーザインタフェース11408を図示しており、例えば、ユーザインタフェース11408は、楽曲の描画(例えば、音楽アルバムのカバーアートのグラフィック描画11406−1、11406−2、及び11406−3)を含むメディアプレーヤウィンドウ11402及びカーソル11404(例えば、表示されたフォーカスセレクタの描画)を表示している。図17Aでは、タッチ感知面451及びタッチ感知面との接触の強度を検出するための1つ以上のセンサをも併せて含む電子デバイスのディスプレイ450上に、ユーザインタフェース11408が表示されている。いくつ かの実施形態において、タッチ感知面451は、必要に応じてディスプレイ450であるタッチスクリーンディスプレイ、又は別個のディスプレイである。
いくつかの実施形態では、デバイスは、別個のディスプレイ(例えば、ディスプレイ450)及び別個のタッチ感知面(例えば、タッチ感知面451)を備える電子デバイスである。いくつかの実施形態では、デバイスは、ポータブル多機能デバイス100であり、ディスプレイは、タッチ感知ディスプレイシステム112であり、タッチ感知面は、ディスプレイ上に触知出力発生器167を含む(図1A)。説明の便宜上、図17A〜17O及び図18A〜18Bを参照して説明する実施形態については、ディスプレイ450及び別個のタッチ感知面451を参照して説明するが、必要に応じて、図17A〜17Oに示すユーザインタフェースをタッチ感知式ディスプレイシステム112上に表示している間に図17A〜17Oで説明するタッチ感知式ディスプレイシステム112上での接触の動きの検出に応じてタッチ感知式ディスプレイシステム112を備えたデバイス上で類似の動作が実行される。このような実施形態では、フォーカスセレクタは、必要に応じて、カーソル11404の代わりに、それぞれの接触、接触に対応する代表的な点(例えば、それぞれの接触の図心若しくはそれぞれの接触に関連付けられる点)、又はタッチ感知式ディスプレイシステム112上で検出される2つ以上の接触の図心である。
図17A〜17Gは、ユーザインタフェース11408がディスプレイ450上に楽曲の描画11406を表示する様々な実施形態を図示している。ユーザインタフェース11408はまた、タッチ感知面451上の接触11410及びその動き11412によって制御されるカーソル11404をも表示している。いくつかの実施形態において、カーソル11404は、楽曲の描画11406の上に移動し、これに応じて、触知生成器167 が楽曲のビートの少なくともサブセット(例えば、ビート11418)に対応する触知フィードバック(例えば、触知出力11414)を提供する。いくつかの実施形態において、カーソル11404は、触知フィードバックが提供された後に楽曲の描画11406から遠ざかるように移動し、これに応じて、触知生成器167 は楽曲のビートに対応する触知フィードバックの提供を停止する。
図17A〜17Gは、ディスプレイ450上に表示されたカーソル11404に対応する接触11410及び接触11410の動き11412を含むジェスチャ(例えば、図17A中の位置11410−aから図17B〜17F中の位置11410−bまでの接触11410の動き11412−a、及び/又は図17B〜17F中の位置11410−bから図17G中の位置11410−cまでの接触11410の動き11412−b)がタッチ感知面451上で検出されることを図示している。フォーカスセレクタ11404が占めるディスプレイ450上のエリアに対応するタッチ感知面451上の位置で接触11410が検出されている(例えば、接触11410は、ユーザインタフェースオブジェクト11402の位置又はその付近にあるカーソル11404のようなディスプレイ上のフォーカスセレクタに対応する)。いくつかの実施形態において、タッチ感知面451上の接触11410の動きは、(例えば、図17A〜17Gに図示したような)ディスプレイ450上のフォーカスセレクタ(例えば、カーソル11404)の動きに対応する。
図17A〜17Fは、ディスプレイ450上のカーソル11404に対応するタッチ感知面451上の接触11410の動き11412−aに従って、カーソル11404が楽曲の描画11406の上に移動するジェスチャの開始の様々な例を図示している。図17B〜17Fでは、デバイスは、フォーカスセレクタ11404が楽曲の描画11406の上に留まっている間、楽曲のビートのサブセット(例えば、図17C〜17Fに示すビート11418)に対応した触知出力11414を(例えば、触知出力発生器167を用いて)生成する。
いくつかの実施形態において、図17A〜17Gに図示したように、(例えば、メディアプレーヤのアプリケーションウィンドウ11402として図示した)メディアプレーヤアプリケーション内で楽曲が再生されている。いくつかの実施形態において、図17A〜17Gに図示したように、楽曲の描画は、楽曲のグラフィック描画(例えば、その楽曲のアルバムに対応するカバーアートの画像11406)である。
図17C〜17Fは、メディアプレーヤのアプリケーションウィンドウ11402内に楽曲の描画11406が表示されており、これに対応するビートのサブセット(例えば、楽曲11416のビート全体のサブセット)のビート(例えば、図17C〜17F中のビート11418−1、11418−3、11418−5、及び11418−7)がメディアプレーヤアプリケーションによって再生される時に触知フィードバック(例えば、図17C〜17F中の触知出力11414−1、11414−3、11514−5、及び11414−7)が生成される、様々な実施形態を図示している。図17C〜17Fはまた、ビートのサブセット(例えば、ユーザに提供される触知フィードバックに対応するビート)が楽曲の1番目(例えば、ビート11418−1)、3番目(例えば、ビート11418−3)、5番目(例えば、ビート11418−5)、及び7番目(例えば、ビート11418−7)のビートを含む1つおきのビートに強ビートを含む、様々な実施形態をも図示している。
図17Cは、ビートのサブセットが、楽曲(例えば、楽曲11416)の2番目(例えば、ビート11418−2)、4番目(例えば、ビート11418−4)、6番目(例えば、ビート11418−6)、及び8番目(例えば、ビート11418−8)のビートを含む弱ビートを除外する実施形態を図示している。これに対して、下記に説明する図17D〜17Fは、ビートのサブセットが、楽曲の強ビート(例えば、各奇数ビート11418)及び弱ビート(例えば、各偶数ビート11418)を含む様々な実施形態を図示している。図17Dは、強ビートに対応するか又は弱ビートに対応するかに拘わらず、触知出力11414が実質的に同じである実施形態を図示している。これに対して、下記に説明する図17E〜17Fは、強ビート(例えば、奇数番号ビート11418)に対応する第1の触知出力11414が弱ビート(例えば、偶数番号ビート11418)に対応する第2の触知出力11414と大きく異なる、様々な実施形態を図示している。
例えば、図17Eは、強ビート11418に対応する第1の触知出力11414が楽曲の弱ビート11418に対応する第2の触知出力11414と同じ又は実質的に同じ振幅(例えば、大振幅「A」)を有するが、大きく異なる動き特性(例えば、のこぎり波形11434に対して方形波形11436) を有する実施形態を図示している。これに対して、図17Fは、強ビート11418に対応する第1の触知出力がその楽曲の弱ビート11418に対応する第2の触知出力11414と大きく異なる振幅(例えば、小振幅「A」に対して大振幅「A」)を有するが、実質的に同じ動き特性(例えば、方形波形11434)を有する実施形態を図示している。
図17B〜17Gは、デバイスが、図17B〜17Fに示すように触知フィードバックを提供した後に、楽曲の描画11406から遠ざかるカーソル11404の動きに対応するタッチ感知面451上の接触11410の動き11412−bを検出する、様々な実施形態を図示している。図17Gに図示したように、触知生成器167 は、楽曲の描画11406から遠ざかるカーソル11404の動きに応じて、楽曲のビートに対応する触知出力11414の提供を停止する。
図17H〜17Lは、ユーザインタフェース11408が、楽譜の描画11424を含む作曲アプリケーションのウィンドウ11422をディスプレイ450上に表示する、様々な実施形態を図示している。ユーザインタフェース11408はまた、タッチ感知面451上の接触11426及びその動き11428によって制御されるカーソル11404をも表示している。いくつかの実施形態において、カーソル11404は、楽譜の描画11424の上に移動し、これに応じて、触知生成器167 が楽曲のビートの少なくともサブセット(例えば、ビート11418)に対応する触知フィードバック(例えば、触知出力11414)を提供する。いくつかの実施形態において、カーソル11404は、触知フィードバックが提供された後に楽譜の描画11424から遠ざかるように移動し、これに応じて、触知生成器167 は楽曲のビートに対応する触知フィードバックの提供を停止する。
いくつかの実施形態において、図17I〜17Jに図示したように、楽譜の描画11424の上にあるカーソル11404の動きは、タッチ感知面451上の接触11426の動き11428−aに従って、作曲アプリケーションによって楽曲(例えば、作曲)が再生されている間、メディアアプリケーションによってビートが再生される時に楽曲のビート11418に対応する触知出力11414の生成をもたらす。図17Jは強ビート11418に対応する第1の触知出力11414(例えば、それぞれ奇数番号の触知出力11414及びビート11418)及び弱ビート11418に対応する第2の触知出力11414(例えば、それぞれ偶数番号の触知出力11414及びビート11418)が大きく異なって感じられる(例えば、大きく異なる振幅を有するが、同じ又は実質的に同じ方形波形の動き特性を有する)ことを図示しているものの、いくつかの実施形態では、第1の触知出力及び第2の触知出力は、実質的に同じ振幅及び動き特性で生成され、したがって、これらはユーザにとって実質的に同じに感じられる。いくつかの実施形態において、弱ビートに対応する第2の触知出力は除外される(例えば、デバイスによって生成されない)。
いくつかの実施形態において、図17K〜17Lに図示したように、楽譜11424内の対応するビート11418−3の描画11430−3の上にあるカーソル11404の動きは、タッチ感知面451上の接触11426の動き11428−cに従って、触知フィードバック(例えば、触知出力11414−3)の生成をもたらす。例えば、図17Kは、カーソル11404が、タッチ感知面451上の位置11426−1から位置11246−3までの接触11426の動き11428−bに従って、ディスプレイ450上の楽譜の描画11424の上に移動し、カーソルが楽曲のビートの描画に対応しない位置に表示されているので、触知フィードバックが生成されない、実施形態を図示している。これに対して、図17Lに図示したように、タッチ感知面451上の位置11426−3から位置11426−d までの接触11426の動き11428−cに従って、カーソル11404は、楽譜の描画11424内のビート11418−3の描画11430−3の上に移動し、楽曲の楽譜の描画11424に対応する音楽が作曲アプリケーションによって同時に再生中であるか否かに拘わらず、タッチ感知面451上に触知フィードバック(例えば、触知11414−3)が生成される。
図17M〜17Oは、これらの触知出力を生成するための動き特性の波形の例を図示している。図17Mは、のこぎり波形11434を図示している。図17Nは方形波形11436を図示しており、図17Oは図17Fの方形波形よりも小さな振幅を有する方形波形11438を図示している。のこぎり波形11434は、方形波形11436及び11438とは異なる動き特性並びに方形波11436と実質的に同じ振幅を有している。方形波形11436は、方形波形11438と実質的に同じ動き特性及び大きく異なる振幅を有している。
図18A〜18Bは、いくつかの実施形態に係る、楽曲のビートに対応するフィードバックを提供する方法11500を図示したフローチャートである。方法11500は、ディスプレイ及びタッチ感知面を備えた電子デバイス(例えば、図3中のデバイス300又は図1A中のポータブル多機能デバイス100)において実行される。いくつかの実施形態において、ディスプレイはタッチスクリーンディスプレイであり、タッチ感知面がディスプレイ上にある。いくつかの実施形態において、ディスプレイはタッチ感知面から分離している。方法11500での一部の動作は、任意選択的に組み合わされ、かつ/又は、一部の動作の順序は、任意選択的に変更される。
下記に説明するように、方法11500は、楽曲のビートに対応するフィードバックを提供するための直感的な方法を提供する。この方法は、楽曲のビートに対応するフィードバックを検出する時にユーザにかかる認識負担を軽減することで、より効率的なヒューマンマシンインタフェースを作る。電池駆動式電子デバイスの場合、ユーザが楽曲のビートに対応するフィードバックをより速くかつより効率的に検出することを可能とすることにより、電力が節約され、電池充電の時間間隔が延びる。
いくつかの実施形態において、デバイスは、ディスプレイ(例えば、図17A〜17L中のディスプレイ450)上に楽曲の描画(例えば、図17A〜17G中の楽曲に対応するカバーアートの描画11406又は図17H〜17L中の楽曲に対応する楽譜の描画11424)を表示する(11502)。いくつかの実施形態において、楽曲(例えば、図17C〜17F及び図17J中の音楽11416)がメディアプレーヤアプリケーション(例えば、図17A〜17G中のメディアプレーヤのアプリケーションウィンドウ11402)内で再生され(11504)、楽曲の描画は、楽曲のグラフィック描画(例えば、図17A〜17G中の楽曲のアルバムのカバーアートの描画11406)である。いくつかの実施形態において、楽曲の描画は、楽曲のアルバムのカバーアート(例えば、描画11406)である。いくつかの実施形態において、楽曲の描画は、楽曲の名前及び再生時間を含むメディアプレーヤアプリケーションの「只今再生中」の領域(例えば、メディアプレーヤのアプリケーションウィンドウ11402の領域11420)である。
いくつかの実施形態において、デバイスが楽曲の描画を表示している間、デバイスは、楽曲の描画の上にあるフォーカスセレクタ(例えば、図17A〜17L中のカーソル11404)の動きを検出する(11506)。
いくつかの実施形態において、デバイスは、楽曲の描画の上にあるフォーカスセレクタを検出している間、楽曲(例えば、図17C〜17F及び17J中の楽曲11416)のビート(例えば、図17C〜17F及び17J中のビート11418)の少なくともサブセットに対応する触知フィードバック(例えば、図17B〜17F、17I〜17J、及び17L中の触知出力11414)を提供する(11508)。いくつかの実施形態において、楽曲の描画は、音符(例えば、楽譜)の描画である。いくつかの実施形態において、楽曲の描画は、楽曲に対応する視覚媒体(例えば、画像、ビデオ、楽曲若しくは楽曲を含むアルバム/ビデオのテキスト記述、又は楽曲に関連付けられるオーディオビジュアライザ)を含む。例えば、フォーカスセレクタ(例えば、表示されているカーソル又は接触)が楽曲のアルバムのカバーの上、楽曲の作曲家若しくはアーティストの画像の上、又は現在再生中の音声コンテンツである楽曲を含む現在再生中のビデオ(例えば、映画のバックグラウンドミュージック若しくはミュージックビデオの音楽)の上にある間に楽曲に対応する触知フィードバックが生成される。
いくつかの実施形態において、デバイスは、触知フィードバックを提供した後に、楽曲の描画から遠ざかるフォーカスセレクタの動き(例えば、図17G中のタッチ感知面451上の接触11410−cの動き11412−bに対応するカーソル11404の動き)を検出する(11528)。
いくつかの実施形態において、デバイスは、楽曲の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、楽曲のビートに対応する触知フィードバック(例えば、触知出力11414)の提供を停止する(11530)。
いくつかの実施形態において、フォーカスセレクタ(例えば、図17A〜17L中のカーソル11404)はタッチ感知面(例えば、タッチ感知面451)上の接触(例えば、図17A〜17G中の接触11410又は図17H〜17L中の接触11426)の動き(例えば、図17A〜17G中の動き11412又は図17H〜17L中の動き11428)に従って移動し(11510)、触知フィードバックは、タッチ感知面上の触知出力(例えば、図17B〜17F、図17I〜17J、及び17L中の触知出力11414)の生成によって提供される。いくつかの実施形態において、接触は、フォーカスセレクタである(例えば、デバイスがタッチスクリーンを有する場合、フォーカスセレクタは、必要に応じて、接触11410である)。いくつかの実施形態において、接触は、ディスプレイ上に表示されているカーソル又は選択ボックスに対応する。
いくつかの実施形態において、楽曲の描画(例えば、図17A〜17G中の楽曲のアルバムのカバーアートの描画11406)はメディアプレーヤアプリケーション(例えば、図17A〜17G中のメディアプレーヤのアプリケーションウィンドウ11402)内に表示され(11512)、触知フィードバックは、ビートのサブセット内の対応するビート(例えば、ビート11418)がメディアプレーヤアプリケーションによって再生される時に生成される複数の触知出力(例えば、触知出力11414)を含む(例えば、タッチ感知面が、メディアプレーヤアプリケーション内で再生中の音楽に合わせて触知出力を生成する)。
いくつかの実施形態において、楽曲の描画は、作曲アプリケーション(例えば、図17H〜17L中の作曲アプリケーションのウィンドウ11422)に楽譜(例えば、図17H〜17L中の楽曲の楽譜の描画11424)として表示される(11514)。例えば 、楽曲に対応する楽譜の描画(例えば、楽譜の描画11424)内の楽曲(例えば音楽11416)の音符の描画(例えば、図17H〜17L中の楽曲11416のビート11418−9 で再生される音符に対応する黒いバー11430−9)を表示することにより、
いくつかの実施形態において、楽曲の描画が作曲アプリケーション内の楽譜として表示される一方、触知フィードバックは、フォーカスセレクタが楽譜内のビートのサブセット内の対応するビート(例えば、図17L中の垂直線11432−3又はビートの描画11430−3として描画されているビート11418−3)の描画の上に移動した時に生成される複数の触知出力(例えば、触知出力11414)を含む(11516)。いくつかの実施形態において、フォーカスセレクタは、タッチ感知面上の接触の動き(例えば、図17K〜17L中のタッチ感知面451上の接触11426の動き11428−c)に従って移動し、したがって、触知出力(例えば、触知出力11414)はタッチ感知面上の接触の動きに従って生成される。
いくつかの実施形態において、ビートのサブセット(例えば、ビート11418)は、楽曲の中の強ビート(例えば、図17C〜17F及び17J中の楽曲11416の中の偶数番号のビート11418)を含む(11518)。いくつかの実施形態において、ビートとは、音楽の拍子の基本単位(例えば、4/4拍子記号を有する楽曲の中の4分音符又は6/8拍子記号を有する楽曲の中の8分音符)のことであって、強ビートとは、複数のビートのうちのより強く、より大きな音で、あるいは別の方法でより強調されたビートのことである。いくつかの典型的なビートのパターンとしては、(例えば、4/8拍子記号を有する音楽で一般的に行われるような)4ビート毎に強調するもの、(例えば、4/4拍子記号を有する音楽で一般的に行われるような)1つおきのビート毎に強調するもの、又は(例えば、ワルツのように3/4若しくは6/8拍子記号を有する音楽で一般的に行われるような)3ビート毎に強調するものなどが挙げられる。強調されていないビートは、弱ビートと呼ばれることもある。いくつかの実施形態において、ビートとは、音楽の拍子の基本単位の副単位(例えば、4/4又は3/4拍子記号を有する音楽の中の8分音符)のことである。
いくつかの実施形態において、ビートのサブセットは、楽曲の弱ビートを除外する(11520)。例えば、図17Cに図示したように、ビート11418のサブセットは強ビート(例えば、奇数番号のビート11418)を含むが弱ビート(例えば、偶数番号のビート11418)を除外し、触知出力11414は強ビートのみに対応して生成される。
いくつかの実施形態において、楽曲の描画の上にあるフォーカスセレクタを検出している間に楽曲のビートの少なくともサブセットに対応する触知フィードバックが提供される場合(11508)、ビートのサブセットは1つ以上の強ビート(例えば、奇数番号のビート11418)及び1つ以上の弱ビート(例えば、偶数番号の11418)を含み(11522)、触知フィードバックはビートのサブセット内の対応するビートに関する複数の触知出力(例えば、触知出力11414)を含み、第1の触知出力は強ビートに関して生成され、第1の触知出力とは異なる第2の触知出力は弱ビートに関して生成される(例えば、図17E〜17F及び17J中に描画されているように、偶数番号の触知出力11414及び奇数番号の触知出力11414は、ユーザにとって大きく異なって感じられる)。これに対して、いくつかの実施形態では、強ビートに対応する第1の触知出力及び弱ビートに対応する第2の触知出力は、実質的に同じである(例えば、図17Dに描画されているように、奇数番号の強ビート11418に対応する奇数番号の触知出力11414及び偶数番号の弱ビート11418に対応する偶数番号の触知出力11414は、ユーザにとって実質的に同じであると感じられる)。いくつかの実施形態において、第1の触知出力は、第2の触知出力よりも顕著である(例えば、より大きな振幅を有する)。いくつかの実施形態において、第2の触知出力は、第1の触知出力よりも顕著である(例えば、より大きな振幅を有する)。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面の動きによって生成され(11524)、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面の動きによって生成され、第1の支配的な動き成分及び第2の支配的な動き成分は同じ又は実質的に同じ振幅(例えば、図17E中の全ての触知出力11414の大振幅A)及び大きく異なる動き特性(例えば、図17E中の奇数番号の触知出力11414の方形波形11436及び偶数番号の触知出力11414ののこぎり波形11434 )を有する。いくつかの実施形態において、タッチ感知面の動きは、一切の意図されない共振を無視した初衝撃に対応する。いくつかの実施形態において、動き特性は、それらの波形形状(例えば方形波、正弦波、スクイン波(squine)、三角波、若しくはのこぎり波の形状)、波形のパルス幅、及び/又は波形のパルス周期(例えば、周波数)において異なる。例えば 、図17Eに図示したように、音楽の強ビートに対応してタッチ感知面上に生成される「デテント」(detent)は方形波形の動き特性(例えば、図17E中の奇数番号の触知出力11414の方形波形11436)を有する一方で、音楽の弱ビートに対応してタッチ感知面上に生成される「クリック」はのこぎり波形の動き特性(例えば、図17E中の偶数番号の触知出力11414のこぎり波形11434)を有し、その逆もまた然りである。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面の動きによって生成され(11526)、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面の動きによって生成され、第1の支配的な動き成分及び第2の支配的な動き成分は、同じ又は実質的に同じ動き特性(例えば、図17F及び17J中の奇数番号の触知出力11414の方形波形11434及び偶数番号の触知出力11414の方形波形11436)並びに大きく異なる振幅(例えば、図17F及び17J中の奇数番号の触知出力11414の大振幅Aは、偶数番号の触知出力11414の小振幅Aよりも大きい)を有する。いくつかの実施形態において、タッチ感知面の動きは、一切の意図されない共振を無視した初衝撃に対応する。いくつかの実施形態において、動き特性は、それらの波形形状(例えば方形波、正弦波、スクイン波(squine)、若しくはのこぎり波の形状)、波形のパルス幅、及び/又は波形のパルス周期(例えば、周波数)において異なる。例えば、図17F及び17Jに図示したように、音楽の強ビートに対応してタッチ感知面上に生成される「デテント」は、音楽の弱ビートに対応してタッチ感知面上に生成される「デテント」よりも大きな振幅を有し(例えば、図17F及び17J中の偶数番号の触知出力11414の大振幅Aは、図17F及び17J中の偶数番号の触知出力11414の小振幅Aよりも大きく)、その逆もまた然りである。
いくつかの実施形態において、デバイスは、触知フィードバックを提供した後に、楽曲の描画から遠ざかるフォーカスセレクタの動きを検出する(11528)。例えば、図17Gに図示したように、楽曲の描画11406から遠ざかるカーソル11404の動きに対応するタッチ感知面451上での位置11410−bから位置11410−cまでの接触1410の動き11412−bの検出に従って、
いくつかの実施形態において、デバイスは、楽曲の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、楽曲のビートに対応する触知フィードバックの提供を停止する(11530)。例えば、図17Gに図示したように、カーソル11404が楽曲の描画11406から遠ざかると、カーソルはもはや楽曲の描画の上には位置していないので、触知出力発生器167はタッチ感知面451上の触知出力11414の生成を停止する。
図18A〜18Bにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書で説明される動作の再順序付けをするさまざまな方法を認識するであろう。更に、本明細書内で説明する他の方法に関して本明細書内で説明する他のプロセスの詳細(例えば、段落[0058]に列挙したもの)もまた、類似の方法で、図18A〜18Bに関して上記に説明した方法11500に適用することができる。例えば、方法11500を参照して上記に説明した接触、ジェスチャ、ユーザインタフェースオブジェクト、触感覚、及びフォーカスセレクタは、必要に応じて、本明細書内で説明する他の方法を参照して本明細書内で説明する接触、ジェスチャ、ユーザインタフェースオブジェクト、触感覚、及びフォーカスセレクタの特徴(例えば、段落[0058]で列挙したもの)のうちの1つ以上を有する。簡潔にするため、これらの詳細はここでは繰り返さない。
いくつかの実施形態に従って、図19は、説明した様々な実施形態の原理に従って構成された電子デバイス11600の機能ブロック図を示している。このデバイスの機能ブロックは、説明される様々な実施形態の原理を遂行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択的に実装される。図19で説明される機能ブロックは、説明される様々な実施形態の原理を実施するために、任意選択的に組み合わされるか又はサブブロックに分離されることが、当業者によって理解されよう。それゆえ、本明細書での説明は、本明細書で説明される機能ブロックの、あらゆる可能な組み合わせ若しくは分離、又は更なる定義を、任意選択的にサポートする。
図19に示すように、電子デバイス11600は、1つ以上のユーザインタフェースオブジェクトを表示するように構成された表示ユニット11602、ユーザによる接触を受けるように構成されたタッチ感知面ユニット11604、必要に応じて、タッチ感知面ユニット11604との接触の強度を検出するように構成された1つ以上のセンサユニット11606、並びに表示ユニット11602、タッチ感知面ユニット11604、及び必要に応じて1つ以上のセンサユニット11606に結合された処理ユニット11608を含んでいる。いくつかの実施形態において、処理ユニット11608は、表示可能化ユニット11610、検出ユニット11612、提供ユニット11614、及び停止ユニット11616を含む。
いくつかの実施形態において、処理ユニット11608は、表示ユニット11602上の楽曲の描画の表示を(例えば、表示可能化ユニット11610を用いて)可能とするように構成されている。いくつかの実施形態において、処理ユニット11608は、楽曲の描画の上にあるフォーカスセレクタの動きを(例えば、検出ユニット11612を用いて)検出するように構成されており、処理ユニット11608は、楽曲の描画の上にあるフォーカスセレクタを検出している間に楽曲のビートの少なくともサブセットに対応する触知フィードバックを(例えば、提供ユニット11614を用いて)提供するように構成されている。いくつかの実施形態において、処理ユニット11608は、触知フィードバックを提供した後に、楽曲の描画から遠ざかるフォーカスセレクタの動きを(例えば、検出ユニット11612を用いて)検出するように構成されており、処理ユニット11608は、楽曲の描画から遠ざかるフォーカスセレクタの動きの検出に応じて、(例えば、停止ユニット11616を用いて)楽曲のビートに対応する触知フィードバックの提供を停止するように構成されている。
いくつかの実施形態において、処理ユニット11608は、タッチ感知面ユニット11604上の接触の動きに従ってフォーカスセレクタの動きの表示を(例えば、表示可能化ユニット11610を用いて)可能とするように構成されており、タッチ感知面ユニット1604上に触知出力を(例えば、提供ユニット11614を用いて)生成することにより、触知フィードバックが提供される。
いくつかの実施形態において、現在、メディアプレーヤアプリケーション内で楽曲が再生中であり、楽曲の描画は楽曲のグラフィック描画である。
いくつかの実施形態において、処理ユニット11608はメディアプレーヤアプリケーション内で楽曲の描画を(例えば、表示可能化ユニット11610を用いて)表示するように構成されており、触知フィードバックはメディアプレーヤアプリケーションによってビートのサブセット内の対応するビートが再生される時に生成される複数の触知出力を含む。
いくつかの実施形態において、処理ユニット11608は、作曲アプリケーション内で楽曲の描画を楽譜として(例えば、表示可能化ユニット11610を用いて)表示するように構成されている。
いくつかの実施形態において、触知フィードバックは、フォーカスセレクタが楽譜内のビートのサブセット内の対応するビートの描画の上に移動した時に生成される複数の触知出力を含む。
いくつかの実施形態において、ビートのサブセットは、楽曲の強ビートを含む。
いくつかの実施形態において、ビートのサブセットは、楽曲の弱ビートを除外する。
いくつかの実施形態において、ビートのサブセットは1つ以上の強ビート及び1つ以上の弱ビートを含み、触知フィードバックはビートのサブセット内の対応するビートに関する複数の触知出力を含み、処理ユニット11608は強ビートに関する第1の触知出力を(例えば、提供ユニット11614を用いて)生成するように構成されており、処理ユニット11608は第1の触知出力とは異なる弱ビートに関する第2の触知出力を(例えば、提供ユニット11614を用いて)生成するように構成されている。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面ユニット11604の動きによって生成され、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面ユニット11604の動きによって生成され、第1の支配的な動き成分及び第2の支配的な動き成分は同じ振幅及び異なる動き特性を有する。
いくつかの実施形態において、第1の触知出力は第1の支配的な動き成分を含むタッチ感知面ユニット11604の動きによって生成され、第2の触知出力は第2の支配的な動き成分を含むタッチ感知面ユニット11604の動きによって生成され、第1の支配的な動き成分及び第2の支配的な動き成分は同じ振幅及び異なる動き特性を有する。
上述の情報処理方法は、汎用プロセッサ(例えば、図1A及び3に関連して上述されたようなもの)又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを稼働することによって、任意選択的に実施される。
図18A〜18Bを参照して上述された動作は、図1A〜1B、又は図19に示される構成要素によって、任意選択的に実施される。例えば、検出動作11506及び11528、並びに提供動作11508は、必要に応じて、イベントソータ170、イベント認識部180、及びイベントハンドラ190によって実行される。イベントソータ170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に渡す。アプリケーション136−1のそれぞれのイベント認識部180は、イベント情報をそれぞれのイベント定義186と比較し、タッチ感知面451上の第1の位置での第1の接触がユーザインタフェース上のオブジェクトの選択又はユーザインタフェース上の楽曲の描画の上にあるフォーカスセレクタの表示などの定義済みのイベント又はサブイベントに対応するかを判定する。それぞれの既定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連するイベントハンドラ190を起動させる。イベントハンドラ190は、アプリケーション内部状態192を更新するために、データアップデータ176若しくはオブジェクトアップデータ177を、任意選択的に利用するか又は呼び出す。いくつかの実施形態において、イベントハンドラ190は、アプリケーションにより表示されるものを更新するためのそれぞれのGUIアップデータ178にアクセスする。いくつかの実施形態において、イベントハンドラ190は、それぞれの触知出力発生器167をアクセスして触知出力を生成する。同様に、当業者にとって、他の処理が図1A〜1Bに示される構成要素に基づいてどのように実施されるかは明らかであるだろう。
これらの動作が上述されている特定の順序は、単なる例示であり、説明される順序が、それらの動作を実行することが可能な唯一の順序であることを示すことを、意図するものではない点を理解されたい。当業者であれば、本明細書で説明される動作の再順序付けをするさまざまな方法を認識するであろう。さらに加えて、本明細書で別個に説明される様々なプロセス(例えば、パラグラフ[0058]で列挙されるもの)は、種々の構成で互いに組み合わせることができる点に留意されたい。例えば、本明細書で別個に説明される様々なプロセス(例えば、パラグラフ[0058]で列挙されるもの)のうちのいずれか1つを参照して上述された、接触、ユーザインタフェースオブジェクト、触感覚、強度しきい値、及び/又はフォーカスセレクタは、本明細書で説明される他の方法(例えば、パラグラフ[0058]で列挙されるもの)のうちの1つ以上を参照して本明細書で説明された、接触、ジェスチャ、ユーザインタフェースオブジェクト、触感覚、強度しきい値、及びフォーカスセレクタの特性のうちの1つ以上を、任意選択的に有する。簡潔性のために、本明細書では、様々な可能な組み合わせの全てを具体的に列挙することはないが、上述の特許請求の範囲は、相互排他的な特許請求の範囲の特長によって排除されない任意の方式で組み合わせることができる点を理解されたい。
上述の記載は、説明の目的のために、特定の実施形態を参照して記載されている。しかしながら、上記の例示的な論考は、網羅的であること、又は、説明される様々な実施形態を、開示される厳密な形態に限定することを意図するものではない。多くの変更及び変形が上述の教示に鑑みて可能である。これらの実施形態は、説明される様々な実施形態、及びそれらの実際の適用を最も良好に説明するために、またそれにより、他の当業者が、想到される具体的な用途に適するような様々な修正を使用して、その説明される様々な実施形態を最も良好に利用することを可能にするために、選択及び説明されたものである。

Claims (24)

  1. 方法であって
    タッチ感知面及びディスプレイを備え、前記タッチ感知面上に触知出力を生成するように構成された電子デバイスにおいて、
    前記ディスプレイ上にユーザインタフェースオブジェクトを表示することと、
    前記タッチ感知面上の接触を検出することと、
    前記ユーザインタフェースオブジェクト上での動作の実行に対応する、前記タッチ感知面を横切る前記接触の第1の動きを検出することと、
    前記第1の動きの検出に応じ
    前記第1の動きに対応する動作を実行すること、及び
    前記タッチ感知面上に、前記動作の実行を示すフィードバックを与える第1の触知出力を生成することと、
    前記第1の動きの検出の後に、前記ユーザインタフェースオブジェクト上での前記実行された動作の反転に対応する、前記タッチ感知面を横切る前記接触の第2の動きを検出することと、
    前記第2の動きの検出に応じ
    前記第1の動きの終了と前記第2の動きの開始との間の期間が事前に規定された時間閾値よりも大きいという判定に従って、
    前記実行された動作を反転すること、及び
    前記タッチ感知面上に、前記実行された動作の反転を示すフィードバックを与える第2の触知出力を生成することと、
    前記第1の動きの終了と前記第2の動きの開始との間の期間が前記事前に規定された時間閾値よりも小さいという判定に従って、前記タッチ感知面上に前記第2の触知出力を生成せずに、前記実行された動作を反転することと
    を含む、方法。
  2. 前記タッチ感知面を横切る前記接触の前記第1の動き及び前記タッチ感知面を横切る前記接触の前記第2の動きは、前記タッチ感知面からの前記接触のリフトオフを検出せずに実行される単一の連続したジェスチャの一部である、請求項1に記載の方法。
  3. 前記動作を実行することが、前記ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドの中に取り付けることを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すことを含む、請求項1又は2に記載の方法。
  4. 前記動作を実行することが、前記ユーザインタフェースオブジェクトに対応するデータを削除の対象としてマーキングすることを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトに対応する前記データから削除の対象とするマーキングを外すことを含む、請求項1又は2に記載の方法。
  5. 前記ユーザインタフェースオブジェクトがファイルに対応し、
    前記動作を実行することが、前記ファイルをディレクトリに入れることを含み、
    前記動作を反転することが、前記ファイルを前記ディレクトリから取り出すことを含む、請求項1又は2に記載の方法。
  6. 前記ユーザインタフェースオブジェクトがアプリケーションに対応し、
    前記動作を実行することが、前記ユーザインタフェースオブジェクトをアプリケーション起動領域の中に配置することを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトを前記アプリケーション起動領域から取り出すことを含む、請求項1又は2に記載の方法。
  7. 前記第1の触知出力が第1の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第2の触知出力が第2の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第1の動きパターン及び前記第2の動きパターンが同じ動き特性及び異なる振幅を有する、請求項1乃至6のいずれか一項に記載の方法。
  8. 前記第1の触知出力が第1の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第2の触知出力が第2の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第1の動きパターン及び前記第2の動きパターンが異なる動き特性及び同じ振幅を有する、請求項1乃至6のいずれか一項に記載の方法。
  9. ィスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、を備え、前記タッチ感知面上に触知出力を生成するように構成された電子デバイスであって、前記1つ以上のプログラムは、前記メモリに記憶され、前記1つ以上のプロセッサによって実行されるように構成され、前記1つ以上のプログラムは、
    前記ディスプレイ上にユーザインタフェースオブジェクトを表示することと、
    前記タッチ感知面上の接触を検出することと、
    前記ユーザインタフェースオブジェクト上での動作の実行に対応する、前記タッチ感知面を横切る前記接触の第1の動きを検出することと、
    前記第1の動きの検出に応じ
    前記第1の動きに対応する動作を実行すること、及び
    前記タッチ感知面上に、前記動作の実行を示すフィードバックを与える第1の触知出力を生成することと、
    前記第1の動きの検出の後に、前記ユーザインタフェースオブジェクト上での前記実行された動作の反転に対応する、前記タッチ感知面を横切る前記接触の第2の動きを検出することと、
    前記第2の動きの検出に応じ
    前記第1の動きの終了と前記第2の動きの開始との間の期間が事前に規定された時間閾値よりも大きいという判定に従って、
    前記実行された動作を反転すること、及び
    前記タッチ感知面上に、前記実行された動作の反転を示すフィードバックを与える第2の触知出力を生成することと、
    前記第1の動きの終了と前記第2の動きの開始との間の期間が前記事前に規定された時間閾値よりも小さいという判定に従って、前記タッチ感知面上に前記第2の触知出力を生成せずに、前記実行された動作を反転することと
    のための命令を含む、電子デバイス。
  10. 前記タッチ感知面を横切る前記接触の前記第1の動き及び前記タッチ感知面を横切る前記接触の前記第2の動きは、前記タッチ感知面からの前記接触のリフトオフを検出せずに実行される単一の連続したジェスチャの一部である、請求項9に記載の電子デバイス。
  11. 前記動作を実行することが、前記ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドの中に取り付けることを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すことを含む、請求項9又は10に記載の電子デバイス。
  12. 前記動作を実行することが、前記ユーザインタフェースオブジェクトに対応するデータを削除の対象としてマーキングすることを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトに対応する前記データから削除の対象とするマーキングを外すことを含む、請求項9又は10に記載の電子デバイス。
  13. 前記ユーザインタフェースオブジェクトがファイルに対応し、
    前記動作を実行することが、前記ファイルをディレクトリに入れることを含み、
    前記動作を反転することが、前記ファイルを前記ディレクトリから取り出すことを含む、請求項9又は10に記載の電子デバイス。
  14. 前記ユーザインタフェースオブジェクトがアプリケーションに対応し、
    前記動作を実行することが、前記ユーザインタフェースオブジェクトをアプリケーション起動領域の中に配置することを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトを前記アプリケーション起動領域から取り出すことを含む、請求項9又は10に記載の電子デバイス。
  15. 前記第1の触知出力が第1の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第2の触知出力が第2の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第1の動きパターン及び前記第2の動きパターンが同じ動き特性及び異なる振幅を有する、請求項9乃至14のいずれか一項に記載の電子デバイス。
  16. 前記第1の触知出力が第1の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第2の触知出力が第2の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第1の動きパターン及び前記第2の動きパターンが異なる動き特性及び同じ振幅を有する、請求項9乃至14のいずれか一項に記載の電子デバイス。
  17. ディスプレイ及びタッチ感知面を備え、前記タッチ感知面上に触知出力を生成するように構成された電子デバイスによって実行されると、前記電子デバイスに、
    前記ディスプレイ上にユーザインタフェースオブジェクトを表示することと、
    前記タッチ感知面上の接触を検出することと、
    前記ユーザインタフェースオブジェクト上での動作の実行に対応する、前記タッチ感知面を横切る前記接触の第1の動きを検出することと、
    前記第1の動きの検出に応じ
    前記第1の動きに対応する動作を実行すること、及び
    前記タッチ感知面上に、前記動作の実行を示すフィードバックを与える第1の触知出力を生成することと、
    前記第1の動きの検出の後に、前記ユーザインタフェースオブジェクト上での前記実行された動作の反転に対応する、前記タッチ感知面を横切る前記接触の第2の動きを検出することと、
    前記第2の動きの検出に応じ
    前記第1の動きの終了と前記第2の動きの開始との間の期間が事前に規定された時間閾値よりも大きいという判定に従って、
    前記実行された動作を反転すること、及び
    前記タッチ感知面上に、前記実行された動作の反転を示すフィードバックを与える第2の触知出力を生成することと、
    前記第1の動きの終了と前記第2の動きの開始との間の期間が前記事前に規定された時間閾値よりも小さいという判定に従って、前記タッチ感知面上に前記第2の触知出力を生成せずに、前記実行された動作を反転することと
    を実行させる命令を有するプログラム。
  18. 前記タッチ感知面を横切る前記接触の前記第1の動き及び前記タッチ感知面を横切る前記接触の前記第2の動きは、前記タッチ感知面からの前記接触のリフトオフを検出せずに実行される単一の連続したジェスチャの一部である、請求項17に記載のプログラム。
  19. 前記動作を実行することが、前記ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドの中に取り付けることを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトをそれぞれのオブジェクト配置ガイドから取り外すことを含む、請求項17又は18に記載のプログラム。
  20. 前記動作を実行することが、前記ユーザインタフェースオブジェクトに対応するデータを削除の対象としてマーキングすることを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトに対応する前記データから削除の対象とするマーキングを外すことを含む、請求項17又は18に記載のプログラム。
  21. 前記ユーザインタフェースオブジェクトがファイルに対応し、
    前記動作を実行することが、前記ファイルをディレクトリに入れることを含み、
    前記動作を反転することが、前記ファイルを前記ディレクトリから取り出すことを含む、請求項17又は18に記載のプログラム。
  22. 前記ユーザインタフェースオブジェクトがアプリケーションに対応し、
    前記動作を実行することが、前記ユーザインタフェースオブジェクトをアプリケーション起動領域の中に配置することを含み、
    前記動作を反転することが、前記ユーザインタフェースオブジェクトを前記アプリケーション起動領域から取り出すことを含む、請求項17又は18に記載のプログラム。
  23. 前記第1の触知出力が第1の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第2の触知出力が第2の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第1の動きパターン及び前記第2の動きパターンが同じ動き特性及び異なる振幅を有する、請求項17乃至22のいずれか一項に記載のプログラム。
  24. 前記第1の触知出力が第1の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第2の触知出力が第2の動きパターンを含む前記タッチ感知面の動きによって生成され、
    前記第1の動きパターン及び前記第2の動きパターンが異なる動き特性及び同じ振幅を有する、請求項17乃至22のいずれか一項に記載のプログラム。
JP2015511645A 2012-05-09 2013-05-08 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース Active JP6082458B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201261688227P 2012-05-09 2012-05-09
US61/688,227 2012-05-09
US201261747278P 2012-12-29 2012-12-29
US61/747,278 2012-12-29
US201361778284P 2013-03-12 2013-03-12
US61/778,284 2013-03-12
PCT/US2013/040070 WO2013169853A1 (en) 2012-05-09 2013-05-08 Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017008764A Division JP6486395B2 (ja) 2012-05-09 2017-01-20 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース

Publications (2)

Publication Number Publication Date
JP2015521316A JP2015521316A (ja) 2015-07-27
JP6082458B2 true JP6082458B2 (ja) 2017-02-15

Family

ID=48468818

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2015511645A Active JP6082458B2 (ja) 2012-05-09 2013-05-08 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
JP2017008764A Active JP6486395B2 (ja) 2012-05-09 2017-01-20 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
JP2019027634A Active JP6722314B2 (ja) 2012-05-09 2019-02-19 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
JP2020106360A Pending JP2020166888A (ja) 2012-05-09 2020-06-19 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2017008764A Active JP6486395B2 (ja) 2012-05-09 2017-01-20 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
JP2019027634A Active JP6722314B2 (ja) 2012-05-09 2019-02-19 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
JP2020106360A Pending JP2020166888A (ja) 2012-05-09 2020-06-19 ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース

Country Status (8)

Country Link
US (6) US10481690B2 (ja)
EP (3) EP3185116B1 (ja)
JP (4) JP6082458B2 (ja)
CN (4) CN108241465B (ja)
AU (5) AU2013259613B2 (ja)
DE (1) DE112013002387T5 (ja)
HK (3) HK1207172A1 (ja)
WO (1) WO2013169853A1 (ja)

Families Citing this family (161)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
KR101683868B1 (ko) 2012-05-09 2016-12-07 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
JP6082458B2 (ja) 2012-05-09 2017-02-15 アップル インコーポレイテッド ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
EP3410287B1 (en) 2012-05-09 2022-08-17 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
EP2847661A2 (en) 2012-05-09 2015-03-18 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
JP6093877B2 (ja) 2012-12-29 2017-03-08 アップル インコーポレイテッド 複数接触ジェスチャのために触知出力の生成を見合わせるためのデバイス、方法、及びグラフィカルユーザインタフェース
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
JP6097843B2 (ja) 2012-12-29 2017-03-15 アップル インコーポレイテッド コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
USD772253S1 (en) * 2013-02-19 2016-11-22 Sony Computer Entertainment Inc. Display panel or screen with an animated graphical user interface
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
US10503388B2 (en) 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
EP3340025B1 (en) * 2013-09-03 2019-06-12 Apple Inc. User interface for manipulating user interface objects with magnetic properties
US9665206B1 (en) 2013-09-18 2017-05-30 Apple Inc. Dynamic user interface adaptable to multiple input tools
USD753152S1 (en) * 2013-12-03 2016-04-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD752065S1 (en) * 2013-12-03 2016-03-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD752066S1 (en) * 2013-12-03 2016-03-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD752067S1 (en) * 2013-12-03 2016-03-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9652148B2 (en) * 2014-01-06 2017-05-16 Sap Se Soft keyboard with keypress markers
US9575639B2 (en) * 2014-02-27 2017-02-21 Ab Initio Technology Llc Compound controls
KR101846256B1 (ko) * 2014-05-09 2018-05-18 삼성전자주식회사 필기감을 제공하는 촉각 피드백 장치 및 방법
US10043185B2 (en) 2014-05-29 2018-08-07 Apple Inc. User interface for payments
AU2015100490C4 (en) 2014-05-30 2017-04-13 Apple Inc. Continuity
US9582185B2 (en) * 2014-06-05 2017-02-28 Good Will Instrument Co., Ltd. Method for scale adjustment of touch-based measurement equipment
CN106415475A (zh) 2014-06-24 2017-02-15 苹果公司 用于在用户界面中导航的列界面
CN111078110B (zh) 2014-06-24 2023-10-24 苹果公司 输入设备和用户界面交互
CN118192869A (zh) 2014-06-27 2024-06-14 苹果公司 尺寸减小的用户界面
JP6573755B2 (ja) * 2014-07-10 2019-09-11 富士通株式会社 表示制御方法、情報処理プログラム、及び情報処理装置
KR102373337B1 (ko) 2014-09-02 2022-03-11 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
WO2016036416A1 (en) 2014-09-02 2016-03-10 Apple Inc. Button functionality
TWI676127B (zh) 2014-09-02 2019-11-01 美商蘋果公司 關於電子郵件使用者介面之方法、系統、電子器件及電腦可讀儲存媒體
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
WO2016036510A1 (en) 2014-09-02 2016-03-10 Apple Inc. Music user interface
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
DE102015206250A1 (de) * 2015-04-08 2016-10-13 Bayerische Motoren Werke Aktiengesellschaft Bedieneingaben für Systeme umfassend Touch Pads und Anzeigen
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9928029B2 (en) * 2015-09-08 2018-03-27 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback
US9990113B2 (en) 2015-09-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control
US20170094360A1 (en) * 2015-09-30 2017-03-30 Apple Inc. User interfaces for navigating and playing channel-based content
US11182068B2 (en) * 2015-10-27 2021-11-23 Verizon Patent And Licensing Inc. Method and system for interacting with a touch screen
US20170123560A1 (en) * 2015-11-02 2017-05-04 Mediatek Inc. Method for performing user-input control in an electronic device, and associated apparatus
US10379615B2 (en) 2015-12-09 2019-08-13 International Business Machines Corporation Providing haptic feedback to a user of a touch surface display
JP6668883B2 (ja) * 2016-03-30 2020-03-18 ブラザー工業株式会社 プログラムおよび情報表示装置
KR20240023200A (ko) 2016-05-18 2024-02-20 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10592098B2 (en) 2016-05-18 2020-03-17 Apple Inc. Devices, methods, and graphical user interfaces for messaging
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
CN114693289A (zh) 2016-06-11 2022-07-01 苹果公司 用于交易的用户界面
US10621581B2 (en) 2016-06-11 2020-04-14 Apple Inc. User interface for transactions
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
DK201670737A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
US10409421B2 (en) * 2016-06-12 2019-09-10 Apple Inc. Devices and methods for processing touch inputs based on adjusted input parameters
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10698485B2 (en) * 2016-06-27 2020-06-30 Microsoft Technology Licensing, Llc Augmenting text narration with haptic feedback
BR112018075567A2 (pt) * 2016-07-08 2019-03-19 Izettle Merchant Services Ab dispositivo, método, e interface do usuário gráfica para eliminação de um objeto em uma interface do usuário
US20190332173A1 (en) * 2016-08-10 2019-10-31 Alexander Wellen Method and device for tactilely reading time on a touch screen
US20180068313A1 (en) 2016-09-06 2018-03-08 Apple Inc. User interfaces for stored-value accounts
EP3674871A1 (en) * 2016-09-06 2020-07-01 Apple Inc. Devices, methods, and graphical user interfaces for providing haptic feedback
EP3291054B8 (en) * 2016-09-06 2019-07-24 Apple Inc. Devices, methods, and graphical user interfaces for haptic mixing
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
KR102673702B1 (ko) 2016-10-20 2024-06-12 삼성전자주식회사 피드백 제공 방법 및 이를 지원하는 전자 장치
US10496808B2 (en) 2016-10-25 2019-12-03 Apple Inc. User interface for managing access to credentials for use in an operation
US11966560B2 (en) 2016-10-26 2024-04-23 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
CN111694486B (zh) * 2017-05-16 2023-08-22 苹果公司 用于在用户界面之间导航的设备、方法和图形用户界面
US10203866B2 (en) 2017-05-16 2019-02-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
KR102404636B1 (ko) * 2017-05-16 2022-06-02 애플 인크. 사용자 인터페이스들을 위한 촉각 피드백
US11036387B2 (en) 2017-05-16 2021-06-15 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
JP2018195025A (ja) * 2017-05-16 2018-12-06 富士通株式会社 情報処理装置、情報処理システム、及び情報処理方法
KR102185854B1 (ko) 2017-09-09 2020-12-02 애플 인크. 생체측정 인증의 구현
EP4156129A1 (en) 2017-09-09 2023-03-29 Apple Inc. Implementation of biometric enrollment
US11209920B2 (en) * 2017-10-04 2021-12-28 Hewlett-Packard Development Company, L.P. User interfaces with strike sensors
KR102469754B1 (ko) * 2018-02-13 2022-11-22 삼성전자주식회사 전자 장치 및 그 동작 방법
CN110310613A (zh) * 2018-03-27 2019-10-08 上海新啊利网络科技有限公司 一种用于生成颜色编码音乐的方法和设备
US10955956B2 (en) 2018-05-07 2021-03-23 Apple Inc. Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. SETUP PROCEDURES FOR AN ELECTRONIC DEVICE
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
US10901763B2 (en) * 2018-07-19 2021-01-26 Citrix Systems, Inc. Systems and methods for user interface detection
CN115826750A (zh) * 2018-09-11 2023-03-21 苹果公司 基于内容的触觉输出
US10712824B2 (en) * 2018-09-11 2020-07-14 Apple Inc. Content-based tactile outputs
CN110096157B (zh) * 2018-09-11 2021-05-11 苹果公司 基于内容的触觉输出
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
CN109343770B (zh) * 2018-09-27 2021-07-20 腾讯科技(深圳)有限公司 交互反馈方法、设备和记录介质
CN109656439A (zh) * 2018-12-17 2019-04-19 北京小米移动软件有限公司 快捷操作面板的显示方法、装置及存储介质
CN109976846B (zh) * 2019-02-22 2022-04-29 华为技术有限公司 一种图像处理方法、终端设备和系统
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
EP3928526A1 (en) 2019-03-24 2021-12-29 Apple Inc. User interfaces for viewing and accessing content on an electronic device
US11962836B2 (en) 2019-03-24 2024-04-16 Apple Inc. User interfaces for a media browsing application
CN113711169A (zh) 2019-03-24 2021-11-26 苹果公司 包括内容项的可选表示的用户界面
CN113906380A (zh) 2019-05-31 2022-01-07 苹果公司 用于播客浏览和回放应用程序的用户界面
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
US10698701B1 (en) 2019-06-01 2020-06-30 Apple Inc. User interface for accessing an account
US10996761B2 (en) 2019-06-01 2021-05-04 Apple Inc. User interfaces for non-visual output of time
US11797113B2 (en) 2019-06-01 2023-10-24 Apple Inc. Devices, methods, and graphical user interfaces for interaction with a control
CN110286840B (zh) * 2019-06-25 2022-11-11 广州视源电子科技股份有限公司 可触控设备的手势缩放控制方法、装置和相关设备
USD941851S1 (en) * 2019-07-03 2022-01-25 Theta Lake, Inc. Computer display with graphical user interface for video compliance review
USD928178S1 (en) * 2019-07-03 2021-08-17 Theta Lake, Inc. Computer display with graphical user interface showing timeline markers for a video
US11269952B1 (en) 2019-07-08 2022-03-08 Meta Platforms, Inc. Text to music selection system
US11030914B2 (en) * 2019-08-23 2021-06-08 Hossein Zamanian Learning device and method
US10911504B1 (en) 2019-08-29 2021-02-02 Facebook, Inc. Social media music streaming
US11210339B1 (en) 2019-08-29 2021-12-28 Facebook, Inc. Transient contextual music streaming
USD924912S1 (en) * 2019-09-09 2021-07-13 Apple Inc. Display screen or portion thereof with graphical user interface
US11775581B1 (en) 2019-09-18 2023-10-03 Meta Platforms, Inc. Systems and methods for feature-based music selection
US11416544B2 (en) 2019-09-25 2022-08-16 Meta Platforms, Inc. Systems and methods for digitally fetching music content
USD941325S1 (en) 2019-09-25 2022-01-18 Facebook, Inc. Display screen with a graphical user interface for music fetching
USD941324S1 (en) * 2019-09-25 2022-01-18 Facebook, Inc. Display screen with a graphical user interface for music fetching
CN110989879B (zh) * 2019-11-08 2021-04-09 东软集团股份有限公司 辅助线提示方法、装置、可读存储介质及电子设备
CN110908581B (zh) * 2019-11-20 2021-04-23 网易(杭州)网络有限公司 手势识别的方法及装置、计算机存储介质、电子设备
WO2021167603A1 (en) * 2020-02-19 2021-08-26 Hewlett-Packard Development Company, L.P. Generating a graphical user interface in a pre-operating system boot environment
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
JP2021157279A (ja) * 2020-03-25 2021-10-07 豊田合成株式会社 触感提示装置、振動信号、及び記憶媒体
CN111770381B (zh) * 2020-06-04 2022-08-05 北京达佳互联信息技术有限公司 视频编辑的提示方法、装置以及电子设备
US11816194B2 (en) 2020-06-21 2023-11-14 Apple Inc. User interfaces for managing secure operations
US11601419B2 (en) 2020-06-21 2023-03-07 Apple Inc. User interfaces for accessing an account
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
US12111962B2 (en) 2021-02-19 2024-10-08 Apple Inc. User interfaces and device settings based on user identification
USD1024128S1 (en) * 2021-11-25 2024-04-23 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD1023049S1 (en) * 2021-11-25 2024-04-16 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US20240329740A1 (en) * 2023-03-28 2024-10-03 Sensel, Inc. Simulation of a physical interface utilizing touch tracking, force sensing, and haptic feedback

Family Cites Families (1654)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6117428Y2 (ja) * 1979-04-03 1986-05-28
JPS58182746A (ja) 1982-04-20 1983-10-25 Fujitsu Ltd タツチ式入力装置
JPS6074003A (ja) * 1983-09-30 1985-04-26 Ryozo Setoguchi 形状創成装置
US4903201A (en) 1983-11-03 1990-02-20 World Energy Exchange Corporation Automated futures trading exchange
US5270922A (en) 1984-06-29 1993-12-14 Merrill Lynch & Company, Inc. System for distributing, processing and displaying financial information
US4674044A (en) 1985-01-30 1987-06-16 Merrill Lynch, Pierce, Fenner & Smith, Inc. Automated securities trading system
US4750135A (en) 1986-05-01 1988-06-07 Reuters Limited Method for dynamically creating a receiver definable local trading instrument displayable record from a remotely transmitted trading instrument common data stream
US5038284A (en) 1988-02-17 1991-08-06 Kramer Robert M Method and apparatus relating to conducting trading transactions with portable trading stations
WO1989011694A1 (en) 1988-05-27 1989-11-30 Wang Laboratories, Inc. Document folder icon for display in a data processing system
CA1328511C (en) 1988-10-11 1994-04-12 Jean-Marie Hullot System and method for managing graphic images
JPH03505498A (ja) 1989-03-14 1991-11-28 シカゴ ボード オブ トレード 模擬仕切売場取引システム
EP0388162A3 (en) 1989-03-14 1993-03-03 Chicago Board Of Trade Apparatus for market trading
WO1990011571A1 (en) 1989-03-28 1990-10-04 Chicago Board Of Trade Simulated live market trading system
US5077665A (en) 1989-05-25 1991-12-31 Reuters Limited Distributed matching system
US5136501A (en) 1989-05-26 1992-08-04 Reuters Limited Anonymous matching system
US5101353A (en) 1989-05-31 1992-03-31 Lattice Investments, Inc. Automated system for providing liquidity to securities markets
US5297031A (en) 1990-03-06 1994-03-22 Chicago Board Of Trade Method and apparatus for order management by market brokers
JPH0385481U (ja) 1990-11-02 1991-08-29
GB9027249D0 (en) 1990-12-17 1991-02-06 Reuters Ltd Offer matching system
US5297032A (en) 1991-02-01 1994-03-22 Merrill Lynch, Pierce, Fenner & Smith Incorporated Securities trading workstation
US5184120A (en) 1991-04-04 1993-02-02 Motorola, Inc. Menu selection using adaptive force sensing resistor
US5664210A (en) 1991-08-19 1997-09-02 International Business Machines Corporation Method and system of providing multiple selections in text on a computer display
US6347997B1 (en) 1997-10-01 2002-02-19 Brad A. Armstrong Analog controls housed with electronic displays
US6208271B1 (en) 1998-09-04 2001-03-27 Brad A. Armstrong Remote controller with analog button(s)
US5717725A (en) 1992-03-12 1998-02-10 Ntp Incorporated System for wireless transmission and receiving of information through a computer bus interface and method of operation
US5544262A (en) 1992-04-07 1996-08-06 Apple Computer, Inc. Method and apparatus for processing graphically input equations
DE69324067T2 (de) 1992-06-08 1999-07-15 Synaptics Inc Objekt-Positionsdetektor
JPH0651738A (ja) 1992-07-27 1994-02-25 Canon Inc コンピュータシステムの情報表示装置
US5589855A (en) * 1992-08-14 1996-12-31 Transaction Technology, Inc. Visually impaired customer activated terminal method and system
JP2994888B2 (ja) 1992-11-25 1999-12-27 シャープ株式会社 入力処理装置および入力処理方法
US5428730A (en) * 1992-12-15 1995-06-27 International Business Machines Corporation Multimedia system having software mechanism providing standardized interfaces and controls for the operation of multimedia devices
US5455965A (en) 1993-02-26 1995-10-03 Motorola, Inc. Method for determining and utilizing simulcast transmit times
US5555354A (en) 1993-03-23 1996-09-10 Silicon Graphics Inc. Method and apparatus for navigation within three-dimensional information landscape
JPH0798769A (ja) 1993-06-18 1995-04-11 Hitachi Ltd 情報処理装置及びその画面編集方法
US5463722A (en) 1993-07-23 1995-10-31 Apple Computer, Inc. Automatic alignment of objects in two-dimensional and three-dimensional display space using an alignment field gradient
BE1007462A3 (nl) 1993-08-26 1995-07-04 Philips Electronics Nv Dataverwerkings inrichting met aanraakscherm en krachtopnemer.
JPH07151512A (ja) 1993-10-05 1995-06-16 Mitsutoyo Corp 三次元測定機の操作装置
JPH07104915A (ja) 1993-10-06 1995-04-21 Toshiba Corp グラフィックユーザインタフェース装置
DE69403664T2 (de) 1993-10-29 1998-01-02 Taligent Inc Graphisches editorfachwerksystem
DE69426919T2 (de) 1993-12-30 2001-06-28 Xerox Corp Gerät und Verfahren zur Ausführung von vielen verkettenden Befehlsgesten in einen System mit Gestenbenutzerschnittstelle
CA2119921C (en) 1994-03-23 2009-09-29 Sydney H. Belzberg Computerized stock exchange trading system
WO1995027945A1 (en) 1994-04-06 1995-10-19 Morgan Stanley Group Inc. Data processing system and method for financial debt instruments
US5526478A (en) 1994-06-30 1996-06-11 Silicon Graphics, Inc. Three dimensional model with three dimensional pointers and multimedia functions linked to the pointers
GB9416673D0 (en) 1994-08-17 1994-10-12 Reuters Ltd Data exchange filtering system
US5559301A (en) 1994-09-15 1996-09-24 Korg, Inc. Touchscreen interface having pop-up variable adjustment displays for controllers and audio processing systems
US5774877A (en) 1994-09-20 1998-06-30 Papyrus Technology Corp. Two-way wireless system for financial industry transactions
US5797002A (en) 1994-09-20 1998-08-18 Papyrus Technology Corp. Two-way wireless system for financial industry transactions
WO1996009579A1 (en) 1994-09-22 1996-03-28 Izak Van Cruyningen Popup menus with directional gestures
US5689651A (en) 1994-10-13 1997-11-18 Lozman; Fane System for processing and displaying financial information
WO1996014908A1 (en) 1994-11-14 1996-05-23 Catapult Entertainment, Inc. Method and apparatus for synchronizing the execution of multiple video game systems in a networked environment
US5805144A (en) 1994-12-14 1998-09-08 Dell Usa, L.P. Mouse pointing device having integrated touchpad
JPH08227341A (ja) 1995-02-22 1996-09-03 Mitsubishi Electric Corp ユーザインターフェース
US5657246A (en) 1995-03-07 1997-08-12 Vtel Corporation Method and apparatus for a video conference user interface
IL117424A (en) 1995-04-27 1999-09-22 Optimark Tech Inc Crossing network utilizing satisfaction density profile
US5845266A (en) 1995-12-12 1998-12-01 Optimark Technologies, Inc. Crossing network utilizing satisfaction density profile with price discovery features
US5793360A (en) 1995-05-05 1998-08-11 Wacom Co., Ltd. Digitizer eraser system and method
US6072488A (en) 1995-05-05 2000-06-06 Apple Computer, Inc. Systems and methods for replacing open windows in a graphical user interface
US5717438A (en) 1995-08-25 1998-02-10 International Business Machines Corporation Multimedia document using time box diagrams
US6282521B1 (en) 1995-08-28 2001-08-28 Ebs Dealing Resources, Inc. Anonymous trading system with improved quote input capabilities
US5844560A (en) 1995-09-29 1998-12-01 Intel Corporation Graphical user interface control element
JP3417741B2 (ja) 1995-10-06 2003-06-16 富士通株式会社 取引制御システム
US5910882A (en) 1995-11-14 1999-06-08 Garmin Corporation Portable electronic device for use in combination portable and fixed mount applications
US5825308A (en) 1996-11-26 1998-10-20 Immersion Human Interface Corporation Force feedback interface having isotonic and isometric functionality
US5793377A (en) 1995-11-22 1998-08-11 Autodesk, Inc. Method and apparatus for polar coordinate snap in a computer implemented drawing tool
US5801692A (en) 1995-11-30 1998-09-01 Microsoft Corporation Audio-visual user interface controls
US5719796A (en) 1995-12-04 1998-02-17 Advanced Micro Devices, Inc. System for monitoring and analyzing manufacturing processes using statistical simulation with single step feedback
US6750877B2 (en) 1995-12-13 2004-06-15 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
US6300936B1 (en) * 1997-11-14 2001-10-09 Immersion Corporation Force feedback system including multi-tasking graphical host environment and interface device
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
US5695400A (en) 1996-01-30 1997-12-09 Boxer Jam Productions Method of managing multi-player game playing over a network
US5946647A (en) 1996-02-01 1999-08-31 Apple Computer, Inc. System and method for performing an action on a structure in computer-generated data
US5820463A (en) 1996-02-06 1998-10-13 Bell Atlantic Network Services, Inc. Method and apparatus for multi-player gaming over a network
JPH09269883A (ja) 1996-03-29 1997-10-14 Seiko Epson Corp 情報処理装置および情報処理方法
US6223188B1 (en) * 1996-04-10 2001-04-24 Sun Microsystems, Inc. Presentation of link information as an aid to hypermedia navigation
US5880733A (en) 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
US5924083A (en) 1996-05-29 1999-07-13 Geneva Branch Of Reuters Transaction Services Limited Distributed matching system for displaying a book of credit filtered bids and offers
US5819293A (en) 1996-06-06 1998-10-06 Microsoft Corporation Automatic Spreadsheet forms
GB2314245A (en) * 1996-06-10 1997-12-17 Ibm Graphical user interface
JP4484255B2 (ja) 1996-06-11 2010-06-16 株式会社日立製作所 タッチパネルを備えた情報処理装置および情報処理方法
US6014643A (en) 1996-06-28 2000-01-11 Minton; Vernon F. Interactive securities trading system
US8674932B2 (en) 1996-07-05 2014-03-18 Anascape, Ltd. Image controller
US6208329B1 (en) 1996-08-13 2001-03-27 Lsi Logic Corporation Supplemental mouse button emulation system, method and apparatus for a coordinate based data input device
US6247000B1 (en) 1996-08-21 2001-06-12 Crossmar, Inc. Method and system for confirmation and settlement for financial transactions matching
AU727387B2 (en) 1996-08-28 2000-12-14 Via, Inc. Touch screen systems and methods
JPH1089976A (ja) 1996-09-13 1998-04-10 Hitachi Ltd 情報表示装置およびナビゲーションシステム
US5870683A (en) 1996-09-18 1999-02-09 Nokia Mobile Phones Limited Mobile station having method and apparatus for displaying user-selectable animation sequence
US6195647B1 (en) 1996-09-26 2001-02-27 The Nasdaq Stock Market, Inc. On-line transaction processing system for security trading
US5963923A (en) 1996-11-12 1999-10-05 Garber; Howard B. System and method for trading having a principal market maker
US5973670A (en) 1996-12-31 1999-10-26 International Business Machines Corporation Tactile feedback controller for computer cursor control device
EP0859307A1 (en) 1997-02-18 1998-08-19 International Business Machines Corporation Control mechanism for graphical user interface
US6031989A (en) 1997-02-27 2000-02-29 Microsoft Corporation Method of formatting and displaying nested documents
US6954899B1 (en) 1997-04-14 2005-10-11 Novint Technologies, Inc. Human-computer interface including haptically controlled interactions
US7091948B2 (en) 1997-04-25 2006-08-15 Immersion Corporation Design of force sensations for haptic feedback computer interfaces
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
JP2001524236A (ja) 1997-04-30 2001-11-27 トラストマーク インターナショナル リミテッド ネットワークコンピュータ取引システム
US6806893B1 (en) 1997-08-04 2004-10-19 Parasoft Corporation System and method for displaying simulated three dimensional buttons in a graphical user interface
US6266684B1 (en) 1997-08-06 2001-07-24 Adobe Systems Incorporated Creating and saving multi-frame web pages
US6411998B1 (en) 1997-09-08 2002-06-25 International Business Machines Corporation World wide web internet delay monitor
US6002397A (en) 1997-09-30 1999-12-14 International Business Machines Corporation Window hatches in graphical user interface
US6532000B2 (en) 1997-10-01 2003-03-11 Brad A. Armstrong Analog controls housed with electronic displays for global positioning systems
US6456778B2 (en) 1997-10-01 2002-09-24 Brad A. Armstrong Analog controls housed with electronic displays for video recorders and cameras
US6421653B1 (en) 1997-10-14 2002-07-16 Blackbird Holdings, Inc. Systems, methods and computer program products for electronic trading of financial instruments
US6131087A (en) 1997-11-05 2000-10-10 The Planning Solutions Group, Inc. Method for automatically identifying, matching, and near-matching buyers and sellers in electronic market transactions
US6088019A (en) 1998-06-23 2000-07-11 Immersion Corporation Low cost force feedback device with actuator for non-primary axis
US8020095B2 (en) 1997-11-14 2011-09-13 Immersion Corporation Force feedback system including multi-tasking graphical host environment
US6448977B1 (en) 1997-11-14 2002-09-10 Immersion Corporation Textures and other spatial sensations for a relative haptic interface device
CN1619561A (zh) 1997-12-08 2005-05-25 新日铁系统集成株式会社 商品交易装置
US6035287A (en) 1997-12-17 2000-03-07 Omega Consulting, Inc. Method and apparatus for bundled asset trading
US6088027A (en) 1998-01-08 2000-07-11 Macromedia, Inc. Method and apparatus for screen object manipulation
JPH11203044A (ja) 1998-01-16 1999-07-30 Sony Corp 情報処理システム
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
EP1717679B1 (en) 1998-01-26 2016-09-21 Apple Inc. Method for integrating manual input
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US6219034B1 (en) 1998-02-23 2001-04-17 Kristofer E. Elbing Tactile computer interface
FI107859B (fi) 1998-03-23 2001-10-15 Nokia Networks Oy Tilauspalvelut matkaviestinjärjestelmässä
US6211880B1 (en) 1998-04-13 2001-04-03 Albert Joseph Impink, Jr. Display apparatus
US6180894B1 (en) 1998-05-07 2001-01-30 Aiptek International Inc. Dual mode digitizer tablet system
US6208340B1 (en) 1998-05-26 2001-03-27 International Business Machines Corporation Graphical user interface including a drop-down widget that permits a plurality of choices to be selected in response to a single selection of the drop-down widget
JPH11355617A (ja) 1998-06-05 1999-12-24 Fuji Photo Film Co Ltd 画像表示器付きカメラ
US6563487B2 (en) 1998-06-23 2003-05-13 Immersion Corporation Haptic feedback for directional control pads
US6707443B2 (en) 1998-06-23 2004-03-16 Immersion Corporation Haptic trackball device
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
GB2343499B (en) * 1998-06-23 2002-06-12 Immersion Corp Low cost force feedback devices
US6229542B1 (en) 1998-07-10 2001-05-08 Intel Corporation Method and apparatus for managing windows in three dimensions in a two dimensional windowing system
US6243080B1 (en) 1998-07-14 2001-06-05 Ericsson Inc. Touch-sensitive panel with selector
US6758749B2 (en) * 1998-07-31 2004-07-06 Radical Gaming Concepts Ltd. Enhanced payout feature for gaming machines
AU5777699A (en) 1998-08-21 2000-03-14 Marketxt, Inc. Volume limitation method and system for a real-time computerized stock trading system
US6326956B1 (en) 1998-08-24 2001-12-04 Intertactile Technologies Corporation Circuit control devices utilizing electronic display screen light
US6111575A (en) 1998-09-24 2000-08-29 International Business Machines Corporation Graphical undo/redo manager and method
DE19849460B4 (de) 1998-10-28 2009-11-05 Völckers, Oliver Numerische digitale Telefontastatur für ein Telefongerät mit einem Display und Verfahren zur schnellen Textauswahl aus einer Liste mittels der numerischen Telefontastatur
US6405180B2 (en) 1998-11-05 2002-06-11 International Securities Exchange, Llc Automated exchange for matching bids between a party and a counterparty based on a relationship between the counterparty and the exchange
US6377940B2 (en) 1998-11-05 2002-04-23 International Securities Exchange, Llc Method and apparatus for setting a price for a security on an automated exchange based on a comparison of prices on other exchanges
JP2000148348A (ja) 1998-11-13 2000-05-26 Internatl Business Mach Corp <Ibm> 起動中のアプリケーション・プログラムを容易に識別し、かつ終了させることができる方法およびシステム
JP2002531014A (ja) 1998-11-24 2002-09-17 ニクスン インコーポレイテツド 通信データを収集して分析する装置および方法
US6252594B1 (en) 1998-12-11 2001-06-26 International Business Machines Corporation Method and system for aiding a user in scrolling through a document using animation, voice cues and a dockable scroll bar
US6489975B1 (en) 1998-12-14 2002-12-03 International Business Machines Corporation System and method for improved navigation between open windows in an application program using window tabs
US6292233B1 (en) 1998-12-31 2001-09-18 Stmicroelectronics S.R.L. Device controller with low power standby mode
US7469381B2 (en) * 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US7506252B2 (en) 1999-01-26 2009-03-17 Blumberg Marvin R Speed typing apparatus for entering letters of alphabet with at least thirteen-letter input elements
US6396962B1 (en) 1999-01-29 2002-05-28 Sony Corporation System and method for providing zooming video
US6512761B1 (en) 1999-02-02 2003-01-28 3Com Corporation System for adjusting billing for real-time media transmissions based on delay
US6272474B1 (en) 1999-02-08 2001-08-07 Crisostomo B. Garcia Method for monitoring and trading stocks via the internet displaying bid/ask trade bars
US6551357B1 (en) 1999-02-12 2003-04-22 International Business Machines Corporation Method, system, and program for storing and retrieving markings for display to an electronic media file
EP1028583A1 (en) 1999-02-12 2000-08-16 Hewlett-Packard Company Digital camera with sound recording
US20020026321A1 (en) 1999-02-26 2002-02-28 Sadeg M. Faris Internet-based system and method for fairly and securely enabling timed-constrained competition using globally time-sychronized client subsystems and information servers having microsecond client-event resolution
EP1208412A2 (en) 1999-02-26 2002-05-29 Reveo, Inc. Globally time-synchronized systems, devices and methods
US6408282B1 (en) 1999-03-01 2002-06-18 Wit Capital Corp. System and method for conducting securities transactions over a computer network
WO2000052619A1 (en) 1999-03-01 2000-09-08 Wit Capital Corporation A system and method for conducting securities transactions over a computer network
US7212999B2 (en) 1999-04-09 2007-05-01 Trading Technologies International, Inc. User interface for an electronic trading system
US6278982B1 (en) 1999-04-21 2001-08-21 Lava Trading Inc. Securities trading system for consolidation of trading on multiple ECNS and electronic exchanges
WO2000065510A1 (en) 1999-04-22 2000-11-02 Trading Technologies, Inc. Electronic securities trading system
JP2001034775A (ja) 1999-05-17 2001-02-09 Fuji Photo Film Co Ltd 履歴画像表示方法
WO2000074240A1 (en) 1999-05-27 2000-12-07 America Online Keyboard system with automatic correction
US6227743B1 (en) 1999-07-01 2001-05-08 Karl A. Robb Pen cap stylus for use with touch screens
US6904405B2 (en) 1999-07-17 2005-06-07 Edwin A. Suominen Message recognition using shared language model
US6396523B1 (en) 1999-07-29 2002-05-28 Interlink Electronics, Inc. Home entertainment device remote control
US6489978B1 (en) 1999-08-06 2002-12-03 International Business Machines Corporation Extending the opening time of state menu items for conformations of multiple changes
US6459424B1 (en) 1999-08-10 2002-10-01 Hewlett-Packard Company Touch-sensitive input screen having regional sensitivity and resolution properties
WO2001016852A2 (en) 1999-08-30 2001-03-08 Epit, Inc. User interface for semi-fungible trading
JP2001078137A (ja) 1999-09-01 2001-03-23 Olympus Optical Co Ltd 電子カメラ
US7685048B1 (en) 1999-09-01 2010-03-23 Bloomberg L.P. Electronic trading system for forwards spread trades
US6459442B1 (en) 1999-09-10 2002-10-01 Xerox Corporation System for applying application behaviors to freeform data
US7181424B1 (en) 1999-09-23 2007-02-20 The Nasdaq Stock Market, Inc. Montage for automated market system
US8311926B1 (en) 1999-09-23 2012-11-13 The Nasdaq Omx Group, Inc. Montage for automated market system
US8239303B2 (en) 1999-09-23 2012-08-07 The Nasdaq Omx Group, Inc. Match-off of order flow in electronic market system
US6377636B1 (en) 1999-11-02 2002-04-23 Iospan Wirless, Inc. Method and wireless communications system using coordinated transmission and training for interference mitigation
US8482535B2 (en) 1999-11-08 2013-07-09 Apple Inc. Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US20020023038A1 (en) 1999-12-03 2002-02-21 Fritsch Daniel Scott Computerized system and method for conducting an online virtual auction
US20020055899A1 (en) 1999-12-06 2002-05-09 Williams Joseph C. Display system and method for displaying and organizing financial information
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US7362331B2 (en) 2000-01-05 2008-04-22 Apple Inc. Time-based, non-constant translation of user interface objects between states
US6664991B1 (en) 2000-01-06 2003-12-16 Microsoft Corporation Method and apparatus for providing context menus on a pen-based device
US20080316171A1 (en) * 2000-01-14 2008-12-25 Immersion Corporation Low-Cost Haptic Mouse Implementations
US6661438B1 (en) 2000-01-18 2003-12-09 Seiko Epson Corporation Display apparatus and portable information processing apparatus
JP2001202192A (ja) 2000-01-18 2001-07-27 Sony Corp 情報処理装置及びその方法並びにプログラム格納媒体
US6512530B1 (en) 2000-01-19 2003-01-28 Xerox Corporation Systems and methods for mimicking an image forming or capture device control panel control element
US6822635B2 (en) 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
US7138983B2 (en) 2000-01-31 2006-11-21 Canon Kabushiki Kaisha Method and apparatus for detecting and interpreting path of designated position
JP3845738B2 (ja) 2000-02-09 2006-11-15 カシオ計算機株式会社 オブジェクト移動装置及び記録媒体
CA2400330A1 (en) 2000-02-14 2001-08-23 Julian Orbanes Methods and apparatus for viewing information in virtual space
GB2366630A (en) 2000-02-17 2002-03-13 Gold On Line Trading Ltd Internet Trading System
US6772132B1 (en) 2000-03-02 2004-08-03 Trading Technologies International, Inc. Click based trading with intuitive grid display of market depth
JP2001265481A (ja) 2000-03-21 2001-09-28 Nec Corp ページ情報表示方法及び装置並びにページ情報表示用プログラムを記憶した記憶媒体
JP2001306207A (ja) 2000-04-27 2001-11-02 Just Syst Corp ドラッグアンドドロップ処理を支援するプログラムを記録した記録媒体
US20020035534A1 (en) 2000-05-04 2002-03-21 Buist Walter D. Method and apparatus for auctioning securities
US7246092B1 (en) 2000-05-12 2007-07-17 The Nasdaq Stock Market, Inc. Montage for an electronic market
US6831666B1 (en) 2000-06-14 2004-12-14 Canon Kabushiki Kaisha Application selection window in a windows operation system
JP2002041023A (ja) 2000-07-06 2002-02-08 Internatl Business Mach Corp <Ibm> コンピュータシステム、表示制御装置、ディスプレイ装置、表示制御方法、記憶媒体及びプログラム伝送装置
KR20020007860A (ko) 2000-07-19 2002-01-29 백승헌 인터넷상의 시간보정 방법 및 이를 이용한 상거래시점관리 방법
US6583798B1 (en) 2000-07-21 2003-06-24 Microsoft Corporation On-object user interface
JP4501243B2 (ja) 2000-07-24 2010-07-14 ソニー株式会社 テレビジョン受像機およびプログラム実行方法
US20020015064A1 (en) 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US6906697B2 (en) * 2000-08-11 2005-06-14 Immersion Corporation Haptic sensations for tactile feedback interface devices
US8924277B2 (en) 2000-08-17 2014-12-30 Nyse Group, Inc. Method and system for automatic execution of a securities transaction
KR20020041828A (ko) 2000-08-21 2002-06-03 요트.게.아. 롤페즈 비디오 스트림에 내재된 데이터와 처리에 응답하여 비디오컨텐츠를 액티브하게 변경하기 위한 방법 및 시스템
TW494323B (en) 2000-08-29 2002-07-11 Ibm System and method for locating on a physical document items referenced in another physical document
SE0003440D0 (sv) * 2000-09-26 2000-09-26 Landala Naet Ab Kommunikationssystem
US6734882B1 (en) 2000-09-29 2004-05-11 Apple Computer, Inc. Combined menu-list control element in a graphical user interface
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6891551B2 (en) 2000-11-10 2005-05-10 Microsoft Corporation Selection handles in editing electronic documents
US6577296B2 (en) 2000-11-14 2003-06-10 Vega Vista, Inc. Fixed cursor
US6590568B1 (en) 2000-11-20 2003-07-08 Nokia Corporation Touch screen drag and drop input technique
US6943778B1 (en) 2000-11-20 2005-09-13 Nokia Corporation Touch screen input technique
US7380216B2 (en) * 2000-11-30 2008-05-27 International Business Machines Corporation Zoom-capable scrollbar
DE10059906A1 (de) 2000-12-01 2002-06-06 Bs Biometric Systems Gmbh Druckempfindliche Fläche eines Bildschirms oder Displays
US20020077117A1 (en) 2000-12-15 2002-06-20 Jocelyn Cloutier Synchronous transmission of data with network remote control
JP2002182855A (ja) 2000-12-19 2002-06-28 Totoku Electric Co Ltd タッチパネル装置
GB2370739A (en) 2000-12-27 2002-07-03 Nokia Corp Flashlight cursor for set-top boxes
CN2501080Y (zh) * 2001-01-03 2002-07-17 丁鹉雄 经皮刺激报时器
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US20050183017A1 (en) 2001-01-31 2005-08-18 Microsoft Corporation Seekbar in taskbar player visualization mode
US20020107748A1 (en) 2001-02-05 2002-08-08 International Business Machines Corporation Method and system for decentralized order matching among individual marketplaces
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US20020120837A1 (en) 2001-02-28 2002-08-29 Maxemchuk Nicholas Frank Distributed internet multicast system for the stock market
CA2375844C (en) 2001-03-09 2008-12-30 Research In Motion Limited Advanced voice and data operations in a mobile data communication device
JP2002268867A (ja) 2001-03-13 2002-09-20 Sony Corp 表示装置及び表示方法、プログラム記録媒体並びにプログラム
US20020178102A1 (en) 2001-03-15 2002-11-28 Larry Scheinberg Margin release system for an electronic-based market
JP2002286489A (ja) 2001-03-28 2002-10-03 Clarion Co Ltd カーナビゲーション装置及び方法並びにカーナビゲーション用ソフトウェア
US7012595B2 (en) 2001-03-30 2006-03-14 Koninklijke Philips Electronics N.V. Handheld electronic device with touch pad
TW502180B (en) 2001-03-30 2002-09-11 Ulead Systems Inc Previewing method of editing multimedia effect
US20020149630A1 (en) 2001-04-16 2002-10-17 Parascript Llc Providing hand-written and hand-drawn electronic mail service
US7134093B2 (en) 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
US20020161693A1 (en) 2001-04-30 2002-10-31 Greenwald Jamie A. Automated over-the-counter derivatives trading system
US8125492B1 (en) 2001-05-18 2012-02-28 Autodesk, Inc. Parameter wiring
TW521205B (en) 2001-06-05 2003-02-21 Compal Electronics Inc Touch screen capable of controlling amplification with pressure
US20020186257A1 (en) 2001-06-08 2002-12-12 Cadiz Jonathan J. System and process for providing dynamic communication access and information awareness in an interactive peripheral display
US7190379B2 (en) 2001-06-29 2007-03-13 Contex A/S Method for resizing and moving an object on a computer screen
US8001490B2 (en) 2001-07-10 2011-08-16 Nvidia International, Inc. System, method and computer program product for a content publisher for wireless devices
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
JP2003084744A (ja) 2001-09-10 2003-03-19 Sharp Corp エミュレーション装置、エミュレーション方法及びその方法を実行するプログラム並びにそのプログラムを記録した記録媒体
US7103848B2 (en) 2001-09-13 2006-09-05 International Business Machines Corporation Handheld electronic book reader with annotation and usage tracking capabilities
US6965645B2 (en) 2001-09-25 2005-11-15 Microsoft Corporation Content-based characterization of video frame sequences
US20030206169A1 (en) 2001-09-26 2003-11-06 Michael Springer System, method and computer program product for automatically snapping lines to drawing elements
US7439975B2 (en) 2001-09-27 2008-10-21 International Business Machines Corporation Method and system for producing dynamically determined drop shadows in a three-dimensional graphical user interface
US6703550B2 (en) * 2001-10-10 2004-03-09 Immersion Corporation Sound data output and manipulation using haptic feedback
US8001189B2 (en) 2001-10-16 2011-08-16 Microsoft Corporation Routing of network messages
JP4149926B2 (ja) 2001-11-01 2008-09-17 イマージョン コーポレーション 触知感覚を与える方法及び装置
JP2003157131A (ja) 2001-11-22 2003-05-30 Nippon Telegr & Teleph Corp <Ntt> 入力方法、表示方法、メディア情報合成表示方法、入力装置、メディア情報合成表示装置、入力プログラム、メディア情報合成表示プログラム、これらのプログラムを記録した記録媒体
JP2003162355A (ja) 2001-11-26 2003-06-06 Sony Corp タスクの表示切り替え方法及び携帯機器及び携帯通信機器
JP2003186597A (ja) 2001-12-13 2003-07-04 Samsung Yokohama Research Institute Co Ltd 携帯端末装置
US20030112269A1 (en) 2001-12-17 2003-06-19 International Business Machines Corporation Configurable graphical element for monitoring dynamic properties of a resource coupled to a computing environment
US7346855B2 (en) 2001-12-21 2008-03-18 Microsoft Corporation Method and system for switching between multiple computer applications
CN1356493A (zh) 2001-12-30 2002-07-03 王森 承压蒸汽锅炉的上锅筒
US7043701B2 (en) 2002-01-07 2006-05-09 Xerox Corporation Opacity desktop with depth perception
US20030184574A1 (en) 2002-02-12 2003-10-02 Phillips James V. Touch screen interface with haptic feedback device
US6888537B2 (en) 2002-02-13 2005-05-03 Siemens Technology-To-Business Center, Llc Configurable industrial input devices that use electrically conductive elastomer
DE60305662T2 (de) 2002-03-08 2007-04-05 Revelations in Design, LP, Austin Steuerkonsole für elektrische geräte
US7114091B2 (en) 2002-03-18 2006-09-26 National Instruments Corporation Synchronization of distributed systems
TWI234115B (en) 2002-04-03 2005-06-11 Htc Corp Method and device of setting threshold pressure for touch panel
US20030189647A1 (en) 2002-04-05 2003-10-09 Kang Beng Hong Alex Method of taking pictures
US7178049B2 (en) 2002-04-24 2007-02-13 Medius, Inc. Method for multi-tasking multiple Java virtual machines in a secure environment
JP2004062648A (ja) 2002-07-30 2004-02-26 Kyocera Corp 表示制御装置及びこれに用いられる表示制御プログラム
US20030222915A1 (en) 2002-05-30 2003-12-04 International Business Machines Corporation Data processor controlled display system with drag and drop movement of displayed items from source to destination screen positions and interactive modification of dragged items during the movement
US7801796B2 (en) 2002-06-05 2010-09-21 The Nasdaq Omx Group, Inc. Message prioritization process and method
US7259752B1 (en) 2002-06-28 2007-08-21 Microsoft Corporation Method and system for editing electronic ink
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
JP2004054861A (ja) 2002-07-16 2004-02-19 Sanee Denki Kk タッチ式マウス
US20040015662A1 (en) 2002-07-22 2004-01-22 Aron Cummings Memory card, memory card controller, and software therefor
US20040056849A1 (en) 2002-07-25 2004-03-25 Andrew Lohbihler Method and apparatus for powering, detecting and locating multiple touch input devices on a touch screen
US7549127B2 (en) 2002-08-01 2009-06-16 Realnetworks, Inc. Method and apparatus for resizing video content displayed within a graphical user interface
JP4115198B2 (ja) 2002-08-02 2008-07-09 株式会社日立製作所 タッチパネルを備えた表示装置
KR100486711B1 (ko) 2002-08-12 2005-05-03 삼성전기주식회사 개인용 정보 단말기의 페이지 넘김 장치 및 방법
JP4500485B2 (ja) 2002-08-28 2010-07-14 株式会社日立製作所 タッチパネルを備えた表示装置
US7739604B1 (en) 2002-09-25 2010-06-15 Apple Inc. Method and apparatus for managing windows
JP4234968B2 (ja) 2002-09-27 2009-03-04 富士フイルム株式会社 デジタルカメラ
US20040138849A1 (en) 2002-09-30 2004-07-15 Albrecht Schmidt Load sensing surface as pointing device
EP1406150A1 (en) 2002-10-01 2004-04-07 Sony Ericsson Mobile Communications AB Tactile feedback method and device and portable device incorporating same
US7752115B2 (en) 2002-10-02 2010-07-06 Trading Technologies International, Inc. Method and apparatus for a fair exchange
US7814439B2 (en) 2002-10-18 2010-10-12 Autodesk, Inc. Pan-zoom tool
JP4173718B2 (ja) 2002-10-31 2008-10-29 富士通株式会社 ウィンドウ切替装置及びウィンドウ切替プログラム
JP2004152217A (ja) 2002-11-01 2004-05-27 Canon Electronics Inc タッチパネル付き表示装置
US20040155752A1 (en) 2002-11-27 2004-08-12 Jory Radke Reading fingerprints
US20050114785A1 (en) 2003-01-07 2005-05-26 Microsoft Corporation Active content wizard execution with improved conspicuity
US20070128899A1 (en) 2003-01-12 2007-06-07 Yaron Mayer System and method for improving the efficiency, comfort, and/or reliability in Operating Systems, such as for example Windows
US7453439B1 (en) 2003-01-16 2008-11-18 Forward Input Inc. System and method for continuous stroke word-based text input
US7224362B2 (en) 2003-01-30 2007-05-29 Agilent Technologies, Inc. Systems and methods for providing visualization and network diagrams
US7685538B2 (en) 2003-01-31 2010-03-23 Wacom Co., Ltd. Method of triggering functions in a computer application using a digitizer having a stylus and a digitizer system
US20040155909A1 (en) 2003-02-07 2004-08-12 Sun Microsystems, Inc. Scroll tray mechanism for cellular telephone
JP2005317041A (ja) 2003-02-14 2005-11-10 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP4367897B2 (ja) 2003-02-27 2009-11-18 キヤノン株式会社 画像表示制御装置及び方法
US7369102B2 (en) 2003-03-04 2008-05-06 Microsoft Corporation System and method for navigating a graphical user interface on a smaller display
US7185291B2 (en) 2003-03-04 2007-02-27 Institute For Information Industry Computer with a touch screen
US7532206B2 (en) 2003-03-11 2009-05-12 Smart Technologies Ulc System and method for differentiating between pointers used to contact touch surface
US7380218B2 (en) 2003-03-27 2008-05-27 International Business Machines Corporation Method and apparatus for managing windows
US8930846B2 (en) 2010-10-01 2015-01-06 Z124 Repositioning applications in a stack
US20040219968A1 (en) 2003-05-01 2004-11-04 Fiden Daniel P. Gaming machine with interactive pop-up windows
GB0312465D0 (en) 2003-05-30 2003-07-09 Therefore Ltd A data input method for a computing device
US7516404B1 (en) 2003-06-02 2009-04-07 Colby Steven M Text correction
US7051282B2 (en) 2003-06-13 2006-05-23 Microsoft Corporation Multi-layer graphical user interface
US7159189B2 (en) 2003-06-13 2007-01-02 Alphabase Systems, Inc. Method and system for controlling cascaded windows on a GUI desktop on a computer
EP1491990B1 (en) 2003-06-20 2010-02-17 Apple Inc. Graphical user interface system and method of displaying objects in a graphical user interface
US20040267823A1 (en) 2003-06-24 2004-12-30 Microsoft Corporation Reconcilable and undoable file system
US8682097B2 (en) 2006-02-14 2014-03-25 DigitalOptics Corporation Europe Limited Digital image enhancement with reference images
JP2005031786A (ja) 2003-07-08 2005-02-03 Fujitsu Ten Ltd 文字入力装置
WO2005008444A2 (en) 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
US7036088B2 (en) 2003-07-24 2006-04-25 Sap Ag Multi-modal method for application swapping
US7721228B2 (en) 2003-08-05 2010-05-18 Yahoo! Inc. Method and system of controlling a context menu
JP4003742B2 (ja) 2003-08-21 2007-11-07 カシオ計算機株式会社 電子カメラ
KR100580174B1 (ko) 2003-08-21 2006-05-16 삼성전자주식회사 회전 가능한 디스플레이 장치 및 화면 조정 방법
US9024884B2 (en) 2003-09-02 2015-05-05 Apple Inc. Touch-sensitive electronic apparatus for media applications, and methods therefor
JP2005092386A (ja) 2003-09-16 2005-04-07 Sony Corp 画像選択装置および画像選択方法
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
US7925298B2 (en) 2003-09-18 2011-04-12 Vulcan Portals Inc. User interface for a secondary display module of a mobile electronic device
US7702733B2 (en) 2003-09-18 2010-04-20 Vulcan Portals Inc. Low power email functionality for an electronic device
US7426647B2 (en) 2003-09-18 2008-09-16 Vulcan Portals Inc. Low power media player for an electronic device
US7500127B2 (en) 2003-09-18 2009-03-03 Vulcan Portals Inc. Method and apparatus for operating an electronic device in a low power mode
KR100597588B1 (ko) 2003-10-02 2006-07-06 한국전자통신연구원 우선순위기반 능동 시험패킷을 이용한 노드간 경로특성측정방법
US7176902B2 (en) 2003-10-10 2007-02-13 3M Innovative Properties Company Wake-on-touch for vibration sensing touch input devices
US7554689B2 (en) * 2003-10-15 2009-06-30 Canon Kabushiki Kaisha Document layout method
US20050091604A1 (en) 2003-10-22 2005-04-28 Scott Davis Systems and methods that track a user-identified point of focus
US6990637B2 (en) 2003-10-23 2006-01-24 Microsoft Corporation Graphical user interface for 3-dimensional view of a data collection based on an attribute of the data
JP2005135106A (ja) 2003-10-29 2005-05-26 Sony Corp 表示画像制御装置及び方法
US20050183035A1 (en) 2003-11-20 2005-08-18 Ringel Meredith J. Conflict resolution for graphic multi-user interface
US20050110777A1 (en) 2003-11-25 2005-05-26 Geaghan Bernard O. Light-emitting stylus and user input device using same
US8164573B2 (en) 2003-11-26 2012-04-24 Immersion Corporation Systems and methods for adaptive interpretation of input from a touch-sensitive input device
JP2005157842A (ja) 2003-11-27 2005-06-16 Fujitsu Ltd ブラウザプログラム、ブラウジング方法、及びブラウジング装置
WO2005055034A1 (en) 2003-12-01 2005-06-16 Research In Motion Limited Previewing a new event on a small screen device
US7454713B2 (en) 2003-12-01 2008-11-18 Sony Ericsson Mobile Communications Ab Apparatus, methods and computer program products providing menu expansion and organization functions
DE60315845T2 (de) 2003-12-01 2008-05-21 Sony Ericsson Mobile Communications Ab Kamera zur Aufnahme einer Bildsequenz
US20050125742A1 (en) 2003-12-09 2005-06-09 International Business Machines Corporation Non-overlapping graphical user interface workspace
US7079454B2 (en) * 2003-12-23 2006-07-18 Alexander Wellen Tactile timepiece
US7085590B2 (en) 2003-12-31 2006-08-01 Sony Ericsson Mobile Communications Ab Mobile terminal with ergonomic imaging functions
US7283120B2 (en) * 2004-01-16 2007-10-16 Immersion Corporation Method and apparatus for providing haptic feedback having a position-based component and a predetermined time-based component
EP1557744B1 (en) 2004-01-20 2008-04-16 Sony Deutschland GmbH Haptic key controlled data input
US7966352B2 (en) 2004-01-26 2011-06-21 Microsoft Corporation Context harvesting from selected content
JP4790990B2 (ja) 2004-01-27 2011-10-12 京セラ株式会社 携帯端末
US7441204B2 (en) 2004-02-06 2008-10-21 Microsoft Corporation Method and system for automatically displaying content of a window on a display that has changed orientation
EP1723632A4 (en) 2004-02-25 2007-07-25 Xplore Technologies Corp DEVICE FOR PROVIDING DIGITAL INPUTS WITH SEVERAL OPERATING TYPES
US7180531B2 (en) 2004-02-27 2007-02-20 Microsoft Corporation Method and apparatus for enabling application program compatibility with display devices having improved pixel density
US20050190280A1 (en) 2004-02-27 2005-09-01 Haas William R. Method and apparatus for a digital camera scrolling slideshow
KR100611182B1 (ko) 2004-02-27 2006-08-10 삼성전자주식회사 회전상태에 따라 메뉴표시상태를 변경하는 휴대형전자기기 및 그 방법
US7788595B2 (en) 2004-03-08 2010-08-31 Sap Ag Method and system for switching among management system applications
US20050204295A1 (en) 2004-03-09 2005-09-15 Freedom Scientific, Inc. Low Vision Enhancement for Graphic User Interface
GB2412831A (en) 2004-03-30 2005-10-05 Univ Newcastle Highlighting important information by blurring less important information
CN100437464C (zh) 2004-04-05 2008-11-26 松下电器产业株式会社 显示屏管理单元
US20050223338A1 (en) 2004-04-05 2005-10-06 Nokia Corporation Animated user-interface in electronic devices
US20050229112A1 (en) 2004-04-13 2005-10-13 Clay Timothy M Method and system for conveying an image position
JP2005309933A (ja) 2004-04-23 2005-11-04 Canon Inc 拡張制御装置および画像処理システムおよびアプリケーションアイコン表示方法およびプログラムおよび記憶媒体
US7694236B2 (en) 2004-04-23 2010-04-06 Microsoft Corporation Stack icons representing multiple objects
US7787026B1 (en) 2004-04-28 2010-08-31 Media Tek Singapore Pte Ltd. Continuous burst mode digital camera
EP1745355A2 (en) 2004-05-05 2007-01-24 Koninklijke Philips Electronics N.V. Browsing media items
JP4063246B2 (ja) 2004-05-11 2008-03-19 日本電気株式会社 ページ情報表示装置
CA2567280A1 (en) 2004-05-21 2005-12-01 Pressco Technology Inc. Graphical re-inspection user setup interface
JP4869568B2 (ja) 2004-06-14 2012-02-08 ソニー株式会社 入力装置および電子機器
US8321786B2 (en) 2004-06-17 2012-11-27 Apple Inc. Routine and interface for correcting electronic text
US8453065B2 (en) 2004-06-25 2013-05-28 Apple Inc. Preview and installation of user interface elements in a display environment
US8281241B2 (en) 2004-06-28 2012-10-02 Nokia Corporation Electronic device and method for providing extended user interface
US8046712B2 (en) 2004-06-29 2011-10-25 Acd Systems International Inc. Management of multiple window panels with a graphical user interface
US7743348B2 (en) 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
US20060001657A1 (en) 2004-07-02 2006-01-05 Logitech Europe S.A. Scrolling device
US20060020904A1 (en) 2004-07-09 2006-01-26 Antti Aaltonen Stripe user interface
US20060012577A1 (en) 2004-07-16 2006-01-19 Nokia Corporation Active keypad lock for devices equipped with touch screen
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
WO2006013518A2 (en) 2004-08-02 2006-02-09 Koninklijke Philips Electronics N.V. Touch screen with pressure-dependent visual feedback
JP2008508628A (ja) 2004-08-02 2008-03-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ タッチスクリーンにおける圧力制御ナビゲーション
US7178111B2 (en) 2004-08-03 2007-02-13 Microsoft Corporation Multi-planar three-dimensional user interface
US7724242B2 (en) 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
GB2417176A (en) 2004-08-12 2006-02-15 Ibm Mouse cursor display
US8117542B2 (en) 2004-08-16 2012-02-14 Microsoft Corporation User interface for displaying selectable software functionality controls that are contextually relevant to a selected object
US20060041846A1 (en) 2004-08-19 2006-02-23 International Business Machines Corporation Method of window management for a windowing system
FR2874432A1 (fr) 2004-08-20 2006-02-24 Gervais Danone Sa Procede d'analyse de produits industriels alimentaires, cosmetiques et/ou d'hygiene, interface de mesure pour la mise en oeuvre du procede et systeme electronique de mise en oeuvre de l'interface
JP2006059238A (ja) 2004-08-23 2006-03-02 Denso Corp 情報入力表示装置
US7761814B2 (en) 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
EP1805578A1 (en) 2004-09-15 2007-07-11 Nokia Corporation Handling and scrolling of content on screen
JP2006091446A (ja) 2004-09-24 2006-04-06 Fuji Photo Film Co Ltd カメラ
US20060067654A1 (en) 2004-09-24 2006-03-30 Magix Ag Graphical user interface adaptable to multiple display devices
JP4543863B2 (ja) * 2004-10-05 2010-09-15 ソニー株式会社 触覚機能付きの入出力装置及び電子機器
JP4860625B2 (ja) 2004-10-08 2012-01-25 イマージョン コーポレーション タッチ式入力装置におけるボタンおよびスクロール動作シミュレーション用の触覚フィードバック
CN101308442B (zh) 2004-10-12 2012-04-04 日本电信电话株式会社 三维指示方法和三维指示装置
CA2584091A1 (en) 2004-10-19 2006-04-27 Koninklijke Philips Electronics N.V. Master substrate and method of manufacturing a high-density relief structure
US8413271B2 (en) 2004-10-29 2013-04-09 Stryker Corporation Patient support apparatus
US8677274B2 (en) 2004-11-10 2014-03-18 Apple Inc. Highlighting items for search results
EP1815424B1 (en) 2004-11-16 2019-01-09 Koninklijke Philips N.V. Touchless manipulation of images for regional enhancement
US20060107226A1 (en) 2004-11-16 2006-05-18 Microsoft Corporation Sidebar autohide to desktop
FR2878344B1 (fr) 2004-11-22 2012-12-21 Sionnest Laurent Guyot Dispositif de commandes et d'entree de donnees
US7847789B2 (en) 2004-11-23 2010-12-07 Microsoft Corporation Reducing accidental touch-sensitive device activation
US20060136834A1 (en) 2004-12-15 2006-06-22 Jiangen Cao Scrollable toolbar with tool tip on small screens
US7458038B2 (en) 2004-12-20 2008-11-25 Microsoft Corporation Selection indication fields
US7683889B2 (en) 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US7629966B2 (en) 2004-12-21 2009-12-08 Microsoft Corporation Hard tap
US7619616B2 (en) 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
JP4949857B2 (ja) 2005-01-05 2012-06-13 パナソニック株式会社 スクリーン表示装置
US7552397B2 (en) 2005-01-18 2009-06-23 Microsoft Corporation Multiple window behavior system
US8341541B2 (en) 2005-01-18 2012-12-25 Microsoft Corporation System and method for visually browsing of open windows
US8464176B2 (en) 2005-01-19 2013-06-11 Microsoft Corporation Dynamic stacking and expansion of visual items
US7574434B2 (en) 2005-02-25 2009-08-11 Sony Corporation Method and system for navigating and selecting media from large data sets
KR101354316B1 (ko) 2005-03-04 2014-01-22 애플 인크. 다기능 휴대용 장치
JP4166229B2 (ja) 2005-03-14 2008-10-15 株式会社日立製作所 タッチパネルを備えた表示装置
US20060213754A1 (en) 2005-03-17 2006-09-28 Microsoft Corporation Method and system for computer application program task switching via a single hardware button
US7454702B2 (en) 2005-03-21 2008-11-18 Microsoft Corporation Tool for selecting ink and other objects in an electronic document
US8147248B2 (en) 2005-03-21 2012-04-03 Microsoft Corporation Gesture training
US7661069B2 (en) 2005-03-31 2010-02-09 Microsoft Corporation System and method for visually expressing user interface elements
US7478339B2 (en) 2005-04-01 2009-01-13 Microsoft Corporation Method and apparatus for application window grouping and management
US8014034B2 (en) 2005-04-13 2011-09-06 Acd Systems International Inc. Image contrast enhancement
US8023568B2 (en) 2005-04-15 2011-09-20 Avid Technology, Inc. Capture, editing and encoding of motion pictures encoded with repeating fields or frames
US7471284B2 (en) 2005-04-15 2008-12-30 Microsoft Corporation Tactile scroll bar with illuminated document position indicator
US7355595B2 (en) 2005-04-15 2008-04-08 Microsoft Corporation Tactile device for scrolling
US7673255B2 (en) 2005-04-22 2010-03-02 Microsoft Corporation Interface and system for manipulating thumbnails of live windows in a window manager
US9569093B2 (en) 2005-05-18 2017-02-14 Power2B, Inc. Displays and information input devices
US7609178B2 (en) 2006-04-20 2009-10-27 Pressure Profile Systems, Inc. Reconfigurable tactile sensor input device
US9785329B2 (en) 2005-05-23 2017-10-10 Nokia Technologies Oy Pocket computer and associated methods
US20070024646A1 (en) 2005-05-23 2007-02-01 Kalle Saarinen Portable electronic apparatus and associated method
US7797641B2 (en) 2005-05-27 2010-09-14 Nokia Corporation Mobile communications terminal and method therefore
KR20080026138A (ko) 2005-06-02 2008-03-24 폴리 비젼 코포레이션 가상 플립 차트 방법 및 장치
US9141718B2 (en) 2005-06-03 2015-09-22 Apple Inc. Clipview applications
US7710397B2 (en) 2005-06-03 2010-05-04 Apple Inc. Mouse with improved input mechanisms using touch sensors
JP2006345209A (ja) 2005-06-08 2006-12-21 Sony Corp 入力装置、情報処理装置、情報処理方法、及びプログラム
US7903090B2 (en) 2005-06-10 2011-03-08 Qsi Corporation Force-based input device
TWI296395B (en) 2005-06-24 2008-05-01 Benq Corp Method for zooming image on touch screen
US20070004461A1 (en) 2005-06-30 2007-01-04 Bathina Sridhar N Terminal with messaging application
US20070004451A1 (en) 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
KR100649523B1 (ko) 2005-06-30 2006-11-27 삼성에스디아이 주식회사 입체 영상 표시 장치
EP1908051A4 (en) 2005-07-22 2012-01-25 Matthew G Pallakoff SYSTEM AND METHOD FOR A THUMB-OPTIMIZED USER INTERFACE OF A TOUCH SCREEN
JP4622727B2 (ja) 2005-07-29 2011-02-02 日本電気株式会社 適応送信タイミング制御方法、無線通信システムおよび無線通信装置
US8049731B2 (en) 2005-07-29 2011-11-01 Interlink Electronics, Inc. System and method for implementing a control function via a sensor having a touch sensitive control input surface
WO2007016704A2 (en) 2005-08-02 2007-02-08 Ipifini, Inc. Input device having multifunctional keys
US7680513B2 (en) 2005-08-08 2010-03-16 Palm, Inc. Contact-centric user-interface features for computing devices
EP1920539A1 (en) 2005-08-26 2008-05-14 KTF Technologies, Inc. User terminal for performing a plurality of applications simultaneously
CA2621488A1 (en) 2005-09-13 2007-03-22 Spacetime3D, Inc. System and method for providing three-dimensional graphical user interface
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US20070152980A1 (en) 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
TW200715192A (en) 2005-10-07 2007-04-16 Elan Microelectronics Corp Method for a window to generate different moving speed
JP2007116384A (ja) 2005-10-20 2007-05-10 Funai Electric Co Ltd 電子番組情報表示装置
CN1955906A (zh) 2005-10-28 2007-05-02 华硕电脑股份有限公司 单键多程式的执行方法
US7725839B2 (en) 2005-11-15 2010-05-25 Microsoft Corporation Three-dimensional active file explorer
US8643605B2 (en) 2005-11-21 2014-02-04 Core Wireless Licensing S.A.R.L Gesture based document editor
US7331245B2 (en) 2005-11-22 2008-02-19 Avago Technologies Ecbu Ip Pte Ltd Pressure distribution sensor and sensing method
US7834850B2 (en) 2005-11-29 2010-11-16 Navisense Method and system for object control
JP2007148927A (ja) 2005-11-29 2007-06-14 Alps Electric Co Ltd 入力装置及びこれを用いたスクロール制御方法
JP4777055B2 (ja) 2005-11-29 2011-09-21 京セラ株式会社 表示装置、制御方法
WO2007068091A1 (en) * 2005-12-12 2007-06-21 Audiokinetic Inc. Method and system for multi-version digital authoring
JP2007163891A (ja) 2005-12-14 2007-06-28 Sony Corp 表示装置
US8325398B2 (en) 2005-12-22 2012-12-04 Canon Kabushiki Kaisha Image editing system, image management apparatus, and image editing program
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US20070152959A1 (en) 2005-12-29 2007-07-05 Sap Ag Pressure-sensitive button
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US7797642B1 (en) 2005-12-30 2010-09-14 Google Inc. Method, system, and graphical user interface for meeting-spot-related contact lists
WO2007079425A2 (en) 2005-12-30 2007-07-12 Apple Inc. Portable electronic device with multi-touch input
US20070168369A1 (en) 2006-01-04 2007-07-19 Companionlink Software, Inc. User interface for a portable electronic device
US7757185B2 (en) 2006-01-06 2010-07-13 Apple Inc. Enabling and disabling hotkeys
US7603633B2 (en) 2006-01-13 2009-10-13 Microsoft Corporation Position-based multi-stroke marking menus
US7486282B2 (en) 2006-01-27 2009-02-03 Microsoft Corporation Size variant pressure eraser
US8510669B2 (en) 2006-02-06 2013-08-13 Yahoo! Inc. Method and system for presenting photos on a website
US7536654B2 (en) 2006-02-06 2009-05-19 Microsoft Corporation Photo browse and zoom
US8139514B2 (en) * 2006-02-24 2012-03-20 Yahoo! Inc. Method and system for communicating with multiple users via a map over the internet
US20110096174A1 (en) 2006-02-28 2011-04-28 King Martin T Accessing resources based on capturing information from a rendered document
KR100744400B1 (ko) 2006-03-07 2007-07-30 삼성전자주식회사 이동 통신 단말기의 메뉴 화면에서 빠른 메뉴 제공 방법 및장치
US7532837B2 (en) 2006-03-09 2009-05-12 Kabushiki Kaisha Toshiba Multifunction peripheral with template registration and template registration method
US8745526B2 (en) 2006-03-14 2014-06-03 Blackberry Limited Screen display in application switching
KR100746874B1 (ko) 2006-03-16 2007-08-07 삼성전자주식회사 이동 단말기에서 터치패드를 이용한 서비스 제공 장치 및방법
GB0605587D0 (en) 2006-03-20 2006-04-26 British Broadcasting Corp Graphical user interface methods and systems
US8405618B2 (en) * 2006-03-24 2013-03-26 Northwestern University Haptic device with indirect haptic feedback
JP2007264808A (ja) 2006-03-27 2007-10-11 Nikon Corp 表示入力装置及び撮像装置
US8780139B2 (en) * 2006-03-27 2014-07-15 Adobe Systems Incorporated Resolution monitoring when using visual manipulation tools
US7925250B2 (en) 2006-03-27 2011-04-12 International Business Machines Corporation Reuse of a mobile device application in a desktop environment
US7656413B2 (en) 2006-03-29 2010-02-02 Autodesk, Inc. Large display attention focus system
US7538760B2 (en) 2006-03-30 2009-05-26 Apple Inc. Force imaging input device and system
US8040142B1 (en) 2006-03-31 2011-10-18 Cypress Semiconductor Corporation Touch detection techniques for capacitive touch sense systems
US7861176B2 (en) 2006-04-13 2010-12-28 Touchcommerce, Inc. Methods and systems for providing online chat
US7979146B2 (en) * 2006-04-13 2011-07-12 Immersion Corporation System and method for automatically producing haptic events from a digital audio signal
US7607088B2 (en) 2006-04-18 2009-10-20 International Business Machines Corporation Computer program product, apparatus and method for displaying a plurality of entities in a tooltip for a cell of a table
US8296684B2 (en) 2008-05-23 2012-10-23 Hewlett-Packard Development Company, L.P. Navigating among activities in a computing device
US8683362B2 (en) 2008-05-23 2014-03-25 Qualcomm Incorporated Card metaphor for activities in a computing device
EP2010999A4 (en) 2006-04-21 2012-11-21 Google Inc SYSTEM FOR ORGANIZING AND VISUALIZING DISPLAY OBJECTS
KR100771626B1 (ko) 2006-04-25 2007-10-31 엘지전자 주식회사 단말기 및 이를 위한 명령 입력 방법
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
JP4926533B2 (ja) 2006-05-02 2012-05-09 キヤノン株式会社 動画像処理装置、動画像処理方法及びプログラム
JP4737539B2 (ja) 2006-05-03 2011-08-03 株式会社ソニー・コンピュータエンタテインメント マルチメディア再生装置および背景画像表示方法
US9063647B2 (en) 2006-05-12 2015-06-23 Microsoft Technology Licensing, Llc Multi-touch uses, gestures, and implementation
EP2020088A2 (en) 2006-05-22 2009-02-04 Nike International Ltd. User interface for remotely controlling a digital music player
US20070299923A1 (en) 2006-06-16 2007-12-27 Skelly George J Methods and systems for managing messaging
US7921116B2 (en) 2006-06-16 2011-04-05 Microsoft Corporation Highly meaningful multimedia metadata creation and associations
KR101242030B1 (ko) 2006-06-22 2013-03-11 엘지디스플레이 주식회사 유기전계발광 소자
US7880728B2 (en) 2006-06-29 2011-02-01 Microsoft Corporation Application switching via a touch screen interface
JP2008009759A (ja) 2006-06-29 2008-01-17 Toyota Motor Corp タッチパネル装置
JP4751780B2 (ja) 2006-07-07 2011-08-17 株式会社エヌ・ティ・ティ・ドコモ キー入力装置
JP4583344B2 (ja) 2006-07-10 2010-11-17 シャープ株式会社 携帯電話機
EP1882902A1 (en) 2006-07-27 2008-01-30 Aisin AW Co., Ltd. Navigation apparatus and method for providing guidance to a vehicle user using a touch screen
US20080024454A1 (en) 2006-07-31 2008-01-31 Paul Everest Three-dimensional touch pad input device
JP2008033739A (ja) 2006-07-31 2008-02-14 Sony Corp 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置
US8255815B2 (en) 2006-08-04 2012-08-28 Apple Inc. Motion picture preview icons
US20080051989A1 (en) 2006-08-25 2008-02-28 Microsoft Corporation Filtering of data layered on mapping applications
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
CN101529874A (zh) 2006-09-06 2009-09-09 苹果公司 用于具有触摸屏显示器的便携式多功能设备的电话呼入管理
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US7743338B2 (en) 2006-09-11 2010-06-22 Apple Inc. Image rendering with image artifact along a multidimensional path
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
US7930650B2 (en) 2006-09-11 2011-04-19 Apple Inc. User interface with menu abstractions and content abstractions
US20080094398A1 (en) 2006-09-19 2008-04-24 Bracco Imaging, S.P.A. Methods and systems for interacting with a 3D visualization system using a 2D interface ("DextroLap")
JP2008076818A (ja) 2006-09-22 2008-04-03 Fujitsu Ltd 携帯端末装置
JP5176300B2 (ja) 2006-09-22 2013-04-03 富士通株式会社 電子機器、その制御方法及びその制御プログラム
US20100315345A1 (en) 2006-09-27 2010-12-16 Nokia Corporation Tactile Touch Screen
US8245154B2 (en) 2006-11-03 2012-08-14 International Business Machines Corporation Most-recently-used task switching among parent and child windows
US20080106523A1 (en) 2006-11-07 2008-05-08 Conrad Richard H Ergonomic lift-clicking method and apparatus for actuating home switches on computer input devices
WO2008064142A2 (en) 2006-11-20 2008-05-29 Pham Don N Interactive sequential key system to input characters on small keypads
KR20080048837A (ko) 2006-11-29 2008-06-03 삼성전자주식회사 촉각 피드백을 출력하는 장치 및 방법
JP2008146453A (ja) 2006-12-12 2008-06-26 Sony Corp 映像信号出力装置、操作入力処理方法
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
US8520866B2 (en) * 2006-12-15 2013-08-27 Nokia Corporation Apparatus, method, and computer program product providing sound-produced tactile feedback
KR20080058121A (ko) 2006-12-21 2008-06-25 삼성전자주식회사 휴대단말기에서의 촉각형 사용자 인터페이스 제공 장치 및방법
US20080163119A1 (en) 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method for providing menu and multimedia device using the same
US8269886B2 (en) 2007-01-05 2012-09-18 Marvell World Trade Ltd. Methods and systems for improving low-resolution video
US8698727B2 (en) 2007-01-05 2014-04-15 Apple Inc. Backlight and ambient light sensor system
US8214768B2 (en) 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US7978176B2 (en) 2007-01-07 2011-07-12 Apple Inc. Portrait-landscape rotation heuristics for a portable multifunction device
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
US20080168395A1 (en) 2007-01-07 2008-07-10 Bas Ording Positioning a Slider Icon on a Portable Multifunction Device
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
US20080222545A1 (en) 2007-01-07 2008-09-11 Lemay Stephen O Portable Electronic Device with a Global Setting User Interface
US8091045B2 (en) 2007-01-07 2012-01-03 Apple Inc. System and method for managing lists
US8082523B2 (en) 2007-01-07 2011-12-20 Apple Inc. Portable electronic device with graphical user interface supporting application switching
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
CN101578582A (zh) 2007-01-11 2009-11-11 皇家飞利浦电子股份有限公司 用于提供撤消/重做机制的方法和设备
CN101606124B (zh) 2007-01-25 2013-02-27 夏普株式会社 多窗口管理装置及信息处理装置
US8201087B2 (en) 2007-02-01 2012-06-12 Tegic Communications, Inc. Spell-check for a keyboard system with automatic correction
JP2008191086A (ja) 2007-02-07 2008-08-21 Matsushita Electric Ind Co Ltd ナビゲーション装置
CN101241397B (zh) 2007-02-07 2012-03-07 罗伯特·博世有限公司 具有鼠标功能的键盘及其输入方法
GB2446702A (en) 2007-02-13 2008-08-20 Qrg Ltd Touch Control Panel with Pressure Sensor
KR101450584B1 (ko) 2007-02-22 2014-10-14 삼성전자주식회사 단말의 화면 표시 방법
US8650505B2 (en) 2007-02-28 2014-02-11 Rpx Corporation Multi-state unified pie user interface
EP2541902B1 (en) 2007-03-06 2014-06-25 Panasonic Corporation Imaging processing device and image processing method
WO2008109172A1 (en) 2007-03-07 2008-09-12 Wiklof Christopher A Recorder with retrospective capture
US8352881B2 (en) 2007-03-08 2013-01-08 International Business Machines Corporation Method, apparatus and program storage device for providing customizable, immediate and radiating menus for accessing applications and actions
US7895533B2 (en) 2007-03-13 2011-02-22 Apple Inc. Interactive image thumbnails
JP4424364B2 (ja) * 2007-03-19 2010-03-03 ソニー株式会社 画像処理装置、画像処理方法
US20080244448A1 (en) 2007-04-01 2008-10-02 Katharina Goering Generation of menu presentation relative to a given menu orientation
US20080259046A1 (en) 2007-04-05 2008-10-23 Joseph Carsanaro Pressure sensitive touch pad with virtual programmable buttons for launching utility applications
US7973778B2 (en) 2007-04-16 2011-07-05 Microsoft Corporation Visual simulation of touch pressure
CN101290553A (zh) 2007-04-17 2008-10-22 索尼(中国)有限公司 具有显示屏的电子设备
US8140996B2 (en) 2007-04-17 2012-03-20 QNX Software Systems Limtied System for endless loop scrolling and display
US20100127983A1 (en) 2007-04-26 2010-05-27 Pourang Irani Pressure Augmented Mouse
US20080270910A1 (en) 2007-04-30 2008-10-30 Lukasik Derek J User selection of a remote session
KR100807738B1 (ko) * 2007-05-02 2008-02-28 삼성전자주식회사 이동 통신 단말기의 진동 생성 방법 및 장치
JP2008283629A (ja) 2007-05-14 2008-11-20 Sony Corp 撮像装置、撮像信号処理方法、プログラム
CN201107762Y (zh) 2007-05-15 2008-08-27 宏达国际电子股份有限公司 具有可切换使用者界面以及无阻碍触控操作的电子装置
US8621348B2 (en) 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
JPWO2008146784A1 (ja) 2007-05-29 2010-08-19 株式会社Access 端末装置、ヒストリ管理方法、およびヒストリ管理の為のコンピュータ使用可能な記憶媒体
US7801950B2 (en) 2007-06-01 2010-09-21 Clustrmaps Ltd. System for analyzing and visualizing access statistics for a web site
JP2008305174A (ja) 2007-06-07 2008-12-18 Sony Corp 情報処理装置、情報処理方法、プログラム
US8667418B2 (en) 2007-06-08 2014-03-04 Apple Inc. Object stack
US8745535B2 (en) 2007-06-08 2014-06-03 Apple Inc. Multi-dimensional desktop
US8010900B2 (en) 2007-06-08 2011-08-30 Apple Inc. User interface for electronic backup
US8381122B2 (en) 2007-06-08 2013-02-19 Apple Inc. Multi-dimensional application environment
US20080303795A1 (en) 2007-06-08 2008-12-11 Lowles Robert J Haptic display for a handheld electronic device
US8423914B2 (en) 2007-06-08 2013-04-16 Apple Inc. Selection user interface
US20080307359A1 (en) 2007-06-08 2008-12-11 Apple Inc. Grouping Graphical Representations of Objects in a User Interface
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8302033B2 (en) 2007-06-22 2012-10-30 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US8315482B2 (en) 2007-06-26 2012-11-20 Microsoft Corporation Integrated platform for user input of digital ink
US9772751B2 (en) 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
US20090015563A1 (en) * 2007-07-11 2009-01-15 John Thomas Sadler Stylized interactive icon for portable mobile communications device
US7805681B2 (en) 2007-07-12 2010-09-28 Sony Ericsson Mobile Communications Ab System and method for generating a thumbnail image for an audiovisual file
JP4380746B2 (ja) 2007-07-23 2009-12-09 ヤマハ株式会社 ディジタルミキサ
US8078332B2 (en) * 2007-07-26 2011-12-13 Areva T & D, Inc. Methods for managing high or low voltage conditions from selected areas of a power system of a utility company
US20090046110A1 (en) 2007-08-16 2009-02-19 Motorola, Inc. Method and apparatus for manipulating a displayed image
US20110210931A1 (en) 2007-08-19 2011-09-01 Ringbow Ltd. Finger-worn device and interaction methods and communication methods
KR20090019161A (ko) 2007-08-20 2009-02-25 삼성전자주식회사 전자 장치 및 이를 조작하는 방법
KR101424259B1 (ko) 2007-08-22 2014-07-31 삼성전자주식회사 휴대단말에서 입력 피드백 제공 방법 및 장치
US8619038B2 (en) 2007-09-04 2013-12-31 Apple Inc. Editing interface
US8826132B2 (en) 2007-09-04 2014-09-02 Apple Inc. Methods and systems for navigating content on a portable device
US9619143B2 (en) * 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US8683378B2 (en) * 2007-09-04 2014-03-25 Apple Inc. Scrolling techniques for user interfaces
US8825802B2 (en) 2007-09-04 2014-09-02 Sony Computer Entertainment America Llc System and method for identifying compatible users
US9477395B2 (en) 2007-09-04 2016-10-25 Apple Inc. Audio file interface
US20110145068A1 (en) 2007-09-17 2011-06-16 King Martin T Associating rendered advertisements with digital content
US8125458B2 (en) 2007-09-28 2012-02-28 Microsoft Corporation Detecting finger orientation on a touch-sensitive device
US20090089293A1 (en) 2007-09-28 2009-04-02 Bccg Ventures, Llc Selfish data browsing
US8098235B2 (en) * 2007-09-28 2012-01-17 Immersion Corporation Multi-touch device having dynamic haptic effects
TWI417764B (zh) 2007-10-01 2013-12-01 Giga Byte Comm Inc A control method and a device for performing a switching function of a touch screen of a hand-held electronic device
DE202008018283U1 (de) 2007-10-04 2012-07-17 Lg Electronics Inc. Menüanzeige für ein mobiles Kommunikationsendgerät
KR101570368B1 (ko) 2008-08-22 2015-11-20 엘지전자 주식회사 이동 단말기 및 그 메뉴 표시 방법
US20110047459A1 (en) 2007-10-08 2011-02-24 Willem Morkel Van Der Westhuizen User interface
KR20090036877A (ko) 2007-10-10 2009-04-15 삼성전자주식회사 다중 프로젝션 윈도우 환경에서 기준자 기반으로오브젝트를 관리하는 방법 및 그 시스템
KR100823871B1 (ko) 2007-10-11 2008-04-21 주식회사 자티전자 드래그 버튼을 이용하여 절전을 관리하는 휴대용 단말기 및그 동작방법
CN101414231B (zh) 2007-10-17 2011-09-21 鸿富锦精密工业(深圳)有限公司 触摸屏装置及其图像显示方法
US20090102805A1 (en) 2007-10-18 2009-04-23 Microsoft Corporation Three-dimensional object simulation using audio, visual, and tactile feedback
DE102007052008A1 (de) 2007-10-26 2009-04-30 Andreas Steinhauser Single- oder multitouchfähiger Touchscreen oder Touchpad bestehend aus einem Array von Drucksensoren sowie Herstellung solcher Sensoren
US8024670B1 (en) 2007-10-30 2011-09-20 Intuit Inc. Workflow management using live thumbnails
JP4974236B2 (ja) 2007-10-30 2012-07-11 アズビル株式会社 情報連携ウィンドウシステムおよびプログラム
WO2009059062A2 (en) 2007-10-31 2009-05-07 Stratovan Corporation Resolution independent layout
JP2009122011A (ja) * 2007-11-16 2009-06-04 Takashi Koyabata 触知式バイブレーション時計
JP2009129171A (ja) 2007-11-22 2009-06-11 Denso It Laboratory Inc 移動体に搭載される情報処理装置
DE102007059919A1 (de) 2007-11-26 2009-05-28 Sms Demag Ag Verfahren und Vorrichtung zum Vergleichsmäßigen des Erstarrungsvorganges eines insbesondere beim Strang- oder Bandgießen erzeugten schmelzflüssigen Metalles
TW200923758A (en) 2007-11-27 2009-06-01 Wistron Corp A key-in method and a content display method of an electronic device, and the application thereof
US8245155B2 (en) 2007-11-29 2012-08-14 Sony Corporation Computer implemented display, graphical user interface, design and method including scrolling features
US20090140985A1 (en) 2007-11-30 2009-06-04 Eric Liu Computing device that determines and uses applied pressure from user interaction with an input interface
US9513765B2 (en) 2007-12-07 2016-12-06 Sony Corporation Three-dimensional sliding object arrangement method and system
US20090167507A1 (en) * 2007-12-07 2009-07-02 Nokia Corporation User interface
US7839269B2 (en) * 2007-12-12 2010-11-23 Immersion Corporation Method and apparatus for distributing haptic synchronous signals
US8140974B2 (en) 2007-12-14 2012-03-20 Microsoft Corporation Presenting secondary media objects to a user
JP4605214B2 (ja) 2007-12-19 2011-01-05 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
TW200930009A (en) 2007-12-21 2009-07-01 Inventec Appliances Corp Procedure of acting personally hot function setting
JP2009151684A (ja) * 2007-12-21 2009-07-09 Sony Corp 触覚シート部材、入力装置及び電子機器
KR101456570B1 (ko) 2007-12-21 2014-10-31 엘지전자 주식회사 디지털 이퀄라이저를 구비한 이동 단말기 및 그 제어방법
US8233671B2 (en) 2007-12-27 2012-07-31 Intel-Ge Care Innovations Llc Reading device with hierarchal navigation
US9170649B2 (en) 2007-12-28 2015-10-27 Nokia Technologies Oy Audio and tactile feedback based on visual environment
US8707215B2 (en) 2007-12-31 2014-04-22 Motorola Mobility Llc Hand-held device and method for operating a single pointer touch sensitive user interface
US8042190B2 (en) 2007-12-31 2011-10-18 Intel Corporation Pre-boot protected memory channel
US9857872B2 (en) 2007-12-31 2018-01-02 Apple Inc. Multi-touch display screen with localized tactile feedback
US8138896B2 (en) 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US9274612B2 (en) 2008-01-04 2016-03-01 Tactus Technology, Inc. User interface system
US9063627B2 (en) 2008-01-04 2015-06-23 Tactus Technology, Inc. User interface and methods
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
JP5001182B2 (ja) 2008-01-10 2012-08-15 パナソニック株式会社 表示制御装置、電子機器、表示制御方法、およびプログラム
US8196042B2 (en) 2008-01-21 2012-06-05 Microsoft Corporation Self-revelation aids for interfaces
US8140973B2 (en) * 2008-01-23 2012-03-20 Microsoft Corporation Annotating and sharing content
US9665197B2 (en) 2008-01-30 2017-05-30 Nokia Technologies Oy Apparatus and method for enabling user input
US20090195959A1 (en) 2008-01-31 2009-08-06 Research In Motion Limited Electronic device and method for controlling same
US8504945B2 (en) 2008-02-01 2013-08-06 Gabriel Jakobson Method and system for associating content with map zoom function
US8423076B2 (en) 2008-02-01 2013-04-16 Lg Electronics Inc. User interface for a mobile device
KR101503714B1 (ko) * 2008-02-05 2015-03-20 삼성전자주식회사 Gui 제공방법 및 이를 적용한 멀티미디어 기기
KR101467513B1 (ko) 2008-02-11 2014-12-01 삼성전자 주식회사 모바일 단말 제어장치 및 그 방법
US20090295713A1 (en) 2008-05-30 2009-12-03 Julien Piot Pointing device with improved cursor control in-air and allowing multiple modes of operations
US20090207140A1 (en) 2008-02-19 2009-08-20 Sony Ericsson Mobile Communications Ab Identifying and responding to multiple time-overlapping touches on a touch panel
JP2009200713A (ja) 2008-02-20 2009-09-03 Sony Corp 画像処理装置、画像処理方法、プログラム
US8314801B2 (en) 2008-02-29 2012-11-20 Microsoft Corporation Visual state manager for control skinning
JP4752853B2 (ja) 2008-03-03 2011-08-17 株式会社デンソー 流量制御弁
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8717305B2 (en) 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US20090276730A1 (en) 2008-03-04 2009-11-05 Alexandre Aybes Techniques for navigation of hierarchically-presented data
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
JP4650699B2 (ja) 2008-03-06 2011-03-16 Necインフロンティア株式会社 入力装置、入力方法およびプログラム
KR101012300B1 (ko) 2008-03-07 2011-02-08 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 사용자 인터페이스장치 및 그 방법
JP4670879B2 (ja) 2008-03-11 2011-04-13 ブラザー工業株式会社 接触入力型の情報処理装置、接触入力型の情報処理方法、及び情報処理プログラム
KR101007045B1 (ko) 2008-03-12 2011-01-12 주식회사 애트랩 접촉센서 장치 및 이 장치의 포인팅 좌표 결정 방법
US9513704B2 (en) * 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
US20090237374A1 (en) 2008-03-20 2009-09-24 Motorola, Inc. Transparent pressure sensor and method for using
JP4530067B2 (ja) 2008-03-27 2010-08-25 ソニー株式会社 撮像装置、撮像方法及びプログラム
US8640040B2 (en) 2008-03-28 2014-01-28 Sprint Communications Company L.P. Persistent event-management access in a mobile communications device
JP2009245239A (ja) 2008-03-31 2009-10-22 Sony Corp ポインタ表示装置、ポインタ表示検出方法、ポインタ表示検出プログラム及び情報機器
US8612888B2 (en) 2008-04-01 2013-12-17 Litl, Llc Method and apparatus for managing digital media content
GB0806183D0 (en) 2008-04-04 2008-05-14 Picsel Res Ltd Presentation of objects in 3D displays
US20090251421A1 (en) 2008-04-08 2009-10-08 Sony Ericsson Mobile Communications Ab Method and apparatus for tactile perception of digital images
JP5200641B2 (ja) 2008-04-10 2013-06-05 ソニー株式会社 リスト表示装置及びリスト表示方法
US8745514B1 (en) 2008-04-11 2014-06-03 Perceptive Pixel, Inc. Pressure-sensitive layering of displayed objects
US8259208B2 (en) 2008-04-15 2012-09-04 Sony Corporation Method and apparatus for performing touch-based adjustments within imaging devices
JP5428189B2 (ja) 2008-04-17 2014-02-26 三洋電機株式会社 ナビゲーション装置
US20090267906A1 (en) 2008-04-25 2009-10-29 Nokia Corporation Touch sensitive apparatus
TW200945171A (en) 2008-04-25 2009-11-01 Htc Corp Operation method of user interface and computer readable and accessable medium and portable device
US20090271731A1 (en) 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof
JP4792058B2 (ja) 2008-04-28 2011-10-12 株式会社東芝 情報処理装置、制御方法およびプログラム
US20150205775A1 (en) 2008-05-01 2015-07-23 Eric Berdahl Managing Documents and Document Workspaces
US8159469B2 (en) 2008-05-06 2012-04-17 Hewlett-Packard Development Company, L.P. User interface for initiating activities in an electronic device
KR101461954B1 (ko) 2008-05-08 2014-11-14 엘지전자 주식회사 단말기 및 그 제어 방법
US20090280860A1 (en) 2008-05-12 2009-11-12 Sony Ericsson Mobile Communications Ab Mobile phone with directional force feedback and method
US20090284478A1 (en) 2008-05-15 2009-11-19 Microsoft Corporation Multi-Contact and Single-Contact Input
CN102027450B (zh) 2008-05-20 2015-05-13 思杰系统有限公司 由移动计算装置使用外部显示装置的方法和系统
US7958447B2 (en) 2008-05-23 2011-06-07 International Business Machines Corporation Method and system for page navigating user interfaces for electronic devices
US20090295739A1 (en) 2008-05-27 2009-12-03 Wes Albert Nagara Haptic tactile precision selection
DE602008005865D1 (de) 2008-05-29 2011-05-12 Lg Electronics Inc Transparente Anzeige und Betriebsverfahren dafür
US8314859B2 (en) 2008-05-29 2012-11-20 Lg Electronics Inc. Mobile terminal and image capturing method thereof
JP5287855B2 (ja) 2008-06-04 2013-09-11 富士通株式会社 情報処理装置および入力制御方法
US20090307633A1 (en) 2008-06-06 2009-12-10 Apple Inc. Acceleration navigation of media device displays
US8099332B2 (en) 2008-06-06 2012-01-17 Apple Inc. User interface for application management for a mobile device
CN101604208A (zh) 2008-06-12 2009-12-16 欧蜀平 一种易于使用的键盘及其软件
KR101498623B1 (ko) 2008-06-25 2015-03-04 엘지전자 주식회사 휴대 단말기 및 그 제어방법
WO2009155981A1 (en) 2008-06-26 2009-12-30 Uiq Technology Ab Gesture on touch sensitive arrangement
US8174372B2 (en) 2008-06-26 2012-05-08 Immersion Corporation Providing haptic feedback on a touch surface
US8254902B2 (en) 2008-06-26 2012-08-28 Apple Inc. Apparatus and methods for enforcement of policies upon a wireless device
JP4896932B2 (ja) 2008-06-26 2012-03-14 京セラ株式会社 入力装置
US8504946B2 (en) 2008-06-27 2013-08-06 Apple Inc. Portable device, method, and graphical user interface for automatically scrolling to display the top of an electronic document
WO2009158549A2 (en) 2008-06-28 2009-12-30 Apple Inc. Radial menu selection
US8477228B2 (en) 2008-06-30 2013-07-02 Verizon Patent And Licensing Inc. Camera data management and user interface apparatuses, systems, and methods
JP4938733B2 (ja) 2008-06-30 2012-05-23 株式会社ソニー・コンピュータエンタテインメント メニュー画面表示方法およびメニュー画面表示装置
KR101540779B1 (ko) 2008-07-01 2015-07-29 엘지전자 주식회사 휴대 단말기 및 그 제어방법
EP2141574B1 (en) 2008-07-01 2017-09-27 LG Electronics Inc. Mobile terminal using proximity sensor and method of controlling the mobile terminal
US20100013613A1 (en) * 2008-07-08 2010-01-21 Jonathan Samuel Weston Haptic feedback projection system
US10095375B2 (en) 2008-07-09 2018-10-09 Apple Inc. Adding a contact to a home screen
JP4198190B1 (ja) 2008-07-11 2008-12-17 任天堂株式会社 画像通信システム、画像通信装置、および画像通信プログラム
WO2010006639A1 (en) * 2008-07-15 2010-01-21 Gueneux Roland Conductor centric electronic music stand system
US10019061B2 (en) 2008-07-15 2018-07-10 Immersion Corporation Systems and methods for haptic message transmission
US8274484B2 (en) 2008-07-18 2012-09-25 Microsoft Corporation Tracking input in a screen-reflective interface environment
KR101495559B1 (ko) 2008-07-21 2015-02-27 삼성전자주식회사 사용자 명령 입력 방법 및 그 장치
KR20100010302A (ko) 2008-07-22 2010-02-01 엘지전자 주식회사 이동단말기 및 그 메뉴 표시방법
US9176620B2 (en) 2008-07-22 2015-11-03 Lg Electronics Inc. Mobile terminal and method for displaying information list thereof
KR20100010860A (ko) 2008-07-23 2010-02-02 엘지전자 주식회사 이동 단말기 및 그의 이벤트 제어방법
US20100220065A1 (en) 2009-02-27 2010-09-02 Research In Motion Limited Touch-sensitive display including a force-sensor and portable electronic device including same
US8237807B2 (en) 2008-07-24 2012-08-07 Apple Inc. Image capturing device with touch screen for adjusting camera settings
JP5100556B2 (ja) 2008-07-30 2012-12-19 キヤノン株式会社 情報処理方法及び装置
US10983665B2 (en) 2008-08-01 2021-04-20 Samsung Electronics Co., Ltd. Electronic apparatus and method for implementing user interface
US9280286B2 (en) * 2008-08-07 2016-03-08 International Business Machines Corporation Managing GUI control auto-advancing
CN101650615B (zh) 2008-08-13 2011-01-26 怡利电子工业股份有限公司 按压式触控板的光标控制器与键盘的自动切换方法
US8604364B2 (en) 2008-08-15 2013-12-10 Lester F. Ludwig Sensors, algorithms and applications for a high dimensional touchpad
JP4600548B2 (ja) 2008-08-27 2010-12-15 ソニー株式会社 再生装置、再生方法、およびプログラム
US10375223B2 (en) 2008-08-28 2019-08-06 Qualcomm Incorporated Notifying a user of events in a computing device
KR101537683B1 (ko) * 2008-09-02 2015-07-20 엘지전자 주식회사 휴대 단말기
US8913176B2 (en) 2008-09-05 2014-12-16 Lg Electronics Inc. Mobile terminal and method of performing multi-focusing and photographing image including plurality of objects using the same
KR101505681B1 (ko) 2008-09-05 2015-03-30 엘지전자 주식회사 터치 스크린을 구비한 이동 단말기 및 이를 이용한 이미지 촬상 방법
JP4636146B2 (ja) 2008-09-05 2011-02-23 ソニー株式会社 画像処理方法、画像処理装置、プログラム及び画像処理システム
KR101482125B1 (ko) * 2008-09-09 2015-01-13 엘지전자 주식회사 휴대 단말기 및 그 동작방법
WO2010032402A1 (ja) 2008-09-16 2010-03-25 パナソニック株式会社 データ表示装置、集積回路、データ表示方法、データ表示プログラム及び記録媒体
JP5494485B2 (ja) 2008-09-17 2014-05-14 日本電気株式会社 入力装置及びその制御方法並びに入力装置を備えた電子機器
US20100070908A1 (en) 2008-09-18 2010-03-18 Sun Microsystems, Inc. System and method for accepting or rejecting suggested text corrections
US9041650B2 (en) 2008-09-18 2015-05-26 Apple Inc. Using measurement of lateral force for a tracking input device
US8000694B2 (en) * 2008-09-18 2011-08-16 Apple Inc. Communications device having a commute time function and methods of use thereof
US8769427B2 (en) 2008-09-19 2014-07-01 Google Inc. Quick gesture input
KR101451667B1 (ko) 2008-09-24 2014-10-16 엘지전자 주식회사 단말기 및 그 제어 방법
CN101685370A (zh) 2008-09-26 2010-03-31 联想(北京)有限公司 一种进行浏览控制的方法、装置及电子设备
US8359547B2 (en) 2008-10-01 2013-01-22 Nintendo Co., Ltd. Movable user interface indicator of at least one parameter that is adjustable with different operations for increasing and decreasing the parameter and/or methods of providing the same
US8462107B2 (en) 2008-10-03 2013-06-11 International Business Machines Corporation Pointing device and method with error prevention features
EP3654141A1 (en) * 2008-10-06 2020-05-20 Samsung Electronics Co., Ltd. Method and apparatus for displaying graphical user interface depending on a user's contact pattern
US20100088628A1 (en) 2008-10-07 2010-04-08 Sony Ericsson Mobile Communications Ab Live preview of open windows
US9442648B2 (en) 2008-10-07 2016-09-13 Blackberry Limited Portable electronic device and method of controlling same
US20100085314A1 (en) 2008-10-08 2010-04-08 Research In Motion Limited Portable electronic device and method of controlling same
EP2175349A1 (en) 2008-10-08 2010-04-14 Research in Motion Limited Method and system for displaying an image on a handheld electronic communication device
US8245143B2 (en) 2008-10-08 2012-08-14 Research In Motion Limited Method and handheld electronic device having a graphical user interface which arranges icons dynamically
EP2175357B1 (en) 2008-10-08 2012-11-21 Research In Motion Limited Portable electronic device and method of controlling same
US20100088654A1 (en) 2008-10-08 2010-04-08 Research In Motion Limited Electronic device having a state aware touchscreen
KR100961473B1 (ko) 2008-10-15 2010-06-08 주식회사 케이티 무선 인터넷 브라우저의 웹 페이지 내용을 메시징하는 이동단말 및 그 방법
JP2010097353A (ja) 2008-10-15 2010-04-30 Access Co Ltd 情報端末
KR100941512B1 (ko) 2008-10-15 2010-02-10 (주)엠쓰리모바일 스타일러스 펜
KR101510738B1 (ko) 2008-10-20 2015-04-10 삼성전자주식회사 휴대단말의 대기화면 구성 방법 및 장치
KR100902354B1 (ko) * 2008-10-22 2009-06-12 (주)이미지스테크놀로지 직렬 인터페이스를 이용한 진동모터 구동장치
US8497690B2 (en) 2008-10-27 2013-07-30 Microchip Technology Incorporated Automated capacitive touch scan
JP5540344B2 (ja) 2008-10-30 2014-07-02 シャープ株式会社 電子機器、メニューの選択方法、メニューの選択プログラム
KR101569176B1 (ko) 2008-10-30 2015-11-20 삼성전자주식회사 오브젝트 실행 방법 및 장치
WO2010051493A2 (en) 2008-10-31 2010-05-06 Nettoons, Inc. Web-based real-time animation visualization, creation, and distribution
CN101727268A (zh) 2008-11-03 2010-06-09 英业达股份有限公司 手持式电子装置与其程序显示切换方法
US8704775B2 (en) 2008-11-11 2014-04-22 Adobe Systems Incorporated Biometric adjustments for touchscreens
EP2863289A1 (en) 2008-11-18 2015-04-22 Studer Professional Audio GmbH Input device and method of detecting a user input with an input device
JP4752900B2 (ja) 2008-11-19 2011-08-17 ソニー株式会社 画像処理装置、画像表示方法および画像表示プログラム
US20100123686A1 (en) 2008-11-19 2010-05-20 Sony Ericsson Mobile Communications Ab Piezoresistive force sensor integrated in a display
US8788977B2 (en) 2008-11-20 2014-07-22 Amazon Technologies, Inc. Movement recognition as input mechanism
CA2741580C (en) 2008-11-26 2016-10-18 Research In Motion Limited Touch-sensitive display method and apparatus
US20100138776A1 (en) 2008-11-30 2010-06-03 Nokia Corporation Flick-scrolling
DE112009003521T5 (de) 2008-12-04 2013-10-10 Mitsubishi Electric Corp. Anzeigeeingabevorrichtung
US8677287B2 (en) 2008-12-04 2014-03-18 Mitsubishi Electric Corporation Display input device and navigation device
US20100146507A1 (en) 2008-12-05 2010-06-10 Kang Dong-Oh System and method of delivery of virtual machine using context information
KR20100065640A (ko) 2008-12-08 2010-06-17 삼성전자주식회사 터치스크린의 햅틱 피드백 방법
US8638311B2 (en) 2008-12-08 2014-01-28 Samsung Electronics Co., Ltd. Display device and data displaying method thereof
JP2010165337A (ja) 2008-12-15 2010-07-29 Sony Corp 情報処理装置、情報処理方法およびプログラム
US8707170B2 (en) 2008-12-15 2014-04-22 Hewlett-Packard Development Company, L.P. Gesture based edit mode
US8737800B2 (en) * 2008-12-16 2014-05-27 At&T Intellectual Property I, L.P. System and method to display a progress bar
US9246487B2 (en) 2008-12-16 2016-01-26 Dell Products Lp Keyboard with user configurable granularity scales for pressure sensitive keys
US8711011B2 (en) 2008-12-16 2014-04-29 Dell Products, Lp Systems and methods for implementing pressure sensitive keyboards
US20100149096A1 (en) 2008-12-17 2010-06-17 Migos Charles J Network management using interaction with display surface
CN105607837A (zh) 2008-12-18 2016-05-25 日本电气株式会社 滑动条显示控制装置以及滑动条显示控制方法
KR101352264B1 (ko) 2008-12-18 2014-01-17 엘지디스플레이 주식회사 멀티 터치 감지방법 및 장치
US8331992B2 (en) 2008-12-19 2012-12-11 Verizon Patent And Licensing Inc. Interactive locked state mobile communication device
US8330732B2 (en) 2008-12-19 2012-12-11 Honeywell International Inc. Method and apparatus for avionic touchscreen operation providing sensible feedback
US8289286B2 (en) 2008-12-19 2012-10-16 Verizon Patent And Licensing Inc. Zooming keyboard/keypad
US8453057B2 (en) 2008-12-22 2013-05-28 Verizon Patent And Licensing Inc. Stage interaction for mobile device
US8451236B2 (en) 2008-12-22 2013-05-28 Hewlett-Packard Development Company L.P. Touch-sensitive display screen with absolute and relative input modes
US8547342B2 (en) 2008-12-22 2013-10-01 Verizon Patent And Licensing Inc. Gesture-based delivery from mobile device
JP4975722B2 (ja) 2008-12-22 2012-07-11 京セラ株式会社 入力装置および入力装置の制御方法
EP2202619A1 (en) 2008-12-23 2010-06-30 Research In Motion Limited Portable electronic device including tactile touch-sensitive input device and method of controlling same
US20100156823A1 (en) 2008-12-23 2010-06-24 Research In Motion Limited Electronic device including touch-sensitive display and method of controlling same to provide tactile feedback
US8686952B2 (en) 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
JP4885938B2 (ja) 2008-12-25 2012-02-29 京セラ株式会社 入力装置
JP4746085B2 (ja) 2008-12-25 2011-08-10 京セラ株式会社 入力装置
JP4683126B2 (ja) 2008-12-26 2011-05-11 ブラザー工業株式会社 入力装置
WO2010077063A2 (ko) 2008-12-30 2010-07-08 엘지전자 주식회사 영상표시기기 및 그 제어 방법
US8219927B2 (en) 2009-01-06 2012-07-10 Microsoft Corporation Revealing of truncated content on scrollable grid
US8446376B2 (en) 2009-01-13 2013-05-21 Microsoft Corporation Visual response to touch inputs
US20100180136A1 (en) 2009-01-15 2010-07-15 Validity Sensors, Inc. Ultra Low Power Wake-On-Event Mode For Biometric Systems
JP2010176174A (ja) 2009-01-27 2010-08-12 Fujifilm Corp 電子機器および電子機器の操作入力制御方法、並びに電子機器の操作入力制御プログラム
US8378979B2 (en) 2009-01-27 2013-02-19 Amazon Technologies, Inc. Electronic device with haptic feedback
JP5173870B2 (ja) 2009-01-28 2013-04-03 京セラ株式会社 入力装置
US20100194693A1 (en) 2009-01-30 2010-08-05 Sony Ericsson Mobile Communications Ab Electronic apparatus, method and computer program with adaptable user interface environment
EP2214087B1 (en) 2009-01-30 2015-07-08 BlackBerry Limited A handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device
JP4723656B2 (ja) 2009-02-03 2011-07-13 京セラ株式会社 入力装置
JP5174704B2 (ja) 2009-02-03 2013-04-03 株式会社ゼンリンデータコム 画像処理装置および画像処理方法
US9152292B2 (en) 2009-02-05 2015-10-06 Hewlett-Packard Development Company, L.P. Image collage authoring
US9176747B2 (en) 2009-02-17 2015-11-03 Sandisk Il Ltd. User-application interface
EP2399385B1 (en) 2009-02-18 2019-11-06 Google LLC Automatically capturing information, such as capturing information using a document-aware device
US20100214239A1 (en) 2009-02-23 2010-08-26 Compal Electronics, Inc. Method and touch panel for providing tactile feedback
DE102009010277A1 (de) * 2009-02-24 2010-09-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Eingabevorrichtung und Verfahren zum Bereitstellen eines einer Sensorfeldbelegung zugeordneten Ausgangssignals
JP5734546B2 (ja) 2009-02-25 2015-06-17 京セラ株式会社 オブジェクト表示装置
CN101498979B (zh) 2009-02-26 2010-12-29 苏州瀚瑞微电子有限公司 利用电容式触摸屏实现虚拟键盘的方法
US20100214135A1 (en) * 2009-02-26 2010-08-26 Microsoft Corporation Dynamic rear-projected user interface
KR100993064B1 (ko) 2009-03-02 2010-11-08 주식회사 팬택 터치 스크린 적용 음원 재생 장치에서의 음원 선택 재생 방법
US8077021B2 (en) 2009-03-03 2011-12-13 Empire Technology Development Llc Dynamic tactile interface
JP5267229B2 (ja) 2009-03-09 2013-08-21 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
JP5157969B2 (ja) 2009-03-09 2013-03-06 ソニー株式会社 情報処理装置、閾値設定方法及びそのプログラム
JP5779508B2 (ja) 2009-03-12 2015-09-16 イマージョン コーポレーションImmersion Corporation テクスチャエンジン用のシステム及び方法
EP3467624A1 (en) * 2009-03-12 2019-04-10 Immersion Corporation System and method for interfaces featuring surface-based haptic effects
WO2010105246A2 (en) 2009-03-12 2010-09-16 Exbiblio B.V. Accessing resources based on capturing information from a rendered document
US10007340B2 (en) * 2009-03-12 2018-06-26 Immersion Corporation Systems and methods for interfaces featuring surface-based haptic effects
US8510665B2 (en) 2009-03-16 2013-08-13 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
US8589374B2 (en) 2009-03-16 2013-11-19 Apple Inc. Multifunction device with integrated search and application selection
US9262071B2 (en) 2009-03-16 2016-02-16 Microsoft Technology Licensing, Llc Direct manipulation of content
US9852761B2 (en) 2009-03-16 2017-12-26 Apple Inc. Device, method, and graphical user interface for editing an audio or video attachment in an electronic message
US8572513B2 (en) 2009-03-16 2013-10-29 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
KR101549558B1 (ko) 2009-03-18 2015-09-03 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US20100241955A1 (en) 2009-03-23 2010-09-23 Microsoft Corporation Organization and manipulation of content items on a touch-sensitive display
JP5398728B2 (ja) 2009-03-23 2014-01-29 パナソニック株式会社 情報処理装置、情報処理方法、記録媒体、及び集積回路
JP5252378B2 (ja) 2009-03-26 2013-07-31 ヤマハ株式会社 ミキサ装置のウィンドウ制御方法、ミキサ装置、およびミキサ装置のウィンドウ制御プログラム
US8175653B2 (en) 2009-03-30 2012-05-08 Microsoft Corporation Chromeless user interface
US8355698B2 (en) 2009-03-30 2013-01-15 Microsoft Corporation Unlock screen
JP4904375B2 (ja) 2009-03-31 2012-03-28 京セラ株式会社 ユーザインタフェース装置及び携帯端末装置
DE102009015991A1 (de) * 2009-04-02 2010-10-07 Pi Ceramic Gmbh Keramische Technologien Und Bauelemente Vorrichtung zur Erzeugung einer haptischen Rückmeldung einer tastenlosen Eingabeeinheit
CN102460355B (zh) 2009-04-05 2016-03-16 放射粒子工程有限公司 一体化输入和显示系统及方法
US9189124B2 (en) 2009-04-15 2015-11-17 Wyse Technology L.L.C. Custom pointer features for touch-screen on remote client devices
US20100271312A1 (en) 2009-04-22 2010-10-28 Rachid Alameh Menu Configuration System and Method for Display on an Electronic Device
WO2010122814A1 (ja) 2009-04-24 2010-10-28 京セラ株式会社 入力装置
US8884895B2 (en) 2009-04-24 2014-11-11 Kyocera Corporation Input apparatus
KR20100118458A (ko) 2009-04-28 2010-11-05 엘지전자 주식회사 이미지 처리 방법 및 이를 적용한 카메라가 장착된 이동 통신 단말기
US9354795B2 (en) 2009-04-29 2016-05-31 Lenovo (Singapore) Pte. Ltd Refining manual input interpretation on touch surfaces
US8418082B2 (en) 2009-05-01 2013-04-09 Apple Inc. Cross-track edit indicators and edit selections
US8627207B2 (en) * 2009-05-01 2014-01-07 Apple Inc. Presenting an editing tool in a composite display area
US8739055B2 (en) 2009-05-07 2014-05-27 Microsoft Corporation Correction of typographical errors on touch displays
US8669945B2 (en) 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
US20100293460A1 (en) 2009-05-14 2010-11-18 Budelli Joe G Text selection method and system based on gestures
US8427503B2 (en) 2009-05-18 2013-04-23 Nokia Corporation Method, apparatus and computer program product for creating graphical objects with desired physical features for usage in animation
KR101613838B1 (ko) 2009-05-19 2016-05-02 삼성전자주식회사 휴대 단말기의 홈 스크린 지원 방법 및 이를 지원하는 휴대 단말기
KR101640463B1 (ko) 2009-05-19 2016-07-18 삼성전자 주식회사 휴대 단말기의 운용 방법 및 이를 지원하는 휴대 단말기
KR101601040B1 (ko) 2009-05-19 2016-03-09 삼성전자주식회사 휴대 단말기의 화면 표시 방법 및 이를 지원하는 휴대 단말기
US8473862B1 (en) 2009-05-21 2013-06-25 Perceptive Pixel Inc. Organizational tools on a multi-touch display device
US20140078318A1 (en) 2009-05-22 2014-03-20 Motorola Mobility Llc Electronic Device with Sensing Assembly and Method for Interpreting Consecutive Gestures
US8549432B2 (en) 2009-05-29 2013-10-01 Apple Inc. Radial menus
KR101560718B1 (ko) 2009-05-29 2015-10-15 엘지전자 주식회사 이동 단말기 및 이동 단말기에서의 정보 표시 방법
US9148618B2 (en) 2009-05-29 2015-09-29 Apple Inc. Systems and methods for previewing newly captured image content and reviewing previously stored image content
KR20100129424A (ko) 2009-06-01 2010-12-09 한국표준과학연구원 터치스크린의 접촉위치 및 접촉힘의 세기를 이용한 사용자 인터페이스 제공 방법 및 장치
US9086875B2 (en) 2009-06-05 2015-07-21 Qualcomm Incorporated Controlling power consumption of a mobile device based on gesture recognition
US9372536B2 (en) 2009-06-05 2016-06-21 Empire Technology Development Llc Touch screen with tactile feedback
US9009612B2 (en) 2009-06-07 2015-04-14 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US9405456B2 (en) 2009-06-08 2016-08-02 Xerox Corporation Manipulation of displayed objects by virtual magnetism
US8621387B2 (en) 2009-06-08 2013-12-31 Apple Inc. User interface for multiple display regions
US20100313158A1 (en) 2009-06-08 2010-12-09 Lg Electronics Inc. Method for editing data in mobile terminal and mobile terminal using the same
US8732592B2 (en) 2009-06-08 2014-05-20 Battelle Energy Alliance, Llc Methods and systems relating to an augmented virtuality environment
US8823749B2 (en) 2009-06-10 2014-09-02 Qualcomm Incorporated User interface methods providing continuous zoom functionality
KR101598335B1 (ko) 2009-06-11 2016-02-29 엘지전자 주식회사 휴대 단말기 및 그 동작방법
US9330503B2 (en) 2009-06-19 2016-05-03 Microsoft Technology Licensing, Llc Presaging and surfacing interactivity within data visualizations
US8593415B2 (en) 2009-06-19 2013-11-26 Lg Electronics Inc. Method for processing touch signal in mobile terminal and mobile terminal using the same
CN101609380A (zh) 2009-06-23 2009-12-23 苏州瀚瑞微电子有限公司 一种在触摸屏上文件操作的方法
US9626094B2 (en) 2009-06-26 2017-04-18 Kyocera Corporation Communication device and electronic device
JP5370754B2 (ja) 2009-06-30 2013-12-18 ソニー株式会社 入力装置および入力方法
US20100328229A1 (en) 2009-06-30 2010-12-30 Research In Motion Limited Method and apparatus for providing tactile feedback
EP2449452B1 (en) 2009-07-03 2016-02-10 Tactus Technology User interface enhancement system
JP5531467B2 (ja) 2009-07-03 2014-06-25 ソニー株式会社 撮像装置、および画像処理方法、並びにプログラム
US20110010626A1 (en) 2009-07-09 2011-01-13 Jorge Fino Device and Method for Adjusting a Playback Control with a Finger Gesture
KR101608764B1 (ko) 2009-07-14 2016-04-04 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
KR101387270B1 (ko) * 2009-07-14 2014-04-18 주식회사 팬택 터치 궤적에 따라 메뉴 정보를 표시하는 이동 단말기
US8378798B2 (en) 2009-07-24 2013-02-19 Research In Motion Limited Method and apparatus for a touch-sensitive display
JP2011028635A (ja) 2009-07-28 2011-02-10 Sony Corp 表示制御装置、表示制御方法およびコンピュータプログラム
JP5197521B2 (ja) 2009-07-29 2013-05-15 京セラ株式会社 入力装置
US9244562B1 (en) 2009-07-31 2016-01-26 Amazon Technologies, Inc. Gestures and touches on force-sensitive input devices
KR101276749B1 (ko) 2009-08-03 2013-06-19 엘지디스플레이 주식회사 전기영동 표시장치 및 그 제조 방법
CN101630230A (zh) 2009-08-04 2010-01-20 苏州瀚瑞微电子有限公司 感应量控制缩放倍率的方法
JP5398408B2 (ja) 2009-08-07 2014-01-29 オリンパスイメージング株式会社 カメラ、カメラの制御方法、表示制御装置、および表示制御方法
KR101608532B1 (ko) 2009-08-11 2016-04-01 엘지전자 주식회사 이동 통신 단말기에서의 데이터 표시방법 및 이를 적용한 이동 통신 단말기
US20110039602A1 (en) 2009-08-13 2011-02-17 Mcnamara Justin Methods And Systems For Interacting With Content On A Mobile Device
US20110037706A1 (en) 2009-08-14 2011-02-17 Research In Motion Limited Electronic device including tactile touch-sensitive input device and method of controlling same
US8243983B2 (en) 2009-08-14 2012-08-14 Microsoft Corporation Graphically encoded data copy and paste
US8434153B2 (en) 2009-08-24 2013-04-30 Microsoft Corporation Application display on a locked device
JP2011048023A (ja) * 2009-08-25 2011-03-10 Pioneer Electronic Corp 体感振動生成装置および体感振動生成方法
US20110070342A1 (en) 2009-08-26 2011-03-24 Wilkens Patrick J Method for evaluating and orientating baked product
US20110055135A1 (en) 2009-08-26 2011-03-03 International Business Machines Corporation Deferred Teleportation or Relocation in Virtual Worlds
JP2011048669A (ja) 2009-08-27 2011-03-10 Kyocera Corp 入力装置
US8363020B2 (en) 2009-08-27 2013-01-29 Symbol Technologies, Inc. Methods and apparatus for pressure-based manipulation of content on a touch screen
JP2011048686A (ja) 2009-08-27 2011-03-10 Kyocera Corp 入力装置
JP5310389B2 (ja) 2009-08-27 2013-10-09 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP5304544B2 (ja) 2009-08-28 2013-10-02 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP5593655B2 (ja) 2009-08-31 2014-09-24 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8390583B2 (en) 2009-08-31 2013-03-05 Qualcomm Incorporated Pressure sensitive user interface for mobile devices
JP5267388B2 (ja) 2009-08-31 2013-08-21 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
KR20110023977A (ko) 2009-09-01 2011-03-09 삼성전자주식회사 휴대단말기의 위젯 관리 방법 및 장치
JP5310403B2 (ja) 2009-09-02 2013-10-09 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP2011053971A (ja) 2009-09-02 2011-03-17 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP5182260B2 (ja) 2009-09-02 2013-04-17 ソニー株式会社 操作制御装置、操作制御方法およびコンピュータプログラム
JP2011053974A (ja) 2009-09-02 2011-03-17 Sony Corp 操作制御装置、操作制御方法およびコンピュータプログラム
US9262063B2 (en) 2009-09-02 2016-02-16 Amazon Technologies, Inc. Touch-screen user interface
IN2012DN01870A (ja) 2009-09-02 2015-08-21 Amazon Tech Inc
US8451238B2 (en) 2009-09-02 2013-05-28 Amazon Technologies, Inc. Touch-screen user interface
TW201109990A (en) 2009-09-04 2011-03-16 Higgstec Inc Touch gesture detecting method of a touch panel
KR101150545B1 (ko) 2009-09-07 2012-06-11 주식회사 팬택앤큐리텔 이동통신단말기 및 그것의 화면 전환 방법
JP5278259B2 (ja) 2009-09-07 2013-09-04 ソニー株式会社 入力装置、入力方法及びプログラム
KR101691823B1 (ko) 2009-09-09 2017-01-02 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
EP2302496A1 (en) 2009-09-10 2011-03-30 Research In Motion Limited Dynamic sizing of identifier on a touch-sensitive display
US20110057886A1 (en) 2009-09-10 2011-03-10 Oliver Ng Dynamic sizing of identifier on a touch-sensitive display
KR20110028834A (ko) 2009-09-14 2011-03-22 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 터치 압력을 이용한 사용자 인터페이스 제공 방법 및 장치
JP5218353B2 (ja) 2009-09-14 2013-06-26 ソニー株式会社 情報処理装置、表示方法及びプログラム
EP3260969B1 (en) 2009-09-22 2021-03-03 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8264471B2 (en) 2009-09-22 2012-09-11 Sony Mobile Communications Ab Miniature character input mechanism
US8421762B2 (en) * 2009-09-25 2013-04-16 Apple Inc. Device, method, and graphical user interface for manipulation of user interface objects with activation regions
JP5393377B2 (ja) 2009-09-25 2014-01-22 京セラ株式会社 入力装置
US8780055B2 (en) 2009-10-02 2014-07-15 Blackberry Limited Low power wakeup detection circuit and a portable electronic device having a low power wakeup detection circuit
US8970507B2 (en) 2009-10-02 2015-03-03 Blackberry Limited Method of waking up and a portable electronic device configured to perform the same
US8436806B2 (en) 2009-10-02 2013-05-07 Research In Motion Limited Method of synchronizing data acquisition and a portable electronic device configured to perform the same
US9141260B2 (en) 2009-10-08 2015-09-22 Red Hat, Inc. Workspace management tool
US20110084910A1 (en) 2009-10-13 2011-04-14 Research In Motion Limited Portable electronic device including touch-sensitive display and method of controlling same
KR101092592B1 (ko) 2009-10-14 2011-12-13 주식회사 팬택 이동통신단말기 및 이의 터치 인터페이스 제공 방법
US10068728B2 (en) 2009-10-15 2018-09-04 Synaptics Incorporated Touchpad with capacitive force sensing
CA2680602C (en) 2009-10-19 2011-07-26 Ibm Canada Limited - Ibm Canada Limitee System and method for generating and displaying hybrid context menus
KR20110047349A (ko) 2009-10-30 2011-05-09 주식회사 팬택 휴대용 단말기에서 터치와 가압을 이용하는 사용자 인터페이스 장치 및 방법
US20110102829A1 (en) * 2009-10-30 2011-05-05 Jourdan Arlene T Image size warning
US8677284B2 (en) 2009-11-04 2014-03-18 Alpine Electronics, Inc. Method and apparatus for controlling and displaying contents in a user interface
JP5328611B2 (ja) 2009-11-05 2013-10-30 シャープ株式会社 携帯情報端末
US20110109617A1 (en) 2009-11-12 2011-05-12 Microsoft Corporation Visualizing Depth
WO2011060382A1 (en) 2009-11-13 2011-05-19 Google Inc. Live wallpaper
JP2011107823A (ja) 2009-11-13 2011-06-02 Canon Inc 表示制御装置及び表示制御方法
KR101725888B1 (ko) 2009-11-13 2017-04-13 삼성전자주식회사 카메라 또는 원격 제어 장치에서의 이미지 제공 방법 및 그 장치
KR101611440B1 (ko) 2009-11-16 2016-04-11 삼성전자주식회사 이미지 처리 방법 및 장치
US8432367B2 (en) 2009-11-19 2013-04-30 Google Inc. Translating user interaction with a touch screen into input commands
US8665227B2 (en) 2009-11-19 2014-03-04 Motorola Mobility Llc Method and apparatus for replicating physical key function with soft keys in an electronic device
KR101620058B1 (ko) 2009-11-23 2016-05-24 삼성전자주식회사 가상 머신 간 화면 전환 장치 및 방법
KR101073309B1 (ko) 2009-11-24 2011-10-12 삼성모바일디스플레이주식회사 터치 스크린 시스템 및 그 구동방법
US8799816B2 (en) 2009-12-07 2014-08-05 Motorola Mobility Llc Display interface and method for displaying multiple items arranged in a sequence
US8769428B2 (en) 2009-12-09 2014-07-01 Citrix Systems, Inc. Methods and systems for generating a combined display of taskbar button group entries generated on a local machine and on a remote machine
US9557735B2 (en) 2009-12-10 2017-01-31 Fisher-Rosemount Systems, Inc. Methods and apparatus to manage process control status rollups
US8633916B2 (en) 2009-12-10 2014-01-21 Apple, Inc. Touch pad with force sensors and actuator feedback
JP5490508B2 (ja) * 2009-12-11 2014-05-14 京セラ株式会社 タッチセンサを有する装置、触感呈示方法及び触感呈示プログラム
US8358281B2 (en) 2009-12-15 2013-01-22 Apple Inc. Device, method, and graphical user interface for management and manipulation of user interface elements
US8381125B2 (en) * 2009-12-16 2013-02-19 Apple Inc. Device and method for resizing user interface content while maintaining an aspect ratio via snapping a perimeter to a gridline
US20110154199A1 (en) * 2009-12-17 2011-06-23 Flying Car Ltd. Method of Playing An Enriched Audio File
WO2011076248A1 (en) 2009-12-21 2011-06-30 Promethean Limited Multi-point contacts with pressure data on an interactive surface
US8274592B2 (en) 2009-12-22 2012-09-25 Eastman Kodak Company Variable rate browsing of an image collection
KR20110074024A (ko) 2009-12-24 2011-06-30 삼성전자주식회사 멀티미디어 기기
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8525839B2 (en) 2010-01-06 2013-09-03 Apple Inc. Device, method, and graphical user interface for providing digital content products
US8510677B2 (en) 2010-01-06 2013-08-13 Apple Inc. Device, method, and graphical user interface for navigating through a range of values
US20110167339A1 (en) 2010-01-06 2011-07-07 Lemay Stephen O Device, Method, and Graphical User Interface for Attachment Viewing and Editing
US8698845B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface with interactive popup views
US8793611B2 (en) 2010-01-06 2014-07-29 Apple Inc. Device, method, and graphical user interface for manipulating selectable user interface objects
US8862576B2 (en) 2010-01-06 2014-10-14 Apple Inc. Device, method, and graphical user interface for mapping directions between search results
US8438504B2 (en) 2010-01-06 2013-05-07 Apple Inc. Device, method, and graphical user interface for navigating through multiple viewing areas
KR101616875B1 (ko) * 2010-01-07 2016-05-02 삼성전자주식회사 터치 패널 및 이를 구비한 전자기기
US9053098B2 (en) 2010-01-14 2015-06-09 Abbyy Development Llc Insertion of translation in displayed text consisting of grammatical variations pertaining to gender, number and tense
US20110175826A1 (en) 2010-01-15 2011-07-21 Bradford Allen Moore Automatically Displaying and Hiding an On-screen Keyboard
US9715332B1 (en) 2010-08-26 2017-07-25 Cypress Lake Software, Inc. Methods, systems, and computer program products for navigating between visual components
US10007393B2 (en) 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
JP5636678B2 (ja) 2010-01-19 2014-12-10 ソニー株式会社 表示制御装置、表示制御方法及び表示制御プログラム
JP2011170834A (ja) 2010-01-19 2011-09-01 Sony Corp 情報処理装置、操作予測方法及び操作予測プログラム
US20110179381A1 (en) 2010-01-21 2011-07-21 Research In Motion Limited Portable electronic device and method of controlling same
US8914732B2 (en) 2010-01-22 2014-12-16 Lg Electronics Inc. Displaying home screen profiles on a mobile terminal
KR101319264B1 (ko) 2010-01-22 2013-10-18 전자부품연구원 멀티 터치 압력에 기반한 ui 제공방법 및 이를 적용한 전자기기
JP2011176794A (ja) 2010-01-26 2011-09-08 Canon Inc 撮像装置及び撮像方法
US20110181521A1 (en) * 2010-01-26 2011-07-28 Apple Inc. Techniques for controlling z-ordering in a user interface
US8683363B2 (en) 2010-01-26 2014-03-25 Apple Inc. Device, method, and graphical user interface for managing user interface content and user interface elements
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
US20110185299A1 (en) 2010-01-28 2011-07-28 Microsoft Corporation Stamp Gestures
JP5489118B2 (ja) 2010-01-28 2014-05-14 健治 吉田 入出力装置、情報入出力システム
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US10397639B1 (en) 2010-01-29 2019-08-27 Sitting Man, Llc Hot key systems and methods
US20110191675A1 (en) * 2010-02-01 2011-08-04 Nokia Corporation Sliding input user interface
US20110193881A1 (en) 2010-02-05 2011-08-11 Sony Ericsson Mobile Communications Ab Regulation of navigation speed among displayed items and tilt angle thereof responsive to user applied pressure
US8988367B2 (en) 2010-02-05 2015-03-24 Broadcom Corporation Systems and methods for providing enhanced touch sensing
US8839150B2 (en) 2010-02-10 2014-09-16 Apple Inc. Graphical objects that respond to touch or motion input
KR101673918B1 (ko) 2010-02-11 2016-11-09 삼성전자주식회사 휴대단말에서 복수의 정보들을 제공하는 방법 및 장치
US9417787B2 (en) 2010-02-12 2016-08-16 Microsoft Technology Licensing, Llc Distortion effects to indicate location in a movable data collection
KR101690786B1 (ko) 2010-02-12 2016-12-28 삼성전자주식회사 멀티태스킹 수행 장치 및 방법
US8782556B2 (en) 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
US20110202853A1 (en) 2010-02-15 2011-08-18 Research In Motion Limited Contact objects
EP2360570A3 (en) 2010-02-15 2012-05-16 Research In Motion Limited Graphical context short menu
JP2011170538A (ja) 2010-02-17 2011-09-01 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2011197848A (ja) 2010-03-18 2011-10-06 Rohm Co Ltd タッチパネル入力装置
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US9274682B2 (en) 2010-02-19 2016-03-01 Microsoft Technology Licensing, Llc Off-screen gestures to create on-screen input
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
EP2360507B1 (en) 2010-02-22 2014-11-05 DST Innovations Limited Display elements
EP2541376B1 (en) 2010-02-23 2019-07-31 Kyocera Corporation Electronic apparatus
WO2011104709A2 (en) 2010-02-23 2011-09-01 Rami Parham A system for projecting content to a display surface having user-controlled size, shape and location/direction and apparatus and methods useful in conjunction therewith
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US9535500B2 (en) * 2010-03-01 2017-01-03 Blackberry Limited Method of providing tactile feedback and apparatus
EP2363790A1 (en) * 2010-03-01 2011-09-07 Research In Motion Limited Method of providing tactile feedback and apparatus
US9361018B2 (en) * 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
KR101161943B1 (ko) 2010-03-04 2012-07-04 삼성전기주식회사 햅틱 피드백 디바이스 및 전자 장치
US8941600B2 (en) 2010-03-05 2015-01-27 Mckesson Financial Holdings Apparatus for providing touch feedback for user input to a touch sensitive surface
JP5413250B2 (ja) 2010-03-05 2014-02-12 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US20110221684A1 (en) 2010-03-11 2011-09-15 Sony Ericsson Mobile Communications Ab Touch-sensitive input device, mobile device and method for operating a touch-sensitive input device
JP2011192215A (ja) 2010-03-16 2011-09-29 Kyocera Corp 文字入力装置、文字入力方法及び文字入力プログラム
JP2011192179A (ja) 2010-03-16 2011-09-29 Kyocera Corp 文字入力装置、文字入力方法及び文字入力プログラム
CN101840299A (zh) 2010-03-18 2010-09-22 华为终端有限公司 一种触摸操作方法、装置和移动终端
CN102812422B (zh) * 2010-03-18 2016-01-06 京瓷株式会社 电子设备
US8756522B2 (en) 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
US8884913B2 (en) 2010-03-19 2014-11-11 Smart Skin Technologies Systems and methods for determining the location and pressure of a touchload applied to a touchpad
US9069416B2 (en) 2010-03-25 2015-06-30 Google Inc. Method and system for selecting content using a touchscreen
US9335894B1 (en) 2010-03-26 2016-05-10 Open Invention Network, Llc Providing data input touch screen interface to multiple users based on previous command selections
US8725706B2 (en) 2010-03-26 2014-05-13 Nokia Corporation Method and apparatus for multi-item searching
US9990062B2 (en) 2010-03-26 2018-06-05 Nokia Technologies Oy Apparatus and method for proximity based input
EP2553555A1 (en) 2010-03-31 2013-02-06 Nokia Corp. Apparatuses, methods and computer programs for a virtual stylus
US8996901B2 (en) 2010-03-31 2015-03-31 Lenovo (Singapore) Pte. Ltd. Power management of electronic device with display
US8826184B2 (en) 2010-04-05 2014-09-02 Lg Electronics Inc. Mobile terminal and image display controlling method thereof
JP2011221640A (ja) 2010-04-06 2011-11-04 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20110252376A1 (en) 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications
US10788976B2 (en) 2010-04-07 2020-09-29 Apple Inc. Device, method, and graphical user interface for managing folders with multiple pages
US8458615B2 (en) 2010-04-07 2013-06-04 Apple Inc. Device, method, and graphical user interface for managing folders
US9823831B2 (en) 2010-04-07 2017-11-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
EP2375309A1 (en) 2010-04-08 2011-10-12 Research in Motion Limited Handheld device with localized delays for triggering tactile feedback
US20110248930A1 (en) 2010-04-08 2011-10-13 Research In Motion Limited Portable electronic device and method of controlling same to provide tactile feedback
US9417695B2 (en) 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
EP2375314A1 (en) 2010-04-08 2011-10-12 Research in Motion Limited Touch-sensitive device and method of control
US20110248948A1 (en) * 2010-04-08 2011-10-13 Research In Motion Limited Touch-sensitive device and method of control
JP5459031B2 (ja) 2010-04-13 2014-04-02 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
EP2378406B1 (en) 2010-04-13 2018-08-22 LG Electronics Inc. Mobile terminal and method of controlling operation of the mobile terminal
US9026932B1 (en) 2010-04-16 2015-05-05 Amazon Technologies, Inc. Edge navigation user interface
KR101668240B1 (ko) 2010-04-19 2016-10-21 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
US9285988B2 (en) 2010-04-20 2016-03-15 Blackberry Limited Portable electronic device having touch-sensitive display with variable repeat rate
KR101704531B1 (ko) 2010-04-22 2017-02-08 삼성전자주식회사 휴대 단말기의 텍스트 정보 표시 방법 및 장치
JP2011242386A (ja) * 2010-04-23 2011-12-01 Immersion Corp 接触センサと触覚アクチュエータとの透明複合圧電材結合体
US8631350B2 (en) 2010-04-23 2014-01-14 Blackberry Limited Graphical context short menu
US9134897B2 (en) 2010-04-26 2015-09-15 Via Technologies, Inc. Electronic system and method for operating touch screen thereof
JP2011232947A (ja) 2010-04-27 2011-11-17 Lenovo Singapore Pte Ltd 情報処理装置、そのウィンドウ表示方法、およびコンピュータが実行可能なプログラム
JP2011238125A (ja) 2010-05-12 2011-11-24 Sony Corp 画像処理装置および方法、並びにプログラム
US8451255B2 (en) * 2010-05-14 2013-05-28 Arnett Ryan Weber Method of providing tactile feedback and electronic device
EP2386935B1 (en) * 2010-05-14 2015-02-11 BlackBerry Limited Method of providing tactile feedback and electronic device
US8466889B2 (en) 2010-05-14 2013-06-18 Research In Motion Limited Method of providing tactile feedback and electronic device
WO2011146740A2 (en) 2010-05-19 2011-11-24 Google Inc. Sliding motion to change computer keys
US20110296333A1 (en) 2010-05-25 2011-12-01 Bateman Steven S User interaction gestures with virtual keyboard
JP4983961B2 (ja) 2010-05-25 2012-07-25 株式会社ニコン 撮像装置
US8860672B2 (en) 2010-05-26 2014-10-14 T-Mobile Usa, Inc. User interface with z-axis interaction
US20110296351A1 (en) 2010-05-26 2011-12-01 T-Mobile Usa, Inc. User Interface with Z-axis Interaction and Multiple Stacks
US20130120280A1 (en) 2010-05-28 2013-05-16 Tim Kukulski System and Method for Evaluating Interoperability of Gesture Recognizers
KR101626301B1 (ko) 2010-05-28 2016-06-01 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
US9530144B2 (en) 2010-05-28 2016-12-27 Rakuten, Inc. Content output device, content output method, content output program, and recording medium having content output program recorded thereon
US8669946B2 (en) 2010-05-28 2014-03-11 Blackberry Limited Electronic device including touch-sensitive display and method of controlling same
EP2390772A1 (en) 2010-05-31 2011-11-30 Sony Ericsson Mobile Communications AB User interface with three dimensional user input
AP2012006600A0 (en) 2010-06-01 2012-12-31 Nokia Corp A method, a device and a system for receiving userinput
JP2011257941A (ja) 2010-06-08 2011-12-22 Panasonic Corp 文字入力装置、文字装飾方法、及び文字装飾プログラム
US9046999B1 (en) 2010-06-08 2015-06-02 Google Inc. Dynamic input at a touch-based interface based on pressure
US20110307778A1 (en) 2010-06-10 2011-12-15 Acer Incorporated Mobile electronic apparatus and method of switching application programs thereof
US20120089951A1 (en) 2010-06-10 2012-04-12 Cricket Communications, Inc. Method and apparatus for navigation within a multi-level application
US20110304577A1 (en) 2010-06-11 2011-12-15 Sp Controls, Inc. Capacitive touch screen stylus
US20110304559A1 (en) 2010-06-11 2011-12-15 Research In Motion Limited Portable electronic device including touch-sensitive display and method of changing tactile feedback
US9106194B2 (en) 2010-06-14 2015-08-11 Sony Corporation Regulation of audio volume and/or rate responsive to user applied pressure and related methods
US20110319136A1 (en) 2010-06-23 2011-12-29 Motorola, Inc. Method of a Wireless Communication Device for Managing Status Components for Global Call Control
US8477109B1 (en) 2010-06-24 2013-07-02 Amazon Technologies, Inc. Surfacing reference work entries on touch-sensitive displays
US8542205B1 (en) 2010-06-24 2013-09-24 Amazon Technologies, Inc. Refining search results based on touch gestures
KR20120002727A (ko) 2010-07-01 2012-01-09 주식회사 팬택 3d ui 표시 장치
GB201011146D0 (en) 2010-07-02 2010-08-18 Vodafone Ip Licensing Ltd Mobile computing device
US20120001856A1 (en) 2010-07-02 2012-01-05 Nokia Corporation Responding to tactile inputs
JP5589625B2 (ja) 2010-07-08 2014-09-17 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8972903B2 (en) 2010-07-08 2015-03-03 Apple Inc. Using gesture to navigate hierarchically ordered user interface screens
JP5659586B2 (ja) * 2010-07-09 2015-01-28 ソニー株式会社 表示制御装置および表示制御方法、表示制御プログラム、記録媒体
US20120013541A1 (en) 2010-07-14 2012-01-19 Research In Motion Limited Portable electronic device and method of controlling same
US8854316B2 (en) 2010-07-16 2014-10-07 Blackberry Limited Portable electronic device with a touch-sensitive display and navigation device and method
US20120013542A1 (en) 2010-07-16 2012-01-19 Research In Motion Limited Portable electronic device and method of determining a location of a touch
KR20120009564A (ko) 2010-07-19 2012-02-02 삼성전자주식회사 3차원 마우스 포인터 생성방법 및 생성장치
EP2410413B1 (en) 2010-07-19 2018-12-12 Telefonaktiebolaget LM Ericsson (publ) Method for text input, apparatus, and computer program
US20120019448A1 (en) 2010-07-22 2012-01-26 Nokia Corporation User Interface with Touch Pressure Level Sensing
JP5529663B2 (ja) 2010-07-28 2014-06-25 京セラ株式会社 入力装置
JP2012027875A (ja) 2010-07-28 2012-02-09 Sony Corp 電子機器、処理方法及びプログラム
JP5494337B2 (ja) 2010-07-30 2014-05-14 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
US8799815B2 (en) 2010-07-30 2014-08-05 Apple Inc. Device, method, and graphical user interface for activating an item in a folder
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
US8593418B2 (en) 2010-08-08 2013-11-26 Qualcomm Incorporated Method and system for adjusting display content
AU2011288893A1 (en) 2010-08-09 2013-02-28 Intelligent Mechatronic Systems Inc. Interface for mobile device and computing device
US8698765B1 (en) 2010-08-17 2014-04-15 Amazon Technologies, Inc. Associating concepts within content items
JP5625612B2 (ja) 2010-08-19 2014-11-19 株式会社リコー 操作表示装置および操作表示方法
US8576184B2 (en) 2010-08-19 2013-11-05 Nokia Corporation Method and apparatus for browsing content files
JP5510185B2 (ja) 2010-08-20 2014-06-04 ソニー株式会社 情報処理装置、プログラム及び表示制御方法
JP5573487B2 (ja) 2010-08-20 2014-08-20 ソニー株式会社 情報処理装置、プログラム及び操作制御方法
US8751838B2 (en) 2010-08-23 2014-06-10 Nokia Corporation Method, apparatus and computer program product for presentation of information in a low power mode
JP2011048832A (ja) * 2010-08-27 2011-03-10 Kyocera Corp 入力装置
JP5813301B2 (ja) 2010-09-01 2015-11-17 京セラ株式会社 表示装置
JP5732783B2 (ja) 2010-09-02 2015-06-10 ソニー株式会社 情報処理装置、情報処理装置の入力制御方法及びプログラム
US20120060123A1 (en) 2010-09-03 2012-03-08 Hugh Smith Systems and methods for deterministic control of instant-on mobile devices with touch screens
US8954427B2 (en) 2010-09-07 2015-02-10 Google Inc. Search result previews
US8593534B2 (en) 2010-09-08 2013-11-26 Apple Inc. Auto-triggered camera self-timer based on recognition of subject's presence in scene
KR101739054B1 (ko) 2010-09-08 2017-05-24 삼성전자주식회사 디바이스상의 움직임 제어 방법 및 장치
US10645344B2 (en) 2010-09-10 2020-05-05 Avigilion Analytics Corporation Video system with intelligent visual display
US20120062470A1 (en) 2010-09-10 2012-03-15 Chang Ray L Power Management
US20120066648A1 (en) 2010-09-14 2012-03-15 Xerox Corporation Move and turn touch screen interface for manipulating objects in a 3d scene
US8751951B2 (en) 2010-09-15 2014-06-10 International Business Machines Corporation Controlling computer-based instances
JP6049990B2 (ja) 2010-09-15 2016-12-21 京セラ株式会社 携帯電子機器、画面制御方法および画面制御プログラム
US9164670B2 (en) 2010-09-15 2015-10-20 Microsoft Technology Licensing, Llc Flexible touch-based scrolling
KR101657122B1 (ko) 2010-09-15 2016-09-30 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8311514B2 (en) 2010-09-16 2012-11-13 Microsoft Corporation Prevention of accidental device activation
EP2431870B1 (en) 2010-09-17 2019-11-27 LG Electronics Inc. Mobile terminal and control method thereof
GB201015720D0 (en) 2010-09-20 2010-10-27 Gammons Richard Findability of data elements
CN103221914B (zh) 2010-09-24 2020-01-31 黑莓有限公司 便携式电子设备及其控制方法
EP3451123B8 (en) 2010-09-24 2020-06-17 BlackBerry Limited Method for conserving power on a portable electronic device and a portable electronic device configured for the same
US9030419B1 (en) 2010-09-28 2015-05-12 Amazon Technologies, Inc. Touch and force user interface navigation
JP5959797B2 (ja) 2010-09-28 2016-08-02 京セラ株式会社 入力装置及び入力装置の制御方法
JP5725533B2 (ja) 2010-09-29 2015-05-27 Necカシオモバイルコミュニケーションズ株式会社 情報処理装置および入力方法
US20120084644A1 (en) 2010-09-30 2012-04-05 Julien Robert Content preview
US9323442B2 (en) 2010-09-30 2016-04-26 Apple Inc. Managing items in a user interface
US8817053B2 (en) 2010-09-30 2014-08-26 Apple Inc. Methods and systems for opening a file
KR101685991B1 (ko) 2010-09-30 2016-12-13 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US8713474B2 (en) 2010-10-05 2014-04-29 Citrix Systems, Inc. Providing user interfaces and window previews for hosted applications
EP2447818A1 (en) 2010-10-07 2012-05-02 Research in Motion Limited Method and portable electronic device for presenting text
US20120089942A1 (en) 2010-10-07 2012-04-12 Research In Motion Limited Method and portable electronic device for presenting text
JP5664103B2 (ja) 2010-10-08 2015-02-04 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
KR20130052743A (ko) 2010-10-15 2013-05-23 삼성전자주식회사 항목 선택 방법
JP5751934B2 (ja) 2010-10-15 2015-07-22 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
US20120092381A1 (en) * 2010-10-19 2012-04-19 Microsoft Corporation Snapping User Interface Elements Based On Touch Input
KR101726607B1 (ko) 2010-10-19 2017-04-13 삼성전자주식회사 휴대 단말기의 화면 제어 방법 및 장치
US9043732B2 (en) 2010-10-21 2015-05-26 Nokia Corporation Apparatus and method for user input for controlling displayed information
US20120102437A1 (en) 2010-10-22 2012-04-26 Microsoft Corporation Notification Group Touch Gesture Dismissal Techniques
JP5710934B2 (ja) 2010-10-25 2015-04-30 シャープ株式会社 コンテンツ表示装置、およびコンテンツ表示方法
US8706172B2 (en) 2010-10-26 2014-04-22 Miscrosoft Corporation Energy efficient continuous sensing for communications devices
US8655085B2 (en) 2010-10-28 2014-02-18 Microsoft Corporation Burst mode image compression and decompression
US20120105367A1 (en) * 2010-11-01 2012-05-03 Impress Inc. Methods of using tactile force sensing for intuitive user interface
US9262002B2 (en) 2010-11-03 2016-02-16 Qualcomm Incorporated Force sensing touch screen
US9760241B1 (en) 2010-11-05 2017-09-12 Amazon Technologies, Inc. Tactile interaction with content
US8754860B2 (en) 2010-11-05 2014-06-17 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
BR112013011300A2 (pt) * 2010-11-09 2019-09-24 Koninl Philips Electronics Nv interface de usuário, método de fornecimento de retroalimentação táctil ao usuário que toca uma superfície de interação (s) com um conjunto de acionadores e aparelho que compreende uma interface de usuário
JP6258035B2 (ja) 2010-11-18 2018-01-10 グーグル エルエルシー スクロールバー上での直交ドラッギング
US9645722B1 (en) 2010-11-19 2017-05-09 A9.Com, Inc. Preview search results
JP5719205B2 (ja) 2010-11-22 2015-05-13 シャープ株式会社 電子機器および表示制御方法
US8560960B2 (en) 2010-11-23 2013-10-15 Apple Inc. Browsing and interacting with open windows
US9069452B2 (en) 2010-12-01 2015-06-30 Apple Inc. Morphing a user-interface control object
JP2012118825A (ja) 2010-12-01 2012-06-21 Fujitsu Ten Ltd 表示装置
US10503255B2 (en) 2010-12-02 2019-12-10 Immersion Corporation Haptic feedback assisted text manipulation
US9223445B2 (en) 2010-12-02 2015-12-29 Atmel Corporation Position-sensing and force detection panel
JP5700783B2 (ja) 2010-12-07 2015-04-15 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、及び情報処理方法
US9223461B1 (en) 2010-12-08 2015-12-29 Wendell Brown Graphical user interface
US8660978B2 (en) 2010-12-17 2014-02-25 Microsoft Corporation Detecting and responding to unintentional contact with a computing device
EP3982242B1 (en) 2010-12-20 2024-05-01 Apple Inc. Event recognition
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US9223471B2 (en) 2010-12-28 2015-12-29 Microsoft Technology Licensing, Llc Touch screen control
KR101701852B1 (ko) 2010-12-29 2017-02-13 엘지전자 주식회사 이동단말기 및 그 제어방법
US9354804B2 (en) 2010-12-29 2016-05-31 Microsoft Technology Licensing, Llc Touch event anticipation in a computing device
JP5698529B2 (ja) 2010-12-29 2015-04-08 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法
TW201227393A (en) 2010-12-31 2012-07-01 Acer Inc Method for unlocking screen and executing application program
KR101788051B1 (ko) 2011-01-04 2017-10-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9471145B2 (en) 2011-01-06 2016-10-18 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9423878B2 (en) * 2011-01-06 2016-08-23 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US20120180001A1 (en) 2011-01-06 2012-07-12 Research In Motion Limited Electronic device and method of controlling same
US9477311B2 (en) 2011-01-06 2016-10-25 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US20120179967A1 (en) 2011-01-06 2012-07-12 Tivo Inc. Method and Apparatus for Gesture-Based Controls
KR101892630B1 (ko) 2011-01-10 2018-08-28 삼성전자주식회사 터치 디스플레이 장치 및 그 디스플레이 방법
US20120185787A1 (en) 2011-01-13 2012-07-19 Microsoft Corporation User interface interaction behavior based on insertion point
US8713471B1 (en) 2011-01-14 2014-04-29 Intuit Inc. Method and system for providing an intelligent visual scrollbar position indicator
US20120183271A1 (en) 2011-01-17 2012-07-19 Qualcomm Incorporated Pressure-based video recording
US9519418B2 (en) 2011-01-18 2016-12-13 Nokia Technologies Oy Method and apparatus for providing a multi-stage device transition mechanism initiated based on a touch gesture
US9582144B2 (en) 2011-01-20 2017-02-28 Blackberry Limited Three-dimensional, multi-depth presentation of icons associated with a user interface
US20120192108A1 (en) 2011-01-26 2012-07-26 Google Inc. Gesture-based menu controls
KR101802522B1 (ko) 2011-02-10 2017-11-29 삼성전자주식회사 복수의 터치스크린을 가지는 장치 및 복수의 터치스크린을 가지는 장치의 화면변경방법
WO2012108213A1 (ja) 2011-02-10 2012-08-16 京セラ株式会社 入力装置
EP3734407A1 (en) 2011-02-10 2020-11-04 Samsung Electronics Co., Ltd. Portable device comprising a touch-screen display, and method for controlling same
US20120218203A1 (en) 2011-02-10 2012-08-30 Kanki Noriyoshi Touch drawing display apparatus and operation method thereof, image display apparatus allowing touch-input, and controller for the display apparatus
JP5537458B2 (ja) 2011-02-10 2014-07-02 シャープ株式会社 タッチ入力可能な画像表示装置、表示装置の制御装置、及びコンピュータプログラム
JP5452739B2 (ja) 2011-02-10 2014-03-26 京セラ株式会社 入力装置
US8780140B2 (en) 2011-02-16 2014-07-15 Sony Corporation Variable display scale control device and variable playing speed control device
US8756503B2 (en) 2011-02-21 2014-06-17 Xerox Corporation Query generation from displayed text documents using virtual magnets
WO2012114760A1 (ja) 2011-02-23 2012-08-30 京セラ株式会社 タッチセンサを備えた電子機器
US8593420B1 (en) * 2011-03-04 2013-11-26 Amazon Technologies, Inc. Providing tactile output and interaction
US9195321B2 (en) 2011-03-17 2015-11-24 Intellitact Llc Input device user interface enhancements
US8479110B2 (en) 2011-03-20 2013-07-02 William J. Johnson System and method for summoning user interface objects
US20120242584A1 (en) * 2011-03-22 2012-09-27 Nokia Corporation Method and apparatus for providing sight independent activity reports responsive to a touch gesture
WO2012128361A1 (ja) 2011-03-23 2012-09-27 京セラ株式会社 電子機器、操作制御方法および操作制御プログラム
US11580155B2 (en) 2011-03-28 2023-02-14 Kodak Alaris Inc. Display device for displaying related digital images
US20120249853A1 (en) 2011-03-28 2012-10-04 Marc Krolczyk Digital camera for reviewing related images
US9220062B2 (en) 2011-03-30 2015-12-22 Nokia Technologies Oy Method and apparatus for low-power browsing
US8872773B2 (en) 2011-04-05 2014-10-28 Blackberry Limited Electronic device and method of controlling same
US20120256857A1 (en) 2011-04-05 2012-10-11 Mak Genevieve Elizabeth Electronic device and method of controlling same
US20120256829A1 (en) 2011-04-05 2012-10-11 Qnx Software Systems Limited Portable electronic device and method of controlling same
US20120256846A1 (en) 2011-04-05 2012-10-11 Research In Motion Limited Electronic device and method of controlling same
KR101772979B1 (ko) 2011-04-06 2017-08-31 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US8736716B2 (en) 2011-04-06 2014-05-27 Apple Inc. Digital camera having variable duration burst mode
US20120260220A1 (en) 2011-04-06 2012-10-11 Research In Motion Limited Portable electronic device having gesture recognition and a method for controlling the same
US9733708B2 (en) 2011-04-06 2017-08-15 Kyocera Corporation Electronic device, operation control method, and operation control program
US20120260219A1 (en) 2011-04-08 2012-10-11 Piccolotto Jose P Method of cursor control
CN102752441A (zh) 2011-04-22 2012-10-24 比亚迪股份有限公司 一种具有触控屏的移动终端及其控制方法
US20120274578A1 (en) 2011-04-26 2012-11-01 Research In Motion Limited Electronic device and method of controlling same
GB201107273D0 (en) 2011-04-28 2011-06-15 Inq Entpr Ltd Application control in electronic devices
US9110556B2 (en) 2011-04-28 2015-08-18 Nokia Technologies Oy Method and apparatus for increasing the functionality of an electronic device in a locked state
US10222974B2 (en) 2011-05-03 2019-03-05 Nokia Technologies Oy Method and apparatus for providing quick access to device functionality
JP5695740B2 (ja) 2011-05-12 2015-04-08 アルプス電気株式会社 入力装置及び前記入力装置を用いた複数点の荷重検出方法
JP2012236166A (ja) * 2011-05-12 2012-12-06 Mitsubishi Heavy Ind Ltd Co2回収装置およびco2回収方法
US9152288B2 (en) 2011-05-19 2015-10-06 Microsoft Technology Licensing, Llc Remote multi-touch
US8952987B2 (en) 2011-05-19 2015-02-10 Qualcomm Incorporated User interface elements augmented with force detection
WO2012162158A1 (en) 2011-05-20 2012-11-29 Citrix Systems, Inc. Shell integration on a mobile device for an application executing remotely on a server
EP2715499B1 (en) 2011-05-23 2020-09-02 Microsoft Technology Licensing, LLC Invisible control
WO2012162399A2 (en) 2011-05-23 2012-11-29 Visible Market Inc. Dynamic visual statistical data display and navigation system and method for limited display device
KR101240406B1 (ko) 2011-05-24 2013-03-11 주식회사 미성포리테크 힘센서를 이용한 휴대형 정보통신 단말기의 프로그램 동작 제어 방법
US10180722B2 (en) 2011-05-27 2019-01-15 Honeywell International Inc. Aircraft user interfaces with multi-mode haptics
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US20120304132A1 (en) 2011-05-27 2012-11-29 Chaitanya Dev Sareen Switching back to a previously-interacted-with application
JP5808404B2 (ja) 2011-05-27 2015-11-10 京セラ株式会社 電子機器
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9032338B2 (en) 2011-05-30 2015-05-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating and editing text
KR101802759B1 (ko) 2011-05-30 2017-11-29 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
US8677232B2 (en) 2011-05-31 2014-03-18 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
KR101290145B1 (ko) * 2011-05-31 2013-07-26 삼성전자주식회사 터치 스크린 제어 방법 및 장치, 컴퓨터에 의해 독출될 수 있는 기록 매체, 그리고 단말장치
US8587542B2 (en) 2011-06-01 2013-11-19 Motorola Mobility Llc Using pressure differences with a touch-sensitive display screen
US8508494B2 (en) 2011-06-01 2013-08-13 Motorola Mobility Llc Using pressure differences with a touch-sensitive display screen
US9310958B2 (en) 2011-06-02 2016-04-12 Lenovo (Singapore) Pte. Ltd. Dock for favorite applications
KR101838260B1 (ko) 2011-06-03 2018-03-13 구글 엘엘씨 텍스트를 선택하기 위한 제스처들
US20120311504A1 (en) 2011-06-03 2012-12-06 Van Os Marcel Extensible architecture for navigating a hierarchy
US9383820B2 (en) 2011-06-03 2016-07-05 Apple Inc. Custom vibration patterns
US8661337B2 (en) 2011-06-05 2014-02-25 Apple Inc. Techniques for use of snapshots with browsing transitions
US9513799B2 (en) 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
US8823813B2 (en) 2011-06-06 2014-09-02 Apple Inc. Correcting rolling shutter using image stabilization
WO2012169176A1 (ja) 2011-06-07 2012-12-13 パナソニック株式会社 電子機器
CN105718192B (zh) 2011-06-07 2023-05-02 联想(北京)有限公司 移动终端及其触摸输入方法
KR20120135723A (ko) 2011-06-07 2012-12-17 김연수 터치패널 타입의 신호입력장치
WO2012167735A1 (zh) 2011-06-07 2012-12-13 联想(北京)有限公司 电子设备、触摸输入方法和控制方法
US20120313847A1 (en) 2011-06-09 2012-12-13 Nokia Corporation Method and apparatus for contextual gesture recognition
TWI431516B (zh) 2011-06-21 2014-03-21 Quanta Comp Inc 觸覺回饋方法及其電子裝置
US8830188B2 (en) 2011-06-21 2014-09-09 Microsoft Corporation Infrastructural haptics on wall scale interactive displays
US9304668B2 (en) 2011-06-28 2016-04-05 Nokia Technologies Oy Method and apparatus for customizing a display screen of a user interface
US8932412B2 (en) 2011-06-29 2015-01-13 Whirlpool Corporation Method and apparatus for an appliance with a power saving mode
US20130135243A1 (en) 2011-06-29 2013-05-30 Research In Motion Limited Character preview method and apparatus
WO2011137862A2 (zh) 2011-07-04 2011-11-10 华为终端有限公司 一种实现虚拟手写输入的方法及电子装置
US20130014057A1 (en) 2011-07-07 2013-01-10 Thermal Matrix USA, Inc. Composite control for a graphical user interface
EP2733591B1 (en) 2011-07-11 2019-05-08 KDDI Corporation User interface device capable of execution of input by finger contact in plurality of modes, input operation assessment method, and program
US9158455B2 (en) * 2011-07-12 2015-10-13 Apple Inc. Multifunctional environment for image cropping
US20130016042A1 (en) 2011-07-12 2013-01-17 Ville Makinen Haptic device with touch gesture interface
JP5325943B2 (ja) 2011-07-12 2013-10-23 富士フイルム株式会社 情報処理装置、情報処理方法及びプログラム
US9086794B2 (en) 2011-07-14 2015-07-21 Microsoft Technology Licensing, Llc Determining gestures on context based menus
JP5799628B2 (ja) 2011-07-15 2015-10-28 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US20130212515A1 (en) 2012-02-13 2013-08-15 Syntellia, Inc. User interface for text input
US9285976B2 (en) 2011-07-22 2016-03-15 Kddi Corporation User interface device capable of image scrolling not accompanying finger movement, image scrolling method, and program
CN102243662A (zh) 2011-07-27 2011-11-16 北京风灵创景科技有限公司 一种在移动设备上显示浏览器界面的方法
US8713482B2 (en) 2011-07-28 2014-04-29 National Instruments Corporation Gestures for presentation of different views of a system diagram
JP5295328B2 (ja) 2011-07-29 2013-09-18 Kddi株式会社 スクリーンパッドによる入力が可能なユーザインタフェース装置、入力処理方法及びプログラム
KR101830965B1 (ko) 2011-08-03 2018-02-22 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
WO2013022486A1 (en) 2011-08-05 2013-02-14 Thomson Licensing Video peeking
US9317196B2 (en) 2011-08-10 2016-04-19 Microsoft Technology Licensing, Llc Automatic zooming for text selection/cursor placement
US20130044062A1 (en) 2011-08-16 2013-02-21 Nokia Corporation Method and apparatus for translating between force inputs and temporal inputs
US20130047100A1 (en) 2011-08-17 2013-02-21 Google Inc. Link Disambiguation For Touch Screens
CN102354269B (zh) 2011-08-18 2013-06-12 宇龙计算机通信科技(深圳)有限公司 用于控制显示装置的方法和系统
US9086757B1 (en) * 2011-08-19 2015-07-21 Google Inc. Methods and systems for providing functionality of an interface to control directional orientations of a device
US20130050131A1 (en) 2011-08-23 2013-02-28 Garmin Switzerland Gmbh Hover based navigation user interface control
JP2013046306A (ja) 2011-08-25 2013-03-04 Sony Corp 情報処理装置、情報処理システムおよび情報処理方法
US8806369B2 (en) 2011-08-26 2014-08-12 Apple Inc. Device, method, and graphical user interface for managing and interacting with concurrently open software applications
KR101351162B1 (ko) 2011-08-30 2014-01-14 주식회사 팬택 플리킹을 이용한 리스트 선택 지원 단말 장치 및 방법
WO2013029641A1 (en) 2011-08-31 2013-03-07 Sony Ericsson Mobile Communications Ab Method for operating a touch sensitive user interface
US20130050143A1 (en) 2011-08-31 2013-02-28 Samsung Electronics Co., Ltd. Method of providing of user interface in portable terminal and apparatus thereof
US8743069B2 (en) 2011-09-01 2014-06-03 Google Inc. Receiving input at a computing device
CN102981659B (zh) 2011-09-06 2016-01-27 宸鸿光电科技股份有限公司 触控面板的控制系统与控制方法及其使用的触控笔
TWI475470B (zh) 2011-09-07 2015-03-01 Acer Inc 電子裝置及應用程式操作方法
US20130067411A1 (en) 2011-09-08 2013-03-14 Google Inc. User gestures indicating rates of execution of functions
JP5576841B2 (ja) 2011-09-09 2014-08-20 Kddi株式会社 押圧による画像のズームが可能なユーザインタフェース装置、画像ズーム方法及びプログラム
US9612670B2 (en) 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
US8976128B2 (en) 2011-09-12 2015-03-10 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US9071854B2 (en) 2011-09-12 2015-06-30 Disney Enterprises, Inc. System and method for transmitting a services list to a playback device
US9069460B2 (en) 2011-09-12 2015-06-30 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US9501213B2 (en) 2011-09-16 2016-11-22 Skadool, Inc. Scheduling events on an electronic calendar utilizing fixed-positioned events and a draggable calendar grid
US9519350B2 (en) 2011-09-19 2016-12-13 Samsung Electronics Co., Ltd. Interface controlling apparatus and method using force
US8959430B1 (en) 2011-09-21 2015-02-17 Amazon Technologies, Inc. Facilitating selection of keys related to a selected key
US20130074003A1 (en) 2011-09-21 2013-03-21 Nokia Corporation Method and apparatus for integrating user interfaces
JP2013070303A (ja) 2011-09-26 2013-04-18 Kddi Corp 画面への押圧で撮影が可能な撮影装置、撮影方法及びプログラム
US8723824B2 (en) 2011-09-27 2014-05-13 Apple Inc. Electronic devices with sidewall displays
CN103019427B (zh) 2011-09-28 2017-06-27 联想(北京)有限公司 控制方法及电子设备
US20130076651A1 (en) 2011-09-28 2013-03-28 Robert Reimann Methods and apparatus to change control centexts of controllers
US9395800B2 (en) 2011-09-30 2016-07-19 Qualcomm Incorporated Enabling instant handwritten input on mobile computing devices
JP5762912B2 (ja) 2011-09-30 2015-08-12 京セラ株式会社 装置、方法、及びプログラム
US20130086056A1 (en) 2011-09-30 2013-04-04 Matthew G. Dyor Gesture based context menus
US20130082824A1 (en) 2011-09-30 2013-04-04 Nokia Corporation Feedback response
US9342235B2 (en) 2011-10-03 2016-05-17 Kyocera Corporation Device, method, and storage medium storing program
JP2012027940A (ja) 2011-10-05 2012-02-09 Toshiba Corp 電子機器
CN103907086B (zh) 2011-10-06 2017-11-03 索尼移动通信株式会社 用于操纵第一用户接口对象或第二用户接口对象的方法和电子装置
KR101924835B1 (ko) 2011-10-10 2018-12-05 삼성전자주식회사 터치 디바이스의 기능 운용 방법 및 장치
US10394441B2 (en) 2011-10-15 2019-08-27 Apple Inc. Device, method, and graphical user interface for controlling display of application windows
US9170607B2 (en) 2011-10-17 2015-10-27 Nokia Technologies Oy Method and apparatus for determining the presence of a device for executing operations
JP5527304B2 (ja) 2011-10-17 2014-06-18 株式会社デンソー 入力装置
US8634807B2 (en) 2011-10-17 2014-01-21 Blackberry Limited System and method for managing electronic groups
US9218105B2 (en) 2011-10-18 2015-12-22 Blackberry Limited Method of modifying rendered attributes of list elements in a user interface
US8810535B2 (en) 2011-10-18 2014-08-19 Blackberry Limited Electronic device and method of controlling same
EP2584464B1 (en) 2011-10-18 2020-02-19 BlackBerry Limited Method of rendering a user interface
EP2584445A1 (en) 2011-10-18 2013-04-24 Research In Motion Limited Method of animating a rearrangement of ui elements on a display screen of an eletronic device
US9075631B2 (en) 2011-10-18 2015-07-07 Blackberry Limited Method of rendering a user interface
CA2792900C (en) 2011-10-18 2017-09-05 Research In Motion Limited Method of rendering a user interface
US9389707B2 (en) 2011-10-28 2016-07-12 Atmel Corporation Active stylus with configurable touch sensor
US20130111579A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Electronic device mode, associated apparatus and methods
US20130111378A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Portable electronic device, associated apparatus and methods
US20130111415A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Portable electronic device, associated apparatus and methods
US20130111345A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Portable electronic device, associated apparatus and methods
CN102436345A (zh) * 2011-10-31 2012-05-02 广州市动景计算机科技有限公司 一种移动设备界面操作控制的方法及实现装置
DE102012110278A1 (de) 2011-11-02 2013-05-02 Beijing Lenovo Software Ltd. Verfahren und Vorrichtungen zur Fensterdarstellung und Verfahren und Vorrichtungen zur Berührungsbedienung von Anwendungen
JP5204286B2 (ja) 2011-11-02 2013-06-05 株式会社東芝 電子機器および入力方法
US20130113760A1 (en) 2011-11-07 2013-05-09 Google Inc. Techniques for providing localized tactile feedback to a user via an electro-acoustic touch display of a user device
CN103092386A (zh) 2011-11-07 2013-05-08 联想(北京)有限公司 一种电子设备及其触控方法
US9582178B2 (en) 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
JP2013101465A (ja) 2011-11-08 2013-05-23 Sony Corp 情報処理装置、情報処理方法およびコンピュータプログラム
WO2013067618A1 (en) 2011-11-09 2013-05-16 Research In Motion Limited Touch-sensitive display method and apparatus
JP5884421B2 (ja) 2011-11-14 2016-03-15 ソニー株式会社 画像処理装置、画像処理装置の制御方法およびプログラム
KR101888457B1 (ko) 2011-11-16 2018-08-16 삼성전자주식회사 복수 개의 어플리케이션을 실행하는 터치스크린을 가지는 장치 및 그 제어 방법
JP5520918B2 (ja) 2011-11-16 2014-06-11 富士ソフト株式会社 タッチパネル操作方法及びプログラム
CN104169847B (zh) 2011-11-18 2019-03-12 森顿斯公司 局部触觉反馈
KR101803261B1 (ko) 2011-11-18 2017-11-30 센톤스 아이엔씨. 터치 입력 힘 검출
KR101796481B1 (ko) 2011-11-28 2017-12-04 삼성전자주식회사 저전력 셔터랙 제거 방법, 카메라 모듈 및 이를 구비하는 모바일 기기
US9372593B2 (en) 2011-11-29 2016-06-21 Apple Inc. Using a three-dimensional model to render a cursor
KR101873744B1 (ko) 2011-11-29 2018-07-03 엘지전자 주식회사 이동단말기 및 그 제어방법
KR101824007B1 (ko) 2011-12-05 2018-01-31 엘지전자 주식회사 이동 단말기 및 그의 멀티 태스킹 방법
US8581870B2 (en) 2011-12-06 2013-11-12 Apple Inc. Touch-sensitive button with two levels
US9230393B1 (en) 2011-12-08 2016-01-05 Google Inc. Method and system for advancing through a sequence of items using a touch-sensitive component
CN102566908A (zh) 2011-12-13 2012-07-11 鸿富锦精密工业(深圳)有限公司 电子设备及其页面缩放方法
US8633911B2 (en) 2011-12-14 2014-01-21 Synaptics Incorporated Force sensing input device and method for determining force information
CN102722312B (zh) 2011-12-16 2015-12-16 江南大学 一种基于压力传感器的动作趋势预测交互体验方法及系统
US9195362B2 (en) 2011-12-16 2015-11-24 Blackberry Limited Method of rendering a user interface
US20130159930A1 (en) 2011-12-19 2013-06-20 Nokia Corporation Displaying one or more currently active applications
US20130154959A1 (en) 2011-12-20 2013-06-20 Research In Motion Limited System and method for controlling an electronic device
US20130155018A1 (en) 2011-12-20 2013-06-20 Synaptics Incorporated Device and method for emulating a touch screen using force information
JP2013131185A (ja) 2011-12-22 2013-07-04 Kyocera Corp 装置、方法、及びプログラム
US9671880B2 (en) 2011-12-22 2017-06-06 Sony Corporation Display control device, display control method, and computer program
US9257098B2 (en) 2011-12-23 2016-02-09 Nokia Technologies Oy Apparatus and methods for displaying second content in response to user inputs
CN103186329B (zh) 2011-12-27 2017-08-18 富泰华工业(深圳)有限公司 电子设备及其触摸输入控制方法
KR102006470B1 (ko) 2011-12-28 2019-08-02 삼성전자 주식회사 사용자 디바이스에서 멀티태스킹 운용 방법 및 장치
US9116611B2 (en) 2011-12-29 2015-08-25 Apple Inc. Devices, methods, and graphical user interfaces for providing multitouch inputs and hardware-based features using a single touch input
US10248278B2 (en) 2011-12-30 2019-04-02 Nokia Technologies Oy Method and apparatus for intuitive multitasking
US8756511B2 (en) 2012-01-03 2014-06-17 Lg Electronics Inc. Gesture based unlocking of a mobile terminal
US9141262B2 (en) 2012-01-06 2015-09-22 Microsoft Technology Licensing, Llc Edge-based hooking gestures for invoking user interfaces
DE102012207931A1 (de) 2012-01-07 2013-07-11 Johnson Controls Gmbh Kameraanordnung zur Distanzmessung
JP2015508357A (ja) 2012-01-09 2015-03-19 エアビクティ インコーポレイテッド 携帯デバイス用ユーザインタフェース
KR101710547B1 (ko) 2012-01-10 2017-02-27 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US9058168B2 (en) 2012-01-23 2015-06-16 Blackberry Limited Electronic device and method of controlling a display
US9619038B2 (en) 2012-01-23 2017-04-11 Blackberry Limited Electronic device and method of displaying a cover image and an application image from a low power condition
JP5410555B2 (ja) 2012-01-26 2014-02-05 京セラドキュメントソリューションズ株式会社 タッチパネル装置
JP2013153376A (ja) 2012-01-26 2013-08-08 Sony Corp 画像処理装置、画像処理方法および記録媒体
US20130198690A1 (en) 2012-02-01 2013-08-01 Microsoft Corporation Visual indication of graphical user interface relationship
KR101973631B1 (ko) 2012-02-01 2019-04-29 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
US9477642B2 (en) 2012-02-05 2016-10-25 Apple Inc. Gesture-based navigation among content items
US9164779B2 (en) 2012-02-10 2015-10-20 Nokia Technologies Oy Apparatus and method for providing for remote user interaction
US9128605B2 (en) 2012-02-16 2015-09-08 Microsoft Technology Licensing, Llc Thumbnail-image selection of applications
US9146914B1 (en) 2012-02-17 2015-09-29 Google Inc. System and method for providing a context sensitive undo function
KR101894567B1 (ko) 2012-02-24 2018-09-03 삼성전자 주식회사 락스크린 운용 방법 및 이를 지원하는 단말기
KR101356368B1 (ko) 2012-02-24 2014-01-29 주식회사 팬택 어플리케이션 전환 장치 및 방법
TWI519155B (zh) 2012-02-24 2016-01-21 宏達國際電子股份有限公司 影像連續拍攝方法與相關影像擷取系統
US20130227413A1 (en) 2012-02-24 2013-08-29 Simon Martin THORSANDER Method and Apparatus for Providing a Contextual User Interface on a Device
US9778706B2 (en) 2012-02-24 2017-10-03 Blackberry Limited Peekable user interface on a portable electronic device
US20150160788A1 (en) 2012-02-27 2015-06-11 Nokia Corporaiton Apparatus and associated methods
US9898174B2 (en) 2012-02-28 2018-02-20 Google Llc Previewing expandable content items
US9817568B2 (en) 2012-02-29 2017-11-14 Blackberry Limited System and method for controlling an electronic device
KR20130099647A (ko) 2012-02-29 2013-09-06 한국과학기술원 사이드 인터페이스를 이용한 사용자 단말 컨텐츠 제어방법 및 제어장치
US20130232402A1 (en) 2012-03-01 2013-09-05 Huawei Technologies Co., Ltd. Method for Processing Sensor Data and Computing Node
US9542013B2 (en) 2012-03-01 2017-01-10 Nokia Technologies Oy Method and apparatus for determining recipients of a sharing operation based on an indication associated with a tangible object
US9134807B2 (en) 2012-03-02 2015-09-15 Microsoft Technology Licensing, Llc Pressure sensitive key normalization
US9078208B1 (en) 2012-03-05 2015-07-07 Google Inc. Power modes of computing devices
US9131192B2 (en) 2012-03-06 2015-09-08 Apple Inc. Unified slider control for modifying multiple image properties
US20130234929A1 (en) 2012-03-07 2013-09-12 Evernote Corporation Adapting mobile user interface to unfavorable usage conditions
WO2013135270A1 (en) 2012-03-13 2013-09-19 Telefonaktiebolaget L M Ericsson (Publ) An apparatus and method for navigating on a touch sensitive screen thereof
US9378581B2 (en) 2012-03-13 2016-06-28 Amazon Technologies, Inc. Approaches for highlighting active interface elements
US8760425B2 (en) 2012-03-20 2014-06-24 Sony Corporation Method and apparatus for enabling touchpad gestures
US10331769B1 (en) 2012-03-23 2019-06-25 Amazon Technologies, Inc. Interaction based prioritized retrieval of embedded resources
US10673691B2 (en) 2012-03-24 2020-06-02 Fred Khosropour User interaction platform
CN102662573B (zh) 2012-03-24 2016-04-27 上海量明科技发展有限公司 通过触压获得选择项的方法及终端
CN102662571B (zh) 2012-03-26 2016-05-25 华为技术有限公司 解锁屏幕保护的方法及用户设备
US9063644B2 (en) 2012-03-26 2015-06-23 The Boeing Company Adjustment mechanisms for virtual knobs on a touchscreen interface
US9116571B2 (en) 2012-03-27 2015-08-25 Adonit Co., Ltd. Method and system of data input for an electronic device equipped with a touch screen
US9251329B2 (en) 2012-03-27 2016-02-02 Synaptics Incorporated Button depress wakeup and wakeup strategy
US11474645B2 (en) 2012-03-27 2022-10-18 Nokia Technologies Oy Method and apparatus for force sensing
JP5934537B2 (ja) 2012-03-27 2016-06-15 京セラ株式会社 電子機器および電子機器の制御方法
KR20140148381A (ko) 2012-03-28 2014-12-31 소니 주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
CN102662577B (zh) 2012-03-29 2016-08-10 华为终端有限公司 一种基于三维显示的光标操作方法及移动终端
KR101924095B1 (ko) 2012-04-06 2018-11-30 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
US9146655B2 (en) 2012-04-06 2015-09-29 Samsung Electronics Co., Ltd. Method and device for executing object on display
US9104260B2 (en) 2012-04-10 2015-08-11 Typesoft Technologies, Inc. Systems and methods for detecting a press on a touch-sensitive surface
TWI455011B (zh) 2012-04-11 2014-10-01 Wistron Corp 觸控顯示裝置及條件式改變顯示範圍之方法
US20130271355A1 (en) 2012-04-13 2013-10-17 Nokia Corporation Multi-segment wearable accessory
WO2013154720A1 (en) 2012-04-13 2013-10-17 Tk Holdings Inc. Pressure sensor including a pressure sensitive material for use with control systems and methods of using the same
WO2013156815A1 (en) 2012-04-18 2013-10-24 Nokia Corporation A display apparatus with haptic feedback
TWI459287B (zh) 2012-04-20 2014-11-01 Hon Hai Prec Ind Co Ltd 觸控操作方法及使用其的電子系統
US9552037B2 (en) 2012-04-23 2017-01-24 Google Inc. Switching a computing device from a low-power state to a high-power state
EP2842089A4 (en) 2012-04-26 2015-04-29 Blackberry Ltd METHOD AND DEVICE FOR ADMINISTERING AND CONSIDERING CALENDAR EVENT INFORMATION
CN103649885B (zh) 2012-04-27 2017-03-01 松下知识产权经营株式会社 触觉提示装置、触觉提示方法、驱动信号生成装置以及驱动信号生成方法
EP2660702B1 (en) 2012-05-02 2020-12-30 Sony Corporation Technique for displaying on the basis of duration of operation of an input device
KR102004262B1 (ko) 2012-05-07 2019-07-26 엘지전자 주식회사 미디어 시스템 및 이미지와 연관된 추천 검색어를 제공하는 방법
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
EP3410287B1 (en) 2012-05-09 2022-08-17 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
EP2847661A2 (en) 2012-05-09 2015-03-18 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
JP6082458B2 (ja) 2012-05-09 2017-02-15 アップル インコーポレイテッド ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
US9977499B2 (en) 2012-05-09 2018-05-22 Apple Inc. Thresholds for determining feedback in computing devices
KR101683868B1 (ko) 2012-05-09 2016-12-07 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
JP2013236298A (ja) 2012-05-10 2013-11-21 Olympus Corp 撮像装置
US9898155B2 (en) 2012-05-11 2018-02-20 Samsung Electronics Co., Ltd. Multiple window providing apparatus and method
US9454303B2 (en) * 2012-05-16 2016-09-27 Google Inc. Gesture touch inputs for controlling video on a touchscreen
US8570296B2 (en) 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US20130307790A1 (en) 2012-05-17 2013-11-21 Nokia Corporation Methods And Apparatus For Device Control
BR112014028774B1 (pt) 2012-05-18 2022-05-10 Apple Inc Método, dispositivo eletrônico, meio de armazenamento legível por computador e aparelho de processamento de informações
US9360942B2 (en) 2012-05-21 2016-06-07 Door Number 3 Cursor driven interface for layer control
US8816989B2 (en) 2012-05-22 2014-08-26 Lenovo (Singapore) Pte. Ltd. User interface navigation utilizing pressure-sensitive touch
US9251763B2 (en) 2012-05-25 2016-02-02 Picmonkey, Llc System and method for image collage editing
WO2013180454A1 (en) 2012-05-29 2013-12-05 Samsung Electronics Co., Ltd. Method for displaying item in terminal and terminal using the same
JP2013250602A (ja) 2012-05-30 2013-12-12 Seiko Epson Corp 端末装置、端末装置の制御方法、及び、プログラム
US9418672B2 (en) 2012-06-05 2016-08-16 Apple Inc. Navigation application with adaptive instruction text
CN102799347B (zh) 2012-06-05 2017-01-04 北京小米科技有限责任公司 应用于触屏设备的用户界面交互方法、装置及触屏设备
KR101909030B1 (ko) 2012-06-08 2018-10-17 엘지전자 주식회사 비디오 편집 방법 및 이를 위한 디지털 디바이스
US9063595B2 (en) 2012-06-08 2015-06-23 Apple Inc. Devices and methods for reducing power usage of a touch-sensitive display
CN102819401A (zh) 2012-06-08 2012-12-12 中标软件有限公司 一种Android操作系统及其桌面图标布置方法
JP2013257657A (ja) 2012-06-11 2013-12-26 Fujitsu Ltd 情報端末装置及び表示制御方法
US9041667B2 (en) 2012-06-12 2015-05-26 Blackberry Limited Electronic device and method of control of displays
KR20130142301A (ko) 2012-06-19 2013-12-30 삼성전자주식회사 단말기의 메뉴환경 설정 장치 및 방법
US20130339001A1 (en) 2012-06-19 2013-12-19 Microsoft Corporation Spelling candidate generation
US20140002374A1 (en) 2012-06-29 2014-01-02 Lenovo (Singapore) Pte. Ltd. Text selection utilizing pressure-sensitive touch
US20140013271A1 (en) 2012-07-05 2014-01-09 Research In Motion Limited Prioritization of multitasking applications in a mobile device interface
US9119156B2 (en) 2012-07-13 2015-08-25 Microsoft Technology Licensing, Llc Energy-efficient transmission of content over a wireless connection
US20140026098A1 (en) 2012-07-19 2014-01-23 M2J Think Box, Inc. Systems and methods for navigating an interface of an electronic device
US9256351B2 (en) 2012-07-20 2016-02-09 Blackberry Limited Method and electronic device for facilitating user control of a menu
EP2688283B1 (en) 2012-07-20 2020-03-18 BlackBerry Limited Dynamic region of interest adaptation and image capture device providing same
US9298295B2 (en) 2012-07-25 2016-03-29 Facebook, Inc. Gestures for auto-correct
US20140028554A1 (en) 2012-07-26 2014-01-30 Google Inc. Recognizing gesture on tactile input device
US9836213B2 (en) 2012-07-27 2017-12-05 Symbol Technologies, Llc Enhanced user interface for pressure sensitive touch screen
KR102014775B1 (ko) 2012-07-30 2019-08-27 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
JP5482842B2 (ja) 2012-07-30 2014-05-07 カシオ計算機株式会社 情報処理装置およびその制御プログラム
US9280280B2 (en) 2012-07-31 2016-03-08 Nokia Technologies Oy Method, apparatus and computer program product for presenting designated information on a display operating in a restricted mode
US8896556B2 (en) 2012-07-31 2014-11-25 Verizon Patent And Licensing Inc. Time-based touch interface
JP2014032506A (ja) 2012-08-02 2014-02-20 Sharp Corp 情報処理装置、選択操作検出方法およびプログラム
JP6267961B2 (ja) 2012-08-10 2018-01-24 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 映像提供方法および送信装置
US9280206B2 (en) 2012-08-20 2016-03-08 Samsung Electronics Co., Ltd. System and method for perceiving images with multimodal feedback
KR101946365B1 (ko) 2012-08-20 2019-02-11 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US9720586B2 (en) 2012-08-21 2017-08-01 Nokia Technologies Oy Apparatus and method for providing for interaction with content within a digital bezel
US9250783B2 (en) 2012-08-21 2016-02-02 Apple Inc. Toggle gesture during drag gesture
KR101946366B1 (ko) 2012-08-23 2019-02-11 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
TWI484405B (zh) 2012-08-23 2015-05-11 Egalax Empia Technology Inc 圖形使用者界面的顯示方法及使用該方法的電子裝置
US9063731B2 (en) 2012-08-27 2015-06-23 Samsung Electronics Co., Ltd. Ultra low power apparatus and method to wake up a main processor
JP5883745B2 (ja) 2012-08-28 2016-03-15 京セラ株式会社 携帯端末、カーソル位置制御プログラムおよびカーソル位置制御方法
KR20140029720A (ko) 2012-08-29 2014-03-11 엘지전자 주식회사 이동단말 제어방법
JP6077794B2 (ja) 2012-08-29 2017-02-08 キヤノン株式会社 情報処理装置及びその制御方法、並びにプログラム
KR101956170B1 (ko) 2012-08-29 2019-03-08 삼성전자 주식회사 카메라의 이미지 저장 장치 및 방법
US20140067293A1 (en) 2012-09-05 2014-03-06 Apple Inc. Power sub-state monitoring
US8732613B2 (en) 2012-09-06 2014-05-20 Google Inc. Dynamic user interface for navigating among GUI elements
JP5977627B2 (ja) 2012-09-07 2016-08-24 シャープ株式会社 情報処理装置、情報処理方法およびプログラム
US9696879B2 (en) 2012-09-07 2017-07-04 Google Inc. Tab scrubbing using navigation gestures
US20140071060A1 (en) 2012-09-11 2014-03-13 International Business Machines Corporation Prevention of accidental triggers of button events
US20140078343A1 (en) 2012-09-20 2014-03-20 Htc Corporation Methods for generating video and multiple still images simultaneously and apparatuses using the same
US9063563B1 (en) 2012-09-25 2015-06-23 Amazon Technologies, Inc. Gesture actions for interface elements
US9785217B2 (en) 2012-09-28 2017-10-10 Synaptics Incorporated System and method for low power input object detection and interaction
US9671943B2 (en) 2012-09-28 2017-06-06 Dassault Systemes Simulia Corp. Touch-enabled complex data entry
US9372538B2 (en) 2012-09-28 2016-06-21 Denso International America, Inc. Multiple-force, dynamically-adjusted, 3-D touch surface with feedback for human machine interface (HMI)
SG10201601697SA (en) * 2012-10-05 2016-04-28 Tactual Labs Co Hybrid systems and methods for low-latency user input processing and feedback
US20140109016A1 (en) 2012-10-16 2014-04-17 Yu Ouyang Gesture-based cursor control
KR102032336B1 (ko) 2012-10-19 2019-11-08 한국전자통신연구원 압력 변화를 통한 촉각 피드백을 제공하는 터치 패널 및 그것의 동작 방법
US20140111670A1 (en) 2012-10-23 2014-04-24 Nvidia Corporation System and method for enhanced image capture
US20140118268A1 (en) 2012-11-01 2014-05-01 Google Inc. Touch screen operation using additional inputs
US9448694B2 (en) 2012-11-09 2016-09-20 Intel Corporation Graphical user interface for navigating applications
US10503359B2 (en) 2012-11-15 2019-12-10 Quantum Interface, Llc Selection attractive interfaces, systems and apparatuses including such interfaces, methods for making and using same
CN103019586B (zh) 2012-11-16 2017-03-15 小米科技有限责任公司 用户界面管理方法及装置
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
KR102108061B1 (ko) 2012-11-27 2020-05-08 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
JP5786909B2 (ja) 2012-11-30 2015-09-30 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理システム、情報の表示方法、制御方法、及びプログラム
US20140152581A1 (en) 2012-11-30 2014-06-05 Lenovo (Singapore) Pte. Ltd. Force as a device action modifier
KR20140071118A (ko) 2012-12-03 2014-06-11 삼성전자주식회사 가상 버튼을 디스플레이하기 위한 방법 및 그 전자 장치
US10282088B2 (en) 2012-12-06 2019-05-07 Samsung Electronics Co., Ltd. Configuration of application execution spaces and sub-spaces for sharing data on a mobile tough screen device
EP2741201A3 (en) 2012-12-06 2017-05-17 Samsung Electronics Co., Ltd Display device and method of controlling the same
US9082348B2 (en) 2012-12-07 2015-07-14 Blackberry Limited Methods and devices for scrolling a display page
US9189131B2 (en) 2012-12-11 2015-11-17 Hewlett-Packard Development Company, L.P. Context menus
JP5794399B2 (ja) 2012-12-12 2015-10-14 株式会社村田製作所 タッチ式入力装置
US20140168093A1 (en) 2012-12-13 2014-06-19 Nvidia Corporation Method and system of emulating pressure sensitivity on a surface
CN103870190B (zh) 2012-12-17 2018-03-27 联想(北京)有限公司 一种控制电子设备的方法及电子设备
US20140168153A1 (en) 2012-12-17 2014-06-19 Corning Incorporated Touch screen systems and methods based on touch location and touch force
KR20140079110A (ko) 2012-12-18 2014-06-26 엘지전자 주식회사 이동 단말기 및 그 동작 방법
US9223403B2 (en) 2012-12-19 2015-12-29 Panasonic Intellectual Property Management Co., Ltd. Tactile input and output device
KR101457632B1 (ko) 2012-12-20 2014-11-10 주식회사 팬택 프로그램 알림 기능을 갖는 휴대용 전자 기기 및 이를 위한 프로그램 알림 방법
JP2014123809A (ja) 2012-12-20 2014-07-03 Canon Inc 撮像装置、撮像システム、および、撮像装置の制御方法
WO2014094283A1 (en) 2012-12-20 2014-06-26 Intel Corporation Touchscreen including force sensors
US9244576B1 (en) 2012-12-21 2016-01-26 Cypress Semiconductor Corporation User interface with child-lock feature
WO2014100953A1 (en) 2012-12-24 2014-07-03 Nokia Corporation An apparatus and associated methods
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
JP6097843B2 (ja) 2012-12-29 2017-03-15 アップル インコーポレイテッド コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
JP6093877B2 (ja) 2012-12-29 2017-03-08 アップル インコーポレイテッド 複数接触ジェスチャのために触知出力の生成を見合わせるためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
KR102072582B1 (ko) 2012-12-31 2020-02-03 엘지전자 주식회사 듀얼 디스플레이 방법 및 장치
US9665762B2 (en) 2013-01-11 2017-05-30 Synaptics Incorporated Tiered wakeup strategy
US10082949B2 (en) 2013-01-17 2018-09-25 Samsung Electronics Co., Ltd. Apparatus and method for application peel
JP6075854B2 (ja) 2013-01-21 2017-02-08 キヤノン株式会社 表示制御装置、その制御方法、およびプログラム、並びに撮像装置および記憶媒体
US9141259B2 (en) 2013-01-21 2015-09-22 International Business Machines Corporation Pressure navigation on a touch sensitive user interface
JP2014142863A (ja) 2013-01-25 2014-08-07 Fujitsu Ltd 情報処理装置、及び、タッチパネルパラメータの補正方法並びにプログラム
KR20140097902A (ko) 2013-01-30 2014-08-07 삼성전자주식회사 햅틱 패턴을 생성하는 휴대 단말 및 방법
KR102133410B1 (ko) 2013-01-31 2020-07-14 삼성전자 주식회사 멀티태스킹 운용 방법 및 이를 지원하는 단말기
US20140210798A1 (en) 2013-01-31 2014-07-31 Hewlett-Packard Development Company, L.P. Digital Drawing Using A Touch-Sensitive Device To Detect A Position And Force For An Input Event
US9760267B2 (en) 2013-02-05 2017-09-12 Nokia Technologies Oy Method and apparatus for a slider interface element
EP2767896B1 (en) 2013-02-14 2019-01-16 LG Electronics Inc. Mobile terminal and method of controlling the mobile terminal
US9910527B2 (en) 2013-02-15 2018-03-06 Flatfrog Laboratories Ab Interpretation of pressure based gesture
US20140237408A1 (en) 2013-02-15 2014-08-21 Flatfrog Laboratories Ab Interpretation of pressure based gesture
KR101761190B1 (ko) 2013-02-22 2017-07-25 삼성전자 주식회사 휴대 단말기의 사용자 인터페이스 제공 방법 및 장치
CN103186345B (zh) 2013-02-25 2016-09-14 北京极兴莱博信息科技有限公司 一种文段选择方法及装置
JP2014165663A (ja) 2013-02-25 2014-09-08 Kyocera Corp 携帯端末装置、プログラムおよび携帯端末装置の制御方法
CN104020868B (zh) 2013-02-28 2017-09-01 联想(北京)有限公司 一种信息处理的方法及电子设备
US8769431B1 (en) 2013-02-28 2014-07-01 Roy Varada Prasad Method of single-handed software operation of large form factor mobile electronic devices
US9035752B2 (en) 2013-03-11 2015-05-19 Amazon Technologies, Inc. Force sensing input device under an unbroken exterior portion of a device
US10203815B2 (en) 2013-03-14 2019-02-12 Apple Inc. Application-based touch sensitivity
US9690476B2 (en) 2013-03-14 2017-06-27 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US10121065B2 (en) 2013-03-14 2018-11-06 Nike, Inc. Athletic attribute determinations from image data
KR102039688B1 (ko) 2013-03-14 2019-11-01 삼성전자주식회사 사용자 기기 및 그 동작 방법
US9451230B1 (en) * 2013-03-15 2016-09-20 Google Inc. Playback adjustments for digital media items
CN110837329B (zh) 2013-03-15 2023-10-24 苹果公司 用于管理用户界面的方法和电子设备
US10055418B2 (en) 2014-03-14 2018-08-21 Highspot, Inc. Narrowing information search results for presentation to a user
US9305374B2 (en) 2013-03-15 2016-04-05 Apple Inc. Device, method, and graphical user interface for adjusting the appearance of a control
DE112014001380T5 (de) 2013-03-15 2015-12-03 Tk Holdings Inc. Adaptive Mensch-Maschine-Schnittstellen für druckempfindliche Steuerung in einer abgelenkten Betriebsumgebung und Verfahren zur Anwendung derselben
US9949890B2 (en) 2013-03-15 2018-04-24 Sambhu Choudhury Garment with remote controlled vibration array
US9225677B2 (en) 2013-03-15 2015-12-29 Facebook, Inc. Systems and methods for displaying a digest of messages or notifications without launching applications associated with the messages or notifications
US9274685B2 (en) 2013-03-15 2016-03-01 Google Technology Holdings LLC Systems and methods for predictive text entry for small-screen devices with touch-based two-stage text input
CN104077014B (zh) 2013-03-28 2018-04-10 阿里巴巴集团控股有限公司 一种信息处理的方法和设备
US9507495B2 (en) 2013-04-03 2016-11-29 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US20140304646A1 (en) 2013-04-04 2014-10-09 Klip, Inc. Sliding side menu gui with menu items displaying indicia of updated content
US9389718B1 (en) 2013-04-04 2016-07-12 Amazon Technologies, Inc. Thumb touch interface
KR20140122000A (ko) 2013-04-09 2014-10-17 옥윤선 모바일 메신저 기반의 드래그를 이용한 정보전달 방법, 그리고 모바일 메신저 기반의 드래그를 이용한 정보전달을 위한 모바일단말
KR102091235B1 (ko) 2013-04-10 2020-03-18 삼성전자주식회사 휴대 단말기에서 메시지를 편집하는 장치 및 방법
US20140306897A1 (en) 2013-04-10 2014-10-16 Barnesandnoble.Com Llc Virtual keyboard swipe gestures for cursor movement
US9146672B2 (en) 2013-04-10 2015-09-29 Barnes & Noble College Booksellers, Llc Multidirectional swipe key for virtual keyboard
US20160092071A1 (en) 2013-04-30 2016-03-31 Hewlett-Packard Development Company, L.P. Generate preview of content
CN103279295A (zh) 2013-05-03 2013-09-04 广东欧珀移动通信有限公司 一种终端桌面图标切换方法及装置
EP2995068A4 (en) 2013-05-08 2016-12-07 Nokia Technologies Oy DEVICE AND CORRESPONDING METHODS
KR20140132632A (ko) 2013-05-08 2014-11-18 삼성전자주식회사 휴대 장치 및 휴대 장치의 오브젝트 표시 방법
CN104142798A (zh) 2013-05-10 2014-11-12 北京三星通信技术研究有限公司 启动应用程序的方法及触摸屏智能终端设备
CN103268184A (zh) 2013-05-17 2013-08-28 广东欧珀移动通信有限公司 一种移动文本光标的方法及装置
US20140344765A1 (en) 2013-05-17 2014-11-20 Barnesandnoble.Com Llc Touch Sensitive UI Pinch and Flick Techniques for Managing Active Applications
KR20140137509A (ko) 2013-05-22 2014-12-03 삼성전자주식회사 알림 기능 운용 방법 및 이를 지원하는 전자 장치
JP2014232347A (ja) 2013-05-28 2014-12-11 シャープ株式会社 文字入力装置および携帯端末装置
US9319589B2 (en) 2013-05-31 2016-04-19 Sony Corporation Device and method for capturing images and selecting a desired image by tilting the device
US9307112B2 (en) 2013-05-31 2016-04-05 Apple Inc. Identifying dominant and non-dominant images in a burst mode capture
US10282067B2 (en) 2013-06-04 2019-05-07 Sony Corporation Method and apparatus of controlling an interface based on touch operations
US9626087B2 (en) 2013-06-09 2017-04-18 Apple Inc. Device, method, and graphical user interface for navigating between user interfaces
US10282083B2 (en) 2013-06-09 2019-05-07 Apple Inc. Device, method, and graphical user interface for transitioning between user interfaces
US9477393B2 (en) 2013-06-09 2016-10-25 Apple Inc. Device, method, and graphical user interface for displaying application status information
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
US10481769B2 (en) 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
KR102113674B1 (ko) 2013-06-10 2020-05-21 삼성전자주식회사 다중 터치를 이용한 객체 선택 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
US9405379B2 (en) 2013-06-13 2016-08-02 Microsoft Technology Licensing, Llc Classification of user input
CN104238904B (zh) 2013-06-17 2019-08-06 中兴通讯股份有限公司 一种显示界面滑动的方法及移动终端
US9400601B2 (en) 2013-06-21 2016-07-26 Nook Digital, Llc Techniques for paging through digital content on touch screen devices
US20150012861A1 (en) 2013-07-02 2015-01-08 Dropbox, Inc. Syncing content clipboard
CN103309618A (zh) 2013-07-02 2013-09-18 姜洪明 移动操作系统
US20150020033A1 (en) 2013-07-09 2015-01-15 Qualcomm Incorporated Method and apparatus for activating a user interface from a low power state
KR102136602B1 (ko) 2013-07-10 2020-07-22 삼성전자 주식회사 휴대단말기의 컨텐츠 처리 장치 및 방법
KR102080746B1 (ko) 2013-07-12 2020-02-24 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
AU2014290148A1 (en) 2013-07-16 2016-02-11 Pinterest, Inc. Object based contextual menu controls
US9342228B2 (en) 2013-07-17 2016-05-17 Blackberry Limited Device and method for filtering messages using sliding touch input
US20150022482A1 (en) 2013-07-19 2015-01-22 International Business Machines Corporation Multi-touch management for touch screen displays
KR102187505B1 (ko) 2013-07-22 2020-12-08 삼성전자 주식회사 전자 디바이스의 표시 제어 방법 및 장치
KR20150013991A (ko) 2013-07-25 2015-02-06 삼성전자주식회사 휴대단말기의 어플리케이션 실행 방법 및 장치
US20150040065A1 (en) 2013-07-31 2015-02-05 Vonage Network Llc Method and apparatus for generating customized menus for accessing application functionality
CN104349124A (zh) 2013-08-01 2015-02-11 天津天地伟业数码科技有限公司 录像机上扩展多屏显示的结构及方法
US9335897B2 (en) 2013-08-08 2016-05-10 Palantir Technologies Inc. Long click display of a context menu
KR20150019165A (ko) 2013-08-12 2015-02-25 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US10108310B2 (en) 2013-08-16 2018-10-23 Marvell World Trade Ltd Method and apparatus for icon based application control
KR102101741B1 (ko) 2013-08-16 2020-05-29 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9547525B1 (en) 2013-08-21 2017-01-17 Google Inc. Drag toolbar to enter tab switching interface
US9740712B2 (en) 2013-08-26 2017-08-22 Ab Minenda Oy System for processing image data, storing image data and accessing image data
CN104423740B (zh) 2013-08-30 2018-07-13 唐山东唐电气股份有限公司 基于电容式触控装置的感测方法
KR102332675B1 (ko) 2013-09-02 2021-11-30 삼성전자 주식회사 전자 장치의 컨텐츠 공유 방법 및 장치
KR20150026649A (ko) 2013-09-03 2015-03-11 삼성전자주식회사 전자 장치에서 제스처를 설정하는 장치 및 방법
US20150066950A1 (en) 2013-09-05 2015-03-05 Sporting Vote, Inc. Sentiment scoring for sports entities and filtering techniques
US20150071547A1 (en) 2013-09-09 2015-03-12 Apple Inc. Automated Selection Of Keeper Images From A Burst Photo Captured Set
US9798443B1 (en) 2013-09-10 2017-10-24 Amazon Technologies, Inc. Approaches for seamlessly launching applications
JP6138641B2 (ja) 2013-09-13 2017-05-31 株式会社Nttドコモ 地図情報表示装置、地図情報表示方法、及び地図情報表示プログラム
US10037130B2 (en) 2013-09-13 2018-07-31 Samsung Electronics Co., Ltd. Display apparatus and method for improving visibility of the same
US20150082238A1 (en) 2013-09-18 2015-03-19 Jianzhong Meng System and method to display and interact with a curve items list
JP6865035B2 (ja) 2013-10-08 2021-04-28 ジョイソン セイフティ システムズ アクイジション エルエルシー 統合型多感覚フィードバックを備える圧力応答式タッチインターフェース
US9407964B2 (en) 2013-10-25 2016-08-02 Verizon Patent And Licensing Inc. Method and system for navigating video to an instant time
KR20150049700A (ko) 2013-10-30 2015-05-08 삼성전자주식회사 전자 장치에서 입력을 제어하는 방법 및 장치
US10067651B2 (en) 2013-11-15 2018-09-04 Thomson Reuters Global Resources Unlimited Company Navigable layering of viewable areas for hierarchical content
CN103677632A (zh) 2013-11-19 2014-03-26 三星电子(中国)研发中心 一种虚拟键盘调整方法和移动终端
JP6177669B2 (ja) 2013-11-20 2017-08-09 株式会社Nttドコモ 画像表示装置およびプログラム
US9111076B2 (en) 2013-11-20 2015-08-18 Lg Electronics Inc. Mobile terminal and control method thereof
US20150143294A1 (en) 2013-11-21 2015-05-21 UpTo, Inc. System and method for presenting a responsive multi-layered ordered set of elements
CN103699292B (zh) 2013-11-29 2017-02-15 小米科技有限责任公司 一种进入文本选择模式的方法和装置
US20150153897A1 (en) 2013-12-03 2015-06-04 Microsoft Corporation User interface adaptation from an input source identifier change
JP2015114836A (ja) 2013-12-11 2015-06-22 キヤノン株式会社 画像処理装置、触感制御方法及びプログラム
CN104714741A (zh) 2013-12-11 2015-06-17 北京三星通信技术研究有限公司 触控操作的方法及装置
CN103699295A (zh) 2013-12-12 2014-04-02 宇龙计算机通信科技(深圳)有限公司 终端和图标显示方法
US9483118B2 (en) 2013-12-27 2016-11-01 Rovi Guides, Inc. Methods and systems for selecting media guidance functions based on tactile attributes of a user input
US9804665B2 (en) 2013-12-29 2017-10-31 Google Inc. Apparatus and method for passing event handling control from a primary processor to a secondary processor during sleep mode
US9753527B2 (en) 2013-12-29 2017-09-05 Google Technology Holdings LLC Apparatus and method for managing graphics buffers for a processor in sleep mode
CN103793134A (zh) 2013-12-30 2014-05-14 深圳天珑无线科技有限公司 一种触摸屏终端多界面切换的方法及触摸屏终端
KR20150081125A (ko) 2014-01-03 2015-07-13 삼성전자주식회사 전자 장치 스크린에서의 입자 효과 디스플레이
CN103777850A (zh) 2014-01-17 2014-05-07 广州华多网络科技有限公司 菜单显示方法、装置和终端
CN104834456A (zh) 2014-02-12 2015-08-12 深圳富泰宏精密工业有限公司 触控界面多任务切换方法、系统及电子装置
EP3108345B1 (en) 2014-02-18 2019-12-25 Cambridge Touch Technologies Limited Dynamic switching of power modes for touch screens using force touch
CN103838465B (zh) 2014-03-08 2018-03-02 广东欧珀移动通信有限公司 一种生动有趣的桌面图标显示方法及装置
US9436348B2 (en) 2014-03-18 2016-09-06 Blackberry Limited Method and system for controlling movement of cursor in an electronic device
JP6247651B2 (ja) 2014-03-24 2017-12-13 株式会社 ハイディープHiDeep Inc. メニュー操作方法及びこれを行うタッチ入力装置を含むメニュー操作装置
US9829979B2 (en) 2014-04-28 2017-11-28 Ford Global Technologies, Llc Automotive touchscreen controls with simulated texture for haptic feedback
KR102129798B1 (ko) 2014-05-08 2020-07-03 엘지전자 주식회사 비히클 및 그 제어 방법
US20150332607A1 (en) 2014-05-13 2015-11-19 Viewplus Technologies, Inc. System for Producing Tactile Images
CN104020955B (zh) 2014-05-30 2016-05-11 深圳市爱培科技术股份有限公司 基于WinCE系统的触摸式设备桌面自定义方法及系统
CN103984501B (zh) 2014-05-30 2017-02-08 东莞市沃视界电子科技有限公司 一种基于触摸屏的文段复制粘贴方法、装置及其移动终端
US9032321B1 (en) 2014-06-16 2015-05-12 Google Inc. Context-based presentation of a user interface
CN104021021A (zh) 2014-06-19 2014-09-03 深圳市中兴移动通信有限公司 移动终端及其通过压力检测实现快捷启动的方法和装置
CN104038838A (zh) 2014-06-24 2014-09-10 北京奇艺世纪科技有限公司 一种数据播放方法及装置
US9477653B2 (en) 2014-06-26 2016-10-25 Blackberry Limited Character entry for an electronic device using a position sensing keyboard
US9294719B2 (en) 2014-06-30 2016-03-22 Salesforce.Com, Inc. Systems, methods, and apparatuses for implementing in-app live support functionality
US20160004393A1 (en) 2014-07-01 2016-01-07 Google Inc. Wearable device user interface control
TW201602893A (zh) 2014-07-07 2016-01-16 欣興電子股份有限公司 附加資訊提供方法及使用其的觸控顯示裝置
US9990105B2 (en) 2014-07-08 2018-06-05 Verizon Patent And Licensing Inc. Accessible contextual controls within a graphical user interface
US9363644B2 (en) 2014-07-16 2016-06-07 Yahoo! Inc. System and method for detection of indoor tracking units
US20160019718A1 (en) 2014-07-16 2016-01-21 Wipro Limited Method and system for providing visual feedback in a virtual reality environment
CN104090979B (zh) 2014-07-23 2017-10-24 上海天脉聚源文化传媒有限公司 一种网页编辑方法及装置
US9600114B2 (en) 2014-07-31 2017-03-21 International Business Machines Corporation Variable pressure touch system
KR20160021524A (ko) 2014-08-18 2016-02-26 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US10203858B2 (en) 2014-08-28 2019-02-12 Blackberry Limited Portable electronic device and method of controlling the display of information
CN104270565B (zh) 2014-08-29 2018-02-02 小米科技有限责任公司 图像拍摄方法、装置及设备
KR102373337B1 (ko) 2014-09-02 2022-03-11 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
CN104267902B (zh) 2014-09-22 2017-03-08 努比亚技术有限公司 一种应用程序交互控制方法、装置及终端
US20160124924A1 (en) 2014-10-09 2016-05-05 Wrap Media, LLC Displaying a wrap package of cards within an overlay window embedded in an application or web page
US20160132139A1 (en) 2014-11-11 2016-05-12 Qualcomm Incorporated System and Methods for Controlling a Cursor Based on Finger Pressure and Direction
CN104331239A (zh) 2014-11-26 2015-02-04 上海斐讯数据通信技术有限公司 单手操作手持设备的方法及系统
TW201624260A (zh) 2014-12-30 2016-07-01 富智康(香港)有限公司 資訊查看系統及方法
KR20150021977A (ko) 2015-01-19 2015-03-03 인포뱅크 주식회사 휴대용 단말기에서의 ui 구성 방법
US20160224220A1 (en) 2015-02-04 2016-08-04 Wipro Limited System and method for navigating between user interface screens
US10191614B2 (en) 2015-02-25 2019-01-29 Htc Corporation Panel displaying method, portable electronic device and recording medium using the method
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10101877B2 (en) 2015-04-16 2018-10-16 Blackberry Limited Portable electronic device including touch-sensitive display and method of providing access to an application
US9625987B1 (en) 2015-04-17 2017-04-18 Google Inc. Updating and displaying information in different power modes
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
DK179292B1 (en) 2015-06-07 2018-04-09 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10319177B2 (en) 2015-07-31 2019-06-11 Novomatic Ag User interface with slider and popup window feature
US20170046058A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices, Methods, and Graphical User Interfaces for Adjusting User Interface Objects
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US9619113B2 (en) 2015-09-09 2017-04-11 Quixey, Inc. Overloading app icon touchscreen interaction to provide action accessibility
US10346510B2 (en) 2015-09-29 2019-07-09 Apple Inc. Device, method, and graphical user interface for providing handwriting support in document editing
KR102348670B1 (ko) 2015-09-30 2022-01-06 엘지디스플레이 주식회사 멀티 터치 감지형 표시장치와 그의 터치 식별코드 할당방법
US11182068B2 (en) 2015-10-27 2021-11-23 Verizon Patent And Licensing Inc. Method and system for interacting with a touch screen
US10506165B2 (en) 2015-10-29 2019-12-10 Welch Allyn, Inc. Concussion screening system
JP6685695B2 (ja) 2015-10-30 2020-04-22 キヤノン株式会社 端末及び撮像装置
KR101749933B1 (ko) 2015-11-12 2017-06-22 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20170085419A (ko) 2016-01-14 2017-07-24 삼성전자주식회사 터치 입력에 기반한 동작 방법 및 그 전자 장치
CN107329602A (zh) 2016-04-28 2017-11-07 珠海金山办公软件有限公司 一种触摸屏轨迹识别方法及装置
US10402042B2 (en) 2016-06-13 2019-09-03 Lenovo (Singapore) Pte. Ltd. Force vector cursor control
US11307755B2 (en) 2016-08-25 2022-04-19 Parade Technologies, Ltd. Determination of valid touches based on force shape
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK201670728A1 (en) 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
US10445935B2 (en) 2017-05-26 2019-10-15 Microsoft Technology Licensing, Llc Using tracking to simulate direct tablet interaction in mixed reality
US20180364898A1 (en) 2017-06-14 2018-12-20 Zihan Chen Systems, Devices, and/or Methods for Managing Text Rendering
CN111480132A (zh) 2017-12-19 2020-07-31 索尼公司 信息处理系统、信息处理方法和程序
US10908783B2 (en) 2018-11-06 2021-02-02 Apple Inc. Devices, methods, and graphical user interfaces for interacting with user interface objects and providing feedback
US10785591B2 (en) 2018-12-04 2020-09-22 Spotify Ab Media content playback based on an identified geolocation of a target venue
US11544928B2 (en) 2019-06-17 2023-01-03 The Regents Of The University Of California Athlete style recognition system and method
US20210191975A1 (en) 2019-12-20 2021-06-24 Juwei Lu Methods and systems for managing image collection

Also Published As

Publication number Publication date
AU2021254568A1 (en) 2021-11-18
CN104508618A (zh) 2015-04-08
AU2018256626B2 (en) 2019-08-22
EP2847658A1 (en) 2015-03-18
US20150067496A1 (en) 2015-03-05
AU2019268116B2 (en) 2021-10-14
WO2013169853A1 (en) 2013-11-14
HK1207172A1 (en) 2016-01-22
JP2017107581A (ja) 2017-06-15
CN108287651A (zh) 2018-07-17
AU2021254568B2 (en) 2023-07-13
US20190138102A1 (en) 2019-05-09
HK1208539A1 (en) 2016-03-04
DE112013002387T5 (de) 2015-02-12
JP2015521316A (ja) 2015-07-27
JP6486395B2 (ja) 2019-03-20
EP2847658B1 (en) 2017-06-21
JP6722314B2 (ja) 2020-07-15
AU2013259613A1 (en) 2014-12-04
US11947724B2 (en) 2024-04-02
CN104508618B (zh) 2018-01-05
AU2016247194A1 (en) 2016-11-10
AU2019268116A1 (en) 2019-12-12
US10481690B2 (en) 2019-11-19
US10175757B2 (en) 2019-01-08
AU2013259613B2 (en) 2016-07-21
US20190138101A1 (en) 2019-05-09
CN108287651B (zh) 2021-04-13
EP3185116A1 (en) 2017-06-28
US20240152210A1 (en) 2024-05-09
US11221675B2 (en) 2022-01-11
EP3185116B1 (en) 2019-09-11
AU2018256626A1 (en) 2018-11-22
CN108241465B (zh) 2021-03-09
CN107977084A (zh) 2018-05-01
HK1257322A1 (zh) 2019-10-18
JP2020166888A (ja) 2020-10-08
US20150067497A1 (en) 2015-03-05
CN108241465A (zh) 2018-07-03
EP3594797A1 (en) 2020-01-15
AU2016247194B2 (en) 2018-08-02
JP2019114278A (ja) 2019-07-11
US20220129076A1 (en) 2022-04-28
CN107977084B (zh) 2021-11-05
US10942570B2 (en) 2021-03-09
EP3594797B1 (en) 2024-10-02

Similar Documents

Publication Publication Date Title
JP6486395B2 (ja) ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
US11132120B2 (en) Device, method, and graphical user interface for transitioning between user interfaces
JP6592496B2 (ja) ユーザインタフェースオブジェクトを選択するためのデバイス、方法及びグラフィカルユーザインタフェース
US10416800B2 (en) Devices, methods, and graphical user interfaces for adjusting user interface objects
JP6097843B2 (ja) コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
US20170046058A1 (en) Devices, Methods, and Graphical User Interfaces for Adjusting User Interface Objects

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160229

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20160530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160825

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161222

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170120

R150 Certificate of patent or registration of utility model

Ref document number: 6082458

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250