JP2010503125A - タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 - Google Patents
タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 Download PDFInfo
- Publication number
- JP2010503125A JP2010503125A JP2009527542A JP2009527542A JP2010503125A JP 2010503125 A JP2010503125 A JP 2010503125A JP 2009527542 A JP2009527542 A JP 2009527542A JP 2009527542 A JP2009527542 A JP 2009527542A JP 2010503125 A JP2010503125 A JP 2010503125A
- Authority
- JP
- Japan
- Prior art keywords
- user interface
- touch screen
- contact area
- interface objects
- screen display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 54
- 230000004913 activation Effects 0.000 claims abstract description 45
- 230000035945 sensitivity Effects 0.000 claims description 42
- 238000004590 computer program Methods 0.000 claims description 8
- 238000003860 storage Methods 0.000 claims description 6
- 230000003213 activating effect Effects 0.000 claims description 4
- 230000007246 mechanism Effects 0.000 claims description 4
- 230000001419 dependent effect Effects 0.000 claims 1
- 238000004891 communication Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 18
- 230000003287 optical effect Effects 0.000 description 17
- 238000007726 management method Methods 0.000 description 15
- 230000002093 peripheral effect Effects 0.000 description 15
- 230000009471 action Effects 0.000 description 13
- 230000033001 locomotion Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000001066 destructive effect Effects 0.000 description 5
- 230000001413 cellular effect Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000002427 irreversible effect Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000002829 reductive effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
- G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
- G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
- G06F3/04186—Touch location disambiguation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
Abstract
【課題】タッチスクリーンディスプレイとの指接触からカーソル位置を適応式に決定し、そのカーソル位置に基づいて動作を遂行するポータブル装置を提供する。
【解決手段】タッチスクリーンディスプレイを伴うポータブル装置は、指とタッチスクリーンディスプレイとの接触エリアを検出し、次いで、接触エリアに関連した第１の位置を決定する。指接触のカーソル位置は、第１の位置、第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づいて決定される。カーソル位置がタッチスクリーンディスプレイ上のバーチャルプッシュボタンの隠れたヒット領域に入る場合には、バーチャルプッシュボタンに関連した動作を遂行するようにポータブル装置がアクチベートされる。
【選択図】図６
【解決手段】タッチスクリーンディスプレイを伴うポータブル装置は、指とタッチスクリーンディスプレイとの接触エリアを検出し、次いで、接触エリアに関連した第１の位置を決定する。指接触のカーソル位置は、第１の位置、第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づいて決定される。カーソル位置がタッチスクリーンディスプレイ上のバーチャルプッシュボタンの隠れたヒット領域に入る場合には、バーチャルプッシュボタンに関連した動作を遂行するようにポータブル装置がアクチベートされる。
【選択図】図６
Description
ここに開示する実施形態は、一般的に、ポータブル電子装置に係り、より特定すると、タッチスクリーンディスプレイとの指接触からカーソル位置を適応式に決定し、次いで、そのカーソル位置に基づいて動作を遂行するポータブル装置に係る。
ポータブル電子装置がよりコンパクトになり、所与の装置で遂行されるファンクションの数が増加するにつれて、ユーザがマルチファンクション装置と容易に対話できるようにするユーザインターフェイスを設計することが意義深い挑戦となっている。この挑戦は、デスクトップ又はラップトップコンピュータより非常に小さなスクリーンを有するハンドヘルドポータブル装置にとって特に意義深いものである。この状況は不利なものである。何故ならば、ユーザインターフェイスは、ユーザがコンテンツを受け取るだけでなく、装置の特徴、ツール及びファンクションにアクセスするユーザの試みを含むユーザのアクション又は振舞いに対する応答も受け取るゲートウェイだからである。あるポータブル通信装置（例えば、モバイルホン、セルホン、セルラー電話、等とも時々称される移動電話）は、ユーザがデータにアクセスし、それを記憶し、又、操作できるようにするため、より多くのプッシュボタンを追加し、プッシュボタンの密度を高め、プッシュボタンのファンクションを過負荷状態にし、又は複雑なメニューシステムを使用することに頼っている。これらの従来のユーザインターフェイスは、ユーザが覚えねばならない複雑なキーシーケンス及びメニューハイアラーキーをしばしば招く。
又、物理的なプッシュボタンを含むような従来の多数のユーザインターフェイスは、融通性もない。これは、ユーザインターフェイスがポータブル装置で実行されるアプリケーション又はユーザによって構成され及び／又は適応されるのを妨げることにもなり得る。多数のキーシーケンス及びメニューハイアラーキーを覚えるための時間のかかる要求や、希望のプッシュボタンを操作する困難さと結び付いたときには、このような融通性のなさがほとんどのユーザにとってフラストレーションとなる。
有用性を改善するために、あるポータブル装置は、タッチスクリーンを使用して、ソフトキーボード及びダイヤルパッドのようなバーチャルプッシュボタンをレンダリングしている。バーチャルプッシュボタンとのユーザの指接触から、ポータブル装置は、ユーザにより要求されたサービス（１つ又は複数）を決定し、それに応じてアクションをとる。しかし、異なるユーザは、しばしば、異なる形状の指紋を有するので、これらのポータブル装置にとって、異なる形状の指紋、及びポータブル装置によりサポートされる異なるサービスに関連した異なるコンテクストに基づいて、ユーザが希望するバーチャルプッシュボタンを正確に且つ適応式に識別することが挑戦となっている。
そこで、タッチスクリーンとの指接触からカーソル位置を適応式に決定し、次いで、そのカーソル位置に基づいて動作を遂行するように構成されたポータブルマルチファンクション装置が要望される。このような構成は、ポータブルマルチファンクション装置との有効性、効率及びユーザ満足度を高める。
ポータブル装置のためのユーザインターフェイスに関連した前記欠点及び他の問題は、ここに開示するポータブルマルチファンクション装置により軽減され又は排除される。ある実施形態では、装置は、グラフィックユーザインターフェイス（ＧＵＩ）を伴うタッチ感知ディスプレイ（「タッチスクリーン」としても知られている）と、１つ以上のプロセッサと、メモリと、多数のファンクションを遂行するためにメモリに記憶された１つ以上のモジュール、プログラム又はインストラクションセットとを有する。ある実施形態では、ユーザは、タッチ感知ディスプレイ上で主として指接触及びジェスチャーを通してＧＵＩと対話する。ある実施形態では、ファンクションは、電話通話、ビデオ会議、ｅ−メール、インスタントメッセージング、ブログ、デジタル写真、デジタルビデオ、ウェブブラウジング、デジタル音楽の再生、及び／又はデジタルビデオの再生を含んでもよい。これらのファンクションを遂行するためのインストラクションは、コンピュータ読み取り可能な記憶媒体に含まれてもよいし、又は１つ以上のプロセッサで実行するように構成された他のコンピュータプログラム製品に含まれてもよい。
本発明の１つの態様は、タッチスクリーンディスプレイを伴うポータブルマルチファンクション装置により遂行されるコンピュータ実施方法に関する。ポータブル装置は、指とタッチスクリーンディスプレイとの接触エリアを検出し、次いで、その接触エリアに関連した第１の位置を決定する。指接触のカーソル位置は、その第１の位置、その第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバー(activation susceptibility number)、に少なくとも一部分基づいて決定される。
本発明の別の観点は、タッチスクリーンディスプレイを伴うポータブルマルチファンクション装置のグラフィックユーザインターフェイスに関する。グラフィックユーザインターフェイスは、カーソルと、複数のユーザインターフェイスオブジェクトとを含む。カーソルの位置は、指とタッチスクリーンディスプレイとの接触エリアに関連した第１の位置、その第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバー、に少なくとも一部分基づいて決定される。
本発明の別の態様は、複数のユーザインターフェイスオブジェクトをもつタッチスクリーンディスプレイを伴うポータブル電子装置に関する。この装置は、１つ以上のプロセッサと、メモリと、このメモリに記憶されて、１つ以上のプロセッサにより実行されるように構成されたプログラムとを備えている。このプログラムは、指とタッチスクリーンディスプレイとの接触エリアを検出するためのインストラクションと、その接触エリアに関連した第１の位置を決定するためのインストラクションと、その第１の位置、その第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバー、に少なくとも一部分基づいて、カーソル位置を決定するためのインストラクションと、を含む。
本発明の別の態様は、コンピュータ読み取り可能な記憶媒体と、そこに埋め込まれたコンピュータプログラムメカニズム（例えば、１つ以上のコンピュータプログラム）とを備えたコンピュータプログラム製品に関する。コンピュータプログラムメカニズムは、ポータブル電子装置により実行されたときに、その装置が、指とタッチスクリーンディスプレイとの接触エリアを検出し、その接触エリアに関連した第１の位置を決定し、その第１の位置、その第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバー、に少なくとも一部分基づいて、カーソル位置を決定する、ようにさせるインストラクションを含む。
本発明の別の態様は、タッチスクリーンディスプレイを伴うポータブル電子装置に関する。この装置は、指とタッチスクリーンディスプレイとの接触エリアを検出するための手段と、その接触エリアに関連した第１の位置を決定するための手段と、その第１の位置、その第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバー、に少なくとも一部分基づいて、カーソル位置を決定するための手段と、を備えている。
本発明の上述した実施形態及びその付加的な実施形態を良く理解するために、全図面にわたり対応する部分を同じ参照番号で示した添付図面を参照して、実施形態を詳細に説明する。
添付図面に示された実施形態を以下に詳細に説明する。以下の詳細な説明において、本発明を完全に理解するために多数の特定の細部について述べる。しかしながら、当業者であれば、本発明は、これらの特定の細部を伴わずに実施できることが明らかであろう。その他の点で、これら実施形態の観点を不必要に不明瞭にしないために、良く知られた方法、手順、コンポーネント、回路及びネットワークは、詳細に説明しない。
又、第１、第２、等の語は、ここでは種々の要素を記述するのに使用されるが、これらの要素は、これらの語によって限定されるべきではないことも理解されたい。これらの語は、ある要素を別の要素と区別するためにのみ使用される。例えば、本発明の範囲から逸脱せずに、第１のジェスチャーは、第２のジェスチャーと称することもできるし、第２のジェスチャーは、第１のジェスチャーと称することもできる。
本発明の説明で使用される用語は、特定の実施形態を説明するためのものに過ぎず、本発明を限定するように意図されていない。本発明の説明及び特許請求の範囲で使用されるように、単数形態“ａ”、“an”及び“the”は、特に明確な指示のない限り、複数形態も含むことが意図される。又、ここで使用する“及び／又は(and/or)”は、１つ以上の列挙された関連アイテムの任意の及び全ての考えられる組合せを指し及び包含することも理解されたい。更に、“備える(comprises)”及び／又は“備えている(comprising)”という語は、本明細書で使用されるときには、述べられた特徴、整数、ステップ、オペレーション、エレメント、及び／又はコンポーネントの存在を特定するものであるが、１つ以上の他の特徴、整数、ステップ、オペレーション、エレメント、コンポーネント及び／又はそのグループの存在を除外するものではないことも理解されたい。
ポータブルマルチファンクション装置、このような装置のためのユーザインターフェイス、及びこのような装置を使用するための関連プロセスの実施形態について説明する。ある実施形態では、装置は、ＰＤＡ及び／又は音楽プレーヤファンクションのような他のファンクションも含む移動電話のようなポータブル通信装置である。
ユーザインターフェイスは、タッチスクリーン、又はタッチスクリーン上に表示されるバーチャルクリックホイールに加えて、物理的なクリックホイールを含むことができる。クリックホイールとは、ホイールの角度変位又は装置のユーザによるホイールとの接触点に基づいて、ナビゲーションコマンドを与えることのできるユーザインターフェイス装置である。又、クリックホイールは、例えば、装置のユーザがホイールの少なくとも一部分又はホイールの中心を押し下げたときに、１つ以上のアイテムの選択に対応するユーザコマンドを与えるように使用することもできる。或いは又、タッチスクリーン面上のクリックホイール映像との接触を遮断すると、選択に対応するユーザコマンドを指示することができる。簡単化のために、以下の説明において、タッチスクリーンを含むポータブルマルチファンクション装置は、一実施形態として使用される。しかしながら、ユーザインターフェイス及びそれに関連するプロセスの幾つかは、物理的クリックホイール、物理的キーボード、マウス、及び／又はジョイスティックのような１つ以上の他の物理的ユーザインターフェイス装置を含む、パーソナルコンピュータ及びラップトップコンピュータのような他の装置にも適用できることを理解されたい。
この装置は、次のものの１つ以上のような種々のアプリケーションをサポートする。即ち、電話アプリケーション、ビデオ会議アプリケーション、ｅ−メールアプリケーション、インスタントメッセージングアプリケーション、ブログアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション、及び／又はデジタルビデオプレーヤアプリケーション。
装置において実行することのできる種々のアプリケーションは、少なくとも１つの共通の物理的ユーザインターフェイス装置、例えば、タッチスクリーンを使用することができる。タッチスクリーンの１つ以上のファンクション、及び装置に表示される対応する情報は、アプリケーションごとに及び／又は各アプリケーション内で調整し及び／又は変更することができる。このように、装置の共通の物理的アーキテクチャー（タッチスクリーンのような）は、直感的及び透過的なユーザインターフェイスで種々のアプリケーションをサポートすることができる。
ユーザインターフェイスは、１つ以上のソフトキーボード実施形態を含むことができる。ソフトキーボード実施形態は、参考として内容をここに援用する２００６年７月２４日に出願された“Keyboards For Portable Electronic Devices”と題する米国特許出願第１１／４５９，６０６号、及び２００６年７月２４日に出願された“Touch Screen Keyboards For Portable Electronic Devices”と題する第１１／４５９，６１５号に説明されたように、キーボードの表示アイコン上に標準（ＱＷＥＲＴＹ）及び／又は非標準構成の記号を含むことができる。キーボード実施形態は、タイプライターの場合のような既存の物理的キーボードにおけるキーの数に対して減少された数のアイコン（又はソフトキー）を含むことができる。これは、ユーザがキーボードにおいて１つ以上のアイコン、ひいては、１つ以上の対応する記号を容易に選択できるようにする。キーボードの実施形態は、適応式とすることができる。例えば、表示されるアイコンは、１つ以上のアイコン及び／又は１つ以上の対応する記号を選択する等のユーザのアクションに基づいて変更することができる。ポータブル装置における１つ以上のアプリケーションは、共通の及び／又は異なるキーボード実施形態を使用することができる。従って、使用するキーボード実施形態は、少なくとも幾つかのアプリケーションに対して仕立てることができる。ある実施形態では、１つ以上のキーボード実施形態を各ユーザに対して仕立てることができる。例えば、１つ以上のキーボード実施形態を、各ユーザのワード使用履歴（辞書、スラング、個々の使用）に基づいて各ユーザに対して仕立てることができる。キーボード実施形態の幾つかは、１つ以上のアイコン、従って、ソフトキーボード実施形態を使用するときには１つ以上の記号、を選択するときのユーザエラーの確率を減少するように調整できる。
ここで、装置の実施形態に注目を向ける。図１Ａ及び１Ｂは、ある実施形態に基づくタッチ感知ディスプレイ１１２を伴うポータブルマルチファンクション装置１００を示すブロック図である。タッチ感知ディスプレイ１１２は、便宜上「タッチスクリーン」とも称され、又、タッチ感知ディスプレイシステムとしても知られ又はそのように称されることもある。この装置１００は、メモリ１０２（１つ以上のコンピュータ読み取り可能な記憶媒体を含む）と、メモリコントローラ１２２と、１つ以上の処理ユニット（ＣＰＵ）１２０と、周辺インターフェイス１１８と、ＲＦ回路１０８と、オーディオ回路１１０と、スピーカ１１１と、マイクロホン１１３と、入力／出力（Ｉ／Ｏ）サブシステム１０６と、他の入力又は制御装置１１６と、外部ポート１２４とを備えることができる。更に、装置１００は、１つ以上の光学的センサ１６４を備えることもできる。これらのコンポーネントは、１つ以上の通信バス又は信号ライン１０３を経て通信することができる。
装置１００は、ポータブルマルチファンクション装置１００の一例に過ぎず、又、装置１００は、図示された以上の又はそれ以下のコンポーネントを有してもよく、２つ以上のコンポーネントを組み合わせてもよく、或いは異なる構成又は配置のコンポーネントを有してもよいことが明らかである。図１Ａ及び１Ｂに示す種々のコンポーネントは、１つ以上の信号処理及び／又は特定用途向け集積回路を含めて、ハードウェア、ソフトウェア、又はその両方の組合せで実施されてもよい。
メモリ１０２は、高速ランダムアクセスメモリを含み、又、不揮発性メモリ、例えば、１つ以上の磁気ディスク記憶装置、フラッシュメモリ装置、又は他の不揮発性ソリッドステートメモリ装置を含んでもよい。装置１００の他のコンポーネント、例えば、ＣＰＵ１２０及び周辺インターフェイス１１８によるメモリ１０２へのアクセスは、メモリコントローラ１２２によって制御することができる。
周辺インターフェイス１１８は、装置の入力及び出力周辺機器をＣＰＵ１２０及びメモリ１０２に結合する。１つ以上のプロセッサ１２０は、メモリ１０２に記憶された種々のソフトウェアプログラム及び／又はインストラクションセットを走らせ或いは実行して、装置１００の種々のファンクションを遂行し、データを処理する。
ある実施形態では、周辺インターフェイス１１８、ＣＰＵ１２０、及びメモリコントローラ１２２は、チップ１０４のような単一チップにおいて実施されてもよい。幾つかの他の実施形態では、それらは、個別のチップにおいて実施されてもよい。
ＲＦ（高周波）回路１０８は、電磁信号とも称されるＲＦ信号を受信し送信する。ＲＦ回路１０８は、電気信号と電磁信号との間で変換を行い、電磁信号を経て通信ネットワーク及び他の通信装置と通信する。ＲＦ回路１０８は、これらのファンクションを遂行するための良く知られた回路を含むことができ、アンテナシステムや、ＲＦトランシーバーや、１つ以上の増幅器や、チューナや、１つ以上の発振器や、デジタル信号プロセッサや、ＣＯＤＥＣチップセットや、加入者アイデンティティモジュール（ＳＩＭ）カードや、メモリ、等を含むが、これらに限定されない。ＲＦ回路１０８は、ネットワーク、例えば、ワールドワイドウェブ（ＷＷＷ）とも称されるインターネットや、イントラネット及び／又はワイヤレスネットワーク、例えば、セルラー電話ネットワーク、ワイヤレスローカルエリアネットワーク（ＬＡＮ）及び／又はメトロポリタンエリアネットワーク（ＭＡＮ）や、他の装置とワイヤレス通信により通信することができる。ワイヤレス通信は、複数の通信規格、プロトコル、及びテクノロジーのいずれかを使用することができ、これらは、グローバルシステム・フォー・モバイルコミュニケーション（ＧＳＭ）や、エンハンストデータＧＳＭエンビロンメント（ＥＤＧＥ）や、高速ダウンリンクパケットアクセス（ＨＳＤＰＡ）や、ワイドバンドコード分割多重アクセス（Ｗ−ＣＤＭＡ）や、コード分割多重アクセス（ＣＤＭＡ）や、時分割多重アクセス（ＴＤＭＡ）や、ブルーツースや、ワイヤレスフィデリティ（Ｗｉ−Ｆｉ）（例えば、ＩＥＥＥ８０２．１１ａ、ＩＥＥＥ８０２．１１ｂ、ＩＥＥＥ８０２．１１ｇ、及び／又はＩＥＥＥ８０２．１１ｎ）や、ボイスオーバーインターネットプロトコル（ＶｏＩＰ）や、Ｗｉ−ＭＡＸや、ｅ−メール用のプロトコル（例えば、インターネットメッセージアクセスプロトコル（ＩＭＡＰ）及び／又はポストオフィスプロトコル（ＰＯＰ））や、インスタントメッセージング（例えば、拡張可能なメッセージング及び存在プロトコル（ＸＭＰＰ）、セッションイニシエーションプロトコル・フォー・インスタントメッセージング・アンド・プレゼンスレバレッジエクステンション（ＳＩＭＰＬＥ）、及び／又はインスタントメッセージング・アンド・プレゼンスサービス（ＩＭＰＳ））や、及び／又はショートメッセージサービス（ＳＭＳ））や、或いは本願の出願日にはまだ開発されていない通信プロトコルを含む他の適当な通信プロトコルを含むが、これらに限定されない。
オーディオ回路１１０、スピーカ１１１及びマイクロホン１１３は、ユーザと装置１００との間のオーディオインターフェイスをなす。オーディオ回路１１０は、周辺インターフェイス１１８からオーディオデータを受け取り、そのオーディオデータを電気信号に変換し、そしてその電気信号をスピーカ１１１へ送出する。スピーカ１１１は、電気信号を人間が聞き取れる音波へ変換する。又、オーディオ回路１１０は、音波からマイクロホン１１３により変換された電気信号も受け取る。オーディオ回路１１０は、電気信号をオーディオデータへ変換し、そしてそのオーディオデータを処理のために周辺装置１１８へ送出する。オーディオデータは、周辺インターフェイス１１８により、メモリ１０２及び／又はＲＦ回路１０８から検索され及び／又はそこに送出されてもよい。ある実施形態では、オーディオ回路１１０は、ヘッドセットジャック（例えば、図２の２１２）も含む。ヘッドセットジャックは、オーディオ回路１１０と、取り外し可能なオーディオ入力／出力周辺機器、例えば、出力専用のヘッドホン、或いは出力（例えば、片耳又は両耳用のヘッドホン）及び入力（例えば、マイクロホン）の両方を伴うヘッドセットとの間のインターフェイスをなす。
Ｉ／Ｏサブシステム１０６は、装置１００の入力／出力周辺機器、例えば、タッチスクリーン１１２及び他の入力／出力装置１１６を周辺インターフェイス１１８に結合する。Ｉ／Ｏサブシステム１０６は、他の入力又は制御装置のためのディスプレイコントローラ１５６及び１つ以上の入力コントローラ１６０を含むことができる。１つ以上の入力コントローラ１６０は、他の入力又は制御装置１１６との間で電気信号を送信／受信する。他の入力／制御装置１１６は、物理的なボタン（例えば、プッシュボタン、ロッカーボタン、等）、ダイヤル、スライダースイッチ、ジョイスティック、クリックホイール、等を含むことができる。幾つかの別の実施形態では、入力コントローラ１６０（１つ又は複数）は、次のうちのどれかに接続されてもよい（又はどれにも接続されなくてもよい）。即ち、キーボード、赤外線ポート、ＵＳＢポート、及びマウスのようなポインタ装置。１つ以上のボタン（例えば、図２の２０８）は、スピーカ１１１及び／又はマイクロホン１１３の音量制御のためのアップ／ダウンボタンを含んでもよい。１つ以上のボタンは、プッシュボタン（例えば、図２の２０６）を含んでもよい。プッシュボタンを素早く押すと、タッチスクリーン１１２のロックを外すことができるか、又はタッチスクリーン上のジェスチャーを使用して装置をアンロックするプロセスを開始することができ、これは、参考としてここに援用する２００５年１２月２３日に出願された“Unlocking a Device by Performing Gestures on an Unlock Image”と題する米国特許出願第１１／３２２，５４９号に説明されている。プッシュボタン（例えば、２０６）を長く押すと、装置１００への電力をオン又はオフにすることができる。ユーザは、１つ以上のボタンのファンクションをカスタマイズすることもできる。タッチスクリーン１１２は、バーチャル又はソフトボタン及び１つ以上のソフトキーボードを実施するのに使用される。
タッチ感知タッチスクリーン１１２は、装置とユーザとの間の入力インターフェイス及び出力インターフェイスをなす。ディスプレイコントローラ１５６は、タッチスクリーン１１２との間で電気信号を送信及び又は受信する。タッチスクリーン１１２は、ユーザに視覚出力を表示する。この視覚出力は、グラフィック、テキスト、アイコン、ビデオ、及びその組み合わせ（「グラフィック」と総称する）を含むことができる。ある実施形態では、視覚出力の幾つか又は全部が、ユーザインターフェイスオブジェクトに対応してもよく、その更なる詳細は、以下に述べる。
タッチスクリーン１１２は、触覚及び／又は触感接触に基づくユーザからの入力を受け容れるタッチ感知面、センサ又はセンサセットを有する。タッチスクリーン１１２及びディスプレイコントローラ１５６は（メモリ１０２における関連したモジュール及び／又はインストラクションセットと共に）、タッチスクリーン１１２上の接触（及び接触の移動又は遮断）を検出し、そしてその検出された接触を、タッチスクリーン上に表示されるユーザインターフェイスオブジェクト（例えば、１つ以上のソフトキー、アイコン、ウェブページ又は映像）へと変換する。ここに例示する実施形態では、タッチスクリーン１１２とユーザとの間の接触点は、ユーザの指に対応する。
タッチスクリーン１１２は、ＬＣＤ（液晶表示）技術又はＬＰＤ（発光ポリマー表示）技術を使用できるが、他の実施形態では他の表示技術が使用されてもよい。タッチスクリーン１１２及びディスプレイコントローラ１５６は、現在知られているか又は今後開発される複数のタッチ感知技術のいずれかを使用して、接触及びその移動又は遮断を検出することができ、前記タッチ感知技術は、容量性、抵抗性、赤外線、及び表面音波技術、並びにタッチスクリーン１１２との１つ以上の接触点を決定するための他の接近センサアレー又は他の素子を含むが、これらに限定されない。
タッチスクリーン１１２のある実施形態におけるタッチ感知ディスプレイは、参考として各々ここに援用する米国特許第６，３２３，８４６号（ウェスターマン氏等）、第６，５７０，５５７号（ウェスターマン氏等）、及び／又は第６，６７７，９３２号（ウェスターマン氏）、及び／又は米国特許公告第２００２／００１５０２４Ａ１号に説明されたマルチタッチ感知タブレットと同様のものでよい。しかしながら、タッチスクリーン１１２は、ポータブル装置１００からの視覚出力を表示するが、そのタッチ感知タブレットは、視覚出力を与えない。
タッチスクリーン１１２のある実施形態におけるタッチ感知ディスプレイは、次の特許出願に説明されている。（１）２００６年５月２日に出願された“Multipoint Touch Surface Controller”と題する米国特許出願第１１／３８１，３１３号、（２）２００４年５月６日に出願された“Multipoint Touchscreen”と題する米国特許出願第１０／８４０，８６２号、（３）２００４年７月３０日に出願された“Gestures For Touch Sensitive Input Devices”と題する米国特許出願第１０／９０３，９６４号、（４）２００５年１月３１日に出願された“Gestures For Touch Sensitive Input Devices”と題する米国特許出願第１１／０４８，２６４号、（５）２００５年１月１８日に出願された“Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices”と題する米国特許出願第１１／０３８，５９０号、（６）２００５年９月１６日に出願された“Virtual Input Device Placement On A Touch Screen User Interface”と題する米国特許出願第１１／２２８，７５８号、（７）２００５年９月１６日に出願された“Operation Of A Computer With A Touch Screen Interface”と題する米国特許出願第１１／２２８，７００号、（８）２００５年９月１６日に出願された“Activating Virtual Keys Of A Touch-Screen Virtual Keyboard”と題する米国特許出願第１１／２２８，７３７号、及び（９）２００６年３月３日に出願された“Multi-Functional Hand-Held Device”と題する米国特許出願第１１／３６７，７４９号。これらの出願は、全て参考としてここに援用する。
タッチスクリーン１１２は、１００ｄｐｉを越える解像度をもつことができる。ここに例示する実施形態では、タッチスクリーンは、約１６０ｄｐｉの解像度を有する。ユーザは、スタイラス、指、等の適当なオブジェクト又は付属器官を使用して、タッチスクリーン１１２に接触することができる。ある実施形態では、ユーザインターフェイスは、主として、指に基づく接触及びジェスチャーで働くように設計され、これは、タッチスクリーンにおける指の接触面積が広いために、スタイラスに基づく入力よりあまり正確でない。ある実施形態では、装置は、指に基づく大ざっぱな入力を、正確なポインタ／カーソル位置、又はユーザが希望するアクションを遂行するためのコマンドに変換する。
ある実施形態では、タッチスクリーンに加えて、装置１００は、特定のファンクションをアクチベート又はデアクチベートするためのタッチパッド（図示せず）を含むことができる。ある実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない装置のタッチ感知エリアである。タッチパッドは、タッチスクリーン１１２とは個別のタッチ感知面でもよいし、又はタッチスクリーンにより形成されたタッチ感知面の延長部でもよい。
ある実施形態では、装置１００は、入力制御装置１１６として物理的又はバーチャルクリックホイールを含むことができる。ユーザは、クリックホイールを回転することにより、又はクリックホイールとの接触点を移動することにより（例えば、接触点の移動量を、クリックホイールの中心点に対するその角度変位で測定する場合）、タッチスクリーン１１２に表示される１つ以上のグラフィックオブジェクト（以下、アイコンと称する）の中をナビゲートすることができ且つそれらと対話することができる。又、クリックホイールは、表示されたアイコンの１つ以上を選択するのに使用することもできる。例えば、ユーザは、クリックホイールの少なくとも一部分又はそれに関連したボタンを押し下げることができる。クリックホイールを経てユーザにより与えられるユーザコマンド及びナビゲーションコマンドは、入力コントローラ１６０、並びにメモリ１２０における１つ以上のモジュール及び／又はインストラクションセットによって処理することができる。バーチャルクリックホイールの場合、クリックホイール及びクリックホイールコントローラは、各々、タッチスクリーン１１２の一部分及びディスプレイコントローラ１５６でよい。又、バーチャルクリックホイールの場合、クリックホイールは、装置とのユーザ対話に応答してタッチスクリーンディスプレイ上に現れたり消えたりする不透明又は半透明なオブジェクトでよい。ある実施形態では、バーチャルクリックホイールは、ポータブルマルチファンクション装置のタッチスクリーンに表示され、タッチスクリーンとのユーザ接触により動作される。
又、装置１００は、種々のコンポーネントに通電するための電源システム１６２も備えている。この電源システム１６２は、電力管理システムと、１つ以上の電源（例えば、バッテリ、交流（ＡＣ））と、再充電システムと、停電検出回路と、電力コンバータ又はインバータと、電力状態インジケータ（例えば、発光ダイオード（ＬＥＤ））と、ポータブル装置における電力の発生、管理及び配電に関連した他のコンポーネントとを含むことができる。
又、装置１００は、１つ以上の光学的センサ１６４も含むことができる。図１Ａ及び１Ｂは、Ｉ／Ｏサブシステム１０６内の光学的センサコントローラ１５８に結合された光学的センサを示す。光学的センサ１６４は、電荷結合装置（ＣＣＤ）又は相補的金属酸化物半導体（ＣＭＯＳ）ホトトランジスタを含むことができる。光学的センサ１６４は、周囲から１つ以上のレンズを通して投射された光を受け、そしてその光を、映像を表すデータへと変換する。像形成モジュール１４３（カメラモジュールとも称される）に関連して、光学的センサ１６４は、静止映像又はビデオを捕獲することもできる。ある実施形態では、装置前面のタッチスクリーンディスプレイ１１２とは反対の装置１００の背面に光学センサが配置され、タッチスクリーンディスプレイは、静止映像及び／又はビデオ映像取得のためのビューファインダとして使用することができる。ある実施形態では、装置の前面に光学的センサを配置して、ビデオ会議のためのユーザの映像を得る一方、ユーザは、他のビデオ会議参加者をタッチスクリーンディスプレイに見ることができる。ある実施形態では、光学的センサ１６４の位置をユーザが切り換え（例えば、装置ハウジング内でレンズ及びセンサを回転することにより）、単一の光学的センサ１６４を、タッチスクリーンディスプレイと共に、ビデオ会議と、静止映像及び／又はビデオ映像取得との両方に使用することができる。
又、装置１００は、１つ以上の接近センサ１６６を含むこともできる。図１Ａ及び１Ｂは、周辺インターフェイス１１８に結合された接近センサ１６６を示している。或いは又、接近センサ１６６は、Ｉ／Ｏサブシステム１０６の入力コントローラ１６０に結合されてもよい。接近センサ１６６は、参考としてここに援用する次の米国特許出願に説明されたように動作することができる。即ち、２００５年９月３０日に出願された“Proximity Detector In Handheld Devices”と題する米国特許出願第１１／２４１，８３９号、２００５年９月３０日に出願された“Proximity Detector In Handheld Devices”と題する米国特許出願第１１／２４０，７８８号、２００７年１月７日に出願された“Using Ambient Light Sensor To Augment Proximity Sensor Output”と題する米国特許出願（代理人管理番号０４８６０．Ｐ４８５１ＳＵ１）、２００６年１０月２４日に出願された“Automated Response To And Sensing Of User Activity In Portable Devices”と題する米国特許（代理人管理番号０４８６０．Ｐ４２９３）、及び２００６年１２月１２日に出願された“Methods And Systems For Automatic Configuration Of Peripherals”と題する米国特許出願（代理人管理番号＃０４８６０．Ｐ４６３４）。ある実施形態では、接近センサは、マルチファンクション装置がユーザの耳の付近に配置されたときに（例えば、ユーザが電話コールをなすときに）タッチスクリーン１１２をターンオフし、ディスエイブルする。ある実施形態では、装置がロック状態にあるときに不必要なバッテリの消耗を防止するために、接近センサは、装置がユーザのポケット、ハンドバック、又は他の暗いエリアに入れられたときにスクリーンをオフに保持する。
又、装置１００は、１つ以上の加速度計１６８を含むこともできる。図１Ａ及び１Ｂは、周辺インターフェイス１１８に結合された加速度計１６８を示す。或いは又、加速度計１６８は、Ｉ／Ｏサブシステム１０６の入力コントローラ１６０に結合することができる。加速度計１６８は、“Acceleration-based Theft Detection System for Portable Electronic Devices”と題する米国特許公告第２００５０１９００５９号、及び“Methods And Apparatus For Operating A Portable Device Based On An Accelerometer”と題する米国特許公告第２００６００１７６９２号に説明されたように動作することができ、これらは、両方とも、参考としてここに援用する。ある実施形態では、１つ以上の加速度計から受け取ったデータの分析に基づいて情報がタッチスクリーンディスプレイに肖像ビュー又は風景ビューで表示される。
ある実施形態では、メモリ１０２に記憶されるソフトウェアコンポーネントは、オペレーティングシステム１２６と、通信モジュール（又はインストラクションのセット）１２８と、接触／運動モジュール（又はインストラクションのセット）１３０と、グラフィックモジュール（又はインストラクションのセット）１３２と、テキスト入力モジュール（又はインストラクションのセット）１３４と、グローバルポジショニングシステム（ＧＰＳ）モジュール（又はインストラクションのセット）１３５と、アプリケーション（又はインストラクションのセット）１３６と、を含むことができる。
オペレーティングシステム１２６（例えば、ダーウイン(Darwin)、ＲＴＸＣ、ＬＩＮＵＸ、ＵＮＩＸ、ＯＳ Ｘ、ＷＩＮＤＯＷＳ、又は埋め込まれたオペレーティングシステム、例えば、ＶｘＷｏｒｋｓ）は、一般的なシステムタスク（例えば、メモリの管理、記憶装置の制御、電源の管理、等）を制御し及び管理するための種々のソフトウェアコンポーネント及び／又はドライバを備え、そして種々のハードウェアコンポーネントとソフトウェアコンポーネントとの間の通信を容易にする。
通信モジュール１２８は、１つ以上の外部ポート１２４を経て他の装置との通信を容易にし、又、ＲＦ回路１０８及び／又は外部ポート１２４により受け取られたデータを取り扱うための種々のソフトウェアコンポーネントも備えている。外部ポート１２４（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ファイアワイヤ(FIREWIRE)、等）は、他の装置へ直結するか、又はネットワーク（例えば、インターネット、ワイヤレスＬＡＮ、等）を経て間接的に結合するようにされる。ある実施形態では、外部ポートは、ｉＰｏｄ（アップルコンピュータ社の商標）装置に使用される３０ピンコネクタと同じであるか又は同様であるか及び／又はそれに適合できるマルチピン（例えば、３０ピン）コネクタである。
接触／運動モジュール１３０は、タッチスクリーン１１２（ディスプレイコントローラ１５６に関連した）及び他のタッチ感知装置（例えば、タッチパッド又は物理的なクリックホイール）との接触を検出することができる。接触／運動モジュール１３０は、接触の検出に関連した種々の動作、例えば、接触が生じたかどうか決定し、接触の移動があるかどうか決定すると共にタッチスクリーン１１２にわたって移動を追跡し、及び接触が遮断したかどうか（即ち、接触が止んだかどうか）決定する、等の動作を遂行するための種々のソフトウェアコンポーネントを備えている。接触点の移動を決定することは、接触点のスピード（大きさ）、速度（大きさ及び方向）、及び／又は加速度（大きさの変化及び／又は方向）を決定することを含む。これらの動作は、単一の接触（例えば、１本の指の接触）又は複数の同時接触（例えば、「マルチタッチ」／複数本の指の接触）に適用することができる。ある実施形態では、接触／運動モジュール１３０及びディスプレイコントローラ１５６は、タッチパッド上の接触も検出する。ある実施形態では、接触／運動モジュール１３０及びコントローラ１６０は、クリックホイール上の接触を検出する。
グラフィックモジュール１３２は、表示されるグラフィックの強度を変化させるコンポーネントを含めて、タッチスクリーン１１２上にグラフィックをレンダリングし表示するための種々の既知のソフトウェアコンポーネントを備えている。ここで使用する「グラフィック」という語は、これに限定されないが、テキスト、ウェブページ、アイコン（ソフトキーを含むユーザインターフェイスオブジェクトのような）、デジタル映像、ビデオ、アニメーション、等を含めて、ユーザに表示できるいかなるオブジェクトも含む。
グラフィックモジュール１３２のコンポーネントでよいテキスト入力モジュール１３４は、種々のアプリケーション（例えば、連絡先１３７、ｅ−メール１４０、ＩＭ１４１、ブログ１４２、ブラウザ１４７、及びテキスト入力を必要とする他のアプリケーション）にテキストを入力するためのソフトキーボードを与える。
ＧＰＳモジュール１３５は、装置の位置を決定し、そしてこの情報を種々のアプリケーションに使用するべく与える（例えば、位置に基づくダイヤル動作に使用するために電話１３８へ、ピクチャー／ビデオメタデータとしてカメラ１４３及び／又はブロガー１４２へ、そして天気ウィジェット、地方のイエローページウィジェット及びマップ／ナビゲーションウィジェットのような位置に基づくサービスを提供するアプリケーションへ）。
アプリケーション１３６は、次のモジュール（又はインストラクションのセット）或いはそのサブセット又はスーパーセットを含むことができる。
●連絡先モジュール１３７（時々アドレス帳又は連絡先リストとも称される）、
●電話モジュール１３８、
●ビデオ会議モジュール１３９、
●ｅ−メールクライアントモジュール１４０、
●インスタントメッセージング（ＩＭ）モジュール１４１、
●ブログモジュール１４２、
●静止映像及び／又はビデオ映像のためのカメラモジュール１４３、
●映像管理モジュール１４４、
●ビデオプレーヤモジュール１４５、
●音楽プレーヤモジュール１４６、
●ブラウザモジュール１４７、
●カレンダーモジュール１４８、
●天気ウィジェット１４９−１、株ウィジェット１４９−２、計算器ウィジェット１４９−３、アラームクロックウィジェット１４９−４、辞書ウィジェット１４９−５、及びユーザにより得られる他のウィジェット、並びにユーザ生成ウィジェット１４９−６を含むことのできるウィジェットモジュール１４９、
●ユーザ生成ウィジェット１４９−６を形成するためのウィジェットクリエータモジュール１５０、
●サーチモジュール１５１、
●ビデオプレーヤモジュール１４５及び音楽プレーヤモジュール１４６を合併するビデオ及び音楽プレーヤモジュール１５２、
●ノートモジュール１５３、及び／又は
●マップモジュール１５４。
●連絡先モジュール１３７（時々アドレス帳又は連絡先リストとも称される）、
●電話モジュール１３８、
●ビデオ会議モジュール１３９、
●ｅ−メールクライアントモジュール１４０、
●インスタントメッセージング（ＩＭ）モジュール１４１、
●ブログモジュール１４２、
●静止映像及び／又はビデオ映像のためのカメラモジュール１４３、
●映像管理モジュール１４４、
●ビデオプレーヤモジュール１４５、
●音楽プレーヤモジュール１４６、
●ブラウザモジュール１４７、
●カレンダーモジュール１４８、
●天気ウィジェット１４９−１、株ウィジェット１４９−２、計算器ウィジェット１４９−３、アラームクロックウィジェット１４９−４、辞書ウィジェット１４９−５、及びユーザにより得られる他のウィジェット、並びにユーザ生成ウィジェット１４９−６を含むことのできるウィジェットモジュール１４９、
●ユーザ生成ウィジェット１４９−６を形成するためのウィジェットクリエータモジュール１５０、
●サーチモジュール１５１、
●ビデオプレーヤモジュール１４５及び音楽プレーヤモジュール１４６を合併するビデオ及び音楽プレーヤモジュール１５２、
●ノートモジュール１５３、及び／又は
●マップモジュール１５４。
メモリ１０２に記憶できる他のアプリケーション１３６は、例えば、他のワード処理アプリケーション、ＪＡＶＡイネーブルアプリケーション、暗号化、デジタル権利の管理、音声認識、及び音声複製を含む。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、連絡先モジュール１３７は、アドレス帳又は連絡先リストを管理するのに使用でき、これは、アドレス帳に名前（１つ又は複数）を追加し、アドレス帳から名前（１つ又は複数）を削除し、電話番号（１つ又は複数）、ｅ−メールアドレス（１つ又は複数）、物理的アドレス（１つ又は複数）又は他の情報を名前と関連付け、映像を名前と関連付け、名前を類別及び分類し、電話１３８、ビデオ会議１３９、ｅ−メール１４０、又はＩＭ１４１による通信を開始し及び／又は容易にするために電話番号又はｅ−メールアドレスを与え、等々を行うことを含む。
ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロホン１１３、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、電話モジュール１３８は、電話番号に対応するキャラクタのシーケンスを入力し、アドレス帳１３７における１つ以上の電話番号にアクセスし、入力された電話番号を変更し、各電話番号をダイヤルし、会話を行い、そして会話が終了したときに切断又は切るために使用することができる。上述したように、ワイヤレス通信は、複数の通信規格、プロトコル及び技術のいずれかを使用することができる。
ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロホン１１３、タッチスクリーン１１２、ディスプレイコントローラ１５６、光学的センサ１６４、光学的センサコントローラ１５８、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、連絡先リスト１３７、及び電話モジュール１３８に関連して、ビデオ会議モジュール１３９は、ユーザと１人以上の他の参加者との間でビデオ会議を開始し、実行し、そして終了するために使用することができる。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、ｅ−メールクライアントモジュール１４０は、ｅ−メールを生成し、送信し、受信し、そして管理するために使用することができる。映像管理モジュール１４４に関連して、ｅ−メールモジュール１４０は、カメラモジュール１４３で撮影された静止映像又はビデオ映像と共にｅ−メールを生成し送信するのを非常に容易にする。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、インスタントメッセージングモジュール１４１は、インスタントメッセージに対応するキャラクタのシーケンスを入力し、既に入力されたキャラクタを変更し、各インスタントメッセージを送信し（例えば、電話ベースのインスタントメッセージについてはショートメッセージサービス（ＳＭＳ）又はマルチメディアメッセージサービス（ＭＭＳ）プロトコルを使用し、或いはインターネットベースのインスタントメッセージについてはＸＭＰＰ、ＳＩＭＰＬＥ又はＩＭＰＳを使用して）、インスタントメッセージを受信し、そして受信したインスタントメッセージを見るために使用することができる。ある実施形態では、送信及び／又は受信されるインスタントメッセージは、ＭＭＳ及び／又はエンハンストメッセージングサービス（ＥＭＳ）でサポートされるグラフィック、写真、オーディオファイル、ビデオファイル及び／又は他のアタッチメントを含むことができる。ここで使用する「インスタントメッセージング」という語は、電話ベースのメッセージ（例えば、ＳＭＳ又はＭＭＳを使用して送信されるメッセージ）、及びインターネットベースのメッセージ（例えば、ＸＭＰＰ、ＳＩＭＰＬＥ、又はＩＭＰＳを使用して送信されるメッセージ）の両方を指す。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、映像管理モジュール１４４、及びブラウジングモジュール１４７に関連して、ブログモジュール１４２は、テキスト、静止映像、ビデオ、及び／又は他のグラフィックをブログ（例えば、ユーザブログ）へ送信するために使用することができる。
タッチスクリーン１１２、ディスプレイコントローラ１５６、光学的センサ（１つ又は複数）１６４、光学的センサコントローラ１５８、接触モジュール１３０、グラフィックモジュール１３２、及び映像管理モジュール１４４に関連して、カメラモジュール１４３は、静止映像又はビデオ（ビデオストリームを含む）を捕獲して、それらをメモリ１０２へ記憶し、静止映像又はビデオの特性を変更し、或いは静止映像又はビデオをメモリ１０２から削除するために使用することができる。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びカメラモジュール１４３に関連して、映像管理モジュール１４４は、静止映像及び／又はビデオ映像をアレンジし、変更し、さもなければ、操作し、ラベル付けし、削除し、プレゼンテーションし（例えば、デジタルスライドショー又はアルバムに）、そして記憶するために使用することができる。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０、及びスピーカ１１１に関連して、ビデオプレーヤモジュール１４５は、ビデオを表示し、プレゼンテーションし、さもなければ、再生するために使用することができる（例えば、タッチスクリーンにおいて、又は外部ポート１２４を経て接続された外部のディスプレイにおいて）。
タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０、スピーカ１１１、ＲＦ回路１０８、及びブラウザモジュール１４７に関連して、音楽プレーヤモジュール１４６は、ユーザが、録音された音楽や、ＭＰ３又はＡＡＣファイルのような１つ以上のファイルフォーマットで記憶された他のサウンドファイルをダウンロードして再生できるようにする。ある実施形態では、装置１００は、ｉＰｏｄ（アップルコンピュータ社の商標）のようなＭＰ３プレーヤのファンクションを含むことができる。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、ブラウザモジュール１４７は、ウェブページ又はその一部分、並びにウェブページにリンクされたアタッチメント及び他のファイルをサーチし、リンクし、受信し、及び表示することを含めて、インターネットをブラウズするために使用することができる。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ｅ−メールモジュール１４０、及びブラウザモジュール１４７に関連して、カレンダーモジュール１４８は、カレンダー及びカレンダーに関連したデータ（例えば、カレンダー入力、ツー・ドゥ（実行すべきものの）リスト、等）を生成し、表示し、変更し、そして記憶するために使用することができる。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びブラウザモジュール１４７に関連して、ウィジェットモジュール１４９は、ユーザによりダウンロードして使用できるミニアプリケーション（例えば、天気ウィジェット１４９−１、株ウィジェット１４９−２、計算器ウィジェット１４９−３、アラームクロックウィジェット１４９−４、及び辞書ウィジェット１４９−５）、又はユーザにより生成されるミニアプリケーション（例えば、ユーザ生成ウィジェット１４９−６）である。ある実施形態では、ウィジェットは、ＨＴＭＬ（ハイパーテキストマークアップ言語）ファイル、ＣＳＳ（カスケードスタイルシート）ファイル、及びＪａｖａＳｃｒｉｐｔファイルを含む。ある実施形態では、ウィジェットは、ＸＭＬ（拡張性マークアップ言語）ファイル、及びＪａｖａＳｃｒｉｐｔファイル（例えば、Ｙａｈｏｏ！ウィジェット）を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びブラウザモジュール１４７に関連して、ウィジェットクリエータモジュール１５０は、ウィジェットを生成するためにユーザにより使用することができる（例えば、ウェブページのユーザ指定部分をウィジェットへ向ける）。
タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、サーチモジュール１５１は、１つ以上のサーチ基準（例えば、１つ以上のユーザ指定サーチ用語）に一致するテキスト、音楽、サウンド、映像、ビデオ、及び／又は他のファイルをメモリ１０２においてサーチするために使用することができる。
タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、ノートモジュール１５３は、ノート、ツー・ドゥリスト、等を生成して管理するために使用することができる。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ＧＰＳモジュール１３５、及びブラウザモジュール１４７に関連して、マップモジュール１５４は、マップ及びマップに関連したデータ（例えば、運転方向、特定の位置又はその付近の店舗及びその他交差点に関するデータ、並びに位置に基づく他のデータ）を受け取り、表示し、変更し、そして記憶するために使用することができる。
上述したモジュール及びアプリケーションの各々は、上述した１つ以上のファンクションを遂行するためのインストラクションのセットに対応している。これらのモジュール（即ち、インストラクションのセット）は、個別のソフトウェアプログラム、手順又はモジュールとして実施される必要はなく、従って、種々の実施形態では、これらモジュールの種々のサブセットを組み合わせるか、さもなければ、アレンジし直すことができる。例えば、ビデオプレーヤモジュール１４５は、音楽プレーヤモジュール１４６と組み合わせ、単一のモジュール（例えば、ビデオ及び音楽プレーヤモジュール１５２、図１Ｂ）とすることができる。ある実施形態では、メモリ１０２は、上述したモジュール及びデータ構造体のサブセットを記憶することができる。更に、メモリ１０２は、上述されない付加的なモジュール及びデータ構造体を記憶することもできる。
ある実施形態では、装置１００は、装置におけるファンクションの規定のセットの動作がタッチスクリーン１１２及び／又はタッチパッドを通して排他的に実行される装置である。タッチスクリーン及び／又はタッチパッドを、装置１００を動作するための一次入力／制御装置として使用することにより、装置１００における物理的入力／制御装置（プッシュボタン、ダイヤル、等）の数を減少することができる。
タッチスクリーン及び／又はタッチパッドを通して排他的に遂行できるファンクションの規定のセットは、ユーザインターフェイス間のナビゲーションを含む。ある実施形態では、タッチパッドは、ユーザがタッチすると、装置１００を、装置１００上に表示できるユーザインターフェイスからのメイン、ホーム又はルートメニューへとナビゲートする。このような実施形態では、タッチパッドは、「メニューボタン」と称することができる。他の実施形態では、メニューボタンは、タッチパッドに代わって、物理的なプッシュボタン又は他の物理的な入力／制御装置でもよい。
図２は、ある実施形態に基づくタッチスクリーン１１２を有するポータブルマルチファンクション装置１００を示す図である。タッチスクリーンは、ユーザインターフェイス（ＵＩ）２００内に１つ以上のグラフィックを表示することができる。この実施形態、及び以下に述べる他の実施形態では、ユーザは、例えば、１本以上の指２０２（図中には正しいスケールで描かれていない）でグラフィックに接触又はタッチすることにより１つ以上のグラフィックを選択することができる。ある実施形態では、ユーザが１つ以上のグラフィックとの接触を遮断したときに１つ以上のグラフィックの選択が生じる。ある実施形態では、接触は、１回以上タップ(tap)すること、１回以上スワイプ(swipe)すること（左から右へ、右から左へ、上方及び／又は下方へ）、及び／又は装置１００と接触させた指をローリング(rolling)すること（左から右へ、右から左へ、上方及び／又は下方へ）、等のジェスチャーを含むことができる。ある実施形態では、グラフィックとの偶発的な接触でグラフィックが選択されることはない。例えば、アプリケーションアイコン上を拭うスワイプジェスチャーは、選択に対応するジェスチャーがタップであるときには、対応するアプリケーションを選択しない。
又、装置１００は、「ホーム(home)」又はメニューボタン２０４のような１つ以上の物理的ボタンを含むこともできる。上述したように、メニューボタン２０４は、装置１００において実行できるアプリケーションセット内の任意のアプリケーション１３６へナビゲートするのに使用できる。或いは又、ある実施形態では、メニューボタンは、タッチスクリーン１１２のＧＵＩにおけるソフトキーとして実施される。
一実施形態では、装置１００は、タッチスクリーン１１２と、メニューボタン２０４と、装置を電源オン／オフすると共に装置をロックするためのプッシュボタン２０６と、音量調整ボタン（１つ又は複数）２０８と、加入者アイデンティティモジュール（ＳＩＭ）カードスロット２１０と、ヘッドセットジャック２１２と、ドッキング／充電外部ポート１２４とを備えている。プッシュボタン２０６は、このボタンを押して規定の時間インターバル中このボタンを押圧状態に保持することにより装置の電源をオン／オフにし、このボタンを押して規定の時間インターバルが経過する前にこのボタンを解除することにより装置をロックし、及び／又は装置をアンロックするか又はアンロックプロセスを開始するために、使用することができる。別の実施形態では、装置１００は、マイクロホン１１３を通して幾つかのファンクションをアクチベート又はデアクチベートするために言葉による入力も受け容れることができる。
ポータブルマルチファンクション装置１００において実施できるユーザインターフェイス（ＵＩ）及び関連プロセスの実施形態について以下に説明する。
図３は、ある実施形態に基づきポータブル電子装置をアンロックするためのユーザインターフェイスを例示する図である。ある実施形態では、ユーザインターフェイス３００は、次のエレメント、或いはそのサブセット又はスーパーセットを含む。
●装置をアンロックするための指ジェスチャーで移動されるアンロック映像３０２、
●アンロックジェスチャーに対して視覚キューを与える矢印３０４、
●アンロックジェスチャーに対して付加的なキューを与えるチャンネル３０６、
●時刻３０８、
●曜日３１０、
●日付３１２、及び
●壁紙映像３１４。
●装置をアンロックするための指ジェスチャーで移動されるアンロック映像３０２、
●アンロックジェスチャーに対して視覚キューを与える矢印３０４、
●アンロックジェスチャーに対して付加的なキューを与えるチャンネル３０６、
●時刻３０８、
●曜日３１０、
●日付３１２、及び
●壁紙映像３１４。
ある実施形態では、この装置は、それがユーザインターフェイスロック状態にある間にタッチ感知ディスプレイとの接触（例えば、ユーザの指がアンロック映像３０２又はその付近に接触する）を検出する。装置は、この接触に基づいてアンロック映像３０２を移動する。装置は、検出された接触が、チャンネル３０６を横切ってアンロック映像を移動するような規定のジェスチャーに対応する場合は、ユーザインターフェイスアンロック状態へと移行する。逆に、検出された接触が規定のジェスチャーに対応しない場合には、ユーザインターフェイスロック状態を維持する。上述したように、タッチスクリーン上でのジェスチャーを使用して装置をアンロックするプロセスが、参考としてここに援用する２００５年１２月２３日に出願された“Unlocking A Device By Performing Gestures On An Unlock Image”と題する米国特許出願第１１／３２２，５４９号、及び２００５年１２月２３日に出願された“Indication Of Progress Towards Satisfaction Of A User Input Condition”と題する米国特許出願第１１／３２２，５５０号に説明されている。
図４Ａ及び４Ｂは、ある実施形態に基づくポータブルマルチファンクション装置におけるアプリケーションのメニューのためのユーザインターフェイスを示す図である。ある実施形態では、ユーザインターフェイス４００Ａは、次のエレメント或いはそのサブセット又はスーパーセットを含む。
●セルラー及びＷｉ−Ｆｉ信号のようなワイヤレス通信（１つ又は複数）のための信号強度インジケータ（１つ又は複数）４０２、
●時刻４０４、
●バッテリ状態インジケータ４０６、
●次のうちの１つ以上のような頻繁に使用されるアプリケーションのためのアイコンを伴うトレー４０８、
○逃したコール又は音声メールメッセージの数のインジケータ４１４を含んでもよい電話１３８、
○読まれないｅ−メールの数のインジケータ４１０を含んでもよいｅ−メールクライアント１４０、
○ブラウザ１４７、
○音楽プレーヤ１４６、及び
●次のうちの１つ以上のような他のアプリケーションのためのアイコン、
○ＩＭ１４１、
○映像管理１４４、
○カメラ１４３、
○ビデオプレーヤ１４５、
○天気１４９−１、
○株１４９−２、
○ブログ１４２、
○カレンダー１４８、
○計算器１４９−３、
○アラームクロック１４９−４、
○辞書１４９−５、及び
○ユーザ生成ウィジェット１４９−６。
●セルラー及びＷｉ−Ｆｉ信号のようなワイヤレス通信（１つ又は複数）のための信号強度インジケータ（１つ又は複数）４０２、
●時刻４０４、
●バッテリ状態インジケータ４０６、
●次のうちの１つ以上のような頻繁に使用されるアプリケーションのためのアイコンを伴うトレー４０８、
○逃したコール又は音声メールメッセージの数のインジケータ４１４を含んでもよい電話１３８、
○読まれないｅ−メールの数のインジケータ４１０を含んでもよいｅ−メールクライアント１４０、
○ブラウザ１４７、
○音楽プレーヤ１４６、及び
●次のうちの１つ以上のような他のアプリケーションのためのアイコン、
○ＩＭ１４１、
○映像管理１４４、
○カメラ１４３、
○ビデオプレーヤ１４５、
○天気１４９−１、
○株１４９−２、
○ブログ１４２、
○カレンダー１４８、
○計算器１４９−３、
○アラームクロック１４９−４、
○辞書１４９−５、及び
○ユーザ生成ウィジェット１４９−６。
ある実施形態では、ユーザインターフェイス４００Ｂは、次のエレメント或いはそのサブセット又はスーパーセットを含む。
●上述した４０２、４０４、４０６、１４１、１４８、１４４、１４３、１４９−３、１４９−２、１４９−１、１４９−４、４１０、４１４、１３８、１４０、及び１４７、
●マップ１５４、
●ノート１５３、
●装置１００の設定及びその種々のアプリケーション１３６へのアクセスを与える設定４１２、及び
●ｉＰｏｄ（アップルコンピュータ社の商標）モジュール１５２とも称されるビデオ及び音楽プレーヤモジュール１５２。
●上述した４０２、４０４、４０６、１４１、１４８、１４４、１４３、１４９−３、１４９−２、１４９−１、１４９−４、４１０、４１４、１３８、１４０、及び１４７、
●マップ１５４、
●ノート１５３、
●装置１００の設定及びその種々のアプリケーション１３６へのアクセスを与える設定４１２、及び
●ｉＰｏｄ（アップルコンピュータ社の商標）モジュール１５２とも称されるビデオ及び音楽プレーヤモジュール１５２。
ある実施形態では、ＵＩ４００Ａ又は４００Ｂは、全ての利用可能なアプリケーション１３６を１つのスクリーン上に表示し、アプリケーションのリストを（例えば、スクロールバーにより）スクロールする必要がないようにする。ある実施形態では、アプリケーションの数が増加するにつれて、アプリケーションに対応するアイコンのサイズを減少させて、全てのアプリケーションを、スクロールせずに、単一のスクリーン上に表示できるようにする。ある実施形態では、１つのスクリーン上に全てのアプリケーションをもたせると共に、メニューボタンをもたせることで、ユーザは、（例えば、アプリケーションに対応するアイコンをタップするか又は他の指ジェスチャーにより）メニューボタン２０４をアクチベートし、次いで、希望のアプリケーションをアクチベートするというせいぜい２つの入力で、希望のアプリケーションにアクセスすることができる。
ある実施形態では、ＵＩ４００Ａ又は４００Ｂは、ウィジェットベースのアプリケーション及び非ウィジェットベースのアプリケーションの両方への一体的なアクセスを与える。ある実施形態では、ユーザが生成したかどうかに関わらず、全てのウィジェットがＵＩ４００Ａ又は４００Ｂに表示される。他の実施形態では、ユーザ生成ウィジェット１４９−６のアイコンをアクチベートすると、そのユーザ生成ウィジェット又はそのユーザ生成ウィジェットに対応するアイコンを含む別のＵＩを導くことができる。
ある実施形態では、ユーザは、例えば、参考としてここに援用する２００６年７月２４日に出願された“Portable Electronic Device With Interface Reconfiguration Mode”と題する米国特許出願第１１／４５９，６０２号に説明されたプロセスを使用して、ＵＩ４００Ａ又は４００Ｂにおいてアイコンをアレンジし直すことができる。例えば、ユーザは、指ジェスチャーを使用して、アプリケーションアイコンをトレー４０８へ及びトレー４０８から移動することができる。
ある実施形態では、ＵＩ４００Ａ又は４００Ｂは、参考としてここに援用する２００５年１２月２３日に出願された“Account Information Display For Portable Communication Device”と題する米国特許出願第１１／３２２，５５２号に説明されたように、装置の使用に関連したアカウント（例えば、セルラー電話アカウント）に対する更新されたアカウント使用メトリックを表示するゲージ（図示せず）を備えている。
背景部分で上述したように、タッチスクリーンを伴うポータブル装置の挑戦は、タッチスクリーン上の２Ｄ指接触エリアを、どのように正確に独特の１Ｄカーソル位置の情報に変換するかである。
タッチスクリーンディスプレイとの指接触（例えば、指タップ）は、指をディスプレイに接近させ、指をディスプレイに接触させ、そして指をディスプレイから離すことを含む複数のアクションを伴うプロセスである。このプロセス中に、指の接触面積は、０から、最大接触面積へと増加し、次いで、ゼロへと減少する。ある実施形態では、ディスプレイとの静止指接触の場合、その指の接触面積は、その静止接触に対応する時間周期中の指とタッチスクリーンディスプレイとの最大接触面積として定義される。
図５及び図６Ａ−６Ｌは、ある実施形態に基づきタッチスクリーンとの指接触からカーソル位置を決定するための方法を例示する。
図６Ａに示すように、タッチスクリーンディスプレイは、複数のユーザインターフェイスオブジェクト５６０２−５６０８を表示する。ユーザインターフェイスオブジェクトは、例えば、オープンアイコン、クローズアイコン、削除アイコン、退出アイコン、又はソフトキーアイコンを含む。これらアイコンの幾つかを、１つのアイコンが別のアイコンに非常に接近するように、タッチスクリーンディスプレイ上の小さな領域内に配備することができる。
従来のマウスクリックとは異なり、タッチスクリーンディスプレイとの指接触があるときには、指は、タッチスクリーンディスプレイ上にある程度の接触エリアを有する（例えば、図６Ａの５６１０）。ある実施形態では、ユーザインターフェイスオブジェクトをアクチベートして規定の動作を遂行できる前に、タッチスクリーンディスプレイとの指接触エリア５６１０に対応するカーソル位置を決定する必要がある。
指接触エリアを決定（５０１）した後、ポータブル装置は、接触エリア５６１０に関連した第１の位置を決定する（５０３）。以下に述べるように、この第１の位置は、指接触に対応するカーソル位置であってもなくてもよい。しかし、第１の位置は、カーソル位置を決定するのに使用される。ある実施形態では、図６Ｂに示すように、第１の位置Ｐ1は、接触エリア５６１０の中心である。
他の実施形態（図６Ｈ）では、指がタッチスクリーンディスプレイと物理的に接触するときに、接触エリア内のある位置から別の位置へと変化する圧力で指がディスプレイを押さねばならない。時々、ユーザが最大圧力を加える位置Ｐ2は、接触エリアの中心Ｐ1でないことがあるが、最大圧力位置Ｐ2は、ユーザが選択したいオブジェクトに接近したものとなり得る。
図６Ｈに示すように、接触エリア５６１０は、長軸及びこの長軸に垂直な短軸を有する楕円であると思われる。接触領域５６１０の中心Ｐ1と、それに対応する最大圧力位置Ｐ2との間には固定距離Δｄ’があると仮定する。この場合に、第１の位置又は最大圧力位置Ｐ2は、Ｐ1及びΔｄ’から決定することができる。
指接触のカーソル位置Ｐは、第１位置の場所、即ち図６ＢのＰ1又は図６ＨのＰ2、第１位置とその第１位置付近の１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、並びにある実施形態では、ユーザインターフェイスオブジェクトに関連した１つ以上のアクチベーション感受性ナンバー（例えば、図６Ｃ又は図６ＩのＷ1−Ｗ4）を含む１つ以上のパラメータに基づいて決定される（５０５）。
ある実施形態では、図６Ｃ及び６Ｉに示すように、第１の位置（図６ＣのＰ1又は図６ＩのＰ2）と、各ユーザインターフェイスオブジェクト（５６０２、５６０４、５６０６又は５６０８）との間の距離は、第１の位置と、その第１の位置に最も接近したユーザインターフェイスオブジェクト上のポイントとの間の距離である。
他の実施形態では、図６Ｄ及び６Ｊに示すように、第１の位置（図６ＤのＰ1又は図６ＪのＰ2）と、ユーザインターフェイスオブジェクト（５６０２、５６０４、５６０６、又は５６０８）との間の距離は、第１の位置と、ユーザインターフェイスオブジェクトの中心との間の距離である。
ある実施形態では、カーソル位置と第１の位置との間のオフセット（例えば、図６Ｅ及び６ＦのΔｄ）は、次の式により与えられる。
決定されたカーソル位置Ｐが、特定のユーザインターフェイスオブジェクト（例えば、図６Ｅの５６０２）上にある場合には、そのユーザインターフェイスオブジェクトは、歌を再生し、ｅ−メールメッセージを削除し、又は入力フィールドにキャラクタを入力する等の規定の動作を遂行するようにアクチベートされる。
ある実施形態では、異なるユーザインターフェイスオブジェクトに指定されるアクチベーション感受性ナンバーは、各オブジェクトに関連した動作に基づいて異なる値及び符号を有する。
例えば、図６Ｅに示すように、ユーザインターフェイスオブジェクト５６０２に関連した動作が可逆であるか、さもなければ、非破壊的である（例えば、ユーザインターフェイスオブジェクト５６０２が音楽及びビデオプレーヤモジュール１４６のプレイアイコンである）場合は、第１符号（例えば、“＋”）を有するアクチベーション感受性ナンバーＷ１’がオブジェクト５６０２に指定され、その決定されたカーソル位置Ｐが、第１の位置Ｐ1よりも、オブジェクト５６０２により接近して引っ張られ、オブジェクト５６０２のアクチベーションを容易にする。この点において、「非破壊的」とは、永久的な情報ロスを生じさせないアクションを意味するものと定義される。
対照的に、図６Ｆに示すように、ユーザインターフェイスオブジェクト５６０２に関連した動作が、ユーザ情報について不可逆又は破壊的である（例えば、ユーザインターフェイスオブジェクト５６０２がメールモジュール１４０の削除アイコンである）場合には、第１の符号とは逆の第２の符号（例えば、“−”）を有するアクチベーション感受性ナンバーＷ1”がオブジェクト５６０２に指定され、その決定されたカーソル位置Ｐは、第１の位置Ｐ1よりも、オブジェクト５６０２から更に離れて、オブジェクト５６０２のアクチベーションを困難にする。従って、オブジェクトに関連したアクチベーション感受性ナンバーが第２の符号を有するときには、オブジェクトをアクチベートするために接触をオブジェクト上に比較的正確に位置させねばならず、アクチベーション感受性ナンバーの値が大きいほど、精度が高いことに対応する。
ある実施形態では、カーソル位置Ｐは、第１の位置、この第１の位置に最も近いユーザインターフェイスオブジェクトに関連したアクチベーション感受性ナンバー、及び第１の位置とこの第１の位置に最も近いユーザインターフェイスオブジェクトとの間の距離、に基づいて決定される。これらの実施形態では、カーソル位置Ｐは、隣接する他のユーザインターフェイスオブジェクトに関連したパラメータによって影響されない。例えば、図６Ｋに示すように、第１の位置Ｐ1は、関連するアクチベーション感受性ナンバーＷ1を有するユーザインターフェイスオブジェクト５６０２に最も接近している。第１の位置Ｐ1とオブジェクト５６０２との間の距離は、ｄ1である。決定されるべきカーソル位置Ｐは、これらのパラメータにより影響されるだけで、隣接する他のユーザインターフェイスオブジェクト５６０４、５６０６又は５６０８によって影響されることはない。
ある実施形態では、１つ以上のユーザインターフェイスオブジェクトが第１位置の規定の距離内に入るときには、カーソル位置Ｐは、第１の位置、規定の距離内に入る各ユーザインターフェイスオブジェクトに関連したアクチベーション感受性ナンバー、及び第１の位置とこれらユーザインターフェイスオブジェクトの各々との間の距離に基づいて決定される。或いは又、ある実施形態では、１つ以上のユーザインターフェイスオブジェクトがタッチスクリーンディスプレイとのユーザ指接触の接触エリア内（又は接触エリアの規定の距離内）に入るときには、カーソル位置Ｐは、第１の位置、接触エリア内（又は接触エリアの規定の距離内）に入る各ユーザインターフェイスオブジェクトに関連したアクチベーション感受性ナンバー、及び第１の位置とこれらユーザインターフェイスオブジェクトの各々との間の距離に基づいて決定される。
ある実施形態では、図６Ｌに示すように、カーソル位置は、第１の位置がディスプレイ上の特定のユーザインターフェイスオブジェクト（例えば、５６０４）内にある場合は、第１の位置と同じであり、この第１の位置は、図６ＢのＰ1であるか、又は図６ＨのＰ2である。この場合に、カーソル位置を第１の位置から更にオフセットする必要はない。
ある実施形態では、図６Ｅに示すように、オブジェクトをアクチベートするために指接触が厳密にオブジェクトにおいて発生する必要はない。むしろ、ユーザインターフェイスオブジェクトは、決定されたカーソル位置がユーザインターフェイスオブジェクト内に入る限り、アクチベートされる。ある実施形態では、ユーザインターフェイスオブジェクトは、決定されたカーソル位置がユーザインターフェイスオブジェクトの「ヒット領域」内に入る場合に、アクチベートされる。ユーザインターフェイスオブジェクトのヒット領域は、ユーザインターフェイスオブジェクトそれ自体と同じサイズでもよいし、それより大きくても又は小さくてもよい。データに対して不可逆な又は破壊的な変化を生じさせるユーザインターフェイスオブジェクトは、典型的に、そのヒット領域が、ユーザインターフェイスオブジェクトそれ自体と同じサイズであるか又はそれより小さい。ある実施形態では、データに対して不可逆な又は破壊的な変化を生じさせない少なくとも幾つかのユーザインターフェイスオブジェクトは、そのヒット領域がユーザインターフェイスオブジェクトより大きい。このようなオブジェクトの場合に、対応するユーザインターフェイスオブジェクトより大きいヒット領域の部分は、隠れたヒット領域と称することができる。
ある実施形態では、前記式でカーソル位置を決定するのに含まれる少なくとも幾つかのユーザインターフェイスオブジェクトは、タッチスクリーンディスプレイ上で見ることができる。
ある実施形態では、ユーザインターフェイスオブジェクトに関連したアクチベーション感受性ナンバー（例えば、Ｗ1−Ｗ4）は、特定のアプリケーションモジュールにおいてコンテクストに依存し、そして特定のアプリケーションモジュール内で、あるコンテクストから別のコンテクストへと変化する。例えば、オブジェクトは、（特定のアプリケーションモジュールの第１コンテクストにおいて）第１の瞬間にカーソル位置へと引き付けられる第１のアクチベーション感受性ナンバーを有するが、（特定のアプリケーションモジュールの第２コンテクストにおいて）第２の瞬間にカーソル位置にあまり引き付けられず又は反発的でもある第２のアクチベーション感受性ナンバーを有することもある（例えば、第２のアクチベーション感受性ナンバーが逆の符号を有する場合）。
図６Ｍ−６Ｏは、ある実施形態に基づきソフトキーボードのキーでワードをタイプするときにソフトキーボードのキーに関連したアクチベーション感受性ナンバーを動的に調整する方法を例示している。ユーザインターフェイスは、入力フィールド５６２０及びソフトキーボード５６４０を備えている。ソフトキーボード５６４０の任意のキーアイコンをユーザ選択すると、それに対応するユーザ選択されたキャラクタが入力フィールド５６２０に入力される。説明上、図６Ｍに示すように、全てのキーアイコンは、最初に、同じアクチベーション感受性ナンバー５を有する。
図６Ｎは、２つのキャラクタ“Go”が入力フィールド５６２０に入力された後に異なるキーアイコンに関連したアクチベーション感受性ナンバーを示す。キーアイコンに関連したアクチベーション感受性ナンバーは、手前に入力されたキャラクタに基づいて調整される。例えば、キーアイコン“D”のアクチベーション感受性ナンバーは、５から１０へと変化する。というのは、“God”が普通の英語ワードだからである。従って、次の指接触が、キーアイコン“D”それ自身より、キーアイコン“F”により接近している場合でも、キーアイコン“D”をアクチベートすることができる。同様に、キーアイコン“A”及び“O”に関連したアクチベーション感受性ナンバーも増加される。というのは、各ストリング“Goa”及び“Goo”も、１つ以上の適正な英語ワード、例えば、“Goal”、“Good”又は“Goad”を導くからである。対照的に、キーアイコン“K”のアクチベーション感受性ナンバーは、普通の英語ワードの始めにストリング“Gok”は見つからないので、３へと下がる。
図６Ｏは、別のキャラクタ“a”が入力フィールド５６２０に入力された後に異なるキーアイコンに関連した更新されたアクチベーション感受性ナンバーを示している。ストリング“Goa”が入力されたとすれば、ユーザは、ワード“Goal”をタイプするかもしれない。従って、キーアイコン“L”に関連したアクチベーション感受性ナンバーが９に増加され、一方、キーアイコン“O”に関連したアクチベーション感受性ナンバーが２に下がる。というのは、普通の英語ワードの始めにストリング“Goao”は見つからないからである。
要約すれば、タッチスクリーンディスプレイとの指接触に対するカーソル位置は、ユーザインターフェイスオブジェクトに指定されたアクチベーション感受性ナンバー（又は重み）に少なくとも一部分基づいて調整される。このようなカーソル位置調整は、誤りによりユーザインターフェイスオブジェクトを選択する機会を減少する上で役立つ。
以上、特定の実施形態を参照して本発明を詳細に述べた。しかしながら、前記説明は、余すところのないものではなく、本発明をその正確な形態に限定するものではない。以上の教示に鑑み、多数の変更や修正が考えられる。前記実施形態は、本発明の原理及びその実際の応用を最良に説明するために選択され説明されたもので、当業者であれば、意図された特定の用途に適するように種々の変更を加えて、本発明及び種々の実施形態を最良に利用することができよう。
１００：ポータブルマルチファンクション装置
１０２：メモリ
１０６：Ｉ／Ｏサブシステム
１０８：ＲＦ回路
１１０：オーディオ回路
１１１：スピーカ
１１２：タッチ感知ディスプレイシステム
１１３：マイクロホン
１１６：他の入力制御装置
１１８：周辺インターフェイス
１２０：プロセッサ
１２２：コントローラ
１２４：外部ポート
１２６：オペレーティングシステム
１２８：通信モジュール
１３０：接触／運動モジュール
１３２：グラフィックモジュール
１３４：テキスト入力モジュール
１３５：ＧＰＳモジュール
１３６：アプリケーション
１３７：連絡先モジュール
１３８：電話モジュール
１３９：ビデオ会議モジュール
１４０：ｅ−メールクライアントモジュール
１４１：インスタントメッセージングモジュール
１４２：ブログモジュール
１４３：カメラモジュール
１４４：映像管理モジュール
１４５：ビデオプレーヤモジュール
１４６：音楽プレーヤモジュール
１４７：ブラウジングモジュール
１４８：カレンダーモジュール
１４９：ウィジェットモジュール
１４９−１：天気ウィジェット
１４９−２：株ウィジェット
１４９−３：計算器ウィジェット
１４９−４：アラームクロックウィジェット
１４９−５：辞書ウィジェット
１４９−６：ユーザ生成ウィジェット
１５０：ウィジェットクリエータモジュール
１５１：サーチモジュール
１５２：ビデオ及び音楽プレーヤモジュール
１５３：ノートモジュール
１５４：マップモジュール
１５６：ディスプレイコントローラ
１５８：光学センサコントローラ
１６０：他の入力コントローラ
１６２：電源システム
１６４：光学的センサ
１６６：接近センサ
１６８：加速度計
１０２：メモリ
１０６：Ｉ／Ｏサブシステム
１０８：ＲＦ回路
１１０：オーディオ回路
１１１：スピーカ
１１２：タッチ感知ディスプレイシステム
１１３：マイクロホン
１１６：他の入力制御装置
１１８：周辺インターフェイス
１２０：プロセッサ
１２２：コントローラ
１２４：外部ポート
１２６：オペレーティングシステム
１２８：通信モジュール
１３０：接触／運動モジュール
１３２：グラフィックモジュール
１３４：テキスト入力モジュール
１３５：ＧＰＳモジュール
１３６：アプリケーション
１３７：連絡先モジュール
１３８：電話モジュール
１３９：ビデオ会議モジュール
１４０：ｅ−メールクライアントモジュール
１４１：インスタントメッセージングモジュール
１４２：ブログモジュール
１４３：カメラモジュール
１４４：映像管理モジュール
１４５：ビデオプレーヤモジュール
１４６：音楽プレーヤモジュール
１４７：ブラウジングモジュール
１４８：カレンダーモジュール
１４９：ウィジェットモジュール
１４９−１：天気ウィジェット
１４９−２：株ウィジェット
１４９−３：計算器ウィジェット
１４９−４：アラームクロックウィジェット
１４９−５：辞書ウィジェット
１４９−６：ユーザ生成ウィジェット
１５０：ウィジェットクリエータモジュール
１５１：サーチモジュール
１５２：ビデオ及び音楽プレーヤモジュール
１５３：ノートモジュール
１５４：マップモジュール
１５６：ディスプレイコントローラ
１５８：光学センサコントローラ
１６０：他の入力コントローラ
１６２：電源システム
１６４：光学的センサ
１６６：接近センサ
１６８：加速度計
Claims (23)
- 複数のユーザインターフェイスオブジェクトをもつタッチスクリーンディスプレイを伴うポータブル電子装置でのコンピュータ実施方法において、
指とタッチスクリーンディスプレイとの接触エリアを検出するステップと、
前記接触エリアの中心に対応する第１の位置を決定するステップと、
前記接触エリアの形状に基づいて前記第１の位置からオフセットした第２の位置を決定するステップと、
前記第２の位置、前記第２の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づいてカーソル位置を決定するステップと、
を備えたコンピュータ実施方法。 - 複数のユーザインターフェイスオブジェクトをもつタッチスクリーンディスプレイを伴うポータブル電子装置でのコンピュータ実施方法において、
指とタッチスクリーンディスプレイとの接触エリアを検出するステップと、
前記接触エリアに関連した第１の位置を決定するステップと、
前記第１の位置、前記第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づいてカーソル位置を決定するステップと、
を備えたコンピュータ実施方法。 - 前記複数のユーザインターフェイスオブジェクトは、１つ以上のオープンアイコン、１つ以上のクローズアイコン、１つ以上の退出アイコン、又はソフトキーボードキーアイコンを含む、請求項２に記載の方法。
- 指とディスプレイとの静止接触に対して、前記検出される接触エリアは、その静止接触に対応する時間周期中の、指とディスプレイとの最大接触エリアに対応する、請求項２に記載の方法。
- 前記第１の位置は、前記接触エリアの中心である、請求項２に記載の方法。
- 前記接触エリアは、長軸をもつ楕円形であり、前記第１の位置は、その長軸に沿って前記接触エリアの中心からオフセットしている、請求項２に記載の方法。
- アクチベーション感受性ナンバーに関連したユーザインターフェイスオブジェクトは、アクチベーション感受性ナンバーが第１符号を有する場合にはアクチベーションが容易であり、そしてアクチベーション感受性ナンバーが前記第１符号とは逆の第２符号を有する場合にはアクチベーションが困難である、請求項２に記載の方法。
- 前記第１位置とユーザインターフェイスオブジェクトとの間の距離は、前記第１位置と、その第１位置に最も接近したユーザインターフェイスオブジェクト上のポイントとの間の距離である、請求項２に記載の方法。
- 前記第１位置とユーザインターフェイスオブジェクトとの間の距離は、前記第１位置と、ユーザインターフェイスオブジェクトの中心との間の距離である、請求項２に記載の方法。
- カーソル位置を決定する前記ステップは、
前記第１の位置、
前記第１の位置に最も近いユーザインターフェイスオブジェクトに関連したアクチベーション感受性ナンバー、及び
前記第１の位置と、その第１の位置に最も近いユーザインターフェイスオブジェクトとの間の距離、
に基づく、請求項２に記載の方法。 - 前記カーソル位置は、次の式で与えられる量だけ前記第１の位置からオフセットされ、
- 前記実数ｎは、１である、請求項１１に記載の方法。
- 前記カーソル位置は、前記第１の位置が前記ディスプレイ上の複数のユーザインターフェイスオブジェクトの１つ内にある場合には、前記第１の位置である、請求項２に記載の方法。
- 前記カーソル位置でユーザインターフェイスオブジェクトをアクチベートするステップを更に備えた、請求項２に記載の方法。
- 前記複数のユーザインターフェイスオブジェクトは、前記ディスプレイ上で見ることができる、請求項２に記載の方法。
- 前記アクチベーション感受性ナンバーは、アプリケーションにおいてコンテクスト依存である、請求項２に記載の方法。
- ソフトキーボードのキーに関連したアクチベーション感受性ナンバーは、ソフトキーボードのキーでワードがタイプされるときに変化する、請求項２に記載の方法。
- タッチスクリーンディスプレイを伴うポータブル電子装置のグラフィックユーザインターフェイスにおいて、
カーソルと、
複数のユーザインターフェイスオブジェクトと、
を含み、前記タッチスクリーンディスプレイ上でのカーソルの位置は、
指とタッチスクリーンディスプレイとの接触エリアに関連した第１の位置、
前記第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び
複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバー、
に少なくとも一部分基づくものである、グラフィックユーザインターフェイス。 - 前記第１の位置は、前記接触エリアの中心に対応する、請求項１８に記載のグラフィックユーザインターフェイス。
- 前記第１の位置は、前記接触エリアの形状に基づいて前記接触エリアの中心からオフセットされた位置に対応する、請求項１８に記載のグラフィックユーザインターフェイス。
- 複数のユーザインターフェイスオブジェクトをもつタッチスクリーンディスプレイと、
１つ以上のプロセッサと、
メモリと、
前記メモリに記憶されて、前記１つ以上のプロセッサにより実行されるように構成されたプログラムと、
を備え、前記プログラムは、
指と前記タッチスクリーンディスプレイとの接触エリアを検出するためのインストラクションと、
前記接触エリアに関連した第１の位置を決定するためのインストラクションと、
前記第１の位置、前記第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づきカーソル位置を決定するためのインストラクションと、
を含むものである、ポータブル電子装置。 - コンピュータ読み取り可能な記憶媒体と、そこに埋め込まれたコンピュータプログラムメカニズムとを備え、このコンピュータプログラムメカニズムは、複数のユーザインターフェイスオブジェクトをもつタッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、その装置が、
指と前記タッチスクリーンディスプレイとの接触エリアを検出し、
前記接触エリアに関連した第１の位置を決定し、
前記第１の位置、前記第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づいてカーソル位置を決定する、
ようにさせるインストラクションを含む、コンピュータプログラム製品。 - 複数のユーザインターフェイスオブジェクトをもつタッチスクリーンディスプレイを伴うポータブル電子装置において、
指と前記タッチスクリーンディスプレイとの接触エリアを検出するための手段と、
前記接触エリアに関連した第１の位置を決定するための手段と、
前記第１の位置、前記第１の位置と１つ以上のユーザインターフェイスオブジェクトとの間の１つ以上の距離、及び複数のユーザインターフェイスオブジェクトのうちの各ユーザインターフェイスオブジェクトに各々関連した１つ以上のアクチベーション感受性ナンバーに少なくとも一部分基づいてカーソル位置を決定するための手段と、
を備えたポータブル電子装置。
Applications Claiming Priority (13)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US82476906P | 2006-09-06 | 2006-09-06 | |
| US60/824,769 | 2006-09-06 | ||
| US87925307P | 2007-01-07 | 2007-01-07 | |
| US60/879,253 | 2007-01-07 | ||
| US87946907P | 2007-01-08 | 2007-01-08 | |
| US60/879,469 | 2007-01-08 | ||
| US94671607P | 2007-06-27 | 2007-06-27 | |
| US60/946,716 | 2007-06-27 | ||
| US93799307P | 2007-06-29 | 2007-06-29 | |
| US60/937,993 | 2007-06-29 | ||
| US11/850,015 US7843427B2 (en) | 2006-09-06 | 2007-09-04 | Methods for determining a cursor position from a finger contact with a touch screen display |
| US11/850,015 | 2007-09-04 | ||
| PCT/US2007/077645 WO2008030880A1 (en) | 2006-09-06 | 2007-09-05 | Methods for determining a cursor position from a finger contact with a touch screen display |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012033345A Division JP5277328B2 (ja) | 2006-09-06 | 2012-02-17 | タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2010503125A true JP2010503125A (ja) | 2010-01-28 |
| JP4934725B2 JP4934725B2 (ja) | 2012-05-16 |
Family
ID=38823525
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009527542A Active JP4934725B2 (ja) | 2006-09-06 | 2007-09-05 | タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 |
| JP2012033345A Active JP5277328B2 (ja) | 2006-09-06 | 2012-02-17 | タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012033345A Active JP5277328B2 (ja) | 2006-09-06 | 2012-02-17 | タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 |
Country Status (11)
| Country | Link |
|---|---|
| US (2) | US7843427B2 (ja) |
| EP (2) | EP2336869B1 (ja) |
| JP (2) | JP4934725B2 (ja) |
| KR (2) | KR20090066316A (ja) |
| AT (1) | ATE506648T1 (ja) |
| AU (1) | AU2007292384B2 (ja) |
| CA (1) | CA2662137C (ja) |
| DE (2) | DE602007014071D1 (ja) |
| HK (1) | HK1131671A1 (ja) |
| IL (1) | IL197385A (ja) |
| WO (1) | WO2008030880A1 (ja) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8363026B2 (en) | 2010-06-30 | 2013-01-29 | Kabushiki Kaisha Toshiba | Information processor, information processing method, and computer program product |
| WO2013074333A1 (en) * | 2011-11-14 | 2013-05-23 | Microsoft Corporation | Adaptive area cursor |
| JP2013532335A (ja) * | 2010-06-14 | 2013-08-15 | アップル インコーポレイテッド | コントロール選択近似 |
| JP2014526107A (ja) * | 2011-08-12 | 2014-10-02 | マイクロソフト コーポレーション | タッチ・インテリジェント・ターゲッティング |
| US8922351B2 (en) | 2011-04-04 | 2014-12-30 | Sharp Kabushiki Kaisha | Display apparatus, information processing system, recording medium and television receiver |
| JP2015041845A (ja) * | 2013-08-21 | 2015-03-02 | カシオ計算機株式会社 | 文字入力装置及びプログラム |
| US9037995B2 (en) | 2007-01-07 | 2015-05-19 | Apple Inc. | Application programming interfaces for scrolling operations |
| JP2015141140A (ja) * | 2014-01-29 | 2015-08-03 | 株式会社ミツトヨ | 遠隔操作可能な測定機及び測定システム |
| US9311112B2 (en) | 2009-03-16 | 2016-04-12 | Apple Inc. | Event recognition |
| US9483121B2 (en) | 2009-03-16 | 2016-11-01 | Apple Inc. | Event recognition |
| WO2017022834A1 (ja) * | 2015-08-05 | 2017-02-09 | 株式会社Ｃｙｇａｍｅｓ | 操作履歴に基づいてタッチ対象を予測するプログラム、電子装置、システム及び制御方法 |
| JP2017519295A (ja) * | 2014-06-27 | 2017-07-13 | マイクロソフト テクノロジー ライセンシング，エルエルシー | 確率的なタッチ感知 |
| US9791995B2 (en) | 2012-09-28 | 2017-10-17 | Pfu Limited | Form input/output apparatus, form input/output method, and program |
| JP2018500091A (ja) * | 2014-12-18 | 2018-01-11 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 医療画像編集 |
Families Citing this family (137)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7834855B2 (en) | 2004-08-25 | 2010-11-16 | Apple Inc. | Wide touchpad on a portable computer |
| US9766738B1 (en) | 2006-08-23 | 2017-09-19 | Cypress Semiconductor Corporation | Position and usage based prioritization for capacitance sense interface |
| US8519963B2 (en) * | 2007-01-07 | 2013-08-27 | Apple Inc. | Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display |
| US20080168402A1 (en) | 2007-01-07 | 2008-07-10 | Christopher Blumenberg | Application Programming Interfaces for Gesture Operations |
| US20080168478A1 (en) | 2007-01-07 | 2008-07-10 | Andrew Platzer | Application Programming Interfaces for Scrolling |
| US20080196945A1 (en) * | 2007-02-21 | 2008-08-21 | Jason Konstas | Preventing unintentional activation of a sensor element of a sensing device |
| US20080238886A1 (en) * | 2007-03-29 | 2008-10-02 | Sony Ericsson Mobile Communications Ab | Method for providing tactile feedback for touch-based input device |
| US8400409B1 (en) * | 2007-07-10 | 2013-03-19 | Cypress Semiconductor Corporation | User interface devices, methods, and computer readable media for sensing movement of an actuator across a surface of a window |
| WO2009008161A1 (ja) * | 2007-07-11 | 2009-01-15 | Access Co., Ltd. | 携帯情報端末 |
| KR20090024541A (ko) * | 2007-09-04 | 2009-03-09 | 삼성전자주식회사 | 하이퍼링크 선택 방법 및 이를 이용하는 이동통신 단말기 |
| US20090058823A1 (en) * | 2007-09-04 | 2009-03-05 | Apple Inc. | Virtual Keyboards in Multi-Language Environment |
| US8661340B2 (en) * | 2007-09-13 | 2014-02-25 | Apple Inc. | Input methods for device having multi-language environment |
| US8130206B2 (en) * | 2007-10-09 | 2012-03-06 | Nokia Corporation | Apparatus, method, computer program and user interface for enabling a touch sensitive display |
| KR20090038540A (ko) * | 2007-10-16 | 2009-04-21 | 주식회사 현대오토넷 | 화면 상의 영상위치 변경 장치 및 방법, 그리고 그를이용한 네비게이션 시스템 |
| US8136402B2 (en) * | 2007-11-28 | 2012-03-20 | International Business Machines Corporation | Accelerometer module for use with a touch sensitive device |
| EP2225628B1 (en) * | 2007-12-20 | 2018-05-30 | Myriad France | Method and system for moving a cursor and selecting objects on a touchscreen using a finger pointer |
| US20090174679A1 (en) | 2008-01-04 | 2009-07-09 | Wayne Carl Westerman | Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface |
| US8031176B1 (en) | 2008-01-22 | 2011-10-04 | Cypress Semiconductor Corporation | Optical navigation system using a single-package motion sensor |
| US8289283B2 (en) | 2008-03-04 | 2012-10-16 | Apple Inc. | Language input interface on a device |
| US8416196B2 (en) | 2008-03-04 | 2013-04-09 | Apple Inc. | Touch event model programming interface |
| US8174502B2 (en) | 2008-03-04 | 2012-05-08 | Apple Inc. | Touch event processing for web pages |
| US8717305B2 (en) | 2008-03-04 | 2014-05-06 | Apple Inc. | Touch event model for web pages |
| US8645827B2 (en) | 2008-03-04 | 2014-02-04 | Apple Inc. | Touch event model |
| US8908973B2 (en) * | 2008-03-04 | 2014-12-09 | Apple Inc. | Handwritten character recognition interface |
| US20090235281A1 (en) * | 2008-03-12 | 2009-09-17 | Inventec Corporation | Handheld electronic device, input device and method thereof, and display device and method thereof |
| EP2101250B1 (en) * | 2008-03-14 | 2014-06-11 | BlackBerry Limited | Character selection on a device using offset contact-zone |
| TW200941307A (en) * | 2008-03-24 | 2009-10-01 | Acer Inc | Extended cursor generating method and device |
| US8949743B2 (en) | 2008-04-22 | 2015-02-03 | Apple Inc. | Language input interface on a device |
| US8174503B2 (en) * | 2008-05-17 | 2012-05-08 | David H. Cain | Touch-based authentication of a mobile device through user generated pattern creation |
| US9355090B2 (en) | 2008-05-30 | 2016-05-31 | Apple Inc. | Identification of candidate characters for text input |
| KR100950797B1 (ko) | 2008-05-30 | 2010-04-02 | 포항공과대학교 산학협력단 | 가상 키보드가 적용된 기기의 문자 입력 방법 |
| AR071981A1 (es) * | 2008-06-02 | 2010-07-28 | Spx Corp | Ventana de multiples pantallas de presentacion con entrada para desplazamiento circular |
| FR2933211B1 (fr) * | 2008-06-26 | 2010-11-26 | Airbus France | Dispositif d'interaction avec un systeme d'affichage, notamment pour un systeme d'affichage avionique |
| US20100039214A1 (en) * | 2008-08-15 | 2010-02-18 | At&T Intellectual Property I, L.P. | Cellphone display time-out based on skin contact |
| US8913991B2 (en) | 2008-08-15 | 2014-12-16 | At&T Intellectual Property I, L.P. | User identification in cell phones based on skin contact |
| US8284170B2 (en) * | 2008-09-30 | 2012-10-09 | Apple Inc. | Touch screen device, method, and graphical user interface for moving on-screen objects without using a cursor |
| US20100134418A1 (en) * | 2008-12-02 | 2010-06-03 | Microsoft Corporation | Opposite facing device keypad |
| US20100146437A1 (en) * | 2008-12-04 | 2010-06-10 | Microsoft Corporation | Glanceable animated notifications on a locked device |
| US9197738B2 (en) * | 2008-12-04 | 2015-11-24 | Microsoft Technology Licensing, Llc | Providing selected data through a locked display |
| US8294047B2 (en) | 2008-12-08 | 2012-10-23 | Apple Inc. | Selective input signal rejection and modification |
| US8583421B2 (en) * | 2009-03-06 | 2013-11-12 | Motorola Mobility Llc | Method and apparatus for psychomotor and psycholinguistic prediction on touch based device |
| US8285499B2 (en) | 2009-03-16 | 2012-10-09 | Apple Inc. | Event recognition |
| US9684521B2 (en) | 2010-01-26 | 2017-06-20 | Apple Inc. | Systems having discrete and continuous gesture recognizers |
| US8564541B2 (en) * | 2009-03-16 | 2013-10-22 | Apple Inc. | Zhuyin input interface on a device |
| US8566044B2 (en) | 2009-03-16 | 2013-10-22 | Apple Inc. | Event recognition |
| US20100251161A1 (en) * | 2009-03-24 | 2010-09-30 | Microsoft Corporation | Virtual keyboard with staggered keys |
| US10191654B2 (en) | 2009-03-30 | 2019-01-29 | Touchtype Limited | System and method for inputting text into electronic devices |
| US9424246B2 (en) | 2009-03-30 | 2016-08-23 | Touchtype Ltd. | System and method for inputting text into electronic devices |
| GB0917753D0 (en) | 2009-10-09 | 2009-11-25 | Touchtype Ltd | System and method for inputting text into electronic devices |
| US9189472B2 (en) * | 2009-03-30 | 2015-11-17 | Touchtype Limited | System and method for inputting text into small screen devices |
| GB0905457D0 (en) | 2009-03-30 | 2009-05-13 | Touchtype Ltd | System and method for inputting text into electronic devices |
| US20100251105A1 (en) * | 2009-03-31 | 2010-09-30 | Lenovo (Singapore) Pte, Ltd. | Method, apparatus, and system for modifying substitution costs |
| KR101138622B1 (ko) * | 2009-04-14 | 2012-05-16 | 파나소닉 액정 디스플레이 주식회사 | 터치 패널 장치 |
| US8439265B2 (en) | 2009-06-16 | 2013-05-14 | Intel Corporation | Camera applications in a handheld device |
| JP5532499B2 (ja) * | 2009-06-16 | 2014-06-25 | インテル・コーポレーション | ハンドヘルドデバイス用のアダプティブ仮想キーボード |
| KR101071165B1 (ko) * | 2009-08-04 | 2011-10-10 | 이성호 | 터치입력 인식방법 및 장치 |
| TWI407339B (zh) * | 2009-08-06 | 2013-09-01 | Htc Corp | 追蹤觸控面板上碰觸輸入之移動軌跡的方法與電腦程式產品及其相關電子裝置 |
| US8434153B2 (en) | 2009-08-24 | 2013-04-30 | Microsoft Corporation | Application display on a locked device |
| US8799775B2 (en) * | 2009-09-25 | 2014-08-05 | Apple Inc. | Device, method, and graphical user interface for displaying emphasis animations for an electronic document in a presentation mode |
| WO2011044663A1 (en) * | 2009-10-14 | 2011-04-21 | Research In Motion Limited | Touch-input determination based on relative sizes of contact areas |
| US20120188164A1 (en) * | 2009-10-16 | 2012-07-26 | Prasenjit Dey | Gesture processing |
| KR101630754B1 (ko) * | 2009-10-16 | 2016-06-24 | 삼성전자주식회사 | 디스플레이 장치 및 인터페이스 방법 |
| CN102081487B (zh) * | 2009-11-28 | 2013-04-10 | 比亚迪股份有限公司 | 一种电阻式触摸屏的检测方法及装置 |
| US20110138284A1 (en) * | 2009-12-03 | 2011-06-09 | Microsoft Corporation | Three-state touch input system |
| CN102117143B (zh) * | 2009-12-31 | 2015-05-13 | 深圳迈瑞生物医疗电子股份有限公司 | 一种触摸屏响应方法及装置 |
| EP2341419A1 (en) * | 2009-12-31 | 2011-07-06 | Sony Computer Entertainment Europe Limited | Device and method of control |
| US20110231796A1 (en) * | 2010-02-16 | 2011-09-22 | Jose Manuel Vigil | Methods for navigating a touch screen device in conjunction with gestures |
| US8884871B2 (en) * | 2010-02-26 | 2014-11-11 | Thl Holding Company, Llc | Adjunct device for use with a handheld wireless communication device as a screen pointer |
| US8588806B2 (en) | 2010-02-26 | 2013-11-19 | Thl Holding Company, Llc | Wireless device and methods for use in a paging network |
| US9262041B2 (en) * | 2010-03-16 | 2016-02-16 | Nokia Technologies Oy | Methods and apparatus for determining a selection region |
| KR20110110940A (ko) * | 2010-04-02 | 2011-10-10 | 삼성전자주식회사 | 휴대용 단말기의 터치 입력 장치 및 방법 |
| DE202010007315U1 (de) | 2010-05-27 | 2010-10-07 | Omikron Data Quality Gmbh | Bedienvorrichtung für eine Nutzerschnittstelle |
| US9542091B2 (en) | 2010-06-04 | 2017-01-10 | Apple Inc. | Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator |
| KR101701932B1 (ko) * | 2010-07-22 | 2017-02-13 | 삼성전자 주식회사 | 입력 디바이스와 이의 제어 방법 |
| US9063593B2 (en) * | 2010-07-29 | 2015-06-23 | Qualcomm Incorporated | Device and method of controlling a computer using centroids |
| EP2606416B1 (en) | 2010-08-16 | 2017-10-11 | Koninklijke Philips N.V. | Highlighting of objects on a display |
| JP5510185B2 (ja) * | 2010-08-20 | 2014-06-04 | ソニー株式会社 | 情報処理装置、プログラム及び表示制御方法 |
| CN102402369B (zh) * | 2010-09-13 | 2017-11-24 | 联想(北京)有限公司 | 电子设备及其操作提示标识移动方法 |
| DE102010046893A1 (de) | 2010-09-29 | 2012-03-29 | E:Cue Control Gmbh | Bedienvorrichtung zur Ansteuerung einer mehrfarbigen Lichtquelle und Beleuchtungsvorrichtung |
| CN101984392B (zh) * | 2010-11-05 | 2012-02-29 | 华为终端有限公司 | 一种模拟硬按键的操作方法及触摸屏终端 |
| KR101522345B1 (ko) | 2010-11-12 | 2015-05-21 | 주식회사 케이티 | 이동 통신 단말에서의 배경화면 표시 방법 및 그 장치 |
| US9870093B2 (en) | 2010-11-23 | 2018-01-16 | Ge Aviation Systems Llc | System and method for improving touch screen display use under vibration and turbulence |
| US9268479B2 (en) | 2011-01-21 | 2016-02-23 | Dell Products, Lp | Motion sensor-enhanced touch screen |
| JP5651494B2 (ja) | 2011-02-09 | 2015-01-14 | 日立マクセル株式会社 | 情報処理装置 |
| FR2971864B1 (fr) * | 2011-02-22 | 2015-06-26 | Peugeot Citroen Automobiles Sa | Equipement de realite virtuelle equipe d'un dispositif de contact et utilisation d'un tel dispositif dans un equipement de realite virtuelle |
| US9298363B2 (en) | 2011-04-11 | 2016-03-29 | Apple Inc. | Region activation for touch sensitive surface |
| US9727124B2 (en) | 2011-04-19 | 2017-08-08 | Apple Inc. | Power saving application update in a portable electronic device |
| KR101199618B1 (ko) | 2011-05-11 | 2012-11-08 | 주식회사 케이티테크 | 화면 분할 표시 장치 및 방법 |
| CA2837752A1 (en) * | 2011-05-30 | 2012-12-06 | Li NI | Graphic object selection by way of directional swipe gestures |
| US20120324391A1 (en) * | 2011-06-16 | 2012-12-20 | Microsoft Corporation | Predictive word completion |
| WO2012173640A1 (en) | 2011-06-16 | 2012-12-20 | Cypress Semiconductor Corporaton | An optical navigation module with capacitive sensor |
| GB2492789B (en) * | 2011-07-12 | 2018-01-03 | Denso Corp | Displays |
| US8971572B1 (en) | 2011-08-12 | 2015-03-03 | The Research Foundation For The State University Of New York | Hand pointing estimation for human computer interaction |
| TWI474252B (zh) * | 2011-10-06 | 2015-02-21 | Intelligent GUI touch method and system | |
| TW201316240A (zh) * | 2011-10-06 | 2013-04-16 | Rich Ip Technology Inc | 利用圖形用戶介面影像之觸碰處理方法及系統 |
| US8896553B1 (en) | 2011-11-30 | 2014-11-25 | Cypress Semiconductor Corporation | Hybrid sensor module |
| CH705918A2 (de) * | 2011-12-19 | 2013-06-28 | Ralf Trachte | Feld-Analysen für flexible Computer-Eingabe. |
| TWI493438B (zh) * | 2012-01-09 | 2015-07-21 | Amtran Technology Co Ltd | 觸控方法 |
| JP2013161208A (ja) * | 2012-02-03 | 2013-08-19 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
| US9001058B2 (en) | 2012-03-05 | 2015-04-07 | International Business Machines Corporation | Computer action detection |
| JP5962085B2 (ja) * | 2012-03-15 | 2016-08-03 | ソニー株式会社 | 表示制御装置、その制御方法およびプログラム |
| US9235324B2 (en) | 2012-05-04 | 2016-01-12 | Google Inc. | Touch interpretation for displayed elements |
| US9001059B2 (en) * | 2012-06-08 | 2015-04-07 | Adobe Systems Incorporated | Method and apparatus for choosing an intended target element from an imprecise touch on a touch screen display |
| US9348501B2 (en) | 2012-06-14 | 2016-05-24 | Microsoft Technology Licensing, Llc | Touch modes |
| US20130342468A1 (en) * | 2012-06-20 | 2013-12-26 | Chimei Innolux Corporation | Method for determining touch location on a touch panel and touch panel module |
| JP2014044605A (ja) * | 2012-08-28 | 2014-03-13 | Fujifilm Corp | タッチ検知ディスプレイにおける入力制御装置および方法並びにプログラム |
| US9323452B2 (en) | 2012-09-24 | 2016-04-26 | Google Inc. | System and method for processing touch input |
| US9285880B2 (en) * | 2012-12-26 | 2016-03-15 | Panasonic Intellectual Property Management Co., Ltd. | Touch panel device and method of controlling a touch panel device |
| US9652589B2 (en) * | 2012-12-27 | 2017-05-16 | General Electric Company | Systems and methods for using a touch-sensitive display unit to analyze a medical image |
| KR101713784B1 (ko) * | 2013-01-07 | 2017-03-08 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
| CN104133618B (zh) * | 2013-05-02 | 2018-02-02 | 腾讯科技（深圳）有限公司 | 进行终端设备推荐页面展示的方法及系统 |
| US9733716B2 (en) | 2013-06-09 | 2017-08-15 | Apple Inc. | Proxy gesture recognizer |
| US20140375576A1 (en) * | 2013-06-24 | 2014-12-25 | Oracle International Corporation | Facilitating touch screen users to select elements in a densely populated display |
| WO2014207898A1 (ja) * | 2013-06-28 | 2014-12-31 | 富士通株式会社 | 情報処理装置、入力制御プログラム、および入力制御方法 |
| US11068128B2 (en) | 2013-09-03 | 2021-07-20 | Apple Inc. | User interface object manipulations in a user interface |
| US9652148B2 (en) * | 2014-01-06 | 2017-05-16 | Sap Se | Soft keyboard with keypress markers |
| US9983731B2 (en) * | 2014-02-21 | 2018-05-29 | Qualcomm Incorporated | System and method for reducing shadow effects in touch systems |
| JP6608579B2 (ja) | 2014-04-03 | 2019-11-20 | 株式会社ミツトヨ | 測定器 |
| US20170039076A1 (en) * | 2014-04-30 | 2017-02-09 | Empire Technology Development Llc | Adjusting tap position on touch screen |
| US9898162B2 (en) | 2014-05-30 | 2018-02-20 | Apple Inc. | Swiping functions for messaging applications |
| US9971500B2 (en) | 2014-06-01 | 2018-05-15 | Apple Inc. | Displaying options, assigning notification, ignoring messages, and simultaneous user interface displays in a messaging application |
| CN116243841A (zh) | 2014-06-27 | 2023-06-09 | 苹果公司 | 尺寸减小的用户界面 |
| US9628966B2 (en) * | 2014-08-19 | 2017-04-18 | Xiaomi Inc. | Method and device for sending message |
| WO2016036416A1 (en) | 2014-09-02 | 2016-03-10 | Apple Inc. | Button functionality |
| WO2016036509A1 (en) | 2014-09-02 | 2016-03-10 | Apple Inc. | Electronic mail user interface |
| US10671275B2 (en) | 2014-09-04 | 2020-06-02 | Apple Inc. | User interfaces for improving single-handed operation of devices |
| KR101542862B1 (ko) | 2014-09-16 | 2015-08-07 | 국방과학연구소 | 인체공학적 터치스크린 키 인식방법 |
| KR101599891B1 (ko) * | 2014-09-19 | 2016-03-04 | 삼성전자주식회사 | 초음파 진단장치, 방법 및 컴퓨터 판독 가능한 저장매체 |
| EP3238008A4 (en) * | 2014-12-22 | 2018-12-26 | Intel Corporation | Multi-touch virtual mouse |
| JP6324923B2 (ja) * | 2015-04-24 | 2018-05-16 | 株式会社ニフコ | 車両用収納装置 |
| GB2538733A (en) * | 2015-05-26 | 2016-11-30 | Forbidden Tech Plc | Control system for media manipulation |
| US10620812B2 (en) | 2016-06-10 | 2020-04-14 | Apple Inc. | Device, method, and graphical user interface for managing electronic communications |
| GB201610984D0 (en) | 2016-06-23 | 2016-08-10 | Microsoft Technology Licensing Llc | Suppression of input images |
| CN106354358A (zh) * | 2016-08-20 | 2017-01-25 | 汪念鸿 | 一种光标位置的确定方法及移动终端 |
| US10068551B1 (en) | 2017-05-01 | 2018-09-04 | Microsoft Technology Licensing, Llc | Localized high brightness mode |
| US11435830B2 (en) | 2018-09-11 | 2022-09-06 | Apple Inc. | Content-based tactile outputs |
| CN109739399B (zh) * | 2018-11-23 | 2021-08-20 | 努比亚技术有限公司 | 一种图标选择控制方法、终端及计算机可读存储介质 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09251341A (ja) * | 1996-03-18 | 1997-09-22 | Fujitsu Ltd | 表示画面上での選択操作に反応する領域を拡大する反応領域拡大装置および方法 |
| JPH10275046A (ja) * | 1997-03-31 | 1998-10-13 | Toshiba Corp | 単語入力装置及び方法 |
| JPH10283115A (ja) * | 1997-04-08 | 1998-10-23 | Matsushita Electric Ind Co Ltd | 表示入力装置 |
| JP2000207089A (ja) * | 1999-01-15 | 2000-07-28 | Internatl Business Mach Corp <Ibm> | ハイパ―テキスト文書を表示する方法および装置 |
| JP2000322169A (ja) * | 1999-04-30 | 2000-11-24 | Internatl Business Mach Corp <Ibm> | グラフィカル・ユーザ・インターフェイスにおけるホットスポット選択方法 |
| US6411283B1 (en) * | 1999-05-20 | 2002-06-25 | Micron Technology, Inc. | Computer touch screen adapted to facilitate selection of features at edge of screen |
| JP2003271294A (ja) * | 2002-03-15 | 2003-09-26 | Canon Inc | データ入力装置、データ入力方法、及びプログラム |
| JP2004252965A (ja) * | 2003-02-19 | 2004-09-09 | Agilent Technol Inc | 電子装置 |
| JP2007133610A (ja) * | 2005-11-09 | 2007-05-31 | Sharp Corp | タッチ入力装置および表示装置 |
Family Cites Families (52)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US3859005A (en) | 1973-08-13 | 1975-01-07 | Albert L Huebner | Erosion reduction in wet turbines |
| US4826405A (en) | 1985-10-15 | 1989-05-02 | Aeroquip Corporation | Fan blade fabrication system |
| JPH04160474A (ja) * | 1990-10-23 | 1992-06-03 | Fujitsu Ltd | キーワード入力方式 |
| US5963671A (en) * | 1991-11-27 | 1999-10-05 | International Business Machines Corporation | Enhancement of soft keyboard operations using trigram prediction |
| US5757358A (en) | 1992-03-31 | 1998-05-26 | The United States Of America As Represented By The Secretary Of The Navy | Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback |
| US6938220B1 (en) | 1992-10-21 | 2005-08-30 | Sharp Kabushiki Kaisha | Information processing apparatus |
| DE4406668C2 (de) | 1993-04-27 | 1996-09-12 | Hewlett Packard Co | Verfahren und Vorrichtung zum Betreiben eines berührungsempfindlichen Anzeigegeräts |
| US5564004A (en) | 1994-04-13 | 1996-10-08 | International Business Machines Corporation | Method and system for facilitating the selection of icons |
| EP0703525B1 (en) | 1994-09-22 | 2001-12-05 | Aisin Aw Co., Ltd. | Touch display type information input system |
| US5748512A (en) | 1995-02-28 | 1998-05-05 | Microsoft Corporation | Adjusting keyboard |
| US5805165A (en) | 1995-08-31 | 1998-09-08 | Microsoft Corporation | Method of selecting a displayed control item |
| US5825352A (en) * | 1996-01-04 | 1998-10-20 | Logitech, Inc. | Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad |
| JPH10307673A (ja) | 1997-05-09 | 1998-11-17 | Canon Inc | 座標入力装置及びその制御方法 |
| US6049326A (en) | 1997-05-12 | 2000-04-11 | Siemens Information And Communication Networks, Inc. | System and method for dual browser modes |
| US6104384A (en) | 1997-09-12 | 2000-08-15 | Ericsson, Inc. | Image based keyboard for a small computing device |
| US7844914B2 (en) | 2004-07-30 | 2010-11-30 | Apple Inc. | Activating virtual keys of a touch-screen virtual keyboard |
| EP1717684A3 (en) | 1998-01-26 | 2008-01-23 | Fingerworks, Inc. | Method and apparatus for integrating manual input |
| US6104317A (en) | 1998-02-27 | 2000-08-15 | Motorola, Inc. | Data entry device and method |
| US6278443B1 (en) * | 1998-04-30 | 2001-08-21 | International Business Machines Corporation | Touch screen with random finger placement and rolling on screen to control the movement of information on-screen |
| JPH11312053A (ja) * | 1998-04-30 | 1999-11-09 | Toyota Motor Corp | 画面タッチ式入力装置 |
| JP2000115829A (ja) | 1998-10-09 | 2000-04-21 | Nec Corp | 移動体通信システムにおける基地局の順次接続通信方式 |
| US6259436B1 (en) | 1998-12-22 | 2001-07-10 | Ericsson Inc. | Apparatus and method for determining selection of touchable items on a computer touchscreen by an imprecise touch |
| US7030863B2 (en) | 2000-05-26 | 2006-04-18 | America Online, Incorporated | Virtual keyboard system with automatic correction |
| KR100723738B1 (ko) | 1999-05-27 | 2007-05-30 | 에이오엘 엘엘씨 | 자동 교정 기능을 갖는 키보드 시스템 |
| GB2352154B (en) | 1999-07-16 | 2003-08-27 | Ibm | Automatic target enlargement for simplified selection |
| US7218226B2 (en) | 2004-03-01 | 2007-05-15 | Apple Inc. | Acceleration-based theft detection system for portable electronic devices |
| US7688306B2 (en) | 2000-10-02 | 2010-03-30 | Apple Inc. | Methods and apparatuses for operating a portable device based on an accelerometer |
| TW486657B (en) | 2000-10-26 | 2002-05-11 | Animeta Systems Inc | Browser interface operation device and its browsing method |
| JP2002132447A (ja) * | 2000-10-27 | 2002-05-10 | Alpine Electronics Inc | タッチパネル入力装置 |
| US6677932B1 (en) | 2001-01-28 | 2004-01-13 | Finger Works, Inc. | System and method for recognizing touch typing under limited tactile feedback conditions |
| US6570557B1 (en) | 2001-02-10 | 2003-05-27 | Finger Works, Inc. | Multi-touch system and method for emulating modifier keys via fingertip chords |
| JP2003005913A (ja) * | 2001-06-18 | 2003-01-10 | Tokai Rika Co Ltd | タッチ操作位置検出装置 |
| FI116591B (fi) | 2001-06-29 | 2005-12-30 | Nokia Corp | Menetelmä ja laite toiminnon toteuttamiseksi |
| US7254775B2 (en) | 2001-10-03 | 2007-08-07 | 3M Innovative Properties Company | Touch panel system and method for distinguishing multiple touch inputs |
| EP1468353A2 (de) | 2001-12-21 | 2004-10-20 | Ralf Trachte | Flexible computer-eingabe |
| DE10201195B4 (de) | 2002-01-14 | 2006-10-12 | Völckers, Oliver | Verfahren zur Texteingabe durch Auswahl von Buchstaben mittels eines Cursors und Einrichtung zur Durchführung des Verfahrens |
| US7151530B2 (en) | 2002-08-20 | 2006-12-19 | Canesta, Inc. | System and method for determining an input selected by a user through a virtual interface |
| KR101016981B1 (ko) | 2002-11-29 | 2011-02-28 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 데이터 처리 시스템, 사용자로 하여금 데이터 처리 시스템과 대화하도록 하는 방법, 및 컴퓨터 프로그램 제품을 저장한 컴퓨터 판독가능 매체 |
| JP4526235B2 (ja) | 2003-03-17 | 2010-08-18 | シャープ株式会社 | タッチパネル入力装置及びタッチパネル入力制御方法 |
| US20040183833A1 (en) | 2003-03-19 | 2004-09-23 | Chua Yong Tong | Keyboard error reduction method and apparatus |
| JP2004341813A (ja) | 2003-05-15 | 2004-12-02 | Casio Comput Co Ltd | 入力装置表示制御方法及び入力装置 |
| EP2254027B1 (en) | 2004-02-27 | 2018-11-07 | BlackBerry Limited | Text input system for a mobile electronic device and methods thereof |
| US20050190970A1 (en) | 2004-02-27 | 2005-09-01 | Research In Motion Limited | Text input system for a mobile electronic device and methods thereof |
| US20060007174A1 (en) | 2004-07-06 | 2006-01-12 | Chung-Yi Shen | Touch control method for a drag gesture and control module thereof |
| US7653883B2 (en) | 2004-07-30 | 2010-01-26 | Apple Inc. | Proximity detector in handheld device |
| EP1792314A1 (en) | 2004-08-23 | 2007-06-06 | Sherpa Technologies, LLC | Selective displaying of item information in videos |
| US7489306B2 (en) * | 2004-12-22 | 2009-02-10 | Microsoft Corporation | Touch screen accuracy |
| US7605804B2 (en) * | 2005-04-29 | 2009-10-20 | Microsoft Corporation | System and method for fine cursor positioning using a low resolution imaging touch screen |
| US20070247446A1 (en) | 2006-04-25 | 2007-10-25 | Timothy James Orsley | Linear positioning input device |
| JP2007299198A (ja) * | 2006-04-28 | 2007-11-15 | Toyota Motor Corp | 入力装置、入力制御方法及び入力制御プログラム。 |
| US11240788B2 (en) | 2017-05-10 | 2022-02-01 | Ntt Docomo, Inc. | User terminal and radio communication method |
| CN110956911B (zh) | 2018-09-27 | 2021-10-01 | 合肥鑫晟光电科技有限公司 | 阵列基板及其检测方法、显示面板 |
-
2007
- 2007-09-04 US US11/850,015 patent/US7843427B2/en active Active
- 2007-09-05 WO PCT/US2007/077645 patent/WO2008030880A1/en active Application Filing
- 2007-09-05 EP EP11154035.7A patent/EP2336869B1/en active Active
- 2007-09-05 CA CA2662137A patent/CA2662137C/en active Active
- 2007-09-05 KR KR1020097009492A patent/KR20090066316A/ko not_active Application Discontinuation
- 2007-09-05 EP EP07814691A patent/EP2067094B1/en active Active
- 2007-09-05 DE DE602007014071T patent/DE602007014071D1/de active Active
- 2007-09-05 AU AU2007292384A patent/AU2007292384B2/en active Active
- 2007-09-05 DE DE112007002088T patent/DE112007002088T5/de not_active Ceased
- 2007-09-05 KR KR1020097007039A patent/KR101085732B1/ko active IP Right Grant
- 2007-09-05 AT AT07814691T patent/ATE506648T1/de not_active IP Right Cessation
- 2007-09-05 JP JP2009527542A patent/JP4934725B2/ja active Active
-
2009
- 2009-03-03 IL IL197385A patent/IL197385A/en active IP Right Grant
- 2009-11-10 HK HK09110432.6A patent/HK1131671A1/xx unknown
-
2010
- 2010-11-30 US US12/957,185 patent/US8013839B2/en active Active
-
2012
- 2012-02-17 JP JP2012033345A patent/JP5277328B2/ja active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09251341A (ja) * | 1996-03-18 | 1997-09-22 | Fujitsu Ltd | 表示画面上での選択操作に反応する領域を拡大する反応領域拡大装置および方法 |
| JPH10275046A (ja) * | 1997-03-31 | 1998-10-13 | Toshiba Corp | 単語入力装置及び方法 |
| JPH10283115A (ja) * | 1997-04-08 | 1998-10-23 | Matsushita Electric Ind Co Ltd | 表示入力装置 |
| JP2000207089A (ja) * | 1999-01-15 | 2000-07-28 | Internatl Business Mach Corp <Ibm> | ハイパ―テキスト文書を表示する方法および装置 |
| JP2000322169A (ja) * | 1999-04-30 | 2000-11-24 | Internatl Business Mach Corp <Ibm> | グラフィカル・ユーザ・インターフェイスにおけるホットスポット選択方法 |
| US6411283B1 (en) * | 1999-05-20 | 2002-06-25 | Micron Technology, Inc. | Computer touch screen adapted to facilitate selection of features at edge of screen |
| JP2003271294A (ja) * | 2002-03-15 | 2003-09-26 | Canon Inc | データ入力装置、データ入力方法、及びプログラム |
| JP2004252965A (ja) * | 2003-02-19 | 2004-09-09 | Agilent Technol Inc | 電子装置 |
| JP2007133610A (ja) * | 2005-11-09 | 2007-05-31 | Sharp Corp | タッチ入力装置および表示装置 |
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9037995B2 (en) | 2007-01-07 | 2015-05-19 | Apple Inc. | Application programming interfaces for scrolling operations |
| US10817162B2 (en) | 2007-01-07 | 2020-10-27 | Apple Inc. | Application programming interfaces for scrolling operations |
| US10481785B2 (en) | 2007-01-07 | 2019-11-19 | Apple Inc. | Application programming interfaces for scrolling operations |
| US9760272B2 (en) | 2007-01-07 | 2017-09-12 | Apple Inc. | Application programming interfaces for scrolling operations |
| US9448712B2 (en) | 2007-01-07 | 2016-09-20 | Apple Inc. | Application programming interfaces for scrolling operations |
| US9483121B2 (en) | 2009-03-16 | 2016-11-01 | Apple Inc. | Event recognition |
| US9311112B2 (en) | 2009-03-16 | 2016-04-12 | Apple Inc. | Event recognition |
| JP2015018572A (ja) * | 2010-06-14 | 2015-01-29 | アップル インコーポレイテッド | コントロール選択近似 |
| JP2013532335A (ja) * | 2010-06-14 | 2013-08-15 | アップル インコーポレイテッド | コントロール選択近似 |
| US8363026B2 (en) | 2010-06-30 | 2013-01-29 | Kabushiki Kaisha Toshiba | Information processor, information processing method, and computer program product |
| US8922351B2 (en) | 2011-04-04 | 2014-12-30 | Sharp Kabushiki Kaisha | Display apparatus, information processing system, recording medium and television receiver |
| JP2014526107A (ja) * | 2011-08-12 | 2014-10-02 | マイクロソフト コーポレーション | タッチ・インテリジェント・ターゲッティング |
| US10140011B2 (en) | 2011-08-12 | 2018-11-27 | Microsoft Technology Licensing, Llc | Touch intelligent targeting |
| WO2013074333A1 (en) * | 2011-11-14 | 2013-05-23 | Microsoft Corporation | Adaptive area cursor |
| US9791995B2 (en) | 2012-09-28 | 2017-10-17 | Pfu Limited | Form input/output apparatus, form input/output method, and program |
| JP2015041845A (ja) * | 2013-08-21 | 2015-03-02 | カシオ計算機株式会社 | 文字入力装置及びプログラム |
| JP2015141140A (ja) * | 2014-01-29 | 2015-08-03 | 株式会社ミツトヨ | 遠隔操作可能な測定機及び測定システム |
| JP2017519295A (ja) * | 2014-06-27 | 2017-07-13 | マイクロソフト テクノロジー ライセンシング，エルエルシー | 確率的なタッチ感知 |
| JP2018500091A (ja) * | 2014-12-18 | 2018-01-11 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 医療画像編集 |
| JP2021098053A (ja) * | 2014-12-18 | 2021-07-01 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 医療画像編集 |
| JP7080054B2 (ja) | 2014-12-18 | 2022-06-03 | コーニンクレッカ フィリップス エヌ ヴェ | 医療画像編集 |
| WO2017022834A1 (ja) * | 2015-08-05 | 2017-02-09 | 株式会社Ｃｙｇａｍｅｓ | 操作履歴に基づいてタッチ対象を予測するプログラム、電子装置、システム及び制御方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20110074677A1 (en) | 2011-03-31 |
| KR20090057304A (ko) | 2009-06-04 |
| HK1131671A1 (en) | 2010-01-29 |
| CA2662137C (en) | 2015-11-24 |
| ATE506648T1 (de) | 2011-05-15 |
| EP2336869B1 (en) | 2014-02-12 |
| US7843427B2 (en) | 2010-11-30 |
| US8013839B2 (en) | 2011-09-06 |
| DE112007002088T5 (de) | 2009-07-02 |
| EP2067094B1 (en) | 2011-04-20 |
| JP2012113735A (ja) | 2012-06-14 |
| EP2067094A1 (en) | 2009-06-10 |
| US20080094356A1 (en) | 2008-04-24 |
| IL197385A0 (en) | 2009-12-24 |
| CA2662137A1 (en) | 2008-03-13 |
| AU2007292384B2 (en) | 2011-12-01 |
| EP2336869A1 (en) | 2011-06-22 |
| KR101085732B1 (ko) | 2011-11-21 |
| JP4934725B2 (ja) | 2012-05-16 |
| WO2008030880A1 (en) | 2008-03-13 |
| AU2007292384A1 (en) | 2008-03-13 |
| DE602007014071D1 (de) | 2011-06-01 |
| JP5277328B2 (ja) | 2013-08-28 |
| KR20090066316A (ko) | 2009-06-23 |
| IL197385A (en) | 2016-12-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4934725B2 (ja) | タッチスクリーンディスプレイとの指接触からカーソル位置を決定する方法 | |
| US10409461B2 (en) | Portable multifunction device, method, and graphical user interface for interacting with user input elements in displayed content | |
| JP5335690B2 (ja) | タッチスクリーンディスプレイ上での指ジェスチャーを解釈するためのポータブルマルチファンクション装置、方法及びグラフィックユーザインターフェイス | |
| JP6204936B2 (ja) | ポータブルマルチファンクション装置のためのボイスメールマネージャー | |
| JP5559538B2 (ja) | 構造化電子ドキュメントを表示するためのポータブル電子装置、方法及びグラフィックユーザインターフェイス | |
| JP6140109B2 (ja) | タッチスクリーンディスプレイにおけるリストのスクローリング、ドキュメントの並進移動、スケーリング及び回転 | |
| WO2008085742A2 (en) | Portable multifunction device, method and graphical user interface for interacting with user input elements in displayed content | |
| JP2010503126A (ja) | 異なるジェスチャーに対して同様の動作を行うポータブル電子装置 | |
| AU2012201240B2 (en) | Methods for determining a cursor position from a finger contact with a touch screen display |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20110704 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110721 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20110705 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110815 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111114 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120120 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120220 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4934725 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150224 Year of fee payment: 3 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |