JP2023036715A - グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス - Google Patents

グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス Download PDF

Info

Publication number
JP2023036715A
JP2023036715A JP2022199433A JP2022199433A JP2023036715A JP 2023036715 A JP2023036715 A JP 2023036715A JP 2022199433 A JP2022199433 A JP 2022199433A JP 2022199433 A JP2022199433 A JP 2022199433A JP 2023036715 A JP2023036715 A JP 2023036715A
Authority
JP
Japan
Prior art keywords
media
touch
media capture
input
capture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022199433A
Other languages
English (en)
Inventor
アントン エム ダヴィドフ
M Davydov Anton
ジェーン イー クー
E Koo Jane
ベーキッシュ ジェイ マンザリ
J Manzari Behkish
グラント アール ポール
R Grant Paul
ザ サード ウィリアム エイ ソレンティノ
A Sorrentino William Iii
ドス サントス アンドレ ソウザ
Souza Dos Santos Andre
ダニエル ジェイ ウィアセマ
J Wiersema Daniel
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US15/995,040 external-priority patent/US20190253619A1/en
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2023036715A publication Critical patent/JP2023036715A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Recording Measured Values (AREA)
  • Water Treatment By Sorption (AREA)

Abstract

【課題】メディアキャプチャアプリケーションのグラフィカルユーザインタフェースに関する。【解決手段】開示される実施形態は、メディアキャプチャデバイスによって表示されるグラフィカルユーザインタフェースのメディアキャプチャロックアフォーダンスを対象とする。メディアキャプチャロックアフォーダンスは、ユーザが、メディアキャプチャデバイスを片手で保持しながら、ユーザの指（例えば、ユーザの親指）によって適用され得る単純かつ直感的なタッチジェスチャを使用して、メディアキャプチャデバイスのキャプチャ状態をロック及びアンロックすることを可能にする。【選択図】図７

Description

関連出願の相互参照
本出願は、２０１８年２月９日に出願の「Ｍｅｄｉａ Ｃａｐｔｕｒｅ Ｌｏｃｋ Ａｆｆｏｒｄａｎｃｅ ｆｏｒ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ」と題する米国特許仮出願第６２／６２８，８２５号、２０１８年５月３１日に出願の「Ｍｅｄｉａ Ｃａｐｔｕｒｅ Ｌｏｃｋ Ａｆｆｏｒｄａｎｃｅ ｆｏｒ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ」と題する米国特許出願第１５／９９５，０４０号、及び２０１９年２月７日に出願の「Ｍｅｄｉａ Ｃａｐｔｕｒｅ Ｌｏｃｋ Ａｆｆｏｒｄａｎｃｅ ｆｏｒ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ」と題する米国特許仮出願第６２／８０２，６０３号の優先権を主張する。これらの出願の内容は、全体が、参照により本明細書に組み込まれる。
本開示は概して、メディアキャプチャアプリケーションのグラフィカルユーザインタフェースに関する。
メディアキャプチャデバイス（例えば、スマートフォン、タブレットコンピュータ）は、ユーザが１つ以上の組み込まれたカメラ及びマイクロフォンを使用してメディアクリップ（例えば、ビデオクリップ、オーディオクリップ）を記録することを可能にするアプリケーションを含む。ユーザは、仮想記録ボタンを押したままにしてメディアクリップをキャプチャする。ユーザが記録を行うと、ユーザは、メディアクリップをドラッグして他のメディアクリップと共に所望の順序にし、フィルタ、絵文字、アニメーションアイコン、及びタイトルを追加することができる。メディアクリップは、ソーシャルネットワークを通じて間接的に共有することができ、かつ／又は、例えばインスタントメッセージングアプリケーションを通じて友人に直接送信することができる。
しかし、電子デバイスを使用してメディアキャプチャを実行するためのいくつかの技法は、一般的に扱いにくく非効率である。例えば、一部の既存の技法では、複数回のキー押圧又はキーストロークを含み得る、複雑かつ時間のかかるユーザインタフェースが使用されている。既存の技法は、必要以上の時間を要し、ユーザの時間及びデバイスのエネルギを浪費する。後者について考慮することは、バッテリ動作式デバイスにおいて特に重大である。
したがって、本技法は、ジェスチャによるメディアキャプチャを実行するための、より速く、より効率的な方法及びインタフェースを電子デバイスに提供する。このような方法及びインタフェースは、ジェスチャによるメディアキャプチャを実行するための他の方法を任意選択的に補完するか、又は置き換える。そのような方法及びインタフェースは、ユーザにかかる認識的負担を減らし、より効率的なヒューマン－マシンインタフェースを生成する。バッテリ動作式コンピューティングデバイスの場合、そのような方法及びインタフェースは、電力を節約し、電池充電の間隔を長くする。加えて、このような方法及びインタフェースは、メディアキャプチャを実行するために不要な又は本質的でないユーザ入力の数を低減し、それによってユーザ時間を節約し、デバイスエネルギを節約する。
開示される実施形態は、グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンスを対象とする。一実施形態では、メディアをキャプチャする方法は、メディアキャプチャデバイスによって、メディアキャプチャデバイスのディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、タップアンドホールドジェスチャ入力に応答して、メディアキャプチャデバイスによって、メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロック状態で開始することと、タップアンドホールドジェスチャ入力がメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所からリフトする第１のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャセッションを終了させることと、メディアキャプチャセッション中にメディアキャプチャアフォーダンスがグラフィカルユーザインタフェース上の第１の場所から第２の場所までスライドするスライドジェスチャ入力をメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、スライドジェスチャ入力がメディアキャプチャセッション中に第２の場所でグラフィカルユーザインタフェースからリフトする第２のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャセッションをロック状態に遷移させることと、を含む。
他の実施形態は、装置、コンピューティングデバイス、及び非一時的コンピュータ可読記憶媒体を含むことができる。
一部の実施形態によれば、非一時的コンピュータ可読記憶媒体が記載される。非一時的コンピュータ可読記憶媒体は命令を記憶しており、命令はメディアキャプチャデバイスによって実行されると、メディアキャプチャデバイスに、メディアキャプチャデバイスによって、メディアキャプチャデバイスのディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、タップアンドホールドジェスチャ入力に応答して、メディアキャプチャデバイスによって、メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアセッションキャプチャ状態で開始することと、タップアンドホールドジェスチャ入力がメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所からリフトする第１のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャセッションを終了させることと、メディアキャプチャアフォーダンスがメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所から第２の場所までスライドするスライドジェスチャ入力をメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、スライドジェスチャ入力がメディアキャプチャセッション中に第２の場所でグラフィカルユーザインタフェースからリフトする第２のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させることと、を含む動作を実行させる。
一部の実施形態によれば、一時的コンピュータ可読記憶媒体が記載される。非一時的コンピュータ可読記憶媒体は命令を記憶しており、命令はメディアキャプチャデバイスによって実行されると、メディアキャプチャデバイスに、メディアキャプチャデバイスのディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、タップアンドホールドジェスチャ入力に応答して、メディアキャプチャデバイスによって、メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアセッションキャプチャ状態で開始することと、タップアンドホールドジェスチャ入力がメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所からリフトする第１のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャセッションを終了させることと、メディアキャプチャアフォーダンスがメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所から第２の場所までスライドするスライドジェスチャ入力をメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、スライドジェスチャ入力がメディアキャプチャセッション中に第２の場所でグラフィカルユーザインタフェースからリフトする第２のリフトジェスチャを、メディアキャプチャデバイスが検出したことに応答して、メディアキャプチャデバイスによって、メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させることと、を含む動作を実行させる。
一部の実施形態によれば、メディアキャプチャデバイスが記載される。メディアキャプチャデバイスは、タッチスクリーンと、１つ以上のプロセッサと、１つ以上のプロセッサと結合しており、命令を記憶するように構成されたメモリと、を備え、命令は、１つ以上のプロセッサによって実行されると、１つ以上のプロセッサに、タッチスクリーンによって、メディアキャプチャデバイスのタッチスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、タップアンドホールドジェスチャ入力に応答して、メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアキャプチャセッション状態で開始することと、タップアンドホールドジェスチャ入力がメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所からリフトする第１のリフトジェスチャをタッチスクリーンが検出したことに応答して、メディアキャプチャセッションを終了させることと、メディアキャプチャアフォーダンスがメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所から第２の場所までスライドするスライドジェスチャ入力をタッチスクリーンが検出したことに応答して、メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、スライドジェスチャ入力がメディアキャプチャセッション中に第２の場所でグラフィカルユーザインタフェースからリフトする第２のリフトジェスチャを、タッチスクリーンが検出したことに応答して、メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させることと、を含む動作を実行させる。
一部の実施形態によれば、電子デバイスが記載される。電子デバイスは、ディスプレイスクリーンと、メディアキャプチャデバイスのディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出するための手段と、タップアンドホールドジェスチャ入力に応答して、メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアキャプチャセッション状態で開始する手段と、タップアンドホールドジェスチャ入力がメディアキャプチャセッション中にグラフィカルユーザインタフェース上の第１の場所からリフトする第１のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャセッションを終了させる手段と、メディアキャプチャセッション中にメディアキャプチャアフォーダンスがグラフィカルユーザインタフェース上の第１の場所から第２の場所までスライドするスライドジェスチャ入力をメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更する手段と、スライドジェスチャ入力がメディアキャプチャセッション中に第２の場所でグラフィカルユーザインタフェースからリフトする第２のリフトジェスチャをメディアキャプチャデバイスが検出したことに応答して、メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させる手段と、を備える。
本明細書に開示する特定の実施形態は、以下の利点のうちの１つ以上を提供することができる。メディアキャプチャロックアフォーダンスは、ユーザが、メディアキャプチャデバイスを片手で保持しながら、ユーザの指（例えば、ユーザの親指）によって適用され得る単純かつ直感的なタッチジェスチャを使用して、メディアキャプチャデバイスのキャプチャ状態をロック及びアンロックすることを可能にする。
主題の１つ以上の実装形態の詳細は、添付図面及び下掲の明細書に記載されている。本主題の他の特徴、態様、及び利点は、明細書、図面、及び特許請求の範囲から明らかとなるであろう。
一部の実施形態によれば、方法が記載される。方法は、ディスプレイ、タッチ感知面、及び１つ以上のメディアキャプチャ構成要素を有するデバイスにおいて、ディスプレイ上に第１のユーザインタフェース要素を表示することと、タッチ感知面を介して、第１のユーザインタフェース要素に対応するタッチ感知面上の場所で開始するタッチ入力を検出することと、タッチ入力を検出したことに応答して、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過する前に、タッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャすることと、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過した後に、タッチ感知面からリフトされたとの判定に従って、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャすることと、タッチ入力が移動基準を満たし、第１の方向への移動を含むとの判定に従って、第２のタイプのメディアのキャプチャを開始し、タッチ感知面からのタッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続することと、を含む。
一部の実施形態によれば、非一時的コンピュータ可読記憶媒体が記載される。非一時的コンピュータ可読記憶媒体は、ディスプレイ、タッチ感知面及び１つ以上のメディアキャプチャ構成要素を有する電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、ディスプレイ上に第１のユーザインタフェースを表示する命令と、タッチ感知面を介して、第１のユーザインタフェース要素に対応するタッチ感知面上の場所で開始するタッチ入力を検出する命令と、タッチ入力を検出したことに応答して、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過する前に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャする命令と、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過した後に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャする命令と、タッチ入力が移動基準を満たし、第１の方向への移動を含むとの判定に従って、第２のタイプのメディアのキャプチャを開始し、タッチ感知面からのタッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャ継続する命令と、を含む。
一部の実施形態によれば、一時的コンピュータ可読記憶媒体が記載される。一時的コンピュータ可読記憶媒体は、ディスプレイ、タッチ感知面及び１つ以上のメディアキャプチャ構成要素を有する電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、ディスプレイ上に第１のユーザインタフェースを表示する命令と、タッチ感知面を介して、第１のユーザインタフェース要素に対応するタッチ感知面上の場所で開始するタッチ入力を検出する命令と、タッチ入力を検出したことに応答して、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過する前に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャする命令と、タッチ入力が移動基準を満たす前、かつタッチ入力が検出されてから閾値時間が経過した後に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャする命令と、タッチ入力が移動基準を満たし、第１の方向への移動を含むとの判定に従って、第２のタイプのメディアのキャプチャを開始し、タッチ感知面からのタッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続する命令と、を含む。
一部の実施形態によれば、電子デバイスが記載される。電子デバイスは、ディスプレイと、タッチ感知面と、１つ以上のメディアキャプチャ構成要素と、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、１つ以上のプログラムは、ディスプレイ上に第１のユーザインタフェースを表示する命令と、タッチ感知面を介して第１のユーザインタフェース要素に対応するタッチ感知面上の場所で開始するタッチ入力を検出する命令と、タッチ入力を検出したことに応答して、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過する前に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャする命令と、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過した後に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャする命令と、タッチ入力が移動基準を満たし、第１の方向への移動を含むとの判定に従って、第２のタイプのメディアのキャプチャを開始し、タッチ感知面からのタッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続する命令と、を含む。
一部の実施形態によれば、電子デバイスが記載される。電子デバイスは、ディスプレイと、タッチ感知面と、１つ以上のメディアキャプチャ構成要素と、ディスプレイ上に第１のユーザインタフェースを表示する手段と、タッチ感知面を介して、第１のユーザインタフェース要素に対応するタッチ感知面上の場所で開始するタッチ入力を検出する手段と、タッチ入力を検出したことに応答して、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過する前に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャし、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過した後に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャし、タッチ入力が移動基準を満たし、第１の方向への移動を含むとの判定に従って、第２のタイプのメディアのキャプチャを開始し、タッチ感知面からのタッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャ継続する手段と、を備える。
これらの機能を実行する実行可能な命令は、任意選択的に、１つ以上のプロセッサによって実行されるように構成された非一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に含まれる。これらの機能を実行する実行可能な命令は、任意選択的に、１つ以上のプロセッサによって実行されるように構成された一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に含まれる。
このように、デバイスには、より速く、より効率的な、ジェスチャによるメディアキャプチャを実行するための方法及びインタフェースが設けられ、それによって、このようなデバイスについての有効性、効率及びユーザ満足度が増大する。このような方法及びインタフェースは、ジェスチャによるメディアキャプチャを実行するための他の方法を任意選択的に補完するか、又は取り替えることができる。
説明される様々な実施形態をより良く理解するため、以下の図面と併せて、以下の「発明を実施するための形態」が参照されるべきであり、類似の参照番号は、以下の図の全てを通じて、対応する部分を指す。
一部の実施形態による、タッチ感知ディスプレイを有するポータブル多機能デバイスを示すブロック図である。 一部の実施形態による、イベント処理のための例示的な構成要素を示すブロック図である。 一部の実施形態による、タッチスクリーンを有するポータブル多機能デバイスを示す。 一部の実施形態による、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。 一部の実施形態による、ポータブル多機能デバイス上のアプリケーションのメニューの例示的なユーザインタフェースを示す。 一部の実施形態による、ディスプレイとは別個のタッチ感知面を有する多機能デバイスの例示的なユーザインタフェースを示す。 一部の実施形態によるパーソナル電子デバイスを示す。 一部の実施形態によるパーソナル電子デバイスを示すブロック図である。 一部の実施形態による、タッチ感知ディスプレイ及び強度センサを有するパーソナル電子デバイスの例示的な構成要素を示す。 一部の実施形態による、タッチ感知ディスプレイ及び強度センサを有するパーソナル電子デバイスの例示的な構成要素を示す。 一部の実施形態による、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 一部の実施形態による、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 一部の実施形態による、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 一部の実施形態による、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。 一実施形態による、図６Ａ～図６Ｈに示したメディアキャプチャロックアフォーダンスのアニメーションプロセスのフロー図である。 一実施形態による、図１～図２を参照して説明したメディアキャプチャロックアフォーダンスを実装するメディアキャプチャデバイスの例示的なデバイスのアーキテクチャを示す。 図９Ａは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｂは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｃは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｄは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｅは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｆは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｇは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｈは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｉは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｊは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｋは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｌは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｍは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｎは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 図９Ｏは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図９Ｐは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するためのフロー図である。 一部の実施形態による、ジェスチャによるメディアキャプチャを実行するためのフロー図である。
以下の説明は、例示的な方法、パラメータなどについて記載する。しかしながら、そのような説明は、本開示の範囲に対する限定として意図されるものではなく、代わりに例示的な実施形態の説明として提供されることを認識されたい。
ジェスチャによるメディアキャプチャを実行する効率的な方法及びインタフェースを提供する電子デバイスが必要とされている。このような技法は、メディアをキャプチャするためにデバイスを使用するユーザの認識的負担を軽減し、それにより、生産性を向上させることができる。更に、このような技法は、普通なら冗長なユーザ入力に浪費されるプロセッサ及び電池の電力を低減させることができる。
以下に、図１Ａ～図１Ｂ、図２、図３、図４Ａ～図４Ｂ、及び図５Ａ～図５Ｈは、イベント通知を管理する技法を実行するための例示的なデバイスの説明を提供する。図６Ａ～図６Ｈは、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図７は、一部の実施形態による、ジェスチャによるメディアキャプチャを実行する方法を示すフロー図である。図６Ａ～図６Ｈのユーザインタフェースは、図７の処理を含む、以下で説明する処理を示すために使用される。図９Ａ～図１０Ｆは、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。図１１Ａ～図１１Ｂは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行する方法を示すフロー図である。図９Ａ～図１０Ｆのユーザインタフェースは、図１１Ａ～図１１Ｂのプロセスを含む後述するプロセスを示すために使用される。
以下の説明では、様々な要素について説明するために、「第１の」、「第２の」などの用語を使用するが、これらの要素は、それらの用語によって限定されるべきではない。これらの用語は、ある要素を別の要素と区別するためにのみ使用される。例えば、記載する様々な実施形態の範囲から逸脱することなく、第１のタッチを第２のタッチと呼ぶこともでき、同様に第２のタッチを第１のタッチと呼ぶこともできる。第１のタッチ及び第２のタッチはどちらもタッチであるが、これらは同じタッチではない。
本明細書に記載する様々な実施形態の説明で使用される術語は、特定の実施形態を説明することのみを目的とし、限定的であることは意図されていない。記載する様々な実施形態の説明及び添付の特許請求の範囲では、単数形の「ａ（１つ、一）」、「ａｎ（１つ、一）」、及び「ｔｈｅ（その、この）」は、文脈上別途明白に記載しない限り、複数形も同様に含むことが意図される。また、本明細書で使用されるとき、用語「及び／又は」は、関連する列挙された項目のうちの１つ以上のいずれか及び全ての考えられる組み合わせを指し、かつこれを含むことを理解されたい。用語「ｉｎｃｌｕｄｅｓ（含む）」、「ｉｎｃｌｕｄｉｎｇ（含む）」、「ｃｏｍｐｒｉｓｅｓ（含む、備える）」、及び／又は「ｃｏｍｐｒｉｓｉｎｇ（含む、備える）」は、本明細書で使用する場合、述べられた特徴、整数、ステップ、動作、要素、及び／又は構成要素の存在を指定するが、１つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び／又はそれらのグループの存在又は追加を除外しないことが更に理解されるであろう。
「～の場合（if）」という用語は、任意選択的に、文脈に応答して、「～とき（when）」若しくは「～とき（upon）」、又は「～と判定したことに応答して（in response to determining）」若しくは「～を検出したことに応答して（in response to detecting）」を意味すると解釈される。同様に、「～と判定された場合（if it is determined）」又は「［記載の条件又はイベント］が検出された場合（if [a stated condition or event] is detected）」という語句は、任意選択的に、文脈に応答して、「～と判定したとき（upon determining）」若しくは「～と判定したことに応答して（in response to determining）」、又は「［記載の条件又はイベント］を検出したとき（upon detecting [the stated condition or event]）」若しくは「［記載の条件又はイベント］を検出したことに応答して（in response to detecting [the stated condition or event］）」を意味すると解釈される。
電子デバイス、そのようなデバイス用のユーザインタフェース、及びそのようなデバイスを使用する関連するプロセスの実施形態が説明される。一部の実施形態では、デバイスは、ＰＤＡ機能及び／又は音楽プレーヤ機能などの他の機能も含む、携帯電話などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態としては、カリフォルニア州クパチーノのＡｐｐｌｅ Ｉｎｃ．からのｉＰｈｏｎｅ（登録商標）、ｉＰｏｄ Ｔｏｕｃｈ（登録商標）、及びｉＰａｄ（登録商標）のデバイスが挙げられるが、これらに限定されない。任意選択的に、タッチ感知面を有するラップトップ又はタブレットコンピュータ（例えば、タッチスクリーンディスプレイ及び／又はタッチパッド）などの他のポータブル電子デバイスも使用される。また、一部の実施形態では、デバイスはポータブル通信デバイスではなく、タッチ感知面を有するデスクトップコンピュータ（例えば、タッチスクリーンディスプレイ及び／又はタッチパッド）であることも理解されたい。
以下の論考では、ディスプレイ及びタッチ感知面を含む電子デバイスについて説明する。しかしながら、電子デバイスは、任意選択的に、物理キーボード、マウス、及び／又はジョイスティックなどの１つ以上の他の物理ユーザインタフェースデバイスを含むことを理解されたい。
デバイスは、典型的には、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、テレビ会議アプリケーション、電子メールアプリケーション、インスタントメッセージングアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション、及び／又はデジタルビデオプレーヤアプリケーションのうちの１つ以上などの様々なアプリケーションをサポートする。
本デバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも１つの共通の物理ユーザインタフェースデバイスを、任意選択的に使用する。タッチ感知面の１つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーションごとに、及び／又はそれぞれのアプリケーション内で、任意選択的に、調整及び／又は変更される。このように、デバイスの共通の物理アーキテクチャ（タッチ感知面など）は、任意選択的に、ユーザにとって直観的かつ透過的なユーザインタフェースを備える様々なアプリケーションをサポートする。
ここで、タッチ感知ディスプレイを備えるポータブルデバイスの実施形態に注意を向ける。図１Ａは、一部の実施形態による、タッチ感知ディスプレイシステム１１２を有するポータブル多機能デバイス１００を示すブロック図である。タッチ感知ディスプレイ１１２は、便宜上「タッチスクリーン」と呼ばれることがあり、「タッチ感知ディスプレイシステム」として知られている又は呼ばれることがある。デバイス１００は、メモリ１０２（任意選択的に、１つ以上のコンピュータ可読記憶媒体を含む）、メモリコントローラ１２２、１つ以上の処理ユニット（ＣＰＵ）１２０、周辺機器インタフェース１１８、ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロフォン１１３、入出力（Ｉ／Ｏ）サブシステム１０６、他の入力コントロールデバイス１１６、及び外部ポート１２４を含む。デバイス１００は、任意選択的に、１つ以上の光学センサ１６４を含む。デバイス１００は、任意選択的に、デバイス１００上の接触の強度を検出する１つ以上の接触強度センサ１６５（例えば、デバイス１００のタッチ感知ディスプレイシステム１１２などのタッチ感知面）を含む。デバイス１００は、任意選択的に、デバイス１００上で触知出力を生成する（例えばデバイス１００のタッチ感知ディスプレイシステム１１２又はデバイス３００のタッチパッド３５５などのタッチ感知面上で触知出力を生成する）１つ以上の触知出力生成器１６７を含む。これらの構成要素は、任意選択的に、１つ以上の通信バス又は信号線１０３を介して通信する。
本明細書及び特許請求の範囲で使用されるとき、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触（例えば、指接触）の力若しくは圧力（単位面積当たりの力）、又はタッチ感知面上の接触の力若しくは圧力に対する代替物（代用物）を指す。接触の強度は、少なくとも４つの別個の値を含み、より典型的には、数百の（例えば、少なくとも２５６の）別個の値を含む、値の範囲を有する。接触の強度は、任意選択的に、様々な手法、及び様々なセンサ又はセンサの組み合わせを使用して、判定（又は測定）される。例えば、タッチ感知面の下又はそれに隣接する１つ以上の力センサは、任意選択的に、タッチ感知面上の様々なポイントにおける力を測定するために使用される。一部の実装形態では、複数の力センサからの力測定値は、接触の推定される力を判定するために組み合わされる（例えば、加重平均）。同様に、スタイラスの感圧性先端部は、任意選択的に、タッチ感知面上のスタイラスの圧力を判定するために使用される。代替的に、タッチ感知面上で検出される接触エリアのサイズ及び／若しくはその変化、接触に近接するタッチ感知面の静電容量及び／若しくはその変化、並びに／又は、接触に近接するタッチ感知面の抵抗及び／若しくはその変化は、任意選択的に、タッチ感知面上の接触の力又は圧力の代替物として使用される。一部の実装形態では、接触の力又は圧力のための代替測定値は、強度閾値を超えているかどうかを判定するために直接使用される（例えば、強度閾値は、代替測定値に対応する単位で記述される）。一部の実装形態では、接触の力又は圧力に対する代替測定値は、推定される力又は圧力に変換され、推定される力又は圧力は、強度閾値を超えているかどうかを判定するために使用される（例えば、強度閾値は、圧力の単位で測定される圧力閾値である）。接触の強度をユーザ入力の属性として使用することにより、アフォーダンスを（例えば、タッチ感知ディスプレイ上に）表示するための、及び／又は、ユーザ入力を（例えば、タッチ感知ディスプレイ、タッチ感知面、又は、ノブ若しくはボタンなどの物理的／機械的制御部を介して）受信するための面積が制限されている、低減されたサイズのデバイス上で、通常であればユーザによってアクセスすることが不可能であり得る追加のデバイス機能への、ユーザのアクセスが可能となる。
本明細書及び特許請求の範囲で使用されるとき、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの以前の位置に対するそのデバイスの物理的変位、デバイスの構成要素（例えば、タッチ感知面）の、そのデバイスの別の構成要素（例えば、ハウジング）に対する物理的変位、又は、デバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面（例えば、ユーザの手の指、手のひら、又は他の部分）に接触している状況では、物理的変位によって生成された触知出力は、そのデバイス又はデバイスの構成要素の物理的特性の認識される変化に相当する触感として、ユーザによって解釈されることになる。例えば、タッチ感知面（例えば、タッチ感知ディスプレイ又はトラックパッド）の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として、任意選択的に解釈される。いくつかの場合、ユーザの動作により物理的に押された（例えば、変位された）タッチ感知面に関連付けられた物理アクチュエータボタンの移動がないときでさえ、ユーザは「ダウンクリック」又は「アップクリック」などの触感を感じる。別の例として、タッチ感知面の移動は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択的に解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知（例えば、「アップクリック」「ダウンクリック」、「粗さ」）に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な（又は、平均的な）ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。
デバイス１００は、ポータブル多機能デバイスの一例に過ぎず、デバイス１００は、任意選択的に、示されているものよりも多くの構成要素又は少ない構成要素を有するものであり、任意選択的に、２つ以上の構成要素を組み合わせるものであり、又は、任意選択的に、それらの構成要素の異なる構成若しくは配置を有するものであることを理解されたい。図１Ａに示す様々な構成要素は、１つ以上の信号処理回路及び／又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアの両方の組み合わせで実装される。
メモリ１０２は、任意選択的に、高速ランダムアクセスメモリを含み、また任意選択的に、１つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイスなどの不揮発性メモリを含む。メモリコントローラ１２２は、任意選択的に、デバイス１００の他の構成要素によるメモリ１０２へのアクセスを制御する。
周辺機器インタフェース１１８は、デバイスの入力及び出力周辺機器をＣＰＵ１２０及びメモリ１０２に結合するために使用することができる。１つ以上のプロセッサ１２０は、メモリ１０２に記憶された様々なソフトウェアプログラム及び／又は命令セットを動作させるか、又は実行して、デバイス１００のための様々な機能を実行し、データを処理する。一部の実施形態では、周辺機器インタフェース１１８、ＣＰＵ１２０、及びメモリコントローラ１２２は、任意選択的に、チップ１０４などの単一のチップ上で実装される。一部の他の実施形態では、それらは別々のチップ上に任意選択的に実装される。
ＲＦ（ｒａｄｉｏ ｆｒｅｑｕｅｎｃｙ）（無線周波数）回路１０８は、電磁信号とも呼ばれるＲＦ信号を送受信する。ＲＦ回路１０８は、電気信号を電磁信号に、又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。ＲＦ回路１０８は、任意選択的に、これらの機能を実行するための周知の回路を含み、それらの回路としては、限定するものではないが、アンテナシステム、ＲＦ送受信機、１つ以上の増幅器、同調器、１つ以上の発振器、デジタル信号プロセッサ、ＣＯＤＥＣチップセット、加入者識別モジュール（subscriber identity module、ＳＩＭ）カード、メモリなどが挙げられる。ＲＦ回路１０８は、任意選択的に、ワールドワイドウェブ（World Wide Web、ＷＷＷ）とも呼ばれるインターネット、イントラネット、並びに／又はセルラー電話ネットワーク、無線ローカルエリアネットワーク（local area network、ＬＡＮ）及び／若しくはメトロポリタンエリアネットワーク（metropolitan area network、ＭＡＮ）などの無線ネットワークなどのネットワークと、また他のデバイスと、無線通信によって通信する。ＲＦ回路１０８は、任意選択的に、短距離通信無線機などによって近距離通信（near field communication、ＮＦＣ）フィールドを検出するよく知られている回路を含む。無線通信は、任意選択的に、それだけに限定されるものではないが、動き通信用のグローバルシステム（Global System for Mobile Communications、ＧＳＭ）、拡張データＧＳＭ環境（Enhanced Data GSM Environment、ＥＤＧＥ）、高速ダウンリンクパケットアクセス（high-speed downlink packet access、ＨＳＤＰＡ）、高速アップリンクパケットアクセス（high-speed uplink packet access、ＨＳＵＰＡ）、エボリューションデータオンリ（Evolution,Data-Only、ＥＶ－ＤＯ）、ＨＳＰＡ、ＨＳＰＡ＋、デュアルセルＨＳＰＡ（Dual-Cell HSPA、ＤＣ－ＨＳＰＤＡ）、ロングタームエボリューション（long term evolution、ＬＴＥ）、近距離通信（ＮＦＣ）、広帯域符号分割多元接続（wideband code division multiple access、Ｗ－ＣＤＭＡ）、符号分割多元接続（code division multiple access、ＣＤＭＡ）、時分割多元接続（time division multiple access、ＴＤＭＡ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｂｌｕｅｔｏｏｔｈローエネルギー（Bluetooth Low Energy、ＢＴＬＥ（登録商標））、ワイヤレスフィデリティ（Wireless Fidelity、Ｗｉ－Ｆｉ（登録商標））（例えば、ＩＥＥＥ ８０２．１１ａ、ＩＥＥＥ ８０２．１１ｂ、ＩＥＥＥ ８０２．１１ｇ、ＩＥＥＥ ８０２．１１ｎ、及び／若しくはＩＥＥＥ ８０２．１１ａｃ）、ボイスオーバインターネットプロトコル（voice over Internet Protocol、ＶｏＩＰ）、Ｗｉ－ＭＡＸ（登録商標）、電子メール用プロトコル（例えば、インターネットメッセージアクセスプロトコル（Internet message access protocol、ＩＭＡＰ）及び／若しくはポストオフィスプロトコル（post office protocol、ＰＯＰ））、インスタントメッセージング（例えば、拡張可能なメッセージング及びプレゼンスプロトコル（extensible messaging and presence protocol、ＸＭＰＰ）、インスタントメッセージング及びプレゼンスレベレイジングエクステンションのためのセッション開始プロトコル（Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions、ＳＩＭＰＬＥ）、インスタントメッセージング及びプレゼンスサービス（Instant Messaging and Presence Service、ＩＭＰＳ））、並びに／若しくはショートメッセージサービス（Short Message Service、ＳＭＳ）、又は本明細書の出願日の時点でまだ開発されていない通信プロトコルを含む任意の他の適した通信プロトコルを含む、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
オーディオ回路１１０、スピーカ１１１、及びマイクロフォン１１３は、ユーザとデバイス１００との間のオーディオインタフェースを提供する。オーディオ回路１１０は、周辺機器インタフェース１１８からオーディオデータを受信し、このオーディオデータを電気信号に変換し、この電気信号をスピーカ１１１に送信する。スピーカ１１１は、電気信号を人間の可聴音波に変換する。また、オーディオ回路１１０は、マイクロフォン１１３によって音波から変換された電気信号を受信する。オーディオ回路１１０は、電気信号をオーディオデータに変換し、このオーディオデータを処理のために周辺機器インタフェース１１８に送信する。オーディオデータは、任意選択的に、周辺機器インタフェース１１８によって、メモリ１０２及び／若しくはＲＦ回路１０８から取得され、かつ／又はメモリ１０２及び／若しくはＲＦ回路１０８に送信される。一部の実施形態では、オーディオ回路１１０はヘッドセットジャック（例えば、図２の２１２）も備える。ヘッドセットジャックは、オーディオ回路１１０と、出力専用ヘッドホン又は出力（例えば片耳又は両耳用のヘッドホン）及び入力（例えばマイクロフォン）の両方を備えるヘッドセットなどの着脱可能なオーディオ入出力周辺機器との間のインタフェースを提供する。
Ｉ／Ｏサブシステム１０６は、タッチスクリーン１１２及び他の入力コントロールデバイス１１６などのデバイス１００上の入出力周辺機器を、周辺機器インタフェース１１８に結合する。Ｉ／Ｏサブシステム１０６は、任意選択的に、ディスプレイコントローラ１５６、光学センサコントローラ１５８、深度カメラコントローラ１６９、強度センサコントローラ１５９、触覚フィードバックコントローラ１６１、及び、他の入力デバイス若しくは制御デバイス用の１つ以上の入力コントローラ１６０を含む。１つ以上の入力コントローラ１６０は、他の入力コントロールデバイス１１６からの電気信号の受信／他の入力コントロールデバイス１１６への電気信号の送信を行う。他の入力コントロールデバイス１１６は、任意選択的に、物理ボタン（例えば、プッシュボタン、ロッカボタンなど）、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。一部の代替的な実施形態では、入力コントローラ（単数又は複数）１６０は、任意選択的に、キーボード、赤外線ポート、ＵＳＢポート、及びマウスなどのポインタデバイスのうちのいずれかに結合される（又はいずれにも結合されない）。１つ以上のボタン（例えば、図２の２０８）は、任意選択的に、スピーカ１１１及び／又はマイクロフォン１１３の音量コントロールのための上下ボタンを含む。１つ以上のボタンは、任意選択的に、プッシュボタン（例えば、図２の２０６）を含む。
全体として参照により本明細書に組み込まれている、２００５年１２月２３日出願の米国特許出願第１１／３２２，５４９号、「Ｕｎｌｏｃｋｉｎｇ ａ Ｄｅｖｉｃｅ ｂｙ Ｐｅｒｆｏｒｍｉｎｇ Ｇｅｓｔｕｒｅｓ ｏｎ ａｎ Ｕｎｌｏｃｋ Ｉｍａｇｅ」、米国特許第７，６５７，８４９号に記載されているように、プッシュボタンの素早い押圧は、任意選択的に、タッチスクリーン１１２のロックを係合解除し、又は任意選択的に、タッチスクリーン上のジェスチャを使用してデバイスをアンロックするプロセスを開始する。プッシュボタン（例えば、２０６）のより長い押圧は、任意選択的に、デバイス１００への電力をオン又はオフにする。ボタンのうちの１つ以上の機能性は、任意選択的に、ユーザによってカスタマイズ可能である。タッチスクリーン１１２は、仮想ボタン又はソフトボタン及び１つ以上のソフトキーボードを実装するために使用される。
タッチ感知ディスプレイ１１２は、デバイスとユーザとの間の入力インタフェース及び出力インタフェースを提供する。ディスプレイコントローラ１５６は、タッチスクリーン１１２からの電気信号の受信、及び／又はタッチスクリーン１１２への電気信号の送信を行う。タッチスクリーン１１２は、ユーザに対して視覚出力を表示する。この視覚出力は、グラフィック、テキスト、アイコン、ビデオ、及びそれらの任意の組み合わせ（総称して「グラフィック」）を任意選択的に含む。一部の実施形態では、視覚出力の一部又は全ては、任意選択的に、ユーザインタフェースオブジェクトに対応する。
タッチスクリーン１１２は、触覚及び／若しくは触知接触に基づくユーザからの入力を受け入れるタッチ感知面、センサ、又はセンサのセットを有する。タッチスクリーン１１２及びディスプレイコントローラ１５６は（メモリ１０２内の任意の関連モジュール及び／又は命令セットと共に）、タッチスクリーン１１２への接触（及びあらゆる接触の移動又は中断）を検出し、検出された接触をタッチスクリーン１１２上に表示されたユーザインタフェースオブジェクト（例えば、１つ以上のソフトキー、アイコン、ウェブページ又は画像）との対話に変換する。例示的な実施形態では、タッチスクリーン１１２とユーザとの間の接触点は、ユーザの指に対応する。
タッチスクリーン１１２は、任意選択的に、ＬＣＤ（液晶ディスプレイ）技術、ＬＰＤ（発光ポリマーディスプレイ）技術、又はＬＥＤ（発光ダイオード）技術を使用するが、他の実施形態では、他のディスプレイ技術も使用される。タッチスクリーン１１２及びディスプレイコントローラ１５６は、任意選択的に、それだけに限定されるものではないが、容量性、抵抗性、赤外線、及び表面音波の技術、並びにタッチスクリーン１１２との１つ以上の接触点を判定する他の近接センサアレイ又は他の要素を含む、現在知られている又は今後開発される複数のタッチ感知技術のうちのいずれかを使用して、接触及びそのあらゆる移動又は中断を検出する。例示的な実施形態では、カリフォルニア州クパチーノのＡｐｐｌｅ Ｉｎｃ．からのｉＰｈｏｎｅ（登録商標）及びｉＰｏｄ Ｔｏｕｃｈ（登録商標）に見られるものなどの、投影型相互静電容量感知技術が使用される。
タッチスクリーン１１２の一部の実施形態におけるタッチ感知ディスプレイは、任意選択的に、それぞれが全体として参照により本明細書に組み込まれている、米国特許第６，３２３，８４６号（Ｗｅｓｔｅｒｍａｎら）、第６，５７０，５５７号（Ｗｅｓｔｅｒｍａｎら）、及び／若しくは第６，６７７，９３２号（Ｗｅｓｔｅｒｍａｎ）、並びに／又は米国特許公開第２００２／００１５０２４Ａ１号に記載されているマルチタッチ感知タッチパッドに類似している。しかし、タッチスクリーン１１２はデバイス１００からの視覚出力を表示するのに対して、タッチ感知タッチパッドは視覚出力を提供しない。
タッチスクリーン１１２の一部の実施形態におけるタッチ感知ディスプレイは、（１）２００６年５月２日出願の米国特許出願第１１／３８１，３１３号、「Ｍｕｌｔｉｐｏｉｎｔ Ｔｏｕｃｈ Ｓｕｒｆａｃｅ Ｃｏｎｔｒｏｌｌｅｒ」、（２）２００４年５月６日出願の米国特許出願第１０／８４０，８６２号、「Ｍｕｌｔｉｐｏｉｎｔ Ｔｏｕｃｈｓｃｒｅｅｎ」、（３）２００４年７月３０日出願の米国特許出願第１０／９０３，９６４号、「Ｇｅｓｔｕｒｅｓ Ｆｏｒ Ｔｏｕｃｈ Ｓｅｎｓｉｔｉｖｅ Ｉｎｐｕｔ Ｄｅｖｉｃｅｓ」、（４）２００５年１月３１日出願の米国特許出願第１１／０４８，２６４号、「Ｇｅｓｔｕｒｅｓ Ｆｏｒ Ｔｏｕｃｈ Ｓｅｎｓｉｔｉｖｅ Ｉｎｐｕｔ Ｄｅｖｉｃｅｓ」、（５）２００５年１月１８日出願の米国特許出願第１１／０３８，５９０号、「Ｍｏｄｅ－Ｂａｓｅｄ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅｓ Ｆｏｒ Ｔｏｕｃｈ Ｓｅｎｓｉｔｉｖｅ Ｉｎｐｕｔ Ｄｅｖｉｃｅｓ」、（６）２００５年９月１６日出願の米国特許出願第１１／２２８，７５８号、「Ｖｉｒｔｕａｌ Ｉｎｐｕｔ Ｄｅｖｉｃｅ Ｐｌａｃｅｍｅｎｔ Ｏｎ Ａ Ｔｏｕｃｈ Ｓｃｒｅｅｎ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ」、（７）２００５年９月１６日出願の米国特許出願第１１／２２８，７００号、「Ｏｐｅｒａｔｉｏｎ Ｏｆ Ａ Ｃｏｍｐｕｔｅｒ Ｗｉｔｈ Ａ Ｔｏｕｃｈ Ｓｃｒｅｅｎ Ｉｎｔｅｒｆａｃｅ」、（８）２００５年９月１６日出願の米国特許出願第１１／２２８，７３７号、「Ａｃｔｉｖａｔｉｎｇ Ｖｉｒｔｕａｌ Ｋｅｙｓ Ｏｆ Ａ Ｔｏｕｃｈ－Ｓｃｒｅｅｎ Ｖｉｒｔｕａｌ Ｋｅｙｂｏａｒｄ」、及び（９）２００６年３月３日出願の米国特許出願第１１／３６７，７４９号、「Ｍｕｌｔｉ－Ｆｕｎｃｔｉｏｎａｌ Ｈａｎｄ－Ｈｅｌｄ Ｄｅｖｉｃｅ」という出願に記載されている。これらの出願は全て、全体として参照により本明細書に組み込まれている。
タッチスクリーン１１２は、任意選択的に、１００ｄｐｉを超えるビデオ解像度を有する。一部の実施形態では、タッチスクリーンは、約１６０ｄｐｉのビデオ解像度を有する。ユーザは、任意選択的に、スタイラス、指などの任意の適した物体又は付属物を使用して、タッチスクリーン１１２に接触する。一部の実施形態では、ユーザインタフェースは、指ベースの接触及びジェスチャを主に扱うように設計されるが、これは、タッチスクリーン上の指の接触面積がより大きいため、スタイラスベースの入力ほど精密でない可能性がある。一部の実施形態では、デバイスは、粗い指ベースの入力を、ユーザによって所望されているアクションを実行するための、正確なポインタ／カーソルの位置又はコマンドに変換する。
一部の実施形態では、タッチスクリーンに加えて、デバイス１００は、任意選択的に、特定の機能をアクティブ化又は非アクティブ化するためのタッチパッドを含む。一部の実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知エリアである。タッチパッドは、任意選択的に、タッチスクリーン１１２又はタッチスクリーンによって形成されるタッチ感知面の拡張部とは別個のタッチ感知面である。
デバイス１００は、様々な構成要素に電力を供給する電力システム１６２も含む。電力システム１６２は、任意選択的に、電力管理システム、１つ以上の電源（例えば、バッテリ、交流（ＡＣ））、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ（例えば、発光ダイオード（ＬＥＤ））、並びにポータブルデバイス内での電力の生成、管理、及び分配に関連付けられた任意の他の構成要素を含む。
また、デバイス１００は、任意選択的に、１つ以上の光学センサ１６４を含む。図１Ａは、Ｉ／Ｏサブシステム１０６内の光学センサコントローラ１５８に結合された光学センサを示す。光学センサ１６４は、任意選択的に、電荷結合デバイス（charge-coupled device、ＣＣＤ）又は相補的金属酸化物半導体（complementary metal-oxide semiconductor、ＣＭＯＳ）フォトトランジスタを含む。光学センサ１６４は、１つ以上のレンズを通って投影された環境からの光を受信し、その光を、画像を表すデータに変換する。光学センサ１６４は、撮像モジュール１４３（カメラモジュールとも呼ばれる）と連動して、任意選択的に、静止画像又はビデオをキャプチャする。一部の実施形態では、光学センサは、デバイスの前面にあるタッチスクリーンディスプレイ１１２とは反対のデバイス１００の裏面に位置するので、タッチスクリーンディスプレイは、静止画像及び／又はビデオ画像の取得のためのビューファインダとしての使用が可能になる。一部の実施形態では、光学センサは、デバイスの前面に位置するので、ユーザは他のテレビ会議参加者をタッチスクリーンディスプレイ上で閲覧しながら、ユーザの画像は任意選択的に、テレビ会議のために取得される。一部の実施形態では、光学センサ１６４の位置は、ユーザによって（例えば、デバイスハウジング内のレンズ及びセンサを回転させることによって）変更することができ、したがって単一の光学センサ１６４が、タッチスクリーンディスプレイと共に、テレビ会議用にも静止画像及び／又はビデオ画像の取得のためにも使用される。
デバイス１００はまた、任意選択的に、１つ以上の深度カメラセンサ１７５を含む。図１Ａは、Ｉ／Ｏサブシステム１０６内の深度カメラコントローラ１６９に結合された深度カメラセンサを示す。深度カメラセンサ１７５は、環境からデータを受信して、視点（例えば、深度カメラセンサ）からのシーン内のオブジェクト（例えば、顔面）の３次元モデルを作成する。一部の実施形態では、撮像モジュール１４３（カメラモジュールとも呼ばれるもの）と連携して、深度カメラセンサ１７５は、任意選択的に、撮像モジュール１４３によってキャプチャされた画像の種々の部分の深度マップを決定するために使用される。一部の実施形態では、デバイス１００の前面に深度カメラセンサが位置しているので、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で閲覧しながら、深度マップデータを有する自撮り画像をキャプチャするために、深度情報を有するユーザの画像が、任意選択的に、テレビ会議のために取得される。一部の実施形態では、深度カメラセンサ１７５は、デバイスの背面に、あるいはデバイス１００の背面及び前面に位置している。一部の実施形態では、深度カメラセンサ１７５の位置は、ユーザによって（例えば、デバイスハウジング内のレンズ及びセンサを回転させることによって）変更することができ、したがって深度カメラセンサ１７５が、タッチスクリーンディスプレイと共に、テレビ会議用にも静止画像及び／又はビデオ画像の取得のためにも使用される。
デバイス１００は、任意選択で、１つ以上の接触強度センサ１６５も含む。図１Ａは、Ｉ／Ｏサブシステム１０６内の強度センサコントローラ１５９に結合された接触強度センサを示す。接触強度センサ１６５は、１つ以上のピエゾ抵抗ひずみゲージ、静電容量式力センサ、電気力センサ、圧電力センサ、光学力センサ、容量式タッチ感知面、又は他の強度センサ（例えば、タッチ感知面上の接触の力（又は圧力）を測定するために使用するセンサ）を、任意選択的に含む。接触強度センサ１６５は、環境から接触強度情報（例えば、圧力情報、又は圧力情報の代用物）を受信する。一部の実施形態では、少なくとも１つの接触強度センサは、タッチ感知面（例えばタッチ感知ディスプレイシステム１１２）と並置される、又はそれに近接される。一部の実施形態では、少なくとも１つの接触強度センサが、デバイス１００の前面に配置されたタッチスクリーンディスプレイ１１２の反対側である、デバイス１００の背面に位置している。
また、デバイス１００は、任意選択的に、１つ以上の近接センサ１６６を含む。図１Ａは、周辺機器インタフェース１１８に結合された近接センサ１６６を示す。代わりに、近接センサ１６６は、任意選択的に、Ｉ／Ｏサブシステム１０６内の入力コントローラ１６０に結合される。近接センサ１６６は、任意選択的に、全体として参照により本明細書に組み込まれている、米国特許出願第１１／２４１，８３９号、「Ｐｒｏｘｉｍｉｔｙ Ｄｅｔｅｃｔｏｒ Ｉｎ Ｈａｎｄｈｅｌｄ Ｄｅｖｉｃｅ」、第１１／２４０，７８８号、「Ｐｒｏｘｉｍｉｔｙ Ｄｅｔｅｃｔｏｒ Ｉｎ Ｈａｎｄｈｅｌｄ Ｄｅｖｉｃｅ」第１１／６２０，７０２号、「Ｕｓｉｎｇ Ａｍｂｉｅｎｔ Ｌｉｇｈｔ Ｓｅｎｓｏｒ Ｔｏ Ａｕｇｍｅｎｔ Ｐｒｏｘｉｍｉｔｙ Ｓｅｎｓｏｒ Ｏｕｔｐｕｔ」、第１１／５８６，８６２号、「Ａｕｔｏｍａｔｅｄ Ｒｅｓｐｏｎｓｅ Ｔｏ Ａｎｄ Ｓｅｎｓｉｎｇ Ｏｆ Ｕｓｅｒ Ａｃｔｉｖｉｔｙ Ｉｎ Ｐｏｒｔａｂｌｅ Ｄｅｖｉｃｅｓ」、及び同第１１／６３８，２５１号、「Ｍｅｔｈｏｄｓ Ａｎｄ Ｓｙｓｔｅｍｓ Ｆｏｒ Ａｕｔｏｍａｔｉｃ Ｃｏｎｆｉｇｕｒａｔｉｏｎ Ｏｆ Ｐｅｒｉｐｈｅｒａｌｓ」で説明されるように機能するものであり、これらの出願は、全体が参照により本明細書に組み込まれる。一部の実施形態では、多機能デバイスが、ユーザの耳の近くに配置される場合（例えば、ユーザが電話通話を行っている場合）、近接センサは、タッチスクリーン１１２をオフにして無効化する。
デバイス１００はまた、任意選択的に、１つ以上の触知出力生成器１６７を含む。図１Ａは、Ｉ／Ｏサブシステム１０６内の触覚フィードバックコントローラ１６１に結合された触知出力生成器を示す。触知出力生成器１６７は、任意選択的に、スピーカ若しくは他のオーディオ構成要素などの１つ以上の電気音響デバイス、及び／又はモータ、ソレノイド、電気活性ポリマー、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素（例えば、デバイス上で電気信号を触知出力に変換する構成要素）などのエネルギを直線の動きに変換する電気機械デバイスを含む。接触強度センサ１６５は、触覚フィードバックモジュール１３３から触知フィードバック生成命令を受信し、デバイス１００のユーザが感知することが可能な触知出力をデバイス１００上に生成する。一部の実施形態では、少なくとも１つの触知出力生成器は、タッチ感知面（例えば、タッチ感知ディスプレイシステム１１２）と一緒に並べて配置されているか、又はそれに近接しており、任意選択的に、タッチ感知面を垂直方向（例えば、デバイス１００の表面の内／外）に、又は水平方向（例えば、デバイス１００の表面と同じ平面内の前後）に動かすことによって、触知出力を生成する。一部の実施形態では、少なくとも１つの触知出力生成器センサが、デバイス１００の前面に配置されたタッチスクリーンディスプレイ１１２の反対側である、デバイス１００の背面に位置している。
また、デバイス１００は、任意選択的に、１つ以上の加速度計１６８を含む。図１Ａは、周辺機器インタフェース１１８に結合された加速度計１６８を示す。代わりに、加速度計１６８は、任意選択的に、Ｉ／Ｏサブシステム１０６内の入力コントローラ１６０に結合される。加速度計１６８は、任意選択的に、どちらも全体として参照により本明細書に組み込まれている、米国特許公開第２００５０１９００５９号、「Ａｃｃｅｌｅｒａｔｉｏｎ－ｂａｓｅｄ Ｔｈｅｆｔ Ｄｅｔｅｃｔｉｏｎ Ｓｙｓｔｅｍ ｆｏｒ Ｐｏｒｔａｂｌｅ Ｅｌｅｃｔｒｏｎｉｃ Ｄｅｖｉｃｅｓ」、及び米国特許公開第２００６００１７６９２号、「Ｍｅｔｈｏｄｓ Ａｎｄ Ａｐｐａｒａｔｕｓｅｓ Ｆｏｒ Ｏｐｅｒａｔｉｎｇ Ａ Ｐｏｒｔａｂｌｅ Ｄｅｖｉｃｅ Ｂａｓｅｄ Ｏｎ Ａｎ Ａｃｃｅｌｅｒｏｍｅｔｅｒ」に記載されているように機能する。一部の実施形態では、情報は、１つ以上の加速度計から受信したデータの分析に基づいて、ポートレートビュー又はランドスケープビューでタッチスクリーンディスプレイ上に表示される。デバイス１００は、加速度計（単数又は複数）１６８に加えて、磁気計並びにデバイス１００の場所及び向き（例えば、縦方向又は横方向）に関する情報を取得するためのＧＰＳ（又はＧＬＯＮＡＳＳ又は他のグローバルナビゲーションシステム）受信機を任意選択的に含む。
一部の実施形態では、メモリ１０２内に記憶されているソフトウェア構成要素は、オペレーティングシステム１２６、通信モジュール（又は命令セット）１２８、接触／動きモジュール（又は命令セット）１３０、グラフィックモジュール（又は命令セット）１３２、テキスト入力モジュール（又は命令セット）１３４、全地球測位システム（Global Positioning System、ＧＰＳ）モジュール（又は命令セット）１３５、及びアプリケーション（又は命令セット）１３６を含む。更に、一部の実施形態では、メモリ１０２（図１Ａ）又はメモリ３７０（図３）は、図１Ａ及び図３に示すように、デバイス／グローバル内部状態１５７を記憶する。デバイス／グローバル内部状態１５７は、現在アクティブ状態のアプリケーションがある場合に、どのアプリケーションがアクティブであるかを示すアクティブアプリケーション状態、どのアプリケーション、ビュー、又は他の情報がタッチスクリーンディスプレイ１１２の様々な領域を占めているかを示す表示状態、デバイスの様々なセンサ及び入力コントロールデバイス１１６から取得した情報を含むセンサ状態、並びにデバイスの場所及び／又は姿勢に関する位置情報、のうちの１つ以上を含む。
オペレーティングシステム１２６（例えば、Ｄａｒｗｉｎ（登録商標）、ＲＴＸＣ（登録商標）、ＬＩＮＵＸ（登録商標）、ＵＮＩＸ（登録商標）、ＯＳ Ｘ（登録商標）、ｉＯＳ（登録商標）、ＷＩＮＤＯＷＳ（登録商標）、又はＶｘＷｏｒｋｓ（登録商標）などの組み込みオペレーティングシステム）は、通常のシステムタスク（例えば、メモリ管理、記憶デバイスの制御、電力管理など）を制御及び管理する様々なソフトウェア構成要素及び／又はドライバを含み、様々なハードウェア構成要素とソフトウェア構成要素との間の通信を容易にする。
通信モジュール１２８は、１つ以上の外部ポート１２４を介して他のデバイスとの通信を容易にし、ＲＦ回路１０８及び／又は外部ポート１２４が受信したデータを処理するための様々なソフトウェア構成要素をも含む。外部ポート１２４（例えばユニバーサルシリアルバス（ＵＳＢ）、ＦＩＲＥＷＩＲＥ（登録商標）など）は、直接的に、又はネットワーク（例えばインターネット、無線ＬＡＮなど）を介して間接的に、他のデバイスに結合されるように適合されている。一部の実施形態では、外部ポートは、ｉＰｏｄ（登録商標）（Ａｐｐｌｅ Ｉｎｃ．の商標）デバイス上で使用される３０ピンコネクタと同じ若しくは類似であり、かつ／又はそれに適合しているマルチピン（例えば、３０ピン）コネクタである。
接触／動きモジュール１３０は、任意選択的に、タッチスクリーン１１２（ディスプレイコントローラ１５６と連動して）及び他のタッチ感知デバイス（例えば、タッチパッド又は物理クリックホイール）との接触を検出する。接触／動きモジュール１３０は、接触が生じたかどうかを判定すること（例えば、指を下ろすイベントを検出すること）、接触の強度（例えば、接触の力若しくは圧力、又は接触の力若しくは圧力の代替物）を判定すること、接触の移動が存在するかどうかを判定し、タッチ感知面を横断する移動を追跡すること（例えば、指をドラッグする１つ以上のイベントを検出すること）、及び接触が中止したかどうかを判定すること（例えば、指を上げるイベント又は接触の中止を検出すること）などの、接触の検出に関する様々な動作を実行するための、様々なソフトウェア構成要素を含む。接触／動きモジュール１３０は、タッチ感知面から接触データを受信する。一連の接触データによって表される、接触点の移動を判定することは、任意選択的に、接触点の速さ（大きさ）、速度（大きさ及び方向）、及び／又は加速度（大きさ及び／又は方向の変化）を判定することを含む。これらの動作は、任意選択的に、単一の接触（例えば、１本の指の接触）又は複数の同時接触（例えば、「マルチタッチ」／複数の指の接触）に適用される。一部の実施形態では、接触／動きモジュール１３０及びディスプレイコントローラ１５６は、タッチパッド上の接触を検出する。
一部の実施形態では、接触／動きモジュール１３０は、ユーザによって動作が実行されたかどうかを判定するための（例えば、ユーザがアイコン上で「クリック」したかどうかを判定するための）、１つ以上の強度閾値のセットを使用する。一部の実施形態では、強度閾値の少なくとも１つのサブセットが、ソフトウェアパラメータに従って判定される（例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって判定されるのではなく、デバイス１００の物理ハードウェアを変化させることなく調整することができる）。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、トラックパッド又はタッチスクリーンディスプレイハードウェアを変化させることなく、広範囲の既定閾値のうちのいずれかに設定することができる。加えて、一部の実装形態では、デバイスのユーザは、強度閾値のセットのうちの１つ以上を調整するソフトウェア設定が提供される（例えば、システムレベルのクリック「強度」パラメータによって、個々の強度閾値を調整すること、及び／又は複数の強度閾値を一度に調整することによる）。
接触／動きモジュール１３０は、任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターンを有する（例えば検出される接触の動き、タイミング、及び／又は強度が異なる）。したがって、ジェスチャは、任意選択的に、特定の接触パターンを検出することによって検出される。例えば、指タップジェスチャを検出することは、指を下ろすイベントを検出し、それに続いて指を下ろすイベントと同じ位置（又は実質的に同じ位置）（例えば、アイコンの位置）で指を上げる（リフトオフ）イベントを検出することを含む。別の例として、タッチ感知面上で指スワイプジェスチャを検出することは、指を下ろすイベントを検出し、それに続いて１つ以上の指をドラッグするイベントを検出し、その後それに続いて指を上げる（リフトオフ）イベントを検出することを含む。
グラフィックモジュール１３２は、表示されるグラフィックの視覚的効果（例えば、輝度、透明度、彩度、コントラスト、又は他の視覚特性）を変更するための構成要素を含めた、タッチスクリーン１１２又は他のディスプレイ上にグラフィックをレンダリングして表示するための、さまざまな既知のソフトウェア構成要素を含む。本明細書で使用されるとき、用語「グラフィック」は、それだけに限定されるものではないが、テキスト、ウェブページ、アイコン（ソフトキーを含むユーザインタフェースオブジェクトなど）、デジタル画像、ビデオ、アニメーションなどを含む、ユーザに表示することができる任意のオブジェクトを含む。
一部の実施形態では、グラフィックモジュール１３２は、使用されるグラフィックを表すデータを記憶する。各グラフィックには、任意選択的に、対応するコードが割り当てられる。グラフィックモジュール１３２は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィック特性データと共に、表示されることとなるグラフィックを指定する１つ以上のコードを受信し、次にディスプレイコントローラ１５６に出力するためのスクリーン画像データを生成する。
触覚フィードバックモジュール１３３は、デバイス１００とのユーザ対話に応答して、デバイス１００上の１つ以上の場所で触知出力を生成するために、触知出力生成器（単数又は複数）１６７によって使用される命令を生成するための、様々なソフトウェア構成要素を含む。
テキスト入力モジュール１３４は、任意選択で、グラフィックモジュール１３２の構成要素であり、様々なアプリケーション（例えば、連絡先１３７、電子メール１４０、ＩＭ１４１、ブラウザ１４７、及びテキスト入力を必要とする任意の他のアプリケーション）でテキストを入力するためのソフトキーボードを提供する。
ＧＰＳモジュール１３５は、デバイスの場所を判定し、この情報を様々なアプリケーションで使用するために（例えば、位置に基づくダイヤル発呼で使用するために電話１３８へ、画像／ビデオのメタデータとしてカメラ１４３へ、並びに、気象ウィジェット、地域のイエローページウィジェット、及び地図／ナビゲーションウィジェットなどの、場所に基づくサービスを提供するアプリケーションへ）提供する。
アプリケーション１３６は、任意選択的に、以下のモジュール（又は命令セット）又はそれらのサブセット若しくはスーパーセットを含む。
●連絡先モジュール１３７（アドレス帳又は連絡先リストと呼ばれることもある）、
●電話モジュール１３８、
●テレビ会議モジュール１３９、
●電子メールクライアントモジュール１４０、
●インスタントメッセージング（ＩＭ）モジュール１４１、
●トレーニングサポートモジュール１４２、
●静止画像及び／又はビデオ画像用のカメラモジュール１４３、
●画像管理モジュール１４４、
●ビデオプレーヤモジュール、
●音楽プレーヤモジュール、
●ブラウザモジュール１４７、
●カレンダモジュール１４８、
●任意選択的に気象ウィジェット１４９－１、株式ウィジェット１４９－２、計算機ウィジェット１４９－３、アラーム時計ウィジェット１４９－４、辞書ウィジェット１４９－５、及びユーザによって入手された他のウィジェット、並びにユーザ作成ウィジェット１４９－６のうちの１つ以上を含むウィジェットモジュール１４９、
●ユーザ作成ウィジェット１４９－６を作成するためのウィジェットクリエータモジュール１５０、
●検索モジュール１５１、
●ビデオプレーヤモジュール及び音楽プレーヤモジュールを一体化したビデオ及び音楽プレーヤモジュール１５２、
●メモモジュール１５３、
●地図モジュール１５４、並びに／又は、
●オンラインビデオモジュール１５５。
任意選択的にメモリ１０２に記憶される他のアプリケーション１３６の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、ＪＡＶＡ（登録商標）対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、連絡先モジュール１３７は、任意選択的に、アドレス帳に名前（単数又は複数）を追加すること、アドレス帳から名前（単数又は複数）を削除すること、電話番号（単数又は複数）、電子メールアドレス（単数又は複数）、実際の住所（単数又は複数）、又は他の情報を名前に関連付けること、画像を名前に関連付けること、名前を分類して並べ替えること、電話番号又は電子メールアドレスを提供して、電話１３８、テレビ会議モジュール１３９、電子メール１４０、又はＩＭ１４１による通信を開始及び／又は促進することなどを含めて、アドレス帳又は連絡先リスト（例えば、メモリ１０２又はメモリ３７０内の連絡先モジュール１３７のアプリケーション内部状態１９２内に記憶される）を管理するために使用される。
ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロフォン１１３、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、電話モジュール１３８は、任意選択的に、電話番号に対応する文字シーケンスの入力、連絡先モジュール１３７内の１つ以上の電話番号へのアクセス、入力された電話番号の修正、それぞれの電話番号のダイヤル、会話の実施、会話が終了したときの通話停止又はハングアップのために使用される。前述したように、無線通信は、任意選択的に、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロフォン１１３、タッチスクリーン１１２、ディスプレイコントローラ１５６、光学センサ１６４、光学センサコントローラ１５８、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、連絡先モジュール１３７、及び電話モジュール１３８と連動して、テレビ会議モジュール１３９は、ユーザ命令に従ってユーザと１人以上の他の参加者との間のテレビ会議を開始、実行、及び終了するための実行可能な命令を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、電子メールクライアントモジュール１４０は、ユーザ命令に応答して電子メールを作成、送信、受信、及び管理するための実行可能な命令を含む。画像管理モジュール１４４と連動して、電子メールクライアントモジュール１４０は、カメラモジュール１４３で撮影された静止画像又はビデオ画像を有する電子メールの作成及び送信を非常に容易にする。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、インスタントメッセージングモジュール１４１は、インスタントメッセージに対応する文字シーケンスの入力、以前に入力された文字の修正、それぞれのインスタントメッセージの送信（例えば、電話通信ベースのインスタントメッセージ向けのショートメッセージサービス（Short Message Service、ＳＭＳ）若しくはマルチメディアメッセージサービス（Multimedia Message Service、ＭＭＳ）プロトコル、又はインターネットベースのインスタントメッセージ向けのＸＭＰＰ、ＳＩＭＰＬＥ、若しくはＩＭＰＳを使用する）、インスタントメッセージの受信、及び受信したインスタントメッセージの閲覧のための実行可能な命令を含む。一部の実施形態では、送信及び／又は受信されるインスタントメッセージは、任意選択的に、ＭＭＳ及び／又は拡張メッセージングサービス（Enhanced Messaging Service、ＥＭＳ）でサポートされるグラフィック、写真、オーディオファイル、ビデオファイル、及び／又は他の添付ファイルを含む。本明細書では、「インスタントメッセージング」とは、電話通信ベースのメッセージ（例えば、ＳＭＳ又はＭＭＳを使用して送信されるメッセージ）と、インターネットベースのメッセージ（例えば、ＸＭＰＰ、ＳＩＭＰＬＥ、又はＩＭＰＳを使用して送信されるメッセージ）との両方を指す。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ＧＰＳモジュール１３５、地図モジュール１５４、及び音楽プレーヤモジュールと連動して、トレーニングサポートモジュール１４２は、トレーニング（例えば、時間、距離、及び／又はカロリー燃焼目標を有する）を作成し、トレーニングセンサ（スポーツデバイス）と通信し、トレーニングセンサデータを受信し、トレーニングをモニタするために使用されるセンサを較正し、トレーニングのための音楽を選択及び再生し、並びに、トレーニングデータを表示、記憶、及び送信するための実行可能な命令を含む。
タッチスクリーン１１２、ディスプレイコントローラ１５６、光学センサ（単数又は複数）１６４、光学センサコントローラ１５８、接触／動きモジュール１３０、グラフィックモジュール１３２、及び画像管理モジュール１４４と連動して、カメラモジュール１４３は、静止画像若しくはビデオ（ビデオストリームを含む）のキャプチャ及びメモリ１０２内への記憶、静止画像若しくはビデオの特性の修正、又はメモリ１０２からの静止画像若しくはビデオの削除のための実行可能な命令を含む。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びカメラモジュール１４３と連動して、画像管理モジュール１４４は、静止画像及び／又はビデオ画像の配置、修正（例えば、編集）、あるいはその他の操作、ラベル付け、削除、提示（例えば、デジタルスライドショー又はアルバムにおける）、及び記憶のための実行可能な命令を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、ブラウザモジュール１４７は、ウェブページ又はその一部分、並びにウェブページにリンクされた添付ファイル及び他のファイルの検索、リンク、受信、及び表示を含めて、ユーザ命令に従ってインターネットをブラウジングするための実行可能な命令を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、電子メールクライアントモジュール１４０、及びブラウザモジュール１４７と連携して、カレンダモジュール１４８は、ユーザの指示に従い、カレンダ及びカレンダに関連付けられたデータ（例えば、カレンダ項目、ｔｏ ｄｏリストなど）を作成し、表示し、変更し、記憶するための実行可能な命令を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びブラウザモジュール１４７と連動して、ウィジェットモジュール１４９は、任意選択的にユーザによってダウンロード及び使用されるミニアプリケーション（例えば、気象ウィジェット１４９－１、株式ウィジェット１４９－２、計算機ウィジェット１４９－３、アラーム時計ウィジェット１４９－４、及び辞書ウィジェット１４９－５）、又はユーザによって作成されるミニアプリケーション（例えば、ユーザ作成ウィジェット１４９－６）である。一部の実施形態では、ウィジェットは、ＨＴＭＬ（Ｈｙｐｅｒｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ、ハイパーテキストマークアップ言語）ファイル、ＣＳＳ（Ｃａｓｃａｄｉｎｇ Ｓｔｙｌｅ Ｓｈｅｅｔｓ、カスケーディングスタイルシート）ファイル、及びＪａｖａＳｃｒｉｐｔファイルを含む。一部の実施形態では、ウィジェットは、ＸＭＬ（Ｅｘｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ、拡張可能マークアップ言語）ファイル及びＪａｖａＳｃｒｉｐｔファイル（例えば、Ｙａｈｏｏ！ウィジェット）を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びブラウザモジュール１４７と連動して、ウィジェットクリエータモジュール１５０は、任意選択的に、ウィジェットを作成する（例えば、ウェブページのユーザ指定部分をウィジェットにする）ために、ユーザによって使用される。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、検索モジュール１５１は、ユーザ命令に従って１つ以上の検索基準（例えば、１つ以上のユーザ指定検索語）に一致するメモリ１０２内の文字、音楽、サウンド、画像、ビデオ、及び／又は他のファイルを検索するための実行可能な命令を含む。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０、スピーカ１１１、ＲＦ回路１０８、及びブラウザモジュール１４７と連携して、ビデオ及び音楽プレーヤモジュール１５２は、ＭＰ３又はＡＡＣファイルなどの１つ以上のファイル形式で記憶された録音済みの音楽及び他のサウンドファイルをユーザがダウンロード及び再生できるようにする実行可能な命令、並びにビデオを（タッチスクリーン１１２上又は外部ポート１２４を介して接続された外部のディスプレイ上に）表示、提示、又は別の方法で再生するための実行可能な命令を含む。一部の実施形態では、デバイス１００は、任意選択的に、ｉＰｏｄ（Ａｐｐｌｅ Ｉｎｃ．の商標）などのＭＰ３プレーヤの機能を含む。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４と連動して、メモモジュール１５３は、ユーザ命令に従ってメモ、やることリストなどを作成及び管理するための実行可能な命令を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ＧＰＳモジュール１３５、及びブラウザモジュール１４７と連動して、地図モジュール１５４は、任意選択的に、ユーザ命令に従って、地図及び地図に関連付けられたデータ（例えば、運転方向、特定の場所又はその付近の店舗及び他の対象地点に関するデータ、並びに他の場所ベースのデータ）を受信、表示、修正、及び記憶するために使用される。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触／動きモジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０、スピーカ１１１、ＲＦ回路１０８、テキスト入力モジュール１３４、電子メールクライアントモジュール１４０、及びブラウザモジュール１４７と連動して、オンラインビデオモジュール１５５は、ユーザが特定のオンラインビデオへのアクセス、特定のオンラインビデオのブラウジング、受信（例えば、ストリーミング及び／又はダウンロードによる）、再生（例えば、タッチスクリーン上又は外部ポート１２４を介して接続された外部ディスプレイ上）、特定のオンラインビデオへのリンクを有する電子メールの送信、並びにＨ．２６４などの１つ以上のファイル形式のオンラインビデオの他の管理を行うことを可能にする命令を含む。一部の実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール１４０ではなく、インスタントメッセージングモジュール１４１が使用される。オンラインビデオアプリケーションについての追加の説明は、その内容が全体として参照により本明細書に組み込まれている、２００７年６月２０日出願の米国仮特許出願第６０／９３６，５６２号、「Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｆｕｎｃｔｉｏｎ Ｄｅｖｉｃｅ，Ｍｅｔｈｏｄ，ａｎｄ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ ｆｏｒ Ｐｌａｙｉｎｇ Ｏｎｌｉｎｅ Ｖｉｄｅｏｓ」、及び２００７年１２月３１日出願の米国特許出願第１１／９６８，０６７号、「Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｆｕｎｃｔｉｏｎ Ｄｅｖｉｃｅ，Ｍｅｔｈｏｄ，ａｎｄ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ ｆｏｒ Ｐｌａｙｉｎｇ Ｏｎｌｉｎｅ Ｖｉｄｅｏｓ」において見ることができる。
上記で特定したモジュール及びアプリケーションはそれぞれ、前述した１つ以上の機能及び本出願に記載する方法（例えば、本明細書に記載するコンピュータにより実装される方法及び他の情報処理方法）を実行する実行可能な命令のセットに対応する。これらのモジュール（例えば、命令セット）は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、様々な実施形態において、これらのモジュールの様々なサブセットが、任意選択的に、組み合わされ、又は他の形で再構成される。例えば、ビデオプレーヤモジュールは、任意選択的に、音楽プレーヤモジュールと組み合わされて、単一のモジュール（例えば、図１Ａのビデオ及び音楽プレーヤモジュール１５２）にされる。一部の実施形態では、メモリ１０２は、任意選択的に、上記で特定したモジュール及びデータ構造のサブセットを記憶する。更に、メモリ１０２は、上記で説明されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
一部の実施形態では、デバイス１００は、そのデバイスにおける所定の機能のセットの動作がタッチスクリーン及び／又はタッチパッドのみを通じて実行されるデバイスである。デバイス１００が動作するための主要な入力コントロールデバイスとしてタッチスクリーン及び／又はタッチパッドを使用することにより、任意選択的に、デバイス１００上の物理的な入力コントロールデバイス（プッシュボタン、ダイヤルなど）の数が削減される。
タッチスクリーン及び／又はタッチパッドを通じてのみ実行される既定の機能のセットは、任意選択的に、ユーザインタフェース間のナビゲーションを含む。一部の実施形態では、タッチパッドは、ユーザによってタッチされたときに、デバイス１００上に表示される任意のユーザインタフェースから、メインメニュー、ホームメニュー、又はルートメニューにデバイス１００をナビゲートする。このような実施形態では、「メニューボタン」は、タッチパッドを使用して実装される。一部の他の実施形態では、メニューボタンは、タッチパッドではなく、物理プッシュボタン又はその他の物理入力コントロールデバイスである。
図１Ｂは、一部の実施形態による、イベント処理のための例示的な構成要素を示すブロック図である。一部の実施形態では、メモリ１０２（図１Ａ）又は３７０（図３）は、イベントソータ１７０（例えば、オペレーティングシステム１２６内）と、それぞれのアプリケーション１３６－１（例えば、前述のアプリケーション１３７～１５１、１５５、３８０～３９０のうちのいずれか）とを含む。
イベントソータ１７０は、イベント情報を受信し、イベント情報が配信されるアプリケーション１３６－１、及びアプリケーション１３６－１のアプリケーションビュー１９１を判定する。イベントソータ１７０は、イベントモニタ１７１及びイベントディスパッチャモジュール１７４を含む。一部の実施形態では、アプリケーション１３６－１は、アプリケーションがアクティブ又は実行中のとき、タッチ感知ディスプレイ１１２で上に表示される現在のアプリケーションビュー（単数又は複数）を示す、アプリケーション内部状態１９２を含む。一部の実施形態では、デバイス／グローバル内部状態１５７は、いずれのアプリケーションが現在アクティブであるかを判定するために、イベントソータ１７０によって使用され、アプリケーション内部状態１９２は、イベント情報の配信先となるアプリケーションビュー１９１を決定するために、イベントソータ１７０によって使用される。
一部の実施形態では、アプリケーション内部状態１９２は、アプリケーション１３６－１が実行を再開するときに使用すべき再開情報、アプリケーション１３６－１によって表示されている情報を示す又は表示する準備ができたユーザインタフェース状態情報、ユーザがアプリケーション１３６－１の以前の状態又はビューに戻ることを可能にする状態キュー、及びユーザによって行われた以前のアクションのリドゥ／アンドゥキューのうちの１つ以上などの追加の情報を含む。
イベントモニタ１７１は、周辺機器インタフェース１１８からイベント情報を受信する。イベント情報は、サブイベント（例えば、マルチタッチジェスチャの一部としてのタッチ感知ディスプレイ１１２上のユーザタッチ）に関する情報を含む。周辺機器インタフェース１１８は、Ｉ／Ｏサブシステム１０６、又は近接センサ１６６、加速度計（単数又は複数）１６８、及び／若しくは（オーディオ回路１１０を介した）マイクロフォン１１３などのセンサから受信する情報を送信する。周辺機器インタフェース１１８がＩ／Ｏサブシステム１０６から受信する情報は、タッチ感知ディスプレイ１１２又はタッチ感知面からの情報を含む。
一部の実施形態では、イベントモニタ１７１は、所定の間隔で周辺機器インタフェース１１８に要求を送信する。それに応じて、周辺機器インタフェース１１８は、イベント情報を送信する。他の実施形態では、周辺機器インタフェース１１８は、重要なイベント（例えば、所定のノイズ閾値を上回る及び／又は所定の持続時間を超える入力の受信）があるときのみイベント情報を送信する。
一部の実施形態では、イベントソータ１７０は、ヒットビュー判定モジュール１７２及び／又はアクティブイベント認識部判定モジュール１７３を含む。
ヒットビュー判定モジュール１７２は、タッチ感知ディスプレイ１１２が２つ以上のビューを表示するとき、サブイベントが１つ以上のビュー内のどこで行われたかを判定するソフトウェア手順を提供する。ビューは、ユーザがディスプレイ上で見ることができる制御装置及び他の要素から構成されている。
アプリケーションに関連付けられたユーザインタフェースの別の態様は、本明細書ではアプリケーションビュー又はユーザインタフェースウインドウと呼ばれることもあるビューのセットであり、その中で情報が表示され、タッチに基づくジェスチャが生じる。タッチが検出される（それぞれのアプリケーションの）アプリケーションビューは、任意選択的に、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルビューは、任意選択的に、ヒットビューと呼ばれ、また、適切な入力として認識されるイベントのセットは、任意選択的に、タッチによるジェスチャを開始する初期タッチのヒットビューに少なくとも部分的に基づいて決定される。
ヒットビュー判定モジュール１７２は、タッチに基づくジェスチャのサブイベントに関連する情報を受信する。アプリケーションが階層状に構成された複数のビューを有するときには、ヒットビュー判定モジュール１７２は、サブイベントを処理すべき、階層内の最下位のビューとしてのヒットビューを特定する。ほとんどの状況では、ヒットビューは、開始サブイベント（例えば、イベント又は潜在的イベントを形成するサブイベントシーケンス内の第１のサブイベント）が行われる最も低いレベルのビューである。ヒットビューがヒットビュー判定モジュール１７２によって特定されると、このヒットビューは、典型的には、ヒットビューとして特定されたのと同じタッチ又は入力ソースに関係する全てのサブイベントを受信する。
アクティブイベント認識部判定モジュール１７３は、ビュー階層内のどのビュー（単数又は複数）がサブイベントの特定のシーケンスを受信すべきかを判定する。一部の実施形態では、アクティブイベント認識部判定モジュール１７３は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール１７３は、サブイベントの物理的な場所を含む全てのビューがアクティブに関わりがあるビューであると判定し、したがって、全てのアクティブに関わりがあるビューが、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントが１つの特定のビューに関連付けられたエリアに完全に限定された場合でも、階層内の上位のビューは、依然としてアクティブに関わりがあるビューであり続ける。
イベントディスパッチャモジュール１７４は、イベント情報をイベント認識部（例えばイベント認識部１８０）にディスパッチする。アクティブイベント認識部判定モジュール１７３を含む実施形態では、イベントディスパッチャモジュール１７４は、アクティブイベント認識部判定モジュール１７３により判定されたイベント認識部にイベント情報を配信する。一部の実施形態では、イベントディスパッチャモジュール１７４は、それぞれのイベント受信部１８２によって取得されるイベント情報をイベント待ち行列に記憶する。
一部の実施形態では、オペレーティングシステム１２６は、イベントソータ１７０を含む。代替的に、アプリケーション１３６－１がイベントソータ１７０を含む。更に他の実施形態では、イベントソータ１７０は、独立型のモジュールであり、又は接触／動きモジュール１３０などのメモリ１０２内に記憶されている別のモジュールの一部分である。
一部の実施形態では、アプリケーション１３６－１は、それぞれがアプリケーションのユーザインタフェースのそれぞれのビュー内で発生するタッチイベントを処理するための命令を含む、複数のイベントハンドラ１９０及び１つ以上のアプリケーションビュー１９１を含む。アプリケーション１３６－１の各アプリケーションビュー１９１は、１つ以上のイベント認識部１８０を含む。典型的には、それぞれのアプリケーションビュー１９１は、複数のイベント認識部１８０を含む。他の実施形態では、イベント認識部１８０のうちの１つ以上は、ユーザインタフェースキット、又は、アプリケーション１３６－１が方法及び他の属性を継承する上位レベルのオブジェクトなどの、別個のモジュールの一部である。一部の実施形態では、それぞれのイベントハンドラ１９０は、データアップデータ１７６、オブジェクトアップデータ１７７、ＧＵＩアップデータ１７８、及び／又はイベントソータ１７０から受信されたイベントデータ１７９のうちの１つ以上を含む。イベントハンドラ１９０は、任意選択的に、データアップデータ１７６、オブジェクトアップデータ１７７、又はＧＵＩアップデータ１７８を利用し又は呼び出して、アプリケーション内部状態１９２を更新する。代替的に、アプリケーションビュー１９１のうちの１つ以上は、１つ以上のそれぞれのイベントハンドラ１９０を含む。また、一部の実施形態では、データアップデータ１７６、オブジェクトアップデータ１７７、及びＧＵＩアップデータ１７８のうちの１つ以上は、それぞれのアプリケーションビュー１９１に含まれる。
それぞれのイベント認識部１８０は、イベントソータ１７０からイベント情報（例えば、イベントデータ１７９）を受信し、このイベント情報からイベントを特定する。イベント認識部１８０は、イベント受信部１８２及びイベント比較部１８４を含む。一部の実施形態では、イベント認識部１８０はまた、メタデータ１８３及びイベント配信命令１８８（任意選択的にサブイベント配信命令を含む）の少なくともサブセットも含む。
イベント受信部１８２は、イベントソータ１７０からイベント情報を受信する。イベント情報は、サブイベント、例えば、タッチ又はタッチの移動についての情報を含む。サブイベントに応じて、イベント情報はまた、サブイベントの場所などの追加の情報を含む。サブイベントがタッチの動きに関わるとき、イベント情報はまた任意選択的に、サブイベントの速さ及び方向を含む。一部の実施形態では、イベントは、１つの向きから別の向きへの（例えば、縦向きから横向きへ、又はその逆の）デバイスの回転を含み、イベント情報は、デバイスの現在の向き（デバイスの姿勢とも呼ぶ）についての対応する情報を含む。
イベント比較部１８４は、イベント情報を、定義済みのイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント又はサブイベントを判定するか、あるいはイベント又はサブイベントの状態を判定若しくは更新する。一部の実施形態では、イベント比較部１８４は、イベント定義１８６を含む。イベント定義１８６は、例えばイベント１（１８７－１）及びイベント２（１８７－２）などのイベント（例えば既定のサブイベントのシーケンス）の定義を含む。一部の実施形態では、イベント１８７におけるサブイベントは、例えば、タッチ開始、タッチ終了、タッチの移動、タッチの取り消し、及び複数のタッチを含む。一実施例では、イベント１（１８７－１）についての定義は、表示されたオブジェクト上のダブルタップである。ダブルタップは、例えば、所定の段階に対する表示オブジェクト上の第１のタッチ（タッチ開始）、所定の段階に対する第１のリフトオフ（タッチ終了）、所定の段階に対する表示オブジェクト上の第２のタッチ（タッチ開始）、及び所定の段階に対する第２のリフトオフ（タッチ終了）を含む。別の実施例では、イベント２（１８７－２）の定義は、表示されたオブジェクト上のドラッグである。ドラッグは、例えば、所定の段階に対する表示オブジェクト上のタッチ（又は接触）、タッチ感知ディスプレイ１１２におけるタッチの移動、及びタッチのリフトオフ（タッチ終了）を含む。一部の実施形態では、イベントは、１つ以上の関連付けられたイベントハンドラ１９０に関する情報も含む。
一部の実施形態では、イベント定義１８７は、それぞれのユーザインタフェースオブジェクトについてのイベント定義を含む。一部の実施形態では、イベント比較部１８４は、どのユーザインタフェースオブジェクトがサブイベントに関連付けられているかを判定するヒットテストを実行する。例えば、タッチ感知ディスプレイ１１２上に３つのユーザインタフェースオブジェクトが表示されているアプリケーションビュー内で、タッチ感知ディスプレイ１１２上でタッチが検出されたとき、イベント比較部１８４は、ヒットテストを実行して、３つのユーザインタフェースオブジェクトのうちのどれがタッチ（サブイベント）に関連付けられているかを判定する。表示された各オブジェクトが、それぞれのイベントハンドラ１９０に関連付けられている場合、イベント比較部は、ヒットテストの結果を用いて、どのイベントハンドラ１９０をアクティブ化すべきかを判定する。例えば、イベント比較部１８４は、ヒットテストをトリガするサブイベント及びオブジェクトに関連付けられたイベントハンドラを選択する。
一部の実施形態では、それぞれのイベント１８７の定義は、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するかどうかが判定されるまで、イベント情報の配信を遅らせる遅延アクションも含む。
それぞれのイベント認識部１８０が一連のサブイベントがイベント定義１８６のイベントのいずれとも一致しないと判定した場合、それぞれのイベント認識部１８０は、イベント不可能、イベント失敗、又はイベント終了の状態に入り、その後は、タッチに基づくジェスチャの次のサブイベントを無視する。この状況では、ヒットビューについてアクティブのままである他のイベント認識部があれば、そのイベント認識部は、進行中のタッチによるジェスチャのサブイベントの追跡及び処理を続行する。
一部の実施形態では、それぞれのイベント認識部１８０は、イベント配信システムがどのようにサブイベント配信を実行すべきかをアクティブに関与しているイベント認識部に示す構成可能なプロパティ、フラグ、及び／又はリストを有するメタデータ１８３を含む。一部の実施形態では、メタデータ１８３は、イベント認識部が互いにどのように対話するか、又はイベント認識部が互いにどのように対話することができるようになっているかを示す構成可能なプロパティ、フラグ、及び／又はリストを含む。一部の実施形態では、メタデータ１８３は、サブイベントがビュー階層又はプログラム階層における多様なレベルに配信されるかを示す構成可能なプロパティ、フラグ、及び／又はリストを含む。
一部の実施形態では、それぞれのイベント認識部１８０は、イベントの１つ以上の特定のサブイベントが認識されるときに、イベントに関連付けられたイベントハンドラ１９０をアクティブ化する。一部の実施形態では、それぞれのイベント認識部１８０は、イベントに関連付けられたイベント情報をイベントハンドラ１９０に配信する。イベントハンドラ１９０をアクティブ化することは、それぞれのヒットビューにサブイベントを送信する（及び、送信を延期する）こととは別個である。一部の実施形態では、イベント認識部１８０は、認識したイベントに関連付けられたフラグを投入し、そのフラグに関連付けられたイベントハンドラ１９０は、そのフラグを捕らえ、所定のプロセスを実行する。
一部の実施形態では、イベント配信命令１８８は、イベントハンドラをアクティブ化することなくサブイベントについてのイベント情報を配信するサブイベント配信命令を含む。代わりに、サブイベント配信命令は、一連のサブイベントと関連付けられたイベントハンドラに、又はアクティブに関与しているビューにイベント情報を配信する。一連のサブイベント又はアクティブに関与しているビューと関連付けられたイベントハンドラは、イベント情報を受信し、所定の処理を実行する。
一部の実施形態では、データアップデータ１７６は、アプリケーション１３６－１で使用されるデータを作成及び更新する。例えば、データアップデータ１７６は、連絡先モジュール１３７で使用される電話番号を更新し、又はビデオプレーヤモジュールで使用されるビデオファイルを記憶する。一部の実施形態では、オブジェクトアップデータ１７７は、アプリケーション１３６－１で使用されるオブジェクトを作成及び更新する。例えば、オブジェクトアップデータ１７７は、新たなユーザインタフェースオブジェクトを作成し、又はユーザインタフェースオブジェクトの位置を更新する。ＧＵＩアップデータ１７８は、ＧＵＩを更新する。例えば、ＧＵＩアップデータ１７８は、表示情報を準備し、タッチ感知ディスプレイ上に表示するために表示情報をグラフィックモジュール１３２に送る。
一部の実施形態では、イベントハンドラ（単数又は複数）１９０は、データアップデータ１７６、オブジェクトアップデータ１７７、及びＧＵＩアップデータ１７８を含む、又はそれらへのアクセスを有する。一部の実施形態では、データアップデータ１７６、オブジェクトアップデータ１７７、及びＧＵＩアップデータ１７８は、それぞれのアプリケーション１３６－１又はアプリケーションビュー１９１の単一モジュールに含まれる。他の実施形態では、それらは、２つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の記載は、入力デバイスを用いて多機能デバイス１００を動作させるための他の形態のユーザ入力にも適用されるが、そのすべてがタッチスクリーン上で開始されるわけではないことを理解されたい。例えば、キーボードの単一又は複数の押圧若しくは保持と任意選択的に連携される、マウスの移動及びマウスボタンの押圧、タッチパッド上のタップ、ドラッグ、スクロールなどの接触の移動、ペンスタイラス入力、デバイスの移動、口頭による命令、検出された眼球運動、バイオメトリック入力、並びに／又はそれらの任意の組み合わせを、任意選択的に、認識するイベントを定義するサブイベントに対応する入力として利用する。
図２は、一部の実施形態による、タッチスクリーン１１２を有するポータブル多機能デバイス１００を示す。タッチスクリーンは、任意選択的に、ユーザインタフェース（user interface、ＵＩ）２００内に１つ以上のグラフィックを表示する。本実施形態、並びに以下で説明される他の実施形態では、ユーザは、例えば、１本以上の指２０２（図には正確な縮尺では描かれていない）又は１つ以上のスタイラス２０３（図には正確な縮尺では描かれていない）を使用して、グラフィック上でジェスチャを実施することによって、それらのグラフィックのうちの１つ以上を選択することが可能となる。一部の実施形態では、１つ以上のグラフィックの選択は、ユーザが、その１つ以上のグラフィックとの接触を中断する場合に実施される。一部の実施形態では、ジェスチャは、１回以上のタップ、１回以上のスワイプ（左から右へ、右から左へ、上向きに及び／若しくは下向きに）、並びに／又は、デバイス１００と接触した指のローリング（右から左へ、左から右へ、上向きに及び／若しくは下向きに）を、任意選択で含む。一部の実装形態又は状況では、グラフィックとの不測の接触は、そのグラフィックを選択するものではない。例えば、選択に対応するジェスチャがタップである場合、アプリケーションアイコンの上をスイープするスワイプジェスチャは、任意選択的に、対応するアプリケーションを選択するものではない。
デバイス１００はまた、任意選択的に、「ホーム」ボタン又はメニューボタン２０４などの１つ以上の物理ボタンを含む。前述したように、メニューボタン２０４は、任意選択的に、任意選択的にデバイス１００上で実行される１組のアプリケーション内の任意のアプリケーション１３６へナビゲートするために使用される。代替的に、一部の実施形態では、メニューボタンは、タッチスクリーン１１２上に表示されるＧＵＩ内のソフトキーとして実装される。
一部の実施形態では、デバイス１００は、タッチスクリーン１１２、メニューボタン２０４、デバイスの電源をオン／オフにしてデバイスをロックするプッシュボタン２０６、音量調整ボタン２０８、加入者識別モジュール（ＳＩＭ）カードスロット２１０、ヘッドセットジャック２１２、及びドッキング／充電用外部ポート１２４を含む。プッシュボタン２０６は、任意選択で、ボタンを押し下げて、所定の期間にわたってボタンを押し下げた状態に保持することによって、デバイスの電源をオン／オフするため、ボタンを押し下げて、所定の期間が経過する前にボタンを解放することによってデバイスをロックするため、及び／又はデバイスをアンロックする、若しくはアンロックプロセスを開始するために、使用され得る。代替的実施形態では、デバイス１００はまた、マイクロフォン１１３を介して、一部の機能をアクティブ化又は非アクティブ化するための口頭入力も受け入れる。デバイス１００はまた、任意選択的に、タッチスクリーン１１２上の接触の強度を検出する１つ以上の接触強度センサ１６５、及び／又はデバイス１００のユーザに対する触知出力を生成する１つ以上の触知出力生成器１６７を含む。
図３は、一部の実施形態による、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。デバイス３００は、ポータブル型である必要はない。一部の実施形態では、デバイス３００は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディアプレイヤデバイス、ナビゲーションデバイス、教育的デバイス（子供の学習玩具など）、ゲームシステム、又は制御デバイス（例えば、家庭用又は業務用コントローラ）である。デバイス３００は、典型的には、１つ以上の処理ユニット（ＣＰＵ）３１０、１つ以上のネットワーク又は他の通信インタフェース３６０、メモリ３７０、及びこれらの構成要素を相互接続する１つ以上の通信バス３２０を含む。通信バス３２０は、任意選択的に、システム構成要素間の通信を相互接続及び制御する回路（チップセットと呼ばれることもある）を含む。デバイス３００は典型的にはタッチスクリーンディスプレイであるディスプレイ３４０を含む、入出力（Ｉ／Ｏ）インタフェース３３０を含む。Ｉ／Ｏインタフェース３３０はまた、任意選択的に、キーボード及び／又はマウス（若しくは他のポインティングデバイス）３５０と、タッチパッド３５５と、デバイス３００上に触知出力を生成する触知出力生成器３５７（例えば、図１Ａを参照して前述した触知出力生成器１６７に類似している）と、センサ３５９（例えば、図１Ａを参照して前述した接触強度センサ１６５に類似している光学センサ、加速度センサ、近接センサ、タッチ感知センサ、及び／又は接触強度センサ）とを含む。メモリ３７０は、ＤＲＡＭ、ＳＲＡＭ、ＤＤＲ ＲＡＭ、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含み、任意選択的に、１つ以上の磁気ディスク記憶デバイス、光学ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含む。メモリ３７０は、任意選択で、ＣＰＵ（単数又は複数）３１０からリモートに位置する１つ以上の記憶デバイスを含む。一部の実施形態では、メモリ３７０は、ポータブル多機能デバイス１００（図１Ａ）のメモリ１０２内に記憶されているプログラム、モジュール、及びデータ構造に類似したプログラム、モジュール、及びデータ構造、又はそのサブセットを記憶する。更に、メモリ３７０は、任意選択で、ポータブル多機能デバイス１００のメモリ１０２に存在しない追加のプログラム、モジュール、及びデータ構造を記憶する。例えば、デバイス３００のメモリ３７０は、任意選択的に、描画モジュール３８０、プレゼンテーションモジュール３８２、ワードプロセッシングモジュール３８４、ウェブサイト作成モジュール３８６、ディスクオーサリングモジュール３８８、及び／又はスプレッドシートモジュール３９０を記憶するのに対して、ポータブル多機能デバイス１００（図１Ａ）のメモリ１０２は、任意選択的に、これらのモジュールを記憶しない。
図３の上記で特定した要素はそれぞれ、任意選択的に、前述したメモリデバイスのうちの１つ以上の中に記憶される。上記で特定したモジュールはそれぞれ、前述した機能を実行する命令セットに対応する。上記で特定したモジュール又はプログラム（例えば、命令セット）は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって様々な実施形態では、これらのモジュールの様々なサブセットは、任意選択的に、組み合わされ、又は他の形で再構成される。一部の実施形態では、メモリ３７０は、任意選択で、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ３７０は、上記で説明されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
次に、任意選択的に例えばポータブル多機能デバイス１００上で実装されるユーザインタフェースの実施形態に注意を向ける。
図４Ａは、一部の実施形態による、ポータブル多機能デバイス１００上のアプリケーションのメニューの例示的なユーザインタフェースを示す。同様のユーザインタフェースは、デバイス３００上に任意選択的に実装される。一部の実施形態では、ユーザインタフェース４００は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
●セルラー信号及びＷｉ－Ｆｉ信号などの無線通信（単数又は複数）のための信号強度インジケータ（単数又は複数）４０２、
●時刻４０４、
●Ｂｌｕｅｔｏｏｔｈインジケータ４０５、
●バッテリ状態インジケータ４０６、
●以下のような、頻繁に使用されるアプリケーションのアイコンを有するトレイ４０８
○不在着信又は音声メールメッセージの数のインジケータ４１４を任意選択的に含む、「電話」とラベル付けされる、電話モジュール１３８用のアイコン４１６、
○未読電子メールの数のインジケータ４１０を任意選択的に含む、「メール」とラベル付けされた、電子メールクライアントモジュール１４０用のアイコン４１８、
○「ブラウザ」とラベル付けされた、ブラウザモジュール１４７のアイコン４２０、及び
○「ｉＰｏｄ」とラベル付けされる、ｉＰｏｄ（Ａｐｐｌｅ Ｉｎｃ．の商標）モジュール１５２とも呼ばれるビデオ及び音楽プレーヤモジュール１５２用のアイコン４２２、及び
●以下のような、他のアプリケーションのアイコン、
○「メッセージ」とラベル付けされた、ＩＭモジュール１４１のアイコン４２４、
○「カレンダ」とラベル付けされた、カレンダモジュール１４８のアイコン４２６、
○「写真」とラベル付けされた、画像管理モジュール１４４のアイコン４２８、
○「カメラ」とラベル付けされた、カメラモジュール１４３のアイコン４３０、
○「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール１５５のアイコン４３２、
○「株価」とラベル付けされた、株式ウィジェット１４９－２のアイコン４３４、
○「地図」とラベル付けされた、地図モジュール１５４のアイコン４３６、
○「天気」とラベル付けされた、気象ウィジェット１４９－１のアイコン４３８、
○「時計」とラベル付けされた、アラーム時計ウィジェット１４９－４のアイコン４４０、
○「トレーニングサポート」とラベル付けされた、トレーニングサポートモジュール１４２のアイコン４４２、
○「メモ」とラベル付けされた、メモモジュール１５３のアイコン４４４、及び
○デバイス１００及びその様々なアプリケーション１３６についての設定へのアクセスを提供する、「設定」とラベル付けされた、設定アプリケーション又はモジュール用のアイコン４４６。
図４Ａに示すアイコンラベルは、単なる例示であることに留意されたい。例えば、ビデオ及び音楽プレーヤモジュール１５２のためのアイコン４２２は、「音楽」又は「音楽プレーヤ」とラベル付けされる、他のラベルが、様々なアプリケーションアイコンのために、任意選択的に使用される。一部の実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。一部の実施形態では、特定のアプリケーションアイコンのラベルは、その特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
図４Ｂは、ディスプレイ４５０（例えば、タッチスクリーンディスプレイ１１２）とは別個のタッチ感知面４５１（例えば、図３のタブレット又はタッチパッド３５５）を有するデバイス（例えば、図３のデバイス３００）上の例示的なユーザインタフェースを示す。デバイス３００はまた、任意選択的に、タッチ感知面４５１上の接触の強度を検出する１つ以上の接触強度センサ（例えば、センサ３５９のうちの１つ以上）、及び／又はデバイス３００のユーザに対する触知出力を生成する１つ以上の触知出力生成器３５７を含む。
以下の例のうちのいくつかは、タッチスクリーンディスプレイ１１２（タッチ感知面及びディスプレイが組み合わされている）上の入力を参照して与えられるが、一部の実施形態では、デバイスは、図４Ｂに示すディスプレイとは別個のタッチ感知面上の入力を検出する。一部の実施形態では、タッチ感知面（例えば、図４Ｂの４５１）は、ディスプレイ（例えば、４５０）上の１次軸（例えば、図４Ｂの４５３）に対応する１次軸（例えば、図４Ｂの４５２）を有する。これらの実施形態によれば、デバイスは、ディスプレイ上のそれぞれの場所に対応する場所（例えば、図４Ｂでは、４６０は４６８に対応し、４６２は４７０に対応する）で、タッチ感知面４５１との接触（例えば、図４Ｂの４６０及び４６２）を検出する。このようにして、タッチ感知面（例えば、図４Ｂの４５１）上でデバイスによって検出されるユーザ入力（例えば、接触４６０及び４６２、並びにこれらの動き）は、タッチ感知面がディスプレイとは別個であるとき、多機能デバイスのディスプレイ（例えば、図４Ｂの４５０）上のユーザインタフェースを操作するために、デバイスによって使用される。同様の方法が、本明細書に記載の他のユーザインタフェースに任意選択的に使用されることを理解されたい。
加えて、以下の例は、主に指入力（例えば、指接触、指タップジェスチャ、指スワイプジェスチャ）を参照して与えられるが、一部の実施形態では、指入力のうちの１つ以上は、別の入力デバイスからの入力（例えば、マウスベースの入力又はスタイラス入力）と取り替えられることを理解されたい。例えば、スワイプジェスチャは、（例えば、接触の代わりの）マウスクリックに続けた、（例えば、接触の移動の代わりの）スワイプの経路に沿ったカーソルの移動によって、任意選択的に取り替えられる。別の例として、タップジェスチャは、任意選択的に、カーソルがタップジェスチャの場所の上に位置する間はマウスクリックと取り替えられる（例えば、接触を検出して、それに続いて接触の検出を停止する代わりに）。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスが、任意選択的に、同時に使用され、又はマウス及び指の接触が、任意選択的に、同時に使用されることを理解されたい。
図５Ａは、例示的なパーソナル電子デバイス５００を示す。デバイス５００は、本体５０２を含む。一部の実施形態では、デバイス５００は、デバイス１００及び３００（例えば、図１Ａ～図４Ｂ）に関して説明する特徴のうちのいくつか又は全てを含むことができる。一部の実施形態では、デバイス５００は、タッチ感知ディスプレイスクリーン５０４、以下ではタッチスクリーン５０４、を有する。代替的に、又はタッチスクリーン５０４に加えて、デバイス５００は、ディスプレイ及びタッチ感知面を有する。デバイス１００及び３００と同様に、一部の実施形態では、タッチスクリーン５０４（又はタッチ感知面）は、任意選択的に、加えられている接触（例えば、タッチ）の強度を検出する１つ以上の強度センサを含む。タッチスクリーン５０４（又はタッチ感知面）の１つ以上の強度センサは、タッチの強度を表す出力データを提供することができる。デバイス５００のユーザインタフェースは、タッチの強度に基づいてタッチに応答することができ、これは、異なる強度のタッチが、デバイス５００上で異なるユーザインタフェース動作を呼び出すことができることを意味する。
タッチ強度を検出及び処理する例示的な技法は、例えば、それぞれ全体として参照により本明細書に組み込まれている、国際特許第ＷＯ／２０１３／１６９８４９号として公開された、２０１３年５月８日出願の国際特許出願第ＰＣＴ／ＵＳ２０１３／０４００６１号、「Ｄｅｖｉｃｅ，Ｍｅｔｈｏｄ，ａｎｄ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ ｆｏｒ Ｄｉｓｐｌａｙｉｎｇ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ Ｏｂｊｅｃｔｓ Ｃｏｒｒｅｓｐｏｎｄｉｎｇ ｔｏ ａｎ Ａｐｐｌｉｃａｔｉｏｎ」、及び国際特許第ＷＯ／２０１４／１０５２７６号として公開された、２０１３年１１月１１日出願の国際特許出願第ＰＣＴ／ＵＳ２０１３／０６９４８３号、「Ｄｅｖｉｃｅ，Ｍｅｔｈｏｄ，ａｎｄ Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ ｆｏｒ Ｔｒａｎｓｉｔｉｏｎｉｎｇ Ｂｅｔｗｅｅｎ Ｔｏｕｃｈ Ｉｎｐｕｔ ｔｏ Ｄｉｓｐｌａｙ Ｏｕｔｐｕｔ Ｒｅｌａｔｉｏｎｓｈｉｐｓ」という関連出願に見られる。
一部の実施形態では、デバイス５００は、１つ以上の入力機構５０６及び５０８を有する。入力機構５０６及び５０８は、含まれる場合、物理的機構とすることができる。物理的入力機構の例としては、プッシュボタン及び回転可能機構が挙げられる。一部の実施形態では、デバイス５００は、１つ以上のアタッチメント機構を有する。そのようなアタッチメント機構は、含まれる場合、例えば帽子、アイウェア、イアリング、ネックレス、シャツ、ジャケット、ブレスレット、腕時計のバンド、チェーン、ズボン、ベルト、靴、財布、バックパックなどにデバイス５００を取り付けることを可能にすることができる。これらのアタッチメント機構は、ユーザがデバイス５００を着用することを可能にする。
図５Ｂは、例示的なパーソナル電子デバイス５００を示す。一部の実施形態では、デバイス５００は、図１Ａ、図１Ｂ、及び図３に関して説明した構成要素のうちのいくつか又は全てを含むことができる。デバイス５００は、Ｉ／Ｏセクション５１４を１つ以上のコンピュータプロセッサ５１６及びメモリ５１８に動作可能に結合するバス５１２を有する。Ｉ／Ｏセクション５１４は、ディスプレイ５０４に接続することができ、ディスプレイ５０４は、タッチ感知構成要素５２２と、任意選択的に強度センサ５２４（例えば、接触強度センサ）とを有することができる。加えて、Ｉ／Ｏセクション５１４は、Ｗｉ－Ｆｉ、Ｂｌｕｅｔｏｏｔｈ、近距離通信（ＮＦＣ）、セルラー、及び／又は他の無線通信技法を使用してアプリケーション及びオペレーティングシステムデータを受信する通信ユニット５３０に接続することができる。デバイス５００は、入力機構５０６及び／又は５０８を含むことができる。入力機構５０６は、任意選択的に、例えば回転可能入力デバイス又は押下可能及び回転可能入力デバイスである。いくつかの例では、入力機構５０８は、任意選択的にボタンである。
いくつかの例では、入力機構５０８は、任意選択的にマイクロフォンである。パーソナル電子デバイス５００は、任意選択的に、ＧＰＳセンサ５３２、加速度計５３４、方向センサ５４０（例えば、コンパス）、ジャイロスコープ５３６、動きセンサ５３８、及び／又はこれらの組み合わせなどの様々なセンサを含み、これらのセンサは全て、Ｉ／Ｏセクション５１４に動作可能に接続することができる。
パーソナル電子デバイス５００のメモリ５１８は、コンピュータ実行可能命令を記憶するための、１つ以上の非一時的コンピュータ可読記憶媒体を含むことができ、それら命令は、１つ以上のコンピュータプロセッサ５１６によって実行される時、例えば、コンピュータプロセッサに、プロセス７００及びプロセス１１００（図７及び図１１）を含めた、後述する技法を行わせることができる。コンピュータ可読記憶媒体は、命令実行システム、装置、又はデバイスによって使用するための、又は命令実行システム、装置、又はデバイスに接続されているコンピュータ実行可能命令を、有形に含み又は記憶することができる任意の媒体とすることができる。いくつかの例では、記憶媒体は、一時的コンピュータ可読記憶媒体である。いくつかの例では、記憶媒体は、非一時的コンピュータ可読記憶媒体である。非一時的コンピュータ可読記憶媒体は、それだけに限定されるものではないが、磁気記憶装置、光学記憶装置、及び／又は半導体記憶装置を含むことができる。そのような記憶装置の例としては、磁気ディスク、ＣＤ、ＤＶＤ、又はＢｌｕ－ｒａｙ技術に基づく光学ディスク、並びにフラッシュ、ソリッドステートドライブなどの常駐ソリッドステートメモリなどが挙げられる。パーソナル電子デバイス５００は、図５Ｂの構成要素及び構成に限定されるものではなく、他の又は追加の構成要素を複数の構成で含むことができる。
本明細書で使用されるとき、用語「アフォーダンス」は、任意選択的にデバイス１００、３００、及び／又は５００（図１Ａ、図３、及び図５Ａ～図５Ｂ）のディスプレイスクリーン上に表示されるユーザ対話グラフィカルユーザインタフェースオブジェクトを指す。例えば、画像（例えば、アイコン）、ボタン、及びテキスト（例えば、ハイパーリンク）はそれぞれ、任意選択的に、アフォーダンスを構成する。
本明細書で使用されるとき、使用される「フォーカスセレクタ」という用語は、ユーザが対話しているユーザインタフェースの現在の部分を示す入力要素を指す。カーソル又は他の場所マーカを含む一部の実装形態では、カーソルが「フォーカスセレクタ」として作用し、したがってカーソルが特定のユーザインタフェース要素（例えば、ボタン、ウインドウ、スライダ、又は他のユーザインタフェース要素）の上に位置する間に、タッチ感知面（例えば、図３のタッチパッド３５５又は図４Ｂのタッチ感知面４５１）上で入力（例えば、押圧入力）が検出されたとき、特定のユーザインタフェース要素が、検出された入力に従って調整される。タッチスクリーンディスプレイ上のユーザインタフェース要素との直接的な対話を可能にするタッチスクリーンディスプレイ（例えば、図１Ａのタッチ感知ディスプレイシステム１１２又は図４Ａのタッチスクリーン１１２）を含む一部の実装形態では、タッチスクリーン上の検出された接触が「フォーカスセレクタ」として作用し、したがってタッチスクリーンディスプレイ上の特定のユーザインタフェース要素（例えば、ボタン、ウインドウ、スライダ、又は他のユーザインタフェース要素）の場所で入力（例えば、接触による押圧入力）が検出されたとき、特定のユーザインタフェース要素が、検出された入力に従って調整される。一部の実装形態では、タッチスクリーンディスプレイ上の対応するカーソルの移動又は接触の移動（例えば、フォーカスを１つのボタンから別のボタンへ動かすためにタブキー又は矢印キーを使用することによる）なく、フォーカスがユーザインタフェースの１つの領域からユーザインタフェースの別の領域へ動かされ、これらの実装形態では、フォーカスセレクタは、ユーザインタフェースの種々の領域間でのフォーカスの移動に従って移動する。フォーカスセレクタがとる特有の形態にかかわらず、フォーカスセレクタは、一般に、ユーザインタフェース要素（又はタッチスクリーンディスプレイ上の接触）であり、ユーザの意図するユーザインタフェースとの対話を（例えば、ユーザが対話することを意図しているユーザインタフェースの要素をデバイスに示すことによって）通信するように、ユーザによって制御される。例えば、タッチ感知面（例えば、タッチパッド又はタッチスクリーン）上で押圧入力が検出されている間の、対応のボタンの上のフォーカスセレクタ（例えば、カーソル、接触、又は選択ボックス）の場所は、その対応のボタンを（そのデバイスのディスプレイ上に示される他のユーザインタフェース要素ではなく）アクティブ化することをユーザが意図していることを示すものである。
本明細書及び特許請求の範囲で使用される、接触の「特性強度」という用語は、接触の１つ以上の強度に基づく、その接触の特性を指す。一部の実施形態では、特性強度は複数の強度サンプルに基づく。特性強度は、任意選択的に、既定の数の強度サンプル、すなわち、既定のイベント（例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終了を検出する前、接触の強度の増大を検出する前若しくは後、及び／又は、接触の強度の減少を検出する前若しくは後）に関連する所定の時間期間（例えば、０．０５、０．１、０．２、０．５、１、２、５、１０秒）の間に収集された強度サンプルのセットに基づく。接触の特性強度は、任意選択的に、接触の強度の最大値、接触の強度の平均（mean）値、接触の強度の平均（average）値、接触の強度の上位１０パーセンタイル値、接触の強度の最大の２分の１の値、接触の強度の最大の９０パーセントの値などのうちの１つ以上に基づいている。一部の実施形態では、特性強度を判定する際に（例えば、特性強度が経時的な接触の強度の平均であるときに）、接触の持続時間が使用される。一部の実施形態では、特性強度は、ユーザによって動作が実行されたかどうかを判定するために、１つ以上の強度閾値のセットと比較される。例えば、１つ以上の強度閾値のセットは、任意選択的に、第１の強度閾値及び第２の強度閾値を含む。この例では、第１の閾値を超過しない特性強度を有する接触は、第１の動作をもたらし、第１の強度閾値を超過するが第２の強度閾値を超過しない特性強度を有する接触は、第２の動作をもたらし、第２の閾値を超過する特性強度を有する接触は、第３の動作をもたらす。一部の実施形態では、特性強度と１つ以上の閾値との間の比較は、第１の動作を実行するべきか、それとも第２の動作を実行するべきかを判定するために使用されるのではなく、１つ以上の動作を実行するべきか否か（例えば、それぞれの動作を実行するべきか、それともそれぞれの動作を実行するのを取り止めるべきか）を判定するために使用される。
図５Ｃは、複数の強度センサ５２４Ａ～５２４Ｄによってタッチ感知ディスプレイスクリーン５０４上で複数の接触５５２Ａ～５５２Ｅを検出することを示す。図５Ｃは、追加として、強度単位に対する強度センサ５２４Ａ～５２４Ｄの現在の強度測定値を示す強度ダイアグラムを含む。この例では、強度センサ５２４Ａ及び５２４Ｄの強度測定値はそれぞれ９強度単位であり、強度センサ５２４Ｂ及び５２４Ｃの強度測定値はそれぞれ７強度単位である。一部の実装形態では、集約強度は、複数の強度センサ５２４Ａ～５２４Ｄの強度測定値の和であり、この例では３２強度単位である。一部の実施形態では、各接触に、集約強度の一部分であるそれぞれの強度が割り当てられる。図５Ｄは、力の中心５５４からの距離に基づいて、集約強度を接触５５２Ａ～５５２Ｅに割り当てることを示す。この例では、接触５５２Ａ、５５２Ｂ、及び５５２Ｅのそれぞれに、集約強度の８強度単位の接触の強度が割り当てられ、接触５５２Ｃ及び５５２Ｄのそれぞれに、集約強度の４強度単位の接触の強度が割り当てられる。より一般的には、一部の実装形態では、各接触ｊは、所定の数学関数Ｉｊ＝Ａ・（Ｄｊ／ΣＤｉ）に従って、集約強度Ａの一部分である、それぞれの強度Ｉｊが割り当てられ、ここで、Ｄｊは、力の中心からそれぞれの接触ｊまでの距離であり、ΣＤｉは、力の中心から全てのそれぞれ接触（例えば、ｉ＝１から最後まで）までの距離の和である。図５Ｃ～図５Ｄを参照して説明した動作は、デバイス１００、３００又は５００と類似若しくは同一の電子デバイスを使用して実行することができる。一部の実施形態では、接触の特性強度は、接触の１つ以上の強度に基づいている。一部の実施形態では、強度センサは、単一の特性強度（例えば、単一の接触の単一の特性強度）を判定するために使用される。強度ダイアグラムは、表示ユーザインタフェースの一部ではなく、読み手の助けになるように図５Ｃ～図５Ｄに含まれていることに留意されたい。
一部の実施形態では、特性強度を判定する目的のために、ジェスチャの一部分が特定される。例えば、タッチ感知面は、任意選択的に、開始場所から遷移して終了場所に到達する連続するスワイプ接触を受信し、その時点で接触の強度が増大する。この例では、終了場所での接触の特性強度は、任意選択的に、スワイプ接触全体ではなく、連続するスワイプ接触の一部分のみ（例えば、スワイプ接触のうち終了場所の部分のみ）に基づいている。一部の実施形態では、任意選択的に、接触の特性強度を判定する前に、平滑化アルゴリズムがスワイプ接触の強度に適用される。例えば、平滑化アルゴリズムは、任意選択的に、非加重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び／又は指数平滑化アルゴリズムのうちの１つ以上を含む。いくつかの状況では、これらの平滑化アルゴリズムは、特性強度を判定する目的のために、スワイプ接触の強度の小幅な上昇又は降下を排除する。
タッチ感知面上の接触の強度は、任意選択的に、接触検出強度閾値、軽い押圧強度閾値、深い押圧の強度閾値、及び／又は１つ以上の他の強度閾値などの１つ以上の強度閾値に対して特徴付けられる。一部の実施形態では、軽い押圧の強度閾値は、通常、物理マウスのボタン又はトラックパッドをクリックすることに関連付けられた動作をデバイスが実行する強度に相当する。一部の実施形態では、深い押圧強度閾値は、通常、物理マウスのボタン又はトラックパッドをクリックすることに関連付けられた動作とは異なる動作をデバイスが実行する強度に相当する。一部の実施形態では、軽い押圧強度閾値を下回る（例えば、それを下回ると接触が検出されなくなる公称接触検出強度閾値を上回る）特性強度を有する接触が検出されたとき、デバイスは、軽い押圧強度閾値又は深い押圧強度閾値に関連付けられた動作を実行することなく、タッチ感知面上の接触の移動に従ってフォーカスセレクタを動かす。一般に、特に明記しない限り、これらの強度閾値は、ユーザインタフェース図の様々なセットの間で一貫している。
軽い押圧強度閾値を下回る強度から、軽い押圧強度閾値と深い押圧強度閾値との間の強度への、接触の特性強度の増大は、「軽い押圧」入力と呼ばれることがある。深い押圧強度閾値を下回る強度から、深い押圧強度閾値を上回る強度への、接触の特性強度の増大は、「深い押圧」入力と呼ばれることがある。接触検出強度閾値を下回る強度から、接触検出強度閾値と軽い押圧強度閾値との間の強度への、接触の特性強度の増大は、タッチ面上の接触の検出と呼ばれることがある。接触検出強度閾値を上回る強度から、接触検出強度閾値を下回る強度への、接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と呼ばれることがある。一部の実施形態では、接触検出強度閾値はゼロである。一部の実施形態では、接触検出強度閾値は、ゼロより大きい。
本明細書に記載する一部の実施形態では、それぞれの押圧入力を含むジェスチャを検出したことに応答して、又はそれぞれの接触（若しくは複数の接触）によって実行されたそれぞれの押圧入力を検出したことに応答して、１つ以上の動作が実行され、それぞれの押圧入力は、押圧入力強度閾値を上回る接触（又は複数の接触）の強度の増大を検出したことに少なくとも部分的に基づいて検出される。一部の実施形態では、それぞれの動作は、押圧入力強度閾値を上回るそれぞれの接触の強度の増大（例えば、それぞれの押圧入力の「ダウンストローク」）を検出したことに応答して実行される。一部の実施形態では、押圧入力は、押圧入力強度閾値を上回るそれぞれの接触の強度の増大、及びそれに続く押圧入力強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、それに続く押圧入力閾値を下回るそれぞれの接触の強度の減少（例えば、それぞれの押圧入力の「アップストローク」）を検出したことに応答して実行される。
図５Ｅ～図５Ｈは、図５Ｅの軽い押圧強度閾値（例えば、「ＩＴL」）を下回る強度から、図５Ｈの深い押圧強度閾値（例えば、「ＩＴD」）を上回る強度への、接触５６２の強度の増大に対応する押圧入力を含むジェスチャの検出を示す。接触５６２によって実行されるジェスチャは、タッチ感知面５６０上で検出され、所定の領域５７４内に表示されたアプリケーションアイコン５７２Ａ～５７２Ｄを含む表示ユーザインタフェース５７０上では、アプリ２に対応するアプリケーションアイコン５７２Ｂの上にカーソル５７６が表示される。一部の実施形態では、ジェスチャは、タッチ感知ディスプレイ５０４上に検出される。強度センサは、タッチ感知面５６０上の接触の強度を検出する。デバイスは、接触５６２の強度が深い押圧強度閾値（例えば、「ＩＴD」）を上回ってピークに達したと判定する。接触５６２は、タッチ感知面５６０上で維持される。ジェスチャの検出に応答して、ジェスチャ中に深い押圧強度閾値（例えば、「ＩＴD」）を上回る強度を有する接触５６２に従って、図５Ｆ～図５Ｈに示すように、アプリ２に対して最近開いた文書の縮尺が低減された表現５７８Ａ～５７８Ｃ（例えば、サムネイル）が表示される。一部の実施形態では、１つ以上の強度閾値と比較されるこの強度は、接触の特性強度である。接触５６２に対する強度ダイアグラムは、表示ユーザインタフェースの一部ではなく、読み手の助けになるように図５Ｅ～図５Ｈに含まれていることに留意されたい。
一部の実施形態では、表現５７８Ａ～５７８Ｃの表示は、アニメーションを含む。例えば、図５Ｆに示すように、表現５７８Ａが、アプリケーションアイコン５７２Ｂに近接して最初に表示される。アニメーションが進むにつれて、図５Ｇに示すように、表現５７８Ａは上方へ動き、表現５７８Ｂが、アプリケーションアイコン５７２Ｂに近接して表示される。次いで、図５Ｈに示すように、表現５７８Ａが上方へ動き、表現５７８Ｂが表現５７８Ａに向かって上方へ動き、表現５７８Ｃが、アプリケーションアイコン５７２Ｂに近接して表示される。表現５７８Ａ～５７８Ｃは、アイコン５７２Ｂの上にアレイを形成する。一部の実施形態では、アニメーションは、図５Ｆ～図５Ｇに示すように、接触５６２の強度に従って進行し、接触５６２の強度が深い押圧強度閾値（例えば、「ＩＴD」）に向かって増大するにつれて、表現５７８Ａ～５７８Ｃが現れ、上方へ動く。一部の実施形態では、アニメーションの進行が基づいている強度は、接触の特性強度である。図５Ｅ～図５Ｈを参照して説明する動作は、デバイス１００、３００、又は５００に類似又は同一の電子デバイスを使用して実行することができる。
一部の実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある偶発的な入力を回避するために強度ヒステリシスを採用し、デバイスは、押圧入力強度閾値との既定の関係を有するヒステリシス強度閾値を定義又は選択する（例えば、ヒステリシス強度閾値は、押圧入力強度閾値よりも低いＸ強度単位であり、又はヒステリシス強度閾値は、押圧入力強度閾値の７５％、９０％、若しくは何らかの妥当な割合である）。したがって、一部の実施形態では、押圧入力は、押圧入力強度閾値を上回るそれぞれの接触の強度の増大、及びそれに続く押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、それに続くヒステリシス強度閾値を下回るそれぞれの接触の強度の減少（例えば、それぞれの押圧入力の「アップストローク」）を検出したことに応答して実行される。同様に、一部の実施形態では、押圧入力は、デバイスが、ヒステリシス強度閾値以下の強度から押圧入力強度閾値以上の強度への接触の強度の増大、及び任意選択的に、その後のヒステリシス強度以下の強度への接触の強度の減少を検出するときにのみ検出され、それぞれの動作は、押圧入力（例えば、状況に応答して、接触の強度の増大又は接触の強度の減少）を検出したことに応答して実行される。
説明を容易にするために、押圧入力強度閾値に関連付けられた押圧入力、又は押圧入力を含むジェスチャに応答して実行される動作の説明は、任意選択的に、押圧入力強度閾値を上回る接触の強度の増大、ヒステリシス強度閾値を下回る強度から押圧入力強度閾値を上回る強度への接触の強度の増大、押圧入力強度閾値を下回る接触の強度の減少、及び／又は押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少のいずれかを検出したことに応答してトリガされる。更に、押圧入力強度閾値を下回る接触の強度の減少を検出したことに応答して実行されるように動作が記載される例では、動作は、任意選択的に、押圧入力強度閾値に対応し、かつそれよりも低いヒステリシス強度閾値を下回る接触の強度の減少を検出したことに応答して実行される。
次に、ポータブル多機能デバイス１００、デバイス３００、又はデバイス５００などの電子デバイス上で実装されるユーザインタフェース（「ＵＩ」）及び関連プロセスの実施形態に注意を向ける。
図６Ａ～図６Ｈは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図７のプロセスを含む後述のプロセスを例示するために使用される。
例示的なメディアロックアフォーダンス
本開示は、グラフィカルユーザインタフェース（ＧＵＩ）上のメディアキャプチャアフォーダンスをロックして、連続的なメディアキャプチャのためのロックされたメディアキャプチャ状態にするメディアキャプチャデバイスのメディア記録機能に関する。一実施形態では、メディアクリップ（例えば、ビデオクリップ、オーディオクリップ）のメディアキャプチャセッションを開始するために、ユーザは、メディアキャプチャアフォーダンス（例えば、仮想記録ボタン）をタップして保持（タップアンドホール）する。ユーザがメディアキャプチャアフォーダンス上でタッチを保持する限り、メディアは、メディアキャプチャデバイスによってキャプチャされ続ける。ユーザがメディアキャプチャセッション中にタッチを取り去ると、メディアキャプチャセッションは終了する。ユーザが、指でスライディングジェスチャを行っている間、メディアキャプチャアフォーダンス上でタッチを維持する場合、メディアキャプチャアフォーダンスは、ロックされたメディアキャプチャアフォーダンスに視覚的に変化し、メディアキャプチャセッションが維持され、結果的にメディアが連続記録されることになる。一実施形態では、ロックされたメディアキャプチャアフォーダンスは、ユーザの指によって覆い隠されないように、ユーザの指の下方に移動する。ユーザは、ロックされたメディアキャプチャアフォーダンスから指を取り去ることができ、メディアキャプチャセッションは、ユーザがロック状態キャプチャボタンをタップするまで維持され、その後、メディアキャプチャセッションが終了する。
図６Ａ～図６Ｈは、一実施形態による、メディアキャプチャロックアフォーダンスの動作を示す。図６Ａを参照すると、メディアキャプチャデバイス６００は、ディスプレイスクリーン上にＧＵＩ６０１を提示している。ＧＵＩ６０１はメディアキャプチャアフォーダンス６０２を含む。メディアキャプチャデバイス６００は、この例示的な実施形態ではスマートフォンとして示されている。しかし、メディアキャプチャデバイス６００は、タブレットコンピュータ、ウェアラブルコンピュータ、デジタルカメラ、ビデオレコーダ、及びオーディオ記録デバイスを含む、メディアをキャプチャすることができる任意の電子デバイスであってもよい。一部の実施形態では、メディアキャプチャデバイス６００は、デバイス１００、デバイス３００、又はデバイス５００の１つ以上の特徴を含む。メディアキャプチャアフォーダンス６０２は、任意の所望の形状、サイズ、又は色を有することができる。図示の例では、メディアキャプチャアフォーダンス６０２は楕円形のボタンである。ＧＵＩ６０１はまた、ライブメディアを表示し、キャプチャされたメディアを再生するための表示領域も含む。メディアは、ビデオ、静止画像及びオーディオ、又はこれらの任意の組み合わせを含む、キャプチャされ得る任意のタイプのメディアとすることができる。
図６Ｂを参照すると、ユーザは、指で（例えば、メディアキャプチャデバイス６００を保持しながら親指で）メディアキャプチャアフォーダンス６０２をタップアンドホールド６０３（破線円として示される）して、「アンロック」状態でのメディアキャプチャセッションを開始する。メディアキャプチャセッション中、組み込まれたビデオカメラ及び／又は１つ以上のマイクロフォンはメディアをキャプチャする（例えば、ビデオ及びオーディオをキャプチャする）。メディアキャプチャセッションが「アンロック」され、これは、ユーザが、メディアキャプチャアフォーダンス６０２から指をリフトした（持ち上げた）（ディスプレイスクリーンから指をリフトオフした）場合、メディアキャプチャセッションが終了し、メディアがメディアキャプチャデバイス６００に記憶される（例えば、キャッシュメモリに記憶される）ことを意味する。視覚的方向インジケータ６０４ａ（例えば、矢印の先端）がＧＵＩ６０１上に表示され、メディアキャプチャセッションを「ロック」状態に遷移させるためにユーザが指をスライドさせ得る方向を示す。「ロック」状態にある間、メディアは中断せずに連続的にキャプチャされる。例えば、ビデオ及びオーディオは記録を継続し、静止画像は「バースト」モードで撮影されるであろう。ユーザに「連続記録のためにスライドアップしてください」と指示するテキストもＧＵＩ６０１上に表示される。
一部の実施形態では、キャプチャされたメディア（以下、「メディアクリップ」とも呼ばれる）をユーザが再生する、順序を変える、フィルタリングする、当該メディアクリップに対して絵文字、アニメーションアイコン、及びタイトルを追加することを可能にするための追加のアフォーダンス（図示せず）がＧＵＩ６０１上に含まれる。他のアフォーダンスにより、ユーザは、メディアクリップをソーシャルネットワーキングウェブサイトで間接的に共有すること、並びに様々な通信手段（例えば、インスタントメッセージング、電子メール、ツイート）を通じて友人及び家族に直接共有することが可能になる。図示の実施形態では、ユーザがカメラ、ライブラリ、及びポスターなどの動作モードを選択することを可能にするナビゲーションバーは、メディア表示領域の下に位置している。
図６Ｃを参照すると、メディアキャプチャアフォーダンス６０２がメディアキャプチャエリアに向かってスライドアップすることになる、ユーザのスライドジェスチャ入力を示す。スライドジェスチャ入力中、ユーザの指はディスプレイスクリーンとの接触は中断しないことに留意されたい。
図６Ｄ～図６Ｇを参照すると、ユーザがメディアキャプチャアフォーダンス６０２を所定距離スライドアップすると、メディアキャプチャアフォーダンス６０２は、メディアキャプチャロックアフォーダンス６０５に変化又はモーフィングし、図６Ｆに示すように、「ロック」状態を視覚的に示す。メディア表示領域の下のテキストも変化し、ユーザに、例えば、「記録を停止するためのタップしてください」のような、「ロック」状態をどのように停止させるかをユーザに指示する。メディアキャプチャロックアフォーダンス６０５は、任意のサイズ、形状、又は色であってもよい。図示の例では、メディアキャプチャロックアフォーダンス６０５は、正方形のボタンである。メディアキャプチャアフォーダンス６０２からメディアキャプチャロックアフォーダンス６０５への変化又はモーフィング後、ユーザが指をリフトしてディスプレイスクリーンとの接触を中断する場合、メディアキャプチャセッションは「ロック」状態に移行する。「ロック」状態では、メディアキャプチャセッションは、ユーザがメディアキャプチャロックアフォーダンス６０５（図６Ｇ）をタップ６０６するまでメディアキャプチャを継続し、その場合メディアキャプチャセッションは終了する。代替的実施形態では、視覚的方向インジケータ６０４ａは、ボタントラック６０４ｂ（図６Ｈ）と取り替えられており、ユーザが「ロック」状態に移行するためにメディアキャプチャアフォーダンス６０２をスライドすべき距離をユーザに示すことができる。
他の実施形態では、単一タップの代わりに複数のタップを使用してもよい。スライドジェスチャ入力の方向は、上、下、右、及び左を含む、ＧＵＩ６０１上の任意の方向であってもよい。メディアキャプチャセッションがロックされたとき、及びアンロックされたときを示すために、「クリック」効果音などの、効果音を、タップアンドスライドジェスチャと同期して再生することができる。一実施形態では、メディアキャプチャセッションがロックされたとき、及びアンロックされたときを示すために、触覚エンジンによって力フィードバック（例えば、振動）を提供することができる。アフォーダンス６０２、６０６は、ＧＵＩ６０１上の任意の所望の場所に配置することができ、縦向き及び横向きなどのメディアキャプチャデバイス６００の向きに応じて、位置、サイズ、及び／又は形状を変更することができる。一実施形態では、ユーザは、メディアキャプチャデバイス６００内に実装された発話検出／認識エンジンによって処理される、音声コマンドを用いて、ロックされたメディアキャプチャ状態に移行すること、又はそれから移行することができる。
例示的なプロセス
図７は、一実施形態による、図６Ａ～図６Ｈに示したメディアキャプチャロックアフォーダンスのアニメーションプロセスのフロー図である。プロセス７００は、図８を参照して説明するデバイスのアーキテクチャ８００を用いて実装することができる。プロセス７００は、デバイス（例えば、１００、３００、５００、８００）において実行される。方法７００のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
プロセス７００は、メディアキャプチャデバイスのディスプレイデバイス上に提示されたＧＵＩの第１の場所のメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を受け取ることで開始する（７０１）。メディアキャプチャアフォーダンスは、任意のサイズ、形状、又は色であってもよい。第１の場所は、ＧＵＩ上の任意の所望の場所であってもよい。タップアンドホールドジェスチャ入力に応答して、プロセス７００は、メディアキャプチャデバイス上でメディアキャプチャセッションを開始し、その場合、メディアキャプチャセッションは、「アンロック」状態で開始される（７０２）。第１の場所での第１のリフトジェスチャに応答して、プロセス７００は、メディアキャプチャセッションを終了させる（７０３）。
ＧＵＩ上の第１の場所から第２の場所へのスライドジェスチャ入力に応答して、プロセス７００は、メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更する（７０４）。メディアキャプチャロックアフォーダンスは、任意のサイズ、形状、又は色であってもよい。第２の場所は、第１の場所以外のＧＵＩ上の所望の場所とすることができる。スライドジェスチャは、上、下、左、及び右を含む任意の所望の方向であってもよい。
第２の場所で第２のリフトジェスチャを検出したことに応答して、プロセス７００は、メディアキャプチャセッションをアンロック状態からロック状態に遷移させる（７０５）。ロック状態では、メディアキャプチャデバイスは、ユーザがメディアキャプチャロックアフォーダンスをタップしてメディアキャプチャセッションを終了させるまで、メディアを連続的にキャプチャする。一実施形態では、ユーザは、第２のリフトジェスチャの後にメディアキャプチャセッションを終了させるためにＧＵＩ上の任意の場所をタップすることができ、又はメディアキャプチャデバイス上の機械的ボタン（例えば、スマートフォン上のホームボタン）を押すことができる。
方法７００に関して上記した処理の詳細（例えば、図７）は、以下に説明される方法にも同様の方法で適用可能であることに留意されたい。例えば、方法７００は、方法１１００を参照して後述する様々な方法の特性のうちの１つ以上を任意選択的に含む。簡潔にするために、これらの詳細は、以下で繰り返さない。
例示的なモバイルデバイスのアーキテクチャ
図８は、図６及び図７を参照して説明したメディアキャプチャロックアフォーダンスを実装するモバイルデバイスの例示的なメディアキャプチャデバイスのアーキテクチャ８００を示す。アーキテクチャ８００は、メモリインタフェース８０２、１つ以上のデータプロセッサ、画像プロセッサ、及び／又はプロセッサ８０４、並びに周辺機器インタフェース８０６を含み得る。メモリインタフェース８０２、１つ以上のプロセッサ８０４、及び／又は周辺機器インタフェース８０６は、別個の構成要素としてもよく、あるいは１つ以上の集積回路内に集積されてもよい。アーキテクチャ８００内の様々な構成要素は、１つ以上の通信バス又は信号線によって結合することができる。
センサ、デバイス、及びサブシステムを周辺機器インタフェース８０６に結合することにより、多機能性を促進することができる。例えば、１つ以上の動きセンサ８１０、光センサ８１２、及び近接センサ８１４を周辺機器インタフェース８０６に結合して、モバイルデバイスの動き感知（例えば、加速度、回転速度）、光及び近接機能を促進することができる。位置プロセッサ８１５は、周辺機器インタフェース８０６に接続され、無線位置測定を行うことができる。一部の実装形態では、位置プロセッサ８１５は、全地球測位システム（Global Positioning System、ＧＰＳ）受信機チップなどのＧＮＳＳ受信機であり得る。電子磁気計８１６（例えば、集積回路チップ）はまた、周辺機器インタフェース８０６に接続され、磁北の方向を決定するために使用できるデータを提供することができる。電子磁気計８１６は、データを電子コンパスアプリケーションに提供できる。動きセンサ（単数又は複数）８１０は、モバイルデバイスの移動の速度及び方向の変化を判定するように構成された１つ以上の加速度計及び／又はジャイロを含み得る。気圧計８１７は、モバイルデバイス周辺の大気圧を測定するように構成することができる。
カメラサブシステム８２０及び光学センサ８２２、例えば、電荷結合素子（ＣＣＤ）又は相捕型金属酸化膜半導体（ＣＭＯＳ）光学センサを利用して、写真のキャプチャ及びビデオクリップの記録などのカメラ機能を容易にすることができる。
通信機能は、１つ以上の無線通信サブシステム８２４を通じて、促進することができ、それらのサブシステムとしては、高周波（ＲＦ）受信機及び送信機（又は送受信機）、並びに／あるいは光学（例えば、赤外線）受信機及び送信機を挙げることができる。通信サブシステム８２４の具体的な設計及び実装は、このモバイルデバイスが動作することを目的とする、通信ネットワーク（単数又は複数）次第であり得る。例えば、アーキテクチャ８００は、ＧＳＭネットワーク、ＧＰＲＳネットワーク、ＥＤＧＥネットワーク、Ｗｉ－Ｆｉ（商標）又はＷｉ－Ｍａｘ（商標）ネットワーク、及びＢｌｕｅｔｏｏｔｈ（商標）ネットワーク上で動作するように設計された通信サブシステム８２４を含み得る。特に、無線通信サブシステム８２４は、このモバイルデバイスを、他の無線デバイスのための基地局として構成できるようなホスティングプロトコルを含むことができる。
オーディオサブシステム８２６をスピーカ８２８及びマイクロフォン８３０に結合することにより、音声認識機能、音声複製機能、デジタル録音機能、及び電話機能などの音声使用可能な機能を容易にすることができる。オーディオサブシステム８２６は、ユーザから音声コマンドを受信するように構成することができる。
Ｉ／Ｏサブシステム８４０は、タッチ面コントローラ８４２及び／又は他の入力コントローラ（単数又は複数）８４４を含み得る。タッチ面コントローラ８４２は、タッチ面８４６又はパッドに結合することができる。タッチ面８４６及びタッチ面コントローラ８４２は、例えば、複数のタッチ感度技術のうちのいずれかを使用して、接触及び移動を検出することも、又は接触及び移動の中断を検出することもできる。タッチ感度技術としては、静電容量技術、抵抗性技術、赤外線技術、及び表面弾性波技術に加えて、タッチ面８４６との１つ以上の接触点を判定するための、他の近接センサアレイ又は他の要素が挙げられるが、これらに限定されない。タッチ面８４６は、例えば、タッチスクリーンを含むことができる。Ｉ／Ｏサブシステム８４０は、プロセッサからのコマンドに応答して、触知フィードバック（例えば、振動）を提供するための触覚エンジン又はデバイスを含むことができる。
他の入力コントローラ（単数又は複数）８４４は、１つ以上のボタン、ロッカースイッチ、サムホイール、赤外線ポート、ＵＳＢポート、及び／又はスタイラスなどのポインタデバイスなどの、他の入力／制御デバイス８４８に結合することができる。１つ以上のボタン（図示せず）は、スピーカ８２８及び／又はマイクロフォン８３０の音量コントロールのための上下ボタンを含むことができる。タッチ面８４６又は他のコントローラ８４４（例えば、ボタン）は、指紋（単数又は複数）に基づいてユーザを認証するために、指紋認証アプリケーションと共に使用するための指紋識別回路を含むことができる、又はそれと結合することができる。
一実装形態では、第１の持続時間でボタンを押すことにより、タッチ面８４６のロックを解除することができ、第１の持続時間よりも長い第２の持続時間でボタンを押すことにより、モバイルデバイスへの電源をオン／オフすることができる。ユーザは、１つ以上のボタンの機能をカスタマイズすることができる。また、タッチ面８４６を使用して、例えば、仮想ボタン若しくはソフトボタン、及び／又は仮想タッチキーボードを実装することもできる。
一部の実装形態では、このモバイルデバイスは、ＭＰ３ファイル、ＡＡＣファイル、及びＭＰＥＧファイルなどの記録されたオーディオファイル及び／又はビデオファイルを提示することができる。一部の実装形態では、このモバイルデバイスは、ＭＰ３プレーヤの機能性を含み得る。また、他の入出力及び制御デバイスも使用できる。
メモリインタフェース８０２は、メモリ８５０に結合することができる。メモリ８５０は、高速のランダムアクセスメモリ、並びに／あるいは、１つ以上の磁気ディスク記憶デバイス、１つ以上の光学記憶デバイス、及び／又はフラッシュメモリ（例えば、ＮＡＮＤ、ＮＯＲ）などの不揮発性メモリを含み得る。メモリ８５０は、ｉＯＳ、Ｄａｒｗｉｎ、ＲＴＸＣ、ＬＩＮＵＸ、ＵＮＩＸ、ＯＳ Ｘ、ＷＩＮＤＯＷＳ、又はＶｘＷｏｒｋｓなどの組み込みオペレーティングシステムなどのオペレーティングシステム８５２を記憶することができる。オペレーティングシステム８５２は、基本システムサービスを処理するための命令、及びハードウェア依存タスクを実行するための命令を含み得る。一部の実装形態では、オペレーティングシステム８５２は、カーネル（例えば、ＵＮＩＸカーネル）を含み得る。
メモリ８５０はまた、１つ以上の追加のデバイス、１つ以上のコンピュータ、及び／又は１つ以上のサーバとの通信を促進するための通信命令８５４、例えば、他のデバイスとの有線通信又は無線通信のためのソフトウェアスタックを実装するための命令なども記憶できる。メモリ８５０は、図６及び図７を参照して説明したグラフィカルユーザインタフェース処理を容易にするためのグラフィカルユーザインタフェース命令８５６と、センサ関連の処理及び機能を容易にするためのセンサ処理命令８５８と、電話関連の処理及び機能を容易にするための電話命令８６０と、電子メッセージング関連の処理及び機能を容易にするための電子メッセージング命令８６２と、ウェブブラウジング関連の処理及び機能を容易にするためのウェブブラウジング命令８６４と、メディア処理関連の処理及び機能を容易にするためのメディア処理命令８６６と、包括的なＧＮＳＳ及び位置関連の処理及び命令を容易にするためのＧＮＳＳ／場所命令８６８と、図６及び図７を参照して説明したカメラ関連の処理及び機能を容易にするカメラ命令８７０と、他のアプリケーション８７２命令と、を含んでもよい。メモリ８５０はまた、セキュリティ命令、ウェブビデオ関連の処理及び機能を促進するためのウェブビデオ命令、並びに／又は、ウェブショッピング関連の処理及び機能を促進するためのウェブショッピング命令など、他のソフトウェア命令（図示せず）を記憶することができる。一部の実装形態では、メディア処理命令８６６を、オーディオ処理関連の処理及び機能を容易にするためのオーディオ処理命令と、ビデオ処理関連の処理及び機能を容易にするためのビデオ処理命令とに、それぞれ分割することができる。
一実施形態では、図６及び図７を参照して説明したタップ、スライド、及びリフトジェスチャが、メディアキャプチャデバイス８００上のソフトウェアに実装されたタッチイベントモデルを用いて検出される。例示的なタッチイベントモデルは、その全体が参照により本明細書に組み込まれる、２０１３年１０月１５日に発行の「Ｔｏｕｃｈ Ｅｖｅｎｔ Ｍｏｄｅｌ」と題された米国特許第８，５６０，９７５号に記載されている。
上記で特定された命令及びアプリケーションのそれぞれは、上記１つ以上の機能を実行する命令セットに対応し得る。これらの命令は、別個のソフトウェアプログラム、手順、又はモジュールとして実装する必要がない。メモリ８５０に追加の命令を含めてもよいし、又は含まれている命令を減らしてもよい。更にまた、モバイルデバイスの様々な機能は、１つ以上の信号処理及び／又は特定用途向け集積回路を含むハードウェア及び／又はソフトウェアに実装できる。
記載された機能は、有利なことに、データストレージシステム、少なくとも１つの入力デバイス、及び少なくとも１つの出力機器からのデータ及び命令を受信し、並びにこれらにデータ及び命令を送信するように結合された少なくとも１つのプログラム可能プロセッサを含む、プログラム可能システム上で実行可能な１つ以上のコンピュータプログラム内に実装できる。コンピュータプログラムは、特定の行動を実行するか、又は特定の結果をもたらすために、コンピュータ内で直接的又は間接的に使用することができる命令セットである。コンピュータプログラムは、コンパイル型言語又はインタプリタ型言語を含む、任意の形態のプログラミング言語（例えば、ＳＷＩＦＴ、Ｏｂｊｅｃｔｉｖｅ－Ｃ、Ｃ＃、Ｊａｖａ）で書くことができ、スタンドアロンプログラム若しくはモジュール、コンポーネント、サブルーチン、ブラウザベースウェブアプリケーション、又はコンピューティング環境で使用するのに好適な他のユニットを含む、任意の形態で配布され得る。
命令のプログラムの実行に好適なプロセッサには、例として、汎用マイクロプロセッサ及び専用マイクロプロセッサの両方、並びに任意の種類のコンピュータの、ソールプロセッサ、又は複数のプロセッサ若しくはコアのうちの１つ、が含まれる。一般的に、プロセッサは、読み出し専用メモリ若しくはランダムアクセスメモリ、又はその両方から命令及びデータを受信する。コンピュータの必須要素は、命令を実行するプロセッサ、並びに命令及びデータを保存する１つ以上のメモリである。一般に、コンピュータはまた、データファイルを記憶するための１つ以上の大容量記憶デバイスを含むか、又はそれらと通信するように動作可能に結合され、そのようなデバイスとしては、内蔵ハードディスク及びリムーバブルディスクなどの磁気ディスク、光磁気ディスク、及び光学ディスクが挙げられる。コンピュータプログラム命令及びデータを明確に具体化するのに適した記憶デバイスには、例として、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュメモリデバイスなどの半導体メモリデバイス、内蔵ハードディスク及びリムーバブルディスクなどの磁気ディスク、光磁気ディスク、並びにＣＤ－ＲＯＭ及びＤＶＤ－ＲＯＭディスク、を含む、全ての形態の不揮発性メモリが含まれる。プロセッサ及びメモリは、ＡＳＩＣ（特定用途向け集積回路）によって補完されるか、又はその中に組み込まれてもよい。
ユーザとの対話を行うために、ＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニタ、あるいはユーザに情報を表示するための網膜表示デバイスなどの表示デバイスを有するコンピュータに、特徴を実装することができる。コンピュータは、タッチ面の入力デバイス（例えば、タッチスクリーン）又はキーボード、及びユーザがコンピュータへの入力を行うことができるマウス又はトラックボールなどのポインティングデバイスを有することができる。コンピュータは、ユーザからの音声コマンドを受信するための音声入力デバイスを有することができる。
特徴は、データサーバなどのバックエンドコンポーネントを含むコンピュータシステム、又はアプリケーションサーバ若しくはインターネットサーバなどのミドルウェア構成要素を含むコンピュータシステム、又はグラフィカルユーザインタフェース若しくはインターネットブラウザを有するクライアントコンピュータなどのフロントエンド構成要素、若しくはそれらの任意の組み合わせを含むコンピュータシステム内に実装されてもよい。システムの構成要素は、通信ネットワークなどの、デジタルデータ通信の任意の形態又は媒体によって接続されてもよい。通信ネットワークの例には、例えば、ＬＡＮ、ＷＡＮ、並びにインターネットを形成するコンピュータ及びネットワークが含まれる。
コンピュータシステムは、クライアント及びサーバを含むことができる。一般的に、クライアント及びサーバは、互いに遠隔にあり、典型的には、通信ネットワークを通じて相互作用する。クライアント及びサーバの関係は、各々のコンピュータ上で実行されていてかつ相互にクライアント／サーバ関係を有するコンピュータプログラムを介して生起される。一部の実施形態では、サーバは、クライアントデバイスに、（例えば、クライアントデバイスと対話するユーザにデータを表示し、ユーザからのユーザ入力を受信する目的のために）データ（例えば、ＨＴＭＬページ）を送信する。クライアントデバイスで生成されたデータ（例えば、ユーザ対話の結果）は、クライアントデバイスから、サーバで受信することができる。
１つ以上のコンピュータのシステムは、ソフトウェア、ファームウェア、ハードウェア、又はそれらの組み合わせを動作中のシステムにインストールして、そのシステムにその動作を実行させることによって、特定のアクションを実行するように構成することができる。１つ以上のコンピュータプログラムは、データ処理装置によって実行されたときにその装置に動作を実行させる命令を備えることによって、特定のアクションを実行するように構成することができる。
開示される実施形態の１つ以上の特徴又はステップは、アプリケーションプログラミングインタフェース（ＡＰＩ）を使用して実装されてもよい。ＡＰＩは、データを提供する、又は動作若しくは計算を実行するサービスを提供する、呼び出しアプリケーションと、他のソフトウェアコード（例えば、オペレーティングシステム、ライブラリルーチン、機能）との間を渡される、１つ以上のパラメータを定義することができる。ＡＰＩは、ＡＰＩ仕様書で定義される呼び出し規約に基づいて、パラメータリスト又は他の構造を介して１つ以上のパラメータを送信又は受信する、プログラムコード内の１つ以上の呼び出しとして実装されてもよい。パラメータは、定数、キー、データ構造、オブジェクト、オブジェクトクラス、変数、データ型、ポインタ、アレイ、リスト、又は別の呼び出しであってもよい。ＡＰＩ呼び出し及びパラメータは、任意のプログラミング言語で実装されてもよい。プログラミング言語は、プログラマがＡＰＩをサポートする機能にアクセスするために使用する語彙及び呼び出し規約を定義することができる。一部の実装形態では、ＡＰＩ呼び出しは、入力能力、出力能力、処理能力、電力能力、通信能力などのアプリケーションを実行するデバイスの能力を、アプリケーションに報告することができる。
本明細書は、多数の特定の実装詳細を含むが、これらは、任意の発明の範囲又は特許請求され得る範囲の制限として解釈されるべきではなく、特定の発明の特定の実施形態に固有である特徴の説明として解釈されるべきである。別個の実施形態のコンテキストで本明細書に記載されている特定の特徴どうしを組み合わせて、単一の実施形態に実装することもできる。その逆に、単一の実施形態のコンテキストで記載されている様々な特徴をそれぞれ別個に複数の実施形態に、又は任意の好適な部分的組み合わせにて実装することもできる。更に、特徴が特定の組み合わせで作用するものとして上に記載されている場合もあれば、更には当初からそのようなものとして主張されている場合もあるが、いくつかの実例においては、主張された組み合わせの１つ以上の特徴をその組み合わせから削除することもできる。また、主張された組み合わせを部分的組み合わせ又は部分的組み合わせの変形態様に向けることもできる。
同様に、図面において、動作は、特定の順番で表されているが、望ましい結果を達成するために、これらの動作が示された順番、若しくは逐次的順番、又は示された動作が全て実行されることを必要としていると理解すべきではない。特定の状況において、多重タスク処理及び並列処理が、有利な場合がある。そのうえ、上述した実施形態における様々なシステム構成要素の分離は、あらゆる実施形態においてそのような分離が要求されるものとして理解されるべきではなく、説明したプログラム構成要素及びシステムを概してまとめて単一のソフトウェア製品に一体化してもよいし、又は複数のソフトウェア製品にパッケージ化してもよいことは理解されるべきである。
図９Ａ～図９Ｐ及び図１０Ａ～図１０Ｆは、一部の実施形態による、ジェスチャによるメディアキャプチャを実行するための例示的なユーザインタフェースを示す。それらの図におけるユーザインタフェースは、図１１Ａ～図１１Ｂにおける処理を含む、以下で説明される処理を例示するために使用される。
図９Ａは、例示的なメディアキャプチャユーザインタフェース９０４を示す。一部の実施形態では、デバイス９００は、デバイス１００、３００、又は５００の１つ以上の特徴を含む。この例では、デバイス９００は、メディアキャプチャインタフェース９０４を表示するタッチスクリーンディスプレイ９０２を含む。一部の実施形態では、メディアキャプチャインタフェースは、ユーザ入力（例えば、タッチ入力）に応答して１つ以上のタイプのメディアをキャプチャするために使用される。例えば、メディアキャプチャインタフェースは、静止画像、ビデオ（例えば、オーディオを含む）、及び画像のシーケンス（例えば、バースト画像キャプチャ）のうちの１つ以上をキャプチャするために使用可能なグラフィカルユーザインタフェースであってもよい。メディアキャプチャインタフェース９０４は、（例えば、ユーザがメディア項目をキャプチャするのに適切な時間を決定できるように）例えば、メディアキャプチャインタフェースで表示するためにシーンのビューを通過する画像センサ（例えば、光学センサ１６４）などのメディアキャプチャ構成要素によって取得されているシーンの描写を含むビューファインダエリア９０６を含む。メディアキャプチャインタフェース９０４はまた、（例えば、「写真」から「ビデオ」に、又はパノラマ」、「タイムラプス」、「スローモーション」などに）メディアキャプチャモードを変更するために（例えば、タッチ入力、スワイプ入力を介して）使用することができるモードセレクタ９０８も含む。メディアキャプチャインタフェース９０４はまた、メディアキャプチャアフォーダンス９１０を含む。メディアキャプチャアフォーダンスはまた、「シャッタ」又は「シャッタアフォーダンス」などと呼ばれる場合もある。
一部の実施形態では、メディアキャプチャアフォーダンス上のタッチ入力（例えば、タップとも呼ばれる、タップジェスチャ）により、デバイスは、（例えば、現在のメディアキャプチャモードに従って）メディア項目をキャプチャする。例えば、図９Ａに示す例では、現在のメディアキャプチャモードは「写真」であるため、ユーザは、デバイス９００がメディアキャプチャアフォーダンス９１０上のタップに応答して静止画像をキャプチャすることを期待することができる。メディアキャプチャインタフェース９０４はまた、メディアをキャプチャするために使用されるデバイス９００の画像センサ（例えば、前面カメラ、背面カメラ）を（例えば、ユーザ入力に応答して）変更するために使用することができる、カメラセレクタアフォーダンス９１２を含む。メディアキャプチャインタフェース９０４はまた、最後にキャプチャされたメディア項目のプレビュー（例えば、サムネイル、ビデオの単一フレーム）を表示する、最後にキャプチャされたメディア項目エリア９１４を含む。一部の実施形態では、最後のキャプチャメディア項目エリア（例えば、９１４）に関連付けられたタッチ入力に応答して、デバイス（例えば、９００）は、１つ以上の最近のキャプチャメディア項目、複数のメディア項目（例えば、カメラロール）、及び／又はメディアライブラリを表示する。
上述のように、デバイス（例えば、９００）は典型的には、現在のメディアキャプチャモードに基づいて、メディアキャプチャアフォーダンス（例えば、９１０）上のユーザ入力に応答する。本明細書では、メディアのジェスチャによるキャプチャの技法を記載する。ジェスチャに依存することにより、使用される特定のジェスチャに基づいて、異なるタイプのメディアをキャプチャさせることができる。メディアをキャプチャするために使用可能な特定のジェスチャは、ユーザ入力特性（例えば、持続時間、移動、及び／又はそれらの様々な組み合わせ）に基づいて異なる特性を有することができる。図９Ａ～図９Ｐの以下の例に示すように、キャプチャされたメディアのタイプは、タッチ入力を受け取ったときにアクディブなメディアキャプチャモードに対応する必要はない。
とりわけ、入力特性ボックス９０１は、図９Ａ～図９Ｐ全体を通して含まれ、対応する図における（例えば、電子デバイス９００によって検出された）タッチ入力の特性を示し、それぞれの図に描かれたそれぞれの例示的なシナリオにおける（例えば、デバイス９００のメモリ内の）タッチ入力特性の視覚的表現として提供される。タッチ入力に関連付けられた入力特性は、デバイス（例えば、９００）によって使用されて、タッチ入力が特定のジェスチャ（例えば、それはメディアキャプチャ関連のアクションを実行させることができる）と見なされる基準を満たすかどうかを判定することができる。入力特性ボックス９０１は、読者の理解を容易にするための視覚的補助としてのみ提供され、必ずしもデバイス（例えば、９００）には表示されない。加えて、図又は本明細書で特に言及しない限り、入力特性ボックス９０１は、デバイス９００がそれぞれの図内の描かれたタッチ入力（例えば、図９Ｂの９２０）を受け取った後の、またそのような入力の検出を中止する前のタッチ入力の特性（例えば、タッチ入力のリフトオフ）を示す。
図９Ａ～図９Ｂは第１のタイプのメディア項目のキャプチャを示す。図９Ａ～図９Ｂに示す例では、デバイス９００は、現在のメディアキャプチャモード（例えば、「写真」）に対応する第１のタイプのメディア項目をキャプチャする。図９Ｂでは、デバイス９００は、メディアキャプチャアフォーダンス９１０に対応するタッチスクリーンディスプレイ９０２上の場所におけるタッチ入力であるユーザ入力９２０を受け取る。図９Ｂの入力特性ボックス９０１に示すように、ユーザ入力９２０（タッチ入力９２０とも呼ばれる）は、移動基準を満たさず（移動基準：満たしていない）、閾値時間よりも長い間検出されていない（閾値時間：経過していない）。この例では、デバイス９００は、移動基準が満たされる前かつ閾値時間が経過する前に、（例えば、入力のリフトオフに起因して）タッチ入力９２０の検出を中止する。したがって、この例では、タッチ入力９２０はタップ入力ジェスチャである。図９Ｃは、タッチ入力９２０のリフトオフ後のデバイス９００を示す。図９Ｃでは、メディアキャプチャインタフェース９０４は、図９Ａに示すものと同じ状態に戻るが、ここで、最後にキャプチャされたメディア項目エリア９１４は、デバイス９００がメディア項目をキャプチャしたことを示すビューファインダエリア９０６に示される現在のシーンの表現を含む。この例では、デバイス９００は、静止画像（例えば、例示的な第１のタイプのメディア）をキャプチャしたものである。一部の実施形態では、デバイス９００は、移動基準を満たさず、閾値時間を超える間に検出されなかったユーザ入力（例えば、タップ入力）に応答して、第１のタイプのメディア項目に加えて、第２のタイプのメディア項目をキャプチャする。一部の実施形態では、第２のタイプのメディアは、タッチ入力の持続時間とは無関係の持続時間を有する。例えば、デバイス９００は、タッチ入力の持続時間（例えば、０．５秒）にかかわらず、固定持続時間（例えば、３秒の長さ）又は可変持続時間（例えば、２～５秒の長さ）のビデオクリップ（例えば、オーディオを含む）を追加的に（又は代わりに）キャプチャすることができる。
図９Ｄ～図９Ｆは、第２のタイプのメディア項目のキャプチャを示す。図９Ｄ～図９Ｆに示す例では、デバイス９００は、移動基準を満たさないが、時間基準を満たす（例えば、閾値時間を超える間検出される）タッチ入力を使用して、現在のメディアキャプチャモード（例えば、「写真」）に対応しない第２のタイプのメディア項目（例えば、ビデオ）をキャプチャする。図９Ｄでは、デバイス９００は、メディアキャプチャアフォーダンス９１０に対応するタッチスクリーンディスプレイ９０２上の場所におけるタッチ入力であるユーザ入力９３０を受け取る。図９Ｄの入力特性ボックス９０１に示すように、ユーザ入力９３０は移動基準を満たさず（移動基準：満たしていない）、閾値時間より長い間検出されていない（閾値時間：経過していない）。
図９Ｅは、デバイス９００が閾値時間経過後、ただし、移動基準が満たされる前までタッチ入力９３０の検出を継続することを示す。したがって、図９Ｅの入力特性ボックス９０１は、ユーザ入力９３０が移動基準を満たさない（移動基準：満たしていない）が、閾値時間よりも長い間検出されている（閾値時間：経過した）ことを示す。したがって、この例では、タッチ入力９３０は、タップアンドホールド入力ジェスチャ（例えば、閾値時間にわたって保持されるタップ）である。タッチ入力９３０が閾値時間を超える間検出されたことに応答して、デバイス９００は、ビデオ（例えば、例示的な第２のタイプのメディア）のキャプチャ（例えば、記録）を開始する。図９Ｅに示すように、デバイス９００は現在、ビデオをキャプチャしている。この例では、ビデオキャプチャ中、ビデオの経過時間（００：００：０８、又は８秒）が示され、メディアキャプチャアフォーダンス９１０は、停止アフォーダンス９３４と取り替えられている。加えて、図９Ｅでは、デバイス９００は、（例えば、カメラセレクタアフォーダンス９１２を取り替えて）以下でより詳細に論じられるメディアキャプチャロックアフォーダンス９３２を表示する。
図９Ｆは、タッチ入力９３０のリフトオフ後のデバイス９００を示す。図９Ｆでは、タッチ入力９３０のリフトオフに応答して、メディアキャプチャインタフェース９０４は、図９Ｄに示すものと同じ状態に戻るが、ここで、最後にキャプチャされたメディア項目エリア９１４は、デバイス９００がメディア項目をキャプチャしたことを示すビューファインダエリア９０６に示される現在のシーンの表現を含む。この例では、デバイス９００は、ビデオ（例えば、例示的な第２のタイプのメディア）をキャプチャしたものである。一部の実施形態では、デバイス９００は、移動基準を満たさないが閾値時間を超える間に検出されたユーザ入力（例えば、タップアンドホールドジェスチャ、タッチ入力９３０）に応答して、第２のタイプのメディア項目に加えて、第１のタイプのメディア項目をキャプチャする。例えば、ビデオをキャプチャすることに加えて、デバイス９００は追加的に静止画像をキャプチャすることができる。一部の実施形態では、（例えば、タッチ入力９３０に応答してキャプチャされた）第２のタイプのメディアは、タッチ入力（例えば、９３０）の持続時間に基づく持続時間を有する。例えば、デバイス９００は、タッチ入力９３０が検出された持続時間に基づく持続時間を有するビデオクリップ（例えば、オーディオを含む）をキャプチャすることができる。したがって、タッチ入力９３０がタッチスクリーンディスプレイ９０２上で８秒間検出された場合、結果としてキャプチャされた第２のタイプのメディアは、８秒の長さのビデオであり得る。一部の実施形態では、第２のタイプのメディアの持続時間は、タッチ入力の持続時間に基づくものであるが、ビデオ記録は、タッチ入力が閾値持続時間を超える間検出された後に開始する。したがって、閾値持続時間が１秒であり、タッチ入力が８秒間検出された場合、得られるビデオは７秒である（例えば、リフトオフがビデオの記録を終了させ、次いで、それはデバイス９００によってメディアライブラリに記憶される）。
図９Ｇ～図９Ｊは、ジェスチャの検出が中止される後に継続する第２のタイプの媒体のキャプチャを開始するためのジェスチャの使用を示す。図９Ｇ～図９Ｊに示す例では、デバイス９００は、（例えば、第１の方向への）移動基準を満たす（また、時間基準も満たす）タッチ入力９４０を用いて、現在のメディアキャプチャモード（例えば、「写真」）に対応しない第２のタイプのメディア項目（例えば、ビデオ）をキャプチャする。図９Ｇでは、デバイス９００は、メディアキャプチャアフォーダンス９１０に対応するタッチスクリーンディスプレイ９０２上の場所におけるタッチ入力であるユーザ入力９４０を受け取る。図９Ｄの入力特性ボックス９０１に示すように、ユーザ入力９４０は移動基準を満たさず（移動基準：満たしていない）、閾値時間よりも長い間検出されていない（閾値時間：経過していない）。
図９Ｇ～図９Ｊの例では、タッチ入力９４０は閾値持続時間よりも長い間検出されるが、閾値持続時間を満たすことは、メディアキャプチャセッションをロックされたメディアキャプチャ状態に遷移させるための要件ではない。むしろ、この例では、移動基準が満たされていることが唯一の要件である。一部の実施形態では、メディアキャプチャセッションをロックするために、閾値時間が追加的に必要とされる場合がある。
図９Ｈは、デバイス９００が、閾値時間経過後、ただし、移動基準が満たされる前までタッチ入力９４０の検出を継続することを示す。したがって、図９Ｈの入力特性ボックス９０１は、ユーザ入力９４０が移動基準を満たさない（移動基準：満たしていない）が、閾値時間よりも長い間検出されている（閾値時間：経過した）ことを示す。図９Ｄ～図９Ｆに上記した例と同様に、閾値期間よりも長く検出されたタッチ入力に応答して、デバイス９００は、ビデオ（例えば、例示的な第２のタイプのメディア）のキャプチャ（例えば、記録）を開始する。この例では、タッチ入力９４０は、接触の初期位置（例えば、９１０の場所）からドラッグされたタッチ入力である。本明細書で使用するとき、「ドラッグされた」タッチ入力は、「スライドする」タッチ入力とも呼ばれる。図９Ｈでは、タッチ入力９４０は、メディアキャプチャアフォーダンス９１０の右にドラッグされている。図９Ｈに示すように、デバイス９００は現在、ビデオをキャプチャしている。この例では、ビデオの経過時間（００：００：０８、又は８秒）が示され、メディアキャプチャアフォーダンス９１０は、停止アフォーダンス９３４と取り替えられている。停止アフォーダンスは、（例えば、ロックされたメディアキャプチャセッション中にメディアキャプチャアフォーダンスを取り替えた場合）、本明細書では「ロック状態キャプチャボタン」とも呼ばれる。一部の実施形態では、停止アフォーダンス（例えば、９３４）は、（例えば、メディアキャプチャセッションをロックされたメディアキャプチャ状態に移行させる）タッチ入力のリフトオフに応答して、メディアキャプチャアフォーダンス（例えば、９１０）を取り替える。加えて、図９Ｈでは、デバイス９００は、（例えば、カメラセレクタアフォーダンス９１２を取り替えて）以下でより詳細に論じられるメディアキャプチャロックアフォーダンス９３２を表示する。
とりわけ、図９Ｈに示すシナリオは、図９Ｈにおけるタッチ入力（９４０）がわずかに右に移動し、図９Ｅにおけるタッチ入力（９３０）が移動していないことを除いて、図９Ｅのシナリオと同様である。したがって、タッチ入力９４０が移動基準を満たさないが、閾値時間よりも長い間検出されているので、（例えば、タッチ入力９４０のリフトオフにより）タッチ入力９４０の検出が図９Ｈに示す瞬間に中止された場合、図９Ｆに示すものと同様の結果が生じ、デバイス９００は、タッチ入力９４０が検出された持続時間に基づく持続時間を有するビデオをキャプチャすることになる。しかし、この例では、以下に記載する図９Ｉ及び図９Ｊに示されるように、タッチ入力９４０は検出され続ける。
図９Ｈでは、デバイス９００は、タッチ入力９４０の現在の場所の表現であるタッチ入力インジケータ９４２を表示する。この例では、タッチ入力インジケータはタッチ入力９４０の移動（例えば、メディアキャプチャアフォーダンス９１０（図９Ｇ）／停止アフォーダンス９３４（図９Ｈ）に関連付けられた領域から離れるタッチ入力の移動）に応答して表示される。移動経路インジケータ９４３も示され、停止アフォーダンス９３４（又は停止アフォーダンス９３４と取り替えられていなかった場合には、メディアキャプチャ９１０）とメディアキャプチャロックアフォーダンス９３２との間に表示されている。タッチ入力インジケータ９４２は、（例えば、左又は右の一方又はいずれかの方向への）タッチ入力９０４のドラッグ（「スライド」とも呼ばれる）に応答して、指示された移動経路に沿って移動する。
ここで図９Ｉ及び図９Ｊを参照すると、ユーザ入力の検出を中止した後にメディアのキャプチャを継続する技法が示されている。図９Ｂ～図９Ｃに関連して上述したように、デバイスは、特定の特性（例えば、閾値時間未満の間検出される移動はない）を有するユーザ入力（例えば、ジェスチャ）に応答して、任意選択的に第１のタイプのメディアをキャプチャする。図９Ｄ～図９Ｆに関連して上述したように、デバイスは任意選択的に、ユーザ入力が他の特性を有する（例えば、移動はなく（又は移動が基準を満たさず）、閾値時間を超える間検出される）場合、ユーザ入力の持続時間に基づく第２のタイプのメディア（例えば、ビデオ）をキャプチャする。一部の実施形態では、デバイスは、タッチ入力の検出が中止された後であっても継続するように、第２のタイプのメディアのキャプチャを継続する。
図９Ｉでは、タッチ入力９４０は、更に右に移動しており、現在、メディアキャプチャロックアフォーダンス９３２に対応する場所にある。この例では、タッチ入力（例えば、９４０）が、メディアキャプチャアフォーダンス９１０の場所から（例えば、タッチダウンで）（又は、メディアキャプチャアフォーダンスを取り替えた停止アフォーダンス（例えば、９３４）の場所から）メディアキャプチャロックアフォーダンス９３２の場所へ移動する（例えば、ドラッグされる）ときに、移動基準は満たされる。一部の実施形態では、デバイスは、ユーザ入力の検出が中止されたことに応答して（例えば、タッチ入力のリフトオフ時に）移動基準が満たされたかどうかを判定する。したがって、図９Ｉの入力特性ボックス９０１は、ユーザ入力９４０が現在の場所で発生した場合に移動基準を満たすことになる（移動基準：満たされた（リフトオフ時））ことを示し、またタッチ入力が閾値時間よりも長い間検出されていること（閾値時間：経過した）を示す。図９Ｉに示すように、移動インジケータ９４２は、接触が対応する場所にあり、検出され続ける間、メディアキャプチャロックアフォーダンス９３２を覆わない／覆い隠さない。一部の実施形態では、移動インジケータ（例えば、９４２）は、接触が対応する場所にあり、検出され続ける間、メディアキャプチャロックアフォーダンス（例えば、９３２）を覆う／覆い隠す。図９Ｉに示すように、メディアキャプチャインタフェース９０４は、ビデオ記録状態のままにある。停止アフォーダンス９３４が表示され続け、ビデオキャプチャの経過時間（００：００：１０、又は１０秒）が表示され続ける。
図９Ｊは、タッチ入力９４０のリフトオフ後のデバイス９００を示す。タッチ入力９４０の検出を中止したことに応答して、タッチ入力９４０のリフトオフが、移動基準を満たした後に発生したため（例えば、アフォーダンス９３２上のリフトオフ）、デバイス９００は、第２のタイプのメディア（例えば、ビデオ記録）のキャプチャを継続する。メディアのキャプチャを継続することは、本明細書では、メディアキャプチャセッションを「維持する」とも呼ばれる。この例では、メディアキャプチャセッション（例えば、ビデオのキャプチャ）が、アンロックされたメディアキャプチャ状態からロックされたメディアキャプチャ状態に遷移したため、デバイス９００は第２のタイプのメディアのキャプチャを継続する。メディアキャプチャ状態は、本明細書では、「メディアキャプチャセッション状態」とも呼ばれる。本明細書で使用するとき、アンロックされたメディアキャプチャ状態にあるメディアキャプチャセッションは、「アンロックされた」メディアキャプチャセッションとも呼ばれる。本明細書で使用するとき、ロックされたメディアキャプチャ状態にあるメディアキャプチャセッションは、「ロックされた」メディアキャプチャセッションとも呼ばれる。一部の実施形態では、メディアキャプチャセッションがロックされたメディアキャプチャ状態にあるとき、メディアセッションは（例えば、メディアセッションを開始させるタッチ入力ジェスチャの検出の中止後に）継続する。図９Ｊに示すように、メディアキャプチャインタフェース９０４は、ビデオ記録状態のままである。停止アフォーダンス９３４が引き続き表示され、ビデオキャプチャの経過時間（００：００：１２、又は１２秒）が継続して表示される（例えば、またキャプチャ中により長い時間が経過すると更に進行する）。また図９Ｊに示すように、デバイス９００は、第２のタイプのメディア（例えば、ビデオ）のキャプチャを継続している間、第１のタイプのメディア（例えば、静止画像及び／又は固定持続時間クリップ）をキャプチャするのに使用され得る画像キャプチャアフォーダンス９４４を表示する。この例では、デバイス９００は、ビデオ（例えば、例示的な第２のタイプのメディア）のキャプチャを継続する。
一部の実施形態では、デバイス９００は、移動基準を満たし、閾値時間を超える間検出されたユーザ入力に応答して、第２のタイプのメディア項目に加えて、第１のタイプのメディア項目をキャプチャする。例えば、ビデオをキャプチャすることに加えて、デバイス９００は、タッチ入力９４０に応答して静止画像を追加的にキャプチャすることができる。一部の実施形態では、静止画像は廃棄される。例えば、タッチ入力のタッチダウンに応答して、第１のタイプのメディア（例えば、静止画像）を取得することができるが、デバイスは、第２のタイプのメディアがキャプチャされた（例えば、タッチ入力が閾値時間にわたって継続する、又は移動基準を満たす）場合、第１のタイプのメディアを廃棄することができる。
一部の実施形態では、デバイスは、ユーザ入力の検出が継続している間に移動基準が満たされるかどうかを判定する。例えば、デバイス９００は、タッチ入力９４０が、図９Ｉのメディアキャプチャロックアフォーダンス９３２の場所などの特定の場所に到達すると、移動基準を満たすと判定することができる。このような例では、ユーザ入力が移動基準を満たしたことに応答して、デバイスは、最初にリフトオフを必要とせずに（例えば、タッチ入力９４０が依然として検出されている場合でも）、（例えば、図９Ｊに示すように）現在のメディアキャプチャセッションをロックされたメディアキャプチャ状態に遷移させることができる。したがって、デバイス９００は、（例えば、メディアキャプチャアフォーダンス９１０の方向に戻る、図９Ｈに示すような場所までの）タッチ入力９４０の更なる移動及びメディアキャプチャロックアフォーダンス９３２以外の場所でのリフトオフにもかかわらず、第２のタイプのメディアのキャプチャを継続することができる。一部の実施形態では、メディアキャプチャアフォーダンス（例えば、９１０）上の、又は停止アフォーダンス（例えば、９３４）上の（例えば、タッチ入力９４０の）リフトオフにより、デバイス（例えば、９００）はメディアのキャプチャを中止する（例えば、メディアキャプチャはリフトオフ後に継続しない）。
一部の実施形態では、タッチ入力がメディアキャプチャロックアフォーダンス（例えば、９３２）に向かって少なくとも所定の量（例えば、割合、一定距離）だけドラッグされた場合に、移動基準は満たされる。例えば、タッチ入力９４０が、図９Ｇのメディアキャプチャアフォーダンス９１０の場所（例えば、図９Ｈの停止アフォーダンス９３４と同じ場所）と、メディアキャプチャロックアフォーダンス９３２との間の距離の少なくとも５０％、移動インジケータ９４２をドラッグした場合、移動基準は、（例えば、即座に、又はリフトオフ時に）満たされ得る。これは、図１０Ａ～図１０Ｆに示される例において示されており、以下でより詳細に説明する。
一部の実施形態では、移動基準は、（例えば、満たされるために）特定の方向（例えば、右、左、下、上）への移動を必要とする。例えば、図９Ｇ～図９Ｊは、移動基準を満たすために必要とされる（メディアキャプチャアフォーダンス９１０の）右への移動を示す。一部の実施形態では、移動基準は、１つ以上の方向への移動によって満たされる（例えば、左又は右への移動は移動基準を満たすことができる）。
図９Ｋは、メディアセッションがロックされたメディアキャプチャ状態にある間に第２のタイプのメディアのキャプチャを中止する例示的な技法を示す。タッチ入力９４０をリフトオフするとメディアがキャプチャされ続けるため、停止アフォーダンス９３４へのタッチ入力９５０を使用して、デバイス９００にビデオのキャプチャを中止させることができる。例えば、タッチ入力９５０に応答して、デバイス９００は、ビデオを記録することを中止し、図９Ｆに示すように、メディアキャプチャインタフェース９０４を表示することができる（例えば、現在何も記録されていないことを示す）。
図９Ｌは、メディアセッションがロックされたメディアキャプチャ状態にある間に第１のタイプのメディアをキャプチャする例示的な技法を示す。図９Ｌでは、デバイス９００は画像キャプチャアフォーダンス９４４上のユーザ入力９６０を受け取り、それは、第２のタイプのメディア（例えば、ビデオ）を記録しながら、デバイス９００に第１のタイプのメディア（例えば、静止画像及び／又は固定持続時間クリップ）をキャプチャさせるために使用することができる。この例では、デバイス９００は、タッチ入力９６０の後に、ビデオ（例えば、例示的な第２のタイプのメディア）のキャプチャを継続する。タッチ入力９６０に応答して、デバイス９００は、ビデオフレームから静止画像をキャプチャする（例えば、メディアライブラリ内に静止画像を記憶することを含む）。
図９Ｍ～図９Ｐは、タッチ入力ジェスチャを用いた、第１のタイプのメディア項目のシーケンスのキャプチャを示す。図９Ｍ～図９Ｐに示す例では、デバイス９００は、第２の移動基準を満たすタッチ入力を用いて、第１のタイプのメディア項目（例えば、静止画像）のシーケンスをキャプチャする。一部の実施形態では、デバイスは、ユーザ入力（例えば、タッチ入力）が１つ以上の異なる移動基準（例えば、第１の移動基準及び第２の移動基準）を満たすかどうかを判定する。例えば、例示的な第１の移動基準は、図９Ｂ～図９Ｋに関して上述した移動基準とすることができ、その場合、基準を満たすと、デバイスはメディアキャプチャセッションをロックされたメディアキャプチャ状態に変更する。一部の実施形態では、第２の移動基準を満たすと、デバイス９００は、異なるメディアキャプチャアクション（例えば、第１の移動基準が満たされたことに応答して取られるアクションとは異なる）を行う。この例では、デバイス９００は、以下でより詳細に論じられる第２の移動基準を満たすタッチ入力の検出に応答して、バーストメディアキャプチャを実行する。
図９Ｍでは、デバイス９００は、メディアキャプチャアフォーダンス９１０に対応するタッチスクリーンディスプレイ９０２上の場所におけるタッチ入力であるユーザ入力９７０を受け取る。図９Ｄの入力特性ボックス９０１に示すように、ユーザ入力９７０は移動基準を満たさず（移動基準：満たしていない）、閾値時間よりも長い間検出されていない（閾値時間：経過していない）。
図９Ｎは、閾値時間が経過した後、かつ移動基準が満たされた後まで、デバイス９００がタッチ入力９７０を検出し続けることを示す。したがって、図９Ｈの入力特性ボックス９０１は、ユーザ入力９４０が移動基準を満たさない（移動基準：満たしていない）が、閾値時間よりも長い間検出された（閾値時間：経過した）ことを示す。図９Ｎの例では、満たされた移動基準は、第２の移動基準である。この例では、第２の移動基準は、図９Ｂ～図９Ｋに関して上記した（第１の）移動基準とは異なる。この例では、第２の移動基準は、第２の方向への閾値量（例えば、任意の量、最小量）の移動を含む。図９Ｎの例では、タッチ入力９７０は、最小量（例えば、最小量の画素）だけ、第１の方向（例えば、右）とは異なる第２の方向（例えば、左）に移動している。タッチ入力９７０が第２の方向の第２の移動基準を満たすことを検出したことに応答して、デバイス９００は、第１のタイプのメディア項目のメディア項目のシーケンスのキャプチャを開始する（例えば、「バースト」画像キャプチャモードで画像のキャプチャを開始する）。この例では、デバイス９００は、タッチ入力９７０の検出を中止するまでメディア項目のシーケンスのキャプチャを継続する。一部の実施形態では、デバイスは、メディア項目のシーケンスをキャプチャしている間に、ロックされたメディアキャプチャ状態に移行する。例えば、デバイス９００は、任意選択的に、メディアキャプチャセッションをバーストモードにロックする能力を提供し、図９Ｇ～図９Ｊのビデオに関して上記したのと同様に、タッチ入力９７０のリフトオフ時にバースト撮影が継続する。上記と同様に、バーストモードは、１つ以上の移動基準（例えば、第３の移動基準）を満たすタッチ入力に基づいてロックされ得る。
第１の移動基準と第２の移動基準の詳細の説明は、（例えば、本明細書で使用される例とは異なる本明細書の技法の実装形態において）いずれかを限定すること、又はいずれかの特性に限定することを意図するものではないことに留意されたい。したがって、本明細書の具体的な移動基準に関して記載された具体的な詳細は単なる例示であり、当業者は、移動基準が本明細書に記載するあらゆる移動基準の１つ以上の特性を有し得ることを理解する。
図９Ｎに示すように、タッチ入力９７０の検出を継続している間、デバイス９００は、メディア項目のシーケンスのキャプチャを継続する。メディア項目のシーケンスのキャプチャを継続している間、デバイス９００は、タッチ入力９７０の場所を表すタッチ入力インジケータ９７４を表示する。タッチ入力インジケータ９７４は、例示的な移動経路インジケータ９７５（図９Ｏ）に沿って移動する。デバイス９００はまた、メディア項目のシーケンスをキャプチャする進行中の（バースト）メディアキャプチャセッション中にキャプチャされたメディア項目の数を示すシーケンスカウント９７２を表示する。図９Ｎに示すように、シーケンスカウント９７２の番号「１」が示すように、デバイス９００が（例えば、ユーザ入力９７０に応答して）現在のシーケンスのキャプチャを開始以来これまで、１つのメディア項目がキャプチャされている。
図９Ｏ及び図９Ｐは、タッチ入力の検出を継続している間、デバイス９００がメディア項目のシーケンスのキャプチャを継続することを示す。図９Ｏでは、タッチ入力９７０の検出が継続し、更に左にドラッグされており、シーケンスカウント９７６は、ここで「１０」を示す（例えば、第１のタイプの１０個のメディア項目がキャプチャされている）。図９Ｏでは、タッチ入力インジケータ９７４は、例示的な移動経路インジケータ９７５（実線として示される）に沿って移動する。一部の実施形態では、デバイス（例えば、９００）は、タッチ入力の移動に応答してシーケンスカウントを移動させる（例えば、コピーを作成し、それを含む新しいユーザインタフェース要素を再位置し、表示する）。例えば、図９Ｏでは、タッチ入力９７０が（図９Ｎの）シーケンスカウント９７２の場所に向かって移動した（例えば、近づいた、又は到達した）ことに応答して、デバイス９００は、（メディアキャプチャアフォーダンス９１０の元の場所に対応する）シーケンスカウント９７６において、新たな場所でキャプチャされたメディア項目の数を表示する。一部の実施形態では、デバイス（例えば、９００）は、シーケンスカウントの（例えば、９７６までの）移動に従って、初期表示場所でのシーケンスカウント（例えば、９７２）の表示を中止する。このようにして、デバイス９００は、ドラッグされたタッチ入力がシーケンスカウントを覆ってしまうのを防止する。一部の実施形態では、シーケンスカウントは、タッチ入力の移動に応答して移動しない。例えば、シーケンスカウントは、単一の場所（例えば、９７２、９７６、又は別の場所のいずれか）に表示され、タッチ入力が対応する場所に移動したことに応答して移動しない場合がある。一部の実施形態では、シーケンスカウントは、更なる移動に応答してもう一度移動する。例えば、タッチ入力がシーケンスカウント９７６の場所に戻ると、シーケンスは再び移動することができる（例えば、シーケンスカウント９７２として再び表示され得る）。
図９Ｐでは、タッチ入力９７０が検出され続け、更に左にドラッグされており、シーケンスカウント９７６はここで「２０」を示す（例えば、第１のタイプの２０個のメディア項目がキャプチャされている）。一部の実施形態では、デバイス（例えば、９００）は、タッチ入力の検出を中止したことに応答して、メディア項目のシーケンスのキャプチャを中止する。例えば、デバイス９００が、図９Ｐに示す瞬間にタッチ入力９７０の検出を中止する場合、メディア項目のシーケンスのキャプチャは、（例えば、第１のタイプの２０個のメディア項目をキャプチャした後に）中止することになる。このような例では、タッチ入力９７０のリフトオフに応答して、デバイス９００は、図９Ｆに示されるものと同様のメディアキャプチャインタフェース９０４を表示することができ、ここでは最後にキャプチャされたメディア項目エリア９１４は、メディア項目のシーケンス内にキャプチャされた２０個のメディア項目のうちの１つの表現を含む。
一部の実施形態では、タッチ入力の移動量及び／又は移動速度は、第１のタイプのメディア項目のシーケンスのキャプチャ特性に影響を及ぼす。例えば、閾値速度（例えば、タッチスクリーンディスプレイ上の移動速度）を上回る移動を有するタッチ入力は、バースト画像キャプチャの速度を増大させる（例えば、より低速で移動する類似のタッチ入力よりも高速にする）ことができ、かつ／又は（例えば、より低速で移動する類似のタッチ入力より）より高速で推移することができる。別の例として、初期位置（例えば、９１０）からよりも長い距離を移動するタッチ入力は、バースト画像キャプチャの速度を、より短距離を移動したタッチよりも大きくすることができる。
図１０Ａ～図１０Ｆは、メディアキャプチャセッションを、アンロックされたメディアキャプチャ状態からロックされたメディアキャプチャ状態に遷移させるための例示的なインタフェースを示す。特に、図１０Ａ～図１０Ｆは、図６Ａ～図６Ｆ及び図９Ａ～図９Ｐに関して上記したように、メディアセッションをロックされたメディアキャプチャ状態に移行させるために、１つ以上のアフォーダンスと対話するタッチ入力の例示的な詳細図を示す。図１０Ａ～図１０Ｆに示されるインタフェースは、デバイス９００によって（例えば、図９Ａ～図９Ｐに示されるインタフェースの１つ以上で）表示され得る。
図１０Ａは、例示的なメディアキャプチャアフォーダンス１０００を示す。例えば、メディアキャプチャアフォーダンス１０００は、メディアキャプチャアフォーダンス６０２又は９１０に関して上記したものと同じ機能を含むことができる。
図１０Ｂでは、ユーザ入力１００２（タッチ入力１００２とも呼ばれる）は、メディアキャプチャアフォーダンス１０００に関連付けられた場所で受け取られる（例えば、ユーザ入力は、アフォーダンス１０００を表示するデバイスによって検出される）。この例では、図９Ｄ及び図９Ｅのタッチ入力９３０に関して上記したものと同様に、タッチ入力１００２が閾値時間より長い間検出され、したがって、メディア（例えば、ビデオ）のキャプチャは、（例えば、デバイスがタッチ入力１００２を検出したことに応答して、又はタッチ入力１００２が閾値持続時間よりも長い間検出されたことに応答して）開始する。図１０Ｂの矢印が示すように、タッチ入力１００２は、メディアキャプチャアフォーダンス１０００の右方向への移動成分を含む。図１０Ｂにも示すように、メディアキャプチャロックアフォーダンス１００４は、メディアキャプチャアフォーダンス１０００の右に表示されている。例えば、メディアキャプチャロックアフォーダンス１００４は、メディアキャプチャロックアフォーダンス９３２に関して上記したものと同じ機能を含むことができる。図１０Ｂはまた、メディアキャプチャアフォーダンス１０００とメディアキャプチャロックアフォーダンス１００４とを接続する移動経路インジケータ１００５も示し、それはメディアキャプチャロックアフォーダンス１００４に向かう移動方向を示す。移動経路インジケータは、本明細書で使用するとき、「視覚的方向インジケータ」とも呼ばれる。
図１０Ｃでは、タッチ入力１００２は図１０Ｂからわずかに右に移動しており、図１０Ｄでは、タッチ入力１００２は図１０Ｃから更に右に移動している。図１０Ｄでは、タッチ入力インジケータ１００６は、ロック距離マーカ１００８をまだ通過していない。タッチ入力インジケータ１００６は、上記のタッチ入力インジケータ９４２の１つ以上の特徴を含むことができる。一部の実施形態では、ロック距離マーカ（例えば、１００８）は、移動基準に関連付けられた（例えば、それを満たすのに十分な）場所を示して（例えば、移動経路インジケータ１００５上に）表示され得る。図１０Ｄでは、ロック距離マーカ１００８は、メディアキャプチャセッション状態をロックするための移動基準を満たす距離を示す。図１０Ｃ及び図１０Ｄでは、タッチ入力１００２が検出され続けるにつれて、ビデオはキャプチャされ続ける。
図１０Ｅでは、タッチ入力１００２は右に移動し、ロック距離マーカ１００８を通過している。この例では、移動基準は、メディアキャプチャセッションをロックされたメディアキャプチャ状態に遷移させるための移動基準を満たすためにタッチ入力（例えば、１００２）のリフトオフを必要としない。したがって、図１０Ｅでは、メディアキャプチャセッション（例えば、ビデオの記録）がロックされたメディアキャプチャ状態に移行されている。例えば、図１０Ｆに示すように、図１０Ｅに描かれた位置でのタッチ入力１００２のリフトオフ後、ビデオキャプチャが継続する（例えば、停止アフォーダンス１０１０が表示され、ビデオが記録されていることを示している）。また、図１０Ｅに示すように、メディアキャプチャロックアフォーダンス１００４は、（例えば、画像キャプチャアフォーダンス９４４と同様の）画像キャプチャアフォーダンス１０１２の表示と取り替えられており、それは、第２のタイプのメディア（例えば、ビデオ）を記録している間、メディア（例えば、静止画像、及び／又は固定持続時間クリップなどの第１のタイプ）をキャプチャするために使用され得る。
図１０Ｆでは、デバイスは、タッチ入力１００２の検出を中止しているが、図９Ｊに関して上記したものと同様に、メディアのキャプチャ（例えば、ビデオの記録）を継続する。この例では、タッチ入力１００２のリフトオフは、（例えば、メディアキャプチャロックアフォーダンス１００４に関連付けられた場所に到達する前に）、図１０Ｅに示す場所である間に発生したが、タッチ入力１００２の移動がロック距離マーカ１００８を通り越して（タッチ入力インジケータ１００６によって表されるように）移動したため、メディアキャプチャセッションは依然として継続することになる。一部の実施形態では、デバイスは、タッチ入力インジケータ（例えば、１００６）、ロック距離マーカ（例えば、１００８）、及び移動経路インジケータ（例えば、１００５）のうちの１つ以上を表示しない。例えば、図１０Ｅを参照すると、デバイスは、タッチ入力インジケータ１００６、ロック距離マーカ１００８及び移動経路インジケータ１００５のうちの全て表示できるわけではなく（又は、いずれも表示することができず）表示、依然として図１０Ｅ及び図１０Ｆに関して説明するリフトオフに応答して同じ動作を実行することができる。
上記の説明では、タッチ入力９２０、９３０、９４０、９７０、及び１００２は、異なる参照番号によって示されている。しかし、これらのタッチ入力は、タッチ入力が結局１つ以上のジェスチャ入力であるかどうかに基づいて発生し得る複数の潜在的なジェスチャ及び／又は結果を表すことを意図している。すなわち、タッチ入力９２０、９３０、９４０、９７０、及び１００２のそれぞれは、単一のタッチ入力に関する異なる可能な結果を表す。例えば、タッチ入力９２０及び９３０は、同じ場所で同じデバイス条件の間に開始し、タッチ入力のための共通の開始点を表す。しかし、１つはタップジェスチャ（９２０）となり、１つはタップアンドホールドジェスチャ（９３０）になるので、異なるメディアキャプチャアクションが行われる。したがって、ユーザには、ユーザがタッチ入力を用いて実行するジェスチャに基づいて、デバイスの複数のメディアキャプチャアクションの制御が行われ得る。
加えて、上記の例は例示的なものであり、ジェスチャ、メディアアクション、移動基準、及び閾値時間の様々な組み合わせに関して限定することを意図するものではない。例えば、ビデオキャプチャが右方向への移動に関して説明されているが、代わりに右への移動に応答して、バーストメディアキャプチャを実行することができる。同様に、左への移動は、上記のようにバーストメディアキャプチャをもたらす代わりに、第１のタイプのメディア（例えば、静止画像）のキャプチャとなってもよい。ジェスチャ、メディアアクション、移動基準、及び閾値時間の様々な組み合わせを、本開示の範囲に従ってユーザインタフェースを作成するためにあらゆる組み合わせで組み合わせる、かつ／又は配置することができることを当業者であれば認識するであろう。このようなインタフェースはすべて、本開示の範囲内であることが意図される。
図１１は、一部の実施形態による電子デバイスを使用したジェスチャによるメディアキャプチャを実行する方法を示すフロー図である。方法１１００は、ディスプレイ、タッチ感知面、及び１つ以上のメディアキャプチャ構成要素（例えば、画像センサ、カメラ）を有するデバイス（例えば、１００、３００、５００、８００）で実行される。方法１１００のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法１１００は、ジェスチャによるメディアキャプチャを実行するための直感的な仕方を提供する。この方法は、メディアキャプチャを実行するユーザの認識的負担を軽減し、それにより、より効率的なヒューマン－マシンインタフェースを作成する。バッテリ動作式コンピューティングデバイスの場合、ユーザがより高速かつ効率的にメディアキャプチャを実行することを可能にすることで、電力を節約し、バッテリ充電間の時間を延ばす。
電子デバイス（例えば、６００、９００）は、ディスプレイ（例えば、タッチスクリーンディスプレイ９０２）上に、第１のユーザインタフェース要素（例えば、９１０、６０２、１０００）を（例えば、６０１で、９０４で）表示する（１１０２）。電子デバイスは、（例えば、第１のユーザインタフェース要素を表示している間に）タッチ感知面（例えば、タッチスクリーンディスプレイ９０２）を介して、第１のユーザインタフェース要素に対応するタッチ感知面上の場所（例えば、９１０の場所、６０２の場所、１０００の場所）で（タッチ感知面上のオブジェクトのタッチダウン（指を下ろす）イベントを）開始するタッチ入力（例えば、６０３、９２０、９３０、９４０、９７０、１００２）を検出する（１１０４）。
タッチ入力の検出に応答して（１１０６）、タッチ入力（例えば、９２０）が移動基準を満たす前に、かつタッチ入力（例えば、タッチスクリーンディスプレイ９０２上のタッチ入力のタッチダウンイベント）が検出されてから閾値時間（例えば、１秒）（例えば、ビデオが記録を自動的に開始する前の時間）が経過する前に、タッチ入力がタッチ感知面（例えば、９０２）からリフトされたとの判定に従って、電子デバイス（例えば、６００、９００）は、第１のタイプのメディア（例えば、単一の画像、及び／又は固定持続時間を有するビデオ）をキャプチャする（１１０８）。例えば、図９Ｂ～図９Ｃは、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過する前に、例示的なタッチ入力９２０（タップ入力ジェスチャ）がタッチスクリーン９０２からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャするデバイス９００を示す。
一部の実施形態では、タッチ入力（例えば、９２０）が移動基準を満たす前にタッチ入力がタッチ感知面（例えば、９０２）からリフトされたとの判定は、閾値を超える移動量（例えば、メディアキャプチャセッションをアンロックされたメディアキャプチャ状態からロックされたメディアキャプチャ状態を移行する（例えば、遷移させる）のに十分な移動）が検出される前にタッチ入力がリフトされたとの判定を含む。例えば、閾値量は、タッチダウンの場所（例えば、メディアキャプチャアフォーダンス）から既定の距離、又はタッチダウンの場所（例えば、メディアキャプチャアフォーダンス）から既定の領域／エリア／場所までの距離であってもよい。一部の実施形態では、タッチ入力が移動基準を満たす前にタッチ入力がタッチ感知面からリフトされたとの判定は、タッチ入力がメディアキャプチャアフォーダンス（例えば、９１０、６０２、１０００）に対応する第１の領域（例えば、エリア、場所）の外に移動する前に、かつ／又は、タッチ入力が、リフトオフを検出した後に継続する第２のタイプのメディアのキャプチャに関連付けられた第２の領域（例えば、エリア、場所）内に移動する前に、タッチ入力がリフトされたとの判定を含む。例えば、第１の領域は、メディアキャプチャアイコンアフォーダンス９１０（又は、第２のタイプのメディアの記録を開始したことに従ってメディアキャプチャアイコンアフォーダンス９１０を取り替えた場合には停止アフォーダンス９３４）の場所とすることができ、第２の領域は、メディアキャプチャロックアフォーダンス９３２とすることができる。更なる例では、第２の領域は、移動経路インジケータ（例えば、９７４、１００５）に沿った領域（例えば、図１０Ｅのロック距離マーカ１００８の右などの、特定の点又はアフォーダンス１０００又は１０１０からの距離を通り越した領域）であってもよい。
一部の実施形態では、メディアをキャプチャすることは、１つ以上のメディアキャプチャ構成要素（例えば、画像センサ、カメラ）を使用して１つ以上の画像（例えば、単一の画像、一連の画像を含むビデオ）を記録すること、（例えば、ビデオ記録中に）オーディオを（例えば、１つ以上のマイクロフォンを用いて）記録すること、及び、メディアライブラリ内にメディア項目（例えば、記録中の静止画像、記録されたビデオ）を記憶すること、のうち１つ以上を含む。例えば、メディア項目をキャプチャすることは、ビデオクリップの記録を開始すること、そのビデオクリップの記録を中止すること、及びビデオクリップがデバイスに関連付けられたメディアライブラリ（例えば、カメラロール）に関連付けられる（例えば、それにアクセスできる）ようにビデオクリップを記憶すること、を含むことができる。別の例として、「キャプチャを開始する」とは、デバイスがビデオの記録を開始することを指すことができる。別の例として、「キャプチャを中止する」とは、デバイスがビデオの記録を中止する（例えば、ビデオ記録を停止する）ことを指すことができる。一部の実施形態では、「キャプチャを中止する」結果キャプチャされたビデオは、（例えば、ビデオの記録が中止されたことに従って自動的に）メディアライブラリに記憶される。一部の実施形態では、デバイス（例えば、６００、９００）は、タッチ感知面上のタッチ入力のタッチダウンを検出したことに応答して、第１のタイプのメディアをキャプチャする。一部の実施形態では、デバイスは、（例えば、タッチダウンで開始する）タッチ入力の検出中、及びタッチ感知面上のタッチ入力のリフトオフの検出中の任意の時点で、第１のタイプのメディアをキャプチャする。一部の実施形態では、デバイスは、タッチ感知面からのタッチ入力のリフトオフに応答して、第１のタイプのメディアをキャプチャする。一部の実施形態では、タッチ感知面上のタッチ入力のタッチダウンの前に、第１のタイプのメディアがキャプチャされる（又はキャプチャを開始する）。例えば、デバイス（例えば、６００、９００）は、タッチ入力の前に（例えば、タッチ入力を予測して）記録していることがあり、タッチ入力に応答して、タッチ入力（例えば、６０３、９２０、９３０、９４０、９７０、１００２）が実際にデバイスによって検出される前にキャプチャされた又は（例えば、ビデオ用に）キャプチャが開始された１つ以上のメディア項目をキャプチャする。
タッチ入力を検出したことに応答して（１１０６）、タッチ入力（例えば、９３０）が移動基準を満たす前に（例えば、閾値移動量を検出される前に、タッチ入力がキャプチャアフォーダンス（例えば、９１０、６０２、１０００）に対応する第１の領域の外に移動する前に、かつ／又は、タッチ入力が、（例えば、アフォーダンス９３２での）リフトオフ検出後も継続する第２のタイプのメディアのキャプチャに関連付けられた第２の領域内に移動する前に）、かつ、タッチ入力（例えば、タッチスクリーン９０２へのタッチダウンイベント）が検出されてから閾値時間（例えば、１秒）を経過した後に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、電子デバイス（例えば、６００、９００）は、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディア（例えば、オーディオを含むビデオ）をキャプチャする（１１１０）。例えば、例示的なタップアンドホールドジェスチャ入力９３０に応答して、デバイス９００は、タッチ入力の持続時間に基づく（例えば、等しい）長さを有するビデオをキャプチャする。一部の実施形態では、第２のタイプのメディアの持続時間は、タッチ入力がタッチ感知面上で検出された持続時間と同じである。例えば、タッチ入力持続時間が８秒である場合、得られるビデオは８秒である。一部の実施形態では、第２のタイプのメディアの持続時間は、タッチ入力が閾値時間を超えた時からタッチ感知面からのタッチ入力のリフトオフまでの持続時間である。例えば、タッチ入力持続時間が８秒であり、閾値時間が１秒である場合、得られるビデオは７秒である。一部の実施形態では、タッチ入力は、メディアキャプチャセッションをロックされたメディアキャプチャ状態に移行させるための移動基準を満たさない移動を含み、デバイス（例えば、６００、９００）は、（例えば、閾値時間を満たすタッチ入力に応答して、又はタッチ入力の移動（例えば、特定の方向における特定の移動量）に応答して）第２のタイプのメディアのキャプチャをいずれにしても開始する。一部の実施形態では、タッチ入力が、（例えば、メディアキャプチャロックアフォーダンスに向かう（例えば、最小量の）タッチ入力の移動に応答して）デバイス（例えば、６００、９００）に第２のタイプのメディアのキャプチャを開始させる移動基準（例えば、メディアキャプチャロック状態を可能にする基準と同一又は異なる）を満たす前に、タッチ入力は閾値時間検出されていない。図９Ｄ～図９Ｆは、タッチ入力が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過した後に、例示的なタッチ入力９３０がタッチ感知面からリフトされたとの判定に従って、タッチ感知面上のタッチ入力の持続時間に基づく持続時間を有する、第２のタイプのメディアをキャプチャするデバイス９００を示す。
タッチ入力を検出したことに応答して（１１０６）、タッチ入力（例えば、９４０、６０３）が移動基準を満たし、第１の方向への（例えば、図９Ｇ～図９Ｉに示すように）移動を含むとの判定に従って（例えば、タッチ入力は、第１の方向（例えば、タッチ感知面の第１の縁部に向かう、メディアキャプチャアフォーダンス９１０からメディアキャプチャロックアフォーダンス９３２に向かう）への２つ以上の閾値移動量（例えば、メディアキャプチャアフォーダンス９１０の場所からメディアキャプチャロックアフォーダンス９３２の場所への移動）を含む、又はタッチ入力が、（例えば、アフォーダンス９３２での）リフトオフの検出後に継続する第２のタイプのメディアのキャプチャに関連付けられた第２の領域内に移動しているとき）、電子デバイス（例えば、６００、９００）は、第２のタイプのメディア（例えば、ビデオ）のキャプチャを開始し、タッチ感知面からのタッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続する（１１１２）。例えば、図９Ｇ～図９Ｊは、例示的なタッチ入力９４０が移動基準を満たし（例えば、アフォーダンス９３２の場所のリフトオフ）、第１の方向（例えば、アフォーダンス９３２に向かう）への移動を含むとの判定に従って、第２のタイプのメディアのキャプチャを開始し、（リフトオフ後に）キャプチャを継続するデバイス９００を示す。更なる例では、図１０Ａ～図１０Ｆは、移動基準を満たし（例えば、第１の方向へロック距離マーカ１００８を通り越した移動）、第１の方向（例えば、右）への移動を含む例示的なタッチ入力１００２を示す。一部の実施形態では、閾値時間が経過したかどうか、及び／又はタッチ入力の移動が閾値時間に対して開始又は終了したタイミングにかかわらず、移動基準を満たし、第１の方向への移動を含むタッチ入力に応答して、デバイスは上述した動作を実行する。例えば、デバイス９００は、タッチ入力（例えば、閾値時間が１秒である場合）に応答してビデオの記録を開始することができ、タッチ入力が静止したタップアンドホールドであることを検出した（かつビデオを記録した）２分後に、デバイスは、タッチ入力が移動してメディアキャプチャセッションのロック基準を満たすことを検出し、それに応じて、デバイスはリフトオフ後に記録を継続することになる。
一部の実施形態では、メディアのキャプチャを継続することは、メディアキャプチャセッションをアンロックされたメディアキャプチャ状態からロックされたメディアキャプチャ状態（例えば、「ロックされたメディアキャプチャセッション状態」とも呼ばれる）に遷移させることを含む。一部の実施形態では、電子デバイス（例えば、６００、９００）は、ユーザインタフェース要素（例えば、マーカ１００８、アフォーダンス９３２又は１００４）、又は移動基準を満たすタッチ入力移動量の他のグラフィカル表示を表示する。一部の実施形態では、デバイスは、２つ以上のユーザインタフェース要素を表示する。一部の実施形態では、各ユーザインタフェース要素は、（例えば、異なるメディアキャプチャ関連動作に関連付けられた）同じ又は異なる移動基準に対応することができる。例えば、デバイスは、メディアキャプチャセッションをメディアキャプチャ状態に移行させ、したがって、タッチ入力（例えば、１００２）のリフトオフの後に継続する移動量を示すエリア（例えば、９３２のエリア、１００８の右のエリア）を示すグラフィカルユーザインタフェース要素（例えば、９３２、１００８）を表示する。一部の実施形態では、移動基準は、（例えば、図１０Ａ～図１０Ｆに関して図示し説明したように）第１のユーザインタフェース要素（例えば、１０００）と他のユーザインタフェース要素（例えば、１００４）との間の距離（例えば、その一部）よりも短い移動である。例えば、例示的な第１のユーザインタフェース要素１０００から例示的なユーザインタフェース要素１００４までの距離の少なくとも５０％のタッチ入力１００２の移動及びリフトオフは、タッチ入力のリフトオフ後にメディアのキャプチャを継続するために十分であり得る。
第１のタイプのメディア、特定の持続時間を有する第２のタイプのメディア、及びキャプチャされ続ける第２のタイプのメディアをキャプチャするかどうかを判定するために、移動基準と閾値時間の１つ以上の組み合わせを使用すると、追加の表示された制御でユーザインタフェース（例えば、ＧＵＩ）を雑然とさせずに追加の制御オプションが提供される。表示される追加コントローラによってＵＩを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。更に、ユーザは、単一の技法を使用してビデオ記録を開始し、ビデオ記録を開始した後に、デバイスが記録を迅速に終了するか、それとも記録を延長するかを示す異なる継続ジェスチャを実行することができる。更に、ユーザは、迅速に記録を開始し、記録開始後に、写真、短いビデオ、又は長いビデオをキャプチャするかどうかを決定することができる。更に、これにより、ディスプレイ上に表示する必要がある制御の数が低減される（例えば、静止写真ボタン及びビデオボタンの両方、又は異なるタイプのメディア用の３つの異なるボタンは必要とされない）。スクリーンスペースの節約は、ユーザがキャプチャしているコンテンツのカメラプレビューを表示するために、スクリーンの残りの部分を使用することがある場合に特に重要である。
第１のタイプのメディア、特定の持続時間を有する第２のタイプのメディア、及びキャプチャされ続ける第２のタイプのメディアをキャプチャするかどうかを判定するために、移動基準と閾値時間の１つ以上の組み合わせを使用すると、特定のユーザインタフェースから開始の際に、これらの動作のうち１つ以上を実行するのに必要な入力数が低減される。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザが適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
ユーザインタフェース要素上のタッチ入力の移動基準を使用すると、キャプチャされたタッチ入力のリフトオフ後にメディアのタイプがキャプチャされ続けるかどうかを制御するために（例えば、第２の）タイプのメディアのキャプチャを引き起こす／開始するために使用可能であり、ユーザインタフェース（例えば、ＧＵＩ）を追加で表示された制御により雑然とさせずに、追加の制御オプションが提供される。表示される追加コントローラによってＵＩを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
一部の実施形態では、タッチ入力（例えば、図９Ｄ～図９Ｆの９３０）が移動基準を満たす前に、かつタッチ入力が検出されてから閾値時間が経過した後に、タッチ入力がタッチ感知面（例えば、９０２）からリフトされたとの判定に従って、電子デバイス（例えば、６００、９００）は、タッチ入力のリフトオフを検出した（例えば、記録されたビデオ持続時間の終了がリフトオフで発生した）ことに応答して、（例えば、図９Ｄ～図９Ｆに示すように）第２のタイプのメディア（例えば、ビデオ）のキャプチャを中止する（例えば、ビデオの記録を中止し、得られたビデオをメディアライブラリに記憶する）。
一部の実施形態では、第１のタイプのメディアは、タッチ感知面（例えば、９０２）上のタッチ入力（例えば、９２０）の持続時間とは無関係の持続時間を有する。例えば、第１のタイプのメディアは、（例えば、タッチスクリーンディスプレイ９０２上の）タッチ入力持続時間に影響されない一定の長さ（例えば、３秒の長さ）を有するビデオであってもよく、静止写真又は他の写真若しくはその静止写真の前にかつ／又はその後に既定の持続時間にわたるオーディオコンテンツなどのメディアのシーケンスを伴う静止写真であってもよい。
一部の実施形態では、移動基準は第１の移動基準であり、タッチ入力（例えば、９７０）を検出したことに応答して（１１０６）、タッチ入力が第２の移動基準（例えば、図９Ｍ～図９Ｎのメディアキャプチャアフォーダンス９１０の領域／場所の外への移動）を満たし、第１の方向（例えば、図９Ｍ～図９Ｎの右へ）とは異なる第２の方向（例えば、図９Ｍ～図９Ｎのメディアキャプチャアフォーダンス９１０（又は停止アフォーダンス９３４）の場所の左へ）への移動を含むとの判定に従って、電子デバイス（例えば、６００、９００）は、第１のタイプのメディア（例えば、静止写真）のメディア項目のシーケンス（例えば、バースト画像キャプチャモードを開始する）のキャプチャを開始し（１１１４）、キャプチャされたメディア項目の数は、タッチ感知面上のタッチ入力の持続時間（例えば、ユーザインタフェース要素の場所（例えば、９１０、６０２、１０００、９３４、６０５）から閾値距離を超える間の、又はタッチ入力が第１のタイプのメディアのメディア項目のシーケンスのキャプチャに関連付けられた既定の領域（例えば、アフォーダンス９１０、９３４、６０２、１０００、又は６０５の左への領域）にある間の、タッチ入力の持続時間）に基づいて決定される。例えば、タッチ入力が、第１の方向（例えば、図９Ｍ～図９Ｎの右へ）とは異なる（例えば、それとは反対に、タッチ感知面の第２の端部に向かって）第２の方向への閾値を超える移動量（例えば、バーストモードを有効にするのに十分な）を含む、又は第１のタイプのメディアのメディア項目のシーケンスのキャプチャに関連付けられた既定の領域（例えば、図９Ｍ～図９Ｎのメディアキャプチャアフォーダンス９１０の左の領域）への移動を含む場合、タッチ入力は第２の移動基準を満たすことができる。メディア項目のシーケンスのキャプチャは、バーストモード、バースト画像キャプチャモード、連続撮影モードなどと呼ばれる場合もある。
一部の実施形態では、第２の移動基準を満たす移動は、閾値時間の前に生じる。例えば、移動基準は、デバイスがメディア項目のシーケンスのキャプチャを開始するために、第２の方向への移動が閾値時間内に発生しなければならないことを要求することができる。一部の実施形態では、移動は閾値時間の前に開始する。例えば、移動基準は、デバイスがメディア項目のシーケンスのキャプチャを開始するために、第２の方向への移動が（例えば、閾値時間の後に移動が終了した場合であっても）閾値時間の前に開始されなければならないことを要求することができる。一部の実施形態では、第２の移動基準は、閾値持続時間が経過した後に開始する移動によって満たされ得る。一部の実施形態では、第２の移動基準は、任意の移動（例えば、特定の（例えば、第２の）方向への任意の移動）を含む。一部の実施形態では、第２の移動基準は、（例えば、第２の方向への）閾値量の移動（例えば、最小距離）を含む。一部の実施形態では、第２の移動基準は、タッチ入力が、メディアキャプチャアフォーダンス（例えば、９１０、６０２、１０００）に対応する第１の領域の外側に移動しているという要件を含む。一部の実施形態では、第２の移動基準は、タッチ入力が、第１のタイプのメディア項目のシーケンスのキャプチャに関連付けられた第２の領域（例えば、場所）内に移動しているという要件を含む。一部の実施形態では、第１の移動基準と第２の移動基準は同じであるが、異なる方向（例えば、同じ距離要件だが、反対方向）である。
第１のタイプのメディア、特定の持続時間を有する第２のタイプのメディア、キャプチャされ続ける第２のタイプのメディア、及び第１のタイプのメディア項目のシーケンスをキャプチャするかどうかを判定するために、移動基準と閾値時間の１つ以上の組み合わせを使用すると、追加の表示された制御でユーザインタフェース（例えば、ＧＵＩ）を雑然とさせずに追加の制御オプションが提供される。表示される追加コントローラによってＵＩを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
第１のタイプのメディア、特定の持続時間を有する第２のタイプのメディア、及びキャプチャされ続ける第２のタイプのメディア、及び第１のタイプのメディア項目のシーケンスをキャプチャするかどうかを判定するために、移動基準と閾値時間の１つ以上の組み合わせを使用すると、特定のユーザインタフェースから開始の際に、これらの動作のうち１つ以上を実行するのに必要な入力数が低減される。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザが適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
一部の実施形態では、タッチ入力（例えば、９７０）が第２の移動基準を満たし、第１の方向とは異なる第２の方向（例えば、それとは反対に、タッチ感知面の第２の縁部に向かう）への移動（例えば、バーストモードを有効にするのに十分な）を含むとの判定に従って、電子デバイス（例えば、６００、９００）は、タッチ入力のリフトオフを検出したことに応答して（例えば、図９Ｐの９７０のリフトオフに応答して）、第１のタイプのメディアのメディア項目のシーケンスのキャプチャを中止する（例えば、持続時間の終了はリフトオフ時に発生する）。例えば、タッチ入力９７０のリフトオフに応答して、デバイス９００は、バースト画像キャプチャの実行（例えば、高速で連続した静止画像の記録）を停止する（例えば、キャプチャされた画像を記憶する）。
一部の実施形態では、（例えば、図９Ｎ～図９Ｐに示すように）第１のタイプのメディアのメディア項目のシーケンスのキャプチャを継続している間、電子デバイス（例えば、６００、９００）は、ディスプレイ（例えば、９０２）上に、メディア項目のシーケンスのキャプチャの開始以降にキャプチャされた第１のタイプのメディアのメディア項目の数（例えば、図９Ｎの９７２、図９Ｏ～図９Ｐの９７６）を表示する（例えば、シーケンスキャプチャが継続するにつれてメディア項目の数が増加する）。一部の実施形態では、メディア項目の数は、ディスプレイ上の第１のユーザインタフェース要素の場所（例えば、図９Ｍに示すようなメディアキャプチャアフォーダンス９１０の場所）に表示される。一部の実施形態では、表示されたメディア項目の数は、タッチ入力の検出以降にキャプチャされたメディア項目の数に基づく。
一部の実施形態では、メディア項目のシーケンスのキャプチャの開始以降にキャプチャされた第１のタイプのメディアのメディア項目の数をディスプレイ（例えば、９０２）上に表示することは、電子デバイス（例えば、６００、９００）がディスプレイ上の初期位置（例えば、図９Ｎの９７２の場所）でキャプチャされた第１のタイプのメディアのメディア項目の数を、ディスプレイ上に表示することを含む。タッチ入力（例えば、９７０）が、ディスプレイ上の初期位置に対応するタッチ感知面上の場所への移動を含む（例えば、タッチ入力９７０は、図９Ｎ～図９Ｏに示すように移動する）との判定に従って、電子デバイスは、ディスプレイ上に、ディスプレイ上の第１のユーザインタフェース要素の場所（例えば、図９Ｏでは、９７６は図９Ｍに示すメディアキャプチャアフォーダンス９１０と同じ場所で表示される）での第１のタイプのメディアのメディア項目の数（例えば、図９Ｏ～図９Ｐの９７６）を表示する。電子デバイスは、ディスプレイ上の初期位置に第１のタイプのメディアのメディア項目の数を表示することを中止する（例えば、９７２はもはや図９Ｏ～図９Ｐに表示されなくなる）。
タッチ入力の初期位置への移動に従って新しい場所でキャプチャされたメディア項目の数を表示することにより、情報がタッチ入力によって覆い隠されるのを防止するよう視覚的フィードバックを改善する。フィードバックを改善すると、（例えば、デバイスを操作する／デバイスと対話するときにユーザが適切な入力を付与することを支援し、ユーザの間違いを低減することによって）デバイスの操作性が向上し、ユーザとデバイスのインタフェースがより効率的になり、これによって、ユーザがデバイスをより迅速かつ効率的に使用できるようになることにより、更に、電力使用が低減し、デバイスのバッテリ寿命が改善される。
一部の実施形態では、電子デバイス（例えば、６００、９００）は、第２のユーザインタフェース要素（例えば、アイコン、アフォーダンス、又は距離マーカ）（例えば、メディアキャプチャロックアフォーダンス９３２、メディアキャプチャロックアフォーダンス１００４、ロック距離マーカ１００８）をディスプレイ（例えば、９０２）上に表示し（１１１６）、第１のユーザインタフェース要素（例えば、９１０の場所、９３４の場所、１０００の場所、６０２の場所、６０５の場所）から第２のユーザインタフェース要素（例えば、９３２、１００４、１００８）へのタッチ入力（例えば、９４０、６０３）の移動は、移動基準を満たす（例えば、移動基準は、第２のユーザインタフェース要素に向かう（例えば、ある方向への）閾値移動量、又はリフトオフ後にキャプチャされ続ける第２のタイプのメディアのキャプチャに関連付けられた第１の領域（例えば、第２のユーザインタフェース要素の領域）への移動を検出することを含む）。一部の実施形態では、第２のユーザインタフェース要素に対応する場所での（例えば、９３２又は１００４の場所での、マーカ１００８の右への領域における）タッチ入力のリフトオフは、第２のタイプのメディアがリフトオフ後に記録され続けるために必要とされる。
移動基準を満たすユーザインタフェース要素を表示することにより、動作を実行するのに必要とされる入力移動に関する改善された視覚的フィードバックが提供される。改善されたフィードバックを備えることにより、（例えば、ユーザが適切な入力を与えるのを支援し、デバイスを操作する／デバイスと対話するときにユーザのミスを減らすことによって）デバイスの操作性が向上し、ユーザーデバイス間のインタフェースがより効率的になり、これにより、ユーザによるデバイスのより迅速かつ効率的な使用を可能にすることで、追加的に、電力使用が低減し、デバイスのバッテリ寿命が改善される。
一部の実施形態では、タッチ感知面（例えば、９０２）からのタッチ入力（例えば、９４０、６０３）のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続することに従って、電子デバイス（例えば、６００、９００）は、第２のユーザインタフェース要素（例えば、図９Ｉの９３２）を、第２のユーザ要素とは異なる第３のユーザインタフェース要素（例えば、図９Ｉの９４４）に変更する。一部の実施形態では、第２のユーザインタフェース要素は、タッチ入力の移動に応答して変わる。一部の実施形態では、第２のユーザインタフェース要素は、（例えば、メディアキャプチャロックアフォーダンスの場所での）タッチ入力のリフトオフに応答して変わる。一部の実施形態では、第２のユーザインタフェース要素は、メディアキャプチャセッションがロックされたメディアキャプチャ状態に移行したことに応答して変わる。
一部の実施形態では、タッチ入力（例えば、９４０、６０３）と、第２のユーザインタフェース要素に対応するタッチ感知面上の場所（例えば、ユーザインタフェース要素９３２の場所）との間の対話に応答して、第２のユーザインタフェース要素（例えば、９３２）は第３のユーザインタフェース要素（例えば、９４４）に変わる。例えば、タッチ入力９４０がメディアキャプチャロックアフォーダンス９３２の場所にドラッグされたときに、対話を行うことができる。更なる例では、対話は、タッチ入力９４０がメディアキャプチャロックアフォーダンス９３２の場所にあるときにリフトオフすると行うことができる。
一部の実施形態では、タッチ入力（例えば、９４０、６０３）は第１のタッチ入力であり、第２のタイプのメディア（例えば、ビデオ）のキャプチャを継続している間、電子デバイス（例えば、６００、９００）は、第３のユーザインタフェース要素（例えば、９４４）に対応するタッチ感知面上の場所での第２のタッチ入力（例えば、９６０）を、タッチ感知面（例えば、９０２）を介して検出する。第２のタッチ入力を検出したことに応答して、電子デバイスは、（例えば、第２のタイプのメディアのキャプチャを継続している間）第１のタイプのメディアをキャプチャする（例えば、静止写真を撮る）。
一部の実施形態では、タッチ感知面上のタッチ入力（例えば、９４０、６０３）を検出している間（例えば、タッチダウン直後、又はタッチ入力の第１の方向への移動の直後）、電子デバイス（例えば、６００、９００）は、ディスプレイ上の第１のユーザインタフェース要素の場所（例えば、９１０の場所、９３４の場所、１０００の場所、６０２の場所、６０５の場所）から第１の方向への方向インジケータ（例えば、９４３、９７５、１００５、６０４ａ、６０４ｂ）をディスプレイ（例えば、９０２）上に表示する（１１１８）。
一部の実施形態では、方向インジケータ（例えば、９４３、９７５、１００５、６０４ａ、６０４ｂ）は、（例えば、移動基準を満たす）方向の線（例えば、実線、点線、破線）、矢印、アニメーション、及び他のグラフ表示のうちの１つ以上を含むことができる。一部の実施形態では、方向インジケータは、移動基準を満たすのに必要な移動量（例えば、ロック距離マーカ１００８を含む移動経路インジケータ１００５）を示す。一部の実施形態では、方向インジケータは、移動基準を満たすために（例えば、タッチ入力のリフトオフを必要とする場合にも、又は必要としない場合にも）タッチ入力を移動させる必要がある領域又は場所（例えば、ロック距離マーカ１００８を含む移動経路インジケータ１００５）を示す。
方向インジケータを表示することにより、動作を実行するのに必要な入力移動に関する改善された視覚的フィードバックが提供される。フィードバックを改善すると、（例えば、デバイスを操作する／デバイスと対話するときにユーザが適切な入力を付与することを支援し、ユーザの間違いを低減することによって）デバイスの操作性が向上し、ユーザとデバイスのインタフェースがより効率的になり、これによって、ユーザがデバイスをより迅速かつ効率的に使用できるようになることにより、更に、電力使用が低減し、デバイスのバッテリ寿命が改善される。
一部の実施形態では、タッチ入力（例えば、９４０、６０３）が第１の方向への移動を含むとの判定に従って、方向インジケータ（例えば、９４３、９７５、１００５、６０４ａ、６０４ｂ）が表示される。例えば、タッチ入力９４０が（例えば、メディアキャプチャロックアフォーダンス９３２に向かって）移動を開始するまで、移動経路インジケータ９４３は表示されない。一部の実施形態では、デバイスは、タッチ入力を検出したことに応答して、又は閾値時間タッチ入力を検出したことに応答して、移動経路インジケータを表示する。
一部の実施形態では、タッチ感知面（例えば、９０２）からタッチ入力のリフトオフ（例えば、図９Ｉ～図９Ｊの９４０のリフトオフ、６０３のリフトオフ）を検出した後に、第２のタイプのメディア（例えば、ビデオ）のキャプチャ継続することに従って、電子デバイス（例えば、６００、９００）は、第１のユーザインタフェース要素（例えば、９１０、６０２、１０００）を第４のユーザインタフェース要素（例えば、図９Ｊの９３４、図６Ｄ～図６Ｆの６０５）に変更する（１１２０）。一部の実施形態では、第１のユーザインタフェース要素は、（例えば、図９Ｈに示すように）第２のタイプのメディアのキャプチャを開始したことに従って、第４のユーザインタフェース要素に変わる。一部の実施形態では、第１のユーザインタフェース要素は、（例えば、（例えば、図１０Ａ～図１０Ｄに示されるように）第１のユーザインタフェース要素に対応するエリアから外への）タッチ入力の移動に従って第４のユーザインタフェース要素に変わる。一部の実施形態では、電子デバイスは、タッチ入力のリフトオフに応答して、第１のユーザインタフェース要素を第４のユーザインタフェース要素に変わる。
第２のタイプのメディアのキャプチャを継続することに従って、ユーザインタフェース要素を変更することにより、ユーザインタフェース（例えば、ＧＵＩ）を追加的に表示されたコントロールで雑然とさせずに、関連する代替の制御オプションが提供される。表示される追加コントローラによってＵＩを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
一部の実施形態では、タッチ入力（例えば、９４０、６０３）は第１のタッチ入力であり、タッチ感知面（例えば、９０２）からのタッチ入力（例えば、９４０、６０３）のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続している間、電子デバイス（例えば、６００、９００）は、タッチ感知面を介して、第４のユーザインタフェース要素（例えば、９３４、６０５）に対応するタッチ感知面上の場所における第３のタッチ入力（例えば、９５０、６０６）を検出する。第３のタッチ入力を検出したことに応答して、電子デバイスは、第２のタイプのメディアのキャプチャを中止する（例えば、ビデオの記録を停止し、記録されたビデオをメディアライブラリに記憶する）。
一部の実施形態では、第１のタイプのメディアは、静止画像及びビデオ（例えば、固定持続時間、及び／又はタッチ入力の持続時間とは無関係の持続時間を有するビデオクリップ）のうちの１つ以上である。
一部の実施形態では、１つ以上のメディアキャプチャ構成要素（例えば、カメラ、画像センサ）によって第１のタイプのメディアをキャプチャすることは、タッチ感知面上のタッチ入力（例えば、６０３、９２０、９３０、９４０、９７０、１００２）（例えば、９０２上のタッチダウン）を検出したことに応答して、又はタッチ感知面からのタッチ入力のリフトオフに応答して行われる。一部の実施形態では、タッチ入力がタッチ感知面上で検出されている間に、第１のタイプのメディアのキャプチャが行われる。
一部の実施形態では、第２のタイプのメディアは、（例えば、タッチ入力の長さに関連する持続時間を有する、又は停止アフォーダンス（例えば、９３４、６０５）が選択されるまでの）ビデオである。
一部の実施形態では、１つ以上のメディアキャプチャ構成要素（例えば、カメラ、画像センサ）によって第２のタイプのメディアをキャプチャすることは、タッチ入力がタッチ感知面上で閾値時間（例えば、１秒）を超えて検出されたことに応答して、ビデオの記録を開始することを含む。
一部の実施形態では、タッチ入力（例えば、９３０）が移動基準を満たす前に（例えば、メディアキャプチャセッションがロックされたメディアキャプチャ状態ではない）、かつ閾値時間（例えば、１秒）がタッチ入力を検出されてから経過した（例えば、デバイスがビデオの記録を開始した）後に、タッチ入力がタッチ感知面からリフトされたとの判定に従って、電子デバイス（例えば、６００、９００）は、第１のタイプのメディア（例えば、静止画像）をキャプチャし、キャプチャされた第１のタイプのメディアを廃棄する（例えば、第１のタイプのメディアをメディアライブラリに追加する前又はその後に削除する）。例えば、電子デバイスは、タッチ入力を受け取ったことに従って（例えば、タッチ入力９３０のタッチダウンに応答して）、第１のタイプのメディア項目をキャプチャすることができる。タッチ入力が第２のタイプのメディアをキャプチャするための基準を満たした後、デバイスは、（例えば、タッチ入力ジェスチャの特性が、引き続き、第１のメディア項目のキャプチャが意図されていないことを示すため）キャプチャされた第１のタイプのメディアを廃棄することができる。
ユーザがリフトオフした場合に利用可能になるように、第１のメディアをキャプチャするが自動的にそれを削除すると、ユーザが他のコンテンツ（例えば、ビデオなどの第２のメディア）の記録を開始する際の記憶空間を保全し、それは、第１のメディア（例えば、写真）が必要とされないことを示す。更に、他のメディアがキャプチャされている（例えば、ビデオを記録し始める）ことに基づいて第１のメディアを自動的に廃棄することにより、メディアを廃棄するのに必要なユーザ入力の数が低減される。動作を実行するために必要な入力の数が減ることにより、デバイスの操作性が高められ、ユーザ－デバイスインタフェースを（例えば、デバイスを操作する／デバイスと対話するときにユーザが適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって）より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、デバイスの電力使用が抑えられ、バッテリ寿命が改善される。
方法１１００（例えば、図１１）に関して上記したプロセスの詳細はまた、後述／前述の方法にも同様の方法で適用可能であることに留意されたい。例えば、方法１１００は、方法７００を参照して上記した様々な方法の特性のうちの１つ以上を任意選択的に含む。簡潔にするために、これらの詳細は、以下で繰り返さない。
上記は、説明を目的として、特定の実施形態を参照して記述されている。しかしながら、上記の例示的な論考は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。これらの実施形態は、本技術の原理、及びその実際の適用を最もよく説明するために、選択及び記載されている。それにより、他の当業者は、意図された具体的な用途に適するような様々な修正を用いて、本技術及び様々な実施形態を最も良好に利用することが可能となる。
添付図面を参照して、本開示及び例を十分に説明してきたが、様々な変更及び修正が、当業者には明らかとなるであろうことに留意されたい。そのような変更及び修正は、特許請求の範囲によって定義されるような、本開示及び例の範囲内に含まれるものとして理解されたい。
上述したように、本技術の一態様は、ジェスチャに基づくメディアキャプチャを実行するための様々なソースから入手可能なデータを収集及び使用することである。本開示は、いくつかの例において、この収集されたデータは、特定の人を一意に特定する個人情報データ、又は特定の人に連絡する若しくはその所在を突き止めるために使用できる個人情報データを含み得ることを想到している。そのような個人情報データとしては、人口統計データ、位置ベースのデータ、電話番号、電子メールアドレス、ツイッターＩＤ、自宅の住所、ユーザの健康又はフィットネスのレベルに関するデータ若しくは記録（例えば、バイタルサイン測定値、投薬情報、運動情報）、誕生日、あるいは任意の他の識別情報又は個人情報を挙げることができる。
本開示は、本技術におけるそのような個人情報データの使用がユーザの利益になる使用であり得る点を認識するものである。更には、ユーザに利益をもたらす、個人情報データに関する他の使用もまた、本開示によって想到される。例えば、健康データ及びフィットネスデータは、ユーザの全般的なウェルネスについての洞察を提供するために使用することができ、あるいは、ウェルネスの目標を追求するための技術を使用している個人への、積極的なフィードバックとして使用することもできる。
本開示は、そのような個人情報データの収集、分析、開示、伝送、記憶、又は他の使用に関与するエンティティが、確固たるプライバシーポリシー及び／又はプライバシー慣行を遵守するものとなることを想到する。具体的には、そのようなエンティティは、個人情報データを秘密として厳重に保守するための、業界又は政府の要件を満たしているか又は上回るものとして一般に認識されている、プライバシーのポリシー及び慣行を実施し、一貫して使用するべきである。そのようなポリシーは、ユーザによって容易にアクセス可能とするべきであり、データの収集及び／又は使用が変化するにつれて更新されるべきである。ユーザからの個人情報は、そのエンティティの合法的かつ正当な使用のために収集されるべきであり、それらの合法的使用を除いては、共有又は販売されるべきではない。更には、そのような収集／共有は、ユーザに告知して同意を得た後に実施されるべきである。更には、そのようなエンティティは、そのような個人情報データへのアクセスを保護して安全化し、その個人情報データへのアクセスを有する他者が、それらのプライバシーポリシー及び手順を遵守することを保証するための、あらゆる必要な措置を講じることを考慮するべきである。更には、そのようなエンティティは、広く受け入れられているプライバシーのポリシー及び慣行に対する自身の遵守を証明するために、第三者による評価を自らが受けることができる。更には、ポリシー及び慣行は、収集及び／又はアクセスされる具体的な個人情報データのタイプに適合されるべきであり、また、管轄権固有の考慮事項を含めた、適用可能な法令及び規格に適合されるべきである。例えば、アメリカ合衆国では、特定の健康データの収集又はアクセスは、医療保険の相互運用性と説明責任に関する法律（Health Insurance Portability and Accountability Act、ＨＩＰＡＡ）などの、連邦法及び／又は州法によって管理することができ、その一方で、他国における健康データは、他の規制及びポリシーの対象となり得るものであり、それに従って対処されるべきである。それゆえ、各国の異なる個人データのタイプに関して、異なるプライバシー慣行が保たれるべきである。
前述のことがらにもかかわらず、本開示はまた、個人情報データの使用又は個人情報データへのアクセスを、ユーザが選択的に阻止する実施形態も想到する。すなわち、本開示は、そのような個人情報データへのアクセスを防止又は阻止するように、ハードウェア要素及び／又はソフトウェア要素を提供することができると想到する。例えば、メディアキャプチャアプリケーションの場合において、本技術は、ユーザが、サービスの登録中又はその後のいつでも、個人情報データの収集への参加の「オプトイン」又は「オプトアウト」を選択できるように構成され得る。「オプトイン」及び「オプトアウト」の選択肢を提供することに加えて、本開示は、個人情報のアクセス又は使用に関する通知を提供することを想到する。例えば、ユーザの個人情報データにアクセスすることとなるアプリのダウンロード時にユーザに通知され、その後、個人情報データがアプリによってアクセスされる直前に再びユーザに注意してもよい。
更には、本開示の意図は、個人情報データを、非意図的若しくは無許可アクセス又は使用の危険性を最小限に抑える方法で、管理及び処理するべきであるという点である。データの収集を制限し、データがもはや必要とされなくなった時点で削除することによって、危険性を最小限に抑えることができる。更には、適用可能な場合、特定の健康関連アプリケーションにおいて、ユーザのプライバシーを保護するために、データの非特定化を使用することができる。非特定化は、適切な場合には、特定の識別子（例えば、生年月日など）を除去すること、記憶されたデータの量又は特異性を制御すること（例えば、位置データを住所レベルよりも都市レベルで収集すること）、データがどのように記憶されるかを制御すること（例えば、ユーザ間でデータを集約すること）及び／又は他の方法によって、容易にすることができる。
それゆえ、本開示は、１つ以上の様々な開示された実施形態を実装するための、個人情報データの使用を広範に網羅するものではあるが、本開示はまた、そのような個人情報データにアクセスすることを必要とせずに、それらの様々な実施形態を実装することもまた可能であることを想到している。すなわち、本技術の様々な実施形態は、そのような個人情報データの全て又は一部分が欠如することにより、実施不可能となるものではない。例えば、メディアコンテンツは、ユーザに関連付けられたデバイスによりリクエストされたコンテンツ、メディアキャプチャインタフェースアプリケーションが使用可能な他の非個人情報、若しくは公的に使用可能な情報などの、非個人情報データ又は個人情報の最小限の量のみに基づいてユーザの意図を推測することにより、キャプチャされ、かつ記憶され得る。

Claims (50)

  1. メディアキャプチャデバイスによって、前記メディアキャプチャデバイスのディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、
    前記タップアンドホールドジェスチャ入力に応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアキャプチャセッション状態で開始することと、
    前記タップアンドホールドジェスチャ入力が前記メディアキャプチャセッション中に前記グラフィカルユーザインタフェース上の前記第１の場所からリフトする第１のリフトジェスチャを前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャセッションを終了させることと、
    前記メディアキャプチャセッション中に前記メディアキャプチャアフォーダンスが前記グラフィカルユーザインタフェース上の前記第１の場所から第２の場所までスライドするスライドジェスチャ入力を前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、
    前記スライドジェスチャ入力が前記メディアキャプチャセッション中に前記第２の場所で前記グラフィカルユーザインタフェースからリフトする第２のリフトジェスチャを前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させることと、
    を含む、メディアをキャプチャする方法。
  2. 前記メディアキャプチャロックアフォーダンスを対象とするタップジェスチャ入力に応答して、前記ロック状態又は前記メディアキャプチャセッションを終了させる、請求項１に記載の方法。
  3. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスのサイズを変更することを含む、請求項１に記載の方法。
  4. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスの前記サイズ及び形状を変更することを含む、請求項１に記載の方法。
  5. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスにモーフィングするようにアニメーション化することを含む、請求項１に記載の方法。
  6. 前記ＧＵＩ上の前記スライドジェスチャ入力の方向を示す視覚的インジケータを前記ＧＵＩ上に表示させること
    を更に含む、請求項１に記載の方法。
  7. 前記スライドジェスチャ入力の前に、前記ＧＵＩ上に第１のテキストメッセージを表示させ、前記第２のリフトジェスチャの後に、前記第１のテキストメッセージとは異なる第２のテキストメッセージを表示すること
    を更に含む、請求項１に記載の方法。
  8. タッチスクリーンと、
    １つ以上のプロセッサと、
    前記１つ以上のプロセッサと結合しており、命令を記憶するように構成されたメモリと、を備えたメディアキャプチャデバイスであって、前記命令は、前記１つ以上のプロセッサによって実行されると、前記１つ以上のプロセッサに、
    前記タッチスクリーンによって、前記メディアキャプチャデバイスの前記タッチスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、
    前記タップアンドホールドジェスチャ入力に応答して、前記メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアキャプチャセッション状態で開始することと、
    前記タップアンドホールドジェスチャ入力が前記メディアキャプチャセッション中に前記グラフィカルユーザインタフェース上の前記第１の場所からリフトする第１のリフトジェスチャを、前記タッチスクリーンが検出したことに応答して、前記メディアキャプチャセッションを終了させることと、
    前記メディアキャプチャアフォーダンスが前記メディアキャプチャセッション中に前記グラフィカルユーザインタフェース上の前記第１の場所から第２の場所までスライドするスライドジェスチャ入力を、前記タッチスクリーンが検出したことに応答して、前記メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、
    前記スライドジェスチャ入力が前記メディアキャプチャセッション中に前記第２の場所で前記グラフィカルユーザインタフェースからリフトする第２のリフトジェスチャを、前記タッチスクリーンが検出したことに応答して、前記メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させることと、
    を含む動作を実行させる、メディアキャプチャデバイス。
  9. 前記メディアキャプチャロックアフォーダンスを対象とするタップジェスチャ入力に応答して、前記ロックされたメディアキャプチャセッション状態を終了させる、請求項８に記載のメディアキャプチャデバイス。
  10. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスの外観を変更することを含む、請求項８に記載のメディアキャプチャデバイス。
  11. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスのサイズ及び形状を変更することを含む、請求項８に記載のメディアキャプチャデバイス。
  12. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスにモーフィングするようにアニメーション化することを含む、請求項８に記載のメディアキャプチャデバイス。
  13. 前記動作は、前記ＧＵＩ上の前記スライドジェスチャ入力の方向を示す視覚的インジケータを前記ＧＵＩ上に表示させること
    を更に含む、請求項８に記載のメディアキャプチャデバイス。
  14. 前記動作は、前記スライドジェスチャ入力の前に、前記ＧＵＩ上に第１のテキストメッセージを表示させ、前記第２のリフトジェスチャの後に、前記第１のテキストメッセージとは異なる第２のテキストメッセージを表示すること
    を更に含む、請求項８に記載のメディアキャプチャデバイス。
  15. 命令が記憶された非一時的コンピュータ可読記憶媒体であって、前記命令は、メディアキャプチャデバイスによって実行されると、前記メディアキャプチャデバイスに、
    前記メディアキャプチャデバイスによって、前記メディアキャプチャデバイスのディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出することと、
    前記タップアンドホールドジェスチャ入力に応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャデバイス上のメディアキャプチャセッションを、アンロックされたメディアセッションキャプチャ状態で開始することと、
    前記タップアンドホールドジェスチャ入力が前記メディアキャプチャセッション中に前記グラフィカルユーザインタフェース上の前記第１の場所からリフトする第１のリフトジェスチャを前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャセッションを終了させることと、
    前記メディアキャプチャアフォーダンスが前記メディアキャプチャセッション中に前記グラフィカルユーザインタフェース上の前記第１の場所から第２の場所までスライドするスライドジェスチャ入力を前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更することと、
    前記スライドジェスチャ入力が前記メディアキャプチャセッション中に前記第２の場所で前記グラフィカルユーザインタフェースからリフトする第２のリフトジェスチャを、前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャデバイスによって、前記メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させることと、
    を含む動作を実行させる、非一時的コンピュータ可読記憶媒体。
  16. 前記メディアキャプチャロックアフォーダンスを対象とするタップジェスチャ入力に応答して、前記ロック状態又は前記メディアキャプチャセッションを終了させる、請求項１５に記載の非一時的コンピュータ可読記憶媒体。
  17. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスの外観を変更することを含む、請求項１５に記載の非一時的コンピュータ可読記憶媒体。
  18. 前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスに変更することは、前記メディアキャプチャアフォーダンスを前記メディアキャプチャロックアフォーダンスにモーフィングするようにアニメーション化することを含む、請求項１５に記載の非一時的コンピュータ可読記憶媒体。
  19. 前記ＧＵＩ上の前記スライドジェスチャ入力の方向を示す視覚的インジケータを前記ＧＵＩ上に表示させることを更に含む、請求項１５に記載の非一時的コンピュータ可読記憶媒体。
  20. 前記スライドジェスチャ入力の前に、前記ＧＵＩ上に第１のテキストメッセージを表示させ、前記第２のリフトジェスチャの後に、前記第１のテキストメッセージとは異なる第２のテキストメッセージを表示することと、
    を更に含む、請求項１５に記載の非一時的コンピュータ可読記憶媒体。
  21. ディスプレイ、タッチ感知面、及び１つ以上のメディアキャプチャ構成要素を有するデバイスにおいて、
    前記ディスプレイ上に第１のユーザインタフェース要素を表示することと、
    前記タッチ感知面を介して、前記第１のユーザインタフェース要素に対応する前記タッチ感知面上の場所で開始するタッチ入力を検出することと、
    前記タッチ入力を検出したことに応答して、
    前記タッチ入力が移動基準を満たす前に、かつ前記タッチ入力が検出されてから閾値時間が経過する前に、前記タッチ入力が前記タッチ感知面からリフトされたという判定に従って、第１のタイプのメディアをキャプチャすることと、
    前記タッチ入力が前記移動基準を満たす前に、かつ前記タッチ入力が検出されてから前記閾値時間が経過した後に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、前記タッチ感知面上の前記タッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャすることと、
    前記タッチ入力が前記移動基準を満たし、第１の方向への移動を含むとの判定に従って、前記第２のタイプのメディアのキャプチャを開始し、前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、前記第２のタイプのメディアのキャプチャを継続することと、
    を含む、コンピュータにより実行される方法。
  22. 前記タッチ入力が前記移動基準を満たす前に、かつ前記タッチ入力が検出されてから前記閾値時間が経過した後に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、
    前記タッチ入力のリフトオフを検出したことに応答して、前記第２のタイプのメディアのキャプチャを中止すること
    を更に含む、請求項２１に記載の方法。
  23. 前記第１のタイプのメディアは、前記タッチ感知面上の接触の持続時間とは無関係の持続時間を有する、請求項２１又は２２に記載の方法。
  24. 前記移動基準が第１の移動基準であり、前記方法は、前記タッチ入力を検出したことに応答して、
    前記タッチ入力が第２の移動基準を満たし、前記第１の方向とは異なる第２の方向への移動を含むとの判定に従って、キャプチャされたメディア項目の数が、前記タッチ感知面上の前記タッチ入力の持続時間に基づいて決定される前記第１のタイプのメディアのメディア項目のシーケンスのキャプチャを開始すること
    を更に含む、請求項２１から２３のいずれか一項に記載の方法。
  25. 前記タッチ入力が前記第２の移動基準を満たし、前記第１の方向とは異なる第２の方向への移動を含むとの判定に従って、
    前記タッチ入力のリフトオフを検出したことに応答して、前記第１のタイプのメディアの前記メディア項目のシーケンスをキャプチャすることを中止すること
    を更に含む、請求項２４に記載の方法。
  26. 前記第１のタイプのメディアの前記メディア項目の前記シーケンスのキャプチャを継続している間、
    前記ディスプレイ上に、前記メディア項目の前記シーケンスのキャプチャの開始以降にキャプチャされた前記第１のタイプのメディア項目の数を表示することであって、前記メディア項目の数は、前記ディスプレイ上の前記第１のユーザインタフェース要素の場所に表示される、こと
    を更に含む、請求項２４から２５のいずれか一項に記載の方法。
  27. メディア項目の前記シーケンスのキャプチャの開始以降にキャプチャされた前記第１のタイプのメディアの前記メディア項目の数を前記ディスプレイ上に表示することは、
    前記ディスプレイ上の初期位置でキャプチャされた前記第１のタイプのメディアの前記メディア項目の数を前記ディスプレイ上に表示することと、
    前記タッチ入力が、前記ディスプレイ上の前記初期位置に対応する前記タッチ感知面上の場所への移動を含むとの判定に従って、
    前記ディスプレイ上に、前記ディスプレイ上の前記第１のユーザインタフェース要素の前記場所での前記第１のタイプのメディアの前記メディア項目の数を表示することと、
    前記ディスプレイ上の前記初期位置に前記第１のタイプのメディアの前記メディア項目の数を表示することを中止することと、
    を含む、請求項２６に記載の方法。
  28. 第２のユーザインタフェース要素を前記ディスプレイ上に表示することを更に含み、前記第１のユーザインタフェース要素から前記第２のユーザインタフェース要素への前記タッチ入力の移動は前記移動基準を満たしている、
    請求項２１から２７のいずれか一項に記載の方法。
  29. 前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、前記第２のタイプのメディアのキャプチャを継続することに従って、前記第２のユーザインタフェース要素を前記第２のユーザ要素とは異なる第３のユーザインタフェース要素に変更すること、
    を更に含む、請求項２８に記載の方法。
  30. 前記第２のユーザインタフェース要素は、前記タッチ入力と前記第２のユーザインタフェース要素に対応する前記タッチ感知面上の場所との間の対話に応答して、前記第３のユーザインタフェース要素に変化する、請求項２９に記載の方法。
  31. 前記タッチ入力は第１のタッチ入力であり、
    前記方法は、前記第２のタイプのメディアのキャプチャを継続している間、
    前記タッチ感知面を介して、前記第３のユーザインタフェース要素に対応する前記タッチ感知面上の場所における第２のタッチ入力を検出することと、
    前記第２のタッチ入力を検出したことに応答して、前記第１のタイプのメディアをキャプチャすることと、
    を更に含む、請求項２９又は３０に記載の方法。
  32. 前記タッチ感知面上の前記タッチ入力を検出している間、前記ディスプレイ上の前記第１のユーザインタフェース要素の場所から前記第１の方向への方向インジケータを前記ディスプレイ上に表示すること
    を更に含む、請求項２１から３１のいずれか一項に記載の方法。
  33. 前記タッチ入力が前記第１の方向への移動を含むとの判定に従って、前記方向インジケータが表示される、請求項３２に記載の方法。
  34. 前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、前記第２のタイプのメディアのキャプチャを継続することに従って、前記第１のユーザインタフェース要素を第４のユーザインタフェース要素に変更すること
    を更に含む、請求項２１から３３のいずれか一項に記載の方法。
  35. 前記タッチ入力は第１のタッチ入力であり、
    前記方法は、前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、前記第２のタイプのメディアのキャプチャを継続している間、前記タッチ感知面を介して、前記第４のユーザインタフェース要素に対応する前記タッチ感知面上の場所における第３のタッチ入力を検出することと、
    前記第３のタッチ入力を検出したことに応答して、前記第２のタイプのメディアのキャプチャを中止することと、
    を更に含む、請求項３４に記載の方法。
  36. 前記第１のタイプのメディアは、静止画像及びビデオのうちの１つ以上である、請求項２１から３５のいずれか一項に記載の方法。
  37. 前記１つ以上のメディアキャプチャ構成要素によって前記第１のタイプのメディアをキャプチャすることは、前記タッチ感知面上の前記タッチ入力を検出したことに応答して、又は前記タッチ感知面からの前記タッチ入力のリフトオフに応答して行われる、請求項３６に記載の方法。
  38. 前記第２のタイプのメディアはビデオである、請求項２１から３７のいずれか一項に記載の方法。
  39. 前記１つ以上のメディアキャプチャ構成要素によって前記第２のタイプのメディアをキャプチャすることは、前記タッチ入力が前記タッチ感知面で前記閾値時間を超えて検出されたことに応答して、前記ビデオの記録を開始することを含む、請求項３８に記載の方法。
  40. 前記タッチ入力が前記移動基準を満たす前に、かつ前記タッチ入力が検出されてから閾値時間が経過した後に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、
    前記第１のタイプのメディアをキャプチャすることと、
    前記キャプチャされた第１のタイプのメディアを廃棄することと、
    を更に含む、請求項２１から３９のいずれか一項に記載の方法。
  41. ディスプレイ、タッチ感知面及び１つ以上のメディアキャプチャ構成要素を有する電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、請求項２１から４０のいずれか一項に記載の方法を実行する命令を含む、非一時的コンピュータ可読記憶媒体。
  42. ディスプレイと、
    タッチ感知面と、
    １つ以上のメディアキャプチャ構成要素と、
    １つ以上のプロセッサと、
    前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、請求項２１から４０のいずれか一項に記載の方法を実行する命令を含む、
    電子デバイス。
  43. ディスプレイと、
    タッチ感知面と、
    １つ以上のメディアキャプチャ構成要素と、
    請求項２１から４０のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  44. ディスプレイ、タッチ感知ディスプレイ及び１つ以上のメディアキャプチャ構成要素を有する電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、
    第１のユーザインタフェースを前記ディスプレイ上に表示する命令と、
    前記タッチ感知面を介して、前記第１のユーザインタフェース要素に対応する前記タッチ感知面上の場所で開始するタッチ入力を検出する命令と、
    前記タッチ入力を検出したことに応答して、
    前記タッチ入力が移動基準を満たす前に、かつ前記タッチ入力が検出されてから閾値時間が経過する前に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャする命令と、
    前記タッチ入力が前記移動基準を満たす前に、かつ前記タッチ入力が検出されてから前記閾値時間が経過した後に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、前記タッチ感知面上の前記タッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャする命令と、
    前記タッチ入力が移動基準を満たし、第１の方向への移動を含むとの判定に従って、前記第２のタイプのメディアのキャプチャを開始し、前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、第２のタイプのメディアのキャプチャを継続する命令と、
    を含む、非一時的コンピュータ可読記憶媒体。
  45. ディスプレイと、
    タッチ感知面と、
    １つ以上のメディアキャプチャ構成要素と、
    １つ以上のプロセッサと、
    前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、
    を備える電子デバイスであって、前記１つ以上のプログラムは、
    第１のユーザインタフェースを前記ディスプレイ上に表示する命令と、
    前記タッチ感知面を介して、前記第１のユーザインタフェース要素に対応する前記タッチ感知面上の場所で開始するタッチ入力を検出する命令と、
    前記タッチ入力を検出したことに応答して、
    前記タッチ入力が移動基準を満たす前に、かつ前記タッチ入力が検出されてから閾値時間が経過する前に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャする命令と、
    前記タッチ入力が前記移動基準を満たす前に、かつ前記タッチ入力が検出されてから前記閾値時間が経過した後に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、前記タッチ感知面上の前記タッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャする命令と、
    前記タッチ入力が前記移動基準を満たし、第１の方向への移動を含むとの判定に従って、前記第２のタイプのメディアのキャプチャを開始し、前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、前記第２のタイプのメディアのキャプチャを継続する命令と、を含む、
    電子デバイス。
  46. ディスプレイと、
    タッチ感知面と、
    １つ以上のメディアキャプチャ構成要素と、
    ディスプレイ上に第１のユーザインタフェースを表示する手段と、
    前記タッチ感知面を介して、前記第１のユーザインタフェース要素に対応する前記タッチ感知面上の場所で開始するタッチ入力を検出する手段と、
    前記タッチ入力を検出したことに応答して、
    前記タッチ入力が移動基準を満たす前に、かつ前記タッチ入力が検出されてから閾値時間が経過する前に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、第１のタイプのメディアをキャプチャし、
    前記タッチ入力が前記移動基準を満たす前に、かつ前記タッチ入力が検出されてから前記閾値時間が経過した後に、前記タッチ入力が前記タッチ感知面からリフトされたとの判定に従って、前記タッチ感知面上の前記タッチ入力の持続時間に基づく持続時間を有する第２のタイプのメディアをキャプチャし、
    前記タッチ入力が前記移動基準を満たし、第１の方向への移動を含むとの判定に従って、前記第２のタイプのメディアのキャプチャを開始し、前記タッチ感知面からの前記タッチ入力のリフトオフを検出した後に、前記第２のタイプのメディアのキャプチャを継続する手段と、
    を備える、電子デバイス。
  47. ディスプレイスクリーンを有する電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、請求項１から７のいずれか一項に記載の方法を実行する命令を含む、非一時的コンピュータ可読記憶媒体。
  48. ディスプレイスクリーンと、
    １つ以上のプロセッサと、
    前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備える電子デバイスであって、前記１つ以上のプログラムが、請求項１から７のいずれか一項に記載の方法を実行する命令を含む、
    電子デバイス。
  49. ディスプレイスクリーンと、
    請求項１から７のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  50. ディスプレイスクリーンと、
    メディアキャプチャデバイスの前記ディスプレイスクリーン上に提示されたグラフィカルユーザインタフェース上の第１の場所に表示されたメディアキャプチャアフォーダンスを対象とするタップアンドホールドジェスチャ入力を検出するための手段と、
    前記タップアンドホールドジェスチャ入力に応答して、前記メディアキャプチャデバイスのメディアキャプチャセッションを、アンロックされたメディアキャプチャセッション状態で開始する手段と、
    前記タップアンドホールドジェスチャ入力が前記メディアキャプチャセッション中に前記グラフィカルユーザインタフェース上の前記第１の場所からリフトする第１のリフトジェスチャを前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャセッションを終了させる手段と、
    前記メディアキャプチャセッション中に前記メディアキャプチャアフォーダンスが前記グラフィカルユーザインタフェース上の前記第１の場所から第２の場所までスライドするスライドジェスチャ入力を前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャアフォーダンスをメディアキャプチャロックアフォーダンスに変更する手段と、
    前記スライドジェスチャ入力が前記メディアキャプチャセッション中に前記第２の場所で前記グラフィカルユーザインタフェースからリフトする第２のリフトジェスチャを前記メディアキャプチャデバイスが検出したことに応答して、前記メディアキャプチャセッションをロックされたメディアキャプチャセッション状態に遷移させる手段と、
    を備える、電子デバイス。
JP2022199433A 2018-02-09 2022-12-14 グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス Pending JP2023036715A (ja)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201862628825P 2018-02-09 2018-02-09
US62/628,825 2018-02-09
US15/995,040 US20190253619A1 (en) 2018-02-09 2018-05-31 Media capture lock affordance for graphical user interface
US15/995,040 2018-05-31
US201962802603P 2019-02-07 2019-02-07
US62/802,603 2019-02-07
JP2020542592A JP7196183B2 (ja) 2018-02-09 2019-02-08 グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス
PCT/US2019/017363 WO2019157387A2 (en) 2018-02-09 2019-02-08 Media capture lock affordance for graphical user interface

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020542592A Division JP7196183B2 (ja) 2018-02-09 2019-02-08 グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス

Publications (1)

Publication Number Publication Date
JP2023036715A true JP2023036715A (ja) 2023-03-14

Family

ID=67549117

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020542592A Active JP7196183B2 (ja) 2018-02-09 2019-02-08 グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス
JP2022199433A Pending JP2023036715A (ja) 2018-02-09 2022-12-14 グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020542592A Active JP7196183B2 (ja) 2018-02-09 2019-02-08 グラフィカルユーザインタフェースのためのメディアキャプチャロックアフォーダンス

Country Status (6)

Country Link
EP (1) EP3735632A2 (ja)
JP (2) JP7196183B2 (ja)
KR (3) KR20230152827A (ja)
CN (1) CN111684403A (ja)
AU (3) AU2019218241B2 (ja)
WO (1) WO2019157387A2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022019901A1 (en) * 2020-07-22 2022-01-27 Hewlett-Packard Development Company, L.P. Basic input/output system (bios) activation control of media capture devices
TWI817186B (zh) * 2020-09-29 2023-10-01 仁寶電腦工業股份有限公司 物件操作系統及物件操作方法
CN117761371A (zh) * 2024-02-22 2024-03-26 深圳市鼎阳科技股份有限公司 支持滚动触发的显示设备及其滚动触发的数据处理方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
KR100595925B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
JP5464083B2 (ja) * 2010-07-07 2014-04-09 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
AU2012323326B2 (en) * 2011-10-10 2016-07-14 Microsoft Technology Licensing, Llc Communication system
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
KR101343591B1 (ko) * 2012-09-03 2013-12-19 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
JP6039328B2 (ja) * 2012-09-14 2016-12-07 キヤノン株式会社 撮影制御装置および撮像装置の制御方法
US10552030B2 (en) * 2012-10-15 2020-02-04 Kirusa, Inc. Multi-gesture media recording system
JP6158947B2 (ja) 2012-12-29 2017-07-05 アップル インコーポレイテッド タッチ入力からディスプレイ出力への関係間を遷移するためのデバイス、方法及びグラフィカルユーザインタフェース
US9942464B2 (en) * 2014-05-27 2018-04-10 Thomson Licensing Methods and systems for media capture and seamless display of sequential images using a touch sensitive device
US20160241777A1 (en) * 2015-02-16 2016-08-18 Magisto Ltd. Method and system for implementing a user interface for capturing videos and photos on cameras with a touch screen
KR101667736B1 (ko) * 2015-09-25 2016-10-20 엘지전자 주식회사 이동단말기 및 그 제어방법

Also Published As

Publication number Publication date
AU2019218241A1 (en) 2020-08-27
KR102596371B1 (ko) 2023-11-01
WO2019157387A2 (en) 2019-08-15
AU2019218241B2 (en) 2022-03-24
KR102448223B1 (ko) 2022-09-29
AU2022204465A1 (en) 2022-07-14
KR20200105702A (ko) 2020-09-08
CN111684403A (zh) 2020-09-18
AU2022204465B2 (en) 2023-06-08
KR20230152827A (ko) 2023-11-03
JP7196183B2 (ja) 2022-12-26
KR20220133326A (ko) 2022-10-04
AU2023226764A1 (en) 2023-09-28
EP3735632A2 (en) 2020-11-11
WO2019157387A3 (en) 2019-09-06
JP2021513161A (ja) 2021-05-20
WO2019157387A4 (en) 2019-11-28

Similar Documents

Publication Publication Date Title
JP7158509B2 (ja) 拡張されたユーザ対話のための画像データ
US11755273B2 (en) User interfaces for audio media control
US10372298B2 (en) User interface for multi-user communication session
US11977731B2 (en) Media capture lock affordance for graphical user interface
EP3959866B1 (en) User interfaces for electronic voice communications
KR20210002617A (ko) 전자 디바이스 상의 시스템 사용자 인터페이스들에 대한 액세스
AU2022204465B2 (en) Media capture lock affordance for graphical user interface
US11943559B2 (en) User interfaces for providing live video
US20240163358A1 (en) User interfaces for presenting indications of incoming calls
JP2022188100A (ja) オーディオを共有するための方法及びユーザインタフェース
US20240004521A1 (en) User interfaces for sharing contextually relevant media content
WO2024054498A1 (en) Interfaces for device interactions

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221223

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221223

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240424