JP2019526095A - 制御可能な外部デバイスを管理するためのユーザインタフェース - Google Patents

制御可能な外部デバイスを管理するためのユーザインタフェース Download PDF

Info

Publication number
JP2019526095A
JP2019526095A JP2018562659A JP2018562659A JP2019526095A JP 2019526095 A JP2019526095 A JP 2019526095A JP 2018562659 A JP2018562659 A JP 2018562659A JP 2018562659 A JP2018562659 A JP 2018562659A JP 2019526095 A JP2019526095 A JP 2019526095A
Authority
JP
Japan
Prior art keywords
external device
controllable external
user input
detecting
location
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018562659A
Other languages
English (en)
Other versions
JP6934892B2 (ja
Inventor
パトリック, エル. コフマン,
パトリック, エル. コフマン,
アリアン ベフザディ,
アリアン ベフザディ,
クリストファー, パトリック フォス,
クリストファー, パトリック フォス,
サイラス, ダニエル イラニ,
サイラス, ダニエル イラニ,
イエユキ カワシマ,
イエユキ カワシマ,
ステファン, オー. ルメイ,
ステファン, オー. ルメイ,
クリストファー, ディー. ソリ,
クリストファー, ディー. ソリ,
クリストファー ウィルソン,
クリストファー ウィルソン,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DKPA201670605A external-priority patent/DK179593B1/en
Application filed by Apple Inc filed Critical Apple Inc
Priority claimed from PCT/US2017/035293 external-priority patent/WO2017218192A1/en
Publication of JP2019526095A publication Critical patent/JP2019526095A/ja
Priority to JP2020047952A priority Critical patent/JP7315508B2/ja
Application granted granted Critical
Publication of JP6934892B2 publication Critical patent/JP6934892B2/ja
Priority to JP2022155232A priority patent/JP7461430B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/10Program control for peripheral devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities

Abstract

ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスは、第1のユーザインタフェース画面上にロケーションのインジケーションを表示する。デバイスは、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示する。デバイスは、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示する。制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、デバイスは、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出する。第2のユーザ入力を検出したことに応じて、デバイスは、制御可能な外部デバイスを指定された状態に設定する命令を送信する。

Description

関連出願の相互参照
本出願は、2016年6月12日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題された米国特許仮出願第62/349,057号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。本出願は、2017年2月8日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題された米国特許非暫定出願第15/427,516号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。本出願は、2016年8月9日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題されたデンマーク特許出願第PA 2016 70601号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。本出願は、2016年8月9日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題されたデンマーク特許出願第PA 2016 70602号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。本出願は、2016年8月9日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題されたデンマーク特許出願第PA 2016 70603号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。本出願は、2016年8月9日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題されたデンマーク特許出願第PA 2016 70604号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。本出願は、2016年8月9日に出願された「USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES」と題されたデンマーク特許出願第PA 2016 70605号に対する優先権を主張するものであり、参照によりその内容全体が本明細書に組み込まれる。
本出願は、2015年5月28日に出願された「Accessory Management System Using Environment Model」と題された米国特許出願第14/725,912号に関連し、参照によりその内容全体が本明細書に組み込まれる。本出願はまた、2016年6月12日に出願された「Devices and Methods for Accessing Prevalent Device Functions」と題された米国特許仮出願(代理人整理番号P30795USP1)に関連し、その内容は、本出願の付属文書Aとして含まれ、また、その全体が参照により本明細書に組み込まれる。
[技術分野]
本開示は、概して、コンピュータユーザインタフェースに関し、より具体的には、制御可能な外部デバイスを管理するための技術に関する。
電子デバイスは、様々な用途において、ますます普及してきている。携帯電話、タブレットコンピュータ、家庭用娯楽システムなどは、ユーザが通常対話する電子デバイスのほんの一部である。
加えて、サーモスタット、照明装置、家庭用器具などの様々な電子的に制御可能なデバイスもまた、更に普及してきている。
しかし、電子デバイスを使用して制御可能な外部デバイスを管理するための一部の技術は、概して煩雑であり、非効率である。例えば、一部の既存の技術では、複数回のキー押下又は打鍵を含む場合がある、複雑かつ時間のかかるユーザインタフェースが使用されている。既存の技術では、必要以上の時間が必要であり、ユーザの時間及びデバイスの電力を浪費する。後者の問題は、バッテリ動作デバイスにおいては特に重大である。
したがって、本技術は、制御可能な外部デバイスを管理するための、より速く、より効率的な方法及びインタフェースを電子デバイスに提供する。このような方法及びインタフェースは、任意選択的に、制御可能な外部デバイスを管理するための他の方法を補完する又は置き換える。そのような方法及びインタフェースは、ユーザの認識的負担を軽減し、より効率的なヒューマン−マシンインタフェースを実現する。バッテリ動作式のコンピューティングデバイスの場合には、このような方法及びインタフェースにより、電力が節約され、バッテリを充電する間隔が増す。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、第1のユーザインタフェース画面上にロケーションのインジケーションを表示することと、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示することと、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示することと、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出することと、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示し、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示し、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示し、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示させ、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示させ、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示させ、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出させ、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示させ、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示させ、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示させ、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出させ、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信させる。
電子デバイスは、ディスプレイと、タッチ感知面と、第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示する手段と、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示する手段と、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示する手段と、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出する手段と、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、第1のユーザインタフェース画面上に、ロケーションのインジケーションの表示を有効にし、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現の表示を有効にし、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトの表示を有効にし、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトが表示されている間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示することと、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含めることと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示し、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示させ、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含めさせる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示させ、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含めさせる。
電子デバイスは、ディスプレイと、タッチ感知面と、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示する手段と、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現の表示を有効にし、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、第1の基準の選択に対応する第1のユーザ入力を検出することと、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けることと、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出することと、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加することと、自動化基準が満たされたか否かを判定することと、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、第1の基準の選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付け、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加し、自動化基準が満たされたか否かを判定し、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、第1の基準の選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けさせ、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出させ、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加させ、自動化基準が満たされたか否かを判定させ、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、第1の基準の選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けさせ、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出させ、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加させ、自動化基準が満たされたか否かを判定させ、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信させる。
電子デバイスは、ディスプレイと、タッチ感知面と、第1の基準の選択に対応する第1のユーザ入力を検出する手段と、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付ける手段と、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出する手段と、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加する手段と、自動化基準が満たされたか否かを判定する手段と、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、第1の基準の選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付け、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加し、自動化基準が満たされたか否かを判定し、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、カメラと、1つ以上のプロセッサと、メモリとを備える電子デバイスで、カメラを使用して、パターンの画像をキャプチャすることと、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定することと、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けることと、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出することと、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付けることと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、カメラと、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、カメラを使用して、パターンの画像をキャプチャし、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面と、カメラとを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、カメラを使用して、パターンの画像をキャプチャさせ、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定させ、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けさせ、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付けさせる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面と、カメラとを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、カメラを使用して、パターンの画像をキャプチャさせ、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定させ、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けさせ、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付けさせる。
電子デバイスは、ディスプレイと、タッチ感知面と、カメラと、カメラを使用して、パターンの画像をキャプチャする手段と、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定する手段と、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付ける手段と、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出する手段と、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、画像をキャプチャするように構成されたカメラユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、カメラを使用して、パターンの画像のキャプチャを引き起こし、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出することと、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加することと、電子デバイスの位置を判定することと、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定することと、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出し、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加し、電子デバイスの位置を判定し、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定し、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出させ、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加させ、電子デバイスの位置を判定させ、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定させ、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出させ、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加させ、電子デバイスの位置を判定させ、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定させ、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信させる。
電子デバイスは、ディスプレイと、タッチ感知面と、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出する手段と、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加する手段と、電子デバイスの位置を判定する手段と、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定する手段と、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出し、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加し、電子デバイスの位置を判定し、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定し、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定することと、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示することと、ユーザ入力を検出することと、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信することと、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示し、ユーザ入力を検出し、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信し、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定させ、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示させ、ユーザ入力を検出させ、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信させ、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定させ、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示させ、ユーザ入力を検出させ、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信させ、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信させる。
電子デバイスは、ディスプレイと、タッチ感知面と、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定する手段と、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示する手段と、ユーザ入力を検出する手段と、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信し、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知の表示を有効にし、ユーザ入力を検出し、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令の送信を引き起こし、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令の送信を引き起こす、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示することと、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、第1のユーザ入力が入力基準を満たすか否かを判定することと、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信することと、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示することと、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出することと、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示し、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力が入力基準を満たすか否かを判定し、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信し、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示し、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示させ、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力が入力基準を満たすか否かを判定させ、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信させ、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示させ、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出させ、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示させ、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力が入力基準を満たすか否かを判定させ、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信させ、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示させ、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出させ、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信させる。
電子デバイスは、ディスプレイと、タッチ感知面と、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示する手段と、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、第1のユーザ入力が入力基準を満たすか否かを判定する手段と、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信する手段と、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示し、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現の表示を有効にし、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力が入力基準を満たすか否かを判定し、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令の送信を引き起こし、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスの表示を有効にし、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令の送信を引き起こす、ように構成されている。
方法は、ディスプレイと、1つ以上のプロセッサと、メモリとを備える電子デバイスで、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定することと、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定することと、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定し、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定し、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイを備える電子デバイスの1つ以上のプロセッサによって実行されると、デバイスに、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定させ、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定させ、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイを備える電子デバイスの1つ以上のプロセッサによって実行されると、デバイスに、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定させ、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定させ、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示させる。
電子デバイスは、ディスプレイと、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定する手段と、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定する手段と、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定し、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定し、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現の表示を有効にする、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、第1の個人連絡先を表す第1のアフォーダンスを表示することと、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出することと、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示することと、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出することと、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可することと、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、第1の個人連絡先を表す第1のアフォーダンスを表示し、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示し、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可し、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、第1の個人連絡先を表す第1のアフォーダンスを表示させ、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出させ、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示させ、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出させ、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可させ、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、第1の個人連絡先を表す第1のアフォーダンスを表示させ、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出させ、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示させ、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出させ、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可させ、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信させる。
電子デバイスは、ディスプレイと、タッチ感知面と、第1の個人連絡先を表す第1のアフォーダンスを表示する手段と、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出する手段と、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示する手段と、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出する手段と、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可する手段と、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、第1の個人連絡先を表す第1のアフォーダンスの表示を有効にし、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスの表示を有効にし、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可させ、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータの送信を引き起こす、ように構成されている。
方法は、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信することと、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示することと、アフォーダンスの選択に対応する第1のユーザ入力を検出することと、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示することと、を含む。
電子デバイスは、ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を備え、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示し、アフォーダンスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する、命令を含む。
1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信させ、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示させ、アフォーダンスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示させる。
1つ以上のプログラムを記憶する一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信させ、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示させ、アフォーダンスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示させる。
電子デバイスは、ディスプレイと、タッチ感知面と、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信する手段と、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示する手段と、アフォーダンスの選択に対応する第1のユーザ入力を検出する手段と、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する手段と、を備える。
電子デバイスは、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、接触を受けるように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を備え、処理ユニットが、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示し、アフォーダンスの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する、ように構成されている。
これらの機能を実行する実行可能な命令は、任意選択的に、1つ以上のプロセッサによって実行されるように構成された非一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に含まれる。これらの機能を実行する実行可能な命令は、任意選択的に、1つ以上のプロセッサによって実行されるように構成された一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に含まれる。
このため、制御可能な外部デバイスを管理するための、より速く、より効率的な方法及びインタフェースがデバイスに提供され、それによって、そのようなデバイスの有効性、効率、及びユーザ満足度が増す。そのような方法及びインタフェースは、制御可能な外部デバイスを管理するための他の方法を補完する又は置き換えることができる。
説明される様々な実施形態をより良く理解するため、以下の図面と併せて、以下の「発明を実施するための形態」が参照されるべきである。ここで、類似の参照番号は、それらの図の全てを通じて、対応する部分を指す。
いくつかの実施形態に従った、タッチ感知ディスプレイを備えたポータブル多機能デバイスを示すブロック図である。
いくつかの実施形態に従った、イベント処理のための例示的な構成要素を示すブロック図である。
いくつかの実施形態に従った、タッチスクリーンを有するポータブル多機能デバイスを示す。
いくつかの実施形態に従った、ディスプレイ及びタッチ感知面を備える例示的な多機能デバイスのブロック図である。
いくつかの実施形態に従った、ポータブル多機能デバイス上のアプリケーションのメニュー用の例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、ディスプレイとは別個のタッチ感知面を備える多機能デバイスに関する、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、パーソナル電子デバイスを示す。
いくつかの実施形態に従った、パーソナル電子デバイスを示すブロック図である。
いくつかの実施形態に従った、タッチ感知ディスプレイ及び強度センサを有するパーソナル電子デバイスの例示的な構成要素を示す。 いくつかの実施形態に従った、タッチ感知ディスプレイ及び強度センサを有するパーソナル電子デバイスの例示的な構成要素を示す。
いくつかの実施形態に従った、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 いくつかの実施形態に従った、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 いくつかの実施形態に従った、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 いくつかの実施形態に従った、パーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。 いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。 いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
いくつかの実施形態に従った、制御可能な外部デバイスを管理するためのプロセスを示すフロー図である。
いくつかの実施形態に従った、電子デバイスの機能ブロック図である。
いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。 いくつかの実施形態に従った、例示的なユーザインタフェースを示す。
以下の説明は、例示的な方法、パラメータなどを記載する。しかし、そのような説明は、本開示の範囲に対する限定として意図されるものではなく、代わりに例示的な実施形態の説明として提供されると認識されたい。
制御可能な外部デバイスを管理するための効率的な方法及びインタフェースを提供する電子デバイスが必要とされている。いくつかの実施形態では、電子デバイスは、制御可能なデバイスのシステムを管理するためのホーム画面上で、指定された(例えば、お気に入りの)制御可能なデバイスへのアクセスを提供する。いくつかの実施形態では、ユーザは、1つの種類の特性を有する入力を使用して2つの状態(例えば、オン/オフ)の間で状態をトグルすることにより、デバイスを粗く制御し、異なる特性を有する入力を使用してデバイスのより詳細な制御を得ることができる。いくつかの実施形態では、ユーザが定義したデバイスの集合は、ユーザが定義した条件に応じて制御される。様々な他の技術もまた、説明する。そのような技術は、制御可能な外部デバイスを管理するユーザの認識的負担を軽減し、それによって生産性を高めることができる。更に、そのような技術は、通常であれば冗長なユーザ入力に対して浪費される、プロセッサ及びバッテリの電力を低減することができる。
以下、図1A及び図1B、図2、図3、図4A〜図4B、及び図5A〜図5Hは、制御可能な外部デバイスを管理するための技術を実行するための例示的なデバイスの説明を提供する。図6A〜図6S、図9A〜図9F、図12A〜図12C、図15A〜図15B、図18A〜図18C、図25、図28A〜図28E、図31A〜図31B、及び図34A〜図34Kは、制御可能な外部デバイスを管理するための例示的なユーザインタフェースを示す。図7A〜図7C、図10、図13、図16、図19、図21、図23、図26、図29、及び図32は、いくつかの実施形態に従った、制御可能な外部デバイスを管理する方法を示すフロー図である。図6A〜図6S、図9A〜図9F、図12A〜図12C、図15A〜図15B、図18A〜図18C、図25、図28A〜図28E、図31A〜図31B、及び図34A〜図34Kは、図7A〜図7C、図10、図13、図16、図19、図21、図23、図26、図29、及び図32のプロセスを含む、以下に説明するプロセスを示すために用いられる。
以下の説明では、様々な要素を説明するために「第1」、「第2」などの用語が使用されるが、これらの要素は、それらの用語によって限定されるべきではない。これらの用語は、ある要素を別の要素と区別するためにのみ使用される。例えば、記載する様々な実施形態の範囲から逸脱することなく、第1のタッチを第2のタッチと呼ぶこともでき、同様に第2のタッチを第1のタッチと呼ぶこともできる。第1のタッチ及び第2のタッチはどちらもタッチであるが、これらは同じタッチではない。
本明細書において記載する様々な実施形態の説明で使用される術語は、特定の実施形態について説明することのみを目的とし、限定的であることが意図されるものではない。記載する様々な実施形態の説明及び添付の特許請求の範囲内では、単数形の「a」、「an」、及び「the」は、文脈上別途明白に記載しない限り、複数形も同様に含むことが意図される。また、本明細書で使用されるように、用語「及び/又は」は、関連する列挙された項目のうちの1つ以上のいずれか及び全ての考えられる組合せを指し、かつこれを含むことを理解されたい。用語「includes(含む)」、「including(含む)」、「comprises(含む、備える)」、及び/又は「comprising(含む、備える)」は、本明細書で使用する場合、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/若しくはそれらのグループの存在又は追加を除外しないことが更に理解されるであろう。
「〜の場合(if)」という用語は、任意選択的に、文脈に応じて、「〜とき(when)」若しくは「〜とき(upon)」、又は「〜と判定したことに応じて(in response to determining)」若しくは「〜を検出したことに応じて(in response to detecting)」を意味すると解釈される。同様に、「〜と判定された場合(if it is determined)」又は「[記載の状態又はイベント]が検出された場合(if[a stated condition or event]is detected)」という語句は、任意選択的に、文脈に応じて、「〜と判定したとき(upon determining)」若しくは「〜と判定したことに応じて(in response to determining)」、又は「[記載の状態又はイベント]を検出したとき(upon detecting[the stated condition or event])」若しくは「[記載の状態又はイベント]を検出したことに応じて(in response to detecting[the stated condition or event])」を意味すると解釈される。
電子デバイス、そのようなデバイス用のユーザインタフェース、及びそのようなデバイスを使用するための関連するプロセスの実施形態が説明される。いくつかの実施形態では、デバイスは、PDA機能及び/又は音楽プレーヤ機能などの他の機能も含む、携帯電話などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態としては、カリフォルニア州クパチーノのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)のデバイスが挙げられるが、これらに限定されない。任意選択的に、タッチ感知面を有するラップトップ又はタブレットコンピュータ(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)などの他のポータブル電子デバイスも使用される。また、いくつかの実施形態では、デバイスはポータブル通信デバイスではなく、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を有するデスクトップコンピュータであることも理解されたい。
以下の議論では、ディスプレイ及びタッチ感知面を含む電子デバイスについて説明する。しかし、電子デバイスは、任意選択的に、物理キーボード、マウス、及び/又はジョイスティックなどの1つ以上の他の物理ユーザインタフェースデバイスを含むことを理解されたい。
このデバイスは、一般的に、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、ビデオ会議アプリケーション、電子メールアプリケーション、インスタントメッセージングアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション、及び/又はデジタルビデオプレーヤアプリケーションのうちの1つ以上などの、様々なアプリケーションをサポートする。
本デバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも1つの共通の物理ユーザインタフェースデバイスを、任意選択的に使用する。タッチ感知面の1つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーションごとに、及び/又はそれぞれのアプリケーション内で、任意選択的に、調節及び/又は変更される。このように、デバイスの共通の物理アーキテクチャ(タッチ感知面など)は、任意選択的に、ユーザにとって直観的かつ透過的なユーザインタフェースを備える様々なアプリケーションをサポートする。
ここで、タッチ感知ディスプレイを備えるポータブルデバイスの実施形態に注意を向ける。図1Aは、いくつかの実施形態に係るタッチ感知ディスプレイシステム112を有するポータブル多機能デバイス100を示すブロック図である。タッチ感知ディスプレイ112は、便宜上「タッチスクリーン」と呼ばれる場合があり、「タッチ感知ディスプレイシステム」として既知であるか、又はそのように呼ばれる場合もある。デバイス100は、メモリ102(任意選択的に、1つ以上のコンピュータ可読記憶媒体を含む)、メモリコントローラ122、1つ以上の処理ユニット(CPU)120、周辺機器インタフェース118、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、入出力(I/O)サブシステム106、他の入力制御デバイス116、及び外部ポート124を含む。デバイス100は、任意選択的に、1つ以上の光センサ164を含む。デバイス100は、任意選択的に、デバイス100(例えば、デバイス100のタッチ感知ディスプレイシステム112などのタッチ感知面)上の接触の強度を検出するための、1つ以上の接触強度センサ165を含む。デバイス100は、任意選択的に、デバイス100上で触知出力を生成する(例えばデバイス100のタッチ感知ディスプレイシステム112又はデバイス300のタッチパッド355などのタッチ感知面上で触知出力を生成する)1つ以上の触知出力生成器167を含む。これらの構成要素は、任意選択的に、1つ以上の通信バス又は信号ライン103を介して通信する。
本明細書及び特許請求の範囲で使用されるとき、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指の接触)の力若しくは圧力(単位面積当りの力)、又はタッチ感知面上の接触の力若しくは圧力の代替物(代用物)を指す。接触の強度は、少なくとも4つの異なる値を含み、より典型的には、数百の(例えば、少なくとも256の)異なる値を含む、値の範囲を有する。接触の強度は、任意選択的に、様々な手法、及び様々なセンサ若しくはセンサの組合せを使用して、判定(又は、測定)される。例えば、タッチ感知面の下に又はこれに隣接する1つ以上の力センサは、任意選択的に、タッチ感知面上の様々な点における力を測定するために使用される。一部の実装形態では、複数の力センサからの力測定値を組合せて(例えば、加重平均)、推定される接触の力を判定する。同様に、スタイラスの感圧性先端部を任意選択的に使用して、タッチ感知面上のスタイラスの圧力を判定する。あるいは、タッチ感知面上で検出される接触領域のサイズ及び/若しくはその変化、接触に近接するタッチ感知面の電気容量及び/若しくはその変化、並びに/又は、接触に近接するタッチ感知面の抵抗及び/若しくはその変化が、タッチ感知面上の接触の力又は圧力の代替物として、任意選択的に用いられる。いくつかの実装形態では、接触の力又は圧力に対する代替的測定値は、強度閾値を超えているかを判定するために直接使用される(例えば、強度閾値は、代替的測定値に対応する単位で記述される)。一部の実装形態では、これらの接触の力又は圧力に関する代替的測定値は、推定される力又は圧力に変換され、その推定される力又は圧力を使用して、強度閾値を超過しているか否かが判定される(例えば、強度閾値は、圧力の単位で測定される圧力閾値である)。接触の強度をユーザ入力の属性として使用することにより、アフォーダンスを(例えば、タッチ感知ディスプレイ上に)表示するための、及び/又は、ユーザ入力を(例えば、タッチ感知ディスプレイ、タッチ感知面、又は、ノブ若しくはボタンなどの物理的/機械的制御部を介して)受信するための面積が制限されている、低減されたサイズのデバイス上で、通常であればユーザによってアクセスすることが不可能であり得る追加的なデバイス機能への、ユーザのアクセスが可能となる。
本明細書及び特許請求の範囲で使用するとき、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対する、そのデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、そのデバイスの別の構成要素(例えば、筐体)に対する物理的変位、又は、デバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、ユーザの手の指、手のひら、又は他の部分)に接触している状況では、物理的変位によって生成された触知出力は、そのデバイス又はデバイスの構成要素の物理的特性の認識される変化に相当する触感として、ユーザによって解釈されることになる。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として、任意選択的に解釈される。いくつかの場合、ユーザの動作により物理的に押された(例えば、変位された)タッチ感知面に関連付けられた物理アクチュエータボタンの移動がない時でさえ、ユーザは「ダウンクリック」又は「アップクリック」などの触感を感じる。別の実施例として、タッチ感知面の移動は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択的に解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」「ダウンクリック」、「粗さ」)に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な(又は、平均的な)ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。
デバイス100は、ポータブル多機能デバイスの一実施例に過ぎず、デバイス100は、任意選択的に、示されているものよりも多くの構成要素又は少ない構成要素を有するものであり、任意選択的に、2つ以上の構成要素を組合せるものであり、又は、任意選択的に、それらの構成要素の異なる構成若しくは配置を有するものであることを理解されたい。図1Aに示す様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア又はハードウェア及びソフトウェアの双方の組合せで実装される。
メモリ102は、任意選択的に、高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイスなどの不揮発性メモリを含む。メモリコントローラ122は、任意選択的に、デバイス100の他の構成要素によるメモリ102へのアクセスを制御する。
周辺機器インタフェース118は、デバイスの入力及び出力周辺機器をCPU120及びメモリ102に結合するために使用することができる。1つ以上のプロセッサ120は、メモリ102に記憶された様々なソフトウェアプログラム及び/又は命令セットを動作させる、又は実行して、デバイス100のための様々な機能を実行し、データを処理する。いくつかの実施形態では、周辺機器インタフェース118、CPU120及びメモリコントローラ122は、チップ104などの単一チップ上に任意選択的に実装される。いくつかの他の実施形態では、それらは別々のチップ上に任意選択的に実装される。
RF(radio frequency)(無線周波数)回路108は、電磁信号とも呼ばれるRF信号を送受信する。RF回路108は、電気信号を電磁信号に、又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路108は、任意選択的に、これらの機能を実行するための周知の回路を含み、それらの回路としては、限定するものではないが、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(subscriber identity module;SIM)カード、メモリなどが挙げられる。RF回路108は、任意選択的に、ワールドワイドウェブ(World Wide Web、WWW)とも呼ばれるインターネット、イントラネット、並びに/又はセルラー電話ネットワーク、無線ローカルエリアネットワーク(local area network、LAN)及び/若しくはメトロポリタンエリアネットワーク(metropolitan area network、MAN)などの無線ネットワークなどのネットワークと、また他のデバイスと、無線通信によって通信する。RF回路108は、任意選択的に、近距離通信無線などによる近距離無線通信(near field communication;NFC)フィールドを検出するための、周知の回路を含む。無線通信は、複数の通信規格、通信プロトコル、及び通信技術のうちのいずれかを、任意選択的に使用し、それらの通信規格、通信プロトコル、及び通信技術としては、移動通信用のグローバルシステム(Global System for Mobile Communications、GSM(登録商標))、拡張データGSM環境(Enhanced Data GSM Environment、EDGE)、高速ダウンリンクパケット接続(high-speed downlink packet access、HSDPA)、高速アップリンクパケット接続(high-speed uplink packet access、HSUPA)、Evolution,Data−Only(EV−DO)、HSPA、HSPA+、2重セルHSPA(Dual-Cell HSPA、DC−HSPDA)、ロングタームエボリューション(long term evolution、LTE)、近距離無線通信(near field communication、NFC)、広帯域符号分割多元接続(wideband code division multiple access、W−CDMA)、符号分割多元接続(code division multiple access、CDMA)、時分割多元接続(time division multiple access、TDMA)、Bluetooth(登録商標)、Bluetooth Low Energy(BTLE)、Wireless Fidelity(Wi−Fi)(登録商標)(例えば、IEEE 802.11a、IEEE 802.11b、IEEE 802.11g、IEEE 802.11n、及び/又はIEEE 802.11ac)、ボイスオーバーインターネットプロトコル(voice over Internet Protocol、VoIP)、Wi−MAX、電子メール用のプロトコル(例えば、インターネットメッセージアクセスプロトコル(Internet message access protocol、IMAP)及び/又はポストオフィスプロトコル(post office protocol、POP))、インスタントメッセージング(例えば、拡張可能メッセージング及びプレゼンスプロトコル(extensible messaging and presence protocol、XMPP)、インスタントメッセージング及びプレゼンス利用拡張向けセッション開始プロトコル(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions、SIMPLE)、インスタントメッセージング及びプレゼンスサービス(Instant Messaging and Presence Service、IMPS))、及び/又はショートメッセージサービス(Short Message Service、SMS)、あるいは本文書の出願日現在までにまだ開発されていない通信プロトコルを含めた任意の他の好適な通信プロトコルが挙げられるが、これらに限定されない。
オーディオ回路110、スピーカ111、及びマイクロフォン113は、ユーザとデバイス100との間のオーディオインタフェースを提供する。オーディオ回路110は、周辺機器インタフェース118からオーディオデータを受信し、このオーディオデータを電気信号に変換し、この電気信号をスピーカ111に伝送する。スピーカ111は、電気信号を人間の可聴音波に変換する。また、オーディオ回路110は、マイクロフォン113によって音波から変換された電気信号を受信する。オーディオ回路110は、電気信号をオーディオデータに変換し、このオーディオデータを処理のために周辺機器インタフェース118に伝送する。オーディオデータは、任意選択的に、周辺機器インタフェース118によって、メモリ102及び/若しくはRF回路108から取得され、かつ/又はメモリ102及び/若しくはRF回路108に伝送される。一部の実施形態では、オーディオ回路110はまた、ヘッドセットジャック(例えば、図2の212)も含む。ヘッドセットジャックは、オーディオ回路110と、出力専用ヘッドホン又は出力(例えば片耳又は両耳用のヘッドホン)及び入力(例えばマイクロフォン)の両方を有するヘッドセットなどの着脱可能なオーディオ入出力周辺機器との間のインタフェースを提供する。
I/Oサブシステム106は、タッチスクリーン112及び他の入力制御デバイス116などの、デバイス100上の入出力周辺機器を、周辺機器インタフェース118に結合する。I/Oサブシステム106は、任意選択的に、ディスプレイコントローラ156、光センサコントローラ158、強度センサコントローラ159、触覚フィードバックコントローラ161、及び他の入力若しくは制御デバイスのための1つ以上の入力コントローラ160を含む。1つ以上の入力コントローラ160は、他の入力制御デバイス116との間で、電気信号を受信/送信する。他の入力制御デバイス116は、任意選択的に、物理ボタン(例えば、プッシュボタン、ロッカボタンなど)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。一部の代替的実施形態では、入力コントローラ(単数又は複数)160は、任意選択的に、キーボード、赤外線ポート、USBポート、及び、マウスなどのポインタデバイスのうちのいずれかに結合される(又は、いずれにも結合されない)。1つ以上のボタン(例えば、図2の208)は、任意選択的に、スピーカ111及び/又はマイクロフォン113の音量調節のための、アップ/ダウンボタンを含む。1つ以上のボタンは、任意選択的に、プッシュボタン(例えば、図2の206)を含む。
全体が参照により本明細書に組み込まれる、2005年12月23日出願の米国特許第7,657,849号である米国特許出願第11/322,549号、「Unlocking a Device by Performing Gestures on an Unlock Image」で説明されているように、このプッシュボタンの素早い押圧により、任意選択的に、タッチスクリーン112のロックが解除され、又は、任意選択的に、タッチスクリーン上のジェスチャを使用してデバイスをロック解除するプロセスが開始される。プッシュボタン(例えば、206)をより長く押圧することにより、任意選択的に、デバイス100の電源がオン又はオフにされる。ボタンのうちの1つ以上の機能性は、任意選択的に、ユーザによってカスタマイズ可能である。タッチスクリーン112は、仮想ボタン若しくはソフトボタン、及び1つ以上のソフトキーボードを実装するために使用される。
タッチ感知ディスプレイ112は、デバイスとユーザとの間の入力インタフェース及び出力インタフェースを提供する。ディスプレイコントローラ156は、タッチスクリーン112との間で、電気信号を受信及び/又は送信する。タッチスクリーン112は、ユーザに視覚出力を表示する。この視覚出力は、グラフィック、テキスト、アイコン、ビデオ、及びそれらの任意の組合せ(総称して「グラフィック」)を任意選択的に含む。一部の実施形態では、これらの視覚出力の一部又は全ては、任意選択的に、ユーザインタフェースオブジェクトに対応する。
タッチスクリーン112は、触覚及び/又は触知の接触に基づいてユーザからの入力を受け入れる、タッチ感知面、センサ、あるいはセンサのセットを有する。タッチスクリーン112及びディスプレイコントローラ156は(メモリ102内の任意の関連モジュール及び/又は命令セットと共に)、タッチスクリーン112上で接触(及び任意の接触の移動又は中断)を検出し、検出された接触をタッチスクリーン112上に表示されたユーザインタフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ又は画像)との対話に変換する。例示的実施形態では、タッチスクリーン112とユーザとの接触点は、ユーザの指に対応する。
タッチスクリーン112は、任意選択的に、LCD(liquid crystal display;液晶ディスプレイ)技術、LPD(light emitting polymer display;発光ポリマーディスプレイ)技術、又はLED(light emitting diode;発光ダイオード)技術を使用するものであるが、他の実施形態では、他のディスプレイ技術が使用される。タッチスクリーン112及びディスプレイコントローラ156は、任意選択的に、現在既知の若しくは今後開発される複数のタッチ感知技術のうちのいずれかを使用して、接触及びその接触のあらゆる移動若しくは中断を検出するものであり、それらのタッチ感知技術としては、限定するものではないが、静電容量技術、抵抗性技術、赤外線技術、及び表面音響波技術、並びに、タッチスクリーン112との1つ以上の接触点を判定するための他の近接センサアレイ又は他の要素が挙げられる。例示的実施形態では、Apple Inc.(Cupertino,California)によるiPhone(登録商標)及びiPod Touch(登録商標)において見られるような、投影型相互静電容量感知技術が使用される。
タッチスクリーン112の一部の実施形態におけるタッチ感知ディスプレイは、任意選択的に、米国特許第6,323,846号(Westermanら)、同第6,570,557号(Westermanら)、及び/又は同第6,677,932号(Westerman)、並びに/あるいは米国特許出願公開第2002/0015024(A1)号で説明されている、マルチタッチ感知タッチパッドに類似しており、これらの文献のそれぞれは、全体が参照により本明細書に組み込まれる。しかし、タッチスクリーン112はデバイス100からの視覚出力を表示するのに対して、タッチ感知タッチパッドは視覚出力を提供しない。
タッチスクリーン112の一部の実施形態におけるタッチ感知ディスプレイは、以下の出願で説明されている:(1)2006年5月2日出願の米国特許出願第11/381,313号、「Multipoint Touch Surface Controller」、(2)2004年5月6日出願の同第10/840,862号、「Multipoint Touchscreen」、(3)2004年7月30日出願の同第10/903,964号、「Gestures For Touch Sensitive Input Devices」、(4)2005年1月31日出願の同第11/048,264号、「Gestures For Touch Sensitive Input Devices」、(5)2005年1月18日出願の同第11/038,590号、「Mode−Based Graphical User Interfaces For Touch Sensitive Input Devices」、(6)2005年9月16日出願の同第11/228,758号、「Virtual Input Device Placement On A Touch Screen User Interface」、(7)2005年9月16日出願の同第11/228,700号、「Operation Of A Computer With A Touch Screen Interface」、(8)2005年9月16日出願の同第11/228,737号、「Activating Virtual Keys Of A Touch−Screen Virtual Keyboard」、及び(9)2006年3月3日出願の同第11/367,749号、「Multi−Functional Hand−Held Device」。これらの出願の全ては、全体が参照により本明細書に組み込まれる。
タッチスクリーン112は、任意選択的に、100dpiを超えるビデオ解像度を有する。一部の実施形態では、このタッチスクリーンは、約160dpiのビデオ解像度を有する。ユーザは、任意選択的に、スタイラス、指などの任意の好適な物体又は付属物を使用して、タッチスクリーン112と接触する。一部の実施形態では、ユーザインタフェースは、主として指に基づく接触及びジェスチャによって機能するように設計されているが、指に基づく接触及びジェスチャは、タッチスクリーン上での指の接触面積がより広いことにより、スタイラスに基づく入力よりも精度が低い恐れがある。一部の実施形態では、デバイスは、指に基づく粗い入力を、ユーザによって所望されているアクションを実行するための、正確なポインタ/カーソルの位置又はコマンドに変換する。
いくつかの実施形態では、タッチスクリーンに加えて、デバイス100は、任意選択的に、特定の機能をアクティブ化又は非アクティブ化するためのタッチパッド(図示せず)を含む。いくつかの実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知エリアである。タッチパッドは、任意選択的に、タッチスクリーン112とは別個のタッチ感知面、又は、タッチスクリーンによって形成されているタッチ感知面の拡張部である。
デバイス100は、また、様々なコンポーネントに電力を供給する電力システム162を含む。電力システム162は、任意選択的に、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ(例えば、発光ダイオード(LED))、並びにポータブルデバイス内での電力の生成、管理、及び分配に関連付けられた任意の他の構成要素を含む。
また、デバイス100は、任意選択的に、1つ以上の光センサ164を含む。図1Aは、I/Oサブシステム106内の光センサコントローラ158に結合された光センサを示す。光センサ164は、任意選択的に、電荷結合デバイス(charge-coupled device、CCD)又は相補的金属酸化物半導体(complementary metal-oxide semiconductor、CMOS)フォトトランジスタを含む。光センサ164は、1つ以上のレンズを通って投影された環境からの光を受信し、その光を、画像を表すデータに変換する。光センサ164は、撮像モジュール143(カメラモジュールとも呼ばれる)と連動して、任意選択的に、静止画像又はビデオをキャプチャする。一部の実施形態では、タッチスクリーンディスプレイが、静止画像及び/又はビデオ画像の取得のためのビューファインダとしての使用に関して有効化されるように、光センサは、デバイスの前面のタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置されている。一部の実施形態では、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で見ている間に、そのユーザの画像が、任意選択的に、テレビ会議のために取得されるように、デバイスの前面に光センサが配置されている。一部の実施形態では、光センサ164の位置は、ユーザによって(例えば、デバイス筐体内のレンズ及びセンサを回転させることによって)変更することができ、それにより、単一の光センサ164が、タッチスクリーンディスプレイと共に、テレビ会議並びに静止画像及び/又はビデオ画像の取得の双方のために使用される。
また、デバイス100は、任意選択的に、1つ以上の接触強度センサ165を含む。図1Aは、I/Oサブシステム106内の強度センサコントローラ159に結合された、接触強度センサを示す。接触強度センサ165は、任意選択的に、1つ以上のピエゾ抵抗歪みゲージ、容量式力センサ、電気力センサ、圧電力センサ、光学力センサ、容量式タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(又は、圧力)を測定するために使用されるセンサ)を含む。接触強度センサ165は、周辺環境から接触強度情報(例えば、圧力情報又は圧力情報の代用物)を受信する。いくつかの実施形態では、少なくとも1つの接触強度センサは、タッチ感知面(例えばタッチ感知ディスプレイシステム112)と並置される、又はそれに近接している。一部の実施形態では、少なくとも1つの接触強度センサは、デバイス100の前面に配置されているタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置されている。
また、デバイス100は、任意選択的に、1つ以上の近接センサ166を含む。図1Aは、周辺機器インタフェース118と結合された近接センサ166を示す。あるいは、近接センサ166は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。近接センサ166は、任意選択的に、米国特許出願第11/241,839号、「Proximity Detector In Handheld Device」、同第11/240,788号、「Proximity Detector In Handheld Device」、同第11/620,702号、「Using Ambient Light Sensor To Augment Proximity Sensor Output」、同第11/586,862号、「Automated Response To And Sensing Of User Activity In Portable Devices」、及び同第11/638,251号、「Methods And Systems For Automatic Configuration Of Peripherals」で説明されるように機能するものであり、これらの出願は、全体が参照により本明細書に組み込まれる。一部の実施形態では、近接センサは、この多機能デバイスがユーザの耳の近くに配置されている場合に(例えば、ユーザが電話で通話している場合に)、タッチスクリーン112をオフにして無効化する。
また、デバイス100は、任意選択的に、1つ以上の触知出力生成器167を含む。図1Aは、I/Oサブシステム106内の触覚フィードバックコントローラ161に結合された、触知出力生成器を示す。触知出力生成器167は、任意選択的に、スピーカ若しくは他のオーディオ構成要素などの1つ以上の電気音響デバイス、及び/又は、モータ、ソレノイド、電気活性ポリマー、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素(例えば、電気信号をデバイス上の触知出力に変換する構成要素)などの、エネルギーを直線運動に変換する電気機械デバイスを含む。接触強度センサ165は、触覚フィードバックモジュール133からの触知フィードバック生成命令を受信して、デバイス100のユーザによって感知することが可能な触知出力を、デバイス100上に生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器は、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)に配置されているか、又はそれに近接しており、任意選択的に、タッチ感知面を垂直方向(例えば、デバイス100の表面の内/外)に、又は水平方向(例えば、デバイス100の表面と同じ平面内の前後)に動かすことによって、触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器センサが、デバイス100の前面に配置されたタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置されている。
また、デバイス100は、任意選択的に、1つ以上の加速度計168を含む。図1Aは、周辺機器インタフェース118に結合された加速度計168を示す。あるいは、加速度計168は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。加速度計168は、任意選択的に、米国特許出願公開第20050190059号、「Acceleration−based Theft Detection System for Portable Electronic Devices」、及び同第20060017692号、「Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer」で説明されるように機能するものであり、これらの文献の双方は、全体が参照により本明細書に組み込まれる。一部の実施形態では、情報は、1つ以上の加速度計から受信したデータの分析に基づいて、縦長表示又は横長表示でタッチスクリーンディスプレイ上に表示される。デバイス100は任意選択で、加速度計(単数又は複数)168に加えて、磁気計(図示せず)並びにデバイス100の位置及び向き(例えば、縦向き又は横向き)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信機(図示せず)を含む。
いくつかの実施形態では、メモリ102内に記憶されているソフトウェア構成要素は、オペレーティングシステム126、通信モジュール(又は命令セット)128、接触/動きモジュール(又は命令セット)130、グラフィックモジュール(又は命令セット)132、テキスト入力モジュール(又は命令セット)134、全地球測位システム(Global Positioning System、GPS)モジュール(又は命令セット)135、及びアプリケーション(又は命令セット)136を含む。更に、いくつかの実施形態では、メモリ102(図1A)又は370(図3)は、図1A及び図3に示すように、デバイス/グローバル内部状態157を記憶する。デバイス/グローバル内部状態157は、現在アクティブ状態のアプリケーションがある場合に、どのアプリケーションがアクティブであるかを示す、アクティブアプリケーション状態、どのアプリケーション、ビュー、又は他の情報がタッチスクリーンディスプレイ112の様々な領域を占領しているかを示す表示状態、デバイスの様々なセンサ及び入力制御デバイス116から取得された情報を含む、センサ状態、並びに、デバイスの位置及び/又は姿勢に関する位置情報のうちの1つ以上を含む。
オペレーティングシステム126(例えば、Darwin(登録商標)、RTXC(登録商標)、LINUX(登録商標)、UNIX(登録商標)、OS X(登録商標)、iOS(登録商標)、WINDOWS(登録商標)、又は、VxWorks(登録商標)などの組み込みオペレーティングシステム)は、一般的なシステムタスク(例えば、メモリ管理、記憶デバイス制御、電力管理など)を制御及び管理するための、様々なソフトウェア構成要素並びに/あるいはドライバを含み、様々なハードウェア構成要素及びソフトウェア構成要素間の通信を容易にする。
通信モジュール128は、1つ以上の外部ポート124を介して他のデバイスとの通信を容易にし、RF回路108及び/又は外部ポート124が受信したデータを処理するための様々なソフトウェア構成要素をも含む。外部ポート124(例えばユニバーサルシリアルバス(Universal Serial Bus、USB)、FIREWIRE(登録商標)など)は、直接的に、又はネットワーク(例えばインターネット、無線LANなど)を介して間接的に、他のデバイスに連結するように適合されている。一部の実施形態では、外部ポートは、iPod(登録商標)(Apple Inc.の商標)デバイス上で使用される30ピンコネクタと同じ若しくは同様のマルチピン(例えば、30ピン)コネクタ、及び/又は互換性のあるマルチピン(例えば、30ピン)コネクタである。
接触/動きモジュール130は、任意選択的に、(ディスプレイコントローラ156と連携して)タッチスクリーン112及び他のタッチ感知デバイス(例えば、タッチパッド又は物理クリックホイール)との接触を検出する。接触/動きモジュール130は、接触が生じたか否かを判定すること(例えば、指を下ろすイベントを検出すること)、接触の強度(例えば、接触の力若しくは圧力、又は接触の力若しくは圧力の代替物)を判定すること、接触の移動が存在するか否かを判定し、タッチ感知面を横断する移動を追跡すること(例えば、指をドラッグする1つ以上のイベントを検出すること)、及び接触が停止したか否かを判定すること(例えば、指を上げるイベント又は接触の中断を検出すること)などの、接触の検出に関する様々な動作を実行するための、様々なソフトウェア構成要素を含む。接触/動きモジュール130は、タッチ感知面から接触データを受信する。一連の接触データによって表される、接触点の移動を判定することは、任意選択的に、接触点の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向の変化)を判定することを含む。これらの動作は、任意選択的に、単一の接触(例えば、1本の指の接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。一部の実施形態では、接触/動きモジュール130及びディスプレイコントローラ156は、タッチパッド上の接触を検出する。
いくつかの実施形態では、接触/動きモジュール130は、ユーザによって操作が実行されたか否かを判定するための(例えば、ユーザがアイコン上で「クリック」したか否かを判定するための)、1つ以上の強度閾値のセットを使用する。いくつかの実施形態では、少なくとも強度閾値のサブセットが、ソフトウェアパラメータに従って判定される(例えば、強度閾値は特定の物理アクチュエータのアクティブ化閾値によって判定されず、デバイス100の物理ハードウェアを変更することなく調整し得る)。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、そのトラックパッド又はタッチスクリーンディスプレイのハードウェアを変更することなく、広範囲の既定の閾値のうちのいずれかに設定することができる。更には、一部の実装形態では、デバイスのユーザには、(例えば、個々の強度閾値を調節することによって、及び/又は、システムレベルのクリック「強度」パラメータを使用して、一度に複数の強度閾値を調節することによって)強度閾値のセットのうちの1つ以上を調節するための、ソフトウェア設定が提供される。
接触/動きモジュール130は、任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターンを有する(例えば検出される接触の動き、タイミング、及び/又は強度が異なる)。したがって、ジェスチャは、任意選択的に、特定の接触パターンを検出することによって検出される。例えば、指のタップジェスチャを検出することは、(例えば、アイコンの位置での)指を下ろすイベントを検出し、続いて、その指を下ろすイベントと同じ位置(又は、実質的に同じ位置)で指を上げる(リフトオフ)イベントを検出することを含む。別の例として、タッチ感知面上での指のスワイプジェスチャを検出することは、指を下ろすイベントを検出し、続いて、指をドラッグする1つ以上のイベントを検出し、その後、続いて指を上げる(リフトオフ)イベントを検出することを含む。
グラフィックモジュール132は、表示されるグラフィックの視覚的効果(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚属性)を変更するための構成要素を含めた、タッチスクリーン112又は他のディスプレイ上にグラフィックをレンダリングして表示するための、様々な既知のソフトウェア構成要素を含む。本明細書で使用するとき、用語「グラフィック」は、ユーザに対して表示することが可能な任意のオブジェクトを含み、それらのオブジェクトとしては、限定するものではないが、テキスト、ウェブページ、アイコン(ソフトキーを含めた、ユーザインタフェースオブジェクトなど)、デジタル画像、ビデオ、アニメーションなどが挙げられる。
いくつかの実施形態では、グラフィックモジュール132は、使用されるグラフィックを表すデータを記憶する。各グラフィックには、任意選択的に、対応するコードが割り当てられる。グラフィックモジュール132は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィック特性データと共に、表示されることとなるグラフィックを指定する1つ以上のコードを受信し、次にディスプレイコントローラ156に出力する画面の画像データを生成する。
触覚フィードバックモジュール133は、デバイス100とのユーザ対話に応答して、デバイス100上の1つ以上の場所で触知出力を生成するために、触知出力生成器(単数又は複数)167によって使用される命令を生成するための、様々なソフトウェア構成要素を含む。
テキスト入力モジュール134は任意選択的に、グラフィックモジュール132の構成要素であり、様々なアプリケーション(例えば、連絡先137、電子メール140、IM141、ブラウザ147、及びテキスト入力を必要とする任意の他のアプリケーション)においてテキストを入力するための、ソフトキーボードを提供する。
GPSモジュール135は、デバイスの位置を判定し、この情報を様々なアプリケーションで使用するために(例えば、位置に基づくダイヤル発呼で使用するために電話138へ、写真/ビデオのメタデータとしてカメラ143へ、並びに、天気ウィジェット、地域のイエローページウィジェット、及び地図/ナビゲーションウィジェットなどの、位置に基づくサービスを提供するアプリケーションへ)提供する。
アプリケーション136は、任意選択的に、以下のモジュール(又は命令セット)又はそれらのサブセット若しくはスーパーセットを含む。
●連絡先モジュール137(アドレス帳又は連絡先リストと称されることもある)、
●電話モジュール138、
●テレビ会議モジュール139、
●電子メールクライアントモジュール140、
●インスタントメッセージング(Instant messaging)(IM)モジュール141、
●トレーニングサポートモジュール142、
●静止画像及び/又はビデオ画像用のカメラモジュール143、
●画像管理モジュール144、
●ビデオプレーヤモジュール、
●ミュージックプレーヤモジュール、
●ブラウザモジュール147、
●カレンダーモジュール148、
天気ウィジェット149−1、株価ウィジェット149−2、計算機ウィジェット149−3、アラーム時計ウィジェット149−4、辞書ウィジェット149−5、及びユーザによって取得された他のウィジェット、並びにユーザ作成ウィジェット149−6のうちの1つ以上を任意選択的に含む、ウィジェットモジュール149、
●ユーザ作成ウィジェット149−6を作成するためのウィジェット作成モジュール150、
●検索モジュール151、
●ビデオプレーヤモジュール及びミュージックプレーヤモジュールを統合した、ビデオ及びミュージックプレーヤモジュール152、
●メモモジュール153、
●地図モジュール154、及び/又は
●オンラインビデオモジュール155。
任意選択的にメモリ102に記憶される他のアプリケーション136の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA(登録商標)対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、連絡先モジュール137は、(例えば、メモリ102又はメモリ370内の連絡先モジュール137のアプリケーション内部状態192内に記憶されている)アドレス帳又は連絡先リストを管理するために、任意選択的に使用され、この管理には、アドレス帳に名前(単数又は複数)を追加すること、アドレス帳から名前(単数又は複数)を削除すること、電話番号(単数又は複数)、電子メールアドレス(単数又は複数)、住所(単数又は複数)、又は他の情報を名前に関連付けること、画像を名前に関連付けること、名前を分類して並べ替えること、電話番号若しくは電子メールアドレスを提供して、電話138、テレビ会議モジュール139、電子メール140、又はIM141による通信を開始する及び/又は容易にすること、などが含まれる。
RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、電話モジュール138は、電話番号に対応する文字列を入力し、連絡先モジュール137内の1つ以上の電話番号にアクセスし、入力された電話番号を修正し、対応の電話番号をダイヤルし、会話を遂行し、会話が完了した際に接続を切るか又は電話を切るために、任意選択的に使用される。上述のように、無線通信は、複数の通信規格、通信プロトコル、及び通信技術のうちのいずれかを任意選択的に使用する。
RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、タッチスクリーン112、ディスプレイコントローラ156、光センサ164、光センサコントローラ158、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、連絡先モジュール137、及び電話モジュール138と連携して、テレビ会議モジュール139は、ユーザの命令に従って、ユーザと1人以上の他の参加者との間のテレビ会議を開始し、遂行し、終了する、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、電子メールクライアントモジュール140は、ユーザの命令に応答して、電子メールを作成し、送信し、受信し、管理する、実行可能命令を含む。画像管理モジュール144に関連して、電子メールクライアントモジュール140は、カメラモジュール143で撮影された静止画像又はビデオ画像を有する電子メールを作成及び送信することを非常に容易にする。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、インスタントメッセージングモジュール141は、インスタントメッセージに対応する文字列を入力し、入力済みの文字を修正し、対応のインスタントメッセージを(例えば、電話ベースのインスタントメッセージ用のショートメッセージサービス(SMS)若しくはマルチメディアメッセージサービス(Multimedia Message Service;MMS)プロトコルを使用して、又はインターネットベースのインスタントメッセージ用のXMPP、SIMPLE、若しくはIMPSを使用して)送信し、インスタントメッセージを受信し、受信されたインスタントメッセージを見る、実行可能命令を含む。一部の実施形態では、送信及び/又は受信されるインスタントメッセージは、任意選択的に、MMS及び/又は拡張メッセージングサービス(Enhanced Messaging Service;EMS)でサポートされるような、グラフィック、写真、オーディオファイル、ビデオファイル、及び/又は他の添付ファイルを含む。本明細書で使用するとき、「インスタントメッセージング」とは、電話ベースのメッセージ(例えば、SMS又はMMSを使用して送信されるメッセージ)及びインターネットベースのメッセージ(例えば、XMPP、SIMPLE、又はIMPSを使用して送信されるメッセージ)の双方を指す。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、地図モジュール154、及びミュージックプレーヤモジュールと連携して、トレーニングサポートモジュール142は、(例えば、時間、距離、及び/又はカロリー消費目標を有する)トレーニングを作成し、トレーニングセンサ(スポーツデバイス)と通信し、トレーニングセンサデータを受信し、トレーニングをモニタするために使用されるセンサを較正し、トレーニング用の音楽を選択して再生し、トレーニングデータを表示し、記憶し、送信する、実行可能命令を含む。
タッチスクリーン112、ディスプレイコントローラ156、光センサ(単数又は複数)164、光センサコントローラ158、接触/動きモジュール130、グラフィックモジュール132、及び画像管理モジュール144と連携して、カメラモジュール143は、静止画像又は(ビデオストリームを含む)ビデオをキャプチャし、それらをメモリ102内に記憶し、静止画像又はビデオの特性を修正し、あるいはメモリ102から静止画像又はビデオを削除する、実行可能命令を含む。
タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びカメラモジュール143と連携して、画像管理モジュール144は、静止画像及び/又はビデオ画像を配列し、修正(例えば、編集)若しくは他の方式で操作し、ラベルを付け、削除し、(例えば、デジタルスライドショー又はアルバムとして)提示し、記憶する、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ブラウザモジュール147は、ウェブページ又はその諸部分、並びにウェブページにリンクされた添付ファイル及び他のファイルを検索し、リンクし、受信し、表示することを含めた、ユーザの命令に従ってインターネットをブラウズする、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、カレンダーモジュール148は、ユーザの命令に従って、カレンダー、及びカレンダーに関連付けられるデータ(例えば、カレンダー項目、to doリストなど)を作成し、表示し、修正し、記憶する、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、ウィジェットモジュール149は、ユーザによって任意選択的にダウンロードされて使用されるミニアプリケーション(例えば、天気ウィジェット149−1、株価ウィジェット149−2、計算機ウィジェット149−3、アラーム時計ウィジェット149−4、及び辞書ウィジェット149−5)、又は、ユーザによって作成されるミニアプリケーション(例えば、ユーザ作成ウィジェット149−6)である。一部の実施形態では、ウィジェットは、HTML(Hypertext Markup Language;ハイパーテキストマークアップ言語)ファイル、CSS(Cascading Style Sheets;カスケーディングスタイルシート)ファイル、及びJavaScript(登録商標)ファイルを含む。いくつかの実施形態では、ウィジェットは、XML(拡張可能マークアップ言語)ファイル及びJavaScriptファイル(例えば、Yahoo!ウィジェット)を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、ウィジェット作成モジュール150は、任意選択的に、ウィジェットを作成する(例えば、ウェブページのユーザ指定箇所をウィジェットに変える)ために、ユーザによって使用される。
タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、検索モジュール151は、ユーザの命令に従って、1つ以上の検索基準(例えば、1つ以上のユーザ指定の検索用語)に一致する、メモリ102内のテキスト、音楽、サウンド、画像、ビデオ、及び/又は他のファイルを検索する、実行可能命令を含む。
タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、オーディオ回路110、スピーカ111、RF回路108、及びブラウザモジュール147と連携して、ビデオ及びミュージックプレーヤモジュール152は、MP3ファイル又はAACファイルなどの1つ以上のファイル形式で記憶された、録音済みの音楽ファイル又は他のサウンドファイルを、ユーザがダウンロード及び再生することを可能にする、実行可能命令と、ビデオを(例えば、タッチスクリーン112上に、又は外部ポート124を介して接続されている外部のディスプレイ上に)表示、提示、又は他の方式で再生する、実行可能命令とを含む。いくつかの実施形態では、デバイス100は、任意選択的に、iPod(Apple社の商標)などのMP3プレーヤの機能を含む。
タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、メモモジュール153は、ユーザの命令に従って、メモ、to doリストなどを作成及び管理する、実行可能命令を含む。
RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、及びブラウザモジュール147と連携して、地図モジュール154は、任意選択的に、ユーザの命令に従って、地図、及び地図に関連付けられるデータ(例えば、運転方向、特定の場所若しくはその付近の、店舗及び他の関心対象地点についてのデータ、並びに位置に基づく他のデータ)を受信し、表示し、変更し、記憶するために、使用される。
タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、オーディオ回路110、スピーカ111、RF回路108、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、オンラインビデオモジュール155は、ユーザが、特定のオンラインビデオにアクセスし、閲覧し、(例えば、ストリーミング及び/又はダウンロードによって)受信し、(例えば、タッチスクリーン上で、又は外部ポート124を介して接続されている外部のディスプレイ上で)再生し、その特定のオンラインビデオへのリンクを含む電子メールを送信し、また他の方式で、H.264などの1つ以上のファイル形式でオンラインビデオを管理することを可能にする、命令を含む。一部の実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール140ではなく、インスタントメッセージングモジュール141が使用される。オンラインビデオアプリケーションの更なる説明は、2007年6月20日出願の米国特許仮出願第60/936,562号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」、及び2007年12月31日出願の米国特許出願第11/968,067号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」に見出すことができ、これらの出願の内容は、全体が参照により本明細書に組み込まれる。
上記で特定されているモジュール及びアプリケーションのそれぞれは、上述の1つ以上の機能、及び本出願で説明される方法(例えば、コンピュータにより実施される方法及び本明細書で説明される他の情報処理方法)を実行する、実行可能命令のセットに対応する。これらのモジュール(例えば、命令セット)は、別個のソフトウェアプログラム手順、又はモジュールとして実装される必要はなく、それゆえ、様々な実施形態では、これらのモジュールの様々なサブセットは、任意選択的に組み合わされるか、又は他の方式で再編成される。例えば、ビデオプレーヤモジュールは、任意選択的に、音楽プレーヤモジュールと組み合わされて、単一のモジュール(例えば、図1Aのビデオ及び音楽プレーヤモジュール152)にされる。いくつかの実施形態では、メモリ102は、任意選択的に、上記で特定したモジュール及びデータ構造のサブセットを記憶する。更に、メモリ102は、任意選択的に、上記で説明していない追加のモジュール及びデータ構造を記憶する。
いくつかの実施形態では、デバイス100は、そのデバイスにおける所定の機能のセットの動作がタッチスクリーン及び/又はタッチパッドのみを通じて実行されるデバイスである。デバイス100が動作するための主要な入力制御デバイスとしてタッチスクリーン及び/又はタッチパッドを使用することにより、任意選択的に、デバイス100上の物理的な入力制御デバイス(プッシュボタン、ダイヤルなど)の数が削減される。
タッチスクリーン及び/又はタッチパッドを通じてのみ実行される所定の機能のセットは、任意選択的に、ユーザインタフェース間のナビゲーションを含む。いくつかの実施形態では、タッチパッドは、ユーザによってタッチされたときに、デバイス100上に表示される任意のユーザインタフェースから、メインメニュー、ホームメニュー、又はルートメニューにデバイス100をナビゲートする。このような実施形態では、「メニューボタン」は、タッチパッドを使用して実装される。いくつかの他の実施形態では、メニューボタンは、タッチパッドではなく、物理プッシュボタン又はその他の物理入力制御デバイスである。
図1Bは、いくつかの実施形態に従った、イベント処理のための例示的な構成要素を示すブロック図である。いくつかの実施形態では、メモリ102(図1A)又は370(図3)は、イベントソート部170(例えば、オペレーティングシステム126内)と、それぞれのアプリケーション136−1(例えば、前述のアプリケーション137〜151、155、380〜390のうちのいずれか)とを含む。
イベントソート部170は、イベント情報を受信し、イベント情報が配信されるアプリケーション136−1及びアプリケーション136−1のアプリケーションビュー191を判定する。イベントソート部170は、イベントモニタ171及びイベントディスパッチャモジュール174を含む。いくつかの実施形態では、アプリケーション136−1には、アプリケーションがアクティブ又は実行中の時、タッチ感知ディスプレイ112上に表示される現在のアプリケーションビュー(単数又は複数)を示す、アプリケーション内部状態192が含まれる。いくつかの実施形態では、デバイス/グローバル内部状態157は、どのアプリケーション(単数又は複数)が現在アクティブであるかを判定するためにイベントソート部170によって使用され、アプリケーション内部状態192は、イベント情報が配信されるアプリケーションビュー191を決定するためにイベントソート部170によって使用される。
いくつかの実施形態では、アプリケーション内部状態192は、アプリケーション136−1が実行を再開するときに使用される再開情報、アプリケーション136−1によって表示されている、又は表示される準備ができている情報を示すユーザインタフェース状態情報、ユーザがアプリケーション136−1の以前の状態又はビューに戻ることを可能にする状態待ち行列、及びユーザが行った以前のアクションのリドゥ/アンドゥ待ち行列のうちの1つ以上などの追加の情報を含む。
イベントモニタ171は、周辺機器インタフェース118からイベント情報を受信する。イベント情報は、サブイベント(例えば、マルチタッチジェスチャの一部としての、タッチ感知ディスプレイ112上のユーザタッチ)の情報を含む。周辺機器インタフェース118は、I/Oサブシステム106、又は近接センサ166、加速度計(単数又は複数)168、及び/若しくは(オーディオ回路110を介した)マイクロフォン113などのセンサから受信する情報を伝送する。周辺機器インタフェース118がI/Oサブシステム106から受信する情報は、タッチ感知ディスプレイ112又はタッチ感知面からの情報を含む。
いくつかの実施形態では、イベントモニタ171は、所定の間隔で周辺機器インタフェース118に要求を送信する。それに応答して、周辺機器インタフェース118は、イベント情報を伝送する。他の実施形態では、周辺機器インタフェース118は、重要なイベント(例えば、所定のノイズ閾値を上回り、及び/又は所定の持続時間よりも長い入力を受信すること)があったときのみ、イベント情報を伝送する。
いくつかの実施形態では、イベントソート部170はまた、ヒットビュー判定モジュール172及び/又はアクティブイベント認識部判定モジュール173を含む。
ヒットビュー判定モジュール172は、タッチ感知ディスプレイ112が1つよりも多いビューを表示した際に、1つ以上のビュー内のどこにおいてサブイベントが発生したかを判定するためのソフトウェア手続きを提供する。ビューは、ユーザがディスプレイ上で見ることができる制御及び他の要素から構成されている。
アプリケーションに関連付けられたユーザインタフェースの別の態様は、本明細書ではアプリケーションビュー又はユーザインタフェースウィンドウと呼ばれることもあるビューのセットであり、その中で情報が表示され、タッチに基づくジェスチャが生じる。タッチが検出される(それぞれのアプリケーションの)アプリケーションビューは、任意選択的に、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルビューは、任意選択的に、ヒットビューと呼ばれ、また、適切な入力として認識されるイベントのセットは、任意選択的に、タッチによるジェスチャを開始する初期タッチのヒットビューに少なくとも部分的に基づいて決定される。
ヒットビュー判定モジュール172は、タッチに基づくジェスチャのサブイベントに関連する情報を受信する。アプリケーションが階層状に構成された複数のビューを有するときには、ヒットビュー判定モジュール172は、サブイベントを処理すべき階層内の最下位のビューとして、ヒットビューを特定する。殆どの状況では、このヒットビューは、開始サブイベント(例えば、イベント又は潜在的なイベントを形成するサブイベントのシーケンスにおける、最初のサブイベント)が発生する、最下位レベルのビューである。ヒットビューが、ヒットビュー判定モジュール172によって特定されると、そのヒットビューは、典型的には、それがヒットビューとして特定された、同じタッチ又は入力ソースに関連する、全てのサブイベントを受信する。
アクティブイベント認識部判定モジュール173は、ビュー階層内のどのビュー(単数又は複数)がサブイベントの特定のシーケンスを受信すべきかを判定する。いくつかの実施形態では、アクティブイベント認識部判定モジュール173は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール173は、サブイベントの物理位置を含む全てのビューがアクティブに関わりがあるビューであると判定し、したがって、全てのアクティブに関わりがあるビューが、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントが1つの特定のビューに関連する領域に完全に限定された場合でも、階層内の上位のビューは、依然としてアクティブに関わりがあるビューであり続ける。
イベントディスパッチャモジュール174は、イベント情報をイベント認識部(例えばイベント認識部180)にディスパッチする。アクティブイベント認識部判定モジュール173を含む実施形態において、イベントディスパッチャモジュール174は、アクティブイベント認識部判定モジュール173により判定されたイベント認識部にイベント情報を配信する。いくつかの実施形態では、イベントディスパッチャモジュール174は、対応するイベント受信部182により取得されるイベント情報をイベント待ち行列に記憶する。
いくつかの実施形態では、オペレーティングシステム126は、イベントソート部170を含む。代替として、アプリケーション136−1がイベントソート部170を含む。更に他の実施形態では、イベントソート部170は、独立型のモジュール、又は接触/動きモジュール130などの、メモリ102に記憶された別のモジュールの一部である。
いくつかの実施形態では、アプリケーション136−1は、それぞれがアプリケーションのユーザインタフェースのそれぞれのビュー内で発生するタッチイベントを処理する命令を含む、複数のイベント処理部190及び1つ以上のアプリケーションビュー191を含む。アプリケーション136−1の各アプリケーションビュー191は、1つ以上のイベント認識部180を含む。典型的には、それぞれのアプリケーションビュー191は、複数のイベント認識部180を含む。他の実施形態では、イベント認識部180のうちの1つ以上は、ユーザインタフェースキット(図示せず)又はアプリケーション136−1が方法及び他の特性を継承する上位レベルのオブジェクトなどの、別個のモジュールの一部である。いくつかの実施形態では、対応するイベント処理部190は、データ更新部176、オブジェクト更新部177、GUI更新部178及び/又はイベントソート部170から受信されたイベントデータ179、のうちの1つ以上を含む。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176、オブジェクト更新部177、又はGUI更新部178を任意選択的に、利用若しくは呼び出す。代替として、アプリケーションビュー191のうちの1つ以上は、1つ以上の対応するイベント処理部190を含む。また、いくつかの実施形態では、データ更新部176、オブジェクト更新部177及びGUI更新部178のうちの1つ以上は、対応するアプリケーションビュー191に含まれる。
それぞれのイベント認識部180は、イベントソート部170からイベント情報(例えば、イベントデータ179)を受信し、イベント情報からイベントを特定する。イベント認識部180は、イベント受信部182及びイベント比較部184を含む。いくつかの実施形態では、イベント認識部180はまた、メタデータ183及びイベント配信命令188(任意選択的にサブイベント配信命令を含む)の少なくともサブセットも含む。
イベント受信部182は、イベントソート部170からイベント情報を受信する。イベント情報は、サブイベントについての情報、例えば、タッチ又はタッチの移動についての情報を含む。サブイベントに応じて、イベント情報はまた、サブイベントの位置などの追加の情報を含む。サブイベントがタッチの動きに関わるとき、イベント情報はまた任意選択的に、サブイベントの速さ及び方向を含む。いくつかの実施形態では、イベントは、1つの向きから別の向きへの(例えば、縦向きから横向きへ、又はその逆の)デバイスの回転を含み、イベント情報は、デバイスの現在の向き(デバイスの姿勢とも呼ぶ)についての対応する情報を含む。
イベント比較部184は、イベント情報を、既定のイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント又はサブイベントを判定するか、あるいはイベント又はサブイベントの状態を判定若しくは更新する。いくつかの実施形態では、イベント比較部184は、イベント定義186を含む。イベント定義186は、例えばイベント1(187−1)及びイベント2(187−2)などのイベント(例えば所定のサブイベントのシーケンス)の定義を含む。一部の実施形態では、イベント(187)内のサブイベントは、例えば、タッチの開始、タッチの終了、タッチの移動、タッチの取り消し、及び複数のタッチを含む。一実施例では、イベント1(187−1)についての定義は、表示されたオブジェクト上のダブルタップである。このダブルタップは、例えば、所定の段階に関する表示オブジェクト上での第1のタッチ(タッチの開始)、所定の段階に関する第1のリフトオフ(タッチの終了)、所定の段階に関する表示オブジェクト上での第2のタッチ(タッチの開始)、及び所定の段階に関する第2のリフトオフ(タッチの終了)を含む。別の実施例では、イベント2(187−2)の定義は、表示されたオブジェクト上のドラッグである。このドラッグ操作は、例えば、所定の段階に関する表示オブジェクト上でのタッチ(又は、接触)、タッチ感知ディスプレイ112を横断するタッチの移動、及びタッチのリフトオフ(タッチの終了)を含む。いくつかの実施形態では、イベントはまた、1つ以上の関連付けられたイベント処理部190に関する情報を含む。
いくつかの実施形態では、イベント定義187は、それぞれのユーザインタフェースオブジェクトについてのイベントの定義を含む。いくつかの実施形態では、イベント比較部184は、どのユーザインタフェースオブジェクトがサブイベントに関連付けられているかを判定するヒットテストを実行する。例えば、タッチ感知ディスプレイ112上に、3つのユーザインタフェースオブジェクトが表示されているアプリケーションビューでは、タッチ感知ディスプレイ112上でタッチが検出されると、イベント比較部184は、3つのユーザインタフェースオブジェクトのうちのいずれが、そのタッチ(サブイベント)と関連付けられているかを判定するために、ヒットテストを実行する。表示された各オブジェクトが、対応するイベント処理部190に関連付けられている場合、イベント比較部は、ヒットテストの結果を用いて、どのイベント処理部190をアクティブ化すべきかを判定する。例えば、イベント比較部184は、ヒットテストをトリガするサブイベント及びオブジェクトと関連付けられたイベント処理部を選択する。
一部の実施形態では、それぞれのイベント(187)に関する定義はまた、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するか否かが判定されるまでイベント情報の配信を遅延させる、遅延アクションを含む。
それぞれのイベント認識部180が一連のサブイベントがイベント定義186のいずれのイベントとも一致しないと判断した場合には、それぞれのイベント認識部180は、イベント不可能、イベント失敗、又はイベント終了の状態になり、その後は、タッチによるジェスチャの後続のサブイベントを無視する。この状況では、ヒットビューについてアクティブのままである他のイベント認識部があれば、そのイベント認識部は、進行中のタッチによるジェスチャのサブイベントの追跡及び処理を続行する。
いくつかの実施形態では、対応するイベント認識部180は、イベント配信システムがどのようにサブイベント配信を実行すべきかをアクティブに関与しているイベント認識部に示す構成可能なプロパティ、フラグ、及び/又はリストを有するメタデータ183を含む。いくつかの実施形態では、メタデータ183は、イベント認識部が互いにどのように対話するか、又はイベント認識部が互いにどのように対話することができるようになっているかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。いくつかの実施形態では、メタデータ183は、サブイベントがビュー階層又はプログラム階層における多様なレベルに配信されるかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。
いくつかの実施形態では、それぞれのイベント認識部180は、イベントの1つ以上の特定のサブイベントが認識されるときに、イベントと関連付けられたイベント処理部190をアクティブ化する。いくつかの実施形態では、それぞれのイベント認識部180は、イベントと関連付けられたイベント情報をイベント処理部190に配信する。イベント処理部190をアクティブ化することは、それぞれのヒットビューにサブイベントを送信する(及び、送信を延期する)こととは別個である。いくつかの実施形態では、イベント認識部180は、認識したイベントと関連付けられたフラグを投入し、そのフラグと関連付けられたイベント処理部190は、そのフラグを捕らえ、既定のプロセスを実行する。
いくつかの実施形態では、イベント配信命令188は、イベント処理部をアクティブ化することなくサブイベントについてのイベント情報を配信するサブイベント配信命令を含む。代わりに、サブイベント配信命令は、一連のサブイベントと関連付けられたイベント処理部に、又はアクティブに関与しているビューにイベント情報を配信する。一連のサブイベント又はアクティブに関与しているビューと関連付けられたイベント処理部は、イベント情報を受信し、所定の処理を実行する。
いくつかの実施形態では、データ更新部176は、アプリケーション136−1で使用されるデータを作成及び更新する。例えば、データ更新部176は、連絡先モジュール137で使用される電話番号を更新し、又はビデオプレーヤモジュールで使用されるビデオファイルを記憶する。いくつかの実施形態では、オブジェクト更新部177は、アプリケーション136−1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクト更新部177は、新たなユーザインタフェースオブジェクトを作成するか、又はユーザインタフェースオブジェクトの位置を更新する。GUI更新部178は、GUIを更新する。例えば、GUI更新部178は、表示情報を準備し、タッチ感知ディスプレイ上に表示するために表示情報をグラフィックモジュール132に送る。
いくつかの実施形態では、イベント処理部(単数又は複数)190は、データ更新部176、オブジェクト更新部177、及びGUI更新部178を含むか又はそれらへのアクセスを有する。いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178は、それぞれのアプリケーション136−1又はアプリケーションビュー191の単一モジュールに含まれる。他の実施形態では、それらは、2つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する以上の説明は、その全てがタッチスクリーン上で開始されるとは限らない、入力デバイスを備える多機能デバイス100を動作させるためのその他の形態のユーザ入力にも当てはまることを理解されたい。例えば、キーボードの単一又は複数の押圧若しくは保持と任意選択的に連携される、マウスの移動及びマウスボタンの押圧、タッチパッド上でのタップ、ドラッグ、スクロールなどの接触移動、ペンスタイラス入力、デバイスの移動、口頭による命令、検出された眼球運動、バイオメトリック入力、並びに/又はそれらの任意の組合せを、任意選択的に、認識するイベントを定義するサブイベントに対応する入力として利用する。
図2は、一部の実施形態による、タッチスクリーン112を有するポータブル多機能デバイス100を示す。タッチスクリーンは、任意選択的に、ユーザインタフェース(user interface、UI)200内に1つ以上のグラフィックを表示する。本実施形態、並びに以下で説明される他の実施形態では、ユーザは、例えば、1本以上の指202(図には正確な縮尺では描かれていない)又は1つ以上のスタイラス203(図には正確な縮尺では描かれていない)を使用して、グラフィック上でジェスチャを実施することによって、それらのグラフィックのうちの1つ以上を選択することが可能となる。一部の実施形態では、1つ以上のグラフィックの選択は、ユーザが、その1つ以上のグラフィックとの接触を中断する場合に実施される。一部の実施形態では、ジェスチャは、任意選択的に、1回以上のタップ、1回以上の(左から右へ、右から左へ、上方向へ、及び/又は下方向への)スワイプ、及び/又は、デバイス100と接触した指の(右から左へ、左から右へ、上方向へ、及び/又は下方向への)ローリングを含む。一部の実装形態又は状況では、グラフィックとの不測の接触は、そのグラフィックを選択するものではない。例えば、選択に対応するジェスチャがタップである場合、アプリケーションアイコンの上をスイープするスワイプジェスチャは、任意選択的に、対応するアプリケーションを選択するものではない。
また、デバイス100は、任意選択的に、「ホーム」又はメニューボタン204などの1つ以上の物理ボタンも含む。前述のように、メニューボタン204は、デバイス100上で任意選択的に実行されるアプリケーションのセット内の、任意のアプリケーション136にナビゲートするために、任意選択的に使用される。あるいは、一部の実施形態では、メニューボタンは、タッチスクリーン112上に表示されるGUI内のソフトキーとして実装される。
一部の実施形態では、デバイス100は、タッチスクリーン112、メニューボタン204、デバイスの電源をオン/オフし、デバイスをロックするためのプッシュボタン206、音量調節ボタン(単数又は複数)208、加入者識別モジュール(SIM)カードスロット210、ヘッドセットジャック212、及びドッキング/充電用外部ポート124を含む。プッシュボタン206は、任意選択的に、ボタンを押し下げて、所定の期間にわたってボタンを押し下げた状態に保持することによって、デバイスの電源をオン/オフするため、ボタンを押し下げて、所定の期間が経過する前にボタンを解放することによって、デバイスをロックするため、及び/又はデバイスをロック解除する、若しくはロック解除プロセスを開始するために、使用される。代替的実施形態では、デバイス100はまた、マイクロフォン113を介して、一部の機能をアクティブ化又は非アクティブ化するための口頭入力も受け入れる。デバイス100はまた、任意選択的に、タッチスクリーン112上の接触の強度を検出するための1つ以上の接触強度センサ165、及び/又は、デバイス100のユーザに対する触知出力を生成するための1つ以上の触知出力生成器167も含む。
図3は、一部の実施形態による、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。デバイス300は、ポータブル型である必要はない。いくつかの実施形態では、デバイス300は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディア再生デバイス、ナビゲーションデバイス、教育的デバイス(子供の学習玩具など)、ゲームシステム、又は制御デバイス(例えば、家庭用又は業務用コントローラ)である。デバイス300は、典型的には、1つ以上の処理ユニット(CPU)310、1つ以上のネットワーク若しくは他の通信インタフェース360、メモリ370、及び、これらの構成要素を相互接続するための1つ以上の通信バス320を含む。通信バス320は、任意選択的に、システム構成要素間の通信を相互接続及び制御する回路(チップセットと呼ばれることもある)を含む。デバイス300は、典型的にはタッチスクリーンディスプレイである、ディスプレイ340を備える入出力(I/O)インタフェース330を含む。I/Oインタフェース330はまた、キーボード及び/又はマウス(又は他のポインティングデバイス)350並びにタッチパッド355、デバイス300上に触知出力を生成するための(例えば、図1Aを参照して上述された触知出力生成器167と同様の)触知出力生成器357、センサ359(例えば、光センサ、加速度センサ、近接センサ、タッチ感知センサ、及び/又は図1Aを参照して上述された接触強度センサ165と同様の接触強度センサ)も任意選択的に含む。メモリ370は、DRAM、SRAM、DDR RAM、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含み、任意選択的に、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含む。メモリ370は、CPU310からリモートに位置する1つ以上の記憶デバイスを任意選択的に含む。いくつかの実施形態では、メモリ370は、ポータブル多機能デバイス100(図1A)のメモリ102内に記憶されているプログラム、モジュール、及びデータ構造に類似したプログラム、モジュール、及びデータ構造、又はそのサブセットを記憶する。更に、メモリ370は任意選択で、ポータブル多機能デバイス100のメモリ102に存在しない追加のプログラム、モジュール、及びデータ構造を記憶する。例えば、デバイス300のメモリ370は、任意選択的に、描画モジュール380、プレゼンテーションモジュール382、ワードプロセッシングモジュール384、ウェブサイト作成モジュール386、ディスクオーサリングモジュール388、及び/又はスプレッドシートモジュール390を記憶するのに対して、ポータブル多機能デバイス100(図1A)のメモリ102は、任意選択的に、これらのモジュールを記憶しない。
上記で特定されている図3の要素のそれぞれは、任意選択的に、前述のメモリデバイスのうちの1つ以上に記憶される。上記で特定されているモジュールのそれぞれは、上述の機能を実行する命令セットに対応する。上記で特定したモジュール又はプログラム(例えば、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実施する必要はなく、したがって様々な実施形態では、これらのモジュールの様々なサブセットは、任意選択的に、組み合わされ、又は他の形で再構成されている。いくつかの実施形態では、メモリ370は、任意選択的に、上記で特定したモジュール及びデータ構造のサブセットを記憶する。更に、メモリ370は、上記で説明されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
ここで、例えばポータブル多機能デバイス100上に任意選択的に実装される、ユーザインタフェースの実施形態に注意を向ける。
図4Aは、一部の実施形態に係る、ポータブル多機能デバイス100上のアプリケーションのメニューに関する例示的なユーザインタフェースを示す。同様のユーザインタフェースは、デバイス300上に任意選択的に実装される。いくつかの実施形態では、ユーザインタフェース400は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
●セルラー信号及びWi−Fi信号などの無線通信(単数又は複数)に関する信号強度インジケータ(単数又は複数)402、
●時刻404、
●Bluetooth(登録商標)インジケータ405、
●バッテリ状態インジケータ406、
●下記などの、頻繁に利用されるアプリケーション用のアイコンを含むトレー408、
○不在着信又はボイスメールメッセージの数のインジケータ414を任意選択的に含む、「電話」とラベル付けされた電話モジュール138用のアイコン416、
○未読電子メールの数のインジケータ410を任意選択的に含む、「メール」とラベル付けされた、電子メールクライアントモジュール140用のアイコン418、
○「ブラウザ」とラベル付けされた、ブラウザモジュール147用のアイコン420、及び
○「iPod」とラベル付けされた、iPod(Apple Inc.の登録商標)モジュール152とも呼ばれるビデオ及び音楽プレーヤモジュール152用のアイコン422、並びに
●下記などの、その他のアプリケーション用のアイコン、
○「メッセージ」とラベル付けされた、IMモジュール141用のアイコン424、
○「カレンダー」とラベル付けされた、カレンダーモジュール148用のアイコン426、
○「写真」とラベル付けされた、画像管理モジュール144用のアイコン428、
○「カメラ」とラベル付けされた、カメラモジュール143用のアイコン430、
○「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール155用のアイコン432、
○「株価」とラベル付けされた、株価ウィジェット149−2用のアイコン434、
○「地図」とラベル付けされた、地図モジュール154用のアイコン436、
○「天気」とラベル付けされた、天気ウィジェット149−1用のアイコン438、
○「時計」とラベル付けされた、アラーム時計ウィジェット149−4用のアイコン440、
○「トレーニングサポート」とラベル付けされた、トレーニングサポートモジュール142用のアイコン442、
○「メモ」とラベル付けされた、メモモジュール153用のアイコン444、及び
○デバイス100及びその様々なアプリケーション136の設定へのアクセスを提供する、「設定」とラベル付けされた、設定アプリケーション又はモジュール用のアイコン446。
図4Aに示すアイコンラベルは、単なる例示であることに留意されたい。例えば、ビデオ及び音楽プレーヤモジュール152のためのアイコン422は、「音楽」又は「音楽プレーヤ」と表示される、他のラベルが、様々なアプリケーションアイコンのために、任意選択的に使用される。一部の実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。一部の実施形態では、特定のアプリケーションアイコンのラベルは、その特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
図4Bは、ディスプレイ450(例えば、タッチスクリーンディスプレイ112)とは別個のタッチ感知面451(例えば、図3のタブレット又はタッチパッド355)を有するデバイス(例えば、図3のデバイス300)上の例示的なユーザインタフェースを示す。デバイス300はまた、任意選択的に、タッチ感知面451上の接触の強度を検出するための1つ以上の接触強度センサ(例えば、センサ359のうちの1つ以上)、及び/又はデバイス300のユーザに対して触知出力を生成するための1つ以上の触知出力生成器357を含む。
以下の実施例のうちのいくつかはタッチスクリーンディスプレイ112上での入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、一部の実施形態では、デバイスは、図4Bに示されるように、ディスプレイとは別個のタッチ感知面上での入力を検出する。いくつかの実施形態では、このタッチ感知面(例えば、図4Bの451)は、ディスプレイ(例えば、450)上の主軸(例えば、図4Bの453)に対応する主軸(例えば、図4Bの452)を有する。これらの実施形態によれば、デバイスは、タッチ感知面451との接触(例えば、図4Bの460及び462)を、ディスプレイ上のそれぞれの位置に対応する位置にて検出する(例えば、図4Bでは、460は468に対応し、462は470に対応する)。このように、タッチ感知面がディスプレイとは別個のものである場合、タッチ感知面(例えば、図4Bの451)上でデバイスによって検出されたユーザ入力(例えば、接触460及び462、並びにそれらの移動)が、多機能デバイスのディスプレイ(例えば、図4Bでの450)上のユーザインタフェースを操作するために、デバイスによって使用される。同様の方法が、本明細書に記載の他のユーザインタフェースに任意選択的に使用されることを理解されたい。
更には、以下の実施例は、主に指入力(例えば、指の接触、指のタップジェスチャ、指のスワイプジェスチャ)を参照して説明されるが、一部の実施形態では、それらの指入力のうちの1つ以上は、別の入力デバイスからの入力(例えば、マウスに基づく入力、又はスタイラス入力)で置き換えられることを理解されたい。例えば、スワイプジェスチャは、(例えば、接触の代わりの)マウスクリックに続けた、(例えば、接触の移動の代わりの)スワイプの経路に沿ったカーソルの移動によって、任意選択的に置き換えられる。別の例として、タップジェスチャは、任意選択的に、カーソルがタップジェスチャの位置の上に位置する間はマウスクリックと置き換えられる(例えば、接触を検出して、それに続いて接触の検出を停止する代わりに)。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスが、任意選択的に、同時に使用され、又はマウス及び指の接触が、任意選択的に、同時に使用されることを理解されたい。
図5Aは、例示的なパーソナル電子デバイス500を示す。デバイス500は、本体502を含む。いくつかの実施形態では、デバイス500は、デバイス100及びデバイス300(例えば、図1A〜図4B)に関して説明された特徴のいくつか又は全てを含むことができる。一部の実施形態では、デバイス500は、以降ではタッチスクリーン504である、タッチ感知ディスプレイスクリーン504を有する。あるいは、又はタッチスクリーン504に加えて、デバイス500は、ディスプレイ及びタッチ感知面を有する。デバイス100及び300と同様に、いくつかの実施形態では、タッチスクリーン504(又はタッチ感知面)は、任意選択的に、加えられている接触(例えば、タッチ)の強度を検出する1つ以上の強度センサを含む。タッチスクリーン504(又は、タッチ感知面)の1つ以上の強度センサは、タッチの強度を表す出力データを提供することができる。デバイス500のユーザインタフェースは、タッチの強度に基づいてタッチに応答することができ、これは、異なる強度のタッチが、デバイス500上で異なるユーザインタフェース動作を呼び出すことができることを意味する。
タッチ強度を検出して処理するための例示的な技術は、例えば、関連出願である、2013年5月8日出願の「Device,Method,and Graphical User Interface for Displaying User Interface Objects Corresponding to an Application」と題された国際特許出願第PCT/US2013/040061号(国際公開第2013/169849号として公開)、及び2013年11月11日出願の「Device,Method,and Graphical User Interface for Transitioning Between Touch Input to Display Output Relationships」と題された同第PCT/US2013/069483号(国際公開第2014/105276号として公開)に見出され、これらの文献のそれぞれは、全体が参照により本明細書に組み込まれる。
一部の実施形態では、デバイス500は、1つ以上の入力機構506及び入力機構508を有する。入力機構506及び入力機構508は、含まれる場合には、物理的なものとすることができる。物理入力機構の例としては、プッシュボタン及び回転可能機構が挙げられる。一部の実施形態では、デバイス500は、1つ以上のアタッチメント機構を有する。そのようなアタッチメント機構は、含まれる場合には、デバイス500を、例えば、帽子、アイウェア、イヤリング、ネックレス、シャツ、ジャケット、ブレスレット、腕時計バンド、チェーン、ズボン、ベルト、靴、財布、バックパックなどに取り付けることを可能にし得る。これらのアタッチメント機構は、ユーザによってデバイス500が着用されることを可能にする。
図5Bは、例示的なパーソナル電子デバイス500を示す。いくつかの実施形態では、デバイス500は、図1A、図1B、及び図3に関して説明した構成要素のうちのいくつか又は全てを含むことができる。デバイス500は、I/Oセクション514を、1つ以上のコンピュータプロセッサ516及びメモリ518と動作可能に結合する、バス512を有する。I/Oセクション514は、ディスプレイ504に接続することができ、ディスプレイ504は、タッチ感知構成要素522と、任意選択的に強度センサ524(例えば、接触強度センサ)とを有することができる。加えて、I/Oセクション514は、Wi−Fi、Bluetooth、近距離通信(NFC)、セルラー、及び/又は他の無線通信技法を使用してアプリケーション及びオペレーティングシステムデータを受信する通信ユニット530に接続することができる。デバイス500は、入力機構506及び/又は508を含むことができる。例えば、入力機構506は、任意選択的に、回転可能入力デバイス、又は押下可能かつ回転可能な入力デバイス、又は押下可能かつ回転可能な入力デバイスである。一部の実施例では、入力機構508は、任意選択的にボタンである。
一部の実施例では、入力機構508は、任意選択的にマイクロフォンである。パーソナル電子デバイス500は、任意選択的に、GPSセンサ532、加速度計534、方向センサ540(例えば、コンパス)、ジャイロスコープ536、動きセンサ538、及び/又はこれらの組合せなどの様々なセンサを含み、これらのセンサは全て、I/Oセクション514に動作可能に接続することができる。
パーソナル電子デバイス500のメモリ518は、コンピュータ実行可能命令を記憶する1つ以上の非一時的コンピュータ可読記憶媒体を含むことができ、コンピュータ実行可能命令は、1つ以上のコンピュータプロセッサ516によって実行されると、例えば、プロセス700、1000、1300、1600、1900、2100、2300、2600、2900、及び3200(図7A〜図7C、図10、図13、図16、図19、図21、図23、図26、図29、及び図32)を含む後述する技術をコンピュータプロセッサに実行させることができる。コンピュータ可読記憶媒体は、命令実行システム、装置、又はデバイスによって使用するための、又は命令実行システム、装置、又はデバイスに接続されているコンピュータ実行可能命令を、有形に含み又は記憶することができる任意の媒体とすることができる。いくつかの例では、記憶媒体は、一時的コンピュータ可読記憶媒体である。一部の実施例では、この記憶媒体は、非一時的コンピュータ可読記憶媒体である。非一時的コンピュータ可読記憶媒体には、磁気的記憶装置、光学的記憶装置及び/又は半導体記憶装置を挙げることができるが、これらに限定されない。そのような記憶装置の例としては、磁気ディスク、CD、DVD、又はBlu−ray技術に基づく光ディスク、並びに、フラッシュ、ソリッドステートドライブなどの永続的ソリッドステートメモリが挙げられる。パーソナル電子デバイス500は、図5Bの構成要素及び構成に限定されるものではなく、他の又は追加の構成要素を複数の構成で含むことができる。
本明細書において使用するとき、用語「アフォーダンス」は、デバイス100、300及び/又は500(図1A、図3及び図5A〜図5B)のディスプレイスクリーン上に任意選択的に表示されるユーザ対話式のグラフィカルユーザインタフェースオブジェクトを指す。例えば、画像(例えば、アイコン)、ボタン、及びテキスト(例えば、ハイパーリンク)はそれぞれ、任意選択的に、アフォーダンスを構成する。
本明細書で使用するとき、用語「フォーカスセレクタ」とは、ユーザが対話しているユーザインタフェースの現在の部分を示す、入力要素を指す。カーソル又は他の場所マーカを含むいくつかの実装形態では、カーソルが「フォーカスセレクタ」として作用し、したがってカーソルが特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の上に位置する間に、タッチ感知面(例えば、図3のタッチパッド355又は図4Bのタッチ感知面451)上で入力(例えば、押下入力)が検出されたとき、特定のユーザインタフェース要素が、検出された入力に従って調整される。タッチスクリーンディスプレイ上のユーザインタフェース要素との直接的な対話を可能にする、タッチスクリーンディスプレイ(例えば、図1Aのタッチ感知ディスプレイシステム112、又は図4Aのタッチスクリーン112)を含むいくつかの実装では、タッチスクリーン上で検出される接触が「フォーカスセレクタ」の役割を果たすため、入力(例えば、接触による押圧入力)が、タッチスクリーンディスプレイ上の特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の場所で検出されると、その特定のユーザインタフェース要素が、検出された入力に従って調節される。一部の実装形態では、フォーカスは、対応するカーソルの移動又はタッチスクリーンディスプレイ上の接触の移動を伴うことなく(例えば、タブキー又は矢印キーを使用して、1つのボタンから別のボタンにフォーカスを移動させることによって)、ユーザインタフェースの1つの領域からユーザインタフェースの別の領域に移動され、これらの実装形態では、フォーカスセレクタは、ユーザインタフェースの種々の領域間でのフォーカスの移動に従って移動する。フォーカスセレクタが呈する具体的な形態とは関わりなく、フォーカスセレクタは、全般的に、ユーザが意図するユーザインタフェースとの対話を(例えば、ユーザが対話することを意図しているユーザインタフェースの要素を、デバイスに示すことによって)伝達するために、ユーザによって制御される、ユーザインタフェース要素(又は、タッチスクリーンディスプレイ上での接触)である。例えば、タッチ感知面(例えば、タッチパッド又はタッチスクリーン)上で押圧入力が検出されている間の、対応のボタンの上のフォーカスセレクタ(例えば、カーソル、接触、又は選択ボックス)の位置は、その対応のボタンを(そのデバイスのディスプレイ上に示される他のユーザインタフェース要素ではなく)アクティブ化することをユーザが意図していることを示すものである。
本明細書及び特許請求の範囲で使用するとき、接触の「特性強度」という用語は、接触の1つ以上の強度に基づく、その接触の特性を指す。一部の実施形態では、特性強度は、複数の強度サンプルに基づく。特性強度は、任意選択的に、既定数の強度サンプル、すなわち、既定のイベントに関連する(例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終了を検出する前、接触の強度の増大を検出する前若しくは後、及び/又は、接触の強度の減少を検出する前若しくは後の)所定の期間(例えば、0.05、0.1、0.2、0.5、1、2、5、10秒)の間に収集された、強度サンプルのセットに基づく。接触の特性強度は、任意選択的に、接触の強度の最大値、接触の強度の平均値(mean value)、接触の強度の代表値(average value)、接触の強度の上位10パーセンタイル値、接触の強度の最大値の半分の値、接触の強度の最大値の90パーセントの値などのうちの、1つ以上に基づく。いくつかの実施形態では、特性強度を決定するために、(例えば、特性強度が経時的な接触の強度の平均であるとき)接触の持続期間が使用される。いくつかの実施形態では、操作がユーザによって実行されたか否かを判定するために、特性強度を1つ以上の強度閾値のセットと比較する。例えば、1つ以上の強度閾値のセットは、任意選択的に、第1の強度閾値及び第2の強度閾値を含む。この実施例では、第1の閾値を超過しない特性強度を有する接触は、結果として第1の動作をもたらし、第1の強度閾値を超過し、かつ第2の強度閾値を超過しない特性強度を有する接触は、結果として第2の動作をもたらし、第2の閾値を超過する特性強度を有する接触は、結果として第3の動作をもたらす。一部の実施形態では、特性強度と1つ以上の閾値との比較は、第1の動作又は第2の動作のいずれを実行するかを決定するために使用されるのではなく、1つ以上の動作を実行するか否か(例えば、それぞれの動作を実行するか、又はそれぞれの動作の実行を取り止めるか)を判定するために使用される。
図5Cは、複数の強度センサ524A〜524Dによってタッチ感知ディスプレイスクリーン504上で複数の接触552A〜552Eを検出することを示す。図5Cは、追加として、強度単位に対する強度センサ524A〜524Dの現在の強度測定値を示す強度ダイアグラムを含む。この例では、強度センサ524A及び524Dの強度測定値はそれぞれ9強度単位であり、強度センサ524B及び524Cの強度測定値はそれぞれ7強度単位である。一部の実装形態では、総計強度は、これら複数の強度センサ524A〜524Dの強度測定値の和であり、この実施例では、32強度単位である。一部の実施形態では、各接触には、この総計強度の一部分である、それぞれの強度が割り当てられる。図5Dは、力の中心554からの接触552A〜552Eの距離に基づく、それら接触552A〜552Eへの総計強度の割り当てを示す。この実施例では、接触552A、接触552B、及び接触552Eのそれぞれには、総計強度のうちの8強度単位の接触の強度が割り当てられており、接触552C及び接触552Dのそれぞれには、総計強度のうちの4強度単位の接触の強度が割り当てられている。より一般的には、一部の実装例では、各接触jは、所定の数学関数Ij=A・(Dj/ΣDi)に従って、合計の強度Aの一部分である、それぞれの強度Ijが割り当てられ、ここで、Djは、力の中心からそれぞれの接触jまでの距離であり、ΣDiは、力の中心から全てのそれぞれ接触(例えば、i=1から最後まで)までの距離の和である。図5C〜図5Dを参照して説明した動作は、デバイス100、300又は500と類似若しくは同一の電子デバイスを使用して行うことができる。一部の実施形態では、接触の特性強度は、その接触の1つ以上の強度に基づく。一部の実施形態では、強度センサを使用して、単一の特性強度(例えば、単一の接触の単一の特性強度)を判定する。強度図は、表示されるユーザインタフェースの一部分ではないが、読み手のために、図5C〜図5Dに含まれていることに留意されたい。
一部の実施形態では、特性強度を判定する目的のために、ジェスチャの一部分が特定される。例えば、タッチ感知面は、任意選択的に、開始位置から移行して終了位置に到達し、その時点で接触の強度が増大する、連続的なスワイプ接触を受信する。この実施例では、終了位置での接触の特性強度は、任意選択的に、スワイプ接触の全体ではなく、その連続的なスワイプ接触の一部分のみ(例えば、終了位置におけるスワイプ接触の部分のみ)に基づくものである。一部の実施形態では、接触の特性強度を判定する前に、平滑化アルゴリズムが、任意選択的に、そのスワイプ接触の強度に適用される。例えば、この平滑化アルゴリズムは、任意選択的に、非加重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び/又は指数平滑化アルゴリズムのうちの1つ以上を含む。一部の状況では、これらの平滑化アルゴリズムは、特性強度を判定する目的のために、スワイプ接触の強度の小幅な上昇又は低下を排除する。
タッチ感知面上の接触の強度は、任意選択的に、接触検出強度閾値、軽い押圧強度閾値、深い押圧強度閾値、及び/又は1つ以上の他の強度閾値などの、1つ以上の強度閾値に関連して特徴付けされる。一部の実施形態では、軽い押圧強度閾値は、物理マウスのボタン又はトラックパッドをクリックすることに典型的に関連付けられた動作を、デバイスが実行することになる強度に相当する。一部の実施形態では、深い押圧強度閾値は、物理マウスのボタン又はトラックパッドをクリックすることに典型的に関連付けられた動作とは異なる動作を、デバイスが実行することになる強度に相当する。一部の実施形態では、軽い押圧強度閾値を下回る(例えば、かつ、それを下回ると接触がもはや検出されない微弱な接触検出強度閾値を上回る)特性強度で接触が検出される場合、デバイスは、軽い押圧強度閾値又は深い押圧強度閾値に関連付けられた動作を実行することなく、そのタッチ感知面上の接触の移動に従って、フォーカスセレクタを移動させることになる。全般的には、別途記載のない限り、これらの強度閾値は、異なるユーザインタフェース図のセット間でも一貫している。
軽い押圧強度閾値を下回る強度から、軽い押圧強度閾値と深い押圧強度閾値との間の強度への、接触の特性強度の増大は、「軽い押圧」入力と称される場合がある。深い押圧強度閾値を下回る強度から、深い押圧強度閾値を上回る強度への、接触の特性強度の増大は、「深い押圧」入力と称される場合がある。接触検出強度閾値を下回る強度から、接触検出強度閾値と軽い押圧強度閾値との間の強度への、接触の特性強度の増大は、タッチ面上の接触の検出と称される場合がある。接触検出強度閾値を上回る強度から、接触検出強度閾値を下回る強度への、接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と称される場合がある。一部の実施形態では、接触検出強度閾値はゼロである。一部の実施形態では、接触検出強度閾値はゼロよりも大きい。
本明細書で説明される一部の実施形態では、1つ以上の動作は、対応の押圧入力を含むジェスチャの検出に応答して、又は、対応の接触(又は、複数の接触)で実行される対応の押圧入力の検出に応答して実行され、それらの対応の押圧入力は、少なくとも部分的に、押圧入力強度閾値を上回る接触(又は、複数の接触)の強度の増大の検出に基づいて検出される。一部の実施形態では、対応の動作は、押圧入力強度閾値を上回る、対応の接触の強度の増大(例えば、対応の押圧入力の「ダウンストローク」)の検出に応答して、実行される。一部の実施形態では、押圧入力は、押圧入力強度閾値を上回る、対応の接触の強度の増大、及び、後続の押圧入力強度閾値を下回る接触の強度の減少を含み、対応の動作は、その後続の押圧入力閾値を下回る、対応の接触の強度の減少(例えば、対応の押圧入力の「アップストローク」)の検出に応答して、実行される。
図5E〜図5Hは、図5Eの軽い押圧強度閾値(例えば、「IT」)未満の強度から図5Hの深い押圧強度閾値(例えば、「IT」)を上回る強度に至る、接触562の強度の増加に対応する押圧入力を含む、ジェスチャの検出を示す。既定領域574内に表示されているアプリケーションアイコン572A〜572Dを含む、表示されているユーザインタフェース570上で、カーソル576が、アプリ2に対応するアプリケーションアイコン572B上に表示されている間に、接触562で実行されたジェスチャが、タッチ感知面560上で検出される。一部の実施形態では、このジェスチャは、タッチ感知ディスプレイ504上で検出される。強度センサが、タッチ感知面560上の接触の強度を検出する。このデバイスは、接触562の強度が、深い押圧強度閾値(例えば、「IT」)を上回るピークに達したことを判定する。接触562は、タッチ感知面560上で維持される。ジェスチャの検出に応じて、ジェスチャ中に深い押下の強度閾値(例えば、「IT」)を上回る強度を有する接触562に従って、図5F〜5Hに示すように、アプリ2に対して最近開いた文書の縮小表現578A〜578C(例えば、サムネイル)が表示される。一部の実施形態では、1つ以上の強度閾値と比較される強度は、接触の特性強度である。接触562の強度図は、表示されるユーザインタフェースの一部分ではないが、読み手のために、図5E〜図5Hに含まれていることに留意されたい。
一部の実施形態では、表現578A〜578Cの表示には、アニメーションを含む。例えば、表現578Aは、最初、図5Fに示すように、アプリケーションアイコン572Bの近くに表示されている。アニメーションが進行するにつれて、図5Gに示すように、表現578Aは上方へ移動し、アプリケーションアイコン572Bの近くに表現578Bが表示される。次いで、図5Hに示すように、表現578Aが上方へ移動し、表現578Aに向けて578Bが上方へ移動し、アプリケーションアイコン572Bの近くに表現578Cが表示される。表現578A〜578Cは、アイコン572Bの上方にアレイを形成する。一部の実施形態では、アニメーションは、図5F〜図5Gに示すように、接触562の強度に応じて進行し、ここで、接触562の強度が深い押圧強度閾値(例えば、「IT」)に向けて増加するにつれて、表現578A〜578Cが現れ、そして上方へ移動する。一部の実施形態では、このアニメーションの進行が基づく強度は、接触の特性強度である。図5E〜5Hを参照して説明する動作は、デバイス100、300、又は500と類似又は同一の電子デバイスを使用して実行することができる。
いくつかの実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある偶発的な入力を回避するために強度ヒステリシスを採用し、デバイスは、押圧入力強度閾値との所定の関係を有するヒステリシス強度閾値を定義又は選択する(例えば、ヒステリシス強度閾値は、押圧入力強度閾値よりも低いX強度単位であり、又はヒステリシス強度閾値は、押圧入力強度閾値の75%、90%、若しくは何らかの妥当な比率である)。それゆえ、一部の実施形態では、押圧入力は、押圧入力強度閾値を上回る、対応の接触の強度の増大、及び後続の、押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、対応の動作は、そのヒステリシス強度閾値を下回る、後続の対応の接触の強度の減少(例えば、対応の押圧入力の「アップストローク」)の検出に応答して、実行される。同様に、一部の実施形態では、押圧入力は、デバイスが、ヒステリシス強度閾値以下の強度から、押圧入力強度閾値以上の強度への、接触の強度の増大、及び任意選択的に、ヒステリシス強度以下の強度への、後続の接触の強度の減少を検出する場合にのみ、検出され、対応の動作は、その押圧入力(例えば、状況に応じて、接触の強度の増大、又は接触の強度の減少)の検出に応答して、実行される。
説明を容易にするために、押圧入力強度閾値に関連付けられた押圧入力に応答して、又はその押圧入力を含むジェスチャに応答して実行される動作の説明は、押圧入力強度閾値を上回る接触の強度の増大、ヒステリシス強度閾値を下回る強度から押圧入力強度閾値を上回る強度への接触の強度の増大、押圧入力強度閾値を下回る接触の強度の減少、及び/又は押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少のいずれかの検出に応答して、任意選択的にトリガされる。更には、押圧入力強度閾値を下回る、接触の強度の減少の検出に応答して、動作が実行されるとして説明される実施例では、その動作は、押圧入力強度閾値に対応し、かつ押圧入力強度閾値よりも低い、ヒステリシス強度閾値を下回る、接触の強度の減少の検出に応答して、任意選択的に実行される。
次に、ポータブル多機能デバイス100、デバイス300、又はデバイス500などの電子デバイス上で実施されるユーザインタフェース(「UI」)及び関連プロセスの実施形態に注意を向ける。
図6A〜図6Sは、いくつかの実施形態による、制御可能な外部デバイスを管理するための例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図7A〜図7C、及び図23におけるプロセスを含む、以下で説明するプロセスを例示するために使用される。
図6Aは、タッチ感知ディスプレイ602を備える電子デバイス600を示す。いくつかの実施形態では、デバイス600は、上述したデバイス100、300、及び500の特徴の一部又は全てを含む。デバイス600は、制御可能な外部デバイスに関連付けられたデータを受信するように構成されている。デバイス600はまた、制御可能な外部デバイスに命令を送信するように構成されている。
図6Aでは、デバイス600は、特定のロケーションに関連付けられた制御可能な外部デバイスを管理するためのユーザインタフェース画面610−1を表示する。いくつかの実施形態では、ユーザインタフェース画面610は、1つ以上のロケーションに関連付けられた制御可能な外部デバイスを管理するためのアプリケーションに含まれる。ロケーションの例としては、住所、場所、建築物、会社、環境(例えば、裏庭、自動車、ポーチ)などが挙げられるが、これらに限定されない。いくつかの実施形態では、ロケーションは、ロケーション内の部屋などの、ロケーション内の、又はロケーションに関連付けられた複数の指定されたエリアを含む。いくつかの実施形態では、ロケーションは、上記の参照により組み込まれた2015年5月29日出願の「Accessory management Systems Using Environment Model」と題された出願された米国特許出願第14/725,912号の段落[0017]に記載されているような、対象物の最下位レベル(例えば、部屋)を含むことができる物理的環境(例えば、家)の階層表現を有する環境モデルを含む。
デバイス600は、ユーザインタフェース画面610−1上に示されたロケーションに対するロケーションプロファイルにアクセスするように構成されている。いくつかの実施形態では、ロケーションプロファイルは、デバイス600上のローカルメモリから、又はリモートサーバからアクセスされる。ロケーションプロファイルは、ロケーションに関連付けられた情報を含み、情報は、例えば、名前、住所、ロケーションに関連付けられた人々、ロケーションに関連付けられた画像(例えば、壁紙画像)、年(例えば、ロケーションが建築されたとき)、メモ、ロケーションに関連付けられたアクセサリ、ロケーションのアクセサリの現在の状態、ロケーションに関連付けられた自動化プロファイル、及びロケーションに関連付けられたシーンプロファイルを含むことができる。アクセサリ、自動化プロファイル、及びシーンプロファイルという用語は、以下により詳細に説明する。
いくつかの実施形態では、ユーザは、ユーザ入力によりロケーションプロファイルを選択する(例えば、ロケーションのリストからロケーションを選択することにより)。いくつかの実施形態では、デバイス600は、その位置を判定し、デバイス600の位置に基づいてロケーションプロファイルを判定する。このように、デバイス600は、ユーザに情報を自動的に提示し、ユーザの現在の位置に対応するロケーションに対して制御する。
ユーザインタフェース画面610−1は、タブ604−1に対応するホーム画面であり、「ホーム画面610−1」と呼ぶことができる。ホーム画面610−1は、ロケーションのインジケーション606(「Ellsworth St.」)を含む。図示した実施形態では、インジケーション606は、テキストを含む。いくつかの実施形態では、ロケーションのインジケーションは、画像又は他の識別情報を含む。
ホーム画面610−1はまた、ロケーションの、又はロケーションに関連付けられた制御可能な外部デバイスの表現620−1を含む。制御可能な外部デバイスはまた、本開示の目的のために「アクセサリ」と呼ばれ、別のデバイスによって監視される及び/又は制御されるように構成された任意の品物又はデバイスを指す。いくつかの実施形態では、アクセサリは、2つ以上の状態で動作するように構成されており、2つ以上の状態の間でリモートで制御可能である。アクセサリの非限定的な実施例としては、照明器具、サーモスタット、アウトレット、換気扇、器具(例えば、テレビ、洗濯機、乾燥機、食器洗い機、コーヒーマシン)、ドア(例えば、ドアロック)、自動ドア開閉装置(例えば、ガレージドア開閉装置)、エアコン、炉、静止画カメラ又はビデオカメラ、煙警報器、一酸化炭素警報器、セキュリティシステム及び警報器などが挙げられる。アクセサリは、専用コンピューティングデバイスで、又は、デスクトップコンピュータ、ラップトップコンピュータ、スマートフォン、他の携帯電話、他のハンドヘルド型若しくは着用可能なコンピューティングデバイスなどの汎用コンピューティングデバイスで、汎用コンピューティングデバイスに、上記の参照により組み込まれた2015年5月29日出願の「Accessory management Systems Using Environment Model」と題された出願された米国特許出願第14/725,912号の段落[0008]に記載されているような適切な実行可能プログラムコード若しくは命令を備えることにより、制御することができる電子デバイスを含むことができる。
表現620−1は、サーモスタットアクセサリに対応し、サーモスタットの現在の状態のインジケーションを含む。具体的には、表現620−1は、現在の温度が70度であること、及びサーモスタットが72度の設定温度に暖房していることを示す。いくつかの実施形態では、アクセサリの表現は、表現の選択が引き起こすことになるアクションのインジケーションを含む。例えば、換気扇アクセサリに対応する表現620−2は、テキスト「オンにする」を含む。これは、表現を選択することが換気扇をオンにすることになることを示し、また、換気扇が現在オフであることを意味する。
表現620−1は、表題「お気に入りのアクセサリ」の下のホーム画面610−1上に配置されている。いくつかの実施形態では、ユーザは、アクセサリをお気に入りのアクセサリとして手動で指定することができる。いくつかの実施形態では、アクセサリは、それがどれほど頻繁に制御される又はトリガされるかなど、その動作に基づいて、お気に入りのアクセサリとして表される。いくつかの実施形態では、アクセサリは、それが特定のデバイス又は特定のデバイスに関連付けられたユーザによってどれほど頻繁に制御されるかなど、特定のデバイス又はユーザプロファイルに関するその動作に基づいて、お気に入りのアクセサリとして表される。
図示した実施形態では、表現620−1は、アフォーダンスを含む。図6Aでは、デバイス600は、サーモスタットアクセサリの選択に対応する表現920−1上のユーザ入力630−1(例えば、指のタップ)を検出する。ユーザ入力630−1の時点で、サーモスタットアクセサリは、72度に向かう第1の状態にある。いくつかの実施形態では、デバイス600は、ユーザ入力630−1に応じて、サーモスタットアクセサリを第2の状態に設定する命令を送信する。
いくつかの実施形態では、デバイス600は、ユーザ入力630−1の持続時間(例えば、タッチ感知ディスプレイ602上の接触の持続時間)を判定する。いくつかの実施形態では、デバイス600は、ユーザ入力の特性強度(例えば、タッチ感知ディスプレイ602上の接触の特性強度)を判定する。デバイス600は、ユーザ入力630−1が入力基準を満たすか否かを判定する。いくつかの実施形態では、入力基準は、ユーザ入力の持続時間が所定の時間を上回るか否か、及び/又はユーザ入力の特性強度が所定の強度を上回るか否かを含む。
ユーザ入力630−1が入力基準を満たさないという判定に従って、デバイス600は、サーモスタットアクセサリの状態を第2の状態に設定する命令を送信する。いくつかの実施形態では、アクセサリの表現は、入力基準を満たさないユーザ入力に応じてアクセサリが設定されることになる状態のインジケーションを含む。例えば、図6Aの表現620−2は、表現620−2を選択することにより、換気扇アクセサリをオンにすることができることを示す。
図6Cは、ユーザ入力630−1が入力基準を満たさないときの例示的な応答を示す。図6Cに示すように、デバイス600は、サーモスタットをオフにする命令を送信し、表現620−1を更新して、オフ状態を示す。いくつかの実施形態では、デバイス600は、触覚を出力して、状態が変更されたことを示す。
任意選択的に、ユーザ入力630−1が入力基準を満たさないという判定に従って、デバイス600は、アクセサリの状態を2つの所定の状態の第1から2つの所定の状態の第2に(例えば、オン/オフ、開/閉、ロック状態/ロック解除状態)切り替える命令を送信する。この技術の一実施例では、ユーザ入力630−1と同一の別のユーザ入力に応じて、デバイス600は、サーモスタットをその前の状態に戻してオンに設定する(例えば、暖房すること、72度に設定する)命令を送信する。このように、ユーザは、相対的に短い又は軽いタップを提供して、2つの所定の状態の間でアクセサリの状態を素早くトグルすることができる。いくつかの実施形態では、ユーザ入力が入力基準を満たさないという判定に従って、デバイス600は、状態を状態の所定の順序(例えば、オフ−>低−>高−>オフ)内の隣接する状態に切り替える命令を送信する。このように、ユーザは、一連の状態を通して容易に循環させることができる。
あるいは、ユーザ入力630−1が入力基準を満たすという判定に従って、デバイス600は、アクセサリの使用可能な状態を示す制御アフォーダンスを表示する。図6Dは、アクセサリの現在の状態(72度に設定)及びアクセサリの使用可能な状態を示す制御アフォーダンス608を有する例示的なユーザインタフェース画面610−2を示す。ユーザインタフェース画面610−2はまた、選択されると、対応するアクセサリに関する情報を表示し、任意選択的に、アクセサリに関連付けられた情報を変更するためのアフォーダンスを表示する、アフォーダンス622を含む。アクセサリに関連付けられた情報は、任意選択的に、名前、部屋、種類、製造業者、及び代表アイコンを含む。任意選択的に、ユーザインタフェース画面610−2は、ホーム画面610−1が部分的に見えるように、部分的に半透明である。
制御アフォーダンス698に関して、制御アフォーダンス608上の水平バーは、例えば、1度の増分でサーモスタットを設定することができる温度を表す。特定の状態の選択に対応する制御アフォーダンス608上のユーザ入力を検出したことに応じて、デバイス600は、アクセサリの状態を選択された状態に設定する命令を送信する。このように、ユーザは、制御アフォーダンス608と対話して、入力基準を満たさないユーザ入力に応じて使用可能でない状態を選択する、又は現在の状態に隣接していない状態に直接行くことができる。図6Dでは、デバイス600は、ユーザ入力630−2(例えば、タップ)を検出し、これに応じて、サーモスタットを75度に設定する。任意選択的に、サーモスタットを、制御アフォーダンス608上のバー614からバー616への垂直スワイプによって75度に変更することができる。
任意選択的に、特定の状態の選択に対応する制御アフォーダンス608上のユーザ入力631−2を検出したことに応じて、デバイスは、制御アフォーダンス608の視覚的見掛けを更新して、例えば、図6Eに示すように、アクセサリが選択された状態に設定されることを示す。任意選択的に、デバイス600は、状態の選択に応じて、制御アフォーダンス608を表示することを停止する(例えば、デバイス600は、ユーザインタフェース画面610−1に戻る)。いくつかの実施形態では、デバイス600は、制御アフォーダンス608に対応しないタッチ感知ディスプレイ602上の位置(例えば、エリア612)の選択に対応するユーザ入力を検出したことに応じて、制御アフォーダンス608を表示することを停止する。
いくつかの実施形態では、デバイス600は、制御アフォーダンス608の外観を更新して、選択された状態を示すが、更なるユーザ入力が検出されるまで、アクセサリの状態を設定する命令を送信しない。いくつかの実施形態では、デバイス600は、別のアフォーダンス(例えば、「設定」又は「完了」アフォーダンス)の選択、又は制御アフォーダンス608の応答エリア(例えば、エリア612)の外側に配置されたタッチ感知ディスプレイ602上の入力に応じて、アクセサリを選択された状態に設定する命令を送信する。
制御アフォーダンス608は、別個の状態で動作するアクセサリ(例えば、1度の増分で調節可能なデジタルサーモスタット)に対する制御アフォーダンスの例である。図6F〜図6Iは、別個の状態で動作するアクセサリに対する制御アフォーダンスの他の実施例を示す。より具体的には、図6Fは、4つの別個の状態で動作することができる換気扇アクセサリに対する例示的な制御アフォーダンスを示す。図6Gは、様々な別個の警報モードで動作することができるホームセキュリティシステムに対する例示的な制御アフォーダンスを示し、図6H〜図6Iは、2つの別個の状態を有するドア又は他のロック可能なアクセサリに対する例示的な制御アフォーダンスを示す。いくつかの実施形態では、デバイス600は、図6Hの実施例に示すように(例えば、午後5時00分にロック解除された)、アクセサリの現在の状態が設定された時刻を表示する。
いくつかの実施形態では、アクセサリの使用可能な状態は、連続的である。図6Jは、輝度の連続範囲にわたって動作することができる暗くすることができる照明スイッチに対する例示的な制御アフォーダンス621を示す。いくつかの実施形態では、例えば、アフォーダンス621上の対応する位置をタップする(要素630−3によって示すように)こと、又は所望の状態が得られるまでバー623の上部を垂直にドラッグする(矢印630−4によって示すように)ことのいずれかにより、特定の状態が選択される。
いくつかの実施形態では、アクセサリは、異なる色状態で動作するように構成された、色が調節可能な電球である。図6Kの左側は、図6Jの制御アフォーダンス621と同様の、色が調節可能な電球に対する制御アフォーダンス625を示す。しかし、アフォーダンス627もまた表示されている。アフォーダンス627の選択により、図6Kの右側に示すように、色が調節可能な電球の動作する色を選択するための制御アフォーダンス629を提供する。マーカ618は、電球の現在の色を示す。いくつかの実施形態では、制御アフォーダンス629上の位置にタッチすることにより、異なる色を選択する。
いくつかの実施形態では、1つのアクセサリが制御される又は操作されるとき、別の関連したアクセサリが制御されるように、2つ以上のアクセサリの間に関係が存在する。いくつかの実施形態では、デバイス600が第1のアクセサリの状態を変更する命令を送信したことに応じて、第1のアクセサリに加えて、関連する第2のアクセサリが自動的に制御される。例えば、ロケーションの正面ポーチ上のカメラを動作させる命令は、ポーチ上のマイクロフォン及び/又はスピーカを自動的にオンにする。いくつかの実施形態では、第1のアクセサリがアクティブ化されたことに応じて、関連する第2のアクセサリが自動的に制御される。例えば、訪問者が正面ドアのドアベルを鳴らすと、正面ドアロック、ポーチカメラ、及び正面ポーチに関連付けられたインターコムシステムが、自動的に動作する(例えば、指定された状態に設定される)。
いくつかの実施形態では、アクセサリがアクティブ化されると、デバイス600は、アクセサリがアクティブ化されたことを示す通知を表示する。いくつかの実施形態では、通知は、アクティブ化されたアクセサリに関連するアクセサリに関する情報、及び/又はアクティブ化されたアクセサリに関連するアクセサリを制御するためのアフォーダンスを含む。一実施例では、ドアベルが鳴らされると、デバイス600は、正面ポーチ上のカメラによってキャプチャされた画像、並びに、正面ドアのインターコムシステムをアクティブにする、正面ドアをロック解除する、及びポーチの照明をオンにするアフォーダンスを含む通知を表示する。この実施例に対応する通知の例示的な実施形態は、図34I〜図34Kを参照して以下により詳細に説明する。
いくつかの実施形態では、アクセサリ間の関係は、2つ以上のデバイスの機能を明示的に結び付けて、1つが手動で又は自動トリガ(例えば、時間帯、センサなど)によりのいずれかでトリガされると共に機能するようにそれぞれをトリガするように、ユーザによって(例えば、ユーザ入力によって)指定される。いくつかの実施形態では、関係は、ロケーション内のアクセサリの位置に基づいて自動的に確立される(例えば、特定のアクセサリの間では、それらがロケーションの共通のエリア又は部屋に関連付けられているため、関係は自動的に確立される)。同様に、位置に基づいて関連付けられたデバイスは、1つが手動で又は自動トリガ(例えば、時間帯、センサなど)によりトリガされると、共に機能する。
いくつかの実施形態では、アクセサリ間の関係は、アクセサリの種類に基づいて確立される。一実施例では、テレビ、サウンドバー、AppleTV、及びホームシアタ増幅器は、それらが娯楽システムに関連付けられるため、自動的に関連する。この実施例では、テレビをオフにするアフォーダンスの選択は、任意選択的に、他のアクセサリ(サウンドバー、AppleTV、及びホームシアタ増幅器)を電源をオフにさせる。いくつかの実施形態では、デバイス600は、システムによって自動的に生成することができる、同じタイプを有するアクセサリのグループを表すアフォーダンスを表示する。娯楽システムの実施例を再度参照して、デバイス600は、任意選択的に、上記に列挙されたシステムのアクセサリの全てを制御する「娯楽システム」とラベル付けされたアフォーダンスを表示する。
図6Aに戻って参照して、ホーム画面610−1はまた、ロケーションに関連付けられた個人(例えば、個人連絡先、友人、家族の一員)の表現624を含む。いくつかの実施形態では、デバイス600は、個人に関連付けられたリモート電子デバイス(例えば、スマートフォン、タブレット)がロケーションに存在することを示すデータを受信する。いくつかの実施形態では、表現624は、リモート電子デバイスがロケーションに存在することを示すデータを受信したことに応じて、ホーム画面610−1上に表示される。図示した実施形態では、表現624は、個人の画像を含む。いくつかの実施形態では、表現は、個人の名前、イニシャル、個人に関連付けられた指定された画像、又は、個人に関連付けられた他のテキスト、画像、ビデオなどを含む。いくつかの実施形態では、ロケーションに存在しない、又は未知の位置(例えば、離れた、又は非アクティブな)を有するデバイスに関連付けられた個人は、ホーム画面610−1上に表されない。いくつかの実施形態では、ホーム画面610−1は、ロケーションに存在しないと判定される個人の1つ以上の表現を含む。
いくつかの実施形態では、ホーム画面610−1は、個人の状態又は位置のインジケーションを含む。いくつかの実施形態では、状態又は位置は、ロケーションに対するものである。例えば、いくつかの実施形態では、ホーム画面610−1は、個人がロケーションに存在する若しくはロケーションから離れていると判定されるか、又は個人の状態が未知若しくは非アクティブであると判定されるかのインジケーションを含む。いくつかの実施形態では、離れている又は未知の状態は、個人の表現に陰影を付ける又はグレイアウトすることにより示される。いくつかの実施形態では、個人の状態は、個人に関連付けられたデバイスの位置に基づいて判定される。状態は、任意選択的に、ロケーションに関する情報にアクセスする目的のために個人がロケーションに関連付けられるように招待されたか否かも示す。
ホーム画面610−1は、ロケーションの状態のインジケーション626も含む。いくつかの実施形態では、状態は、ロケーションの全体評価(例えば、「全て安全かつ健全」)を含む。図6Aに示す実施形態では、インジケーション626は、ロケーションに関連付けられたアクセサリの状態を含む(例えば、ガレージドアが開いている、70度のサーモスタットは、現在72度に暖房している、キッチンの換気扇がオンである)。いくつかの実施形態では、アクセサリの状態は、分類され(例えば、緊急、注意、又は重要でない)、危険状態に基づいて、より危険な状態をより危険でない状態の上に表示して、表示される。緊急状態の例としては、セキュリティ警報器、煙検出器、一酸化炭素検出器、又はアクセサリの状態を提供するハブが作動していないというインジケーションのアクティブ化を挙げることができる。注意状態の例としては、開いた若しくはロック解除されたドア若しくはウィンドウ、又はアクセサリが接続されていない若しくは使用可能でないことを挙げることができる。重要でない状態の例としては、照明がオンであること、及びサーモスタットの状態を挙げることができる。
ホーム画面610−1は、シーンプロファイルの表現640−1も含む。シーンプロファイルは、ロケーションの1つ以上のアクセサリの指定された状態に関するデータを含む。シーンプロファイルはまた、単に「シーン」と呼ばれることもある。図6Aでは、表現640−1に対応するシーンプロファイルは、「お気に入りのシーン」として指定されている。いくつかの実施形態では、シーンプロファイルは、以下のうちの1つ以上に基づいて指定される:(1)シーンプロファイルを明示的に指定するユーザ入力、(2)シーンプロファイルが適用される頻度、(3)どれくらい最近シーンプロファイルが適用されたか、及び(4)どれくらい頻繁に又は最近シーンプロファイルに関連付けられたアクセサリが選択された、制御された、又はトリガされたか。上述した指定されたアクセサリと同様に、いくつかの実施形態では、シーンプロファイルは、特定のデバイス又はデバイスに関連付けられたユーザによって取られたアクションに基づいて指定される(例えば、どのシーンプロファイルがユーザによって頻繁に選択されるか)。
図6Aの実施形態では、表現640−1は、アフォーダンスを含む。いくつかの実施形態では、表現640−1の選択に対応するユーザ入力を検出したことに応じて、デバイス600は、対応するシーンプロファイルに含まれたアクセサリの指定された状態を適用する命令を送信する。いくつかの実施形態では、シーンプロファイルの表現640−1の選択に対応するユーザ入力を検出したことに応じて、デバイス600は、シーンプロファイルに関連付けられたアクセサリの表現を含む、図6Lに示すユーザインタフェース画面610−3を表示する。ユーザインタフェース画面610−3内の複数のアクセサリの表現は、それぞれのアクセサリの指定された状態(例えば、シーンプロファイルが実施されるとアクセサリが設定される状態)のインジケーションを含む。いくつかの実施形態では、指定された状態のインジケーションは、シーンプロファイルが実施されると取られることになるアクション(例えば、オフにする)を含む。
ホーム画面610−1は、アフォーダンス628も含む。アフォーダンス628上のユーザ入力を検出したことに応じて、デバイス600は、例えば、図6Mに示すように、追加のシーンプロファイルを作成するオプション630を表示する。いくつかの実施形態では、デバイス600は、他の種類のユーザ入力に応じて、追加のシーンプロファイルを作成するオプションを表示する。
いくつかの実施形態では、ホーム画面610−1は、ロケーションの制御可能な外部カメラによってキャプチャされた画像を含む。図6Nに示す実施形態では、ホーム画面610−1は、スクロール可能であり、既知の技術によってスクロールされて、ロケーションのキッチン内の制御可能な外部カメラからのライブビデオフィードに含まれた画像の表示用のエリア632を見せる。いくつかの実施形態では、画像は、単一の時点からのものである。いくつかの実施形態では、画像は、ライブビデオフィードである。いくつかの実施形態では、画像は、選択(例えば、タップ)して、制御可能な外部カメラからのライブビデオフィードを表示することができる単一の画像である。いくつかの実施形態では、1つ以上のアフォーダンス又はカメラ画像は、スクリーン外とすることができ、ボタン又はスワイプなどのスクロールするジェスチャなどの入力により表示することができる。いくつかの実施形態では、最初にスクリーン外であった1つ以上のアフォーダンス又はカメラ画像を表示することにより、1つ以上のアフォーダンスを、それらがもはや表示されないように変位させる。
デバイス600は、部屋タブ604−2も表示している。部屋タブ604−2上のユーザ入力(例えば、タップ)を検出したことに応じて、デバイス600は、例えば、図6Oのユーザインタフェース画面610−4上に示すように、ロケーションに関連付けられた少なくとも1つの部屋の表現を表示する。図6Oの実施形態では、部屋の表現は、対応する部屋に関連付けられた画像を含む。ユーザインタフェース610−4上の部屋を選択するユーザ入力を検出したことに応じて、デバイス600は、選択された部屋に関連付けられたアクセサリの表現、及び任意選択的に、選択された部屋に関連付けられたアクセサリを含むシーンプロファイルの表現を表示する。図6Pは、寝室に関連付けられたアクセサリ及びシーンプロファイルの表現を有する寝室に対応する例示的なユーザインタフェース画面610−5を示す。いくつかの実施形態では、アクセサリの表現は、アクセサリの現在の状態を示す。いくつかの実施形態では、部屋に関連付けられた画像は、アクセサリの表現の背後のユーザインタフェース画面610−5上の壁紙として表示される。いくつかの実施形態では、選択された部屋に関連付けられたアクセサリの表現は、表現620−1及び図6B〜図6Kを参照して上述したように、アクセサリを制御する、又は対応するアクセサリを制御するためのユーザインタフェース画面にアクセスするためのアフォーダンスである。
ユーザインタフェース画面610−1はまた、自動化タブ604−3を含む。自動化タブ604−3上のユーザ入力を検出したことに応じて、デバイス600は、自動化プロファイル及び/又は自動化プロファイルを作成するオプションの表現を表示する。自動化プロファイルは、ロケーションの少なくとも1つのアクセサリの状態を制御するための基準、及び少なくとも1つのアクセサリに対する指定された状態を表すデータを含む。換言すれば、自動化プロファイルは、自動化プロファイルの基準が満たされると選択されたアクセサリが設定される状態を含む。「自動化プロファイル」は、単に「自動化」と呼ばれることもある。自動化プロファイルの基準が満たされることを判定したことに応じて、自動化プロファイルに関連付けられたアクセサリを指定された状態に設定することは、自動化プロファイルを実施することと呼ばれることがある。自動化プロファイルは、アクセサリの状態に関するデータも含む、シーンプロファイルに関するデータを含むことができる。
図6Qは、自動化タブ604−3上のユーザ入力を検出したことに応じて表示される例示的なユーザインタフェース画面610−6を示す。ユーザインタフェース画面610−6は、ロケーションに関連付けられた「私が家を出るとき」と名付けられた自動化プロファイルの表現634を含む。表現634はまた、自動化プロファイルに関連付けられたシーン及び/又はアクセサリのインジケーション、「シーン1を実行する」及び「3つのアクセサリを制御する」を含む。いくつかの実施形態では、自動化プロファイルの名前は、自動化プロファイルの基準を示す。いくつかの実施形態では、自動化プロファイルの表現は、選択されると、自動化プロファイルに関連付けられたアクセサリ及び/又はシーンプロファイルの表現を表示するアフォーダンスを含む。いくつかの実施形態では、自動化プロファイルに関連付けられたアクセサリの表現は、選択されると、自動化プロファイルに対するアクセサリの指定された状態を変更する、又は自動化プロファイルに対するアクセサリの指定された状態を選択するためのユーザインタフェースを提供するアフォーダンスを含む。いくつかの実施形態では、自動化プロファイルに関連付けられたアクセサリの指定された状態は、図6B〜図6Kに関して説明した技術を適用することにより選択される。
デバイス600はまた、異なるロケーションに関連付けられた情報を見る、及び/又は追加のロケーションに対するロケーションプロファイルを作成する機能を提供する。図6Rに示す実施形態では、デバイス600は、ホーム画面610−1上に含まれたアフォーダンス636上のユーザ入力を検出する。アフォーダンス636の選択を検出したことに応じて、デバイス600は、異なるロケーション(例えば、Lisaの家又はビーチハウス)に関連付けられた情報を見て、追加のロケーションを追加する(例えば、ロケーションを追加する)オプションを提供するメニュー638を表示する。デバイス600はまた、上述したロケーションプロファイル情報などのロケーションに関連付けられたプロファイル情報を見る及び/又は変更するオプション(例えば、ロケーション詳細...)を提供する。
デバイス600はまた、ロケーションに関連付けられたアクセサリを追加する機能を提供する。図6Mを再度参照して、デバイス600は、ホーム画面610−1上に含まれたアフォーダンス628上のユーザ入力を検出し、これに応じて、アクセサリをロケーションに関連付けるオプション642を表示する。
いくつかの実施形態では、デバイス600は、図6Sに示すように、人々タブ604−4を表示する。人々タブ604−4上のユーザ入力を検出したことに応じて、デバイス600は、ロケーションに関連付けられた人々の表現を表示する。図示した実施形態では、人々の表現644−1、644−2、及び644−3が、ユーザインタフェース画面610−7上に表示される。図示した実施形態では、人々の表現は、人々の画像を含む。いくつかの実施形態では、表現は、個人の名前、イニシャル、個人に関連付けられた指定された画像、又は、個人に関連付けられた他のテキスト、画像、ビデオなどを含む。いくつかの実施形態では、ユーザインタフェース画面610−7は、ロケーションに関連付けられた全ての人々の表現を含む。いくつかの実施形態では、人々がロケーションに存在しないこと、又は人々の位置が未知(例えば、離れている、非アクティブなど)であることを示す状態を有する人々は、表示されない(例えば、ロケーションに存在すると判定された人々の表現のみが表示される)。いくつかの実施形態では、ロケーションに存在しないと判定される個人の1つ以上の表現が表示される。
図6Sでは、ユーザインタフェース画面610−7は、人々の状態又は位置のインジケーションを含む。いくつかの実施形態では、状態又は位置は、ロケーションに対するものである。例えば、いくつかの実施形態では、個人がロケーションに存在する若しくはロケーションから離れていると判定されるか、又は個人の状態が未知若しくは非アクティブであると判定されるかのインジケーションが表示される。いくつかの実施形態では、個人の状態は、個人に関連付けられたデバイスの位置に基づいて判定される。いくつかの実施形態では、1つ以上のマイクロフォンを使用した話者識別を使用して、個人の存在及び識別情報を判定することができる。状態は、ロケーションに関する情報にアクセスする目的のために個人がロケーションに関連付けられるように招待されたか否かも示す(例えば、招待された)。
図7A〜図7Cは、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図を示す。方法700は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法700におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法700は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック702で、デバイスは、ロケーションのインジケーション及びロケーションの制御可能な外部デバイスの表現(例えば、620−1)を含むユーザインタフェース画面(例えば、610−1)を表示する。
任意選択的に、ブロック704で、デバイスは、個人に関連付けられたリモート電子デバイスがロケーションに存在することを示すデータを受信し、リモート電子デバイスがロケーションに存在することを示すデータを受信したことに応じて、ユーザインタフェース画面上に、リモート電子デバイスに関連付けられた個人の表現(例えば、624)を表示する。
任意選択的に、ブロック706で、デバイスは、ユーザインタフェース画面上に、ロケーションの状態のインジケーション(例えば、626)を表示する。
任意選択的に、ブロック708で、デバイスは、ユーザインタフェース画面上に、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現(例えば、640−1)を表示し、シーンプロファイルの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、シーンプロファイルに関連付けられた複数の制御可能な外部デバイスの表現(例えば、910−2)を表示する。
任意選択的に、ブロック710で、デバイスは、ユーザインタフェース画面上に、ロケーションの制御可能な外部カメラによってキャプチャされた画像(例えば、632)を表示する。
ブロック712では、デバイスは、制御可能な外部デバイスの選択に対応する第2のユーザ入力(例えば、630−1)を検出する。
ブロック714で、第2のユーザ入力を検出したことに応じて、デバイスは、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクト(例えば、608)を表示する。
ブロック716で、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトが表示されている間に、デバイスは、制御可能な外部デバイスの指定された状態の選択に対応する第3のユーザ入力(例えば、630−2)を検出する。
ブロック718で、第3のユーザ入力を検出したことに応じて、デバイスは、制御可能な外部デバイスを指定された状態に設定する命令を送信する。
任意選択的に、ブロック720で、デバイスは、ユーザインタフェース画面を表示している間に、第4のユーザ入力を検出し、第4のユーザ入力を検出したことに応じて、ロケーションに関連付けられた少なくとも1つの指定された部屋の表現を表示し(例えば、図6O)、少なくとも1つの指定された部屋の第1の指定された部屋の選択に対応する第5のユーザ入力を検出し、第5のユーザ入力を検出したことに応じて、第1の指定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスの表現を表示する(例えば、図6P)。
任意選択的に、ブロック722で、デバイスは、ユーザインタフェース画面を表示している間に、第6のユーザ入力を検出し、第6のユーザ入力を検出したことに応じて、ロケーションの少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの表現、並びに/又は自動化プロファイルを作成するオプションを表示する(例えば、図6Q)。
任意選択的に、ブロック724で、デバイスは、ユーザインタフェース画面を表示している間に、第7のユーザ入力を検出し、第7のユーザ入力を検出したことに応じて、ロケーションに関連付けられた人々の表現を表示する(例えば、図6S)。
任意選択的に、ブロック726で、デバイスは、ユーザインタフェース画面を表示している間に、第8のユーザ入力を検出し、第8のユーザ入力を検出したことに応じて、追加のシーンプロファイルを作成すること、異なるロケーションに関連付けられた情報を見る及び/又は追加のロケーションを追加すること、ロケーションのプロファイル情報を変更すること、並びに第2の制御可能な外部デバイスをロケーションに関連付けること、のうちの1つ以上を実行するオプションを表示する(例えば、図6M(630)、及び図6R(638))。
なお、方法700に関して上述したプロセス(例えば、図7A〜図7C)の詳細はまた、後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法1000、1300、1600、1900、2100、2300、2600、2900、及び3200は、方法700を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図8は、説明される様々な実施形態の原理に従って構成された電子デバイス800の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス800の機能ブロックは、上述の技術を実行するように構成されている。デバイス800の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図8で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図8に示すように、電子デバイス800は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット802、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット804、並びにディスプレイユニット802及び任意選択的にタッチ感知面ユニット804に結合された処理ユニット806を含む。いくつかの実施形態では、処理ユニット806は、表示有効化ユニット808と、検出ユニット810と、引き起こしユニット(causing unit)812と、受信ユニット814とを含む。
処理ユニット806は、第1のユーザインタフェース画面上に、ロケーションのインジケーションの表示を有効にし(例えば、表示有効化ユニット808を用いて)、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現の表示を有効にし(例えば、表示有効化ユニット808を用いて)、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトの表示を有効にし(例えば、表示有効化ユニット808を用いて)、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトが表示されている間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす(例えば、引き起こしユニット812を用いて)、ように構成されている。
いくつかの実施形態では、処理ユニット806は、個人に関連付けられたリモート電子デバイスがロケーションに存在することを示すデータを受信し(例えば、受信ユニット814を用いて)、リモート電子デバイスがロケーションに存在することを示すデータを受信したことに応じて、第1のユーザインタフェース画面上に、リモート電子デバイスに関連付けられた個人の表現の表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面上に、ロケーションの状態のインジケーションの表示を有効にする(例えば、表示有効化ユニット810を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面上に、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現の表示を有効にし(例えば、表示有効化ユニット808を用いて)、シーンプロファイルの選択に対応する第3のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第3のユーザ入力を検出したことに応じて、シーンプロファイルに関連付けられた複数の制御可能な外部デバイスの表現の表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第4のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第4のユーザ入力を検出したことに応じて、追加のシーンプロファイルを作成するオプションの表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面上に、ロケーションの制御可能な外部カメラによってキャプチャされた、制御可能な外部カメラからのライブビデオフィードに含まれた画像の表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施例では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第5のユーザ入力を(例えば、検出ユニット810を用いて)検出し、第5のユーザ入力を検出したことに応じて、ロケーションに関連付けられた少なくとも1つの指定された部屋の表現の表示を有効にし(例えば、表示有効化ユニット808を用いて)、少なくとも1つの指定された部屋の第1の指定された部屋の選択に対応する第6のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第6のユーザ入力を検出したことに応じて、第1の指定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスの表現の表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第7のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第7のユーザ入力を検出したことに応じて、ロケーションの少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの表現、並びに/又は自動化プロファイルを作成するオプションの表示を有効にする(例えば、表示有効化ユニット808を用いて)するように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第8のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第8のユーザ入力を検出したことに応じて、異なるロケーションに関連付けられた情報を見る及び/又は追加のロケーションを追加するオプションの表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第9のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第9のユーザ入力を検出したことに応じて、ロケーションのプロファイル情報を変更するオプションの表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第10のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第10のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイスをロケーションに関連付けるオプションの表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット806は、第1のユーザインタフェース画面が表示されている間に、第11のユーザ入力を検出し(例えば、検出ユニット810を用いて)、第11のユーザ入力を検出したことに応じて、ロケーションに関連付けられた人々の表現の表示を有効にする(例えば、表示有効化ユニット808を用いて)ように更に構成されている。
図7A〜図7Cを参照して上述した動作は、図1A〜図1B又は図8に示す構成要素によって、任意選択的に実施される。例えば、表示する動作702、704、706、708、710、714、720、722、724、及び726、検出する動作708、712、716、720、722、724、及び726、送信する動作718、並びに、受信する動作704は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図9A〜図9Fは、いくつかの実施形態による、制御可能な外部デバイスに関するシーンプロファイルを作成する及び/又は構成するための例示的なユーザインタフェースを示す。これらの図中のユーザインタフェースは、図10でのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
図9Aは、デバイス600上に表示された、新しいシーンプロファイルを作成するためのユーザインタフェース画面910−1を示す。いくつかの実施形態では、ユーザインタフェース画面910−1は、図6Mに示す「新しいシーン」オプションの選択に応じて表示される。ユーザインタフェース画面910−1は、ユーザに新しいシーンプロファイルを作成する、及び/又は1つ以上の既定の(例えば、提案された)シーンプロファイルを提供するように促す。既定のシーンプロファイルは、ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む。ユーザインタフェース画面910−1は、新しいカスタムシーンプロファイルを作成するためのアフォーダンス904、並びに、「おはよう」、「家を出る」、「家に着く」、及び「おやすみ」と名付けられた例示的な既定のシーンプロファイルの表現902−1、902−2、902−3、及び902−4を含む。
図9Bは、映画の夜と名付けられた新しいカスタムシーンプロファイルに対応するユーザインタフェース画面910−2を表示しているデバイス600を示す。シーンプロファイルの名前に加えて、ユーザインタフェース画面910−2はまた、シーンプロファイルに関連付けられた画像905(例えば、グリフ、記号、写真)を含む。いくつかの実施形態では、ユーザは、シーンプロファイルに関連付けられた画像を手動で選択することができる。ユーザインタフェース画面910−2はまた、シーンプロファイルにアクセサリを追加するための「アクセサリを追加する」とラベル付けされたアフォーダンス906を含む。アフォーダンス906を選択するユーザ入力に応じて、デバイス600は、ロケーションに位置しているアクセサリの表現908−1〜908−5を含むユーザインタフェース画面910−3(図9C)を表示する。表現908−1〜908−5は、それらが関連付けられる対応する部屋に基づいて配置される。表現は、対応するアクセサリがシーンプロファイルに関連付けられているか否かのインジケーションを含む。図示した実施例では、それぞれの表現908−1〜908−5の右上角の円は、対応するアクセサリがシーンプロファイルに関連付けられている場合に、チェックされる又は埋められる。そうでなければ、円は、空白である。アクセサリがシーンプロファイルに含まれているというインジケーションの他の実施例としては、強調表示すること、太字にすること、などが挙げられる。
図9Cの実施形態では、表現908−1〜908−5は、アフォーダンスである。デバイス600は、第1のアクセサリの選択に対応するユーザ入力920−1(例えば、表現908−1上のタップ)を検出する。ユーザ入力920−1を検出した後で、デバイス600は、第1のアクセサリをシーンプロファイルに関連付ける。図9Dは、表現908−1に対応するアクセサリがシーンプロファイルに関連付けられていることを示すユーザインタフェース画面910−3の更新されたバージョンを示す。デバイス600は、第1のアクセサリ及び第1のアクセサリの第1の状態を識別するデータをシーンプロファイルに含めることにより、第1のアクセサリをシーンプロファイルに関連付ける。シーンプロファイルが既に存在する場合、データをシーンプロファイルに含めることは、既存のプロファイルを更新すること(例えば、既存のシーンプロファイルにデータを追加すること)を含む。いくつかの実施形態では、アクセサリが選択されたときにシーンプロファイルがまだ存在しない場合、データをシーンプロファイルに含めることは、データを有する新しいシーンプロファイルを作成することを含む。
アフォーダンス914の選択を検出したことに応じて、デバイス600は、寝室に関連付けられたアクセサリの全てをシーンプロファイルに含めさせる。アフォーダンス916は、バスルームに対して類似の機能を提供する。いくつかの実施形態では、ユーザインタフェース画面910−3は、選択されると、ユーザインタフェース画面上のアクセサリの全てをシーンプロファイルに含めさせるアフォーダンスを含む。
いくつかの実施形態では、ユーザインタフェース画面910−3上の表現908−1〜908−5は、対応するアクセサリの現在の状態のインジケーションを含む。いくつかの実施形態では、デバイス600は、アクセサリが選択された時点で、アクセサリの現在の状態をシーンプロファイルに含める。いくつかの実施形態では、アクセサリが既にシーンプロファイルに関連付けられている場合、アクセサリに対応するユーザインタフェース画面910−3上の表現は、アクセサリの現在の状態と必ずしも同じではない、シーンプロファイルに含まれたアクセサリの状態を示す。いくつかの実施形態では、表現908−1〜908−5は、例えば、アクセサリの現在の状態又はユーザによって指定された状態であり得る、アクセサリが選択された場合にシーンプロファイルに含まれることになる状態のインジケーションを含む。
いくつかの実施形態では、デバイス600は、第2のアクセサリの選択に対応する第2のユーザ入力920−2(例えば、表現908−5に対応するタッチ感知ディスプレイ602上の位置の接触)を検出する。デバイス600は、第2のユーザ入力920−2が閾値基準を満たすか否かを判定する。いくつかの実施形態では、閾値基準は、例えば、接触の閾値持続時間、又は接触の閾値特性強度を含む。
第2のユーザ入力920−2を検出したことに応じて、かつ閾値基準が満たされるという判定に従って、デバイス600は、第2のアクセサリの第1の状態のインジケーションを表示する。いくつかの実施形態では、第1の状態のインジケーションは、図6C〜図6Kに示すものなどの制御アフォーダンスの一部として表示される。図9Cに示す実施形態では、選択された表現908−5に対応するアクセサリは、照明である。いくつかの実施形態では、図6Jに表示された制御アフォーダンスは、ユーザが照明の状態を選択することができるように表示される。
デバイス600は、第1の状態の選択に対応する入力(例えば、図6Jの制御アフォーダンス上のタップ)を検出する。第1の状態の選択を検出した後で、デバイス600は、シーンプロファイルに第2のアクセサリ及び第2のアクセサリの第1の状態を識別するデータを含む。いくつかの実施形態では、第1の状態の選択を検出した後で、デバイス600は、図9Dに示すように、第1の状態(例えば、オフ)の、かつアクセサリがシーンプロファイルに追加されたというインジケーションを有する第2のアクセサリの表現908−5を表示する。いくつかの実施形態では、デバイス600は、閾値基準が満たされることを判定すると、ユーザ入力920−2に直接応じて、シーンプロファイルに第1の状態を識別するデータを含む。いくつかの実施形態では、デバイス600は、例えば、触覚を出力することにより、シーンに対してアクセサリの指定された状態が選択されたことを示す。
図9Eは、シーンプロファイルの概要を有するデバイス600上のユーザインタフェース画面910−2の更新されたバージョンを示す。デバイス600は、ユーザ入力、例えば、ユーザインタフェース画面910−3上の「完了」とラベル付けされたアフォーダンスの選択を検出したことに応じて、ユーザインタフェース画面910−2を表示する。ユーザインタフェース画面910−2は、シーンプロファイルに関連付けられたアクセサリの表現908−6及び908−7を含む。
更新されたユーザインタフェース画面910−2はまた、アクセサリに関連付けられたデータをシーンプロファイルに追加する又はシーンプロファイルから除去する(例えば、912−1)、シーンプロファイルをテストする(例えば、912−2)、シーンプロファイルを指定する(例えば、912−3)、及びシーンプロファイルを削除する(例えば、912−4)オプション(例えば、アフォーダンス)を含む。いくつかの実施形態では、シーンプロファイルをテストすることは、シーンプロファイルに含まれたアクセサリの指定された状態を(少なくとも一時的に)実施する命令を送信することを含む。いくつかの実施形態では、指定されたシーンは、ホーム画面610−1上にお気に入りのシーンとして表示される。
ここで図9Aに戻って、既定のシーンプロファイル902−1〜902−4のうちの1つの選択に対応するユーザ入力を検出したことに応じて、デバイス600は、ロケーションの所定のアクセサリの表現を含むユーザインタフェース画面を表示する。図9Fは、既定のシーンプロファイル、おやすみ902−4に対応する例示的なユーザインタフェース画面を示す。図9Fに示すように、おやすみのシーンプロファイルは、所定の状態を有する2つの所定のアクセサリを有して予めポピュレートされている。より具体的には、正面ドアは、ロック状態に設定され、寝室内のサーモスタットは、68度に下げて設定されている。既定のシーンプロファイルに関する追加の例示的な実施形態を以下に説明する。
いくつかの実施形態では、所定のアクセサリは、ユーザ選択の必要なしに、シーンプロファイルに自動的に含まれる選択された既定のシーンプロファイルに基づく既定のアクセサリである(例えば、ガレージドアは、「家に着く」既定のシーンに対して、予め決定することができる)。いくつかの実施形態では、所定のアクセサリは、所定のアクセサリに対してデバイス600によって前に実行されたアクション(又はデバイス600に関連付けられたユーザプロファイル)に基づいて判定される。いくつかの実施形態では、アクセサリは、例えば、使用頻度、又はイベント若しくは時刻とアクセサリの使用との間の相関関係に基づいて提案される(例えば、寝室の照明は、デバイス600が典型的に朝に寝室内の照明を動作させる場合に「おはよう」シーンプロファイルに対して判定される、又は、食器洗い機は、それが通常午後11時の後で動作される場合に「おやすみ」シーンプロファイルに対して予め決定することができる)。
いくつかの実施形態では、所定のアクセサリの表現は、図9Fの実施形態に示すように、所定のアクセサリに対する所定の状態(例えば、提案された状態)のインジケーションを含む。いくつかの実施形態では、所定の状態は、ユーザ選択の必要なしに、シーンプロファイルに自動的に含まれる選択された既定のシーンプロファイルに基づく既定の状態である(例えば、「家に着く」に対するガレージドアの提案された状態は、「開」である)。
いくつかの実施形態では、所定のアクセサリの所定の状態は、所定のアクセサリに対して前に取られた、デバイス600のユーザに関連付けられたアクションに基づいて判定される。いくつかの実施形態では、アクセサリの状態は、例えば、選択の頻度、又はイベント若しくは時刻とアクセサリの状態との間の相関関係に基づいて提案される(例えば、寝室の照明は、デバイス600が典型的に朝に寝室内の照明をオンにする場合に「おはよう」シーンプロファイルに対してオンに設定される、又は、食器洗い機の状態は、それが通常午後11時の後で開始される場合に「おやすみ」シーンプロファイルに対して「開始」に予め決定することができる)。
図10は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法1000は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法1000におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法1000は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
任意選択的に、ブロック1002で、デバイスは、ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む既定のシーンプロファイルの表現(例えば、902−1〜902−4)を含む、第1のユーザインタフェース画面(例えば、910−1)を表示する。
任意選択的に、ブロック1004で、デバイスは、第1のユーザインタフェース画面を表示している間に、既定のシーンプロファイルの選択に対応する第1のユーザ入力を検出し、第1のユーザ入力を検出したことに応じて、ロケーションの所定の制御可能な外部デバイスの複数の表現を含む第2のユーザインタフェース画面(例えば、図9F)を表示する。任意選択的に、ロケーションの所定の制御可能な外部デバイスの複数の表現は、所定の制御可能な外部デバイスに対する所定の状態のインジケーションを含む。任意選択的に、所定の制御可能な外部デバイスは、所定の制御可能な外部デバイスに対してデバイスによって前に実行されたアクションに基づいて判定される。任意選択的に、所定の制御可能な外部デバイスの所定の状態は、所定の制御可能な外部デバイスに対して前に取られた、電子デバイスのユーザに関連付けられたアクションに基づいて判定される。
ブロック1006で、デバイスは、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示する(例えば、図9Cの908−1〜908−5)。任意選択的に、制御可能な外部デバイスの第1の表現は、制御可能な外部デバイスの現在の状態のインジケーションを含む。
ブロック1008では、デバイスは、第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力(例えば、920−1)を検出する。
ブロック1010で、第2のユーザ入力を検出した後で、デバイスは、シーンプロファイルに第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータを含む(例えば、図9D)。
任意選択的に、ブロック1012で、デバイスは、第3のユーザ入力を検出し、第3のユーザ入力を検出したことに応じて、制御可能な外部デバイスの第2の表現(例えば、908−6)を含む第3のユーザインタフェース画面を表示する。任意選択的に、第3のユーザインタフェース画面は、制御可能な外部デバイスに関連付けられたデータをシーンプロファイルから除去すること(例えば、912−1)、シーンプロファイルをテストすること(例えば、912−2)、シーンプロファイルを指定すること(例えば、912−3)、及びシーンプロファイルを削除すること(例えば、912−4)のうちの少なくとも1つを実行するオプションを含む。
任意選択的に、ブロック1014で、デバイスは、ロケーションに位置している第2の制御可能な外部デバイスの表現(例えば、908−5)を表示し、第2の制御可能な外部デバイスの選択に対応する第4のユーザ入力(例えば、920−2)を検出し、第4のユーザ入力が閾値基準を満たすか否かを判定し、第4のユーザ入力を検出したことに応じて、かつ閾値基準が満たされるという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーション(例えば、608)を表示し、第2の制御可能な外部デバイスの第1の状態の選択に対応する第5のユーザ入力(例えば、630−2)を検出し、第5のユーザ入力を検出した後で、シーンプロファイルに第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータを含む。
方法1000に関して上述したプロセス(図10)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1300、1600、1900、2100、2300、2600、2900、及び3200は、方法1000を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図11は、説明される様々な実施形態の原理に従って構成された電子デバイス1100の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス1100の機能ブロックは、上述の技術を実行するように構成されている。デバイス1100の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図11で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図11に示すように、電子デバイス1100は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット1102、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット1104、並びにディスプレイユニット1102及び任意選択的にタッチ感知面ユニット1104に結合された処理ユニット1106を含む。いくつかの実施形態では、処理ユニット1106は、表示有効化ユニット1108と、検出ユニット1110と、包含ユニット1112と、判定ユニット1114とを含む。
処理ユニット1106は、ロケーションに位置している第1の制御可能な外部デバイスの第1の表現の表示を有効にし(例えば、表示有効化ユニット1108を用いて)、第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し(例えば、検出ユニット1110を用いて)、第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める(例えば、包含ユニット1112を用いて)ように構成されている。いくつかの実施形態では、制御可能な外部デバイスの第1の表現は、制御可能な外部デバイスの現在の状態のインジケーションを含む。
いくつかの実施形態では、処理ユニット1106は、ロケーションの第2の制御可能な外部デバイスの表現の表示を有効にし(例えば、表示有効化ユニット1108を用いて)、第2の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し(例えば、検出ユニット1110を用いて)、第2のユーザ入力が閾値基準を満たすか否かを判定し(例えば、判定ユニット1114を用いて)、第2のユーザ入力を検出したことに応じて、かつ閾値基準が満たされるという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーションの表示を有効にし(例えば、表示有効化ユニット1108を用いて)、第2の制御可能な外部デバイスの第1の状態の選択に対応する第3のユーザ入力を検出し(例えば、検出ユニット1110を用いて)、第3のユーザ入力を検出した後で、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める(例えば、包含ユニット1112を用いて)ように構成されている。
いくつかの実施形態では、処理ユニット1106は、第4のユーザ入力を検出し(例えば、検出ユニット1110を用いて)、第4のユーザ入力を検出したことに応じて、制御可能な外部デバイスの第2の表現を含む第1のユーザインタフェース画面の表示を有効にする(例えば、表示有効化ユニット1108を用いて)ように更に構成されている。任意選択的に、第1のユーザインタフェース画面は、制御可能な外部デバイスに関連付けられたデータをシーンプロファイルから除去すること、シーンプロファイルをテストすること、シーンプロファイルを指定すること、及びシーンプロファイルを削除することのうちの少なくとも1つを実行するオプションを含む。
いくつかの実施形態では、処理ユニット1106は、制御可能な外部デバイスの第1の表現が表示される前に、ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む既定のシーンプロファイルの表現を含む第2のユーザインタフェース画面の表示を有効にする(例えば、表示有効化ユニット1108を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット1106は、第2のユーザインタフェース画面が表示されている間に、既定のシーンプロファイルの選択に対応する第5のユーザ入力を検出し(例えば、検出ユニット1110を用いて)、第5のユーザ入力を検出したことに応じて、ロケーションの所定の制御可能な外部デバイスの複数の表現を含む第3のユーザインタフェース画面の表示を有効にする(例えば、表示有効化ユニット1108を用いて)ように更に構成されている。いくつかの実施形態では、ロケーションの所定の制御可能な外部デバイスの複数の表現は、所定の制御可能な外部デバイスに対する所定の状態のインジケーションを含む。
いくつかの実施形態では、所定の制御可能な外部デバイスは、所定の制御可能な外部デバイスに対して電子デバイスによって前に実行されたアクションに基づいて判定される。いくつかの実施形態では、所定の制御可能な外部デバイスの所定の状態は、所定の制御可能な外部デバイスに対して前に取られた、電子デバイスのユーザに関連付けられたアクションに基づいて判定される。
図10を参照して上述した動作は、図1A〜図1B、又は図11に示す構成要素によって、任意選択的に実施される。例えば、表示する動作1002、1004、1006、及び1014、検出する動作1004、1008、1012、及び1014、含める動作1010及び1014、並びに、判定する動作1014は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図12A〜図12Cは、いくつかの実施形態による、制御可能な外部デバイスに関する自動化プロファイルを作成する及び/又は構成するための例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図13及び図21におけるプロセスを含む、以下で説明するプロセスを例示するために使用される。
図12Aは、ロケーションに関連付けられた自動化プロファイルを定義するためのユーザインタフェース画面1210−1を表示しているデバイス600を示す。いくつかの実施形態では、ユーザインタフェース画面1210−1は、「新しい自動化」とラベル付けされた図6Qのアフォーダンスの選択に応じて表示される。ユーザインタフェース画面1210−1は、自動化プロファイルに対して選択することができる基準の表現1202−1〜1202−4を含む。自動化プロファイルは、少なくとも1つのアクセサリ、それぞれの表されたアクセサリに対する指定された状態、及び少なくとも1つのアクセサリを制御するための自動化基準を表すデータを含む。いくつかの実施形態では、自動化プロファイルは、自動化プロファイルの自動化基準が満たされると実行されるシーンプロファイル(又はその一部分)を含む。項目1202−1〜1202−4によって表される自動化基準はまた、それに応じて自動化プロファイルが実施されることになるイベントである「トリガイベント」と呼ばれることがある。
いくつかの実施形態では、自動化基準は、ロケーションに対するデバイス600の位置に少なくとも部分的に基づく。位置に基づく基準の例としては、電子デバイスが第1のロケーションから閾値距離未満である(例えば、「私が家にいる」)か否か、電子デバイスが第1のロケーションから閾値距離より離れている(例えば、「私が家から離れている」)か否か、電子デバイスが第1のロケーションから閾値距離より離れたところからロケーションから閾値距離未満に移動した(例えば、「私が家に着く」1202−2)か否か、及び電子デバイスが第1のロケーションから閾値距離未満からロケーションから閾値距離より離れて移動した(例えば、「私が家を出る」1202−1)か否か、が挙げられるが、これらに限定されない。いくつかの実施形態では、閾値距離は、ロケーションから全ての方向で同じである(例えば、円形境界)。いくつかの実施形態では、閾値距離は、ロケーションからの方向により異なる。
いくつかの実施形態では、自動化基準は、時刻に少なくとも部分的に基づく(例えば、「時間帯になる」1202−3)。時間に基づく自動化基準の例としては、時間帯(例えば、午前10時30分)及び相対的時間(例えば、日の出、又は日の入)が挙げられるが、これらに限定されない。
いくつかの実施形態では、自動化基準は、アクセサリの状態、又はアクセサリによって(例えば、センサによって)検出された状態若しくはイベントに少なくとも部分的に基づく。アクセサリの状態に基づく基準の例としては、アクセサリが制御されていること(例えば、「アクセサリが制御されている」1202−4)、及びアクセサリがトリガされている若しくは状態が変化していること(例えば、警報器、動き感知照明、雨センサなど)が挙げられるが、これらに限定されない。アクセサリによって検出された状態又はイベントに基づく基準の例としては、気象イベント、通知イベント(例えば、通知を受信すること)、ロケーションでのユーザの存在若しくは不在、予測されるイベントの不在、機械学習、又は、上記の参照により組み込まれた2015年5月29日出願の「Accessory management Systems Using Environment Model」と題された米国特許出願第14/725,912号に記載されているような手動(ユーザ)入力が挙げられるが、これらに限定されない。
図12Aに戻って、デバイス600は、第1の基準の選択に対応するユーザ入力を検出する。図12Aに示す実施形態では、ユーザ入力は、「私が家を出る」とラベル付けされた第1の基準の表現1202−1上の接触1220−1を含む。「私が家を出る」の基準の例は、上述した。ユーザ入力1220−1を検出したことに応じて、デバイス600は、第1の基準を自動化プロファイルの自動化基準に含めることにより、第1の基準を自動化プロファイルに関連付ける。上述したように、自動化基準に加えて、自動化プロファイルはまた、ロケーションに位置している少なくとも1つのアクセサリに対する少なくとも1つの指定された状態を表すデータを含む。
図12Aはまた、「アクセサリを制御する」とラベル付けされたアフォーダンス上のユーザ入力1220−2を示す。ユーザ入力1220−2を検出したことに応じて、デバイス600は、ロケーションのアクセサリの1つ以上の表現を表示する。いくつかの実施形態では、デバイス600は、図9Cを参照して上述したユーザインタフェース910−3に類似したユーザインタフェースを表示する。図9Cでは、ロケーションのアクセサリの表現は、表示されて、選択してシーンプロファイルに含めることができる。アクセサリの指定された状態もまた、シーンプロファイルに対して選択することができる。類似のユーザインタフェース及び技術を使用して、アクセサリの指定された状態を示すデータを自動化プロファイルに追加するために、アクセサリ及びアクセサリの対応する指定された状態を選択することができる。図9Cと同様に、いくつかの実施形態では、アクセサリの表現は、アクセサリの現在の状態のインジケーションを含む。また、図9A及び図9Fを参照して上述した既定のシーンと同様に、いくつかの実施形態では、アクセサリの表現は、アクセサリの提案された状態のインジケーションを含む。いくつかの実施形態では、指定された状態は、アクセサリの現在の状態である。いくつかの実施形態では、指定された状態は、図6B〜図6Kを参照して上述した技術のうちの1つにより、ユーザによって選択された状態である。
図12Aに示す実施形態では、ユーザはまた、自動化の一部としてシーンプロファイルを実行することを選択することができる。アフォーダンス1204−1の選択に対応するユーザ入力1220−3に応じて、デバイス600は、例えば、図12Bに示すように、ロケーションに関連付けられたアクセサリの指定された状態に関するデータを含む、ロケーションに関連付けられた任意のシーンプロファイルのリストを表示する。図12Bに示す実施形態では、シーンプロファイルは、部屋によってまとめられる。いくつかの実施形態では、シーンプロファイルは、それがその部屋に関連付けられたアクセサリを含む場合、部屋の下にリストアップされる。ユーザは、リストアップされたシーンプロファイルのうちの1つ以上を選択して、シーンプロファイル内のアクセサリの指定された状態を示すデータを自動化プロファイルに追加することができる。
いくつかの実施形態では、アクセサリの指定された状態を示すデータを自動化プロファイルに追加した後で、デバイス600は、第1のアクセサリに基づく自動化プロファイルの概要を表示する。自動化プロファイルの例示的な概要は、図6Qの要素634によって示される。
自動化プロファイルに対して自動化基準及びアクセサリデータが確立された後で、デバイス600は、自動化基準が満たされたか否かを判定し、自動化基準が満たされたという判定に従って、第1のアクセサリを指定された状態に設定する命令を送信する。いくつかの実施形態では、デバイス600は、アクセサリに直接、命令を送信する。いくつかの実施形態では、デバイス600は、コントローラ、サーバ、ホスト、又はアクセサリを制御するように構成された他の外部デバイスに命令を送信する。
いくつかの実施形態では、デバイス600は、自動化基準が満たされたことを判定すると、自動的に命令を送信する。例えば、デバイス600は、図12Aの「自動的に」とラベル付けされたオプション1206−1が選択されている場合に、自動的に命令を送信する。いくつかの実施形態では、自動化基準が満たされるという判定に従って、デバイス600は、自動化プロファイルを識別する通知又は要求を表示して、自動化プロファイルの実施を確認する又は拒否するオプション(例えば、アフォーダンス)を提供する。例えば、図12Aの「常に尋ねる」とラベル付けされたオプション1206−2が選択されている場合に、自動化プロファイルの実施を確認する要求が表示される。図12Cは、確認アフォーダンス1212及び取消アフォーダンス1214を含む通知1208の例示的な実施形態を示す。自動化プロファイルの実施の確認に対応するユーザ入力(例えば、アフォーダンス1212上のタップ)に従って、デバイス600は、自動化プロファイルの指定された状態を実施する命令を送信する。自動化プロファイルの実施の非確認又は拒否に対応するユーザ入力(例えば、アフォーダンス1214上のタップ)に従って、デバイス600は、自動化プロファイルの指定された状態を実施する命令を送信することを見合わせる、又は自動化プロファイルの指定された状態を実施しない命令を送信する。
図13は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法1300は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法1300におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法1300は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック1302では、デバイスは、第1の基準(例えば、1202−1)の選択に対応する第1のユーザ入力(例えば、1220−1)を検出する。
ブロック1304で、第1のユーザ入力を検出したことに応じて、デバイスは、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付ける。任意選択的に、自動化基準は、ロケーションに対する電子デバイスの位置に少なくとも部分的に基づく。任意選択的に、自動化基準は、時刻に少なくとも部分的に基づく。任意選択的に、自動化基準は、ロケーションの制御可能な外部デバイスの状態に少なくとも部分的に基づく。
ブロック1306で、デバイスは、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力(例えば、920−2)を検出する。任意選択的に、第1の制御可能な外部デバイスの選択は、シーンプロファイルの選択を含み(例えば、図12B)、シーンプロファイルは、第1の制御可能な外部デバイスを含むロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含む。
ブロック1308で、デバイスは、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加する。
任意選択的に、ブロック1310で、デバイスは、第1の制御可能な外部デバイスに基づく自動化プロファイルの概要を表示する(例えば、図6Q)。
ブロック1312で、デバイスは、自動化基準が満たされたか否かを判定する。
ブロック1314で、自動化基準が満たされたという判定に従って、デバイスは、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信する。
任意選択的に、ブロック1316で、デバイスは、ロケーションに位置している第2の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出し、第3のユーザ入力が入力閾値基準を満たすか否かを判定し、第3のユーザ入力が入力閾値基準を満たすという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーション(例えば、図6Dの608)を表示し、第2の制御可能な外部デバイスの第1の状態の選択に対応する第4のユーザ入力を検出し、第4のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータを自動化プロファイルに含める。
方法1300に関して上述したプロセス(図13)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1600、1900、2100、2300、2600、2900、及び3200は、方法1300を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図14は、説明される様々な実施形態の原理に従って構成された電子デバイス1400の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス800の機能ブロックは、上述の技術を実行するように構成されている。デバイス1400の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図14で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図14に示すように、電子デバイス1400は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット1402、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット1404、並びにディスプレイユニット1402及び任意選択的にタッチ感知面ユニット1404に結合された処理ユニット1406を含む。いくつかの実施形態では、処理ユニット1406は、検出ユニット1408と、関連付けユニット1410と、追加ユニット1412と、判定ユニット1414と、引き起こしユニット1416と、表示有効化ユニット1418と、包含ユニット1420とを含む。
処理ユニット1406は、第1の基準の選択に対応する第1のユーザ入力を検出し(例えば、検出ユニット1408を用いて)、第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付け(例えば、関連付けユニット1410を用いて)、ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し(例えば、検出ユニット1408を用いて)、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加し(例えば、追加ユニット1412を用いて)、自動化基準が満たされたか否かを判定し(例えば、判定ユニット1414を用いて)、自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす(例えば、引き起こしユニット1416を用いて)、ように構成されている。
いくつかの実施形態では、第1の制御可能な外部デバイスの選択は、シーンプロファイルの選択を含み、シーンプロファイルは、第1の制御可能な外部デバイスを含むロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含む。
いくつかの実施形態では、自動化基準は、ロケーションに対する電子デバイスの位置に少なくとも部分的に基づく。いくつかの実施形態では、自動化基準は、時刻に少なくとも部分的に基づく。いくつかの実施形態では、自動化基準は、ロケーションの制御可能な外部デバイスの状態に少なくとも部分的に基づく。
いくつかの実施形態では、処理ユニットは、第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加した後で、第1の制御可能な外部デバイスに基づく自動化プロファイルの概要の表示を有効にする(例えば、表示有効化ユニット1418を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニットは、ロケーションに位置している第2の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出し(例えば、検出ユニット1408を用いて)、第3のユーザ入力が閾値基準を満たすか否かを判定し(例えば、判定ユニット1414を用いて)、第3のユーザ入力が入力閾値基準を満たすという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーションの表示を有効にし(例えば、表示有効化ユニット1418を用いて)、第2の制御可能な外部デバイスの第1の状態の選択に対応する第4のユーザ入力を検出し(例えば、検出ユニット1408を用いて)、第4のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータを自動化プロファイルに含める(例えば、包含ユニット1420を用いて)ように更に構成されている。
図13を参照して上述した動作は、図1A〜図1B、又は図14に示す構成要素によって、任意選択的に実施される。例えば、検出する動作1302、1306、及び1316、関連付ける動作1304、追加する動作1308、表示する動作1310及び1316、判定する動作1312及び1316、送信する動作1314、及び含める動作1316は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図15A〜図15Bは、いくつかの実施形態による、アクセサリをロケーションに関連付けるための例示的なユーザインタフェースを示す。これらの図中のユーザインタフェースは、図16でのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
いくつかの実施形態では、アクセサリは、アクセサリを識別する画像(例えば、バーコード、クイックレスポンス(quick response)(QR)コードなど)を使用してロケーションに関連付けられる(例えば、ロケーションプロファイルに追加される)。画像は、例えば、アクセサリ自体、又はアクセサリに設けられた若しくは関連付けられた材料(例えば、包装、取扱説明書など)の上に含めることができる。
図15Aは、パターンの画像をキャプチャする命令(例えば、「コードをスキャンする」)を含むユーザインタフェース画面1510−1を表示しているデバイス600を示す。デバイス600は、ユーザが画像をカメラの視野に合わせるのに役立つように、ユーザインタフェース画面1510−1のエリア1502内にデバイス600に関連付けられたカメラからのライブビデオフィードを表示する。いくつかの実施形態では、ユーザインタフェース画面1510−1は、「アクセサリを追加する」とラベル付けされた図6Mに示すアフォーダンスの選択に応じて表示される。
カメラを使用して、デバイス600は、パターン1504の画像をキャプチャする。次に、デバイス600は、パターンがアクセサリに対応することを判定する。いくつかの実施形態では、画像自体をキャプチャする代わりに、デバイス600は、外部デバイスから画像を取得する。いくつかの実施形態では、デバイス600は、画像内のパターンをデータリポジトリ(例えば、ローカルメモリ又はリモートメモリ、データベースなど)に記憶されたアクセサリ情報と比較する。いくつかの実施形態では、デバイス600はまた、アクセサリから識別データを受信し(例えば、Bluetooth通信を介して)、それを画像内のパターンと比較して、パターンがアクセサリに対応するか否かを判定する。このように、デバイス600は、それが画像に関連付けられたアクセサリを正しく識別していることを検証する。
パターンがアクセサリに対応するという判定に応じて、デバイス600は、アクセサリをロケーションに関連付ける。いくつかの実施形態では、デバイス600は、アクセサリの動作状態を表すデータを含む、アクセサリに関連付けられたプロファイル(「アクセサリプロファイル」)を作成する。いくつかの実施形態では、パターンがアクセサリに対応することを判定したことに応じて、デバイス600は、デバイス600がアクセサリの状態を監視及び/又は制御することができるように、電子デバイスがアクセサリと情報を交換する(例えば、fear−field通信、Bluetoothプロトコル、インターネット、ローカルネットワークなどを介して)ことを可能にする、アクセサリとのペア関係を確立する。
いくつかの実施形態では、デバイス600は、アクセサリをロケーションの部屋又は指定されたエリアに割り当てることを含めて、アクセサリに関する情報を入力するためのユーザインタフェースを表示する。図15Bは、アクセサリに関する情報を表示するユーザインタフェース画面1510−2、アクセサリの表現1506、並びにアクセサリに関する情報を入力するためのオプション1508−1及び1508−2を示す。ユーザインタフェース画面1510−2及び/又は表現1506は、例えば、画像をキャプチャしてアクセサリを識別することから取得された情報に基づいて自動的にポピュレートすることができる。いくつかの実施形態では、情報は、ユーザからの入力に基づいて手動で取得される。図15Bに示す実施形態では、アクセサリの表現は、アクセサリに関連付けられたアイコン、名前、及び部屋を含む。いくつかの実施形態では、指定された名前、画像、部屋、又は他の情報は、アクセサリのデータプロファイルに含まれる。
アクセサリを部屋に関連付けるために、ユーザインタフェース画面1510−2は、選択されると、ユーザが部屋を指定することができる「部屋を選択する」とラベル付けされたアフォーダンス1508−2を含む。いくつかの実施形態では、デバイスは、ユーザが部屋を選択するための部屋のリスト、ドロップダウンメニュー、テキスト入力フィールドなどを表示する。いくつかの実施形態では、ロケーションに対するデバイス600の位置に基づいて、部屋のリストが表示されて配置される。例えば、いくつかの実施形態では、デバイス600は、その位置に基づいて、それがどの部屋にあるかを推定し、推定された部屋を第1のオプションとして提示する。デバイス600は、部屋の選択を表すユーザ入力(例えば、ドロップダウンメニュー内の部屋上のタップ)を検出し、ユーザ入力を検出したことに応じて、選択された部屋をアクセサリに関連付ける。いくつかの実施形態では、同様の技術を使用して、アクセサリに対する名前を入力する。いくつかの実施形態では、デバイス600は、ユーザインタフェース画面1510−2及び/又は表現1506を更新して、部屋情報をアクセサリに関連付けられたプロファイルに含める。
ユーザインタフェース画面1510−2はまた、対応するアイコンの選択に応じてアクセサリに関連付けることができる、画像を有するアイコン1512を含む。ユーザインタフェース画面1510−2はまた、アクセサリを「お気に入り」として指定するためのアフォーダンス1514を含む。いくつかの実施形態では、デバイス600は、アフォーダンス1541上のユーザ入力を検出し、これに応じて、例えば、お気に入りのアクセサリの表題の下のホーム画面610−1上にアクセサリの表現を表示する。
図16は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法1600は、ディスプレイと、任意選択的にタッチ感知面と、任意選択的にカメラとを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法1600におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法1600は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
任意選択的に、ブロック1602で、デバイスは、パターンの画像をキャプチャする命令を含む第1のユーザインタフェース画面(例えば、1510−1)を表示する。任意選択的に、第1のユーザインタフェース画面は、第2のユーザインタフェース画面上の第1のアフォーダンスの選択に応じて表示される(例えば、図6M)。
ブロック1604で、デバイスは、カメラを使用して、パターン(例えば、1504)の画像をキャプチャする。
ブロック1606で、デバイスは、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定する。
ブロック1608で、パターンが制御可能な外部デバイスに対応するという判定に応じて、デバイスは、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付ける。
任意選択的に、ブロック1610で、パターンが制御可能な外部デバイスに対応することを判定した後で、デバイスは、制御可能な外部デバイスの表現(例えば、1506)を表示する。
ブロック1612で、デバイスは、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力(例えば、1508−2)を検出する。
ブロック1614で、第1のユーザ入力を検出したことに応じて、デバイスは、選択された部屋を制御可能な外部デバイスに関連付ける。
任意選択的に、ブロック1616で、デバイスは、パターンが制御可能な外部デバイスに対応することを判定した後で、第2のユーザ入力(例えば、アフォーダンス1514の選択)を検出し、第2のユーザ入力を検出したことに応じて、第1のユーザインタフェース画面(例えば、610−1)上に制御可能な外部デバイスの表現を表示する。
方法1600に関して上述したプロセス(図16)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1900、2100、2300、2600、2900、及び3200は、方法1600を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図17は、説明される様々な実施形態の原理に従って構成された電子デバイス1700の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス1700の機能ブロックは、上述の技術を実行するように構成されている。デバイス1700の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図17で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図17に示すように、電子デバイス1700は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット1702、任意選択的に、接触を受信するように構成されたタッチ感知面ユニット1704、画像をキャプチャするように構成されたカメラユニット1706、並びにディスプレイユニット1702、任意選択的にタッチ感知面ユニット1704、及び任意選択的にカメラユニット1706に結合された処理ユニット1708を含む。いくつかの実施形態では、処理ユニット1708は、引き起こしユニット1710と、判定ユニット1712と、関連付けユニット1714と、検出ユニット1716と、表示有効化ユニット1718とを含む。
処理ユニット1708は、カメラユニットを使用してパターンの画像をキャプチャを引き起こし(例えば、引き起こしユニット1710を用いて)、パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し(例えば、判定ユニット1712を用いて)、パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け(例えば、関連付けユニット1714を用いて)、少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し(例えば、検出ユニット1716を用いて)、第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける(例えば、関連付けユニット1714を用いて)、ように構成されている。
いくつかの実施形態では、処理ユニット1708は、パターンの画像がキャプチャされる前に、パターンの画像をキャプチャする命令を含む第1のユーザインタフェース画面の表示を有効にする(例えば、表示有効化ユニット1718を用いて)ように更に構成されている。いくつかの実施形態では、第1のユーザインタフェース画面は、第2のユーザインタフェース画面上の第1のアフォーダンスの選択に応じて表示される。いくつかの実施形態では、処理ユニットは、パターンが制御可能な外部デバイスに対応することを判定した後で、第2のユーザ入力を検出し(例えば、検出ユニット1716を用いて)、第2のユーザ入力を検出したことに応じて、第2のユーザインタフェース画面上に制御可能な外部デバイスの表現の表示を有効にする(例えば、表示有効化ユニット1718を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット1708は、パターンが制御可能な外部デバイスに対応することを判定した後で、制御可能な外部デバイスの表現の表示を有効にする(例えば、表示有効化ユニット1718を用いて)ように更に構成されている。
図16を参照して上述した動作は、図1A〜図1B、又は図17に示す構成要素によって、任意選択的に実施される。例えば、表示する動作1602及び1610、キャプチャする動作1604、判定する動作1606、関連付ける動作1608及び1614、並びに検出する動作1612及び1616は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図18A〜図18Cは、いくつかの実施形態による、ロケーションに関連付けられた自動化プロファイルに対する基準を設定するための例示的なユーザインタフェースを示す。これらの図中のユーザインタフェースは、図19でのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
図18Aは、地図ビュー1802を表示しているユーザインタフェース画面1810−1を示す。地図ビュー1802は、自動化プロファイルに関連付けられたロケーション上に実質的に中心がある。地図ビュー1802はまた、位置に基づく基準のインジケーション1804、具体的には、ロケーションの位置の周囲の円形閾値を含む。位置に基づく基準は、ロケーションに対するデバイス600の位置に少なくとも部分的に基づく。いくつかの実施形態では、位置に基づく基準は、デバイス600が、円の半径によって表されたロケーションの閾値距離内にあるか否かを含む。いくつかの実施形態では、閾値距離は、ロケーションから全ての方向で同じである(例えば、円形境界)。いくつかの実施形態では、閾値距離は、ロケーションからの方向により異なる。
いくつかの実施形態では、位置に基づく基準は、デバイス600がロケーションから閾値距離未満にあるか否かを含む。いくつかの実施形態では、位置に基づく基準は、デバイス600がロケーションから閾値距離より離れているか否かを含む。いくつかの実施形態では、位置に基づく基準は、デバイス600がロケーションから閾値距離より離れたところからロケーションから閾値距離未満に移動したか否かを含む。この基準は、任意選択的に、図12Aに表される「私が家に着く」基準1202−2に対応する。いくつかの実施形態では、位置に基づく基準は、デバイス600が第1のロケーションから閾値距離未満からロケーションから閾値距離より離れて移動したか否かを含む。この基準は、任意選択的に、図12Aに表される「私が家を出る」基準1202−1に対応する。
デバイス600は、位置に基づく基準の指定に対応するユーザ入力(例えば、図12Aに表示された基準1202−1の選択)を検出する。基準の指定に対応するユーザ入力を検出したことに応じて、デバイス600は、位置に基づく基準をロケーションに関連付けられた自動化プロファイルの自動化基準に追加する。
ユーザインタフェース画面1810−1はまた、自動化プロファイルに対する追加の選択可能な基準又はトリガ条件を含む。ユーザインタフェースオブジェクト1804−1〜1804−4は、自動化プロファイルを有効にすることができるときを判定する、それぞれの時間に基づく基準、「終日」、「昼間の場合のみ」、「夜の場合のみ」、及び指定された時間のウィンドウ(例えば、「から」及び「まで」)を表す。ユーザインタフェース画面1810−1はまた、ある場合にはどの日に自動化が繰り返されるかを選択するためのオプション1806−1〜1806−7を含む。
デバイス600はまた、選択されたオブジェクト1804−1〜1804−4の時間に基づく基準を更に指定するオプションを提供する。いくつかの実施形態では、ユーザインタフェース画面1810−1上の情報アイコン1808の選択に応じて、デバイス600は、相対的開始及び終了時間(例えば、日の出及び日の入)、特定の開始時刻(例えば、時間帯)、特定の終了時刻、相対的終了時間、持続時間、並びに時間に基づく制約条件(例えば、月曜日のみ)を含む、自動化プロファイルに対する追加の時間に基づく基準を提供する、図18Bに示すユーザインタフェース画面1810−2を表示する。デバイス600はまた、任意選択的に、選択された相対的開始及び終了時間に対して更にまた時間に基づく基準を指定するオプションを提供する。いくつかの実施形態では、ユーザインタフェース画面1810−2上の情報アイコン1812の選択に応じて、デバイス600は、相対的時間(例えば、日の出)からオフセットを加える又は引くオプションを提供する、図18Cに示すユーザインタフェース画面1810−3を表示する。
デバイス600は、時間に基づく基準の指定に対応するユーザ入力(例えば、図18A〜図18Cに示すユーザインタフェースオブジェクトのうちの1つ以上の上のタップ)を検出し、これに応じて、選択された時間に基づく基準を、自動化プロファイルに関連付けられた少なくとも1つのアフォーダンスを制御するための自動化プロファイルの自動化基準に追加する。
いくつかの実施形態では、図18A〜図18Cに関して説明したユーザインタフェース及び時間に基づく基準は、図12A〜図12Bを参照して上述したような自動化プロファイルの基準及び/又は構成(例えば、「私が家を出る」1202−1及び「私が家に着く」1202−2)の間、提供される。逆に、いくつかの実施形態では、自動化基準は、図12Aのイベント基準1202−4「アクセサリが制御されている」を参照して説明したように、ロケーションのアクセサリの状態に部分的に基づく。(例えば、自動化基準は、アクセサリが制御されている及び/若しくはトリガされる、又はアクセサリがイベントを検出するかに基づく。)
自動化基準が確立されると、デバイス600の位置が判定される。いくつかの実施形態では、デバイス600は、例えば、GPS、WiFi、又は他の信号を介してその位置を判定する。いくつかの実施形態では、デバイス600は、外部デバイスから取得した情報に基づいてその位置を判定する。
デバイス600は、判定された位置に少なくとも部分的に基づいて、自動化基準が満たされるか否かを判定する。自動化基準が満たされるという判定に従って、デバイス600は、少なくとも1つのアクセサリを指定された状態に設定することを含む、自動化プロファイルを実施する命令を送信する。いくつかの実施形態では、自動化基準が満たされないという判定に従って、デバイス600は、自動化プロファイルを実施する命令を送信することを見合わせる。
図19は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法1900は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法1900におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法1900は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック1902で、デバイスは、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準(例えば、1202−1)の指定に対応するユーザ入力(例えば、1220−1)を検出する。任意選択的に、デバイスは、位置に基づく基準のインジケーション(例えば、1804)を有する地図ビュー(例えば、1802)を表示する。任意選択的に、位置に基づく基準は、電子デバイスが第1のロケーションから閾値距離未満にあるか否か、電子デバイスが第1のロケーションから閾値距離より離れているか否か、電子デバイスが第1のロケーションから閾値距離より離れたところからロケーションから閾値距離未満に移動したか否か、及び電子デバイスが第1のロケーションから閾値距離未満からロケーションから閾値距離より離れて移動したか否か、のうちの1つ以上を含む。
ブロック1904で、基準の指定に対応するユーザ入力を検出したことに応じて、デバイスは、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加する。任意選択的に、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準は、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態(例えば、1202−4)に部分的に基づく。
ブロック1906で、デバイスは、電子デバイスの位置を判定する。
ブロック1908で、デバイスは、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定する。
ブロック1910で、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、デバイスは、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信する。
任意選択的に、ブロック1912で、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされないという判定に従って、デバイスは、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信することを見合わせる。
任意選択的に、ブロック1914で、デバイスは、時間に基づく基準の指定に対応するユーザ入力を検出し(例えば、1202−3及び1804−1〜1804−4)、ユーザ入力を検出したことに応じて、時間に基づく基準を少なくとも1つの制御可能な外部デバイスを制御するための自動化基準に追加する。
方法1900に関して上述したプロセス(図19)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1600、2100、2300、2600、2900、及び3200は、方法1900を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図20は、説明される様々な実施形態の原理に従って構成された電子デバイス2000の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス2000の機能ブロックは、上述の技術を実行するように構成されている。デバイス2000の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図20で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図20に示すように、電子デバイス2000は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット2002、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット2004、並びにディスプレイユニット2002及び任意選択的にタッチ感知面ユニット2004に結合された処理ユニット2006を含む。いくつかの実施形態では、処理ユニット2006は、検出ユニット2008と、追加ユニット2010と、判定ユニット2012と、引き起こしユニット2014と、表示有効化ユニット2016とを含む。
処理ユニット2006は、少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく位置に基づく基準の指定に対応するユーザ入力を検出し(例えば、検出ユニット2008を用いて)、基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、少なくとも1つの制御可能な外部デバイスを制御するための、位置に基づく基準を含む自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加し(例えば、追加ユニット2010を用いて)、電子デバイスの位置を判定し(例えば、判定ユニット2012を用いて)、電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つ制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定し(例えば、判定ユニット2012を用いて)、少なくとも1つ制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つ制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす(例えば、引き起こしユニット2014を用いて)ように構成されている。
いくつかの実施形態では、処理ユニット2006は、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされないという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信することを見合わせるように更に構成されている。
いくつかの実施形態では、処理ユニット2006は、位置に基づく基準のインジケーションを有する地図ビューの表示を有効にする(例えば、表示有効化ユニット2016を用いて)ように更に構成されている。
いくつかの実施形態では、位置に基づく基準は、電子デバイスが第1のロケーションから閾値距離未満にあるか否かを含む。いくつかの実施形態では、位置に基づく基準は、電子デバイスが第1のロケーションから閾値距離より離れているか否かを含む。いくつかの実施形態では、位置に基づく基準は、電子デバイスが第1のロケーションから閾値距離より離れたところからロケーションから閾値距離未満に移動したか否かを含む。いくつかの実施形態では、位置に基づく基準は、電子デバイスが第1のロケーションから閾値距離未満からロケーションから閾値距離より離れて移動したか否かを含む。
いくつかの実施形態では、処理ユニット2006は、時間に基づく基準の指定に対応するユーザ入力を検出し(例えば、検出ユニット2008を用いて)、ユーザ入力を検出したことに応じて、時間に基づく基準を少なくとも1つの制御可能な外部デバイスを制御するための自動化基準に追加する(例えば、追加ユニット2010を用いて)ように更に構成されている。
いくつかの実施形態では、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準は、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に部分的に基づく。
図19を参照して上述した動作は、図1A〜図1B、又は図20に示す構成要素によって、任意選択的に実施される。例えば、検出する動作1902及び1914、追加する動作1904及び1914、判定する動作1906及び1908、送信する動作1910、及び見合わせる動作1912は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図21は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法2100は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法2100におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法2100は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック2102で、デバイスは、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準(例えば、1202−1〜1202−4及び1804−1〜1804−4)が満たされるか否かを判定する。任意選択的に、自動化プロファイルの基準は、少なくとも1つの制御可能な外部デバイスに関連付けられたロケーションに対する電子デバイスの位置、時刻、及び少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態のうちの1つ以上に少なくとも部分的に基づく(例えば、図12A及び図18A)。
ブロック2104で、自動化プロファイルの基準が満たされるという判定に従って、デバイスは、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーション(例えば、図12Cの1212)を含む通知(例えば、1208)を表示する。
ブロック2106で、デバイスは、ユーザ入力(例えば、アフォーダンス1212又は1214の選択)を検出する。
ブロック2108で、ユーザ入力を検出したことに応じて、デバイスは、自動化プロファイルの実施の確認に対応するユーザ入力(例えば、アフォーダンス1212の選択)に従って、自動化プロファイルの指定された状態を実施する命令を送信し、自動化プロファイルの実施の非確認に対応するユーザ入力(例えば、アフォーダンス1214の選択)に従って、自動化プロファイルの指定された状態を実施しない命令を送信する。
方法2100に関して上述したプロセス(図21)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1600、1900、2300、2600、2900、及び3200は、方法2100を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図22は、説明される様々な実施形態の原理に従って構成された電子デバイス2200の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス2200の機能ブロックは、上述の技術を実行するように構成されている。デバイス2200の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図22で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図22に示すように、電子デバイス2200は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット2202、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット2204、並びにディスプレイユニット2202及び任意選択的にタッチ感知面ユニット2204に結合された処理ユニット2206を含む。いくつかの実施形態では、処理ユニット2206は、判定ユニット2208と、表示有効化ユニット2210と、検出ユニット2212と、引き起こしユニット2214と、を含む。
処理ユニット2206は、少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し(例えば、判定ユニット2208を用いて)、自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知の表示を有効にし(例えば、表示有効化ユニット2210を用いて)、ユーザ入力を検出し(例えば、検出ユニット2212を用いて)、ユーザ入力を検出したことに応じて、自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令の送信を引き起こし(例えば、引き起こしユニット2214を用いて)、自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令の送信を引き起こす(例えば、引き起こしユニット2214を用いて)、ように構成されている。
いくつかの実施形態では、自動化プロファイルの基準は、少なくとも1つの制御可能な外部デバイスに関連付けられたロケーションに対する電子デバイスの位置に少なくとも部分的に基づく。いくつかの実施形態では、自動化プロファイルの基準は、時刻に少なくとも部分的に基づく。いくつかの実施形態では、自動化プロファイルの基準は、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に少なくとも部分的に基づく。
図21を参照して上述した動作は、図1A〜図1B、又は図22に示す構成要素によって、任意選択的に実施される。例えば、判定する動作2102、表示する動作2104、検出する動作2106、及び送信する動作2108は、イベントソート部170、イベント認識部180、及びイベント処理部190によって任意選択的に実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図23は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法2300は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法2300におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法2300は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック2302で、デバイスは、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現(例えば、620−1)を表示する。任意選択的に、制御可能な外部デバイスの表現は、制御可能な外部デバイスの現在の状態のインジケーションを含む。いくつかの実施形態では、複数の状態の状態は、連続的である(例えば、図6J〜図6K)。いくつかの実施形態では、複数の状態の状態は、離散的である(例えば、図6D〜図6I)。いくつかの実施形態では、制御可能な外部デバイスは、色が調節可能な電球であり、複数の状態は、複数の色を含む(例えば、図6K)。
ブロック2304では、デバイスは、制御可能な外部デバイスの選択に対応する第1のユーザ入力(例えば、630−1)を検出する。
ブロック2306で、デバイスは、第1のユーザ入力が入力基準を満たすか否かを判定する。
ブロック2308で、第1のユーザ入力が入力基準を満たさないという判定に従って、デバイスは、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信する(例えば、図6B〜図6Cの620−1)。
ブロック2310で、第1のユーザ入力が入力基準を満たすという判定に従って、デバイスは、制御可能な外部デバイスの複数の状態を示すアフォーダンス(例えば、608)を表示し、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力(例えば、630−2)を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信する。
任意選択的に、ブロック2312で、デバイスは、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、アフォーダンスに対応しないディスプレイ上の位置(例えば、612)の選択に対応する第3のユーザ入力を検出し、第3のユーザ入力を検出したことに応じて、アフォーダンスを表示することを停止する。
方法2300に関して上述したプロセス(図23)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1600、1900、2100、2600、2900、及び3200は、方法2300を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図24は、説明される様々な実施形態の原理に従って構成された電子デバイス2400の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス2400の機能ブロックは、上述の技術を実行するように構成されている。デバイス2400の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図24で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図24に示すように、電子デバイス2400は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット2402、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット2404、並びにディスプレイユニット2402及び任意選択的にタッチ感知面ユニット2404に結合された処理ユニット2406を含む。いくつかの実施形態では、処理ユニット2406は、表示有効化ユニット2408と、検出ユニット2410と、判定ユニット2412と、引き起こしユニット2414とを含む。
処理ユニット2406は、複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現の表示を有効にし(例えば、表示有効化ユニット2408を用いて)、制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し(例えば、検出ユニット2410を用いて)、第1のユーザ入力が入力基準を満たすか否かを判定し(例えば、判定ユニット2412を用いて)、第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令の送信を引き起こし(例えば、引き起こしユニット2414を用いて)、第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスの表示を有効にし(例えば、表示有効化ユニット2408を用いて)、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令の送信を引き起こし(例えば、引き起こしユニット2414を用いて)、ように構成されている。
いくつかの実施形態では、複数の状態の状態は、連続的である。いくつかの実施形態では、複数の状態の状態は、離散的である。いくつかの実施形態では、制御可能な外部デバイスは、色が調節可能な電球であり、複数の状態は、複数の色を含む。いくつかの実施形態では、制御可能な外部デバイスの表現は、制御可能な外部デバイスの現在の状態のインジケーションを含む。
いくつかの実施形態では、処理ユニット2406は、制御可能な外部デバイスの複数の状態を示すアフォーダンスが表示されている間に、アフォーダンスに対応しないディスプレイ上の位置の選択に対応する第3のユーザ入力を検出し(例えば、検出ユニット2410を用いて)、第3のユーザ入力を検出したことに応じて、アフォーダンスの表示の停止を引き起こす(例えば、引き起こしユニット2414を用いて)ように更に構成されている。
図23を参照して上述した動作は、図1A〜図1B、又は図24に示す構成要素によって、任意選択的に実施される。例えば、表示する動作2302及び2310、検出する動作2304、2310、及び2312、判定する動作2306、並びに送信する動作2308及び2310は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図25は、いくつかの実施形態による、制御可能な外部デバイスを管理するための例示的なユーザインタフェースを示す。これらの図中のユーザインタフェースは、図26でのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
いくつかの実施形態では、デバイス600は、少なくとも1つの指定された部屋を含むロケーション内の第1の位置のその位置を判定する。いくつかの実施形態では、デバイス600の位置は、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される。デバイス600の位置を判定するための例示的な技術としては、既知の位置を有するデバイスの第1のセットからの信号(単数又は複数)の強度を既知の位置を有するデバイスの第2のセットからの信号(単数又は複数)の強度と比較すること、(2)既知の位置を有するWiFiソースからの信号の強度を判定すること(例えば、信号の強度は、ロケーションのレイアウトに基づいて位置を判定するために使用される半径に対応する)、(3)ビーコンデバイスからのBluetooth信号(例えば、Bluetooth low energy信号)を検出すること(例えば、Apple Inc.(Cupertino,California)によって開発されたiBeaconプロトコル)、(4)推測航法(例えば、前に判定された位置を使用して、その位置を、例えば、デバイス600のセンサによって判定されるように、経過した時間及びコースにわたって既知又は推定される速度に基づいて進めること)、及びGPSが挙げられる。
第1の位置を判定した後で、デバイス600は、第1の位置がロケーションの第1の部屋に対応することを判定する。第1の位置が第1の部屋に対応することを判定したことに応じて、デバイス600は、第1の部屋に関連付けられたアクセサリの表現を表示する。いくつかの実施形態では、デバイス600はまた、部屋の判定に基づいて、判定された部屋に関連付けられた少なくとも1つのアクセサリの指定された状態に関するデータを含むシーンプロファイルの表現を表示する。
図25は、位置がロケーションの寝室に対応することを判定したことに応じて表示された例示的なユーザインタフェース画面2500を示す。ユーザインタフェース画面は、寝室に関連付けられた3つのアクセサリの表現2502、及び寝室に関連付けられたアクセサリを含む3つのシーンプロファイルの表現2504を含む。アクセサリのそれぞれの表現2502は、対応するアクセサリの現在の状態(例えば、72度に設定)、又は表現の選択が引き起こすことになるアクション(例えば、いくつかの状況では現在の状態を意味する、オフにする又はオンにする)を示す。いくつかの実施形態では、表現2504は、図6B〜図6Kを参照して上述したような、対応するアクセサリの状態を制御するためのアフォーダンスを含む。いくつかの実施形態では、シーンプロファイルの表現2504を選択して、シーンプロファイルを実施することができる。
いくつかの実施形態では、デバイス600は、その位置、及び位置がロケーション内の指定された部屋に対応するか否かを定期的に判定する。いくつかの実施形態では、デバイス600は、その位置が部屋に対応することを判定すると、部屋内のアクセサリの表現を自動的に表示する(例えば、ユーザによって促されることなく)。いくつかの実施形態では、デバイス600は、位置が部屋に対応することを判定したことに応じて、通知を表示する。通知は、ユーザによって選択して、判定された部屋に関連付けられたアクセサリを表示することができる。これらの技術により、部屋に接近する又は入ると、ユーザが部屋内のアクセサリを素早くかつ容易に制御することを可能にすることができる。
任意選択的に、第1の部屋に関連付けられたアクセサリの表現を表示している間に、デバイス600は、ユーザ入力を検出し、ユーザ入力を検出したことに応じて、ロケーションのアクセサリを制御するためのアプリケーションを開く。例えば、図25に示すように、ユーザインタフェース画面2500は、ロケーション内の他の部屋に関連付けられたアクセサリの全てを制御するためのアクセスを提供するアプリケーションを開くアフォーダンス2506を含む。いくつかの実施形態では、アフォーダンス2506の選択によって起動されるアプリケーションは、このアプリケーション、又は図6A〜図6Sを参照して説明したアプリケーションと同様のユーザインタフェースを有するアプリケーションである。このように、デバイス600は、デバイス600が部屋を誤って判定する場合に異なる部屋内のアクセサリを制御するユーザの負担を潜在的に低減することができる。
いくつかの実施形態では、デバイス600は、ユーザ入力に応じて、その位置を判定し、部屋を判定し、及び/又は判定された部屋に関連付けられたアクセサリの表現を表示する。例えば、図9B〜図9C及び図12Bを参照して上述したようにシーンプロファイル又は自動化プロファイルに対するアクセサリを選択すると、デバイス600は、任意選択的に、判定された部屋に関連付けられたアクセサリ又はシーンプロファイルを、他の部屋内のアクセサリ及びシーンプロファイルの上に表示する。例えば、図9Cに関して、いくつかの実施形態では、デバイス600がそれがバスルーム内に配置されていることを判定する場合、バスルームの表題並びに表現908−4及び908−5が、バスルームの表題及び表現908−1〜908−3の上に現れる。
いくつかの実施形態では、第1の部屋に関連付けられたアクセサリの表現を表示した後で、デバイス600は、ロケーション内の第2の位置のその位置を判定し、第2の位置が、第1の部屋とは異なるロケーション内の第2の部屋に対応することを判定する。第2の位置が第2の部屋に対応することを判定したことに応じて、デバイス600は、第1の部屋に関連付けられたアクセサリの表現を表示することを停止し、第2の部屋に関連付けられたアクセサリの表現を表示する。
図26は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するための方法を示すフロー図である。方法2600は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法2600におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法2600は、制御可能な外部デバイスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック2602で、デバイスは、少なくとも1つの指定された部屋を含むロケーション内のデバイスの第1の位置を判定する。任意選択的に、デバイスの位置は、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される。
ブロック2604で、デバイスは、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定する。
ブロック2606で、第1の位置が第1の部屋に対応することを判定したことに応じて、デバイスは、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現(例えば、2502)を表示する。任意選択的に、第1の制御可能な外部デバイスの表現は、第1の制御可能な外部デバイスの現在の状態を示す。任意選択的に、デバイスは、部屋の判定に基づいて、判定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスを含む、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現を表示する。
任意選択的に、ブロック2608で、デバイスは、第1のユーザ入力(例えば、表現2502のうちの1つの選択)を検出し、第1のユーザ入力を検出したことに応じて、第1の制御可能な外部デバイスを第1の状態に設定する命令を送信する。
任意選択的に、ブロック2610で、デバイスは、第1の制御可能な外部デバイスの表現を表示している間に、第2のユーザ入力(例えば、アフォーダンス2506の選択)を検出し、第2のユーザ入力を検出したことに応じて、ロケーションの複数の制御可能な外部デバイスを制御するためのアプリケーション(例えば、610−1)を開く。
任意選択的に、ブロック2612で、デバイスは、ロケーション内の電子デバイスの第2の位置を判定し、第2の位置が第1の部屋とは異なる少なくとも1つの指定された部屋の第2の部屋に対応することを判定し、第2の位置が第2の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示することを停止し、第2の部屋に関連付けられた第2の制御可能な外部デバイスの表現を表示する。
方法2600に関して上述したプロセス(図26)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1600、1900、2100、2300、2900、及び3200は、方法2600を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図27は、説明される様々な実施形態の原理に従って構成された電子デバイス2700の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス2700の機能ブロックは、上述の技術を実行するように構成されている。デバイス2700の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図27で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図27に示すように、電子デバイス2700は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット2702、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット2704、並びにディスプレイユニット2702及び任意選択的にタッチ感知面ユニット2704に結合された処理ユニット2706を含む。いくつかの実施形態では、処理ユニット2706は、判定ユニット2708と、表示有効化ユニット2710と、引き起こしユニット2712と、検出ユニット2714と、開始ユニット2716と、を含む。
処理ユニット2706は、デバイスは、少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定し(例えば、判定ユニット2708を用いて)、第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定し(例えば、判定ユニット2708を用いて)、第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現の表示を有効にする(例えば、表示有効化ユニッ2710トを用いて)、ように構成されている。
いくつかの実施形態では、処理ユニット2706は、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現が表示された後で、ロケーション内の電子デバイスの第2の位置を判定し(例えば、判定ユニット2708を用いて)、第2の位置が第1の部屋とは異なる少なくとも1つの指定された部屋の第2の部屋に対応することを判定し(例えば、判定ユニット2708を用いて)、第2の位置が第2の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現の表示の停止を引き起こし(例えば、引き起こしユニット2712を用いて)、第2の部屋に関連付けられた第2の制御可能な外部デバイスの表現の表示を有効にする(例えば、表示有効化ユニット2710を用いて)ように更に構成されている。いくつかの実施形態では、第1の制御可能な外部デバイスの表現は、第1の制御可能な外部デバイスの現在の状態を示す。
いくつかの実施形態では、処理ユニット2706は、第1のユーザ入力を検出し(例えば、検出ユニット2714を用いて)、第1のユーザ入力を検出したことに応じて、第1の制御可能な外部デバイスを第1の状態に設定する命令の送信を引き起こす(例えば、引き起こしユニット2712を用いて)ように更に構成されている。
いくつかの実施形態では、電子デバイスの位置は、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される。
いくつかの実施形態では、処理ユニット2706は、第1の制御可能な外部デバイスの表現が表示されている間に、第2のユーザ入力を検出し(例えば、検出ユニット2714を用いて)、第2のユーザ入力を検出したことに応じて、ロケーションの複数の制御可能な外部デバイスを制御するためのアプリケーションを開く(例えば、開始ユニット2716を用いて)ように更に構成されている。
いくつかの実施形態では、処理ユニット2706は、部屋の判定に基づいて、判定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスを含む、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現の表示を有効にする(例えば、表示有効化ユニット2710を用いて)ように更に構成されている。
図26を参照して上述した動作は、図1A〜図1B、又は図27に示す構成要素によって、任意選択的に実施される。例えば、判定する動作2602、2604、及び2612、表示する動作2606及び2612、検出する動作2608及び2610、送信する動作2608、並びに開く動作2610は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図28A〜図28Eは、いくつかの実施形態による、電子デバイスにロケーションプロファイルへのアクセスを提供するための例示的なユーザインタフェースを示す。これらの図中のユーザインタフェースは、図29でのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
図28Aは、デバイス600上に表示されたユーザインタフェース画面2810−1を示す。ユーザインタフェース画面2810−1は、ロケーションに関連付けられ、個人連絡先をロケーションのロケーションプロファイルにアクセスするように招待するオプションを示すアフォーダンス2802を含む。
アフォーダンス2802の選択に応じて、デバイス600は、図28Bに示すように、個人連絡先のリストを表示する。デバイス600は、第1の個人連絡先(例えば、Jeffery)の選択に対応するユーザ入力2820−1を検出する。第1の個人連絡先の選択の後で、デバイス600は、図28Cに示すように、ユーザインタフェース画面2810−2を表示する。ユーザインタフェース画面は、アクセスパラメータを表すアフォーダンス2804、並びに、ユーザのアクセスを更に指定するパラメータを表すアフォーダンス2806−1及び2806−2を含む。アクセスパラメータは、選択された第1の個人連絡先に関連付けられたデバイス又はユーザプロファイルがロケーションに関連付けられたロケーションプロファイルへのアクセスを有するか否かを判定する。いくつかの実施形態では、ロケーションプロファイルへのアクセスは、ユーザがプロファイルの情報(例えば、ロケーションに関連付けられたアクセサリ及び/又は人々の現在の状態)のいずれかを見ること、及びロケーションに関連付けられたアクセサリを制御することを可能にする。アフォーダンス2806−1に関連付けられたパラメータは、選択された第1の個人連絡先に関連付けられたデバイス又はユーザプロファイルの編集特権が例えば、アクセサリの状態、自動化プロファイル、及びシーンプロファイルを編集する機能を含むか否かを判定する。アフォーダンス2806−2に関連付けられたパラメータは、選択された連絡先のリモートアクセス特権を判定する。
デバイス600は、アクセスアフォーダンス2804並びに/又はアフォーダンス2806−1及び2806−2の選択に対応するユーザ入力を検出し、選択されたパラメータに基づいて第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスを許可する。いくつかの実施形態では、アクセスを許可することは、別のデバイス(例えば、サーバ)に第1の個人連絡先に関連付けられた外部デバイスがロケーションプロファイルにアクセスすることを可能にする命令を送信することを含む。
デバイス600はまた、ロケーションプロファイルにアクセスする招待を含むデータを第1の個人連絡先に関連付けられた外部デバイスに送信する。図28Dは、招待の例示的な通知2808を表示する外部デバイス2850を示し、図28Eは、外部デバイス2850上に表示された招待2812の一実施形態を示す。任意選択的に、招待は、アクセスパラメータが選択される前又は後のいずれかに送信される。いくつかの実施形態では、第1の個人連絡先に関連付けられた外部デバイスに招待を送信した後で、デバイス600は、第1の個人連絡先がロケーションに招待されたというインジケーションを表示する。例えば、ともに上述した図6Aのホーム画面610−1及び/又は人々タブを表示する図6Sのユーザインタフェース画面610−7は、任意選択的に、個人連絡先がロケーションに招待されたというインジケーション(例えば、図6Sのユーザインタフェース画面610−7上の644−3「Cory」)を含む。
任意選択的に、招待は、外部デバイスにロケーションプロファイルへのアクセスを許可する前又は後のいずれかに送信される。いくつかの実施形態では、招待は、招待を辞退する又は受け入れる要求(例えば、それぞれ図28Eのアフォーダンス2814及び2816)を含む。いくつかの実施形態では、招待は、ロケーションプロファイルへのアクセスを許可する前に送信され、デバイス600は、第1の個人連絡先が招待を受け入れたことを示すデータを受信し、その後、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションプロファイルへのアクセスが第1の個人連絡先に関連付けられた外部デバイスに許可される。いくつかの実施形態では、更に、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、デバイス600は、ロケーションに対する第1の個人連絡先に関連付けられた外部デバイスの物理的相対位置のインジケーションを表示する。例えば、ともに上述したホーム画面610−1及び/又は人々タブを表示する図6Sのユーザインタフェース画面610−7は、任意選択的に、個人連絡先が「在宅」又は「留守」というインジケーションを含む。いくつかの実施形態では、ホーム画面610−1上の連絡先の表現はそれ自体により、連絡先がロケーションにいることを示す(例えば、図6Sのユーザインタフェース画面610−7上の644−2「Steve」も参照)。
図29は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスのシステムへのアクセスを管理するための方法を示すフロー図である。方法2900は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法2900におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法2900は、制御可能な外部デバイスのシステムへのアクセスを管理するための直感的方法を提供する。この方法は、制御可能な外部デバイスのシステムへのアクセスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスのシステムへのアクセスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
ブロック2902で、デバイスは、第1の個人連絡先を表す第1のアフォーダンスを表示する(例えば、図28B)。
ブロック2904で、デバイスは、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力(例えば、2820−1)を検出する。
ブロック2906で、デバイスは、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンス(例えば、2804)を表示する。
ブロック2908で、デバイスは、第2のアフォーダンスの選択に対応する第2のユーザ入力(例えば、アフォーダンス2804の選択)を検出する。
ブロック2910で、デバイスは、第1の個人連絡先に関連付けられた外部デバイスに、アクセスパラメータに基づくロケーションプロファイルへのアクセスを許可する。
ブロック2912で、デバイスは、ロケーションプロファイルにアクセスする招待(例えば、2808及び2812)を含むデータを第1の個人連絡先に関連付けられた外部デバイスに送信する。いくつかの実施形態では、招待は、ロケーションプロファイルへのアクセスを許可する前に送信され、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションプロファイルへのアクセスが第1の個人連絡先に関連付けられた外部デバイスに許可される。任意選択的に、更に、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、デバイスは、ロケーションに対する第1の個人連絡先に関連付けられた外部デバイスの物理的相対位置のインジケーションを表示する。
任意選択的に、ブロック2914で、第1の個人連絡先に関連付けられた外部デバイスに招待を送信した後で、デバイスは、第1の個人連絡先がロケーションに招待されたというインジケーションを表示する(例えば、図6S)。
方法2900に関して上述したプロセス(図29)の詳細はまた、上述及び後述する方法にも、類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1600、1900、2100、2300、2600、及び3200は、方法2900を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図30は、説明される様々な実施形態の原理に従って構成された電子デバイス3000の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス3000の機能ブロックは、上述の技術を実行するように構成されている。デバイス3000の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図30で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図30に示すように、電子デバイス3000は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット3002、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット3004、並びにディスプレイユニット3002及び任意選択的にタッチ感知面ユニット3004に結合された処理ユニット3006を含む。いくつかの実施形態では、処理ユニット3006は、表示有効化ユニット3008と、検出ユニット3010と、引き起こしユニット3012と、受信ユニット3014とを含む。
処理ユニット3006は、第1の個人連絡先を表す第1のアフォーダンスの表示を有効にし(例えば、表示有効化ユニット3008を用いて)、第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し(例えば、検出ユニット3010を用いて)、ロケーションに関連付けられた、ロケーションの制御可能な外部デバイスに関する情報を含むロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスの表示を有効にし(例えば、表示有効化ユニット3008を用いて)、第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し(例えば、検出ユニット3010を用いて)、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可させ(例えば、引き起こしユニット3012を用いて)、第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信させる(例えば、引き起こしユニット3012を用いて)、ように構成されている。
いくつかの実施形態では、処理ユニット3006は、第1の個人連絡先に関連付けられた外部デバイスへの招待が送信された後で、第1の個人連絡先がロケーションに招待されたというインジケーションの表示を有効にする(例えば、表示有効化ユニット3008を用いて)ように更に構成されている。
いくつかの実施形態では、招待は、ロケーションプロファイルへのアクセスを許可する前に送信され、処理ユニットは、第1の個人連絡先が招待を受け入れたことを示すデータを受信し(例えば、受信ユニット3014を用いて)、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションプロファイルへのアクセスが第1の個人連絡先に関連付けられた外部デバイスに許可される、ように更に構成されている。
いくつかの実施形態では、処理ユニット3006は、更に、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションに対する第1の個人連絡先に関連付けられた外部デバイスの物理的相対位置のインジケーションの表示を有効にする(例えば、表示有効化ユニット3008を用いて)ように更に構成されている。
図29を参照して上述した動作は、図1A〜図1B、又は図30に示す構成要素によって、任意選択的に実施される。例えば、表示する動作2902、2906、及び2914、検出する動作2904及び2908、許可する動作2910、並びに送信する動作2912は、任意選択的に、イベントソート部170、イベント認識部180、及びイベント処理部190により実行される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図31A〜図31Bは、いくつかの実施形態による、制御可能な外部デバイス管理するためのユーザインタフェースの表示をカスタマイズするための例示的なユーザインタフェースを示す。具体的には、図31A〜図31Bに示すユーザインタフェース画面は、ユーザがユーザに提示されるホーム画面(例えば、図6Aの610−1)をカスタマイズすることを可能にすることができる。これらの図中のユーザインタフェースは、図32でのプロセスを含めた、以下で説明されるプロセスを例示するために使用される。
いくつかの実施形態では、デバイス600は、ロケーションに関する情報を含み、かつロケーションの少なくとも1つのアクセサリに関する情報を含むデータを受信する。いくつかの実施形態では、情報は、例えば、名前、住所、人々、壁紙、建築された年、及び/又はメモ、並びに、ロケーションに関連付けられたアクセサリ、シーンプロファイル、自動化プロファイルなどの情報を含む、ロケーションのロケーションプロファイルを含む。
データを受信したことに従って、デバイス600は、ロケーションのアクセサリのうちの少なくとも1つに対応するアフォーダンスを表示する。図31Aは、データを受信したことに従って表示された例示的なユーザインタフェース画面3110−1を示す。ユーザインタフェース画面3110−1は、ロケーションに関連付けられたアクセサリのリスト、及び、任意選択的にアクセサリを指定する(例えば、「お気に入りのアクセサリ」として)アクセサリに対応するアフォーダンス3102−1〜3102−5を含む。アクセサリは、部屋に従ってグループ化される。
デバイス600は、アフォーダンス3102−1〜3102−5のうちの1つ以上の選択に対応するユーザ入力を検出する。これに応じて、デバイス600は、ロケーションのインジケーション、及び選択されたアフォーダンスに関連付けられたアクセサリの表現を含むユーザインタフェース画面を表示する。例えば、アフォーダンス3102−1の選択に応じて、デバイス600は、ロケーションのインジケーション及び現在ロケーションにいると判定されたデバイスに関連付けられた人々の表現などの追加情報も含む、図6Aに示すホーム画面610−1の「お気に入りのアクセサリ」の表題の下にアクセサリ1の表現を表示する。
いくつかの実施形態では、デバイス600は、ロケーションに関連付けられた少なくとも1つのシーンプロファイルに対応するアフォーダンスを表示する。図31Bは、シーンプロファイルのリスト、並びに、任意選択的にシーンプロファイルを指定する(例えば、「お気に入りのシーン」として)ためのシーンプロファイルに対応するアフォーダンス3102−1及び3104−2を含む例示的なユーザインタフェース画面3110−2を示す。任意選択的に、デバイス600は、アフォーダンス3102−1及び3104−2のうちの1つ又は両方の選択に対応するユーザ入力を検出する。これに応じて、デバイス600は、ロケーションのインジケーション、及び選択されたアフォーダンス(単数又は複数)に関連付けられたシーンプロファイルの表現を含むユーザインタフェース画面を表示する。例えば、アフォーダンス3104−2の選択に応じて、デバイス600は、図6Aに示すホーム画面610−1の「お気に入りのシーン」の表題の下にシーン2の表現を表示する。
いくつかの実施形態では、デバイス600は、ロケーションに関する情報を取得する招待を表すデータを受信し(例えば、図28E)、次に、招待を受け入れた後で、ロケーションに関する情報を受信する。例えば、いくつかの実施形態では、ロケーションに関する情報を取得する招待を表すデータを受信したことに応じて、デバイス600は、図28Eに示す招待を表示する。次に、デバイス600は、招待を受け入れた(例えば、アフォーダンス2816を選択することにより)後で、ロケーションに関する情報を受信する。
図32は、いくつかの実施形態に係る、電子デバイスを使用して制御可能な外部デバイスを管理するためのユーザインタフェースの表示をカスタマイズするための方法を示すフロー図である。方法3200は、ディスプレイと、任意選択的にタッチ感知面とを備えたデバイス(例えば、100、300、500、又は600)にて実行される。方法3200におけるいくつかの動作は任意選択的に組合せられ、いくつかの動作の順序は任意選択的に変更され、いくつかの動作は任意選択的に省略される。
後述するように、方法3200は、制御可能な外部デバイスを管理するためのユーザインタフェースの表示をカスタマイズするための直感的方法を提供する。この方法は、制御可能な外部デバイスを管理するためのユーザの認識的負担を軽減し、それによって、より効率的なヒューマン−マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが制御可能な外部デバイスをより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
任意選択的に、ブロック3202で、デバイスは、ロケーションに関する情報を取得する招待を表すデータを受信する(例えば、図28D〜図28Eの2808及び2812)。
ブロック3204で、デバイスは、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信する(例えば、3110−1)。任意選択的に、ロケーションに関する情報は、招待を受け入れた後で受信される。
ブロック3206で、データを受信したことに従って、デバイスは、第1の制御可能な外部デバイスに対応するアフォーダンス(例えば、3102−1)を表示する。任意選択的に、第1の制御可能な外部デバイスに対応するアフォーダンスは、第1の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイル(例えば、3104−1)に対応する。
ブロック3208で、デバイスは、アフォーダンスの選択に対応する第1のユーザ入力(例えば、アフォーダンス3102−1〜3102−5、又は3104−1〜3104−2の選択)を検出する。
ブロック3210で、第1のユーザ入力を検出したことに応じて、デバイスは、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現(例えば、620−1)を含むユーザインタフェース画面を表示する。任意選択的に、ユーザインタフェース画面上の第1の制御可能な外部デバイスの表現は、シーンプロファイルの表現(例えば、640−1)を含む。任意選択的に、ユーザインタフェース画面は、ロケーションのインジケーション、及び現在ロケーションにあるリモート電子デバイスに関連付けられた個人の表現を更に含む。
なお、方法3200に関して上述したプロセス(例えば、図32)の詳細はまた、上述した方法にも類似の方式で適用可能であることに留意されたい。例えば、方法700、1000、1300、1600、1900、2100、2300、2600、及び2900は、方法3200を参照して上述した、様々な方法の特性のうちの1つ以上を任意選択的に含む。
いくつかの実施形態によれば、図33は、説明される様々な実施形態の原理に従って構成された電子デバイス3300の、例示的な機能ブロック図を示す。いくつかの実施形態によれば、電子デバイス3300の機能ブロックは、上述の技術を実行するように構成されている。デバイス3300の機能ブロックは、説明される様々な実施例の原理を実行するために、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組合せによって、任意選択的に実装される。図33で説明する機能ブロックが、説明される様々な実施例の原理を実施するために、任意選択的に、組み合わされ、又はサブブロックに分離されることが当業者に理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組合せ若しくは分離、又は更なる定義を任意選択的にサポートする。
図33に示すように、電子デバイス3300は、グラフィックユーザインタフェースを表示するように構成されたディスプレイユニット3302、任意選択的に、接触を受けるように構成されたタッチ感知面ユニット3304、並びにディスプレイユニット3302及び任意選択的にタッチ感知面ユニット3304に結合された処理ユニット3306を含む。いくつかの実施形態では、処理ユニット3306は、受信ユニット3308、表示有効化ユニット3310、及び検出ユニット3312を含む。
処理ユニット3306は、ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し(例えば、受信ユニット3308を用いて)、データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示し(例えば、表示有効化ユニット3310を用いて)、アフォーダンスの選択に対応する第1のユーザ入力を検出し(例えば、検出ユニット3312を用いて)、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する(例えば、表示有効化ユニット3310を用いて)、ように構成されている。
いくつかの実施形態では、第1の制御可能な外部デバイスに対応するアフォーダンスは、シーンプロファイルに対応し、シーンプロファイルは、第1の制御可能な外部デバイスの指定された状態に関するデータを含み、ユーザインタフェース画面上の第1の制御可能な外部デバイスの表現は、シーンプロファイルの表現を含む。
いくつかの実施形態では、処理ユニット3306は、ロケーションに関する情報を取得する招待を表すデータを受信する(例えば、受信ユニット3308を用いて)ように更に構成されており、ロケーションに関する情報は、招待を受け入れた後で受信される。
いくつかの実施形態では、ユーザインタフェース画面は、ロケーションのインジケーション、及び現在ロケーションにあるリモート電子デバイスに関連付けられた個人の表現を更に含む。
図32を参照して上述した動作は、図1A〜図1B、又は図33に示す構成要素によって、任意選択的に実施される。例えば、受信する動作3202及び3204、表示する動作3206及び3210、並びに検出する動作3208は、イベントソート部170、イベント認識部180及びイベント処理部190によって、任意選択的に実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1のそれぞれのイベント認識部180は、そのイベント情報を、それぞれのイベント定義186と比較して、タッチ感知面上の第1の場所での第1の接触が、ユーザインタフェース上のアフォーダンスのアクティブ化などの、既定のイベント又はサブイベントに対応するか否かを判定する。対応する既定のイベント又はサブイベントが検出されると、イベント認識部180は、そのイベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176若しくはオブジェクト更新部177を任意選択的に利用する又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他のプロセスが図1A〜図1Bに示された構成要素に基づいてどのように実施することができるかは明らかであろう。
図34A〜図34Kは、いくつかの実施形態による、制御可能な外部デバイスを管理するための追加のユーザインタフェースを示す。図34Aは、タッチ感知ディスプレイ3402及び回転可能入力機構3404を含む、上述したデバイス500の特徴の一部又は全てを有する電子デバイス3400を示す。いくつかの実施形態では、電子デバイス3400は、上述したデバイス100又はデバイス300の特徴の一部又は全てを含む。図34Aでは、デバイス3400は、図6Aを参照して上述したロケーション「Ellsworth St.」に対するロケーションプロファイルに関する情報を表示する。より具体的には、デバイス3400は、ロケーションに関連付けられたアクセサリの表現3406−1を表示する。いくつかの実施形態では、表現3406−1は、例えば、図6Aの表現620−1などの上述したアクセサリ表現の特徴の一部又は全てを提供する。例えば、ユーザは、表現3406−1上のタッチ入力を提供して、アクセサリ1の状態を制御することができる。いくつかの実施形態では、デバイス3400は、一度にアクセサリの単一の表現のみを表示する。
図34Bは、シーンプロファイルの表現3408−1及び3408−1を表示しているデバイス34を示す。アクセサリ表現3406−1と同様に、いくつかの実施形態では、表現3408−1及び3408−1は、例えば、図6Aの表現640−1などの上述したシーンプロファイルの表現の特徴の一部又は全てを提供する。いくつかの実施形態では、デバイス3400は、一度にアクセサリの表現又はシーンプロファイルの表現のみを表示する。
図34Cは、デバイス3400上のシーンプロファイルの追加の表現にアクセスするための1つの例示的な技術を示す。デバイス3400は、回転可能入力機構3404の回転に対応するユーザ入力3410−1を受信する。ユーザ入力3410−1に応じて、デバイス3400は、表示をスクロールして、第3のシーンプロファイルの表現3408−3の一部分を表示する。いくつかの実施形態では、ユーザ入力3410−1は、表現3408−3が完全に表示される前に停止する。図34Dに示すように、デバイス3400は、1つ以上の表現が部分的に表示されていることを判定し、これに応じて、表示をスクロールし続けて、完全な2つのシーンプロファイルの表現3408−2及び3408−3を表示する。いくつかの実施形態では、デバイス3400は、ユーザ入力に続いて単一のアクセサリの表現のみが表示されるように、アクセサリの表現に対して同様な技術を実行する。
図34E〜図34Fでは、デバイス3400は、天井灯アクセサリの表現3406−2を表示する。表現3406−2は、アフォーダンス3410を含む。いくつかの実施形態では、アフォーダンス3410上のユーザ入力(例えば、タップ)に応じて、デバイス3400は、天井灯アクセサリの状態を設定するための制御アフォーダンスを表示する。いくつかの実施形態では、制御アフォーダンスは、図6C〜図6Kを参照して上述した制御アフォーダンスのうちの1つである。図34Eでは、天井灯は、80パーセントの輝度に設定されている。図34Fは、天井灯アクセサリがオフにされたときのデバイス3400の表示を示す。図34Eと比較して、表示は、より暗く又は陰影を付けられ、アクセサリがオフ状態にあることを示す。
図34Gは、サーモスタットアクセサリに対応する制御アフォーダンス3412を示す。垂直の矢印によって告発されているように、制御アフォーダンス3412を調整して、上側温度(例えば、74度)及び下側温度(例えば、64度)を設定することができる。いくつかの実施形態では、図6Jの制御アフォーダンス621と同様に、制御アフォーダンス3412は、アフォーダンス上の位置でタップして、上側及び下側温度を設定することができる。いくつかの実施形態では、ユーザは、バー3414の上側又は下側の縁部をドラッグして、上側及び下側温度をそれぞれ調整することができる。いくつかの実施形態では、デバイス3400は、図34Hに示すように、サーモスタットのモードを選択するためのインタフェースを提供する。いくつかの実施形態では、デバイス3400は、ディスプレイ上の水平スワイプに応じて、図34G及び図34Hに示すインタフェース間で切り替える。
図34Iは、デバイス600上に表示された通知の一実施形態を示す。上述したように、いくつかの実施形態では、アクセサリがアクティブにされると、デバイス600は、アクセサリがアクティブにされたことを示す通知を表示し、アクティブにされたアクセサリに関するアクセサリを制御するためのアフォーダンスを提供する。図34Iは、ドアベルのアクティブ化に応じて表示された例示的な通知を示す。ドアベルが鳴らされると、デバイス600は、正面ポーチ上のカメラによってキャプチャされた画像(3416−1)、及び、選択して(例えば、タップ入力により)、ドアをロック解除し(3416−2)、インターコムシステムをアクティブにし(3416−3)、ポーチ照明をオンにする(3416−4)ことができるアフォーダンスを含む通知3416を表示する。いくつかの実施形態では、画像3416−1は、カメラからのライブビデオフィードである。いくつかの実施形態では、画像3416−1は、静止画像である。いくつかの実施形態では、画像3416−1をタップすることにより、カメラからのライブビデオフィードを提供する。
図34Jは、図34Iを参照して説明したドアベルアクティブ化イベントに応じてデバイス3400上に表示された通知3418の一実施形態を示す。図34Jに示すように、デバイス3400は、最初に、正面ポーチ上のカメラによってキャプチャされた画像3418−1のみを表示する。ユーザ入力に応じて、デバイス3400は、デバイス600上の通知3416内のアフォーダンス3416−2〜3416−4と同様のドアをロック解除し、インターコムシステムをアクティブにし、ポーチ照明をオンにするためのアフォーダンスを提供する。例示した実施形態では、ユーザ入力(例えば、ディスプレイ上のスワイプ又は回転可能入力機構3404の回転)に応じて、デバイス3400は、選択して(例えば、タップにより)正面ドアをロック解除することができるアフォーダンス3418−2を表示する。更なる入力に応じて、デバイス3400は、インターコムシステムをアクティブにし、ポーチ照明をオンにするためのアフォーダンスを逐次表示する。
例示的な方法、非一時的コンピュータ可読記憶媒体、システム、及び電子デバイスは、以下の条項において示される。
1.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示することと、
第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示することと、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、
第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示することと、
制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出することと、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信することと、
を含む方法。
2.個人に関連付けられたリモート電子デバイスがロケーションに存在することを示すデータを受信することと、
リモート電子デバイスがロケーションに存在することを示すデータを受信したことに応じて、第1のユーザインタフェース画面上に、リモート電子デバイスに関連付けられた個人の表現を表示することと、
を更に含む、条項1の方法。
3.第1のユーザインタフェース画面上に、ロケーションの状態のインジケーションを表示することを更に含む、条項1又は条項2の方法。
4.第1のユーザインタフェース画面上に、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現を表示することと、
シーンプロファイルの選択に対応する第3のユーザ入力を検出することと、
第3のユーザ入力を検出したことに応じて、シーンプロファイルに関連付けられた複数の制御可能な外部デバイスの表現を表示することと、
を更に含む、条項1から3のいずれか一項に記載の方法。
5.第1のユーザインタフェース画面を表示している間に、第4のユーザ入力を検出することと、
第4のユーザ入力を検出したことに応じて、追加のシーンプロファイルを作成するオプションを表示することと、
を更に含む、条項4の方法。
6.第1のユーザインタフェース画面上に、ロケーションの制御可能な外部カメラによってキャプチャされた、制御可能な外部カメラからのライブビデオフィードに含まれた画像を表示することを更に含む、条項1から5のいずれか一項に記載の方法。
7.第1のユーザインタフェース画面を表示している間に、第5のユーザ入力を検出することと、
第5のユーザ入力を検出したことに応じて、ロケーションに関連付けられた少なくとも1つの指定された部屋の表現を表示することと、
少なくとも1つの指定された部屋の第1の指定された部屋の選択に対応する第6のユーザ入力を検出することと、
第6のユーザ入力を検出したことに応じて、第1の指定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスの表現を表示することと、
を更に含む、条項1から6のいずれか一項に記載の方法。
8.第1のユーザインタフェース画面を表示している間に、第7のユーザ入力を検出することと、
第7のユーザ入力を検出したことに応じて、ロケーションの少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの表現、並びに/又は自動化プロファイルを作成するオプションを表示することと、
を更に含む、条項1から7のいずれか一項に記載の方法。
9.第1のユーザインタフェース画面を表示している間に、第8のユーザ入力を検出することと、
第8のユーザ入力を検出したことに応じて、異なるロケーションに関連付けられた情報を見る及び/又は追加のロケーションを追加するオプションを表示することと、
を更に含む、条項1から8のいずれか一項に記載の方法。
10.第1のユーザインタフェース画面を表示している間に、第9のユーザ入力を検出することと、
第9のユーザ入力を検出したことに応じて、ロケーションのプロファイル情報を変更するオプションを表示することと、
を更に含む、条項1から9のいずれか一項に記載の方法。
11.第1のユーザインタフェース画面を表示している間に、第10のユーザ入力を検出することと、
第10のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイスをロケーションに関連付けるオプションを表示することと、
を更に含む、条項1から10のいずれか一項に記載の方法。
12.第1のユーザインタフェース画面を表示している間に、第11のユーザ入力を検出することと、
第11のユーザ入力を検出したことに応じて、ロケーションに関連付けられた人々の表現を表示することと、
を更に含む、条項1から11のいずれか一項に記載の方法。
13.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示し、
第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示し、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示し、
制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信する、
命令を含む、電子デバイス。
14.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示させ、
第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示させ、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、
第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示させ、
制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出させ、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信させる、非一時的コンピュータ可読記憶媒体。
15.ディスプレイと、
タッチ感知面と、
第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示する手段と、
第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現を表示する手段と、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、
第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示する手段と、
制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示している間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出する手段と、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令を送信する手段と、
を備える、電子デバイス。
16.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項1から12のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
17.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項1から12のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
18.ディスプレイと、
タッチ感知面と、
条項1から12のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
19.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、処理ユニットが、
第1のユーザインタフェース画面上に、ロケーションのインジケーションの表示を有効にし、
第1のユーザインタフェース画面上に、ロケーションの制御可能な外部デバイスの表現の表示を有効にし、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトの表示を有効にし、
制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトが表示されている間に、制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす、ように構成された、電子デバイス。
20.処理ユニットが、
個人に関連付けられたリモート電子デバイスがロケーションに存在することを示すデータを受信し、
リモート電子デバイスがロケーションに存在することを示すデータを受信したことに応じて、第1のユーザインタフェース画面上に、リモート電子デバイスに関連付けられた個人の表現の表示を有効にする、
ように更に構成された、条項19の電子デバイス。
21.処理ユニットが、
第1のユーザインタフェース画面上に、ロケーションの状態のインジケーションの表示を有効にするように更に構成された、条項19又は条項20の電子デバイス。
22.処理ユニットが、
第1のユーザインタフェース画面上に、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現の表示を有効にし、
シーンプロファイルの選択に対応する第3のユーザ入力を検出し、
第3のユーザ入力を検出したことに応じて、シーンプロファイルに関連付けられた複数の制御可能な外部デバイスの表現の表示を有効にする、
ように更に構成された、条項19から21のいずれか一項に記載の電子デバイス。
23.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第4のユーザ入力を検出し、
第4のユーザ入力を検出したことに応じて、追加のシーンプロファイルを作成するオプションの表示を有効にする、
ように更に構成された、条項22の電子デバイス。
24.処理ユニットが、
第1のユーザインタフェース画面上に、ロケーションの制御可能な外部カメラによってキャプチャされた、制御可能な外部カメラからのライブビデオフィードに含まれた画像の表示を有効にする、
ように更に構成された、条項19から23のいずれか一項に記載の電子デバイス。
25.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第5のユーザ入力を検出し、
第5のユーザ入力を検出したことに応じて、ロケーションに関連付けられた少なくとも1つの指定された部屋の表現の表示を有効にし、
少なくとも1つの指定された部屋の第1の指定された部屋の選択に対応する第6のユーザ入力を検出し、
第6のユーザ入力を検出したことに応じて、第1の指定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスの表現の表示を有効にする、
ように更に構成された、条項19から24のいずれか一項に記載の電子デバイス。
26.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第7のユーザ入力を検出し、
第7のユーザ入力を検出したことに応じて、ロケーションの少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの表現、並びに/又は自動化プロファイルを作成するオプションの表示を有効にする、
ように更に構成された、条項19から25のいずれか一項に記載の電子デバイス。
27.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第8のユーザ入力を検出し、
第8のユーザ入力を検出したことに応じて、異なるロケーションに関連付けられた情報を見る及び/又は追加のロケーションを追加するオプションの表示を有効にする、
ように更に構成された、条項19から26のいずれか一項に記載の電子デバイス。
28.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第9のユーザ入力を検出し、
第9のユーザ入力を検出したことに応じて、ロケーションのプロファイル情報を変更するオプションの表示を有効にする、
ように更に構成された、条項19から27のいずれか一項に記載の電子デバイス。
29.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第10のユーザ入力を検出し、
第10のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイスをロケーションに関連付けるオプションの表示を有効にする、
ように更に構成された、条項19から28のいずれか一項に記載の電子デバイス。
30.処理ユニットが、
第1のユーザインタフェース画面が表示されている間に、第11のユーザ入力を検出し、
第11のユーザ入力を検出したことに応じて、ロケーションに関連付けられた人々の表現の表示を有効にする、
ように更に構成された、条項19から29のいずれか一項に記載の電子デバイス。
31.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示することと、
第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、
第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含めることと、
を含む方法。
32.制御可能な外部デバイスの第1の表現が、制御可能な外部デバイスの現在の状態のインジケーションを含む、条項31の方法。
33.ロケーションに位置している第2の制御可能な外部デバイスの表現を表示することと、
第2の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出することと、
第2のユーザ入力が閾値基準を満たすか否かを判定することと、
第2のユーザ入力を検出したことに応じて、かつ閾値基準が満たされるという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーションを表示することと、
第2の制御可能な外部デバイスの第1の状態の選択に対応する第3のユーザ入力を検出することと、
第3のユーザ入力を検出した後で、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含めることと、
を更に含む、条項31又は条項32の方法。
34.第4のユーザ入力を検出することと、
第4のユーザ入力を検出したことに応じて、制御可能な外部デバイスの第2の表現を含む第1のユーザインタフェース画面を表示することと、
を更に含む、条項31から33のいずれか一項に記載の方法。
35.第1のユーザインタフェース画面が、制御可能な外部デバイスに関連付けられたデータをシーンプロファイルから除去すること、シーンプロファイルをテストすること、シーンプロファイルを指定すること、及びシーンプロファイルを削除することのうちの少なくとも1つを実行するオプションを含む、条項34の方法。
36.制御可能な外部デバイスの第1の表現を表示する前に、ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む既定のシーンプロファイルの表現を含む第2のユーザインタフェース画面を表示することを更に含む、条項31から35のいずれか一項に記載の方法。
37.第2のユーザインタフェース画面を表示している間に、既定のシーンプロファイルの選択に対応する第5のユーザ入力を検出することと、
第5のユーザ入力を検出したことに応じて、ロケーションの所定の制御可能な外部デバイスの複数の表現を含む第3のユーザインタフェース画面を表示することと、
を更に含む、条項36の方法。
38.ロケーションの所定の制御可能な外部デバイスの複数の表現が、所定の制御可能な外部デバイスに対する所定の状態のインジケーションを含む、条項37の方法。
39.所定の制御可能な外部デバイスが、所定の制御可能な外部デバイスに対して電子デバイスによって前に実行されたアクションに基づいて判定される、条項37又は条項38の方法。
40.所定の制御可能な外部デバイスの所定の状態が、所定の制御可能な外部デバイスに対して前に取られた、電子デバイスのユーザに関連付けられたアクションに基づいて判定される、条項37から39のいずれか一項に記載の方法。
41.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示し、
第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める、
命令を含む、電子デバイス。
42.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示させ、
第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、
第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含めさせる、
非一時的コンピュータ可読記憶媒体。
43.ディスプレイと、
タッチ感知面と、
ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示する手段と、
第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、
第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める手段と、
を備える、電子デバイス。
44.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項31から40のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
45.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項31から40のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
46.ディスプレイと、
タッチ感知面と、
条項31から40のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
47.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、処理ユニットが、
ロケーションに位置している第1の制御可能な外部デバイスの第1の表現の表示を有効にし、
第1の制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出した後で、第1の制御可能な外部デバイス及び第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める、
ように構成された、電子デバイス。
48.制御可能な外部デバイスの第1の表現が、制御可能な外部デバイスの現在の状態のインジケーションを含む、条項47の電子デバイス。
49.処理ユニットが、
ロケーションに位置している第2の制御可能な外部デバイスの表現の表示を有効にし、
第2の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し、
第2のユーザ入力が閾値基準を満たすか否かを判定し、
第2のユーザ入力を検出したことに応じて、かつ閾値基準が満たされるという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーションの表示を有効にし、
第2の制御可能な外部デバイスの第1の状態の選択に対応する第3のユーザ入力を検出し、
第3のユーザ入力を検出した後で、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに含める、
ように更に構成された、条項47又は条項48の電子デバイス。
50.処理ユニットが、
第4のユーザ入力を検出し、
第4のユーザ入力を検出したことに応じて、制御可能な外部デバイスの第2の表現を含む第1のユーザインタフェース画面の表示を有効にする、
ように更に構成された、条項47から49のいずれか一項に記載の電子デバイス。
51.第1のユーザインタフェース画面が、制御可能な外部デバイスに関連付けられたデータをシーンプロファイルから除去すること、シーンプロファイルをテストすること、シーンプロファイルを指定すること、及びシーンプロファイルを削除することのうちの少なくとも1つを実行するオプションを含む、条項50の電子デバイス。
52.処理ユニットが、
制御可能な外部デバイスの第1の表現が表示される前に、ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む既定のシーンプロファイルの表現を含む第2のユーザインタフェース画面の表示を有効にするように更に構成された、条項47から51のいずれか一項に記載の電子デバイス。
53.処理ユニットが、
第2のユーザインタフェース画面が表示されている間に、既定のシーンプロファイルの選択に対応する第5のユーザ入力を検出し、
第5のユーザ入力を検出したことに応じて、ロケーションの所定の制御可能な外部デバイスの複数の表現を含む第3のユーザインタフェース画面の表示を有効にする、
ように更に構成された、条項52の電子デバイス。
54.ロケーションの所定の制御可能な外部デバイスの複数の表現が、所定の制御可能な外部デバイスに対する所定の状態のインジケーションを含む、条項53の電子デバイス。
55.所定の制御可能な外部デバイスが、所定の制御可能な外部デバイスに対して電子デバイスによって前に実行されたアクションに基づいて判定される、条項53又は条項54の電子デバイス。
56.所定の制御可能な外部デバイスの所定の状態が、所定の制御可能な外部デバイスに対して前に取られた、電子デバイスのユーザに関連付けられたアクションに基づいて判定される、条項53から55のいずれか一項に記載の電子デバイス。
57.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
第1の基準の選択に対応する第1のユーザ入力を検出することと、
第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けることと、
ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出することと、
第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加することと、
自動化基準が満たされたか否かを判定することと、
自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信することと、
を含む方法。
58.第1の制御可能な外部デバイスの選択が、シーンプロファイルの選択を含み、シーンプロファイルが、第1の制御可能な外部デバイスを含むロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含む、条項57の方法。
59.自動化基準が、ロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、条項57又は条項58の方法。
60.自動化基準が、時刻に少なくとも部分的に基づく、条項57から59のいずれか一項に記載の方法。
61.自動化基準が、ロケーションの制御可能な外部デバイスの状態に少なくとも部分的に基づく、条項57から60のいずれか一項に記載の方法。
62.第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加した後で、第1の制御可能な外部デバイスに基づく自動化プロファイルの概要を表示することを更に含む、条項57から61のいずれか一項に記載の方法。
63.ロケーションに位置している第2の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出することと、
第3のユーザ入力が入力閾値基準を満たすか否かを判定することと、
第3のユーザ入力が入力閾値基準を満たすという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーションを表示することと、
第2の制御可能な外部デバイスの第1の状態の選択に対応する第4のユーザ入力を検出することと、
第4のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータを自動化プロファイルに含めることと、
を更に含む、条項57から62のいずれか一項に記載の方法。
64.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
第1の基準の選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付け、
ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し、
第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加し、
自動化基準が満たされたか否かを判定し、
自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信する、
命令を含む、電子デバイス。
65.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
第1の基準の選択に対応する第1のユーザ入力を検出させ、
第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けさせ、
ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出させ、
第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加させ、
自動化基準が満たされたか否かを判定させ、
自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信させる、
非一時的コンピュータ可読記憶媒体。
66.ディスプレイと、
タッチ感知面と、
第1の基準の選択に対応する第1のユーザ入力を検出する手段と、
第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付ける手段と、
ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出する手段と、
第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加する手段と、
自動化基準が満たされたか否かを判定する手段と、
自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令を送信する手段と、
を備える、電子デバイス。
67.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項57から62のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
68.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項57から62のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
69.ディスプレイと、
タッチ感知面と、
条項57から62のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
70.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、処理ユニットが、
第1の基準の選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、第1の基準を、少なくとも第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付け、
ロケーションに位置している第1の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し、
第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加し、
自動化基準が満たされたか否かを判定し、
自動化基準が満たされたという判定に従って、第1の制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす、
ように構成された、電子デバイス。
71.第1の制御可能な外部デバイスの選択が、シーンプロファイルの選択を含み、シーンプロファイルが、第1の制御可能な外部デバイスを含むロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含む、条項70の電子デバイス。
72.自動化基準が、ロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、条項70又は条項71の電子デバイス。
73.自動化基準が、時刻に少なくとも部分的に基づく、条項70から72のいずれか一項に記載の電子デバイス。
74.自動化基準が、ロケーションの制御可能な外部デバイスの状態に少なくとも部分的に基づく、条項70から73のいずれか一項に記載の電子デバイス。
75.処理ユニットが、
第1の制御可能な外部デバイスの指定された状態を示すデータを自動化プロファイルに追加した後で、第1の制御可能な外部デバイスに基づく自動化プロファイルの概要の表示を有効にするように更に構成された、条項70から74のいずれか一項に記載の電子デバイス。
76.処理ユニットが、
ロケーションに位置している第2の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出し、
第3のユーザ入力が入力閾値基準を満たすか否かを判定し、
第3のユーザ入力が入力閾値基準を満たすという判定に従って、第2の制御可能な外部デバイスの第1の状態のインジケーションの表示を有効にし、
第2の制御可能な外部デバイスの第1の状態の選択に対応する第4のユーザ入力を検出し、
第4のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイス及び第2の制御可能な外部デバイスの第1の状態を識別するデータを自動化プロファイルに含める、
ように更に構成された、条項70から75のいずれか一項に記載の電子デバイス。
77.ディスプレイと、タッチ感知面と、カメラと、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
カメラを使用して、パターンの画像をキャプチャすることと、
パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定することと、
パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けることと、
少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出することと、
第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付けることと、
を含む方法。
78.パターンの画像をキャプチャする前に、パターンの画像をキャプチャする命令を含む第1のユーザインタフェース画面を表示することを更に含む、77の方法。
79.第1のユーザインタフェース画面が、第2のユーザインタフェース画面上の第1のアフォーダンスの選択に応じて表示される、条項78の方法。
80.パターンが制御可能な外部デバイスに対応することを判定した後で、第2のユーザ入力を検出することと、
第2のユーザ入力を検出したことに応じて、第2のユーザインタフェース画面上に制御可能な外部デバイスの表現を表示することと、
を更に含む、条項79の方法。
81.パターンが制御可能な外部デバイスに対応することを判定した後で、制御可能な外部デバイスの表現を表示することを更に含む、条項77から80のいずれか一項に記載の方法。
82.ディスプレイと、
タッチ感知面と、
カメラと、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
カメラを使用して、パターンの画像をキャプチャし、
パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し、
パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け、
少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける、
命令を含む、電子デバイス。
83.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面と、カメラとを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
カメラを使用して、パターンの画像をキャプチャさせ、
パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定させ、
パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けさせ、
少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出させ、
第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付けさせる、
非一時的コンピュータ可読記憶媒体。
84.ディスプレイと、
タッチ感知面と、
カメラと、
カメラを使用して、パターンの画像をキャプチャする手段と、
パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定する手段と、
パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付ける手段と、
少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出する手段と、
第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける手段と、
を備える、電子デバイス。
85.ディスプレイと、
タッチ感知面と、
カメラと、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項77から81のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
86.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項77から81のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
87.ディスプレイと、
タッチ感知面と、
条項77から81のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
88.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
画像をキャプチャするように構成されたカメラユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、処理ユニットが、
カメラを使用して、パターンの画像のキャプチャを引き起こし、
パターンが、2つ以上の状態で動作するように構成されており、かつ2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し、
パターンが制御可能な外部デバイスに対応するという判定に応じて、制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け、
少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、選択された部屋を制御可能な外部デバイスに関連付ける、
ように構成された、電子デバイス。
89.処理ユニットが、
パターンの画像がキャプチャされる前に、パターンの画像をキャプチャする命令を含む第1のユーザインタフェース画面の表示を有効にするように更に構成された、条項88の電子デバイス。
90.第1のユーザインタフェース画面が、第2のユーザインタフェース画面上の第1のアフォーダンスの選択に応じて表示される、条項89の電子デバイス。
91.処理ユニットが、
パターンが制御可能な外部デバイスに対応することを判定した後で、第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、第2のユーザインタフェース画面上に制御可能な外部デバイスの表現の表示を有効にする、
ように更に構成された、条項90の電子デバイス。
92.処理ユニットが、
パターンが制御可能な外部デバイスに対応することを判定した後で、制御可能な外部デバイスの表現の表示を有効にするように更に構成された、条項88から91のいずれか一項に記載の電子デバイス。
93.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出することと、
基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、位置に基づく基準を含む少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加することと、
電子デバイスの位置を判定することと、
電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定することと、
少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信することと、
を含む方法。
94.少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされないという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信することを見合わせることを更に含む、条項93の方法。
95.位置に基づく基準のインジケーションを有する地図ビューを表示することを更に含む、条項93又は条項94の方法。
96.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離未満にあるか否かを含む、条項93から95のいずれか一項に記載の方法。
97.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離より離れているか否かを含む、条項93から95のいずれか一項に記載の方法。
98.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離より離れたところからロケーションから閾値距離未満に移動したか否かを含む、条項93から95のいずれか一項に記載の方法。
99.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離未満からロケーションから閾値距離より離れて移動したか否かを含む、条項93から95のいずれか一項に記載の方法。
100.時間に基づく基準の指定に対応するユーザ入力を検出することと、
ユーザ入力を検出したことに応じて、時間に基づく基準を少なくとも1つの制御可能な外部デバイスを制御するための自動化基準に追加することと、
を更に含む、条項93から99のいずれか一項に記載の方法。
101.少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に部分的に基づく、条項93から100のいずれか一項に記載の方法。
102.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出し、
基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、位置に基づく基準を含む少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加し、
電子デバイスの位置を判定し、
電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定し、
少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信する、
命令を含む、電子デバイス。
103.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出させ、
基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、位置に基づく基準を含む少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加させ、
電子デバイスの位置を判定させ、
電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定させ、
少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信させる、
非一時的コンピュータ可読記憶媒体。
104.電子デバイスであって、
ディスプレイと、
タッチ感知面と、
少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出する手段と、
基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、位置に基づく基準を含む少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加する手段と、
電子デバイスの位置を判定する手段と、
電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定する手段と、
少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信する手段と、
を備える、電子デバイス。
105.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項93から101のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
106.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項93から101のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
107.ディスプレイと、
タッチ感知面と、
条項93から101のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
108.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、処理ユニットが、
少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出し、
基準の指定に対応するユーザ入力を検出したことに応じて、位置に基づく基準を、位置に基づく基準を含む少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、ロケーションに関連付けられた自動化プロファイルに追加し、
電子デバイスの位置を判定し、
電子デバイスの判定された位置に少なくとも部分的に基づいて、少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるか否かを判定し、
少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされるという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令の送信を引き起こす、
ように構成された、電子デバイス。
109.処理ユニットが、
少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が満たされないという判定に従って、少なくとも1つの制御可能な外部デバイスを指定された状態に設定する命令を送信することを見合わせるように更に構成された、条項108の電子デバイス。
110.処理ユニットが、
位置に基づく基準のインジケーションを有する地図ビューの表示を有効にするように更に構成された、条項108又は条項109の電子デバイス。
111.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離未満にあるか否かを含む、条項108から110のいずれか一項に記載の電子デバイス。
112.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離より離れているか否かを含む、条項108から110のいずれか一項に記載の電子デバイス。
113.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離より離れたところからロケーションから閾値距離未満に移動したか否かを含む、条項108から110のいずれか一項に記載の電子デバイス。
114.位置に基づく基準が、電子デバイスが第1のロケーションから閾値距離未満からロケーションから閾値距離より離れて移動したか否かを含む、条項108から110のいずれか一項に記載の電子デバイス。
115.処理ユニットが、
時間に基づく基準の指定に対応するユーザ入力を検出し、
ユーザ入力を検出したことに応じて、時間に基づく基準を少なくとも1つの制御可能な外部デバイスを制御するための自動化基準に追加する、
ように更に構成された、条項108から114のいずれか一項に記載の電子デバイス。
116.少なくとも1つの制御可能な外部デバイスを制御するための自動化基準が、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に部分的に基づく、条項108から115のいずれか一項に記載の電子デバイス。
117.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定することと、
自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示することと、
ユーザ入力を検出することと、
ユーザ入力を検出したことに応じて、
自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信することと、
自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信することと、
を含む方法。
118.自動化プロファイルの基準が、少なくとも1つの制御可能な外部デバイスに関連付けられたロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、条項117の方法。
119.自動化プロファイルの基準が、時刻に少なくとも部分的に基づく、条項117又は条項118の方法。
120.自動化プロファイルの基準が、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に少なくとも部分的に基づく、条項117から119のいずれか一項に記載の方法。
121.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し、
自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示し、
ユーザ入力を検出し、
ユーザ入力を検出したことに応じて、
自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信し、
自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信する、
命令を含む、電子デバイス。
122.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定させ、
自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示させ、
ユーザ入力を検出させ、
ユーザ入力を検出したことに応じて、
自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信させ、
自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信させる、
非一時的コンピュータ可読記憶媒体。
123.ディスプレイと、
タッチ感知面と、
少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定する手段と、
自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知を表示する手段と、
ユーザ入力を検出する手段と、
ユーザ入力を検出したことに応じて、
自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令を送信し、
自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令を送信する手段と、
を備える、電子デバイス。
124.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項117から120のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
125.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項117から120のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
126.ディスプレイと、
タッチ感知面と、
条項117から120のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
127.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、
処理ユニットが、
少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し、
自動化プロファイルの基準が満たされるという判定に従って、自動化プロファイルを識別するインジケーション、及び自動化プロファイルの実施を確認するインジケーションを含む通知の表示を有効にし、
ユーザ入力を検出し、
ユーザ入力を検出したことに応じて、
自動化プロファイルの実施の確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施する命令の送信を引き起こし、
自動化プロファイルの実施の非確認に対応するユーザ入力に従って、自動化プロファイルの指定された状態を実施しない命令の送信を引き起こす、
ように構成された、電子デバイス。
128.自動化プロファイルの基準が、少なくとも1つの制御可能な外部デバイスに関連付けられたロケーションに対する電子デバイスの位置に少なくとも部分的に基づく、条項127の電子デバイス。
129.自動化プロファイルの基準が、時刻に少なくとも部分的に基づく、条項127又は条項128の電子デバイス。
130.自動化プロファイルの基準が、少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に少なくとも部分的に基づく、条項127から129のいずれか一項に記載の電子デバイス。
131.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示することと、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、
第1のユーザ入力が入力基準を満たすか否かを判定することと、
第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信することと、
第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示することと、
制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出することと、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信することと、
を含む方法。
132.複数の状態の状態が、連続的である、条項131の方法。
133.複数の状態の状態が、離散的である、条項131の方法。
134.制御可能な外部デバイスが、色が調節可能な電球であり、複数の状態が、複数の色を含む、条項131から133のいずれか一項に記載の方法。
135.制御可能な外部デバイスの表現が、制御可能な外部デバイスの現在の状態のインジケーションを含む、条項131から134のいずれか一項に記載の方法。
136.制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、アフォーダンスに対応しないディスプレイ上の位置の選択に対応する第3のユーザ入力を検出することと、
第3のユーザ入力を検出したことに応じて、アフォーダンスを表示することを停止することと、
を更に含む、条項131から135のいずれか一項に記載の方法。
137.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示し、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力が入力基準を満たすか否かを判定し、
第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信し、
第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示し、
制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信する、
命令を含む、電子デバイス。
138.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示させ、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、
第1のユーザ入力が入力基準を満たすか否かを判定させ、
第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信させ、
第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示させ、
制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出させ、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信させる、
非一時的コンピュータ可読記憶媒体。
139.ディスプレイと、
タッチ感知面と、
複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示する手段と、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、
第1のユーザ入力が入力基準を満たすか否かを判定する手段と、
第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令を送信する手段と、
第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示し、
制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令を送信する手段と、
を備える、電子デバイス。
140.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項131から136のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
141.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項131から136のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
142.ディスプレイと、
タッチ感知面と、
条項131から136のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
143.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、
処理ユニットが、
複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現の表示を有効にし、
制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力が入力基準を満たすか否かを判定し、
第1のユーザ入力が入力基準を満たさないという判定に従って、制御可能な外部デバイスの状態を複数の状態の第2の状態に設定する命令の送信を引き起こし、
第1のユーザ入力が入力基準を満たすという判定に従って、制御可能な外部デバイスの複数の状態を示すアフォーダンスの表示を有効にし、
制御可能な外部デバイスの複数の状態を示すアフォーダンスを表示している間に、複数の状態の第3の状態の選択に対応するアフォーダンス上の第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、制御可能な外部デバイスの状態を第3の状態に設定する命令の送信を引き起こす、
ように構成された、電子デバイス。
144.複数の状態の状態が、連続的である、条項143の電子デバイス。
145.複数の状態の状態が、離散的である、条項143の電子デバイス。
146.制御可能な外部デバイスが、色が調節可能な電球であり、複数の状態が、複数の色を含む、条項143から145のいずれか一項に記載の電子デバイス。
147.制御可能な外部デバイスの表現が、制御可能な外部デバイスの現在の状態のインジケーションを含む、条項143から146のいずれか一項に記載の電子デバイス。
148.処理ユニットが、
制御可能な外部デバイスの複数の状態を示すアフォーダンスが表示されている間に、アフォーダンスに対応しないディスプレイ上の位置の選択に対応する第3のユーザ入力を検出し、
第3のユーザ入力を検出したことに応じて、アフォーダンスの表示を停止させる、
ように更に構成された、条項143から147のいずれか一項に記載の電子デバイス。
149.ディスプレイと、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定することと、
第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定することと、
第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示することと、
を含む方法.
150.第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示した後で、ロケーション内の電子デバイスの第2の位置を判定することと、
第2の位置が第1の部屋とは異なる少なくとも1つの指定された部屋の第2の部屋に対応することを判定することと、
第2の位置が第2の部屋に対応することを判定したことに応じて、
第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示することを停止することと、
第2の部屋に関連付けられた第2の制御可能な外部デバイスの表現を表示することと、
を更に含む、条項149の方法。
151.第1の制御可能な外部デバイスの表現が、第1の制御可能な外部デバイスの現在の状態を示す、条項149又は条項150の方法。
152.第1のユーザ入力を検出することと、
第1のユーザ入力を検出したことに応じて、第1の制御可能な外部デバイスを第1の状態に設定する命令を送信することと、
を更に含む、条項149から151のいずれか一項に記載の方法。
153.電子デバイスの位置が、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される、条項149から152のいずれか一項に記載の方法。
154.第1の制御可能な外部デバイスの表現を表示している間に、第2のユーザ入力を検出することと、
第2のユーザ入力を検出したことに応じて、ロケーションの複数の制御可能な外部デバイスを制御するためのアプリケーションを開くことと、
を更に含む、条項149から153のいずれか一項に記載の方法。
155.部屋の判定に基づいて、判定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスを含む、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現を表示することを更に含む、条項149から154のいずれか一項に記載の方法。
156.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定し、
第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定し、
第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示する、
命令を含む、電子デバイス。
157.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定させ、
第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定させ、
第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示させる、
非一時的コンピュータ可読記憶媒体。
158.ディスプレイと、
少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定する手段と、
第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定する手段と、
第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示する手段と、
を備える、電子デバイス。
159.ディスプレイと、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項149から155のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
160.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項149から155のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
161.ディスプレイと、
条項149から155のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
162.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、
処理ユニットが、
少なくとも1つの指定された部屋を含むロケーション内の電子デバイスの第1の位置を判定し、
第1の位置が少なくとも1つの指定された部屋の第1の部屋に対応することを判定し、
第1の位置が第1の部屋に対応することを判定したことに応じて、第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現の表示を有効にする、
ように構成された、電子デバイス。
163.処理ユニットが、
第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現が表示された後で、ロケーション内の電子デバイスの第2の位置を判定し、
第2の位置が第1の部屋とは異なる少なくとも1つの指定された部屋の第2の部屋に対応することを判定し、
第2の位置が第2の部屋に対応することを判定したことに応じて、
第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現の表示を停止させ、
第2の部屋に関連付けられた第2の制御可能な外部デバイスの表現の表示を有効にする、
ように更に構成された、条項162の電子デバイス。
164.第1の制御可能な外部デバイスの表現が、第1の制御可能な外部デバイスの現在の状態を示す、条項162又は条項163の電子デバイス。
165.処理ユニットが、
第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、第1の制御可能な外部デバイスを第1の状態に設定する命令の送信を引き起こす、
ように更に構成された、条項162から164のいずれか一項に記載の電子デバイス。
166.電子デバイスの位置が、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される、条項162から165のいずれか一項に記載の電子デバイス。
167.処理ユニットが、
第1の制御可能な外部デバイスの表現が表示されている間に、第2のユーザ入力を検出し、
第2のユーザ入力を検出したことに応じて、ロケーションの複数の制御可能な外部デバイスを制御するためのアプリケーションを開く、
ように更に構成された、条項162から166のいずれか一項に記載の電子デバイス。
168.処理ユニットが、
部屋の判定に基づいて、判定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスを含む、ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現の表示を有効にするように更に構成された、条項162から167のいずれか一項に記載の電子デバイス。
169.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
第1の個人連絡先を表す第1のアフォーダンスを表示することと、
第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出することと、
ロケーションの制御可能な外部デバイスに関する情報を含むロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示することと、
第2のアフォーダンスの選択に対応する第2のユーザ入力を検出することと、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可することと、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信することと、
を含む方法。
170.第1の個人連絡先に関連付けられた外部デバイスに招待を送信した後で、第1の個人連絡先がロケーションに招待されたというインジケーションを表示することを更に含む、条項169の方法。
171.招待が、ロケーションプロファイルへのアクセスを許可する前に送信され、方法が、第1の個人連絡先が招待を受け入れたことを示すデータを受信することを更に含み、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションプロファイルへのアクセスが第1の個人連絡先に関連付けられた外部デバイスに許可される、条項169又は条項170の方法。
172.更に、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションに対する第1の個人連絡先に関連付けられた外部デバイスの物理的相対位置のインジケーションを表示することを更に含む、条項171の方法。
173.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
第1の個人連絡先を表す第1のアフォーダンスを表示し、
第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し、
ロケーションの制御可能な外部デバイスに関する情報を含むロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示し、
第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可し、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信する、
命令を含む、電子デバイス。
174.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
第1の個人連絡先を表す第1のアフォーダンスを表示させ、
第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出させ、
ロケーションの制御可能な外部デバイスに関する情報を含むロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示させ、
第2のアフォーダンスの選択に対応する第2のユーザ入力を検出させ、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可させ、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信させる、
非一時的コンピュータ可読記憶媒体。
175.ディスプレイと、
タッチ感知面と、
第1の個人連絡先を表す第1のアフォーダンスを表示する手段と、
第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出する手段と、
ロケーションの制御可能な外部デバイスに関する情報を含むロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示する手段と、
第2のアフォーダンスの選択に対応する第2のユーザ入力を検出する手段と、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可する手段と、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信する手段と、
を備える、電子デバイス。
176.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項169から172のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
177.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項169から172のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
178.ディスプレイと、
タッチ感知面と、
条項169から172のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
179.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、
処理ユニットが、
第1の個人連絡先を表す第1のアフォーダンスの表示を有効にし、
第1の個人連絡先を表す第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し、
ロケーションの制御可能な外部デバイスに関する情報を含むロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスの表示を有効にし、
第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルへのアクセスパラメータに基づくアクセスを許可させ、
第1の個人連絡先に関連付けられた外部デバイスにロケーションプロファイルにアクセスする招待を含むデータを送信を引き起こす、
ように構成された、電子デバイス。
180.処理ユニットが、
第1の個人連絡先に関連付けられた外部デバイスに招待が送信された後で、第1の個人連絡先がロケーションに招待されたというインジケーションの表示を有効にするように更に構成された、条項179の電子デバイス。
181.招待が、ロケーションプロファイルへのアクセスを許可する前に送信され、処理ユニットが、第1の個人連絡先が招待を受け入れたことを示すデータを受信するように更に構成されており、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションプロファイルへのアクセスが第1の個人連絡先に関連付けられた外部デバイスに許可される、条項179又は条項180の電子デバイス。
182.処理ユニットが、
更に、第1の個人連絡先が招待を受け入れたことを示すデータを受信したことに応じて、ロケーションに対する第1の個人連絡先に関連付けられた外部デバイスの物理的相対位置のインジケーションの表示を有効にするように更に構成された、条項181の電子デバイス。
183.ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信することと、
データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示することと、
アフォーダンスの選択に対応する第1のユーザ入力を検出することと、
第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示することと、
を含む方法。
184.第1の制御可能な外部デバイスに対応するアフォーダンスが、シーンプロファイルに対応し、シーンプロファイルが、第1の制御可能な外部デバイスの指定された状態に関するデータを含み、ユーザインタフェース画面上の第1の制御可能な外部デバイスの表現が、シーンプロファイルの表現を含む、条項183の方法。
185.ロケーションに関する情報を取得する招待を表すデータを受信することを更に含み、ロケーションに関する情報が、招待を受け入れた後で受信される、条項183又は条項184の方法。
186.ユーザインタフェース画面が、ロケーションのインジケーション、及び現在ロケーションにあるリモート電子デバイスに関連付けられた個人の表現を更に含む、条項183から185のいずれか一項に記載の方法。
187.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、
ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し、
データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示し、
アフォーダンスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する、
命令を含む、電子デバイス。
188.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、
ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信させ、
データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示させ、
アフォーダンスの選択に対応する第1のユーザ入力を検出させ、第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示させる、
非一時的コンピュータ可読記憶媒体。
189.ディスプレイと、
タッチ感知面と、
ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信する手段と、
データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示する手段と、
アフォーダンスの選択に対応する第1のユーザ入力を検出する手段と、
第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する手段と、
を備える、電子デバイス。
190.ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備える電子デバイスであって、
1つ以上のプログラムが、メモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムが、条項183から186のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
191.1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、1つ以上のプログラムが命令を含み、命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、デバイスに、条項183から186のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
192.ディスプレイと、
タッチ感知面と、
条項183から186のいずれか一項に記載の方法を実行する手段と、
を備える、電子デバイス。
193.グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
接触を受けるように構成されたタッチ感知面ユニットと、
ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、
を備える電子デバイスであって、
処理ユニットが、
ロケーションに関する情報を含み、かつロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し、
データを受信したことに従って、第1の制御可能な外部デバイスに対応するアフォーダンスを表示し、
アフォーダンスの選択に対応する第1のユーザ入力を検出し、
第1のユーザ入力を検出したことに応じて、ロケーションのインジケーション及び第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する、
ように構成された、電子デバイス。
194.第1の制御可能な外部デバイスに対応するアフォーダンスが、シーンプロファイルに対応し、シーンプロファイルが、第1の制御可能な外部デバイスの指定された状態に関するデータを含み、ユーザインタフェース画面上の第1の制御可能な外部デバイスの表現が、シーンプロファイルの表現を含む、条項193の電子デバイス。
195.処理ユニットが、
ロケーションに関する情報を取得する招待を表すデータを受信するように更に構成されており、ロケーションに関する情報が、招待を受け入れた後で受信される、条項193又は条項194の電子デバイス。
196.ユーザインタフェース画面が、ロケーションのインジケーション、及び現在ロケーションにあるリモート電子デバイスに関連付けられた個人の表現を更に含む、条項193から195のいずれか一項に記載の電子デバイス。
上述した説明は、説明の目的上、特定の実施形態を参照して説明されている。しかし、上記の例示的な議論は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。これらの実施形態は、本技術の原理、及びその実際の適用を最も良好に説明するために、選択及び説明されたものである。それにより、他の当業者は、想到される具体的な用途に適するような様々な修正を使用して、本技術及び様々な実施形態を最も良好に利用することが可能となる。
添付図面を参照して、本開示及び実施例を十分に説明してきたが、様々な変更及び修正が、当業者には明らかとなるであろうことに留意されたい。そのような変更及び修正は、特許請求の範囲によって定義されるような、本開示及び実施例の範囲内に含まれるものとして理解されたい。
添付書類A
[書類名] 明細書
[発明の名称] 一般的なデバイス機能にアクセスするためのデバイス及び方法
関連出願の相互参照
[0001]
本出願は、2015年5月28日に出願された米国特許出願第14/725,912号、発明の名称「Accessory Management System Using Environment Model」に関連するものであり、その内容は、ここにおいて全体が参照により取り入れられる。本出願はまた、2016年6月12日に出願された米国特許仮出願第XX/XXX,XXX号、発明の名称「User Interface for Managing Controllable External Devices」に関連するものであり、その内容は、本願の添付書類Aとして含まれており、ここにおいて全体が参照によっても取り入れられる。
[技術分野]
[0002]
本出願は、全般的に、一般的なデバイス機能にアクセスするための複数のユーザインターフェースを含むタッチ感知面を有する電子デバイスを含むがこれに限定されない、タッチ感知面を有する電子デバイスに関する。
[背景技術]
[0003]
コンピュータ及び他の電子コンピューティデバイスのための入力デバイスとしてのタッチ感知面の使用が、近年、著しく増加している。例示的なタッチ感知面としては、タッチパッド及びタッチ画面ディスプレイが挙げられる。そのような面は、ディスプレイ上のユーザインターフェースオブジェクトを操作するために幅広く使用されている。
[0004]
例示的な操作には、デバイス機能及び遠隔デバイスの機能を制御するための制御にアクセスすることが含まれる。しかし、これらの操作を実行する方法は煩雑で非効率的である。遠隔デバイスの使用分野が拡大するにつれて、特定の制御及び機能へのアクセスはより時間がかかるようになっている。例えば、ドリルダウンメニューを介して制御にアクセスするための一連の入力を入力することは、特に、所望の制御の位置が予めユーザによって知られていない場合、ユーザにとって時間がかかる。デバイス機能にアクセスするためのアプリケーション間のナビゲーションにも時間がかかる。
[発明の概要]
[0005]
したがって、一般的なデバイス機能にアクセスするための、より高速でより効率的な方法及びインターフェースを有する電子デバイスが必要とされている。そのような方法及びインターフェースは、任意選択で、一般的なデバイス機能にアクセスするための従来の方法を補完又は置換する。そのような方法及びインターフェースは、ユーザの認識的負担を軽減し、より効率的なヒューマンマシンインターフェースを実現する。バッテリ動作デバイスでは、そのような方法及びインターフェースは、電力を節約し、バッテリ充電間の時間を延ばす。
[0006]
タッチ感知面を有する電子デバイスのためのユーザインターフェースと関連付けられた上記の欠陥及び他の問題は、本開示のデバイスによって削減又は除去される。いくつかの実施形態では、デバイスは、デスクトップコンピュータである。いくつかの実施形態では、デバイスは、ポータブル(例えば、ノートブックコンピュータ、タブレットコンピュータ、又はハンドヘルドデバイス)である。いくつかの実施形態では、デバイスは、タッチパッドを有する。いくつかの実施形態では、デバイスは、タッチ感知ディスプレイ(「タッチ画面」又は「タッチ画面ディスプレイ」としても知られる)を有する。いくつかの実施形態では、デバイスは、グラフィカルユーザインターフェース(GUI)、1つ以上のプロセッサ、メモリ、及び複数の機能を実行するためのメモリに記憶された1つ以上のモジュール、プログラム、又は命令セットを有する。いくつかの実施形態では、ユーザは主にタッチ感知面上のスタイラス並びに/又は指の接触及びジェスチャを通じてGUIと対話する。いくつかの実施形態では、機能は、画像編集、描画、プレゼンティング、ワードプロセッシング、ウェブサイト作成、ディスクオーサリング、スプレッドシートの作成、ゲームプレイ、電話をかけること、ビデオ会議、電子メール送信、インスタントメッセージング、トレーニングサポート、デジタル写真撮影、デジタルビデオ撮影、ウェブブラウジング、デジタル音楽の再生、及び/又はデジタルビデオの再生を、任意選択で含む。それらの機能を実行する実行可能命令は任意選択で、非一時的コンピュータ可読記憶媒体又は1つ以上のプロセッサによって実行されるように構成された他のコンピュータプログラム製品に含まれる。
[0007]
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて実行される。その方法は、デバイスが表示オフ状態にある間に、第1の入力を検出することと、第1の入力を検出したことに応答して、デバイスのディスプレイをアクティブにすることと、ディスプレイ上に、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示することと、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、タッチ感知面上のスワイプジェスチャを検出することと、タッチ感知面上のスワイプジェスチャを検出したことに応答して、デバイスが表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツを表示する第2のユーザインターフェースの表示と置換することと、デバイスが表示オン状態のロック解除モードにあり、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツ及びデバイスが表示オン状態のロックモードにあるときに表示されない第1の追加コンテンツを表示する、第2のユーザインターフェースの表示と置換することと、を含む。
[0008]
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて実行される。デバイスが表示オフ状態にある間に、デバイスのディスプレイをアクティブ化する第1の入力を検出することと、第1の入力を検出したことに応答して、デバイスのディスプレイをアクティブ化することと、ディスプレイ上に、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示することと、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、タッチ感知面上のスワイプジェスチャを検出することと、スワイプジェスチャを検出したことに応答して、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換することと、スワイプジェスチャが第1の方向とは異なる第2の方向にあるという判定に従って、第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されたミニアプリケーションオブジェクトユーザインターフェースであって、複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換することと、スワイプジェスチャが、第1の方向及び第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページを表示することと、スワイプジェスチャが第1の方向、第2の方向及び第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成された通知ユーザインターフェースを表示することと、を含む。
[0009]
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて実行される。その方法は、デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示することと、複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、第1のアプリケーションアイコンは複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応するタッチ感知面上の位置における第1の入力を検出することと、第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューであって、第1のミニアプリケーションオブジェクトは、複数のアプリケーションの第1のアプリケーションに対応し、オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューを表示することと、第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するアフォーダンスに対応するタッチ感知面上の位置における第2の入力を検出することと、第2の入力を検出したことに応答して、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加することと、含む。
[0010]
いくつかの実施形態によれば、方法は、ディスプレイ及びタッチ感知面を有する電子デバイスにおいて実行される。その方法は、ディスプレイ上に初期ユーザインターフェースを表示している間に、タッチ感応表面上の第1のジェスチャを検出することと、第1のジェスチャを検出したことに応答して、ディスプレイ上に、マルチページ制御パネルの第1のページであって、制御パネルの第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示することと、マルチページ制御パネルの第1のページを表示している間に、タッチ感知面上の第2のジェスチャを検出することと、第2のジェスチャを検出することに応答して、マルチページ制御パネルの第2のページであって、マルチページ制御パネルの第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、マルチページ制御パネルの第2のページがディスプレイ上のマルチページ制御パネルの第1のページを置換する、マルチページ制御パネルの第2のページを表示することと、を含む。
[0011]
いくつかの実施形態によれば、電子デバイスは、ユーザインターフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を含む。処理ユニットは、デバイスが表示オフ状態にある間に、第1の入力を検出するように構成されている。第1の入力を検出したことに応答して、処理ユニットは、デバイスのディスプレイユニットをアクティブ化し、ディスプレイユニット上に、デバイスの表示オン状態に対応する第1のユーザインターフェースの表示を有効化するように構成されている。デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、処理ユニットは、タッチ感知面ユニット上のスワイプジェスチャを検出するように構成されている。タッチ感知面ユニット上のスワイプジェスチャを検出したことに応答して、処理ユニットは、デバイスが表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツを表示する第2のユーザインターフェースの表示と置換し、デバイスが表示オン状態のロック解除モードにあり、スワイプジェスチャが第1の方向にあるという判断に従って、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツ及びデバイスが表示オン状態のロックモードにあるときに表示されない第1の追加コンテンツを表示する第2のユーザインターフェースと置換するように構成されている。
[0012]
いくつかの実施形態によれば、電子デバイスは、ユーザインターフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、を含む。処理ユニットは、デバイスが表示オフ状態にある間に、デバイスのディスプレイユニットをアクティブ化する第1の入力を検出するように構成されている。第1の入力を検出したことに応答して、処理ユニットは、デバイスのディスプレイをアクティブ化し、ディスプレイユニット上に、デバイスの表示オン状態に対応する第1のユーザインターフェースの表示を有効化するように構成されている。デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、処理ユニットは、タッチ感知面ユニット上のスワイプジェスチャを検出するように構成されている。スワイプジェスチャを検出したことに応答して、処理ユニットは、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換し、スワイプジェスチャが第1の方向とは異なる第2の方向にあるという判定に従って、第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されたミニアプリケーションオブジェクトユーザインターフェースであって、複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換し、ディスプレイスワイプジェスチャが、第1の方向及び第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページの表示を有効化し、スワイプジェスチャが第1の方向、第2の方向及び第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成された通知ユーザインターフェースの表示を有効化するように構成されている。
[0013]
いくつかの実施形態によれば、電子デバイスは、デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示するように構成されたディスプレイユニットと、接触を検出するように構成されたタッチ感知面ユニットと、ディスプレイユニット及び感知面ユニットに結合された処理ユニットと、を含む。処理ユニットは、複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、第1のアプリケーションアイコンは複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応するタッチ感知面ユニット上の位置における第1の入力を検出するように構成されている。第1の入力を検出したことに応答して、処理ユニットは、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューであって、第1のミニアプリケーションオブジェクトは、複数のアプリケーションの第1のアプリケーションに対応し、オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューの表示を有効化する、ように、構成されている。処理ユニットは、第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するアフォーダンスに対応するタッチ感知面ユニット上の位置における第2の入力を検出するように更に構成されている。処理ユニットは、第2の入力を検出したことに応答して、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するように構成されている。
[0014]
いくつかの実施形態によれば、電子デバイスは、ユーザインターフェースを表示するように構成されたディスプレイユニットと、接触に合わせて構成されたタッチ感知面ユニットと、ディスプレイユニット及びタッチ感知面ユニットに結合された処理ユニットと、処理ユニットを含む。処理ユニットは、ディスプレイユニット上に初期ユーザインターフェースを表示している間に、タッチ感知面ユニット上の第1のジェスチャを検出するように構成されている。第1のジェスチャを検出したことに応答して、処理ユニットは、ディスプレイユニット上に、マルチページ制御パネルの第1のページであって、制御パネルの第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページの表示を有効化するように構成されている。マルチページ制御パネルの第1のページを表示している間に、処理ユニットは、タッチ感知面ユニット上の第2のジェスチャを検出するように構成されている。処理ユニットは、第2のジェスチャを検出したことに応答して、マルチページ制御パネルの第2のページであって、マルチページ制御パネルの第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、マルチページ制御パネルの第2のページはディスプレイユニット上のマルチページ制御パネルの第1のページを置換する、マルチページ制御パネルの第2のページの表示を有効化するように構成されている。
[0015]
いくつかの実施形態によれば、電子デバイスは、ディスプレイと、タッチ感知面と、任意選択でタッチ感知面との接触の強度を検出する1つ以上のセンサと、1つ以上のプロセッサと、メモリと、1つ以上のプログラムと、を含み、1つ以上のプログラムはメモリに記憶され、1つ以上のプロセッサによって実行されるように構成されており、1つ以上のプログラムは、本明細書に記載の方法のいずれかの動作を実行するか又は実行させる命令を含む。いくつかの実施形態によれば、コンピュータ可読記憶媒体は、内部に命令を記憶しており、その命令は、ディスプレイと、タッチ感知面と、任意選択でタッチ感知面との接触の強度を検出する1つ以上のセンサとを有する電子デバイスによって実行されると、本明細書に記載の任意の方法の動作を、そのデバイスに実行させるか、又はその実行をさせる。いくつかの実施形態によれば、ディスプレイと、タッチ感知面と、任意選択でタッチ感知面との接触の強度を検出する1つ以上のセンサと、メモリと、メモリ内に記憶された1つ以上のプログラムを実行する1つ以上のプロセッサとを備えた電子デバイス上のグラフィカルユーザインターフェースは、上述の方法のいずれかにおいて表示される要素のうちの1つ以上を含み、それらの要素は、本明細書に記載の方法のいずれかにおいて説明されるように、入力に応答して更新される。いくつかの実施形態によれば、電子デバイスは、ディスプレイと、タッチ感知面と、任意選択でタッチ感知面との接触の強度を検出する1つ以上のセンサと、本明細書に記載の任意の方法の動作を実行するか又は実行させる手段と、を含む。いくつかの実施形態によれば、電子デバイスは、ディスプレイと、タッチ感知面と、任意選択でタッチ感知面との接触の強度を検出する1つ以上のセンサとを有する電子デバイスに使用するための情報処理装置は、本明細書に記載の任意の方法の動作を実行するか又は実行させる手段を含む。
[0016]
したがって、XXXのための、より高速でより効率的な方法及びインターフェースを有する、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための任意選択の1つ以上のセンサを備えた、電子デバイスには、が提供され、それにより、そのようなデバイスによる有効性、効率、及びユーザ満足度が向上する。そのような方法及びインターフェースは、XXXのための従来の方法を補完する、又はそれらを置き換えることができる。
[図面の簡単な説明]
[0017]
記載される様々な実施形態を良好に理解するため、以下の図面とともに、以下の「発明を実施するための形態」が参照されるべきである。ここで、類似の参照番号は、それらの図全体を通じて、対応する部分を指す。
[0018]
[図1A] いくつかの実施形態に係る、タッチ感知ディスプレイを有するポータブル多機能デバイスを示すブロック図である。
[0019]
[図1B] いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。
[0020]
[図2] いくつかの実施形態に係る、タッチ画面を有するポータブル多機能デバイスを示す。
[0021]
[図3] いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。
[0022]
[図4A] 一部の実施形態に係る、ポータブル多機能デバイス上のアプリケーションのメニューのための例示的なユーザインターフェースを示す。
[0023]
[図4B] いくつかの実施形態に係る、ディスプレイから分離されたタッチ感知面を有する多機能デバイスのための例示的なユーザインターフェースを示す。
[0024]
[図4C] いくつかの実施形態に係る、動的強度閾値の例を示す図である。
[図4D] いくつかの実施形態に係る、動的強度閾値の例を示す図である。
[図4E] いくつかの実施形態に係る、動的強度閾値の例を示す図である。
[0025]
[図5A−1] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5A−2] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5A−3] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5A−4] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5B] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5C] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5D] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5E] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−1] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−2] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−3] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−4] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−5] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−6] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−7] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5F−8] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5G] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5H] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5I] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5J] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5K] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5L] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5M] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5N] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5O] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5P] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5Q] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5R−1] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5R−2] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5S−1] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5S−2] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5T−1] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5T−2] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5T−3] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5T−4] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5U] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5V] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5W] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5X] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5Y] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5Z] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AA] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AB] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AC] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AD] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AE] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AF] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AG] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AH] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AI] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AJ] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AK] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AL] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AM] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AN] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AO] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AP] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AQ] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AR] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AS] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AT] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AU] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AV] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AW] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AX] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AY] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5AZ] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BA] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BB] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BC] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BD] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BE] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BF] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BG] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BH] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BI] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[図5BJ] いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。
[0026]
[図6A] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図6B] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図6C] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図6D] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図6E] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[0027]
[図7A] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図7B] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図7C] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図7D] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[図7E] いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法を示すフロー図である。
[0028]
[図8A] いくつかの実施形態に係る、ミニアプリケーションユーザインターフェースにミニアプリケーションオブジェクトを追加する方法を示すフロー図である。
[図8B] いくつかの実施形態に係る、ミニアプリケーションユーザインターフェースにミニアプリケーションオブジェクトを追加する方法を示すフロー図である。
[図8C] いくつかの実施形態に係る、ミニアプリケーションユーザインターフェースにミニアプリケーションオブジェクトを追加する方法を示すフロー図である。
[0029]
[図9A] いくつかの実施形態に係る、マルチページ制御パネルを使用して制御をナビゲートする方法を示すフロー図である。
[図9B] いくつかの実施形態に係る、マルチページ制御パネルを使用して制御をナビゲートする方法を示すフロー図である。
[図9C] いくつかの実施形態に係る、マルチページ制御パネルを使用して制御をナビゲートする方法を示すフロー図である。
[図9D] いくつかの実施形態に係る、マルチページ制御パネルを使用して制御をナビゲートする方法を示すフロー図である。
[図9E] いくつかの実施形態に係る、マルチページ制御パネルを使用して制御をナビゲートする方法を示すフロー図である。
[0030]
[図10] いくつかの実施形態に係る、電子デバイスの機能ブロック図である。
[図11] いくつかの実施形態に係る、電子デバイスの機能ブロック図である。
[図12] いくつかの実施形態に係る、電子デバイスの機能ブロック図である。
[図13] いくつかの実施形態に係る、電子デバイスの機能ブロック図である。
[発明を実施するための形態]
[0031]
多くの電子デバイスは、グラフィカルユーザインターフェースにおいて入力を検出するとフィードバックを提供し、入力がデバイス動作に及ぼす効果のインジケーションを提供する。電子デバイスはまた、着信通信及び受信通信に関してユーザに通知するフィードバックを提供する。本明細書で説明する方法は、ユーザがデバイス動作上で検出された入力の効果を理解し、デバイスの状態についてユーザに情報を提供するのに役立つ触覚フィードバックを提供する。
[0032]
以下では、図1A、図1B、図2、及び図3は、例示的なデバイスの説明を提供する。図4A、図4B及び図5A〜図5BJは、触覚フィードバックを提供するための例示的なユーザインターフェースを示す。図6A〜図6Eは、いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法のフロー図を示す。図7A〜図7Eは、いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法のフロー図を示す。図8A〜図8Cは、いくつかの実施形態に係る、ミニアプリケーションユーザインターフェースにミニアプリケーションオブジェクトを追加する方法のフロー図を示す。図9A〜図9Eは、いくつかの実施形態に係る、マルチページ制御パネルを使用して制御をナビゲートする方法のフロー図を示す。図5A〜図5BJのユーザインターフェースは、図6A〜図6E、図7A〜図7E、図8A〜図8C、及び図9A〜図9Eのプロセスを示すために使用される。
例示的なデバイス
[0033]
ここで、添付図面に実施例が示される実施形態への詳細な参照が行われる。以下の詳細な説明では、説明される様々な実施形態の完全な理解を提供するために数多くの具体的な詳細が記載されている。しかしながら、記載されている様々な実施形態は、これらの具体的な詳細を伴わずとも実践し得ることが、当業者には明らかであろう。他の例では、周知の方法、手順、構成要素、回路、及びネットワークは、実施形態の態様を不必要に不明瞭にしないよう詳細には説明されていない。
[0034]
本明細書では、第1、第2などの用語は、いくつかの実施例で、様々な要素を説明するために使用されるが、これらの要素は、それらの用語によって限定されるべきではないことも理解されるであろう。これらの用語は、1つの要素を別の要素と区別するためにのみ使用される。例えば、説明されている様々な実施形態の範囲から逸脱することなく、第1の接触は、第2の接触と称することができ、同様に、第2の接触は、第1の接触と称し得る。第1の接触及び第2の接触は両方とも接触であるが、文脈がそうではないことを明確に示さない限り、それらは同じ接触ではない。
[0035]
本明細書に記載される様々な実施形態の説明で使用される用語は、特定の実施形態を説明することのみを目的とするものであって、限定することを意図するものではない。様々な記載される実施形態の記載及び添付の特許請求の範囲で使用される場合、単数形「a」、「an」、及び「the」は、文脈がそうではないことを明確に示さない限り、複数形も含むことが意図される。本明細書で使用される場合、用語「and/or(及び/又は)」は、関連付けられた列挙された項目のうちの1つ以上の任意のすべての可能な組み合わせを指し、これらを包含することも理解されたい。用語「includes(含む)、「including(含む)」、「comprises(含む)」、及び/又は「comprising(含む)」は、本明細書で使用されるとき、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はそれらのグループの存在又は追加を除外しないことが更に理解されるであろう。
[0036]
本明細書に記載される場合、用語「if(〜の場合)」は、任意選択で、文脈に依存して「when(〜のとき)」、「upon(〜すると)」、「in response to determining(〜と判定したことに応答して)」、又は「in response to detecting(〜を検出したことに応答して)」を意味するものと解釈される。同様に、語句「if it is determined(〜と判定される場合)」又は「if(a stated condition or event)is detected((述べられる条件又はイベント)が検出される場合)」は、任意選択で、文脈に依存して「upon determining(〜と判定すると)」、「in response to determining(〜と判定したことに応答して)」、「upon detecting(the stated condition or event)((述べられる条件又はイベント)を検出すると)」、又は「in response to detecting(the stated condition or event)((述べられた条件又はイベント)を検出したことに応答して)」を意味するものと解釈される。
[0037]
電子デバイス、そのようなデバイスについてのユーザインターフェース、及びそのようなデバイスを使用するための関連付けられた処理の実施形態が記載される。いくつかの実施形態では、デバイスは、PDA機能及び/又は音楽プレーヤ機能などの他の機能も含む、モバイル電話機などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態は、Cupertino、CaliforniaのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイスを含むが、これらに限定されない。タッチ感知面(例えば、タッチ画面ディスプレイ及び/又はタッチパッド)を有するラップトップ又はタブレットコンピュータなどの他のポータブル電子デバイスが任意選択で使用される。いくつかの実施形態では、デバイスはポータブル通信デバイスではなく、タッチ感知面(例えば、タッチ画面ディスプレイ及び/又はタッチパッド)を有するデスクトップコンピュータであることも理解されたい。
[0038]
以下の説明では、ディスプレイ及びタッチ感知面を含む電子デバイスが記載される。しかしながら、電子デバイスは任意選択で、物理キーボード、マウス、及び/又はジョイスティックなどの、1つ以上の他の物理ユーザインターフェースデバイスを含むことを理解されたい。
[0039]
デバイスは、一般的に、メモ取りアプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、ビデオ会議アプリケーション、電子メールアプリケーション、インスタントメッセージングアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション及び/又はデジタルビデオプレーヤアプリケーションのうちの1つ以上などの様々なアプリケーションをサポートする。
[0040]
本デバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも1つの共通の物理ユーザインターフェースデバイスを、任意選択で使用する。タッチ感知面の1つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーションごとに、及び/又はそれぞれのアプリケーション内で、任意選択で、調節及び/又は変更される。このように、デバイスの共通の(タッチ感知面などの)物理的アーキテクチャは、ユーザにとって直感的かつ透過的なユーザインターフェースを備える様々なアプリケーションを、任意選択でサポートする。
[0041]
ここで、タッチ感知ディスプレイを備えるポータブルデバイスの実施形態に注意を向ける。図1Aは、いくつかの実施形態に係る、タッチ感知ディスプレイシステム112を有するポータブル多機能デバイス100を示すブロック図である。タッチ感知ディスプレイシステム112は、便宜上「タッチ画面」と呼ばれる場合があり、単にタッチ感知ディスプレイと呼ばれる場合もある。デバイス100は、メモリ102(任意選択で、1つ以上のコンピュータ可読記憶媒体を含む)、メモリコントローラ122、1つ以上の処理ユニット(CPU)120、周辺機器インターフェース118、RF回路108、音声回路110、スピーカ111、マイクロフォン113、入出力(I/O)サブシステム106、その他の入力又は制御デバイス116、及び外部ポート124を含む。デバイス100は、任意選択で1つ以上の光センサ164を含む。デバイス100は、デバイス100(例えば、デバイス100のタッチ感知ディスプレイシステム112などのタッチ感知面)上の接触の強度を検出するための、1つ以上の強度センサ165を任意選択で含む。デバイス100は、デバイス100上に触知出力を生成する(例えば、デバイス100のタッチ感知ディスプレイシステム112又はデバイス300のタッチパッド355などの、タッチ感知面上に触知出力を生成する)ための、1つ以上の触知出力生成器167を、任意選択で含む。これらの構成要素は、1つ以上の通信バス又は信号ライン103を介して任意選択で通信する。
[0042]
本明細書及び特許請求の範囲で使用される場合、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対するデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、デバイスの別の構成要素(例えば、筐体)に対する物理的変位、又はデバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、ユーザの手の指、手のひら、又は他の部分)に接触している状況において、物理的変位によって生成された触知出力は、デバイス又はデバイスの構成要素の物理的特性の認識された変化に相当する触感として、ユーザによって解釈される。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として任意選択で解釈される。いくつかの場合、ユーザの移動により物理的に押圧された(例えば、変位した)タッチ感知面と関連付けられた物理アクチュエータボタンの移動がないときでさえ、ユーザは「ダウンクリック」又は「アップクリック」などの触感を感じるであろう。別の実施例として、タッチ感知面の移動は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択で解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるものではあるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」「ダウンクリック」、「粗さ」)に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な(又は、平均的な)ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。
[0043]
デバイス100は、ポータブル多機能デバイスの一実施例に過ぎず、デバイス100は任意選択で、示されているものよりも多くの構成要素若しくは少ない構成要素を有し、任意選択で、2つ以上の構成要素を組み合わせ、又は任意選択で、構成要素の異なる構成若しくは配置を有することを理解されたい。図1Aに示す様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア、ファームウェア、又はそれらの組み合わせで実装される。
[0044]
メモリ102は、任意選択で高速ランダムアクセスメモリを含み、また任意選択で、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイスなどの、不揮発性メモリも含む。CPU(単数又は複数)120及び周辺機器インターフェース118などのデバイス100の他の構成要素によるメモリ102へのアクセスは任意選択で、メモリコントローラ122により制御される。
[0045]
周辺機器インターフェース118が使用され、デバイスの入力及び出力周辺機器を、CPU(単数又は複数)120及びメモリ102と結合することができる。1つ以上のプロセッサ120は、デバイス100の様々な機能を実行し、データを処理するために、メモリ102に記憶された様々なソフトウェアプログラム及び/又は命令セットを動作させるか、又は実行する。
[0046]
いくつかの実施形態では、周辺機器インターフェース118、CPU(単数又は複数)120、及びメモリコントローラ122は任意選択で、チップ104などの単一チップ上で実装される。いくつかの他の実施形態では、これらは、個別のチップ上に、任意選択で実装される。
[0047]
RF(radio frequency)(無線周波数)回路108は、電磁信号とも呼ばれるRF信号を送受信する。RF回路108は、電気信号を電磁信号に、又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路108は、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(subscriber identity module)(SIM)カード、メモリなどを含むがこれらに限定されない、これらの機能を実行するための周知の回路を、任意選択で含んでいる。RF回路108は、任意選択で、インターネット(ワールドワイドウェブ(World Wide Web)(WWW)とも呼ばれる)、イントラネット及び/又は無線ネットワーク(セルラー電話ネットワーク、無線ローカルエリアネットワーク(local area network)(LAN)及び/又は、メトロポリタンエリアネットワーク(metropolitan area network)(MAN)など)などのネットワーク並びに他のデバイスと、無線通信によって通信する。無線通信は、複数の通信規格、通信プロトコル、及び通信技術のうちのいずれかを、任意選択で使用し、それらの通信規格、通信プロトコル、及び通信技術としては、移動通信用のグローバルシステム(Global System for Mobile Communications)(GSM)、拡張データGSM環境(Enhanced Data GSM Environment)(EDGE)、高速ダウンリンクパケット接続(high-speed downlink packet access)(HSDPA)、高速アップリンクパケット接続(high-speed uplink packet access)(HSUPA)、Evolution、Data−Only(EV−DO)、HSPA、HSPA+、2重セルHSPA(Dual−Cell HSPA)(DC−HSPDA)、ロングタームエボリューション(long term evolution)(LTE)、近距離無線通信(near field communication)(NFC)、広帯域符号分割多元接続(wideband code division multiple access)(W−CDMA)、符号分割多元接続(code division multiple access)(CDMA)、時分割多元接続(time division multiple access)(TDMA)、Bluetooth(登録商標)、Wireless Fidelity(Wi−Fi)(登録商標)(例えば、IEEE 802.11a、IEEE 802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g、及び/又はIEEE 802.11n)、ボイスオーバーインターネットプロトコル(voice over Internet Protocol)(VoIP)、Wi−MAX、電子メール用のプロトコル(例えば、インターネットメッセージアクセスプロトコル(Internet message access protocol)(IMAP)及び/又はポストオフィスプロトコル(post office protocol)(POP))、インスタントメッセージング(例えば、拡張可能メッセージング及びプレゼンスプロトコル(extensible messaging and presence protocol)(XMPP)、インスタントメッセージング及びプレゼンス利用拡張向けセッション開始プロトコル(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions)(SIMPLE)、インスタントメッセージング及びプレゼンスサービス(Instant Messaging and Presence Service)(IMPS))、及び/又はショートメッセージサービス(Short Message Service)(SMS)、あるいは本文書の出願日現在までにまだ開発されていない通信プロトコルを含めた任意の他の好適な通信プロトコルが挙げられるが、これらに限定されない。
[0048]
音声回路110、スピーカ111、及びマイクロフォン113は、ユーザとデバイス100の間の音声インターフェースを提供する。音声回路110は、周辺機器インターフェース118から音声データを受信し、この音声データを電気信号に変換し、電気信号をスピーカ111に送信する。スピーカ111は、電気信号を人間の可聴音波に変換する。音声回路110は、マイクロフォン113により音波から変換された電気信号も受信する。音声回路110は、電気信号を音声データに変換し、音声データを処理のために周辺機器インターフェース118に送信する。オーディオデータは、周辺機器インターフェース118によって任意選択で、メモリ102及び/若しくはRF回路108から取得され、並びに/又はメモリ102及び/若しくはRF回路108へ送信される。いくつかの実施形態では、音声回路110は、更にヘッドセットジャック(例えば、212、図2)も含む。ヘッドセットジャックは、音声回路110と、出力専用ヘッドホン又は出力(例えば、片耳又は両耳用のヘッドホン)及び入力(例えば、マイクロフォン)の両方を有するヘッドセットなどの取り外し可能な音声入出力周辺機器の間のインターフェースを提供する。
[0049]
I/Oサブシステム106は、タッチ感知ディスプレイシステム112及びその他の入力又は制御デバイス116などのデバイス100上の入出力周辺機器を周辺機器インターフェース118と結合する。I/Oサブシステム106は、任意選択で、ディスプレイコントローラ156、光センサコントローラ158、強度センサコントローラ159、触覚フィードバックコントローラ161、及び他の入力若しくは制御デバイスのための1つ以上の入力コントローラ160を含む。1つ以上の入力コントローラ160は、その他の入力又は制御デバイス116から電気信号を受信し、それらへ電気信号を送信する。その他の入力又は制御デバイス116は任意選択で、物理的ボタン(例えば、プッシュボタン、ロッカボタンなど)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。いくつかの代替的実施形態では、入力コントローラ(単数又は複数)160は任意選択で、キーボード、赤外線ポート、USBポート、スタイラス、及び/又はマウスなどのポインタデバイスのうちのいずれかと結合される(又は、いずれにも結合されない)。1つ以上のボタン(例えば、208、図2)は、任意選択で、スピーカ111及び/又はマイクロフォン113の音量制御のためのアップ/ダウンボタンを含む。1つ以上のボタンは、任意選択で、プッシュボタン(例えば、206、図2)を含む。
[0050]
タッチ感知ディスプレイシステム112は、デバイスとユーザの間の入力インターフェース及び出力インターフェースを提供する。ディスプレイコントローラ156は、タッチ感知ディスプレイシステム112から電気信号を受信し、及び/又はタッチ感知ディスプレイシステム112へ電気信号を送信する。タッチ感知ディスプレイシステム112は、ユーザに視覚出力を表示する。視覚出力は、任意選択で、グラフィック、テキスト、アイコン、ビデオ、及びこれらの任意の組み合わせ(総称して「グラフィック」と称する)を含む。いくつかの実施形態では、視覚出力の一部又はすべては、ユーザインターフェースオブジェクトに対応する。本明細書で使用されるように、用語「アフォーダンス」は、ユーザ対話形式のグラフィカルユーザインターフェースオブジェクト(例えば、グラフィカルユーザインターフェースオブジェクトに向かって方向付けられた入力に応答するように構成されたグラフィカルユーザインターフェースオブジェクト)を指す。ユーザ対話形式のグラフィカルユーザインターフェースオブジェクトの例は、ボタン、スライダ、アイコン、選択可能メニュー項目、スイッチ、ハイパーリンク、又はその他のユーザインターフェース制御を含むが、それらに限定されない。
[0051]
タッチ感知ディスプレイシステム112は、触覚及び/又は触知の接触に基づくユーザからの入力を受け付けるタッチ感知面、センサ、又はセンサのセットを有する。(メモリ102内の任意の関連するモジュール及び/又は命令セットとともに)タッチ感知ディスプレイシステム112及びディスプレイコントローラ156は、タッチ感知ディスプレイシステム112上の接触(及び、接触の任意の移動又は中断)を検出し、検出された接触をタッチ感知ディスプレイシステム112上で表示されるユーザインターフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ、又は画像)との相互作用に変換する。ある例示的な実施形態では、タッチ感知ディスプレイシステム112とユーザの間の接触点は、ユーザの指又はスタイラスに対応する。
[0052]
タッチ感知ディスプレイシステム112は任意選択で、LCD(liquid crystal display)(液晶ディスプレイ)技術、LPD(light emitting polymer display)(発光ポリマディスプレイ)技術、又はLED(light emitting diode)(発光ダイオード)技術を使用するが、他の実施形態では、他のディスプレイ技術が使用される。タッチ感知ディスプレイシステム112及びディスプレイコントローラ156は任意選択で、容量技術、抵抗性技術、赤外線技術、及び表面音響波技術、並びに、タッチ感知ディスプレイシステム112との1つ以上の接触点を判定するためのその他の近接センサアレイ又は他の要素を含むが、これらに限定されない、現在既知の又は後に開発される複数のタッチ感知技術のうちのいずれかを使用して、接触及びその任意の移動又は中断を検出する。例示的な実施形態では、Apple Inc.(Cupertino、California)からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)などにおいて見られるような、投影型相互容量感知技術が使用されている。
[0053]
タッチ感知ディスプレイシステム112は任意選択で、100dpiを超えるビデオ解像度を有する。いくつかの実施形態では、タッチ画面のビデオ解像度は、400dpiを超える(例えば、500dpi、800dpi、又はそれより高い)。ユーザは任意選択で、スタイラス、指などの任意の適切な物体又は付属物を使用して、タッチ感知ディスプレイシステム112と接触する。いくつかの実施形態では、ユーザインターフェースは、指に基づく接触及びジェスチャで機能するように設計されるが、これらは、指の接触がタッチ画面上での面積がより広いことに起因して、スタイラスに基づく入力よりも精度が低い場合がある。いくつかの実施形態では、デバイスは、指に基づく粗い入力を正確なポインタ/カーソル位置又はユーザの望むアクションを実行するためのコマンドに変換する。
[0054]
いくつかの実施形態では、タッチ画面に加えて、デバイス100は任意選択で、特定の機能をアクティブ化又は非アクティブ化するためのタッチパッド(図示せず)を含む。いくつかの実施形態では、タッチパッドは、タッチ画面とは異なり、視覚出力を表示しないデバイスのタッチ感知領域である。タッチパッドは任意選択で、タッチ感知ディスプレイシステム112と分離したタッチ感知面、又はタッチ画面によって形成されたタッチ感知面の延長である。
[0055]
デバイス100は、様々な構成要素に電力を供給するための電力システム162も含む。電力システム162は任意選択で、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ(例えば、発光ダイオード(LED))、並びにポータブルデバイス内での電力の生成、管理、及び分配と関連付けられた任意の他の構成要素を含む。
[0056]
デバイス100は、任意選択で、1つ以上の光センサ164も含む。図1Aは、I/Oサブシステム106内の光センサコントローラ158と結合された光センサを示す。光センサ(単数又は複数)164は、任意選択で、電荷結合デバイス(CCD)又は相補的金属酸化物半導体(CMOS)フォトトランジスタを含む。光センサ(単数又は複数)164は、1つ以上のレンズを通じて投影された、環境からの光を受信し、画像を表すデータに光を変換する。撮像モジュール143(カメラモジュールとも呼ばれる)と連携して、光センサ(単数又は複数)164は任意選択で、静止画像及び/又はビデオをキャプチャする。いくつかの実施形態では、タッチ画面を静止画像及び/又はビデオ画像取得のためのビューファインダとして使用することができるように、光センサは、デバイスの前面上のタッチ感知ディスプレイシステム112の反対である、デバイス100の背面上に配置される。いくつかの実施形態では、ユーザの画像が取得されるように(例えば、自撮りのため、ユーザがタッチ画面上でその他のビデオ会議参加者を見ている間のビデオ会議のためなど)、別の光センサがデバイスの前面上に配置される。
[0057]
デバイス100は、任意選択で、1つ以上の接触強度センサ165も含む。図1Aは、I/Oサブシステム106内の強度センサコントローラ159と結合された接触強度センサを示す。接触強度センサ(単数又は複数)165は、1つ以上のピエゾ抵抗ひずみゲージ、電気容量式力センサ、電気力センサ、圧電力センサ、光学力センサ、容量式タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(若しくは圧力)を測定するために使用されるセンサ)を任意選択で含む。接触強度センサ(単数又は複数)165は、環境から接触強度情報(例えば、圧力情報又は圧力情報のためのプロキシ)を受信する。いくつかの実施形態では、少なくとも1つの接触強度センサが、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)に配置されているか、又は、それに近接している。いくつかの実施形態では、少なくとも1つの接触強度センサは、デバイス100の前面上に位置するタッチ画面ディスプレイシステム112の反対である、デバイス100の背面上に配置される。
[0058]
デバイス100は、任意選択で、1つ以上の近接センサ166も含む。図1Aは、周辺機器インターフェース118と結合された近接センサ166を示す。代わりに、近接センサ166は、I/Oサブシステム106内の入力コントローラ160と結合される。いくつかの実施形態では、多機能デバイスがユーザの耳の近くに配置されるとき(例えば、ユーザが電話通話を行っているとき)、近接センサは、タッチ感知ディスプレイシステム112をターンオフ及び無効にする。
[0059]
デバイス100は、任意選択で、1つ以上の触知出力生成器167も含む。図1Aは、I/Oサブシステム106内の触知フィードバックコントローラ161と結合され触知出力生成器を示す。触知出力生成器(単数又は複数)167は、スピーカ若しくは他の音声構成要素などの1つ以上の電気音響デバイス、及び/又はモータ、ソレノイド、電気活性ポリマ、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素(例えば、デバイス上で電気信号を触知出力に変換する構成要素)などの、エネルギーを直線運動に変換する電気機械デバイスを、任意選択で含む。触知出力生成器(単数又は複数)167は、触覚フィードバックモジュール133から触知フィードバック生成命令を受信し、デバイス100のユーザが感知できる触知出力をデバイス100上に生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器は、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)に配置されて又はそれに近接しており、任意選択で、タッチ感知面を垂直方向(例えば、デバイス100の表面の内/外)に、又は横方向(例えば、デバイス100の表面と同じ平面内の前後)に動かすことによって、触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器センサは、デバイス100の前面上に位置するタッチ感知ディスプレイシステム112の反対である、デバイス100の背面上に配置される。
[0060]
デバイス100は、任意選択で、1つ以上の加速度計168も含む。図1Aは、周辺機器インターフェース118と結合された加速度計168を示す。代わりに、加速度計168は任意選択で、I/Oサブシステム106内の入力コントローラ160と結合される。いくつかの実施形態では、情報は、1つ以上の加速度計から受信されたデータの分析に基づいて、縦方向ビュー又は横方向ビュー内でタッチ画面ディスプレイ上に表示される。デバイス100は、加速度計(単数又は複数)168に加えて、磁気計(図示せず)並びにデバイス100の位置及び向き(例えば、縦長又は横長)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信器(図示せず)を任意選択で含む。
[0061]
いくつかの実施形態では、メモリ102に記憶されたソフトウェア構成要素は、オペレーティングシステム126、通信モジュール(又は、命令セット)128、接触/動きモジュール(又は、命令セット)130、グラフィックモジュール(又は、命令セット)132、触覚フィードバックモジュール(又は、命令セット)133、テキスト入力モジュール(又は、命令セット)134、全地球測位システム(Global Positioning System)(GPS)モジュール(又は、命令セット)135、及びアプリケーション(又は、命令セット)136を含む。更に、いくつかの実施形態では、図1A及び図3に示されるように、メモリ102は、デバイス/グローバル内部状態157を記憶する。デバイス/グローバル内部状態157は、もしあれば、どのアプリケーションが現在アクティブ化を示すアクティブアプリケーション状態、どのアプリケーション、ビュー、又は他の情報がタッチ感知ディスプレイシステム112の様々な領域を占有しているかを示す表示状態、デバイスの様々なセンサ及びその他の入力又は制御デバイス116から取得される情報を含むセンサ状態、並びにデバイスの位置及び/又は姿勢に関する位置及び/若しくは位置情報、のうちの1つ以上を含む。
[0062]
オペレーティングシステム126(例えば、iOS、Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、又はVxWorksなどの組み込みオペレーティングシステム)は、全体的なシステムタスク(例えば、メモリ管理、記憶デバイス制御、電力管理など)を制御及び管理するための様々なソフトウェア構成要素及び/又はドライバを含み、様々なハードウェア構成要素とソフトウェア構成要素の間の通信を促進する。
[0063]
通信モジュール128は、1つ以上の外部ポート124を介して他のデバイスとの通信を容易にし、RF回路108及び/又は外部ポート124が受信したデータを処理するための様々なソフトウェア構成要素を含む。外部ポート124(例えば、ユニバーサルシリアルバス(Universal Serial Bus、USB)、FIREWIREなど)は、直接的に、又はネットワーク(例えば、インターネット、無線LANなど)を介して間接的に他のデバイスに結合するように適合される。いくつかの実施形態では、外部ポートは、Cupertino、CaliforniaのApple Inc.からのいくつかのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイス内で使用される30ピンコネクタと同一若しくは類似した、及び/又は互換性のあるマルチピン(例えば、30ピン)コネクタである。いくつかの実施形態では、外部ポートは、Cupertino、CaliforniaのApple Inc.からのいくつかのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイス内で使用されるLightningコネクタと同一若しくは類似した、及び/又は互換性のあるLightningコネクタである。
[0064]
接触/動きモジュール130は任意選択で、タッチ感知ディスプレイシステム112との接触(ディスプレイコントローラ156と連携して)、及び他のタッチ感知デバイスとの接触(例えば、タッチパッド又は物理クリックホイール)を検出する。接触/動きモジュール130は、接触が発生したかを判定すること(例えば、指ダウンイベントを検出する)、接触の強度を判定すること(例えば、接触の力若しくは圧力、又は接触の力若しくは圧力に代替するもの)、接触の動きがあるかを判定すること及びタッチ感知面を横切る動きを追跡すること(例えば、1つ以上の指のドラッグイベントを検出する)、及び接触が停止したかどうかを判定すること(例えば、指アップイベント又は接触の中断を検出する)などの、接触の検出(例えば、指又はスタイラスによる)に関連する様々な動作を実行するためのソフトウェア構成要素を含む。接触/動きモジュール130は、タッチ感知面から接触データを受信する。一連の接触データにより表現される接触点の移動を判定することは、接触点の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向の変化)を判定することを任意選択で含む。これらの動作は、任意選択で、単一の接触(例えば、1本の指の接触又はスタイラスの接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。いくつかの実施形態では、接触/動きモジュール130及びディスプレイコントローラ156は、タッチパッド上の接触を検出する。
[0065]
接触/動きモジュール130は任意選択で、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターン(例えば、検出される接触の異なる動き、タイミング、及び/又は強度)を有する。したがって、ジェスチャは、特定の接触パターンを検出することによって、任意選択で検出される。例えば、指のタップジェスチャを検出することは、指ダウンイベントを検出し、続いて(例えば、アイコンの位置での)その指ダウンイベントと同一の位置(又は、実質的に同一の位置)で指アップ(リフトオフ)イベントを検出することを含む。別の実施例として、タッチ感知面上の指のスワイプジェスチャの検出は、指ダウンイベントを検出し、続いて1つ以上の指のドラッグイベントを検出し、その後、指アップ(リフトオフ)イベントを検出することを含む。同様に、タップ、スワイプ、ドラッグ、及びその他のジェスチャは任意選択で、スタイラスに対して、スタイラスに対する特定の接触パターンを検出することにより、検出される。
[0066]
いくつかの実施形態では、指のタップジェスチャを検出することは、指ダウンイベントを検出することと指アップイベントを検出することとの間の時間の長さに依存するが、指ダウンイベントを検出することと指アップイベントを検出することとの間の指の接触の強度とは関連しない。いくつかの実施形態では、タップジェスチャは、タップの間の指の接触の強度が、軽い押圧又は深い押圧強度閾値などの所与の強度閾値を満たす(名目上の接触検出強度閾値よりも大きい)かに関わらず、指ダウンイベントと指アップイベントの間の時間の長さが予め定められた値よりも短い(例えば、0.1、0.2、0.3、0.4又は0.5秒よりも短い)との判定に従って検出される。これにより、指のタップジェスチャは、接触の特性強度が所与の強度閾値を満たさない場合であっても、満足するように構成された入力基準を満たすことができる。明確にするために、タップジェスチャにおける指の接触は一般的に、指ダウンイベントを検出するために、それを下回ると接触が検出されない名目上の接触検出強度閾値を満たす必要がある。同様の分析は、スタイラスによるタップジェスチャ又は他の接触を検出することに適用される。デバイスがタッチ感知面上をホバリングする指又はスタイラス接触を検出するように構成されている場合、公称接触検出強度閾値は、任意選択で、指又はスタイラスとタッチ感知面の間の物理的接触に対応しない。
[0067]
同様の方式で、同一の概念が他のタイプのジェスチャに適用される。例えば、スワイプジェスチャ、ピンチジェスチャ、デピンチジェスチャ、及び/又は長い押圧ジェスチャが、ジェスチャに含まれる接触の強度とは関連しない基準を満足することに基づいて任意選択で検出される。例えば、スワイプジェスチャは、1つ以上の接触の移動量に基づいて検出され、ピンチジェスチャは、相互に向かう2つ以上の接触の移動に基づいて検出され、デピンチジェスチャは、相互に離れる2つ以上の接触の移動に基づいて検出され、長い押圧ジェスチャは、閾値移動量よりも小さいタッチ感知面上の接触の期間に基づいて検出される。したがって、ジェスチャ認識基準が、ジェスチャにおける接触がそれぞれの強度閾値を下回る強度を有するときに満たされるように構成されている、との記述は、ジェスチャにおける接触がそれぞれの強度閾値に達しない場合であっても、ジェスチャ認識基準を満たすことができることを意味する。ただし、この記述は、ジェスチャにおける1つ以上の接触がそれぞれの強度閾値に達するか又はそれを超える状況において、ジェスチャ認識基準が満たされることを排除しないことを理解されたい。例えば、タップジェスチャは、接触が所定の時間期間の間にそれぞれの強度閾値を上回るか又は下回るかに関わらず、指ダウンイベント及び指アップイベントが所定の時間期間内で検出された場合に検出されるように構成されており、スワイプジェスチャは、接触が接触の移動の終わりにそれぞれの強度閾値を上回る場合でさえ、接触の移動が所定の大きさよりも大きい場合に検出されるように構成されている。
[0068]
接触強度閾値、期間閾値、及び移動閾値は、一部の状況では、同一の入力要素又は領域に方向付けられる2つ以上の異なるジェスチャを区別するためのヒューリスティックを作成するために、様々な異なる組み合わせで組み合わされ、それによって、同一の入力要素との複数の異なる対話がより豊かなセットのユーザ対話及び応答を提供するように有効化される。ジェスチャ認識基準の特定のセットが、ジェスチャにおける接触がそれぞれの強度閾値を下回る強度を有するときに満たされるように構成されている、との記述は、ジェスチャがそれぞれの強度閾値を上回る強度を有する接触を含むときに満たされる基準を有する他のジェスチャを識別するための他の強度依存ジェスチャ認識基準の同時評価を排除しない。例えば、いくつかの状況では、第1のジェスチャのための第1のジェスチャ認識基準−ジェスチャがそれぞれの強度閾値を下回る強度を有するときに満たされるように構成されている−は、第2のジェスチャのための第2のジェスチャ認識基準−ジェスチャがそれぞれの強度閾値に達することに依存する−と競争状態にある。そのような競争では、ジェスチャは任意選択で、第2のジェスチャのための第2のジェスチャ認識基準が最初に満たされる場合に、第1のジェスチャのための第1のジェスチャ認識基準を満たすものとして認識されない。例えば、接触が所定の移動量を移動する前に接触がそれぞれの強度閾値に到達する場合、スワイプジェスチャではなく深い押圧ジェスチャが検出される。逆に、接触がそれぞれの強度閾値に到達する前に接触が所定の移動量を移動する場合、深い押圧ジェスチャではなくスワイプジェスチャが検出される。そのような状況でさえ、第1のジェスチャのための第1のジェスチャ認識基準は、ジェスチャにおける接触がそれぞれの強度を下回る強度を有するときに満たされるようになおも構成されているが、これは、ジェスチャの終わりまで接触がそれぞれの強度閾値を下回ったままであった場合(例えば、それぞれの強度閾値を上回る強度まで増加しない接触を有するスワイプジェスチャ)、ジェスチャは、スワイプジェスチャとして第1のジェスチャ認識基準によって認識されているからである。そのようにして、ジェスチャにおける接触の強度がそれぞれの強度閾値を下回ったままであるときに満たされるように構成されている、特定のジェスチャ認識基準は、(A)いくつかの状況では、強度閾値(例えば、タップジェスチャのための)に関して接触の強度を無視し、及び/又は(B)いくつかの状況では、特定のジェスチャ認識基準が入力に対応するジェスチャ(例えば、認識のための深い押圧ジェスチャと競争する長い押圧ジェスチャのための)を認識する前に、強度依存ジェスチャ認識基準の競争するセット(例えば、深い押圧ジェスチャのための)が強度依存ジェスチャに対応するものとして入力を認識する場合、特定のジェスチャ認識基準(例えば、長い押圧ジェスチャのための)が機能しないという意味で、強度閾値に関して接触の強度になおも依存している。
[0069]
グラフィックモジュール132は、表示されるグラフィックの視覚的影響(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚特性)を変更するための構成要素を含む、タッチ感知ディスプレイシステム112又は他のディスプレイ上でグラフィックをレンダリング及び表示するための様々な既知のソフトウェア構成要素を含む。本明細書で使用される場合、用語「グラフィック」は、テキスト、ウェブページ、アイコン(ソフトキーを含むユーザインターフェースオブジェクトなど)、デジタル画像、ビデオ、及びアニメーションなどを含むがこれらに限定されない、ユーザに対して表示することができるいずれかのオブジェクトを含む。
[0070]
いくつかの実施形態では、グラフィックモジュール132は、使用されることになるグラフィックを表すデータを記憶する。各グラフィックは、任意選択で、対応するコードを割り当てられる。グラフィックモジュール132は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィック特性データとともに、表示されることとなるグラフィックを指定する1つ以上のコードを受信し、次いでディスプレイコントローラ156に出力する画面画像データを生成する。
[0071]
触覚フィードバックモジュール133は、デバイス100とのユーザ対話に応答して、デバイス100上の1つ以上の位置で触知出力を生成するために、触知出力生成器(単数又は複数)167によって使用される命令を生成するための、様々なソフトウェア構成要素を含む。
[0072]
テキスト入力モジュール134は、任意選択で、グラフィックモジュール132の構成要素であり、様々なアプリケーション(例えば、連絡先137、電子メール140、IM141、ブラウザ147、及びテキスト入力を必要とする任意の他のアプリケーション)でテキストを入力するためのソフトキーボードを提供する。
[0073]
GPSモジュール135は、デバイスの位置を判定し、この情報を、様々なアプリケーションで使用するために(例えば、位置に基づく電話発信で使用するために電話138へ、写真/ビデオのメタデータとしてカメラ143へ、並びに、天気ウィジェット、地域のイエローページウィジェット、及び地図/ナビゲーションウィジェットなどの、位置に基づくサービスを提供するアプリケーションへ)提供する。
[0074]
アプリケーション136は、任意選択で、以下のモジュール(若しくは命令セット)、又はそれらのサブセット若しくはスーパーセットを含む。
[0075]
連絡先モジュール137(アドレス帳又は連絡先リストと呼ばれる場合もある)、
[0076]
電話モジュール138、
[0077]
ビデオ会議モジュール139、
[0078]
電子メールクライアントモジュール140、
[0079]
インスタントメッセージング(IM)モジュール141、
[0080]
トレーニングサポートモジュール142、
[0081]
静止画像及び/又はビデオ画像のためのカメラモジュール143、
[0082]
画像管理モジュール144、
[0083]
ブラウザモジュール147、
[0084]
カレンダモジュール148、
[0085]
任意選択で、天気ウィジェット149−1、株価ウィジェット149−2、計算機ウィジェット149−3、アラーム時計ウィジェット149−4、辞書ウィジェット149−5、及びユーザによって取得された他のウィジェット、並びにユーザ作成ウィジェット149−6のうちの1つ以上を含むウィジェットモジュール149、
[0086]
ユーザ作成ウィジェット149−6を作成するためのウィジェット作成モジュール150、
[0087]
検索モジュール151、
[0088]
任意選択で、ビデオプレーヤモジュールと音楽プレーヤモジュールで構成された、ビデオ及び音楽プレーヤモジュール152、
[0089]
メモモジュール153、
[0090]
地図モジュール154、並びに/又は
[0091]
オンラインビデオモジュール155。
[0092]
任意選択でメモリ102内に記憶される他のアプリケーション136の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA(登録商標)対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
[0093]
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、連絡先モジュール137は、(例えば、メモリ102又はメモリ370内の連絡先モジュール137のアプリケーション内部状態192に記憶される)アドレス帳又は連絡先リストを管理するための実行可能命令を含み、それには、アドレス帳に名前(単数又は複数)を加えること、アドレス帳から名前(複数可)を削除すること、電話番号(単数又は複数)、電子メールアドレス(複数可)、住所(単数又は複数)、又は他の情報を名前と関連付けること、画像を名前と関連付けること、名前を分類して並べ替えること、電話番号及び/又は電子メールアドレスを提供して、電話138、ビデオ会議139、電子メール140、又はIM141による通信を開始及び/若しくは促進すること、などが含まれる。
[0094]
RF回路108、音声回路110、スピーカ111、マイクロフォン113、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、電話モジュール138は、電話番号に対応する一連の文字を入力し、アドレス帳137内の1つ以上の電話番号にアクセスし、入力されている電話番号を変更し、それぞれの電話番号をダイヤルし、会話を実行し、会話が完了したときに切断し又は電話を切る実行可能命令を含む。上述のように、無線通信は、任意選択で、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
[0095]
RF回路108、音声回路110、スピーカ111、マイクロフォン113、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、光センサ(単数又は複数)164、光センサコントローラ158、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、連絡先リスト137、及び電話モジュール138と連携して、ビデオ会議モジュール139は、ユーザの命令に従って、ユーザと1人以上の他の参加者の間のビデオ会議を開始し、行い、終了する実行可能命令を含む。
[0096]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、電子メールクライアントモジュール140は、ユーザの指示に応答して、電子メールを作成し、送信し、受信し、管理する実行可能命令を含む。画像管理モジュール144とともに、電子メールクライアントモジュール140は、カメラモジュール143で撮影された静止画像又はビデオ画像を有する電子メールを作成及び送信することを非常に容易にする。
[0097]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、インスタントメッセージモジュール141は、インスタントメッセージと対応する文字列を入力し、入力済みの文字を変更し、それぞれのインスタントメッセージを送信し(例えば、電話ベースのインスタントメッセージのためのショートメッセージサービス(SMS)若しくはマルチメディアメッセージサービス(Multimedia Message Service、MMS)プロトコルを使用して、又はインターネットベースのインスタントメッセージのためのXMPP、SIMPLE、Apple Push Notification Service(APNs)、若しくはIMPSを使用して)、インスタントメッセージを受信し、受信したインスタントメッセージを見るための、実行可能命令を含む。いくつかの実施形態では、送信及び/又は受信されたインスタントメッセージは任意選択で、MMS及び/又は拡張メッセージングサービス(Enhanced Messaging Service、EMS)でサポートされるような、グラフィック、写真、音声ファイル、ビデオファイル、及び/又は他の添付ファイルを含む。本明細書で使用される場合、「インスタントメッセージ」は、電話ベースのメッセージ(例えば、SMS又はMMSを使用して送信されたメッセージ)及びインターネットベースのメッセージ(例えば、XMPP、SIMPLE、APNs、又はIMPSを使用して送信されたメッセージ)の両方を指す。
[0098]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックスモジュール132、テキスト入力モジュール134、GPSモジュール135、地図モジュール154、及び音楽プレーヤモジュール146とともに、トレーニングサポートモジュール142は、トレーニング(例えば、時間、距離、及び/又はカロリー燃焼の目標を有する)を作成し、(スポーツデバイス及びスマートウォッチ内の)トレーニングセンサと通信し、トレーニングセンサデータを受信し、トレーニングをモニタするために使用されるセンサを較正し、トレーニングのための音楽を選択して再生する、並びに、トレーニングデータを表示し、記憶し、送信するための、実行可能命令を含む。
[0099]
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、光センサ(単数又は複数)164、光センサコントローラ158、接触モジュール130、グラフィックモジュール132、及び画像管理モジュール144とともに、カメラモジュール143は、静止画像又はビデオ(ビデオストリームを含む)をキャプチャしてメモリ102にそれらを記憶する、静止画像又はビデオの特性を変更する、及び/又はメモリ102から静止画像若しくはビデオを削除するための、実行可能命令を含む。
[0100]
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びカメラモジュール143とともに、画像管理モジュール144は、静止画像及び/又はビデオ画像を配置し、変更し(例えば、編集し)、又はその他の方式で操作し、ラベルを付け、削除し、提示し(例えば、デジタルスライドショー又はアルバム内で)、並びに記憶するための、実行可能命令を含む。
[0101]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134とともに、ブラウザモジュール147は、ウェブページ又はそれらの一部、並びにウェブページにリンクされた添付ファイル及び他のファイルの、検索、リンク付け、受信、及び表示を含め、ユーザの命令に従って、インターネットをブラウズするための、実行可能命令を含む。
[0102]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147とともに、カレンダモジュール148は、ユーザの命令に従って、カレンダ及びカレンダに関連付けられたデータ(例えば、カレンダ項目、するべきことのリストなど)を作成、表示、変更、及び記憶するための、実行可能命令を含む。
[0103]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147とともに、ウィジェットモジュール149は、任意選択で、ユーザによってダウンロードされ使用されるミニアプリケーション(例えば、天気ウィジェット149−1、株価ウィジェット149−2、計算機ウィジェット149−3、アラーム時計ウィジェット149−4、及び辞書ウィジェット149−5)、又はユーザによって作成されるミニアプリケーション(例えば、ユーザ作成ウィジェット149−6)である。いくつかの実施形態では、ウィジェットは、HTML(Hypertext Markup Language)(ハイパーテキストマークアップ言語)ファイル、CSS(Cascading Style Sheets)(カスケーディングスタイルシート)ファイル、及びJavaScriptファイルを含む。いくつかの実施形態では、ウィジェットは、XML(拡張可能マークアップ言語)ファイル及びJavaScriptファイル(例えば、Yahoo!ウィジェット)を含む。
[0104]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、ウィジェット作成モジュール150は、ウィジェットを作成する(例えば、ウェブページのユーザ指定部分をウィジェットに変える)実行可能命令を含む。
[0105]
タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、検索モジュール151は、ユーザの命令に従って、1つ以上の検索基準(例えば、1つ以上のユーザ指定の検索語句)と一致する、メモリ102内のテキスト、音楽、サウンド、画像、ビデオ、及び/又は他のファイルを検索する実行可能命令を含む。
[0106]
タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、音声回路110、スピーカ111、RF回路108、及びブラウザモジュール147と連携して、ビデオ及び音楽プレーヤモジュール152は、MP3又はAACファイルなどの1つ以上のファイル形式で記憶された記録された音楽又は他のサウンドファイルをユーザがダウンロード及び再生することを可能にする実行可能命令、並びにビデオを表示し、提示し、又はその他の方式で再生する(例えば、タッチ感知ディスプレイシステム112上で、又は無線で若しくは外部ポート124を介して接続された外部のディスプレイ上で)実行可能命令を含む。いくつかの実施形態では、デバイス100は、任意選択で、iPod(Apple Inc.の商標)などのMP3プレーヤの機能を含む。
[0107]
タッチ感知ディスプレイシステム112、ディスプレイコントローラ156、接触モジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、メモモジュール153は、ユーザの命令に従って、メモ、するべきことのリストなどを作成及び管理する実行可能命令を含む。
[0108]
RF回路108、タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、及びブラウザモジュール147と連携して、地図モジュール154は、ユーザの命令に従って、地図及び地図と関連付けられたデータ(例えば、運転方向、特定の位置における又はその近くの店舗及び対象となる他の地点についてのデータ、並びに位置に基づく他のデータ)を受信し、表示し、変更し、記憶する実行可能命令を含む。
[0109]
タッチ感知ディスプレイシステム112、ディスプレイシステムコントローラ156、接触モジュール130、グラフィックモジュール132、音声回路110、スピーカ111、RF回路108、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、オンラインビデオモジュール155は、ユーザがH.264などの1つ以上のファイル形式のオンラインビデオにアクセスし、閲覧し、受信し(例えば、ストリーミング及び/又はダウンロードにより)、再生し(例えば、タッチ画面112上で、又は無線で若しくは外部ポート124を介して接続された外部のディスプレイ上で)、特定のオンラインビデオへのリンクを有する電子メールを送信し、別の方法で管理することを可能にする実行可能命令を含む。いくつかの実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール140ではなく、インスタントメッセージングモジュール141が使用される。
[0110]
上記特定されたモジュール及びアプリケーションの各々は、上記説明された1つ以上の機能、並びに本出願で説明される方法(例えば、コンピュータにより実行される方法、及び本明細書で説明される他の情報処理方法)を実行する実行可能な命令セットに対応する。それらのモジュール(すなわち、命令セット)は、別々のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、よって、それらのモジュールの様々なサブセットは、任意選択で、様々な実施形態において、組み合わされ、又はその他の方式で再配置される。いくつかの実施形態では、メモリ102は任意選択で、上記特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ102は、任意選択で、上記説明されていない追加のモジュール及びデータ構造を記憶する。
[0111]
いくつかの実施形態では、デバイス100は、デバイス上の機能の所定のセットの動作がタッチ画面及び/又はタッチパッドを通じて排他的に実行されるデバイスである。デバイス100の動作のための主要な入力制御デバイスとしてタッチ画面及び/又はタッチパッドを使用することによって、デバイス100上の物理的な入力制御デバイス(プッシュボタン、ダイアルなど)の数が任意選択で削減される。
[0112]
タッチ画面及び/又はタッチパッドを通じて排他的にのみを介して実行される、所定の機能のセットは、任意選択で、ユーザインターフェース間のナビゲーションを含む。いくつかの実施形態では、タッチパッドは、ユーザによってタッチされるとき、デバイス100上で表示される任意のユーザインターフェースから、メインメニュー、ホームメニュー、又はルートメニューにデバイス100をナビゲートする。そのような実施形態では、「メニューボタン」はタッチパッドを使用して実装される。いくつかの他の実施形態では、メニューボタンは、タッチパッドではなく、物理プッシュボタン又は他の物理入力制御デバイスである。
[0113]
図1Bは、いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。いくつかの実施形態では、メモリ102(図1Aにおける)又は370(図3)は、イベントソート部170(例えば、オペレーティングシステム126内)及びそれぞれのアプリケーション136−1(例えば、上述したアプリケーション136、137〜155、380〜390のいずれか)を含む。
[0114]
イベントソート部170は、イベント情報を受信し、イベント情報が配信されるアプリケーション136−1及びアプリケーション136−1のアプリケーションビュー191を判定する。イベントソート部170は、イベントモニタ171及びイベントディスパッチャモジュール174を含む。いくつかの実施形態では、アプリケーション136−1は、アプリケーションがアクティブ又は実行中のとき、タッチ感知ディスプレイシステム112上で表示される現在のアプリケーションビュー(単数又は複数)を示す、アプリケーション内部状態192を含む。いくつかの実施形態では、デバイス/グローバル内部状態157は、いずれのアプリケーション(単数又は複数)が現在アクティブであるかを判定するために、イベントソート部170によって使用され、アプリケーション内部状態192は、イベント情報が配信されるアプリケーションビュー191を判定するために、イベントソート部170によって使用される。
[0115]
いくつかの実施形態では、アプリケーション内部状態192は、アプリケーション136−1が実行を再開するときに使用される再開情報、アプリケーション136−1によって表示されているか又は表示の準備がされている情報を示すユーザインターフェース状態情報、ユーザがアプリケーション136−1の前の状態又はビューに戻ることを可能にするための状態待ち行列、及びユーザが行った前のアクションのリドゥ/アンドゥ待ち行列、のうちの1つ以上などの追加の情報を含む。
[0116]
イベントモニタ171は、周辺機器インターフェース118からイベント情報を受信する。イベント情報は、サブイベント(例えば、マルチタッチジェスチャの一部としての、タッチ感知ディスプレイシステム112上のユーザのタッチ)についての情報を含む。周辺機器インターフェース118は、I/Oサブシステム106、又は近接センサ166、加速度計(単数又は複数)168、及び/若しくは(音声回路110を介する)マイクロフォン113などのセンサから受信する情報を送信する。周辺機器インターフェース118がI/Oサブシステム106から受信する情報は、タッチ感知ディスプレイシステム112又はタッチ感知面からの情報を含む。
[0117]
いくつかの実施形態では、イベントモニタ171は、所定の間隔で周辺機器インターフェース118に要求を送信する。それに応答して、周辺機器インターフェース118はイベント情報を送信する。他の実施形態では、周辺機器インターフェース118は、重要なイベント(例えば、予め定められたノイズ閾値を上回り、及び/又は予め定められた期間よりも長い入力を受信すること)が存在するときのみ、イベント情報を送信する。
[0118]
いくつかの実施形態では、イベントソート部170は、ヒットビュー判定モジュール172及び/又はアクティブイベント認識部判定モジュール173も含む。
[0119]
ヒットビュー判定モジュール172は、タッチ感知ディスプレイシステム112が2つ以上のビューを表示するとき、1つ以上のビュー内のどこにおいてサブイベントが発生したかを判定するためのソフトウェア手順を提供する。ビューは、制御部及びユーザがディスプレイ上で見ることが可能な他の要素で構成されている。
[0120]
アプリケーションと関連付けられたユーザインターフェースの別の態様は、本明細書でアプリケーションビュー又はユーザインターフェースウインドウと呼ばれる場合があるビューの組であり、それらの中で情報が表示され、タッチに基づくジェスチャが発生する。タッチが検出されるアプリケーションビュー(それぞれのアプリケーションの)は任意選択で、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルのビューは任意選択で、ヒットビューと呼ばれ、また、適切な入力として認識されるイベントの組は任意選択で、タッチに基づくジェスチャを開始する初期のタッチのヒットビューに少なくとも部分的に基づいて判定される。
[0121]
ヒットビュー判定モジュール172は、タッチに基づくジェスチャのサブイベントに関連する情報を受信する。アプリケーションが階層において編成された複数のビューを有するとき、ヒットビュー判定モジュール172は、サブイベントを処理するべき階層内の最下位のビューとしてヒットビューを特定する。ほとんどの状況では、ヒットビューは、開始するサブイベント(すなわち、イベント又は潜在的なイベントを形成する一連のサブイベントにおける最初のサブイベント)が発生する最下位レベルのビューである。ヒットビューがヒットビュー判定モジュールによって特定されると、ヒットビューは典型的には、それがヒットビューとして特定された同一のタッチ又は入力元に関連するすべてのサブイベントを受信する。
[0122]
アクティブイベント認識部判定モジュール173は、ビュー階層内のどのビュー(単数又は複数)がサブイベントの特定のシーケンスを受信すべきかを判定する。いくつかの実施形態では、アクティブイベント認識部判定モジュール173は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール173は、サブイベントの物理位置を含むすべてのビューはアクティブに関わっているビューであると判定し、したがって、すべてのアクティブに関わっているビューは、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントがある特定のビューに関連付けられた領域に完全に限定されたとしても、階層の上位のビューは、依然としてアクティブに関わっているビューであり続ける。
[0123]
イベントディスパッチャモジュール174は、イベント情報をイベント認識部(例えば、イベント認識部180)に送る。アクティブイベント認識部判定モジュール173を含む実施形態では、イベントディスパッチャモジュール174は、アクティブイベント認識部判定モジュール173により判定されたイベント認識部にイベント情報を配信する。いくつかの実施形態では、イベントディスパッチャモジュール174は、それぞれのイベント受信部モジュール182によって取得されたイベント情報をイベント待ち行列に記憶する。
[0124]
いくつかの実施形態では、オペレーティングシステム126は、イベントソート部170を含む。あるいは、アプリケーション136−1が、イベントソート部170を含む。更に他の実施形態では、イベントソート部170は、独立型のモジュール、又は接触/動きモジュール130などの、メモリ102に記憶された別のモジュールの一部である。
[0125]
いくつかの実施形態では、アプリケーション136−1は、それぞれがアプリケーションのユーザインターフェースのそれぞれのビュー内で発生するタッチイベントを処理する命令を含む、複数のイベント処理部190及び1つ以上のアプリケーションビュー191を含む。アプリケーション136−1の各アプリケーションビュー191は、1つ以上のイベント認識部180を含む。典型的には、それぞれのアプリケーションビュー191は、複数のイベント認識部180を含む。他の実施形態では、イベント認識部180のうちの1つ以上は、ユーザインターフェースキット(図示せず)、又はアプリケーション136−1がメソッド及び他の性質をそれから継承する上位レベルのオブジェクトなどの、別々のモジュールの一部である。いくつかの実施形態では、各イベント処理部190は、データ更新部176、オブジェクト更新部177、GUI更新部178、及び/又はイベントソート部170から受信したイベントデータ179、のうちの1つ以上を含む。イベント処理部190は任意選択で、アプリケーション内部状態192を更新するために、データ更新部176、オブジェクト更新部177、又はGUI更新部178を利用し、又は呼び出す。代わりに、アプリケーションビュー191のうちの1つ以上は、1つ以上のそれぞれのイベント処理部190を含む。また、いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178のうちの1つ以上は、それぞれのアプリケーションビュー191に含まれる。
[0126]
それぞれのイベント認識部180は、イベントソート部170からイベント情報(例えば、イベントデータ179)を受信し、イベント情報からイベントを特定する。イベント認識部180は、イベント受信部182及びイベント比較部184を含む。いくつかの実施形態では、イベント認識部180は、メタデータ183及びイベント配信命令188(任意選択でサブイベント配信命令を含む)の少なくともサブセットも含む。
[0127]
イベント受信部182は、イベントソート部170からイベント情報を受信する。イベント情報は、サブイベントについての情報、例えば、タッチ又はタッチの移動についての情報を含む。サブイベントに依存して、イベント情報は、サブイベントの位置などの追加の情報も含む。サブイベントがタッチの動きに関わるとき、イベント情報は任意選択で、サブイベントの速さ及び方向も含む。いくつかの実施形態では、イベントは、1つの向きから別の向きへの(例えば、縦向きから横向きへの、又はその逆の)デバイスの回転を含み、そのイベント情報は、デバイスの現在の向き(デバイスの姿勢とも呼ばれる)についての対応する情報を含む。
[0128]
イベント比較部184は、イベント情報を既定のイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント又はサブイベントを判定するか、あるいはイベント又はサブイベントの状態を判定若しくは更新する。いくつかの実施形態では、イベント比較部184は、イベント定義186を含む。イベント定義186は、例えば、イベント1(187−1)、イベント2(187−2)などの、イベントの定義(例えば、サブイベントの所定のシーケンス)を含む。いくつかの実施形態では、イベント187におけるサブイベントは、例えば、タッチの始め、タッチの終わり、タッチの移動、タッチの中止、及び複数のタッチを含む。一実施例では、イベント1(187−1)についての定義は、表示されたオブジェクト上のダブルタップである。ダブルタップは、例えば、表示されたオブジェクト上の予め定められた段階についての第1のタッチ(タッチの始め)、予め定められた段階についての第1のリフトオフ(タッチの終わり)、表示されたオブジェクト上の予め定められた段階についての第2のタッチ(タッチの始め)、及び予め定められた段階についての第2のリフトオフ(タッチの終わり)を含む。別の実施例では、イベント2(187−2)の定義は、表示されたオブジェクト上のドラッグである。ドラッグは、例えば、表示されたオブジェクト上の予め定められた段階についてのタッチ(又は、接触)、タッチ感知ディスプレイシステム112を横切るタッチの移動、及びタッチのリフトオフ(タッチの終わり)を含む。いくつかの実施形態では、イベントは、1つ以上の関連付けられたイベント処理部190に関する情報も含む。
[0129]
いくつかの実施形態では、イベント定義187は、それぞれのユーザインターフェースオブジェクトに関するイベントの定義を含む。いくつかの実施形態では、イベント比較部184は、サブイベントに関連付けられたユーザインターフェースオブジェクトを判定するヒットテストを実行する。例えば、3つのユーザインターフェースオブジェクトがタッチ感知ディスプレイシステム112上で表示されるアプリケーションビューにおいて、タッチ感知ディスプレイシステム112上でタッチが検出されたとき、イベント比較部184は、3つのユーザインターフェースオブジェクトのうちのどれがタッチ(サブイベント)と関連付けられているかを判定するためにヒットテストを実行する。表示された各オブジェクトが、対応するイベント処理部190と関連付けられている場合、イベント比較部は、ヒットテストの結果を使用して、どのイベント処理部190をアクティブ化すべきかを判定する。例えば、イベント比較部184は、サブイベント及びヒットテストのトリガとなるオブジェクトと関連付けられたイベント処理部を選択する。
[0130]
いくつかの実施形態では、それぞれのイベント187の定義は、一連のサブイベントがイベント認識部のイベントタイプに対応するかどうかが判定されるまで、イベント情報の配信を遅らせる遅延アクションも含む。
[0131]
それぞれのイベント認識部180が一連のサブイベントがイベント定義186のイベントのいずれとも一致しないと判定した場合、それぞれのイベント認識部180は、イベント不可能、イベント失敗、又はイベント終了の状態に入り、その後は、タッチに基づくジェスチャの次のサブイベントを無視する。この状況では、ヒットビューに対してアクティブのままである他のイベント認識部がある場合、そのイベント認識部は、進行中のタッチに基づくジェスチャのサブイベントを追跡及び処理し続ける。
[0132]
いくつかの実施形態では、それぞれのイベント認識部180は、イベント配信システムがどのようにサブイベント配信を実行すべきかをアクティブに関与しているイベント認識部に示す構成可能なプロパティ、フラグ、及び/又はリストを有するメタデータ183を含む。いくつかの実施形態では、メタデータ183は、イベント認識部が相互にどのように対話するか又は対話することが可能とされているかについて示す構成可能なプロパティ、フラグ、及び/又はリストを含む。いくつかの実施形態では、メタデータ183は、サブイベントがビュー階層又はプログラム階層における多様なレベルに配信されるかどうかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。
[0133]
いくつかの実施形態では、それぞれのイベント認識部180は、イベントの1つ以上の特定のサブイベントが認識されたときに、イベントに関連付けられたイベント処理部190をアクティブ化する。いくつかの実施形態では、それぞれのイベント認識部180は、イベントに関連付けられたイベント情報をイベント処理部190に配信する。イベント処理部190をアクティブ化することは、対応するヒットビューにサブイベントを送信する(及び送信を延期する)こととは異なっている。いくつかの実施形態では、イベント認識部180は、認識されたイベントに関連付けられたフラグをスローし、フラグに関連付けられたイベント処理部190は、フラグをキャッチし、所定の処理を実行する。
[0134]
いくつかの実施形態では、イベント配信命令188は、イベント処理部をアクティブ化することなくサブイベントに関するイベント情報を配信するサブイベント配信命令を含む。その代わりに、サブイベント配信命令は、一連のサブイベントと関連付けられたイベント処理部又はアクティブに関わっているビューに、イベント情報を配信する。一連のサブイベント又はアクティブに関わっているビューと関連付けられたイベント処理部は、イベント情報を受信し、所定の処理を実行する。
[0135]
いくつかの実施形態では、データ更新部176は、アプリケーション136−1で使用されるデータを作成及び更新する。例えば、データ更新部176は、連絡先モジュール137で使用される電話番号を更新、又はビデオプレーヤモジュール145で使用されるビデオファイルを記憶する。いくつかの実施形態では、オブジェクト更新部177は、アプリケーション136−1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクト更新部177は、新たなユーザインターフェースオブジェクトを作成する、又はユーザインターフェースオブジェクトの位置を更新する。GUI更新部178は、GUIを更新する。例えば、GUI更新部178は、表示情報を準備し、タッチ感知ディスプレイ上に表示するために表示情報をグラフィックモジュール132に送る。
[0136]
いくつかの実施形態では、イベント処理部(単数又は複数)190は、データ更新部176、オブジェクト更新部177、及びGUI更新部178を含む、又はそれらへのアクセスを有する。いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178は、それぞれのアプリケーション136−1又はアプリケーションビュー191の単一モジュールに含まれる。他の実施形態では、それらは、2つ以上のソフトウェアモジュールに含まれる。
[0137]
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の記載は、入力デバイスを用いて多機能デバイス100を動作させるための他の形態のユーザ入力にも適用されるが、そのすべてがタッチ画面上で開始されるわけではないことを理解されたい。例えば、単一若しくは複数のキーボードの押圧若しくは保持に任意選択で合わせたマウスの移動及びマウスボタンの押圧、タッチパッド上のタップ、ドラッグ、スクロールなどの接触の移動、ペンスタイラス入力、デバイスの移動、口頭命令検出された眼球運動、バイオメトリック入力、並びに/又はそれらの任意の組み合わせは任意選択で、認識されることになるイベントを定義するサブイベントに対応する入力として利用される。
[0138]
図2は、いくつかの実施形態に係る、タッチ画面(例えば、タッチ感知ディスプレイシステム112、図1A)を有するポータブル多機能デバイス100を示す。タッチ画面は、ユーザインターフェース(user interface)(UI)200内に1つ以上のグラフィックを、任意選択で表示する。本実施形態、及び後述する実施形態において、ユーザは、例えば、1本以上の指202(図には、正確な縮尺率では描かれていない)又は1つ以上のスタイラス203(図には、正確な縮尺率では描かれていない)を用いて、グラフィック上でジェスチャを行うことにより、グラフィックのうちの1つ以上を選択することができる。いくつかの実施形態では、ユーザが1つ以上のグラフィックとの接触を断った際に、その1つ以上のグラフィックの選択が生じる。いくつかの実施形態では、ジェスチャは、1回以上のタップ、1回以上のスワイプ(左から右へ、右から左へ、上向きに及び/若しくは下向きに)、並びに/又は、デバイス100と接触した指のローリング(右から左へ、左から右へ、上向きに及び/若しくは下向きに)を、任意選択で含む。いくつかの実装形態又は状況では、グラフィックとの不測の接触は、グラフィックを選択しない。例えば、選択に対応するジェスチャがタップであるとき、アプリケーションアイコンの上をスイープするスワイプジェスチャは、任意選択で、対応するアプリケーションを選択しない。
[0139]
デバイス100は、任意選択で、「ホーム」又はメニューボタン204などの1つ以上の物理的ボタンも含む。前述のように、メニューボタン204は、任意選択で、デバイス100上で任意選択で実行される、アプリケーションのセットにおける任意のアプリケーション136にナビゲートするために使用される。あるいは、いくつかの実施形態では、メニューボタンは、タッチ画面ディスプレイ上で表示されるGUI内のソフトキーとして実装される。
[0140]
いくつかの実施形態では、デバイス100は、タッチ画面ディスプレイと、メニューボタン204と、デバイスへの電源供給のオン/オフ及びデバイスのロックのためのプッシュボタン206と、ボリューム調節ボタン(単数又は複数)208と、加入者識別モジュール(SIM)カードスロット210と、ヘッドセットジャック212と、ドッキング/充電用外部ポート124と、を含む。プッシュボタン206は、ボタンを押下して、所定の時間にわたってボタンを押下した状態で保持することによってデバイス上の電源をオン/オフし、ボタンを押下し、所定の時間間隔が経過する前にボタンを解放することによってデバイスをロックし、及び/又はデバイスをロック解除し、若しくはロック解除処理を開始するために使用されてもよい。いくつかの実施形態では、デバイス100は、マイクロフォン113を通して、一部の機能をアクティブ化又は非アクティブ化するための口頭入力も受け入れる。デバイス100は、任意選択で、タッチ感知ディスプレイシステム112上の接触強度を検出するための1つ以上の接触強度センサ165、及び/又はデバイス100のユーザに対する触知出力を生成するための1つ以上の触知出力生成器167も含む。
[0141]
図3は、いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。デバイス300は、ポータブル型である必要はない。いくつかの実施形態では、デバイス300は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディア再生デバイス、ナビゲーションデバイス、教育的デバイス(子供の学習玩具など)、ゲームシステム、又は制御デバイス(例えば、家庭用又は業務用コントローラ)である。デバイス300は、典型的には、1つ以上の処理ユニット(CPU)310と、1つ以上のネットワーク又は他の通信インターフェース360と、メモリ370と、及びこれらの構成要素を相互接続するための1つ以上の通信バス320とを含む。通信バス320は、システム構成要素間の通信を相互接続及び制御する回路(チップセットと呼ばれることがある)を、任意選択で含む。デバイス300は典型的にはタッチ画面ディスプレイであるディスプレイ340を含む、入出力(I/O)インターフェース330を含む。I/Oインターフェース330は、任意選択で、キーボード及び/又はマウス(又は、他のポインティングデバイス)350、並びにタッチパッド355、(例えば、図1Aを参照して上記説明された触知出力生成器(単数又は複数)167と同様の)デバイス300上で触知出力を生成するための触知出力生成器357、センサ359(例えば、光センサ、加速度センサ、近接センサ、タッチ感知センサ、及び/又は図1Aを参照して上記説明された接触強度センサ(単数又は複数)165と同様の接触強度センサ)も含む。メモリ370は、DRAM、SRAM、DDR RAM、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含み、任意選択で、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含む。メモリ370は、任意選択で、CPU(単数又は複数)310から遠隔に位置する1つ以上の記憶デバイスを含む。いくつかの実施形態では、メモリ370は、ポータブル多機能デバイス100(図1A)のメモリ102に記憶されたプログラム、モジュール、及びデータ構造に類似のプログラム、モジュール、及びデータ構造、又はそれらのサブセットを記憶する。更に、メモリ370は任意選択で、ポータブル多機能デバイス100のメモリ102に存在しない追加のプログラム、モジュール、及びデータ構造を記憶する。例えば、デバイス300のメモリ370は任意選択で、描画モジュール380、プレゼンテーションモジュール382、ワードプロセッシングモジュール384、ウェブサイト作成モジュール386、ディスクオーサリングモジュール388、及び/又はスプレッドシートモジュール390を記憶するが、ポータブル多機能デバイス100(図1A)のメモリ102は、任意選択で、それらのモジュールを記憶しない。
[0142]
上記特定された図3における要素の各々は、任意選択で、前に言及したメモリデバイスのうちの1つ以上に記憶される。上記特定されたモジュールのうちの各々は、上記説明された機能を実行する命令セットに対応する。上記特定されたモジュール又はプログラム(すなわち、命令セット)は、別々のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、それらのモジュールの様々なサブセットは任意選択で、様々な実施形態において組み合わされ、又はその他の方式で再配置される。いくつかの実施形態では、メモリ370は任意選択で、上記特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ370は、任意選択で、上記説明されていない追加のモジュール及びデータ構造を記憶する。
[0143]
ここで、ポータブル多機能デバイス100上で任意選択で実装されるユーザインターフェース(「UI」)の実施形態に着目する。
[0144]
図4Aは、いくつかの実施形態に係る、ポータブル多機能デバイス100上のアプリケーションのメニューのための例示的なユーザインターフェースを示す。同様のユーザインターフェースがデバイス300上に、任意選択で、実装される。いくつかの実施形態では、ユーザインターフェース400は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
[0145]
セルラー信号及びWi−Fi信号などの無線通信(単数又は複数)のための信号強度インジケータ(単数又は複数)402、
[0146]
時刻404、
[0147]
Bluetoothインジケータ405、
[0148]
バッテリ状態インジケータ406、
[0149]
下記などの、頻繁に利用されるアプリケーション用のアイコンを含むトレイ408、
[0150]
不在着信又はボイスメールメッセージの数のインジケータ414を任意選択で含む、「電話」とラベル付けされた電話モジュール138用のアイコン416、
[0151]
未読電子メールの数のインジケータ410を任意選択で含む、「メール」とラベル付けされた、電子メールクライアントモジュール140用のアイコン418、
[0152]
「ブラウザ」とラベル付けされた、ブラウザモジュール147用のアイコン420、及び
[0153]
「iPod」とラベル付けされた、iPod(アップル社の登録商標)モジュール152とも呼ばれるビデオ及び音楽プレーヤモジュール152用のアイコン422及び
[0154]
下記などの、その他のアプリケーション用のアイコン、
[0155]
「メッセージ」とラベル付けされた、IMモジュール141用のアイコン424、
[0156]
「カレンダ」とラベル付けされた、カレンダモジュール148用のアイコン426、
[0157]
「写真」とラベル付けされた、画像管理モジュール144用のアイコン428、
[0158]
「カメラ」とラベル付けされた、カメラモジュール143用のアイコン430、
[0159]
「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール155用のアイコン432、
[0160]
「株価」とラベル付けされた、株価ウィジェット149−2用のアイコン434、
[0161]
「地図」とラベル付けされた、地図モジュール154用のアイコン436、
[0162]
「天気」とラベル付けされた、天気ウィジェット149−1用のアイコン438、
[0163]
「時計」とラベル付けされた、アラーム時計ウィジェット149−4用のアイコン440、
[0164]
「トレーニングサポート」とラベル付けされた、トレーニングサポートモジュール142用のアイコン442、
[0165]
「メモ」とラベル付けされた、メモモジュール153用のアイコン444、及び
[0166]
デバイス100及びその様々なアプリケーション136に関する設定へのアクセスを提供する、設定アプリケーション若しくはモジュール用のアイコン446。
[0167]
図4Aに示されたアイコンのラベルは単なる例に過ぎないことに留意されたい。例えば、いくつかの実施形態では、ビデオ及び音楽プレーヤモジュール152用のアイコン422は、「Music(音楽)」又は「Music Player(音楽プレーヤ)」とラベル付けされる。他のラベルが、様々なアプリケーションアイコンのために、任意選択で使用される。いくつかの実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。いくつかの実施形態では、特定のアプリケーションアイコンのラベルは、特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
[0168]
図4Bは、ディスプレイ450と分離したタッチ感知面451(例えば、タブレット又はタッチパッド355、図3)を有するデバイス(例えば、デバイス300、図3)上の例示的なユーザインターフェースを示す。デバイス300はまた任意選択で、タッチ感知面451上の接触の強度を検出するための1つ以上の接触強度センサ(例えば、センサ357のうちの1つ以上)、及び/又はデバイス300のユーザに対して触知出力を生成するための1つ以上の触知出力生成器359を含む。
[0169]
図4Bは、ディスプレイ450と分離したタッチ感知面451(例えば、タブレット又はタッチパッド355、図3)を有するデバイス(例えば、デバイス300、図3)上の例示的なユーザインターフェースを示す。以下の実施例のうちの多くはタッチ画面ディスプレイ112上の入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して与えられるが、いくつかの実施形態では、デバイスは、図4Bに示すように、ディスプレイと分離したタッチ感知面上の入力を検出する。いくつかの実施形態では、タッチ感知面(例えば、図4Bにおける451)は、ディスプレイ(例えば、450)上の主軸(例えば、図4Bにおける453)に対応する主軸(例えば、図4Bにおける452)を有する。それらの実施形態によれば、デバイスは、ディスプレイ上のそれぞれの位置に対応する位置(例えば、図4Bにおいて、460は468に対応し、462は470に対応する)におけるタッチ感知面451との接触(例えば、図4Bにおける460及び462)を検出する。このように、タッチ感知面がディスプレイと分離しているとき、タッチ感知面(例えば、図4Bにおける451)上でデバイスによって検出されたユーザ入力(例えば、接触460及び462、及びそれらの移動)は、多機能デバイスのディスプレイ(例えば、図4Bにおける450)上でユーザインターフェースを操作するためにデバイスによって使用される。同様の方法が、本明細書に記載の他のユーザインターフェースに任意選択で使用されることを理解されたい。
[0170]
加えて、以下の実施例は、主に指入力(例えば、指の接触、指のタップジェスチャ、指のスワイプジェスチャなど)を参照して与えられるが、いくつかの実施形態では、それらの指の入力のうちの1つ以上は、別の入力デバイスからの入力(例えば、マウスに基づく入力又はスタイラス入力)と置換されることを理解されたい。例えば、スワイプジェスチャは、任意選択で、マウスクリックと置換され(例えば、接触の代わりに)、その後、スワイプの経路に沿ってカーソルの移動が行われる(例えば、接触の移動の代わりに)。別の例として、タップジェスチャは任意選択で、カーソルがタップジェスチャの位置の上に位置する間のマウスクリックに置換される(例えば、接触の検出、それに続いて接触の検出を停止する代わりに)。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスは任意選択で同時に使用され、又はマウス及び指の接触が任意選択で同時に使用されることを理解されたい。
[0171]
本明細書で使用される場合、用語「フォーカスセレクタ」は、ユーザが対話しているユーザインターフェースの現在の部分を示す入力要素を指す。カーソル又は他のロケーションマーカを含むいくつかの実装形態では、カーソルは、カーソルが特定のユーザインターフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインターフェース要素)の上にある間に、タッチ感知面(例えば、図3におけるタッチパッド355、又は図4Bにおけるタッチ感知面451)上で入力(例えば、押圧入力)が検出されると、特定のユーザインターフェース要素が検出された入力に従って調整されるように、「フォーカスセレクタ」として機能する。タッチ画面ディスプレイ上のユーザインターフェース要素との直接的な対話を有効化するタッチ画面ディスプレイ(例えば、図1Aにおけるタッチ感知ディスプレイシステム112、又は図4Aにおけるタッチ画面)を含む一部の実装形態では、タッチ画面上で検出された接触は、入力(例えば、接触による押圧入力)がタッチ画面ディスプレイ上で特定のユーザインターフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインターフェース要素)の位置において検出されると、特定のユーザインターフェース要素が検出された入力に従って調節されるように、「フォーカスセレクタ」として機能する。いくつかの実装では、タッチ画面ディスプレイ上の対応するカーソルの移動又は接触の移動なしに、(例えば、タブキー又は矢印キーを使ってフォーカスを1つのボタンから別のボタンに移動させることにより)フォーカスが、ユーザインターフェースの1つの領域からユーザインターフェースの別の領域に移動される。これらの実装形態では、フォーカスセレクタは、ユーザインターフェースの異なる領域間でのフォーカスの移動に従って移動する。フォーカスセレクタによってとられる具体的な形態とは関わりなく、フォーカスセレクタは一般的に、ユーザインターフェースとのユーザの意図した対話を通信するために(例えば、ユーザが対話することを意図しているユーザインターフェースの要素をデバイスに示すことによって)、ユーザによって制御されるユーザインターフェース要素(又は、タッチ画面ディスプレイ上の接触)である。例えば、押圧入力がタッチ感知面(例えば、タッチパッド又はタッチ画面)上で検出されたときに、対応するボタンの上にあるフォーカスセレクタ(例えば、カーソル、接触又は選択ボックス)の位置は、(デバイスのディスプレイ上に示されている他のユーザインターフェース要素ではなく)対応するボタンをユーザがアクティブ化しようとしていることを示すものである。
[0172]
本明細書及び特許請求の範囲で使用されるように、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指の接触又はスタイラスの接触)の力若しくは圧力(単位面積あたりの力)、又はタッチ感知面上の接触の力若しくは圧力の代替物プロキシ)を指す。接触強度は、少なくとも4つの異なる値を含み、より典型的には、数百の(例えば、少なくとも256個の)異なる値を含む、値の範囲を有する。接触強度は、任意選択で、様々な手法、及び様々なセンサ又はセンサの組み合わせを使用して判定(又は、測定)される。例えば、タッチ感知面の下に又はこれに隣接する1つ以上の力センサが、任意選択で、タッチ感知面上の様々な点における力を測定するために使用される。いくつかの実装形態では、複数の力センサからの力測定値は、推定される接触の力を判定するために組み合わされる(例えば、加重平均又は合計)。同様に、スタイラスの感圧性先端部を任意選択で使用して、タッチ感知面上のスタイラスの圧力を判定する。あるいは、タッチ感知面上で検出される接触領域のサイズ及び/若しくはその変化、接触に近接するタッチ感知面の電気容量及び/若しくはその変化、並びに/又は、接触に近接するタッチ感知面の抵抗及び/若しくはその変化が、タッチ感知面上の接触の力又は圧力の代替物として、任意選択で用いられる。いくつかの実装形態では、接触の力又は圧力の代替的測定値は、強度閾値を超えているかどうかを判定するために直接に用いられる(例えば、強度閾値は、代替的測定値に対応する単位で記述される)。いくつかの実装形態では、接触の力又は圧力の代替する測定値は、推定される力又は圧力に変換され、推定される力又は圧力は、強度閾値を超えているかどうかを判定するために使用される(例えば、強度閾値は、圧力の単位で測定された圧力閾値である)。接触強度をユーザ入力の属性として使用することは、アフォーダンスを(例えば、タッチ感知ディスプレイ上に)表示するため、及び/又はユーザ入力を(例えば、タッチ感知ディスプレイ、タッチ感知面、又はノブ若しくはボタンなどの物理的/機械的制御を介して)受信するための面積が制限された、低減されたサイズのデバイスにおいて、ユーザによるアクセスが他の場合に容易には不可能であり得る、追加のデバイス機能へのユーザのアクセスを可能にする。
[0173]
いくつかの実施形態では、接触/動きモジュール130は、ユーザによって動作が実行されたかどうかを判定するための(例えば、ユーザがアイコン上で「クリック」したかどうかを判定するための)、1つ以上の強度閾値のセットを使用する。いくつかの実施形態では、少なくとも強度閾値のサブセットは、ソフトウェアパラメータに従って判定される(例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって判定されず、デバイス100の物理ハードウェアを変更することなく調節されてもよい)。例えば、トラックパッド又はタッチ画面ディスプレイのマウス「クリック」閾値は、トラックパッド又はタッチ画面ディスプレイのハードウェアを変更することなく広範囲の所定の閾値のうちのいずれかに設定し得る。更に、いくつかの実装では、デバイスのユーザには、(例えば、個々の強度閾値を調整することにより、及び/又は、システムレベルのクリック「強度」パラメータにより、一度に複数の強度閾値を調整することによって)強度閾値のセットのうちの1つ以上を調整するためのソフトウェア設定が提供される。
[0174]
本明細書及び特許請求の範囲で使用するとき、接触の「特性強度」という用語は、接触の1つ以上の強度に基づく、その接触の特性を指す。いくつかの実施形態では、特性強度は複数の強度サンプルに基づく。特性強度は、任意選択で、所定の数の強度サンプル、又は所定のイベント(例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終了を検出する前、接触の強度の増加を検出する前若しくは後、及び/又は接触の強度の減少を検出する前若しくは後)に対して所定の期間(例えば、0.05、0.1、0.2、0.5、1、2、5、10秒)内に収集された強度サンプルのセットに基づく。接触の特性強度は、接触強度の最大値、接触強度の平均値(mean value)、接触強度の平均値(average value)、接触強度の上位10パーセント値、接触強度の最大の半分の値、接触強度の最大の90パーセントの値などのうちの任意の1つ以上に任意選択で基づいている。いくつかの実施形態では、特性強度を判定するために、接触の持続期間が使用される(例えば、特性強度が経時的な接触強度の平均であるとき)。いくつかの実施形態では、動作がユーザによって実行されたかどうかを判定するために、特性強度を1つ以上の強度閾値のセットと比較する。例えば、1つ以上の強度閾値のセットは、第1の強度閾値及び第2の強度閾値を含むことができる。この実施例では、第1の閾値を上回らない特性強度を有する接触の結果として第1の動作が実行され、第1の強度閾値を上回り、第2の強度閾値を上回らない特性強度を有する接触の結果として第2の動作が実行され、第2の強度閾値を超える特性強度を有する接触の結果として第3の動作が実行される。いくつかの実施形態では、特性強度と1つ以上の強度閾値の間の比較は、第1の動作又は第2の動作のいずれを実行するかを判定するために使用されるのではなく、1つ以上の動作を実行するかどうか(例えば、それぞれの選択肢を実行し、又はそれぞれの動作を実行することを控えるかどうか)を判定するために使用される。
[0175]
いくつかの実施形態では、ジェスチャの一部は、特性強度を判定する目的で特定される。例えば、タッチ感知面は、開始位置から遷移して終了場所に達する連続的なスワイプ接触(例えば、ドラッグジェスチャ)を受け取る場合があり、この終了位置で接触の強度が増加する。この実施例では、終了位置における接触の特性強度は、連続的なスワイプ接触全体ではなく、そのスワイプ接触の一部分のみ(例えば、スワイプ接触の終了位置における部分のみ)に基づいてもよい。いくつかの実施形態では、接触の特性強度を判定する前に、平滑化アルゴリズムをそのスワイプ接触の強度に適用してもよい。例えば、平滑化アルゴリズムは、任意選択で、非加重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び/又は指数平滑化アルゴリズムのうちの1つ以上を含む。いくつかの状況では、それらの平滑化アルゴリズムは、特性強度を判定する目的で、スワイプ接触の強度の小幅な上昇又は低下を除去する。
[0176]
本明細書で説明されるユーザインターフェースの図は、任意選択で、1つ以上の強度閾値(例えば、接触検出強度閾値IT、軽い押圧強度閾値IT、深い押圧強度閾値IT(例えば、少なくとも最初はIよりも高い)、及び/又は1つ以上の他の強度閾値(例えば、Iよりも低い強度閾値I)に対する、タッチ感知面上の接触の現在の強度を示す、様々な強度の図を含む。この強度の図は、典型的には、表示されるユーザインターフェースの一部ではないが、図の解釈を支援するために提供される。いくつかの実施形態では、軽い押圧強度閾値は、物理的マウスのボタン又はトラックパッドをクリックすることと典型的に関連付けられた操作をデバイスが実行する強度に対応する。いくつかの実施形態では、深い押圧強度閾値は、物理的マウスのボタン又はトラックパッドをクリックすることと典型的に関連付けられた動作とは異なる動作をデバイスが実行する強度に対応する。いくつかの実施形態では、軽い押圧強度閾値を下回る(例えば、かつ、それを下回ると接触がもはや検出されない名目上の接触検出強度閾値ITを上回る)特性強度で接触が検出されると、デバイスは、軽い押圧強度閾値又は深い押圧強度閾値と関連付けられた動作を実行することなく、タッチ感知面上の接触の移動に従ってフォーカスセレクタを移動させる。全般的には、特に明記しない限り、これらの強度閾値は、ユーザインターフェース図の異なるセット間でも一貫している。
[0177]
いくつかの実施形態では、デバイスによって検出された入力へのデバイスの応答は、入力中の接触強度に基づく基準に依存する。例えば、いくつかの「軽い押圧」入力について、入力中の第1の強度閾値を超える接触強度は第1の応答をトリガする。いくつかの実施形態では、デバイスによって検出された入力へのデバイスの応答は、入力中の接触強度及び時間に基づく基準の両方を含む基準に依存する。例えば、いくつかの「深い押圧」入力について、入力中の軽い押圧に対する第1の強度閾値より大きい第2の強度閾値を超える接触の強度は、第1の強度閾値を満たすことと第2の強度閾値を満たすことの間で遅延時間が経過した場合のみ、第2の応答をトリガする。この遅延時間は、典型的には、持続時間が200ms未満である(例えば、第2の強度閾値の大きさにより、40ms、100ms、又は120msであり、遅延時間は第2の強度閾値が増加するにつれ増加する)。この遅延時間は、偶発的な深い押圧入力を防ぐのに役立つ。別の実施例として、いくつかの「深い押圧」入力について、第1の強度閾値が満たされる時間の後に発生する感度が低下した時間期間が存在する。感度が低下した時間期間の間、第2の強度閾値は増加する。第2の強度閾値のこの一時的な増加も、偶発的な深い押圧入力を回避することを支援する。他の深い押圧入力について、深い押圧入力の検出に対する応答は、時間に基づく基準に依存しない。
[0178]
いくつかの実施形態では、入力強度閾値及び/又は対応する出力のうちの1つ以上は、ユーザ設定、接触の動き、入力タイミング、実行しているアプリケーション、強度が加わる速度、同時に行われる入力の数、ユーザ履歴、環境要因(例えば、周囲ノイズ)、フォーカスセレクタの位置などの1つ以上の要因に基づいて変化する。例示的な要因が、米国特許出願公開第14/399,606号及び第14/624,296号に記載されており、それらの全体が参照により本明細書に組み込まれている。
[0179]
例えば、図4Cは、経時的なタッチ入力476の強度に部分的に基づいて経時的に変化する動的強度閾値480を示す。動的強度閾値480は、2つの成分の合計であり、第1の成分474は、タッチ入力476が最初に検出されるときから所定の遅延時間p1の後に経時的に減衰し、第2の成分478は、経時的にタッチ入力476の強度を追跡する。第1の成分474の初期の高強度閾値は、「深い押圧」応答を偶発的にトリガすることを削減するとともに、タッチ入力476が十分な強度を提供する場合に即時的な「深い押圧」応答をなおも可能にする。第2の成分478は、タッチ入力の段階的な強度変動によって「深い押圧」応答を意図せずにトリガすることを削減する。いくつかの実施形態では、タッチ入力476が動的強度閾値480を満たすとき(例えば、図4Cにおける点481において)、「深い押圧」応答がトリガされる。
[0180]
図4Dは、別の動的強度閾値486(例えば、強度閾値I)を示す。図4Dは、2つの他の強度閾値、第1の強度閾値I及び第2の強度閾値Iも示す。図4Dにおいて、タッチ入力484が時間p2の前に第1の強度閾値I及び第2の強度閾値Iを満たすが、時間482において遅延時間p2が経過するまでは応答が提供されない。また、図4Dでは、動的強度閾値486は、所定の遅延時間p1が時間482から経過した後(第2の強度閾値Iに関連する応答がトリガされたとき)の時間488に開始する減衰で、経時的に減衰する。このタイプの動的強度閾値は、第1の強度閾値I又は第2の強度閾値Iなどの、より低い強度閾値と関連付けられた応答をトリガした直後、又はそれと同時に、動的強度閾値Iと関連付けられた応答を偶発的にトリガすることを削減する。
[0181]
図4Eは、更なる別の動的強度閾値492(例えば、強度閾値I)を示す。図4Eでは、強度閾値Iと関連付けられた応答は、タッチ入力490が最初に検出されるときから遅延時間p2が経過した後にトリガされる。同時に、動的強度閾値492は、タッチ入力490が最初に検出されたときから所定の遅延時間p1が経過した後に減衰する。よって、タッチ入力490を解除することなしに、強度閾値Iに関連付けられた応答をトリガした後の、タッチ入力490の強度の増加がその後に続くタッチ入力490の強度の減少は、タッチ入力490の強度が別の強度閾値、例えば、強度閾値Iを下回るときでさえも、(例えば、時間494において)強度閾値Iに関連付けられた応答をトリガすることができる。
[0182]
軽い押圧強度閾値ITを下回る強度から、軽い押圧強度閾値ITと深い押圧強度閾値ITの間の強度への接触の特性強度の増加は、「軽い押圧」入力と称される場合がある。深い押圧強度閾値ITを下回る強度から深い押圧強度閾値ITを上回る強度への接触の特性強度の増加は、「深い押圧」入力と称される場合がある。接触検出強度閾値ITを下回る強度から接触検出強度閾値ITと軽い押圧強度閾値ITの間の強度への接触の特性強度の増加は、タッチ面上の接触の検出と称される場合がある。接触検出強度閾値ITを上回る強度から接触検出強度閾値ITを下回る強度への接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と称される場合がある。いくつかの実施形態では、ITはゼロである。いくつかの実施形態では、ITはゼロを超える。いくつかの例示では、タッチ感知面上の接触の強度を表すために、網掛けした円又は楕円が使用される。いくつかの例示では、それぞれの接触の強度を指定することなく、タッチ感知面上のそれぞれの接触を表すために、網掛けなしの円又は楕円が使用される。
[0183]
本明細書に記載されるいくつかの実施形態では、1つ以上の動作は、それぞれの押圧入力を含むジェスチャを検出したことに応答して、又はそれぞれの接触(又は複数の接触)で実行されるそれぞれの押圧入力を検出したことに応答して実行され、それぞれの押圧入力は、押圧入力強度閾値を上回る接触(又は、複数の接触)の強度の増加を検出したことに少なくとも部分的に基づいて検出される。いくつかの実施形態では、それぞれの動作は、押圧入力強度閾値を上回るそれぞれの接触の強度の増加を検出したことに応答して実行される(例えば、それぞれの動作は、それぞれの押圧入力の「ダウンストローク」上で実行される)。いくつかの実施形態では、押圧入力は、押圧入力強度閾値を上回るそれぞれの接触の強度の増加、及び押圧入力強度閾値を下回る接触の強度のその後の減少を含み、それぞれの動作は、押圧入力閾値を下回るそれぞれの接触の強度のその後の減少を検出したことに応答して実行される(例えば、それぞれの動作は、それぞれの押圧入力の「アップストローク」上で実行される)。
[0184]
いくつかの実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある不測の入力を回避するために、強度ヒステリシスを採用し、デバイスは、押圧入力強度閾値との所定の関連性を有するヒステリシス強度閾値を定義又は選択する(例えば、ヒステリシス強度閾値は、押圧入力強度閾値よりもX強度単位が低いか、又は、ヒステリシス強度閾値は、押圧入力強度閾値の75%、90%、若しくは何らかの妥当な比率である)。したがって、いくつかの実施形態では、押圧入力は、押圧入力強度閾値を上回るそれぞれの接触の強度の増加、及び押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度のその後の減少を含み、それぞれの動作は、ヒステリシス強度閾値を下回るそれぞれの接触の強度のその後の減少を検出したことに応答して実行される(例えば、それぞれの動作は、それぞれの押圧入力の「アップストローク」上で実行される)。同様に、いくつかの実施形態では、押圧入力は、デバイスが、ヒステリシス強度閾値以下の強度から押圧入力強度閾値以上の強度への接触の強度の増加、及び任意選択で、ヒステリシス強度以下の強度への、後続の接触の強度の減少を検出した場合にのみ検出され、それぞれの動作は、その押圧入力(例えば、状況に応じて、接触の強度の増加、又は接触の強度の減少)を検出したことに応答して、実行される。
[0185]
説明を容易にするために、押圧入力強度閾値に関連する押圧入力に応答して、又は押圧入力を含むジェスチャに応答して実行される動作の記載は、任意選択で、押圧入力強度閾値を上回る接触強度の増加、ヒステリシス強度閾値を下回る強度から押圧入力強度閾値を上回る強度への接触の強度の増加、押圧入力強度閾値を下回る接触の強度の減少、又は押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少、を検出したことに応答して、トリガされる。更に、押圧入力強度閾値を下回る接触の強度の減少を検出したことに応答して動作が実行されるとして説明される実施例では、その動作は、押圧入力強度閾値に対応し、かつそれよりも低いヒステリシス強度閾値を下回る、接触の強度の減少を検出したことに応答して任意選択で実行される。上述のように、いくつかの実施形態では、それらの応答のトリガは、満たされる時間に基づく基準にも依存する(例えば、遅延時間は、第1の強度閾値が満たされることと第2の強度閾値が満たされることの間で経過している)。
ユーザインターフェース及び関連付けられた処理
[0186]
ここで、ディスプレイとタッチ感知面とタッチ感知面の接触の強度を検出するための1つ以上のセンサとを備える、ポータブル多機能デバイス100又はデバイス300などの電子デバイス上で実装され得る、ユーザインターフェース(「UI」)及び関連付けられた処理の実施形態に注意を向ける。
[0187]
図5A〜図5BJは、いくつかの実施形態に係る、一般的なデバイス機能にアクセスするための例示的なユーザインターフェースを示す。それらの図におけるユーザインターフェースは、図6A〜図6E、図7A〜図7E、図8A〜図8C、及び図9A〜図9Eにおける処理を含む、以下で説明されるプロセスを示すために使用される。以下の実施例のうちのいくつかは、(タッチ感知面とディスプレイとを組み合わせた)タッチ画面ディスプレイ上での入力を参照して説明されるが、いくつかの実施形態では、デバイスは、図4Bに示すように、ディスプレイ450とは別個のタッチ感知面451上で入力を検出する。
[0188]
図5A−1〜図5A−4は、デバイス100の向きを変更したことに応答したディスプレイ(例えば、タッチ感知ディスプレイ112)のアクティブ化を示す。いくつかの実施形態では、デバイスは、デバイスの向きが変化したかどうかを判定するために、1つ以上のセンサ(例えば、加速度計、ジャイロ、オーディオセンサ、熱センサ、及び/又は光センサ)を使用する。例えば、デバイスは、デバイスが閾値角度を超えて回転されたか(例えば、デバイスが実質的に水平である位置からデバイスが実質的に垂直である位置まで傾けられるなど、デバイスの軸に沿って回転されたか)どうかを判定する。図5A−1では、デバイスディスプレイが実質的に水平になるように、デバイスはユーザの手502内で平坦に保持されている。図5A−2では、ディスプレイが図5A−1よりも垂直になるようにデバイスが傾けられている。図A−2では、デバイスの傾斜角度が閾値傾斜角度を上回って増加していないので、ディスプレイはアクティブ化されない。図5A−3では、ディスプレイが図5A−2よりも垂直になるようにデバイスが傾けられている。図A−3では、デバイスの傾斜角度が閾値傾斜角度を上回って増加しているので、ディスプレイはアクティブ化される(例えば、ディスプレイコンテンツ504がディスプレイによって表示される)。ディスプレイコンテンツ504は、例えば、時間、日付、信号インジケータ、バッテリ充電レベルインジケータ、ロックインジケータ、及び/又は1つ以上の通知(通知506など)を含む。図5A−4では、ディスプレイは実質的に垂直である。いくつかの実施形態では、ディスプレイがアクティブ化されると、ディスプレイコンテンツ504の一部又は全部が、ディスプレイコンテンツ504のデフォルトサイズよりも小さいサイズ(例えば、より狭い幅)で示される。ディスプレイがアクティブ化された後にデバイスが傾き続けると、ディスプレイコンテンツ504は、図5A−4に示すように、サイズがデフォルトサイズに徐々に増加する。
[0189]
図5B〜図5Eは、物理的ボタン204(例えば、「ホーム」又はメニューボタン)における接触508によって提供される入力に応答して表示されるユーザインターフェースを示す。図5Bでは、物理的ボタン204は、(例えば、接触が物理的ボタンを押下することなく物理的ボタンの表面に載っているときに)物理的ボタンを作動させない接触508を検出する。例えば、物理的ボタンは、物理的ボタン204を作動させない物理的ボタン204における接触508(例えば、作動メータ510によって示されるように、接触の特性強度が接触検出強度閾値ITを超えるが、作動閾値ITを超えない)の検出に従って、アクティブ化される(ただし作動されない)。いくつかの実施形態では、物理的ボタン204のアクティブ化は、デバイス及び/又はタッチ画面ディスプレイをウェイクさせる。例えば、物理的ボタンのアクティブ化に応答して、デバイスは、ディスプレイをアクティブ化し、図5Cに示されるように、ウェイク画面ユーザインターフェース512を表示する。
[0190]
いくつかの実施形態では、物理的ボタンの作動に応答して(例えば、図5Dの作動メータ510によって示されるように、物理的ボタン204との接触508の強度が作動閾値ITを超える場合)、デバイス100は、図5Eに示すように、複数のアプリケーションアイコン(例えば、アプリケーションアイコン416〜446)を含むユーザインターフェース(例えば、アプリケーションスプリングボードユーザインターフェース400)を表示する。
[0191]
いくつかの実施形態では、物理的ボタン204は、ユーザ検証スキャン(例えば、Touch IDスキャン)のための指紋センサなどの、バイオメトリックセンサを含む。いくつかの実施形態では、物理的ボタンのバイオメトリックセンサによる接触508に対応する指紋の認識によるユーザの検証の成功に応答して、物理的ボタンのアクティブ化及び/又は作動がデバイスをロック解除する。例えば、ユーザの検証が成功した物理的ボタン204のアクティブ化に応答して、ロックアイコン514のロック解除状態が、図5Cのウェイク画面インターフェース512に表示される。
[0192]
いくつかの実施形態では、デバイス100は、ホームボタン又はメニューボタン204として機能する(例えば、物理的ボタンの代わりの)仮想ボタンを含む。例えば、仮想ボタンは、仮想ボタンとの接触の特性強度が作動閾値を超えないという判定に従ってアクティブ化され、仮想ボタンは、仮想ボタンとの接触の特性強度が作動閾値を超えたという判定に従って作動される。いくつかの実施形態では、仮想ボタンは、ユーザ検証のためのバイオメトリックセンサを含む。
[0193]
図5F−1〜図5F−4は、(例えば、ロックアイコン514のロック状態によって示されるように)デバイス100がロックモードにある間に検出された入力に応答して表示されるユーザインターフェースのシーケンスを示す。図5F−1には、ウェイク画面インターフェース512が表示されている。いくつかの実施形態では、例えば、デバイスの電源をオン/オフしてデバイスをロックするためのプッシュボタン206における入力に応答して、(例えば、物理的ボタン204の指紋スキャナによって指紋が認識されないユーザによる)デバイスをロック解除しない物理的ボタン204での入力に応答して、及び/又はデバイスディスプレイをアクティブにするが、デバイスをロック解除しない仮想ボタンにおける入力に応答して、ウェイク画面インターフェース512のロックモードが表示される。
[0194]
図5F−1は、接触516が矢印518によって示される経路に沿って移動する下向きスワイプジェスチャを示す。下向きスワイプジェスチャに応答して、図5F−2に示すように、通知ユーザインターフェース520のロックモードが表示される。いくつかの実施形態では、下向きスワイプが発生すると、通知ユーザインターフェース520がディスプレイの上部から徐々に下降するように見えるアニメーションが表示される。
[0195]
図5F−2の検索入力領域524に対応する位置で検出された接触522による入力に応答して、図5F−3に示すように、キーボード528を有するユーザインターフェース526が表示される。
[0196]
図5F−3では、検索語(「movie」)が、(例えば、キーボード528を使用して)検索入力領域524に入力されている。検索を開始するための入力(例えば、キーボード528の「リターン」キーのアフォーダンスで検出された接触530による入力)に応答して、図5F−4に示すように、検索結果ユーザインターフェース532のロックモードが表示される。
[0197]
ユーザは、他の人が個人情報及び/又は機密情報を見ることができないように、ロックされているときにデバイス上に表示される情報を制限したい場合がある。いくつかの実施形態では、デバイスがロック解除されているときに表示される特定のタイプの通知、通知コンテンツ、及び/又は検索結果が、デバイスがロックされているときには見えないようにデバイスを構成することができる。図5F−5〜図5F−8は、通知ユーザインターフェース520及び検索結果ユーザインターフェース532のロック解除モードで表示される追加コンテンツを示す。
[0198]
図5F−5〜図5F−8は、デバイス100がロック(例えば、ロックアイコン514のロック解除モードによって示される)解除モードにある間に検出された入力に応答して表示されるユーザインターフェースのシーケンスを示す。いくつかの実施形態では、例えばデバイスをロック解除する物理的ボタン204における(例えば、指紋が物理的ボタン204の指紋スキャナによって認識されるユーザによる)入力に応答して、ウェイク画面インターフェース512のロック解除モードが表示される。
[0199]
図5F−5は、接触534が矢印536によって示される経路に沿って移動する下向きスワイプジェスチャを示す。下向きスワイプジェスチャに応答して、図5F−6に示すように、通知ユーザインターフェース520のロック解除モードが表示される。
[0200]
図5F−6の検索入力領域524に対応する位置で検出された接触538による入力に応答して、図5F−7に示すように、キーボード528を有するユーザインターフェース526が表示される。
[0201]
図5F〜図7では検索語(「movie」)が、(例えば、キーボード528を使用して)検索入力領域524に入力されている。検索を開始するための入力(例えば、キーボード528の「リターン」キーのアフォーダンスで検出された接触540による入力)に応答して、図5F−8に示すように、ロック解除モードの検索結果ユーザインターフェース532が表示される。
[0202]
図5Gは、通知ユーザインターフェース520の(例えば、ロックアイコン514のロック状態によって示されるような)ロックモードを示す。メッセージ通知542のロックモード及びボイスメール通知544のロックモードは、通知ユーザインターフェ−ス520のロックモードに表示される。
[0203]
図5Hは、通知ユーザインターフェース520の(例えば、ロックアイコン514のロック解除状態によって示されるような)ロック解除モードを示す。メッセージ通知モード542のロック解除モード及びボイスメール通知544のロック解除モードが、通知ユーザインターフェース520のロック解除モードに表示される。メッセージ通知542のロックモードと比較して、メッセージ通知542のロック解除モードは、メッセージコンテンツ(例えば、1つ以上のメッセージからのテキスト546及び/又は画像548)などの追加の情報を含む。通知ユーザインターフェース520のロック解除モードは、通知ユーザインターフェース520のロックモードでは表示されない招待通知550を表示する。
[0204]
図5Iは、検索結果ユーザインターフェース532の(例えば、ロックアイコン514のロック状態によって示されるような)ロックモードを示す。検索入力領域524に入力された検索語「movie」の検索結果ユーザインターフェース532のロックモードで表示される検索結果は、例えば、位置ベースの結果(例えば、デバイスの位置の近くで上映している推奨映画、デバイスの位置に近い映画館の提案)、アプリケーションの結果(iMovie(登録商標))、推奨ウェブサイトの結果、を含む。
[0205]
図5Jは、検索結果ユーザインターフェース532の(例えば、ロックアイコン514のロック解除状態によって示されるようなロック解除モード)を示す。通知ユーザインターフェース532のロック解除モードは、検索結果ユーザインターフェース532のロックモードでは表示されないメッセージ552及び554並びに電子メール556を表示する。
[0206]
図5K〜図5Nは、メッセージ通知542のロックモードで受信された入力に応答して、ユーザは、メッセージ通知542の拡張ビューを見るためにパスワードを提供するように促されるシーケンスを示している。図5Kでは、メッセージ通知542を拡張するために、接触557によって入力が提供される。デバイスは、(ロックアイコン514のロック状態によって示されるように)ロックモードにあるので、メッセージ通知542の拡張ビューが示される前にユーザ検証が必要である。図5Lは、パスコード入力インターフェース560を含むユーザ検証プロンプトユーザインターフェース558を示す。(例えば、パスコード入力インターフェース560における接触562及び/又は物理的ボタン204の指紋センサによる入力を介して提供される)ユーザ検証情報が有効であるという判定に従って、図5Mに示すように、通知542の拡張ビューが表示される。
[0207]
いくつかの実施形態では、通知542の拡張ビューは、例えば、(例えば、メッセージ送信者の名前の代わりに)メッセージ送信者のアバタ564、通知を解除するアフォーダンス566(例えば、「X」アフォーダンス)、メッセージコンテンツ(例えば、画像548を含むメッセージ及びテキスト546を含むメッセージ)、並びに/又はコンテキストの会話情報(例えば、会話のトランスクリプトにおける、メッセージ548に先行するメッセージ568)を含む。いくつかの実施形態では、新しいメッセージが会話で受信されると、メッセージ通知542の拡張ビューが更新されて新しいメッセージが表示される(例えば、新しいメッセージ570がメッセージ通知542に表示される)。いくつかの実施形態では、メッセージ通知542の拡張ビューは、(例えば、返信ビューを表示するアフォーダンス572に対応する位置におけるタップ入力など、接触574によって受信された入力に応答して)メッセージ通知542の返信ビューを表示するアフォーダンス572を含む。
[0208]
図5Nは、(例えば、通知ユーザインターフェースからメッセージングアプリケーションユーザインターフェースにナビゲートせずに)ユーザが通知内のメッセージに返信することを可能にするメッセージ通知542の返信ビューを示す。メッセージ通知242の返信ビューが表示されると、キーボード576が表示される。キーボード576で受信された入力は、メッセージ通知542のメッセージ入力エリア578に表示される。
[0209]
図5O〜図5Qは、カレンダ招待メッセージ通知550からカレンダ招待メッセージ通知550の拡張ビューへ、及びカレンダ招待メッセージ通知550の拡張ビューからカレンダアプリケーションユーザインターフェース594へのナビゲーションを示す。図5Oでは、接触580による入力は、通知ユーザインターフェース520のロック解除されたビューの招待メッセージ通知550に対応する位置で受信される。入力を検出したことに応答して、図5Pに示すように、デバイスはカレンダ招待メッセージ通知550の拡張ビューを表示する。カレンダ招待メッセージ通知550の拡張ビューには、招待に対応するイベント584のコンテキストカレンダ情報582、並びにアクション項目586(「Accept」)、588(「Maybe」)、及び590(「Decline」)を含むアクション項目メニューが含まれる。接触592による入力は、カレンダ招待メッセージ通知550に対応する位置で受信される。入力を検出したことに応答して、デバイスは、カレンダアプリケーションユーザインターフェース594(例えば、図5Qに示されるように、招待に対応するイベント584のイベント詳細ページ)を表示する。
[0210]
図5R−1はボイスメール通知544を示す。図5R−2は、ボイスメール通知544の拡張ビューを示す。ボイスメール通知544の拡張ビューは、例えば、ボイスメール音声を再生するための再生制御(再生/一時停止制御596、再生位置スライダ598、及び/又は音量制御5100など)、(例えば、ボイスメール音声に基づいてデバイスにより自動的に生成される)ボイスメールのトランスクリプト5102及び/又はアクション項目5104(「Call Back」)及び5106(「Delete」)を含むアクション項目メニューを含むことができる。
[0211]
図5S−1は、別の例示的なアプリケーション(例えば、運転サービスアプリケーション)のための通知5108を示す。図5S−2は、通知5108の拡張ビューを示す。通知5108の拡張ビューは、例えば、地図5112及び/又はアクション項目5118(「Call Driver」)を含む。いくつかの実施形態では、地図5112は、リアルタイム及び/又はほぼリアルタイムで更新されるコンテンツを含む。例えば、自動車の目的地の表現5116に対して、自動車のリアルタイム位置の表現5114が地図5112に表示される。自動車が動くと、自動車の表現5114が更新されて、自動車の移動を反映する。
[0212]
図5T−1〜図5T−2は、デバイス100がロックモードにある間に検出された入力に応答して表示されるユーザインターフェースのシーケンスを示す。図5T−1では、ウェイク画面インターフェース512は、ロックアイコン514のロック状態によって示されるように、ロックモードで表示される。
[0213]
図5T−1は、接触5117が矢印5120によって示される経路に沿って移動する右向きスワイプジェスチャを示す。右向きスワイプジェスチャに応答して、図5T−2に示すように、ミニアプリケーションユーザインターフェース5122のロックモードが表示される。いくつかの実施形態では、右向きスワイプが発生すると、通知ユーザインターフェース520がディスプレイの左側から徐々に右向きにスライドするように見えるアニメーションが表示される。
[0214]
いくつかの実施形態では、ミニアプリケーションユーザインターフェース5122は、検索入力領域5124を含む。検索入力領域5124で受信された入力に応答して、(例えば、図5F−4及び図5Iに示す検索結果ユーザインターフェース532と同様に)検索結果ユーザインターフェースのロックモードが表示される。
[0215]
図5T−3〜図5T−4は、デバイス100がロック解除モードにある間に検出された入力に応答して表示されるユーザインターフェースのシーケンスを示す。図5T−3では、ウェイク画面インターフェース512は、ロックアイコン514のロック解除状態によって示されるように、ロック解除モードで表示される。
[0216]
図5T−3は、接触5119が矢印5121によって示される経路に沿って移動する、右向きスワイプジェスチャを示す。右向きスワイプジェスチャに応答して、図5T−2に示すように、ミニアプリケーションユーザインターフェース5122のロック解除モードが表示される。検索入力領域5124で受信された入力に応答して、検索結果ユーザインターフェースのロック解除モードが(例えば、図5F−8及び図5Jに示される検索結果ユーザインターフェース532と同様)表示される。
[0217]
図5Uは、ミニアプリケーションユーザインターフェース5122のロックモードを示す。ミニアプリケーションユーザインターフェース表示のロックモードは、例えば、カレンダミニアプリケーション5125のロックモード及び/又は天気ミニアプリケーションユーザインターフェース5126のロックモードを表示する。いくつかの実施形態では、ミニアプリケーションユーザインターフェース5122のロックモード及び/又はロック解除モードは、(例えば、デバイス100によって受信されたGPSデータ及び/又はWi−Fiデータ、並びに/あるいはデバイス100によって記憶及び/又はアクセスされた対象の地点のデータを使用して判定されるような)デバイス100の近くにある対象のポイントに関する情報などの、情報5123を含む。いくつかの実施形態では、カレンダミニアプリケーション5125は、識別子(例えば、対応するアプリケーションを識別するテキスト5131及び/又は対応するアプリケーションを識別するアイコン5135)を含む。
[0218]
図5Uでは、カレンダミニアプリケーション5125の拡張ビューを表示するために、「Show More」アフォーダンス5127における接触5128によって入力が提供される。デバイスは、(ロックアイコン514によって示されるように)ロックモードにあるので、ミニアプリケーション5125の拡張ビューが示される前に、ユーザ検証が必要となる。図5Vは、パスコード入力インターフェース560を含むユーザ検証プロンプトユーザインターフェース558である。(例えば、パスコード入力インターフェース560における接触5129及び/又は物理的ボタン204の指紋センサによる入力を介して提供される)ユーザ検証情報が有効であるという判定に従って、図5Wに示すように、ミニアプリケーション5125の拡張ビューが表示される。いくつかの実施形態では、ミニアプリケーション5125の拡張ビューは、例えば、カレンダミニアプリケーション5125のロックされたビューには表示されない、(カレンダミニアプリケーション5125のロックされたビュー及び/又はロック解除されたビューと比較して)拡張された時間範囲、及びカレンダイベント情報(例えば、「ジョンとコーヒー(Coffee with Jon)」、「チームミーティング(Team Meeting)」、「貝市場でシェルビーに会う(Meet Shelby at Shellfish Market)」)、を含む。天気ミニアプリケーション5126は、カレンダミニアプリケーション5125の拡張に対応するために、ミニアプリケーションユーザインターフェース5122において下向きに調整される。
[0219]
図5Wでは、図5Xのミニアプリケーションユーザインターフェース5122のロック解除モードに示すように、図5Wに示すカレンダミニアプリケーション5125の拡張ビューをカレンダミニアプリケーション5125の非拡張ビューに縮小するアフォーダンス5130に対応する位置における接触5137によって、入力が提供される。
[0220]
ミニアプリケーションユーザインターフェース5122のロック解除モードでは、(拡張されていない)カレンダミニアプリケーション5125のロック解除されたビューが表示される。カレンダミニアプリケーション5125のロックされたビューと比較して、カレンダミニアプリケーション5125のロックモードは、カレンダミニアプリケーション5125のロックされたビューには示されないカレンダイベント情報(例えば、「Coffee with Jon」及び/又は「Team Meeting」)などの追加の情報を含む。ミニアプリケーションユーザインターフェース5122のロック解除モードは、ミニアプリケーションユーザインターフェース5122のロックモードでは表示されない次の予定ミニアプリケーション5132を表示する。
[0221]
図5Xでは、次の予定ミニアプリケーション5132の拡張ビューを表示するために、「Show More」アフォーダンス5141に対応する位置における接触5139によって、入力が提供される。
[0222]
図5Yは、次の予定ミニアプリケーション5132の拡張ビューを表示する。次の予定ミニアプリケーション5132の拡張ビューは、次の予定であるイベントの位置を示す地図5134、並びにアクション項目5136(「Directions」)、5138(「Snooze」)、5140(「Message Invitees」))、及び5142(「Delete Event」)を含む、アクション項目メニューを含む。接触5143による入力は、次の予定ミニアプリケーション5132に対応する位置で検出される。入力を検出したことに応答して、デバイスは、図5Zに示すように、次の予定であるイベントの表示5146を含むカレンダアプリケーションユーザインターフェース5144を表示する。
[0223]
図5AA〜図5ADは、クイックアクションメニューを表示するための入力が受信されたときのアプリケーションススプリングボードユーザインターフェース400に生じる変化を示す。図5AAでは、接触5150による入力は、メールアプリケーションアイコン418に対応する位置で検出される。メールアプリケーションアイコン418は、メールアプリケーション(例えば、メールアプリケーションアイコン418において検出されたタップ入力に応答して起動されるメールアプリケーション)に対応する。接触の特性強度は、強度レベルメータ5148によって示される。図5ABにおいて、接触の特性強度は、強度レベルメータ5148によって示されるように、ヒント強度閾値レベルITを上回って増加する。いくつかの実施形態では、接触5150の特性強度がヒント強度閾値レベルITを上回って増加したという判定に従って、ユーザインターフェース400の少なくとも一部にぼかし効果が適用される。図5AB〜図5ADに示されるように、接触の特性強度が増加するにつれて、ぼかし効果が強化される。いくつかの実施形態では、接触の特性強度がヒント強度閾値レベルITを上回って増加したという判定に従って、メールアイコン418に対応するクイックアクションメニュー5154の前兆ビュー5152が表示される。図5AB〜図5ACに示されるように、前兆ビュー5152のサイズは、接触の特性強度が増加するにつれて増加する。
[0224]
図5ADでは、接触5150の特性強度が深い押圧強度閾値ITを上回って増加している。いくつかの実施形態では、デバイス100の1つ以上の触知出力生成器は、接触の特性強度が深い押圧強度閾値ITを上回って増加したという判定に従って、5150に示す触知出力を出力する。いくつかの実施形態では、メールアプリケーションアイコン418に対応するクイックアクションメニュー5154が表示される。いくつかの実施形態では、メールミニアプリケーションに対応するミニアプリケーションプレビュー5156が(例えば、クイックアクションメニュー5154に近接した位置に、並びに/又はクイックアクションメニュー5154及び/若しくはミニアプリケーションプレビュー5156を含むプラッタ上に)表示される。いくつかの実施形態では、クイックアクションメニュー5154及び/又はミニアプリケーションプレビュー5156が、アプリケーションスプリングボードユーザインターフェース400に少なくとも部分的に重なって表示される。
[0225]
図5AEでは、接触5158による入力が、ミニアプリケーションプレビュー5156の「Add Widget」アフォーダンス5160において検出される。入力を検出したことに応答して、デバイスは、図AFに示すように、ミニアプリケーションプレビュー5156に対応するメールミニアプリケーション5162をミニアプリケーションユーザインターフェース5122に追加する。いくつかの実施形態では、「Add Widget」アフォーダンス5160において接触5158による入力を検出したことに応答して、デバイスは、ミニアプリケーションプレビュー5156を含むミニアプリケーションユーザインターフェース5122を表示する。
[0226]
図AFにおいて、メールミニアプリケーション5162は、ミニアプリケーションユーザインターフェース5122に表示される。いくつかの実施形態では、メールミニアプリケーション5162は、最近並びに/又は頻繁に電子メールをデバイス100に送信及び/若しくはデバイス100から電子メールを受信した、1人以上の電子メール送信者に対応するアバタ5164(例えば、5164a、5164b、5164c及び/又は5164d)を含む。アバタ5164aに対応する位置のバッジ5166は、例えば電子メール送信者から受信した未読電子メールの数を示す。接触5170による入力は、メールミニアプリケーション5162の拡張ビューを表示するアフォーダンス5168に対応する位置で検出される。入力を検出したことに応答して、図5AGに示すように、デバイスは、メールミニアプリケーション5162の拡張ビューを表示する。
[0227]
図5AGは、ミニアプリケーションユーザインターフェース5122に表示されるメールミニアプリケーション5162の拡張ビューを示す。メールミニアプリケーション5162の非拡張ビューには示されていない追加のアバタ5164e、5164f、5164g、及び/又は5164hが、メールミニアプリケーション5162の拡張ビューで示される。
[0228]
図5AHは、ウェイク画面インターフェース512が表示されている状態から、カメラアプリケーションユーザインターフェース5172のロックモードが表示されている状態への遷移を示している。第1の時刻tにおいて、矢印5178によって示されるように、接触5176がスワイプジェスチャの第1の部分に沿って移動し始める、左向きスワイプジェスチャが開始される。時刻tの後の第2の時刻tにおいて、カメラアプリケーションユーザインターフェース5172の第1の部分は、スワイプジェスチャの第1の部分によって明らかにされ、接触5176は、矢印7180によって示されるように、スワイプジェスチャの第2の部分に沿って移動し続ける。時刻tの後の第3の時刻tにおいて、カメラアプリケーションユーザインターフェース5172は、スワイプジェスチャの第2の部分によって更に明らかにされ、接触5176は、矢印7182によって示されるように、スワイプジェスチャの第3の部分に沿って移動し続ける。時刻tの後の第4の時刻tにおいて、カメラアプリケーションユーザインターフェース5172は、スワイプジェスチャの第3の部分によって更に明らかにされ、接触5176は、矢印7184によって示されるようにスワイプジェスチャの第5の部分に沿って移動し続ける。時刻tの後の第5の時刻tにおいて、カメラアプリケーションユーザインターフェース5172のロックモードが完全に明らかにされる。
[0229]
いくつかの実施形態では、1つ以上のカメラ制御5186は最初、カメラアプリケーションユーザインターフェース5172のロックモードでは表示されない。例えば、左向きスワイプジェスチャが開始される時刻tからの遅延(例えば、時刻tと時刻tの間の時間期間の遅延)の後に、1つ以上のカメラ制御5186がカメラアプリケーションユーザインターフェース5172に明らかにされる。いくつかの実施形態では、カメラアプリケーションユーザインターフェース5172の閾値部分が明らかにされた後、1つ以上のカメラ制御5186がカメラアプリケーションユーザインターフェース5172に明らかにされる。
[0230]
いくつかの実施形態では、カメラアプリケーションユーザインターフェース5172のロックモードが表示されると(例えば、図5AHの時刻tに示されるように)、デバイス100の画像ライブラリ内の1つ以上の画像にアクセスすることはできない。例えば、カメラアプリケーションユーザインターフェース5172のロック解除モードが(例えば、図AIの時刻tに示されるように)表示されると、最も最近にキャプチャされた画像が領域5188に表示され、カメラアプリケーションユーザインターフェース5172のロックモードが(例えば、図AHに示される時刻tに示されるように)表示されると、領域5188に画像は表示されない。
[0231]
図5AIは、ウェイク画面インターフェース512が表示されている状態から、カメラアプリケーションユーザインターフェース5172のロック解除モードが表示されている状態への遷移を示す。第1の時刻tにおいて、矢印5192によって示されるように、接触5190がスワイプジェスチャの第1の部分に沿って移動し始める、左向きスワイプジェスチャが開始される。時刻tの後の第2の時刻tにおいて、カメラアプリケーションユーザインターフェース5172の第1の部分は、スワイプジェスチャの第1の部分によって明らかにされ、接触5190は、矢印7194によって示されるように、スワイプジェスチャの第2の部分に沿って移動し続ける。時刻tの後の第3の時刻tにおいて、カメラアプリケーションユーザインターフェース5172は、スワイプジェスチャの第2の部分によって更に明らかにされ、接触5190は、矢印7196によって示されるように、スワイプジェスチャの第3の部分に沿って移動し続ける。時刻tの後の第4の時刻tにおいて、カメラアプリケーションユーザインターフェース5172は、スワイプジェスチャの第3の部分によって更に明らかにされ、接触5190は、矢印7198によって示されるようにスワイプジェスチャの第4の部分に沿って移動し続ける。時刻tの後の第5の時刻tにおいて、カメラアプリケーションユーザインターフェース5172のロックモードが完全に明らかにされる。
[0232]
いくつかの実施形態では、1つ以上のカメラ制御5186は、最初に、カメラアプリケーションユーザインターフェース5172のロック解除モードで表示されない。例えば、左向きスワイプジェスチャが開始される時刻tからの遅延(例えば、時刻tと時刻tの間の時間期間の遅延)の後に、1つ以上のカメラ制御5186がカメラアプリケーションユーザインターフェース5172に明らかにされる。いくつかの実施形態では、カメラアプリケーションユーザインターフェース5172の閾値部分が明らかにされた後、1つ以上のカメラ制御5186がカメラアプリケーションユーザインターフェース5172に明らかにされる。このようにして、カメラアプリケーションインターフェースの偶発的な動作が回避される。
[0233]
図AJでは、カメラアプリケーションユーザインターフェース5172を部分的に明らかにするための入力の後に、ウェイク画面インターフェース512を再度明らかにするための入力が続く。いくつかの実施形態では、カメラアプリケーションユーザインターフェース5172を明らかにするための入力は、左向きスワイプジェスチャを停止すること(例えば、カメラアプリケーションユーザインターフェース5172のすべて又はカメラアプリケーションユーザインターフェース5172の閾値部分が明らかにされる前に最初の部分のみを終了させること)によってキャンセルされる。いくつかの実施形態では、カメラアプリケーションユーザインターフェース5172を明らかにするための入力は、カメラアプリケーションユーザインターフェース5172のすべての前に、及び/又はカメラアプリケーションユーザインターフェース5172の閾値部分が明らかにされる前に、入力(例えば、右向きスワイプジェスチャ)を提供することによってキャンセルされる。例えば、左向きジェスチャの第1の部分5178と第2の部分5180を含み、矢印5202によって示される経路に沿って右向きジェスチャが続く入力が検出される。右向きジェスチャは、カメラアプリケーションユーザインターフェース5172を明らかにすることをキャンセルする。このようにして、カメラアプリケーションインターフェースの偶発的な表示及び/又は動作が回避される。
[0234]
図AKでは、ウェイク画面インターフェース512は、ロックアイコン514のロック状態によって示されるように、ロックモードで表示される。図AKは、接触5204が矢印5206によって示される経路に沿って移動する、上向きスワイプジェスチャを示す。上向きスワイプジェスチャに応答して、図ALに示すように、マルチページ制御パネルユーザインターフェース5208の第1のページが表示される。いくつかの実施形態では、上向きスワイプが発生すると、マルチページ制御パネルユーザインターフェース5208がディスプレイの下端部から徐々に上向きにスライドするように見えるアニメーションが表示される。
[0235]
図ALは、マルチページ制御パネルユーザインターフェース5208の第1のページを示す。マルチページ制御パネルユーザインターフェース5208は、例えば、5210(飛行機モード)、5212(Wi−Fi)、5214(Bluetooth(登録商標))、5216(邪魔しないで下さいモード)、5218(回転ロック)、5220(フラッシュライト)、5222(タイマ)、5224(ナイトシフト)、5226(計算機)、5228(カメラ)、5230(Apple(登録商標)TVミラーリング)、及び/又は5232(輝度)などの複数の制御アフォーダンスを含む。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第1のページの1つ以上の制御アフォーダンスは、マルチページ制御パネルユーザインターフェース5208の第1のページのロックモードでは利用できない。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第1のページの制御アフォーダンスの1つ以上の外観は、制御アフォーダンスの状態を示す。例えば、Wi−Fi制御アフォーダンス5212は、網掛けで示されておらず、Wi−Fiが有効化されていることを示し、Bluetooth(登録商標)制御アフォーダンス5214は、網掛けで示されて、Bluetooth(登録商標)が無効であることを示す。
[0236]
いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208は、制御ユーザインターフェース解除アフォーダンス5234を含む。いくつかの実施形態では、ページインジケータ5236は、現在表示されているマルチページ制御パネルのページを示すために使用される。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208は、制御ユーザインターンフェースを表示するための入力が検出される、別のユーザインターンフェース(例えば、図5ALに示されているロック画面及び/又はウェイク画面5238のなどの初期画面、アプリケーションスプリングボードユーザインターフェース400、及び/又はアプリケーションユーザインターフェース)を、部分的又は完全にオーバーレイして表示される。いくつかの実施形態では、5238に示すように、マルチページ制御パネルユーザインターフェース5208によって部分的にオーバーレイされるユーザインターフェースの外観が変更される。例えば、部分的にオーバーレイされたユーザインターフェースは、ユーザインターフェースの以前の外観と比較して、ぼやけており、及び/又は輝度が低下している。
[0237]
矢印5240によって示される経路に沿った移動(例えば、左向きスワイプ)を含む接触5241による入力に応答して、図AMに示すように、マルチページ制御パネルユーザインターフェース5208の第2のページが表示される。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第2のページは、複数のコンテンツ再生制御アフォーダンス、例えば、再生スクラバ5242、前のトラック制御5246、一時停止/再生制御5248、次のトラック制御5250、又は音量調整制御5252を含む。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第2のページは、ルーティング先メニューの表示を表示/停止するためのコンテンツルーティング先情報5260及び/又はアフォーダンス5262を含む。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第2のページは、現在再生中及び/又は最近再生されたコンテンツ、例えばコンテンツ(アルバムアートなど)を表す画像5264、及び/又は(トラックタイトル、アルバムタイトル、及び/又はアーティストなどの)コンテンツの識別情報5266を含む。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第1のページの1つ以上の制御アフォーダンスは、マルチページ制御パネルユーザインターフェース5208の第2のページのロックモードでは利用できない。
[0238]
図ANに示すように、矢印5270によって示される経路に沿った移動(例えば左向きスワイプ)を含む接触5268による入力に応答して、マルチページ制御パネルユーザインターフェース5208の第3のページが表示される。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第3のページは、例えば温度制御5272、ファン制御5274、シェード制御5276、照明制御5278、ドア制御5280、カメラ制御5282、煙警報制御5284、及び/又は睡眠制御5286などの、複数の遠隔デバイス制御アフォーダンスを含む。いくつかの実施形態では、1つ以上の遠隔デバイス制御は、マルチページ制御パネルユーザインターフェース5208のロックモードの第3のページでは利用できない。例えば、遠隔デバイス制御アフォーダンス5272〜5286は、視覚的に変更された遠隔デバイス制御アフォーダンスに対応する1つ以上の遠隔デバイス制御が、ロックモードでは利用できないことを示すために、マルチページユーザインターフェース5208のロック解除モードで表示される制御アフォーダンス5272〜5286のデフォルト状態から、視覚的に変更されて示されている(例えば、網掛けされている)。このようにして、遠隔デバイス制御アクセスは、デバイスをロック解除するための検証情報を提供したユーザによる調整に限定される。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第3のページは、制御アフォーダンス5272〜5286によって制御される1つ以上の遠隔デバイスが配置される、定義エリア(例えば、「リビングルーム」などのシーン)の識別情報(例えば、定義エリアの名前5288及び/又はそのエリアに対応する画像5290)を含む。
[0239]
いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第3のページに表示される遠隔デバイス制御アフォーダンス5272〜5286は、デバイス100が、例えば、GPS及び/又はデバイスによって受信されたWi−Fi信号によって判定されるように)、現在配置されている、定義エリア(例えば、部屋)に対応する(例えば、そこに配置される)遠隔デバイス制御アフォーダンスである。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第3のページに表示される遠隔デバイス制御アフォーダンス5272〜5286は、最も最近アクセスされた定義エリアに対応する遠隔デバイス制御アフォーダンスである。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第3のページは、複数の定義エリア識別子の表示を表示/停止するアフォーダンス5292(例えば、図5AQに示すような、複数の定義エリア識別子を表示するためのメニュー5294)を含む。
[0240]
図5ANでは、照明制御アフォーダンス5278を動作させるための接触5296によって入力が提供される。デバイスは、(ロックアイコン514によって示されるように)ロックモードにあるので、光制御アフォーダンス5278が動作可能になる前に、ユーザ検証が必要である。図5AOは、パスコード入力インターフェース560を含むユーザ検証プロンプトユーザインターフェース558である。ユーザ検証情報(例えば、パスコード入力インターフェース560の接触5295及び/又は物理的ボタン204の指紋センサによる入力を介して提供される)が有効であるという判定に従って、図5APに示すように、マルチページ制御パネルユーザインターフェース5208の第3のページのロック解除されたビューが表示される。
[0241]
図APでは、複数の定義エリア識別子の表示を表示/停止するアフォーダンス5292に対応する位置での接触5296によって、入力(例えば、タップジェスチャ)が提供される。この入力に応答して、図5AQに示すように、複数の定義エリア識別子を含むメニュー5294が表示される。いくつかの実施形態では、複数の定義エリア識別子の表示を表示/停止するアフォーダンス5292の外観は、アフォーダンス5292に対応する位置に提供される入力に応答して変化する。例えば、アフォーダンス5292のシェブロンアイコンの向きは、図5APから図5AQに変化する。
[0242]
図AQでは、複数の定義エリア識別子(例えば、「お気に入り(Favorites)」5300、「現在の部屋(Current Room)」5302、「マスターベッドルーム(Master Bedroom)」5304、「オフィス(Office)」5306及び/又は「キッチン(Kitchen)」5308)のメニュー5294が表示される。複数の定義エリア識別子の表示を表示/停止するアフォーダンス5292に対応する位置での接触5298によって入力(例えば、タップジェスチャ)が提供される。この入力に応答して、複数の定義エリア識別子5300〜5308のメニュー5294は表示されなくなり、例えば図5ARに示すように、マルチページ制御パネルユーザインターフェース5208の第3のページが再表示される。いくつかの実施形態では、メニュー5294のそれぞれの定義エリア識別子を受信した入力(例えば、タップ入力)に応答して、選択されたそれぞれの定義エリア識別子に対応する制御アフォーダンスのセットが表示される。
[0243]
図5AR〜図5ASに示すように、矢印5312によって示される経路に沿った移動(例えば、下向きスワイプ)を含む接触5310による入力に応答して、マルチページ制御パネルユーザインターフェース5208の第3のページは表示されなくなり、図5ASに示すように、下にあるユーザインターフェース512が再表示される。いくつかの実施形態では、制御ユーザインターフェース解除アフォーダンス5234に対応する位置で受信された入力は、図5ASに示すように、マルチページ制御パネルユーザインターフェース5208の表示を停止させ、下にあるウェイク画面インターフェース512を再表示させる。
[0244]
図5AS〜図5ATに示すように、矢印5316によって示される経路に沿った移動(例えば上向きスワイプ)を含む接触5314による入力に応答して、マルチページ制御パネルユーザインターフェース5208が再表示される。いくつかの実施形態では、図5ATに示すように、マルチページ制御パネルユーザインターフェース5208の最も最近表示されたページ(例えば、マルチページ制御パネルユーザインターフェース5208の第3のページ)が入力に応答して再表示される。
[0245]
図5AUは、図5AVに示すように、アプリケーションユーザインターフェース(例えば、カレンダアプリケーションユーザインターフェース5318)における接触5322(例えば、矢印5320によって示される経路に沿った上向きスワイプ)によって受信された入力を示し、マルチページ制御パネルユーザインターフェース5208の第1のページを表示する。
[0246]
図5AVでは、図5AWに示すように、接触5235による入力(例えば、矢印5327によって示される経路に沿った左向きスワイプ)が受信され、マルチページユーザインターフェース5208の第2のページを表示する。
[0247]
図5AWでは、マルチページ制御パネルユーザインターフェース5208の第2のページが、カレンダアプリケーションユーザインターフェース5318を部分的に重ねて表示される。マルチページ制御パネルユーザインターフェース5208の表示を停止する入力(例えば、矢印5331によって示される経路に沿った接触5329による下向きスワイプ)に応答して、図5AXに示すように、マルチページ制御パネルユーザインターフェースの第2のページは表示されなくなり、カレンダアプリケーションユーザインターフェース5318が再表示される。
[0248]
図5AXでは、カレンダアプリケーションユーザインターフェース5318において、マルチページ制御パネルユーザインターフェース5208を再表示するための入力(例えば、矢印5335によって示される経路に沿った接触5333による上向きスワイプ)が検出される。入力を検出したことに応答して、デバイスは、図5AYに示すように、再表示マルチページ制御パネルユーザインターフェース5208の第2のページを再表示する。
[0249]
図5AYでは、マルチページ制御パネルユーザインターフェース5208の第3のページを表示するための入力(例えば、矢印5337によって示される経路に沿った接触5339による水平スワイプ)が、マルチページ制御パネルユーザインターフェース5208の第2のページで検出される。入力を検出したことに応答して、デバイスは、図5AZに示すように、マルチページ制御パネルユーザインターフェース5208の第3のページを表示する。
[0250]
図5AZにおいて、マルチページ制御パネルユーザインターフェース5208の第2のページを表示するための入力(例えば、矢印5341によって示される経路に沿った接触5343による水平スワイプ)が、マルチページ制御パネルユーザインターフェースの第3のページで検出される5208。入力を検出したことに応答して、デバイスは、図5BAに示すように、マルチページ制御パネルユーザインターフェース5208の第2のページを表示する。
[0251]
図5BAでは、図5BBに示すように、ルーティング先メニューの表示を表示/停止するアフォーダンス5262に対応する位置での接触5324による入力(例えば、タップ入力)に応答して、ルーティング先メニュー5326が示される。
[0252]
図5BBでは、マルチページ制御パネルユーザインターフェース5208の第2のページは、ルーティング先5328(「iPhone(登録商標)」)、5260(「Airpods(登録商標)」)、及び5332(「Bluetooth(登録商標)Speaker」)を含む、ルーティング先メニュー5326を含む。例えば、ルーティング先メニューは、コンテンツルーティング先情報領域5260から拡張され、マルチページ制御パネルユーザインターフェース5208のサイズは、ルーティング先メニュー5326を収容するために(垂直に)拡張される。いくつかの実施形態では、1つ以上のルーティング先は、現在のルーティング先の表示5334(例えば、チェックマークアイコン)及び/又はバッテリレベル表示5336など、ルーティング先に対応する情報を含む。いくつかの実施形態では、アフォーダンス5262の視覚的外観は、アフォーダンス5262に対応する位置で提供される入力に応答して変化する。例えば、アフォーダンス5262のシェブロンアイコンの向きは、図5BAから図5BBに変化する。
[0253]
図5BBでは、ルーティング先5332(「Bluetooth(登録商標)Speaker」)に対応する位置での接触5338による入力(例えばタップ入力)に応答して、図5BCに示すように、コンテンツ(例えば、現在再生中のコンテンツ)のルーティング先は、ルーティング先5260(「Airpods(登録商標)」)からルーティング先5332(「Bluetooth(登録商標)Speaker」)に変更される。
[0254]
図5BCでは、例えば、ルーティング先5260(「Airpods(登録商標)」)に対応する領域に現在のルーティング先の表示5334が存在しないこと、及びルーティング先5332(「Bluetooth(登録商標)Speaker」)に対応する領域に、現在のルーティング先の表示5334が存在すること、によって示されるように、コンテンツは宛先5332(「Bluetooth(登録商標)Speaker」)にルーティングされ、及び/又はルーティング先5260(「Airpods(登録商標)」)にルーティングされなくなる。ルーティング先メニュー5326の表示を表示/停止するアフォーダンス5262に対応する位置での接触5340による入力(例えば、タップ入力)に応答して、ルーティング先メニュー5326は、図5BDに示すように、解消される。
[0255]
図5BDでは、コンテンツルーティング先を変更するための入力(例えば矢印5345によって示される経路に沿った接触5343による水平スワイプ)が示される。コンテンツルーティング先を変更するための入力を検出したことに応答して、デバイスは、図5BEに示すように、変更されたコンテンツルーティング先(例えば、「Airpods(登録商標)」)を示すようにコンテンツルーティング先情報領域5260を更新する。
[0256]
図5BF〜図5BJは、いくつかの実施形態に係る、マルチページ制御パネルユーザインターフェース5208の第1のページの制御アフォーダンスの機能性の変更を示す。図5BFでは、接触5342による入力が、マルチページ制御パネルユーザインターフェース5208の第1のページのWi−Fi制御アフォーダンス5212に対応する位置で検出される。強度メータ5344によって示されるように、接触の特性強度は、ヒント押圧強度閾値IT、軽い押圧強度閾値IT、及び深い押圧強度閾値ITを下回る。接触の特性強度が制御トグル基準を満たす(例えば、接触の特性強度がヒント押圧強度閾値ITを下回る)という判定に従って、接触5342による入力は、Wi−Fiに対応するWi−Fi制御をトグルする制御アフォーダンス5212を無効状態から有効状態にトグルする。
[0257]
図5BGは、図5BFに示すように、Wi−Fi制御が無効状態から、図5BGに示すように、有効状態にトグルされた後のマルチページ制御パネルユーザインターフェース5208の第1のページを示す。Wi−Fi制御が有効状態にトグルされたことを示すために、Wi−Fi制御アフォーダンス5212の外観が変更され(例えば、網掛け状態から非網掛け状態へなど、視覚的に変更される)、及び/又は通知5246(例えば、「Wi−Fi:オン」)が表示される。
[0258]
図5BH〜図5BIは、Wi−Fi制御のための変更選択肢を表示するための入力を示す。図5BHでは、Wi−Fi制御アフォーダンス5212に対応する位置の接触5348による入力は、強化された制御基準を満たす(例えば、接触5348の特性強度は、強度メータ5344によって示されるように、軽い押圧強度閾値レベルITを上回って増加し、及び/又は接触5348の特性強度は深い押圧強度閾値レベルITを上回って増加する)。この入力に応答して、変更選択肢5354(「ホームネットワークからの切断(Disconnect from HomeNetwork)」)、5356(「1時間オフ(Turn off for 1 hour)」)、5358(「ここを離れるまでオフ(Turn off until I leave here))」、5360「他のネットワーク(Connect to OtherNetwork)」)及び5362(「Wi−Fi設定(Wi-Fi Settings)」)を含む、変更選択肢メニュー5350が表示される。接触5352による入力は、変更選択肢5356(「1時間オフ」)に対応する位置で検出される。
[0259]
図5BJでは、図5BIに示す入力に応答して、Wi−Fi制御は、例えば、Wi−Fi制御アフォーダンス5212の網掛け状態及び通知5246(例えば、「Wi−Fi:オフ」)によって示されるように、(一時的に)無効化される。
[0260]
図6A〜図6Eは、いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法600のフロー図を示す。方法600は、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための1つ以上のセンサを備える電子デバイス(例えば、デバイス300、図3、又はポータブル多機能デバイス100、図1A)において実行される。いくつかの実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面がディスプレイ上にあるか又はこれに組み込まれている。いくつかの実施形態では、ディスプレイはタッチ感知面から分離している。方法600の一部の動作が任意選択で組み合わされ、及び/又は一部の動作の順序が任意選択で変更される。
[0261]
以下に記載のように、方法600は、表示オンユーザインターフェースから制御にアクセスする直感的な方法を提供する。この方法は、表示オンユーザインターフェースから制御デバイスにアクセスするときのユーザの認知負荷を低減し、それによって、より効率的なヒューマンマシンインターフェースを生成する。バッテリ動作電子デバイスでは、ユーザがより高速かつ効率的に制御器にアクセスすることを有効化することで、電力を節約し、バッテリ充電間の時間を延ばす。
[0262]
(例えば、図5B及び図5Dに示すように)表示オフ状態の間に、デバイスは、第1の入力を検出する(602)。いくつかの実施形態では、表示オフ状態は、ディスプレイがオフされているか又はグレー表示されている状態、タッチ画面がオフにされている状態、及び/又はタッチ画面の表示機能がオフにされている状態であり、同時に、例えば、スリープ/休止モード、省電力モード、又は限定された機能を有する別のモードで実施されるように、タッチ画面内のタッチ感知面はアクティブのままである。いくつかの実施形態では、第1の入力は、デバイスのディスプレイをアクティブ化する(例えば、デバイスをウェイクさせ、及び/又はタッチ画面ディスプレイをウェイクさせる)ためのディスプレイアクティブ化基準を満たす、ディスプレイアクティブ化アフォーダンス(例えば、物理的又は仮想ボタン)上の入力である。例えば、第1の入力は、図5B及び図5Dに示すように、物理的ボタン204における接触508による入力である。いくつかの実施形態では、ディスプレイアクティブ化基準は、ディスプレイアクティブ化基準が満たされるために、検出された入力における接触の特性強度がそれぞれの強度閾値を満たす(例えば、ディスプレイアクティブ化基準はタップジェスチャによって満たされる)ことを必要としない。いくつかの実施形態では、接触の特性強度が所定の強度閾値を超える前に接触のリフトオフが検出されたとき(ディスプレイアクティブ化アフォーダンスが仮想ボタンである場合)、又は接触がディスプレイアクティブ化アフォーダンスを物理的に作動させないとき(ディスプレイアクティブ化アフォーダンスが、物理的ボタン204などの物理的ボタンである場合)、ディスプレイアクティブ化基準が満たされる。いくつかの実施形態では、ディスプレイアクティブ化基準は、他のタイプの入力(例えば、音声入力、ユーザがデバイスをピックアップして傾けるなど)によって、接触を検出することを必要とせずに、満たされる。
[0263]
第1の入力を検出したことに応答して、デバイスは、デバイスのディスプレイ(例えば、タッチ画面ディスプレイ112)をアクティブ化し、ディスプレイ上に、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示する(604)(例えば、デバイスは、図5Cに示されるようなウェイク画面512を表示し、デバイスをウェイクさせた直後に示されるユーザインターフェースを表示し、又はデバイスはデバイスの表示をアクティブ化する)。
[0264]
デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、デバイスは、タッチ感知面上のスワイプジェスチャ(例えば、図5F−1の矢印518によって示される経路に沿った下向きジェスチャ、図5F−5の矢印536によって示される経路に沿った下向きジェスチャ、図5T−1の矢印5120によって示される経路に沿った右向きジェスチャ、図5T−3の矢印5121によって示される経路に沿った右向きジェスチャ、図AHに示される左向きジェスチャ、図AIに示される左向きジェスチャ、図AKの矢印5206によって示される経路に沿った上向きジェスチャ、及び/又は図5ASの矢印5314によって示される経路に沿った上向きジェスチャ)を検出する(606)。
[0265]
タッチ感知面上のスワイプジェスチャを検出したことに応答して、デバイスが(例えば、ロックアイコン514のロック状態によって示されるように)表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向(例えば、下向き及び/又は右向き)にあるという判定に従って、第1のユーザインターフェース(例えば、図5Cに示されるようなウェイク画面512)の表示を、第2のユーザインターフェースの表示と置換すること、第2のユーザインターフェースは、第1のコンテンツ(例えば、図5F−2に示すような通知画面及び/又は図5T−2に示すようなミニアプリケーションオブジェクト画面)を表示する(608)。デバイスが(例えば、ロックアイコン514のロック解除状態によって示されるように)表示オン状態のロック解除モードにあり、スワイプジェスチャが第1の方向(例えば、下向き及び/又は右向き)にあるという判定に従って、第1のユーザインターフェースの表示を第2のユーザインターフェースの表示と置換すること、第2のユーザインターフェースは、第1のコンテンツ及びデバイスが表示オン状態のロックモードにあるときは表示されない第1の追加コンテンツ(例えば、制限された通知コンテンツ及び/又は制限されたミニアプリケーションオブジェクトコンテンツ)を表示する。例えば、図5F−6及び図5Hに示すように、通知ユーザインターフェース520のロック解除モードは、通知550、通知542のテキスト546、及び/又は通知542の画像548などの、追加コンテンツを含む。図5T−4及び図5Xに示されるように、ミニアプリケーションユーザインターフェース5122のロック解除モードは、カレンダミニアプリケーション5125のロックされたビューに示されない、次の予定ミニアプリケーション5132及び/又はカレンダイベント情報(例えば、「Coffee with Jon」、「Team Meeting」)などの、追加コンテンツを含む。
[0266]
いくつかの実施形態では、通知は、デバイスによって受信された電話通話、ビデオ通話、ボイスメール、電子メール、SMS、MMS、及び/又はカレンダ招待などの通信に対応する情報を含む。いくつかの実施形態では、通知は、カレンダ予約通知、カレンダ予約招待、リマインダ、及び/又はデバイスにインストールされたアプリケーションによって生成される別のタイプの通知である。
[0267]
いくつかの実施形態では、第1のコンテンツは、(例えば、制限された通知情報を含まない)1つ以上の通知を含み、第1の追加コンテンツは、制限された通知情報(例えば、デバイスのプライバシ設定及び/又はセキュリティ設定などの設定による制限されたアクセスに従う、通知コンテンツ及び/又は他の通知情報)を含む(610)。例えば、第1の追加コンテンツは、会話のトランスクリプト内の第1のコンテンツを含むスレッド内の初期の通信コンテンツなどの、コンテキスト情報(図5Mに示すように、通知542が生成された受信メッセージ548に先行するメッセージ568など)、及び/又は第1のコンテンツにおけるカレンダ予約通知に関連付けられた時間に対応する時間範囲のカレンダ情報(例えば、図5Pに示す、カレンダ招待メッセージ通知550の拡張ビューに示されるコンテキストカレンダ情報582)を含む。いくつかの実施形態では、デバイスが表示オン状態のロック解除モードにあるとき、第2のユーザインターフェース(例えば、図5F−6、図5G、図5M、図5N、図5P、図5R−2及び図5S−2)は、デバイスが表示オン状態のロックモード(例えば、図5F−2及び図5Hに示される)にあるときに、第2のユーザインターフェースに示されるより長いバージョンの通知を含む。より長いバージョンの通知は、例えば、通知の短いバージョン又は標準バージョンのすべてのコンテンツ、及び短いバージョン又は標準バージョンの通知に含まれない追加コンテンツを含む、拡張された通知コンテンツを含む。いくつかの実施形態では、拡張された通知コンテンツは、短いバージョンの通知に示される、より完全なバージョンの通知コンテンツを含む。いくつかの実施形態では、拡張された通知コンテンツは、画像、対話制御、短いバージョンの通知には含まれない、通知に関するアクションを実行するための選択可能な選択肢を含む。
[0268]
いくつかの実施形態では、第1のコンテンツは、1つ以上のミニアプリケーションオブジェクト(例えば、1つ以上の「ウィジェット」)を含み(612)、第1の追加コンテンツは、制限されたミニアプリケーションオブジェクト情報(例えば、デバイスのプライバシ設定及び/又はセキュリティ設定などの設定による制限されたアクセスに従う、ミニアプリケーションオブジェクト及び/又他のミニアプリケーション情報)を含む。例えば、(例えば、図5T−4、図5W、及び図5Xに示すように)ミニアプリケーションユーザインターフェース5122のロック解除モードに示されるようなカレンダミニアプリケーション5125は、図5T−2及び図5Uに示すような、カレンダミニアプリケーション5125に表示されないミニアプリケーションオブジェクト情報を含む。
[0269]
いくつかの実施形態では、制限されたミニアプリケーションオブジェクト情報及び/又は制限された通知情報は、例えば、コンテキストコンテンツ(会話トランスクリプト又はカレンダの拡張ビューにおける追加メッセージなど)、写真、ビデオ、オーディオ、ライブ更新コンテンツ(リアルタイム車両位置を示す輸送アプリケーションマップビューなど)、制御(例えば、アクションボタン)、ユーザのお気に入り連絡先のリスト、及び/又はインラインでテキストを入力するためのキーボード(例えば、「応答」制御が通信通知で動作されるとき)を含む。例えば、追加コンテンツは、図5Mに示されるような、メッセージ通知542の拡張ビューにおける、例えばコンテキストコンテンツ(例えば、メッセージ568及び570)及び/又は返信アフォーダンス572、図5Nに示されるような、メッセージ通知542の拡張ビューにおけるメッセージ入力エリア578及び/又はキーボード576、図5O及び図5Pに示されるような招待メッセージ通知550(しかし、通知ユーザインターフェース520のロックモードには存在しない)、図5R−2に示されるような、ボイスメール通知544の拡張ビューにおけるボイスメールのボイスメール音声を再生するための再生制御(再生/一時停止制御596、再生位置スライダ598、及び/又は音量制御5100など)、トランスクリプト5102、並びに/又はアクション項目5104(「Call Back」)及び5106(「Delete」)、図5S−2に示されるような、通知5108の拡張ビューにおける、地図5112及び/又はアクション項目5118(「コールドライバ(Call Driver)」)、図5W及び図5Yに示されるような、カレンダミニアプリケーション5125、次の予定ミニアプリケーション5132の拡張ビューのカレンダイベント情報(例えば、「Coffee with Jon」、「Team Meeting」、「Meet Shelby at Shellfish Market」)及び拡張カレンダ時間範囲、並びに/又は、図AGに示すような、メールミニアプリケーション5162の拡張ビューにおける追加のアバタ5164e〜5164hを含む。
[0270]
いくつかの実施形態では、タッチ感知面上のスワイプジェスチャを検出したこと応答して、デバイスが(例えば、図5F−1及び/又は5T−1に示すように)表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向とは異なる第2の方向(例えば、図5T−1に示すように右向き及び/又は図5F−1に示すように下向き)にあるという判定に従って、デバイスは、第1のユーザインターフェースの表示を、第3のユーザインターフェースであって、第3のユーザインターフェースは第2のコンテンツを表示する第3のユーザインターフェースの表示(例えば、図5T−2に示すようなミニアプリケーションオブジェクト画面、及び/又は図5F−2に示すような通知画面)と置換し、デバイスが(例えば、図5F−5及び/又は5T−3に示すように)表示オン状態のロック解除モードにあり、スワイプジェスチャが第2の方向(例えば、図5T−3に示すように右向き及び/又は図5F−5に示すように下向き)にあるという判定に従って、デバイスは、第1のユーザインターフェースの表示を、第3のユーザインターフェースであって、第3のユーザインターフェースは第2のコンテンツ及びデバイスが表示オン状態のロックモードにあるときに表示されない第2の追加コンテンツ(例えば、(例えば、図5T−4に示すような)制限されたミニアプリケーションオブジェクトコンテンツ及び/若しくは制限された通知コンテンツ、又は電子デバイス上のプライバシ及び/若しくは(図5F−6に示すような)セキュリティ設定による制限されたアクセスに従う他の通知情報)を表示する第3のユーザインターフェースの表示と置換する(614)。
[0271]
いくつかの実施形態では、スワイプジェスチャは、第1の方向及び第2の方向とは異なる第3の方向(例えば、図5AH及び5AIに示すように、左向き)にある。デバイスが(例えば、図5AIに示されるように)ロック解除モードにあるという判定に従って、第1のユーザインターフェースは、カメラアプリケーションに関連付けられた第4のユーザインターフェースの表示(例えば、カメラアプリケーションユーザインターフェース5172)と置換される。デバイスが(例えば、図5AHに示すように)ロックモードにあるという判定に従って、第1のユーザインターフェースは、カメラアプリケーションに関連付けられた第4のユーザインターフェースの表示と置換され、カメラアプリケーションに関連付けられた画像ライブラリは制限される(例えば、第1の入力が受信されてからキャプチャされた画像のみがアクセス可能である)。
[0272]
いくつかの実施形態では、スワイプジェスチャは、第1の方向、第2の方向、及び第3の方向とは異なる第4の方向(例えば、上向き、例えば、図AKに示す矢印5208によって示される経路、及び/又は図ASの矢印5314によって示される経路に沿って)にある。デバイスが(例えば、図ASに示すように)ロック解除モードにあるという判定に従って、第1のユーザインターフェース512は、制御パネルユーザインターフェース(例えば、マルチページ制御パネルユーザインターフェース5208)の表示と置換される。いくつかの実施形態では、デバイスが(例えば、図AKに示される)ロックモードにあるという判定に従って、第1のユーザインターフェース512は、マルチページ制御パネルユーザインターフェース5208の表示と置換され、(例えば、図5ANに示すように)制御パネルユーザインターフェースの少なくとも1つのパネル及び/又は制御はアクセス可能ではない。例えば、ホームアクセサリ制御デバイス(例えば、遠隔デバイス制御アフォーダンス5272〜5286)などの遠隔デバイス制御は、デバイスが(例えば、図5ANにロックアイコン514のロック状態によって示されるように)ロックモードにあるとき、作動不能であり、及び/又は表示されない。いくつかの実施形態では、デバイスがロックモードにあるという判定に従って、デバイスは、第1のユーザインターフェース512、第2のユーザインターフェース(例えば、通知ユーザインターフェース520及び/又はミニアプリケーションユーザインターフェース5122)、第3のユーザインターフェース(例えば、通知ユーザインターフェース520及び/又はミニアプリケーションユーザインターフェース5122)、第4のユーザインターフェース(例えば、カメラアプリケーションユーザインターフェース5172)、及び/又は制御パネルユーザインターフェース5208上にロックモード表示(例えば、閉じた南京錠アイコン514)を表示する。いくつかの実施形態では、デバイスがロック解除モードにあるという判定に従って、デバイスは、第1のユーザインターフェース、第2のユーザインターフェース、第3のユーザインターフェース、第4のユーザインターフェース、及び/又は制御パネルユーザインターフェース上に、ロック解除モード表示(例えば、ロックアイコン514のロック解除状態などの、開いた南京錠アイコン)を表示する。
[0273]
いくつかの実施形態では、第2のコンテンツは、1つ以上のミニアプリケーションオブジェクト(例えば、カレンダミニアプリケーション5125、天気ミニアプリケーション5126、次の予定ミニアプリケーション5132、及び/又はメールミニアプリケーション5162)を含み(616)、第2の追加コンテンツは、制限されたミニアプリケーションオブジェクト情報を含む。
[0274]
いくつかの実施形態では、第2のコンテンツは、1つ以上の通知(例えば、カレンダ招待通知550、メッセージ通知542、ボイスメール通知544、及び/又は通知5108)を含み、第2の追加コンテンツは、制限された通知情報を含む(618)。
[0275]
いくつかの実施形態では、第2のユーザインターフェースは、(例えば、図5F−2〜図5F−4及び図5F−6〜図5F−8に示すような)第1の検索入力領域524を含み、第3のユーザインターフェースは、(例えば、図5T−2及び図5T−4に示すような)第2の入力領域5124を含む(620)。
[0276]
いくつかの実施形態では、デバイスは、第1の検索入力領域及び第2の検索入力領域(例えば、フィルタ検索のためのテキスト入力)の、それぞれの検索入力領域(例えば、入力語「movie」を含む524、及び/又は5124)内の入力を検出する(622)。
[0277]
それぞれの検索領域において入力を検出したこと応答して、デバイスが表示オン状態のロックモードにあるという判定に従って、デバイスは、(例えば、図5F−4及び5Iに示すように)検索結果の第1のセットを表示する(624)。表示オン状態のロック解除モードにあるという判定に従って、デバイスは、(例えば、図5F−6及び図5Jに示すように)検索結果の第1のセットとは異なる、検索結果の第2のセット(例えば、デバイスのセキュリティポリシー及び/又はプライバシーポリシーのために制限され、第1のセットの検索結果に含まれない、追加の検索結果を含む検索結果のセット)を表示する。例えば、メッセージ552、メッセージ554、及び電子メール556は、デバイスのロック解除モードを示す図5Jには示されているが、デバイスのロックモードを示す図5Iには示されていない。
[0278]
いくつかの実施形態では、デバイスがロック解除モードにあるか、又は表示オン状態のロックモードにあるかの判定が、図5Dに示す接触508による入力などの、(例えば、ディスプレイのアクティブ化が発生したときに)第1の入力を検出したことに応答して、われる(626)。
[0279]
いくつかの実施形態では、スワイプジェスチャを検出したことに応答して(例えば、ディスプレイのアクティブ化が発生した後に)、デバイスが表示オン状態のロックモードにあるか、又は表示オン状態のロック解除モードにあるかの判定が、(例えば、606に関して記載したように)タッチ感知面上のスワイプジェスチャを検出したことに応答して行われる(628)。
[0280]
いくつかの実施形態では、電子デバイスは、1つ以上のセンサ(例えば、加速度計、ジャイロ、マイクロフォン、振動センサ、熱センサ、タッチセンサ、及び/又は光センサを含む)を含み、(デバイスのディスプレイをアクティブ化するための)第1の入力を検出することは、1つ以上のセンサを用いて、(例えば、図5A−1〜5A−4に示すような)デバイスのコンテキストの変化を検出することを含む(630)。いくつかの実施形態では、コンテキストデバイスの変更は、例えば、デバイスの向きの変化及び/又は環境の変化(例えば、光レベル)などの、デバイスの内部及び/又は外部状態の変化である。例えば、デバイスのコンテキストの変化は、ユーザがテーブルからデバイスを持ち上げ、及び/若しくはポケットからデバイスを取り出して手502に保持されたデバイスを見るとき、並びに/又はトリガフレーズの検出若しくはユーザが話すキーワードを検出したことに応答して、生じる。デバイスのコンテキストの変化を検出したことに応答して、デバイスは、デバイスのコンテキストの変化がディスプレイアクティブ化基準を満たすかどうかを判定する。いくつかの実施形態では、ディスプレイアクティブ化基準は、傾斜基準(例えば、初期位置からの閾値変動及び/又は水平軸からの閾値変動)、加速基準及び/又は光レベル変更基準のうちの1つ以上を含む。いくつかの実施形態では、1つ以上のセンサの出力が、誤検出を防止するために使用される。例えば、光レベル変化基準は満たされているが、加速度量が閾値加速度レベルを下回る場合(例えば、加速度基準とは異なる)、ディスプレイアクティブ化基準は満たされない。いくつかの実施形態では、デバイスの向きが変化すると、(例えば、図5A−3〜図5A−4に示すように)向きの変化が生じるにつれて、壁紙及び/又は通知が拡張される。
[0281]
いくつかの実施形態では、(デバイスのディスプレイをアクティブ化するための)第1の入力を検出することは、ディスプレイアクティブ化アフォーダンス(例えば、物理的ボタン204及び/又はタッチ感知面112上の仮想ボタン)のアクティブ化を検出することを含む(632)。いくつかの実施形態では、ディスプレイアクティブ化アフォーダンスのアクティブ化を検出することは、スリープ/ウェイクボタン206などの物理的ボタン204の動作を検出することを含む。いくつかの実施形態では、ディスプレイアクティブ化アフォーダンスのアクティブ化を検出することは、タッチ感知面との接触の強度(例えば、力、接触エリア、及び/又は指紋を検出するように構成された仮想ホームボタンなどの、仮想ボタンに対応する位置における)を検出するための1つ以上のセンサによって、それぞれの閾値強度を満たす接触の特性強度の増加を検出することを含む。
[0282]
いくつかの実施形態では、第1の入力を検出する(デバイスの表示をアクティブ化する)ことは、(例えば、デバイスのディスプレイをアクティブ化するための)ディスプレイアクティブ化アフォーダンスをアクティブ化し、ディスプレイアクティブ化アフォーダンスを作動させない、ディスプレイアクティブ化アフォーダンス(例えば、物理的スリープ/ウェイクボタン206及び/又は物理的ホームボタン204)との接触を検出することを含む(634)。いくつかの実施形態では、ディスプレイアクティブ化アフォーダンスを作動させないディスプレイアクティブ化アフォーダンスとの接触は、図5Bに示すように、物理的ボタンを移動及び/又は押下する物理的ボタン204との接触(例えば、Touch IDスキャンのための、物理的ホームボタンなどの指紋センサを含むボタンの軽いタッチ)である。
[0283]
いくつかの実施形態では、(デバイスのディスプレイをアクティブ化のための)第1の入力を検出することは、ディスプレイアクティブ化アフォーダンス(例えば、仮想ボタン及び/又は物理的ボタン204)との接触であって、ディスプレイアクティブ化アフォーダンスをアクティブ化してデバイスのディスプレイをアクティブ化し(例えば、デバイスをウェイクさせるか、又はタッチ画面ディスプレイをウェイクさせ)、ディスプレイアクティブ化アフォーダンスをアクティブ化せずにディスプレイアクティブ化アフォーダンスと関連付けられた少なくとも1つの追加機能を実行する、ディスプレイアクティブ化アフォーダンスとの接触を検出することを含む(636)。いくつかの実施形態では、ディスプレイアクティブ化アフォーダンスは、異なるレベルの強度の接触に応答して異なる機能の実行をトリガする、仮想ボタン又は物理的ボタン204である。例えば、第1の強度閾値(例えば、図5Bの強度メータ510によって示されるようなIT)を下回る特性強度を有する接触は、(例えば、デバイスのディスプレイをアクティブ化するために)仮想ボタンに関連付けられた第1の機能をアクティブ化し、(例えば、図5Dに示すような)第1の強度閾値以上の特性強度を有する接触508は、(例えば、(デバイスがロックされている場合に)デバイスをロック解除し、ホーム画面(例えば、図5Eに示すようなアプリケーションスプリングボードユーザインターフェース400)を表示するために)仮想ボタンに関連付けられた第2の機能をアクティブ化する。
[0284]
いくつかの実施形態では、第1のユーザインターフェース512が表示されている(例えば、第1の方向とは反対の方向の第2のスワイプジェスチャがタッチ感知面上で検出された後の時刻に(例えば、第2のユーザインターフェースを置換して)表示されている)間に、デバイスは第2の入力を検出する(638)。例えば、デバイスは、(デバイスがロックされている場合に)デバイスをロック解除するためのデバイスロック解除基準を満たす、ディスプレイアクティブ化アフォーダンス(例えば、物理的ボタン204又は仮想ボタン)上の接触508を含む第2の入力を検出し、ホーム画面(例えば、図5Eに示すような、アプリケーションスプリングボードユーザインターフェース400)を表示する。いくつかの実施形態では、デバイスロック解除基準は、(例えば、ディスプレイアクティブ化アフォーダンスが仮想ボタンである場合)検出された入力における接触の特性強度がそれぞれの強度閾値を満たすか又は超えることを要求する。例えば、いくつかの実施形態では、デバイスのロック解除基準は、接触の特性強度が深い押圧強度閾値ITを上回って増加する場合に満たされる基準を含む。いくつかの実施形態では、デバイスのロック解除の基準は、(ディスプレイアクティブ化アフォーダンスが物理的ボタン204である場合)例えば、図5Dに示すように、接触がディスプレイアクティブ化アフォーダンスを物理的に作動させることを要求する。第2の入力を検出したことに応答して、デバイスは、第1のユーザインターフェース(例えば、ウェイク画面ユーザインターフェース512)の表示を、複数のアプリケーションの異なるアプリケーションに対応する複数のアプリケーションアイコンを含むユーザインターフェースの表示(例えば、複数のアプリケーションアイコンを含むユーザインターフェースは、例えば、図5Eに示すように、アプリケーションスプリングボードユーザインターフェース400である)と置換する。いくつかの実施形態では、第2の入力は、物理的ボタン(例えば、ホームボタン)の押下を含む。いくつかの実施形態では、第2の入力は、(例えば、力及び/又は指紋を検出するように構成された仮想ホームボタンなどの、仮想ボタンに対応する位置で)タッチ感知面との接触の強度を検出するための1つ以上のセンサによって、(デバイスがロックされている場合には)デバイスをロック解除してホーム画面を表示するためのデバイスロック解除基準を満たす、接触の特性強度の増加を検出する。いくつかの実施形態では、複数のアプリケーションアイコンを含むユーザインターフェース内のそれぞれのアプリケーションアイコン上で検出された入力がアプリケーション起動基準を満たすとき、デバイスはそれぞれのアプリケーションアイコンに対応するアプリケーションを起動する。いくつかの実施形態では、アプリケーション起動基準は、例えば、タップ入力の特性強度がそれぞれの強度閾値を満たすことを必要とせずに、タップ入力によって満たされる。
[0285]
いくつかの実施形態では、第2の入力を検出したことに応答して、デバイスは、デバイスが表示オン状態のロックモードにあるか、又は表示オン状態のロック解除モードにあるかを判定し(640)、デバイスが表示オン状態のロックモードにある(例えば、第2の入力が提供されたときに発生するTouch IDスキャンによってデバイスはロック解除されていない、及び/又はデバイスは、第2の入力が提供される前に提供された前の入力によってロック解除されてない)という判定に従って、デバイスは、図5Lに示すように、パスコード入力インターフェース560を含むユーザ検証プロンプトユーザインターフェース558などの(例えば、ユーザがロック解除入力を提供してデバイスをロック解除するように促す)認証ユーザインターフェースを表示する。
[0286]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの機能のうちの、すべてよりも少ない、サブセットを実行するように、構成されている(644)。
[0287]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクト(例えば、図5Uに示すミニアプリケーションオブジェクト5125)は、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションに対して、識別子(例えば、図5Uに示すように、対応するアプリケーションを識別するテキスト5131及び/又は対応するアプリケーションを識別するアイコン5135)を表示する(646)。
[0288]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトからの対応するアプリケーションからコンテンツの一部を表示する(648)。例えば、カレンダミニアプリケーション5125は、図5Zのカレンダアプリケーションユーザインターフェース5144によって示されるカレンダアプリケーションからのコンテンツの一部分(例えば、カレンダアプリケーションの1日のスケジュールかのうち、現在時刻に近い時間などの、時間のサブセット)を含む。
[0289]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクト上の所定の入力(例えば、図5Yに示すように、次の予定ミニアプリケーションオブジェクト5132に対応する位置にある接触5143を含む入力)が、それぞれのミニアプリケーションオブジェクトに対応するアプリケーション(例えば、図5Zのカレンダアプリケーションユーザインターフェース5144によって示される、カレンダアプリケーション)を起動する(650)。
[0290]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイスのメモリに存在する関連付けられたアプリケーションとは異なる、デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する(652)。
[0291]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する(654)。
[0292]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する(656)。
[0293]
いくつかの実施形態では、メモリ部分は、それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である(658)。
[0294]
いくつかの実施形態では、通知は、オペレーティングシステム(又はオペレーティングシステムの通知管理モジュール)によってアプリケーションの通常のユーザインターフェースの外部に表示するためにアプリケーション(又はアプリケーションに関連付けられたサーバ)によって発行されるデータオブジェクトである。通知は、通知と、通知に関連付けられたアプリケーションの両方によってアクセス可能なデータストアから取得されたデータを含むことができる。いくつかの実施形態では、通知は、デバイスに表示するためのデータを動的にロード又は生成するプログラム可能な構成要素(例えば、ミニアプリケーションオブジェクト又は拡張)を含むことができる。いくつかの実施形態では、アプリケーション(又はアプリケーションに関連付けられたサーバ)から取得された通知は、デバイス上に表示するための、短い、より簡略化された表示可能バージョンと、通知の長い、複雑な表示可能バージョンの両方を生成するためのデータを含む。
[0295]
いくつかの実施形態では、ミニアプリケーションオブジェクトは、対応するアプリケーションの機能の、すべてよりも少ない、サブセットを実行するように構成されている。
[0296]
いくつかの実施形態では、ミニアプリケーションオブジェクトは、対応するアプリケーションの識別子を表示する。
[0297]
いくつかの実施形態では、ミニアプリケーションオブジェクトは、対応するアプリケーションからのコンテンツの一部を表示する。例えば、マップミニアプリケーションオブジェクトは、マップミニアプリケーションオブジェクトに対応するマップアプリケーションに表示されるマップの一部を表示する。例えば、カレンダミニアプリケーションオブジェクトは、対応するカレンダアプリケーションに表示されるカレンダの一部を表示する。
[0298]
いくつかの実施形態では、ミニアプリケーションオブジェクト上の所定の入力は、対応するアプリケーションを起動する。
[0299]
いくつかの実施形態では、ミニアプリケーションオブジェクトは、デバイスのメモリに存在する関連付けられたアプリケーションとは異なる、デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する。例えば、ソーシャルネットワーキングアプリケーションに対応するミニアプリケーションオブジェクトは、対応するアプリケーションの機能のうちの、すべてより少ない、サブセットを有する単一目的の又は合理化されたアプリケーションとして動作するが、フル機能のソーシャルネットワーキングアプリケーションに関連付けられる。この例では、ミニアプリケーションオブジェクトはソーシャルネットワーキングアプリケーションとは独立して動作し、ソーシャルネットワーキングアプリケーションが実行されていないシナリオでは、ミニアプリケーションオブジェクトは動作し続ける。
[0300]
いくつかの実施形態では、ミニアプリケーションオブジェクトは、デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する。例えば、カレンダアプリケーション用のミニアプリケーションオブジェクトは、フル機能のカレンダアプリケーションの単一機能又は動作構成要素である。この例では、カレンダアプリケーションが(例えば、バックグラウンドで)実行されていない場合、カレンダミニアプリケーションオブジェクトはどちらも動作しない。
[0301]
いくつかの実施形態では、ミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する。いくつかの実施形態では、このメモリ部分は、対応するフル機能のアプリケーションによってアクセスされ得る。例えば、インスタントメッセージアプリケーションのミニアプリケーションオブジェクトは、部分的に書き込まれた返信メッセージの一時的記憶のためのメモリ部分を有する。この例では、ユーザが、返信メッセージの書き込み中に対応するアプリケーションを開くと、返信メッセージのコンテンツが一時記憶場所から取得され、フル機能のアプリケーションによって使用されて、ユーザに返信メッセージを完了させる。
[0302]
いくつかの実施形態では、ミニアプリケーションは、パラグラフ[00295]〜[00301]に記載された特徴のいずれかの組み合わせである。
[0303]
図6A〜図6Eにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載される動作を再順序付けるための様々な方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法700、800、及び900)に関して本明細書に記載された他のプロセスの詳細は、図6A〜6Eに関して上述した方法600に類似の方法でも適用可能であることに留意されたい。例えば、方法600を参照して上述した接触、ジェスチャ、ユーザインターフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択で、本明細書に記述した他の方法(例えば、方法700、800、及び900)を参照して本明細書に記述した、接触、ジェスチャ、ユーザインターフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションの1つ以上の特性を有する。簡潔にするために、それらの詳細はここでは繰り返さない。
[0304]
図7A〜図7Eは、いくつかの実施形態に係る、表示オンユーザインターフェースから制御にアクセスする方法700のフロー図を示す。方法700は、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための1つ以上のセンサを備える電子デバイス(例えば、デバイス300、図3、又はポータブル多機能デバイス100、図1A)において実行される。いくつかの実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面がディスプレイ上にあるか又はこれに組み込まれている。いくつかの実施形態では、ディスプレイはタッチ感知面から分離している。方法700の一部の動作が任意選択で組み合わされ、及び/又は一部の動作の順序が任意選択で変更される。
[0305]
以下に記載のように、方法700は、表示オンユーザインターフェースから制御にアクセスする直感的な方法を提供する。その方法は、制御にアクセスするときのユーザの認知負荷を軽減し、それによって、より効率的なヒューマンマシンインターフェースを生成する。バッテリ動作電子デバイスでは、ユーザがより高速かつ効率的に制御器にアクセスすることを有効化することで、電力を節約し、バッテリ充電間の時間を延ばす。
[0306]
デバイスが表示オフ状態(例えば、表示がオフにされているか又は減光されている状態、タッチ画面がオフにされている状態、及び/又はタッチ画面の表示機能がオフにされているが、タッチ画面のタッチ感知面は、例えば、スリープ/休止モード、省電力モード、又は制限された機能を有する別のモードで実施されるように、アクティブのままである、状態)にある間に、デバイスは、デバイスの表示をアクティブ化する(例えば、デバイスをウェイクさせる、又はタッチ画面ディスプレイをウェイクさせる)ための第1の入力、例えば、図5Bに示すように、物理的ボタン204での接触508による入力を検出する(702)。
[0307]
第1の入力を検出したことに応答して、デバイスは、デバイスのディスプレイをアクティブ化し、ディスプレイ上に、デバイスの表示オン状態に対応する第1のユーザインターフェース512を表示する(例えば、図5Cに示すようなウェイク画面512、デバイスをウェイクさせるか、又はデバイスのディスプレイをアクティブ化するとすぐに示されるユーザインターフェース)(704)。
[0308]
デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、デバイスはタッチ感知面上のスワイプジェスチャを検出する(706)。
[0309]
スワイプジェスチャを検出したことに応答して、スワイプジェスチャが第1の方向(例えば、図5AH及び図5AIに示すように左向き)にあるという判定に従って、デバイスは、第1のユーザインターフェース512の表示をカメラアプリケーションユーザインターフェース5172の表示と置換する(708)。スワイプジェスチャが、第1の方向とは異なる第2の方向(例えば、図5T−1の矢印5120によって示される経路に沿って、及び/又は図5T−3の矢印5121によって示される経路に沿って右向き)にあるという判定に従って、デバイスは、第1のユーザインターフェース512の表示を、複数のミニアプリケーションオブジェクト(例えば、カレンダミニアプリケーション5125、天気ミニアプリケーション5126、次の予定ミニアプリケーション5132、及び/又はメールミニアプリケーション5162)を含むように構成されたミニアプリケーションオブジェクトユーザインターフェース5122の表示と置換し、複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、デバイスに記憶された対応するアプリケーション(例えばカレンダアプリケーション、天気アプリケーション、及び/又はメールアプリケーション)を有する。スワイプジェスチャが、第1の方向及び第2の方向とは異なる第3の方向(例えば、図AKの矢印5206によって示される経路に沿って上向き及び/又は図5ASの矢印5314によって示される経路に沿って上向き)にあるという判定に従って、デバイスは、マルチページ制御パネルユーザインターフェース5208の第1のページを表示する。例えば、デバイスは、図ALに示すように、デバイス設定を調整するための制御アフォーダンス(例えば、5210〜5232)を有する第1のページ、図AMに示すように、メディアプレーヤ制御アフォーダンス(例えば、5242〜5252)を含む第2の制御ユーザインターフェースを有する第2のページ、及び/又は、図ANに示すように、遠隔デバイス制御アフォーダンス(例えば、5272〜5286)を含む第3の制御ユーザインターフェースを有する第3のページ、を含む、マルチページ制御パネルユーザインターフェース5208表示する。スワイプジェスチャが、第1の方向、第2の方向及び第3の方向とは異なる第4の方向(例えば、図5F−1の矢印518によって示される経路に沿って下向き、及び/又は図5F−5の矢印536によって示される経路に沿って下向き)にあるという判定に従って、デバイスは、複数の通知(例えば、カレンダ招待通知550、メッセージ通知542、ボイスメール通知544、及び/又は通知5108)を表示するように構成された通知ユーザインターフェース520を表示する。いくつかの実施形態では、通知は、デバイスによって受信された電話通話、ビデオ通話、ボイスメール、電子メール、SMS、MMS、及び/又はカレンダ招待などの通信に対応する情報を含む。いくつかの実施形態では、通知は、カレンダ予約通知、カレンダ予約招待、リマインダ、及び/又はデバイスにインストールされたアプリケーションによって生成される別のタイプの通知である。
[0310]
いくつかの実施形態では、第1のユーザインターフェース512の表示をカメラアプリケーションユーザインターフェース5172の表示と置換することは、カメラアプリケーションに関連付けられた1つ以上の制御アフォーダンスの表示(例えば、図5AH及び図5AIに示す制御アフォーダンス5186)を、(例えば、スワイプジェスチャが検出された時点から、又はカメラアプリケーションユーザインターフェースが表示されている時点から)制御表示期間が経過するまで遅延させることを含む(710)。例えば、制御アフォーダンス5186は、時刻tにおいて左向きのジェスチャが開始された後、図5AI及び図5AHの時刻tまで表示されない。いくつかの実施形態では、第1のユーザインターフェース512の表示をカメラアプリケーションユーザインターフェース5172の表示と置換することは、スワイプジェスチャが受信されたときにカメラアプリケーションユーザインターフェースを徐々に明らかにすることを含み、明らかにされたカメラアプリケーションユーザインターフェースの一部が、閾値部分を上回って増加したという判定に従って、1つ以上の制御アフォーダンスが表示される。いくつかの実施形態では、制御表示期間が経過するまで、又はカメラアプリケーションユーザインターフェースの閾値部分が明らかになるまで、カメラアプリケーションに関連付けられた1つ以上の制御アフォーダンスの表示を遅延させることによって、ユーザは、接触を持ち上げることなく以前のユーザインターフェース(例えば、ホーム画面、ウェイク画面など)に逆戻りするいくらかの時間及び機会を許容される。言い換えると、ユーザインターフェースのナビゲーションは、より流動的で効率的になり、ユーザは、現在のスワイプ方向におけるスワイプジェスチャの継続の結果のヒントを見た後に、考えを変えることができる(例えば、現在の方向のスワイプの継続は、カメラアプリケーションユーザインターフェースにつながる)。いくつかの実施形態では、制御アフォーダンスに関連付けられたいくつかのカメラ制御機能(いくつかの補助光センサ及び/又はいくつかのフロントエンド制御機能など)、及び制御アフォーダンスに関連付けられていないいくつかの制御機能(例えば、いくつかのバックエンド制御機能)は、アクティブ化するのに時間と電力を要し、これらの制御機能のアクティブ化は、カメラアプリケーションをアクティブ化するユーザの意図が、ユーザのスワイプジェスチャの継続が関連する閾値を超えることによって確認されるまで遅延される。
[0311]
いくつかの実施形態では、デバイスは、制御表示期間中に、第1のユーザインターフェースに戻るジェスチャ(例えば、カメラアプリケーションユーザインターフェースを表示させたスワイプジェスチャの反対方向のスワイプジェスチャ)を検出し(712)、制御表示期間中に、第1のユーザインターフェースに戻るジェスチャを検出したことに応答して、デバイスは、カメラアプリケーションユーザインターフェースの表示(例えば、カメラアプリケーションユーザインターフェースの明らかにされた部分)を、第1のユーザインターフェースの表示と置換する(例えば、第1のユーザインターフェースが復元される)(714)。
[0312]
いくつかの実施形態では、(例えば、図5ALに示すように)マルチページ制御パネルユーザインターフェース5208が表示されている間に、デバイスは、マルチページ制御パネルユーザインターフェースの第1のページに対応する(例えば、マルチページ制御パネルユーザインターフェースの第1のページ内及び/又はそれに隣接する)タッチ感知面上の位置でのジェスチャ(例えば、矢印5240によって示される経路に沿った左向きのジェスチャ)を検出する(716)。いくつかの実施形態では、マルチページ制御パネルの第1のページに対応する位置でジェスチャを検出したことに応答して、デバイスは、図5AMに示すマルチページ制御パネルユーザインターフェース5208の第2のページなどの、マルチページ制御パネルユーザインターフェースの第2のページ(例えば、メディア再生のための制御及び/又はアクセサリ(ホームデバイスアクセサリなどの)デバイスのための制御を含む)を表示する(718)。
[0313]
いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第2のページが表示されている間に、デバイスは、マルチページ制御パネルユーザインターフェースの第2のページに対応する(例えば、マルチページ制御パネルユーザインターフェースの第1のページ内及び/又はそれに隣接する)タッチ感知面上の位置に、ジェスチャ(例えば、矢印5270によって示される経路に沿った左向きのジェスチャ)を検出し(720)、マルチページ制御パネルユーザインターフェースの第2のページに対応する位置でジェスチャを検出したことに応答して、デバイスは、図5ANに示すマルチページ制御パネルユーザインターフェース5208の第3のページなどの、マルチページ制御パネルユーザインターフェースの第3のページ(例えば、電子デバイスに通信可能に結合された1つ以上のアクセサリデバイス(ホームデバイスなど)の制御を含む)、を表示する(722)。
[0314]
いくつかの実施形態では、通知ユーザインターフェース520が表示されている間に、デバイスは、解除ジェスチャ(例えば、アフォーダンス、例えば「X」アフォーダンス(例えば、図5Mの566)で受信された左向きスワイプ又はジェスチャ、又は「カレンダ招待をアクセプトする」迅速アクション項目などの迅速アクション項目)を、通知ユーザインターフェースに含まれるそれぞれの通知に対応するタッチ感知面112上の(例えば、それぞれの通知に対応する位置における通知プラッタ内及び/又はそれに隣接する)位置で検出し(724)、解除ジェスチャを検出したことに応答して、デバイスは、通知ユーザインターフェースにそれぞれの通知を表示することを停止する(726)。いくつかの実施形態では、続いて通知ユーザインターフェースが表示されると、それぞれの通知は表示されない。
[0315]
いくつかの実施形態では、通知ユーザインターフェースが表示されている間に、デバイスは、通知ユーザインターフェースに含まれる第1の通知に対応するタッチ感知面上の位置における起動ジェスチャ(例えば、図5Pに示すように、通知550に対応する位置での接触592によるタップジェスチャなどの、タップジェスチャ)を検出し(728)、起動ジェスチャを検出したことに応答して、デバイスは、(例えば、図5Qに示すように)第1の通知に対応するアプリケーションを起動する(730)。
[0316]
いくつかの実施形態では、ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、デバイスは、ミニアプリケーションオブジェクトユーザインターフェースに含まれる第1のミニアプリケーションオブジェクトに対応するタッチ感知面上の位置における起動ジェスチャ(例えば、タップジェスチャ)を検出する(732)。
[0317]
起動ジェスチャを検出したことに応答して、デバイスは、第1のミニアプリケーションオブジェクトに対応するアプリケーションを起動する(734)。
[0318]
いくつかの実施形態では、ミニアプリケーションオブジェクトユーザインターフェース5122が表示されている間に、デバイスは、ミニアプリケーションオブジェクトユーザインターフェースに含まれる第2のミニアプリケーションオブジェクトに対応する、タッチ感知面上の位置における情報拡張ジェスチャ(例えば、ミニアプリケーションオブジェクトのプラッタ上の「show more」アフォーダンスのタップジェスチャ)を検出し(736)、第2のミニアプリケーションオブジェクトは、ミニアプリケーションオブジェクト情報(例えば、コンテンツ、機能、及び/又は入力デバイス(制御アフォーダンス及び/又はキーボードなど)を含む。例えば、情報拡張ジェスチャは、図5Uに示すようなカレンダミニアプリケーション5125の「show more」アフォーダンス5127に対応する位置での接触5128による入力、及び/又は図5Xに示すような、次の予定ミニアプリケーション5132の「show more」アフォーダンス5141に対応する位置での接触5139による入力である。情報拡張ジェスチャを検出したことに応答して、デバイスは、第2のミニアプリケーションオブジェクトを拡張する(例えば、図5Wのカレンダミニアプリケーションオブジェクト5125の拡張ビュー、及び図5Yの次の予定ミニアプリケーションオブジェクト5132の拡張ビューによって示されるように、ミニアプリケーションオブジェクトの垂直サイズを増加させる)(738)。デバイスは、ミニアプリケーションオブジェクト情報及び追加のミニアプリケーションオブジェクト情報を、拡張された第2のミニアプリケーションオブジェクトに表示する。例えば、図5Yに示すように、次の予定ミニアプリケーション5132の拡張ビューは、図5Xに示す次の予定ミニアプリケーション5132のビューに示される情報、並びに地図5134及び/又はアクション項目5136(「指示(Directions)」)、5138(「スヌーズ(Snooze)」)、5140(「メッセージの招待者(Message Invitees)」)、及び/又は5142(「イベントの削除(Delete Event)」)などの、追加の情報、を含む。いくつかの実施形態では、他のミニアプリケーションオブジェクトが、ミニアプリケーションオブジェクトユーザインターフェースの底部からロールオフして(例えば、図5Yの天気ミニアプリケーションオブジェクト5126によって示されるように)、拡張されたミニアプリケーションオブジェクトのためのスペースを作る。
[0319]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの機能のうちの、すべてよりも少ない、サブセットを実行するように、構成されている(740)。
[0320]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子(例えば、図5Uに示すように、対応するアプリケーションを識別するテキスト5131及び/又は対応するアプリケーションを識別するアイコン5135)を表示する(742)。
[0321]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトからの対応するアプリケーションからコンテンツの一部を表示する(744)。例えば、カレンダミニアプリケーション5125は、図5Zのカレンダアプリケーションユーザインターフェース5144によって示されるカレンダアプリケーションからのコンテンツの一部分(例えば、カレンダアプリケーションの1日のスケジュールかのうち、現在時刻に近い時間などの、時間のサブセット)を含む。
[0322]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクト上の所定の入力(例えば、図5Yに示すように、次の予定ミニアプリケーションオブジェクト5132に対応する位置における接触5143を含む入力)は、それぞれのミニアプリケーションオブジェクトの対応するアプリケーション(例えば、図5Zのカレンダアプリケーションユーザインターフェース5144によって示されるようなカレンダアプリケーション)を起動する(746)。
[0323]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイスのメモリに存在する関連付けられたアプリケーションとは異なる、デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する(748)。
[0324]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する(750)。
[0325]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する(752)。
[0326]
いくつかの実施形態では、メモリ部分は、それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である(754)。
[0327]
図7A〜図7Eにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載される動作を再順序付けるための様々な方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、800、及び900)に関して本明細書に記載された他のプロセスの詳細も、図7A〜図7Eに関して上述した方法700に類似した方法で適用可能であることに留意されたい。例えば、方法700を参照して上述した接触、ジェスチャ、及びユーザインターフェースオブジェクト、及びアニメーションは、任意選択で、本明細書に記述した他の方法(例えば、方法600、800、及び900)を参照して本明細書に記述した、接触、ジェスチャ、及びユーザインターフェースオブジェクト、及びアニメーションの1つ以上の特性を有する。簡潔にするために、それらの詳細はここでは繰り返さない。
[0328]
図8A〜図8Cは、いくつかの実施形態に係る、ミニアプリケーションユーザインターフェースにミニアプリケーションオブジェクトを追加する方法800のフロー図を示す。方法800は、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための1つ以上のセンサを備える電子デバイス(例えば、デバイス300、図3、又はポータブル多機能デバイス100、図1A)において実行される。いくつかの実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面がディスプレイ上にあるか又はこれに組み込まれている。いくつかの実施形態では、ディスプレイはタッチ感知面から分離している。方法800の一部の動作が任意選択で組み合わされ、及び/又は一部の動作の順序が任意選択で変更される。
[0329]
後述のように、方法800は、ミニアプリケーションオブジェクトをミニアプリケーションユーザインターフェースに追加する直感的な方法を提供する。その方法は、ミニアプリケーションオブジェクトをミニアプリケーションユーザインターフェースに追加するときにユーザの認知負荷を軽減し、それによって、より効率的なヒューマンマシンインターフェースを生成する。バッテリ動作電子デバイスでは、ユーザがより高速かつ効率的にミニアプリケーションユーザインターフェースにミニアプリケーションオブジェクトを追加することを有効化することで、電力を節約し、バッテリ充電間の時間を延ばす。
[0330]
デバイスは、デバイスにインストールされた複数のアプリケーションの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェース400を表示する(例えば、デバイスは、図5AAに示すように、ホーム画面又はアプリケーションスプリングボード400を表示する(802)。
[0331]
デバイスは、複数のアプリケーションアイコンの第1のアプリケーションアイコン(例えば、メールアプリケーションアイコン418)であって、その第1のアプリケーションアイコンは複数のアプリケーションの第1のアプリケーションに対応する第1のアプリケーションアイコン、に対応するタッチ感知面上の位置で、第1の入力(例えば、第1の接触5150による軽い押圧又は深い押圧入力)を検出する(804)。例えば、第1の入力は、図5AB〜図5ADに示すように、接触5150による入力である。
[0332]
第1の入力を検出したことに応答して、デバイスは、第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビュー(例えば、図5AFに示すミニアプリケーションオブジェクト5162の、図5ADに示すプレビュー5156などの、第1のミニアプリケーションオブジェクトの表現又は縮小バージョン)を、オーバーレイ領域(例えば、アプリケーションスプリングボードユーザインターフェース400にオーバーレイする)に表示する(806)。いくつかの実施形態では、ミニアプリケーションオブジェクトに対応する1つ以上の機能項目は、ミニアプリケーションオブジェクトのプレビューではアクティブ化されない。例えば、図5ADのミニアプリケーションプレビュー5156のアバタ5164aで入力が受信された場合、応答は発生しないが、図5AFのミニアプリケーションオブジェクト5162のアバタ5164aで受信された入力に応答して、応答が発生する(例えば、アバタ5164aに対応するユーザから受信された、及び/又はそれに送信されたメールが表示される。例えば、ミニアプリケーションのプレビュー5156は、例えば4つのアバタ5164a〜5164dを表示する。ミニアプリケーションオブジェクト5162は、ミニアプリケーションオブジェクト5162を拡張して追加のアバタ(例えば、図AGに示すように、5164e〜5164h)を表示するアフォーダンス(「Show More」アフォーダンス5168)を含む。第1のミニアプリケーションオブジェクト(例えば、プレビュー5156)は、複数のアプリケーション(例えば、メールアプリケーション)の第1のアプリケーションに対応し、オーバーレイ領域は、第1のミニアプリケーションオブジェクト(例えば、プレビュー5156に対応するミニアプリケーションオブジェクト5162)を、複数のミニアプリケーションオブジェクト(例えば、1つ以上のユーザ選択されたミニアプリケーションオブジェクト及び/又は1つ以上のデフォルトミニアプリケーションオブジェクトを含む)を表示する第2のユーザインターフェース(例えば、ミニアプリケーションユーザインターフェース5122)に追加するアフォーダンス(「Add Widget」アフォーダンス5160)を含む。
[0333]
デバイスは、第1のミニアプリケーションオブジェクト5162を第2のユーザインターフェースに追加するアフォーダンス5160に対応するタッチ感知面上の位置で、第2の入力(例えば、タップ入力などの第2の接触5150による入力、接触の特性強度が軽い押圧強度閾値ITを上回って増加する軽い押圧入力、又は接触の特性強度が深い押圧強度閾値ITを上回って増加する深い押圧入力)を検出する(808)。
[0334]
第2の入力を検出したことに応答して、デバイスは、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクト5162を追加する(810)。いくつかの実施形態では、第2のユーザインターフェース(例えば、5122)内の複数のミニアプリケーションオブジェクト(例えば、メールミニアプリケーションオブジェクト5162、カレンダミニアプリケーションオブジェクト5125、及び/又は図5AFに示す次の予定ミニアプリケーションオブジェクト5132)が、プラッタの垂直スタックとして表示される。いくつかの実施形態では、プラッタの垂直スタックのそれぞれのプラッタは、複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトに対応し、各プラッタは、同じ初期プラッタ高さを有する。
[0335]
いくつかの実施形態では、第1のユーザインターフェース(例えば、アプリケーションスプリングボードユーザインターフェース400)を表示している間に、デバイスは、タッチ感知面112上の第3の入力であって、その第3の入力は、第1のユーザインターフェースから第2のユーザインターフェース(ミニアプリケーションユーザインターフェース5122)にナビゲートするための、ナビゲーション基準(例えば第3の入力は1つ以上の右向きスワイプジェスチャである)などの、第1の基準を満たす、第3の入力、を検出する(812)。
[0336]
いくつかの実施形態では、第3の入力を検出したことに応答して、デバイスは、第1のユーザインターフェース(例えば、アプリケーションスプリングボードユーザインターフェース400)の表示を第2のユーザインターフェース(ミニアプリケーションユーザインターフェース5122)と置換し(814)、第1のユーザインターフェースを第2のユーザインターフェースと置換することは、第1のユーザインターフェース(例えば、アプリケーションスプリングボードユーザインターフェース400)を表示することを停止することと、第2のユーザインターフェースに、第1のミニアプリケーションオブジェクト5162(例えば、第1のアプリケーションからの更新されたコンテンツを有する)、及び第1のアプリケーションとは異なる複数のアプリケーションの第2のアプリケーションに対応する、少なくとも第2のミニアプリケーションオブジェクト(例えば、図5AFに示すような、カレンダミニアプリケーションオブジェクト5125及び/又は次の予定ミニアプリケーションオブジェクト5132)を同時に表示することを含む、第2のユーザインターフェース(ミニアプリケーションユーザインターフェース5122)を表示することと、を含む。いくつかの実施形態では、第2のユーザインターフェースは、ミニアプリケーションオブジェクトスタック内のミニアプリケーションオブジェクトを再配置する、及び/又は新しいミニアプリケーションオブジェクトをミニアプリケーションオブジェクトスタックに追加するための「編集」アフォーダンスを含む。
[0337]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、少なくとも1つの選択可能な情報項目(例えば、アバタ5164a、5164b、5164c、及び/又は5164d)を含む(816)。いくつかの実施形態では、選択可能な情報項目は、株価に関する情報(例えば、開始価格、最大価格、価格の変化)を表示する株価リスト項目、ある場所(例えば、都市)の天気予報情報を表示する天気予報項目、最近及び/若しくは頻繁に、デバイス100へ電子メールを送信した並びに/又はデバイス100及び/若しくはカレンダイベントから電子メールを受信した1人以上の電子メール送信者に対応するアバタ5164、などの、特定のタイプのオブジェクトに関する情報を表示する項目である。)
[0338]
第2のユーザインターフェースが表示されている間に、デバイスは、少なくとも1つの選択可能な情報項目に対応するタッチ感知面上の位置における第4の入力を検出する(818)。
[0339]
第4の入力を検出したことに応答して、デバイスは、選択可能な情報(例えば、複数の株式リスト及び対応する株式価格を表示するミニアプリケーションオブジェクト内では、各株式リストは選択可能な情報を表示する、に関連付けられた追加の情報を表示する(820)。ミニアプリケーションオブジェクト内の株式リストの1つで検出されたタップ入力に応答して、株式リストに関する追加の情報(株式価格履歴など)がミニアプリケーションオブジェクトに表示される)。いくつかの実施形態では、選択可能な情報項目に関連付けられた情報は、ミニアプリケーションオブジェクトの少なくとも1つの以前に表示された部分の表示を置換する。いくつかの実施形態では、ミニアプリケーションオブジェクトが拡張され、追加の情報が、ミニアプリケーションオブジェクトの拡張エリアに表示される。
[0340]
いくつかの実施形態では、第1のミニアプリケーションオブジェクト5162は、(例えば、図5AFに示すように)第2のユーザインターフェース内のミニアプリケーションオブジェクト(例えば、ミニアプリケーションオブジェクト5162、5125及び/又は5132)の垂直スタックにおける最上部の位置に追加される(822)。
[0341]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションを識別する識別情報(例えば、図5Uに示すように、対応するアプリケーションを識別するテキスト5131及び/又は対応するアプリケーションを識別するアイコン5135)を含む(824)。
[0342]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションによって提供される機能のサブセット(例えば、天気データ、株価データ、交通データ、遠隔デバイスのための位置データ、及び/又は地図データなどの)遠隔デバイスからのデータを取得すること、直近のカレンダ予約を決定すること、及び/又は所定の位置及び/又は対象の地点までの移動時間を決定すること)を提供するように構成されている(826)。
[0343]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションからのコンテンツのサブセット(例えば、テキスト、画像、カレンダの一部、地図(電子デバイスの位置に対する電子デバイス及び/又は車両の位置を示すライブ更新マップなど)所定の位置及び/又は対象の地点までの移動時間、天気データ、及び/又は株価データ)を含む(828)。いくつかの実施形態では、ミニアプリケーションオブジェクト内のコンテンツは、定期的な間隔で、及び/又はユーザ入力に応答して、更新される。
[0344]
いくつかの実施形態では、方法は、第1の入力を検出したことに応答して、第1のアプリケーション(例えば、ミニアプリケーションオブジェクトに隣接して表示されたパネル内の)に対応する選択可能な選択肢(例えば、1つ以上のクイックアクションメニュー項目)のメニュー5154を表示する(830)。
[0345]
いくつかの実施形態では、第1のミニアプリケーションオブジェクト5162上の所定の入力が第1のアプリケーションを起動する(例えば、メールアプリケーションを起動する)(832)。
[0346]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションとは異なる、デバイスのメモリ内に存在するスタンドアローンアプリケーションとして動作する(834)。
[0347]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションの拡張又は構成要素として動作する(836)。
[0348]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、情報の一時記憶用の専用メモリ部分を有する(838)。
[0349]
いくつかの実施形態では、メモリ部分は、第1のアプリケーションによってアクセス可能である(840)。
[0350]
図8A〜図8Cにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載される動作を再順序付けるための様々な方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、700、及び900)に関して本明細書で記載されている他のプロセスの詳細は、図8A〜図8Cに関して上述した方法800に類似の方法で適用可能であることに留意されたい。例えば、方法800を参照して上述した接触、ジェスチャ、ユーザインターフェースオブジェクト、及び強度閾値は、任意選択で、本明細書に記述した他の方法(例えば、方法600、700、及び900)を参照して本明細書に記述した接触、ジェスチャ、ユーザインターフェースオブジェクト、及び強度閾値の1つ以上の特性を有する。簡潔にするために、それらの詳細はここでは繰り返さない。
[0351]
図9A〜図9Eは、いくつかの実施形態に係る、マルチページ制御パネルを用いて制御をナビゲートする方法900のフロー図を示す。方法900は、ディスプレイ、タッチ感知面、及びタッチ感知面との接触の強度を検出するための1つ以上のセンサを備える電子デバイス(例えば、デバイス300、図3、又はポータブル多機能デバイス100、図1A)において実行される。いくつかの実施形態では、ディスプレイはタッチ画面ディスプレイであり、タッチ感知面がディスプレイ上にあるか又はこれに組み込まれている。いくつかの実施形態では、ディスプレイはタッチ感知面から分離している。方法900の一部の動作が任意選択で組み合わされ、及び/又は一部の動作の順序が任意選択で変更される。
[0352]
以下に記載のように、方法900は、マルチページ制御パネルを使用して制御をナビゲートする直感的な方法を提供する。その方法は、マルチページ制御パネルを使用して制御をナビゲートするときのユーザの認知負荷を軽減し、それによって、より効率的なヒューマンマシンインターフェースを生成する。バッテリ動作電子デバイスでは、ユーザがより高速かつ効率的にマルチページ制御パネルを使用して制御をナビゲートすることで、電力を節約し、バッテリ充電間の時間を延ばす。
[0353]
初期ユーザインターフェース(例えば、アプリケーションユーザインターフェース5318、複数のアプリケーションアイコンを含むスプリングボードユーザインターフェース400、又は電子デバイスが表示オフ状態からウェイクしたときに表示されるウェイク画面ユーザインターフェース512)を、ディスプレイ上に表示している間に、デバイスは、タッチ感知面上の第1のジェスチャ(例えば、図5AUに示すように、矢印5320によって示される経路に沿った接触5322による上向きスワイプなどの、第1のスワイプジェスチャ)を検出する(902)。
[0354]
第1のジェスチャを検出したことに応答して、図5AVに示すように、デバイスは、ディスプレイ上に、マルチページ制御パネル5208の第1のページを表示する(904)。いくつかの実施形態では、マルチページ制御パネルの第1のページは、初期ユーザインターフェースの一部にオーバーレイされて表示される(例えば、カレンダアプリケーションユーザインターフェース5318上にオーバーレイされる)。いくつかの実施形態では、マルチページ制御パネル5208の第1のページは、第1のジェスチャにおける接触の上向きの移動に従って、ディスプレイの下端部から徐々に上昇する。マルチページ制御パネルの第1のページは、複数のデバイス制御アフォーダンス(例えば、図ALに関して記載した制御アフォーダンス5210〜5228)を含む。いくつかの実施形態では、制御アフォーダンスは、デバイスの1つ以上の特徴の制御、及び/又はデバイスによって実行されるアプリケーションのアプリケーションインターフェースなどのアプリケーションインターフェースの表示を開始するための制御、に対応する。
[0355]
マルチページ制御パネルの第1のページを表示している間に、デバイスは、タッチ感知面上の第2のジェスチャを検出する(906)。例えば、第2のジェスチャは、(例えば、矢印5327によって示される経路に沿った接触5325による)第1のスワイプジェスチャの方向に直交する第1の方向における水平スワイプなどの、第2のスワイプジェスチャである。いくつかの実施形態では、第2のジェスチャは、特定の制御アフォーダンスに結合されておらず、例えば、第2のジェスチャは、(マルチページ制御パネルユーザインターフェースの内部の及び/又はそれに隣接した)第2のジェスチャが受信される任意の位置で、同じ効果を有する。
[0356]
第2のジェスチャを検出したことに応答して、デバイスは、(例えば、図5AV−2に示されるような)マルチページ制御パネル5208の第2のページであって、そのマルチページ制御パネルの第2のページは、複数のコンテンツ再生制御アフォーダンス(例えば、図5AMに関して記載した制御アフォーダンス5242〜5252などの、再生位置制御スライダ、音量制御スライダ、再生/一時停止、早送り及び/又は巻き戻し制御)を含む、マルチページ制御パネルの第2のページを表示する(908)。いくつかの実施形態では、コンテンツ再生制御アフォーダンスは、デバイス制御アフォーダンスとは異なる。マルチページ制御パネル5208の第2のページは、ディスプレイ上のマルチページ制御パネル5208の第1のページを置換する。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の第1のページがマルチページ制御パネル5208の第1のページを置換する遷移中に、第1のページをスライドさせるアニメーション(例えば、検出されたジェスチャに従う水平スライド)が表示される。
[0357]
いくつかの実施形態では、マルチページ制御パネルの第2のページを表示している間に、デバイスは、タッチ感知面上の(例えば、図Av−2に示すように、矢印5331によって示される経路に沿って移動する接触5329による、又は図AV−4に示すように、矢印5337によって示される経路に沿って移動する接触5339による)第3のジェスチャを検出する(910)。
[0358]
いくつかの実施形態では、第3のジェスチャを検出したことに応答して、第3のジェスチャは第1のジェスチャタイプである(例えば、ジェスチャは、例えば図5AV−2に示されるように、第2の制御ユーザインターフェースの上部付近から開始する下向きスワイプなどの、下向きスワイプであり、ジェスチャは、第2の制御ユーザインターフェースの外側のタップであり、及び/又はジェスチャは、制御ユーザインターフェース解除アフォーダンス5234に対応する位置のタップである)という判定に従って、デバイスは、マルチページ制御パネル5208の第2のページをディスプレイ上に表示することを停止する(図AV−3に示されているように、初期ユーザインターフェースのオーバーレイ部分を明らかにする)(912)。例えば、マルチページ制御パネル5208は、マルチページ制御パネル5208の垂直方向の長さが、第3のジェスチャ内の接触5329の下向きの移動に従って減少されるにつれて、徐々に下降するように見える。
[0359]
いくつかの実施形態では、第3のジェスチャが第1のジェスチャタイプとは異なる第2のジェスチャタイプである(例えば、第3のジェスチャは、図AV−4に示すように、矢印5337で示す経路に沿って移動する接触5339による入力などの、第1の方向における水平スワイプである)という判定に従って、デバイスは、マルチページ制御パネルの第3のページであって、マルチページ制御パネルの第3のページは(例えば、図AV−5に示すように)複数の遠隔デバイス制御アフォーダンスを含む、マルチページ制御パネルの第3のページを表示する(914)。いくつかの実施形態では、マルチページ制御パネルの第3のページは、例えば、図ANに関して説明したように、1つ以上のホームオートメーションデバイスを制御するための仮想遠隔制御アフォーダンス(例えば、5272〜5286)を含む。いくつかの実施形態では、遠隔デバイス制御アフォーダンスは、第2のページのコンテンツ再生制御アフォーダンス及びマルチページ制御パネルの第1のページのデバイス制御アフォーダンスとは異なる。
[0360]
いくつかの実施形態では、複数のデバイス制御アフォーダンス、複数のコンテンツ再生制御アフォーダンス、及び/又は複数の遠隔デバイス制御アフォーダンスは、所定のレイアウトに従って配置される。いくつかの実施形態では、第3のジェスチャは、特定の制御アフォーダンスに結合されず、例えば、(マルチページ制御パネルユーザインターフェース内及び/又はそれに隣接する)第3のジェスチャが検出される任意の位置で、第3のジェスチャは同じ効果を有する。
[0361]
いくつかの実施形態では、マルチページ制御パネル5208の第3のページに含まれる複数の遠隔デバイス制御アフォーダンスは、(例えば、図5AP〜5AQに関して記載したように)ユーザによって選択可能な、複数の定義エリア(例えば、家の部屋及び/又はキャンパスの建物)の、それぞれの定義エリア(例えば、部屋及び/又は建物、例えば図5AZに示すような「居間(Living Room)」などの、「シーン」)内の異なるデバイスに対応する(916)。
[0362]
いくつかの実施形態では、マルチページ制御パネル5208の第3のページを表示することは、マルチページ制御の第3のページが最後に表示されたときに、マルチページ制御パネルの第3のページに含まれていた1つ以上の遠隔デバイス制御を再表示することを含む(918)。
[0363]
いくつかの実施形態では、マルチページ制御パネルの第3のページを表示することは、マルチページ制御パネルの第3のページに、(例えば、デバイス100によって受信されたGPS及び/又はWi−Fi信号を使用して判定された)デバイスが現在配置されている定義エリアに対応する1つ以上の遠隔デバイス制御を表示することを含む(920)。
[0364]
いくつかの実施形態では、マルチページ制御パネルの第3のページは、アクティブ化されると、ユーザによって選択可能な複数の定義された複数の定義エリア識別子(例えば、図5AP〜5AQに関して記載したような、例えば、「シーン」のリスト)の表示を引き起こすように構成された定義エリアリストアフォーダンス(例えば、複数の定義エリア識別子を表示/停止するアフォーダンス5292)を含む(922)。
[0365]
いくつかの実施形態では、マルチページ制御パネル5208の第1のページは、(例えば、図5AVに示すように)初期ユーザインターフェース5318の一部をオーバーレイする(924)。例えば、マルチページ制御パネル5208の第1のページ及び初期ユーザインターフェース5318が同時に表示され、初期ユーザインターフェース5318の一部はマルチページ制御パネル5208の第1のページによって視覚的に隠される。いくつかの実施形態では、マルチページ制御パネルの第1のページは半透明であり5208、マルチページ制御パネル5208の第1ページの後ろに存在する初期ユーザインターフェース5318の一部は、マルチページ制御パネル5208の第1のページを通して部分的に見える。いくつかの実施形態では、マルチページ制御パネル5208の第2のページは、初期ユーザインターフェース5318の一部もオーバーレイする。いくつかの実施形態では、マルチページ制御パネルユーザインターフェース5208の1つ以上のページは、ディスプレイのサイズ及び初期ユーザインターフェース5318のサイズよりも小さい固定サイズを有する。
[0366]
いくつかの実施形態では、初期ユーザインターフェースは、アプリケーションユーザインターフェース(例えば、カレンダアプリケーションユーザインタ−フェース5318)である(926)。マルチページ制御パネル5208及びアプリケーションユーザインターフェース5318は、例えば、図5AWに示すように、同時に表示される。いくつかの実施形態では、マルチページ制御パネルユーザインターフェースは、アプリケーションを終了することなくアクセス可能である。
[0367]
いくつかの実施形態では、マルチページ制御パネルの第2のページを表示することを停止した後、デバイスは、タッチ感知面上の第4のジェスチャ(例えば、図5AXに示すように、矢印5335によって示された経路に沿って移動する接触5333による入力などの、制御ユーザインターフェースを再表示するための上向きスワイプ)を検出する(928)。
[0368]
いくつかの実施形態では、第4のジェスチャを検出したことに応答して、デバイスは、マルチページ制御パネル5208の第2のページを(例えば、図5AYに示すように)再表示する(930)。いくつかの実施形態では、入力が受信されてマルチページ制御パネルユーザインターフェースを解除し、続いて、マルチページ制御パネルユーザインターフェースを再表示するための入力が受信されるときに、マルチページ制御パネルユーザインターフェースの最も最近表示された(マルチページ制御パネルユーザインターフェースを解除するための入力の前に表示された)ページが、マルチページ制御パネルユーザインターフェースを再表示するための続く入力に応答して表示される。例えば、マルチページ制御パネルの第3のページが、マルチページ制御パネルを解除するための入力を受信する直前に表示された場合、マルチページ制御パネルユーザインターフェースを再表示するための続く入力に応答して、(例えば、図5AR〜図5ATによって示されるように)マルチページ制御パネルの第3のページが再表示される。
[0369]
いくつかの実施形態では、複数のデバイス制御アフォーダンス(例えば、図5AMに関して記載した制御アフォーダンス5242〜5252)は、少なくとも1つのトグル制御を含む(932)。トグル制御は、例えば、電子デバイスの構成要素の状態を設定する制御(例えば、デバイスのフラッシュライトをオンオフするフラッシュライト制御、Wi−Fi制御、Bluetooth(登録商標)制御)、及び/又は電子デバイスのモードの状態を設定する(例えば、モードを有効化及び無効化する)制御(例えば、ナイトシフト制御、飛行機モード制御、着信拒否モード制御、回転ロック制御及び/又はミラーリングモード制御(例えば、「Apple(登録商標)TV Mirror:On」)などの、複数状態制御である。例えば、図5BF〜図5BGに示すように、Wi−Fi制御5212は、接触5342による入力に応答して、無効状態から有効状態にトグルされる。
[0370]
いくつかの実施形態では、図5BAに示すマルチページ制御パネル5208の第2のページは、現在再生中のメディアのルーティング先(例えば、「現在Airpods(登録商標)で再生中」などの、メディアがルーティングされるか又は伝送されるデバイス)の表示(例えば、コンテンツルーティング先情報領域5260)を含む(934)。
[0371]
いくつかの実施形態では、マルチページ制御パネルの第2のページを(例えば、図5BDに示すように)表示している間に、デバイスは、現在再生中のメディアのルーティング先であって、現在再生中のメディアのルーティング先は、第1のゾーンに対応する第1のデバイス(Bluetooth(登録商標)Speaker)を含む、現在再生中のメディアのルーティング先の表示5260に対応するタッチ感知面上の位置における(例えば、スワイプジェスチャによる、例えば、矢印5345によって示される経路に沿って移動する接触5343による)入力を検出する(936)。いくつかの実施形態では、第1のゾーンに対応するルーティング先は、例えば、電子デバイスに接続されたヘッドホン、電子デバイスのスピーカ、及び/又は1つ以上の遠隔デバイス(例えば、遠隔スピーカ及び/又は第1の部屋の遠隔ディスプレイ)である。現在再生中のメディアのルーティング先の表示に対応するタッチ感知面上の位置における入力を検出したことに応答して、デバイスは、メディア出力を第2のゾーンに対応する第2のデバイス(図5BEによって示されるように「Airpods(登録商標)」)にルーティングする(938)。いくつかの実施形態では、第2のゾーンは、例えば、第2の部屋の遠隔スピーカ及び/又は遠隔ディスプレイを含む。いくつかの実施形態では、表示5260は、(図5BEに示すように)ルーティング先の変更を反映するように変化する。
[0372]
いくつかの実施形態では、マルチページ制御パネル5208の第2のページは、メディアルーティング先リストアフォーダンス(例えば、ルーティング先メニューの表示を表示/停止するアフォーダンス5262などの、現在再生中のメディアの現在の宛先の表示に隣接して配置されたシェブロン)を含む(940)。
[0373]
いくつかの実施形態では、デバイスは、メディアルーティング先リストアフォーダンス5262に対応するタッチ感知面上の位置における(例えば、図5BAに示すように、接触5324による)入力を検出する(942)。
[0374]
いくつかの実施形態では、メディアルーティング先リストアフォーダンスに対応する位置における入力を検出したことに応答して、デバイスは、図5BBに示すように、メディアルーティング先選択肢のリスト5236を表示する(944)(例えば、第2のページ内のコンテンツの少なくとも一部の表示位置を、メディアルーティング先選択肢のリストと置換する、及び/又はシフトする)。
[0375]
いくつかの実施形態では、メディアルーティング先選択肢のリスト5236を、電子デバイスの識別子及び少なくとも1つの追加デバイスでポピュレートすること、メディアルーティング先選択肢のリストを少なくとも1つの追加デバイスでポピュレートすることは、電子デバイスはメディア出力を1つ以上の遠隔デバイスに現在ルーティングしているという判定に従って、メディアルーティング先選択肢のリストを、電子デバイスがメディア出力を現在ルーティングしている1つ以上の遠隔デバイスでポピュレートすることと、電子デバイスが1つ以上のペアリング対応デバイスと以前にペアリングされているという判定に従って、メディアルーティング先選択肢のリストを1つ以上のペアリング対応デバイスでポピュレートすることと、を含む(946)。いくつかの実施形態では、電子デバイスが最近ペアリングされたペアリング対応デバイスの数が閾値数を超える場合、リストは最新のペアリング対応デバイスの閾値数でポピュレートされる。いくつかの実施形態では、現在検出されていないペアリング対応デバイスは、1つ以上のペアリング対応デバイスに含まれない。いくつかの実施形態では、電子デバイス(例えば、図5BBに示すような、iPhone(登録商標)5328)は、メディアルーティング先選択肢のリスト内の第1のメディアのルーティング先であり、電子デバイスが現在メディアをルーティングしているデバイス(存在する場合)(例えば、図5BBに示すような、Airpods(登録商標)5260)が続き、電子デバイスが以前にペアリングされたペアリング対応デバイス(存在する場合)(例えば、図5BBに示されるような、Bluetooth(登録商標)Speaker5332)が続き、電子デバイスによって検出された信号送信デバイス(存在する場合)が続く。
[0376]
いくつかの実施形態では、1つ以上の信号送信(例えば、Bluetooth(登録商標)信号送信)デバイスが電子デバイスに近接して検出されたという判定に従って、デバイスは、メディアルーティング先選択肢のリストを1つ以上の信号送信デバイスでポピュレートする(948)。
[0377]
いくつかの実施形態では、電子デバイスは、タッチ感知面112との接触の強度を検出するための1つ以上のセンサを含む(950)。デバイスは、図5BF〜図5BIに示されるように、複数のデバイス制御アフォーダンスの第1の制御アフォーダンス5212に対応するタッチ感知面112上の位置における第1の接触5342を検出することを含む、第1の入力を検出する(952)。第1の入力を検出したことに応答して、第1の入力が第2の基準(例えば、強度レベルメータ5344によって示されるように、接触の特性強度が深い押圧強度閾値ITを上回って増加する場合に満たされる基準を含む強化された制御基準)を満たすという判定に従って、第2の基準(例えば、強化された制御基準)は、第2の基準が満たされるために、第1のコンタクロの特性強度が第1の強度閾値を満たすことを要求し、デバイスは、第1の制御アフォーダンス5212に対応する制御のための1つ以上の変更選択肢(例えば、図5BIに示されるような5354、5356、5358、5360、5362)を表示する(954)。例えば、変更選択肢は、(例えば、選択されたネットワークでWi−Fiを有効化する)モード変更選択肢、及び/又は(例えば、次の時間に関する)継続時間変更選択肢である。いくつかの実施形態では、変更選択肢はメニュー5350に表示される。第1の入力が第3の基準(例えば、制御トグル基準)を満たし(例えば、第1の入力がタップ入力である)、その第3の基準(例えば、制御トグル基準)は、第1の接触の特性強度が第1の強度閾値を満たすことを要求しないという判定に従って、デバイスは、第1の制御アフォーダンスに対応する制御の機能をトグルする(例えば、図5BF〜図5BGに示すようにWi−Fiを有効化/無効化する)。
[0378]
いくつかの実施形態では、第1の制御アフォーダンスに対応する制御用の1つ以上の変更選択肢を表示している間に、デバイスは、(図5BIに示すように、接触5352による)1つ以上の変更選択肢の第1の変更選択肢(例えば、変更選択肢5356)をアクティブ化する第2の入力を検出する(956)。いくつかの実施形態では、第2の入力は、接触による第1の入力の継続である。いくつかの実施形態では、第2の入力は、変更選択肢の別個のタップ入力である。第2の入力を検出したことに応答して、デバイスは、(例えば、図5BJに示すように)アクティブ化された第1の変更選択肢に従って、第1の制御アフォーダンスに対応する制御を変更する(958)。
[0379]
いくつかの実施形態では、マルチページ制御パネルのそれぞれのページは、マルチページ制御パネルが有する総ページ数の表示5236(例えば、各ページに対応するドット)を含み、マルチページ制御パネルの表示ページの現在表示されているページに対応するインジケータは、(例えば、図5AL、図5AM、及び図5ANの表示5236に示されるように)それぞれのページで強調表示される(960)。例えば、表示5236は、複数のページの中の現在のページの位置を示す。
[0380]
図9A〜9Eにおける動作について記載された特定の順序は単なる例示であり、記載された順序は、動作を実行することができる唯一の順序であることを示すことを意図するものではないことを理解されたい。当業者であれば、本明細書に記載される動作を再順序付けるための様々な方法を認識するであろう。更に、本明細書に記載された他の方法(例えば、方法600、700、及び800)に関して本明細書に記載されている他のプロセスの詳細は、図9A〜図9Eに関して上述した方法900に類似した方法でも適用可能であることに留意されたい。例えば、方法900を参照して上述した接触、ジェスチャ、ユーザインターフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションは、任意選択で、本明細書に記述した他の方法(例えば、方法600、700、及び800)を参照して本明細書に記述した、接触、ジェスチャ、ユーザインターフェースオブジェクト、強度閾値、フォーカスセレクタ、及びアニメーションの1つ以上の特性を有する。簡潔にするために、それらの詳細はここでは繰り返さない。
[0381]
いくつかの実施形態によれば、図10は、説明される様々な実施形態の原理に従って構成された、電子デバイス1000の機能ブロック図を示す。このデバイスの機能ブロックは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択で実施され、様々な記載される実施形態の原理を実行する。図10に記載される機能ブロックは、任意選択で、組み合わされ、又はサブブロックに分離されて、様々な記載される実施形態の原理を実施することが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択でサポートする。
[0382]
図10に示すように、電子デバイス1000は、ディスプレイユニット1002、タッチ感知面ユニット1004、並びにディスプレイユニット1002及びタッチ感知面ユニット1004と結合された処理ユニット1008を含む。いくつかの実施形態では、電子デバイスは、1つ以上のセンサユニット1006を含み、処理ユニット1008は、ディスプレイユニット1002、タッチ感知面ユニット1004、及び1つ以上のセンサユニット1006に結合される。いくつかの実施形態では、処理ユニット1008は、検出ユニット1010、アクティブ化ユニット1012、表示有効化ユニット1014、置換ユニット1016、及び判定ユニット1018を含む。
[0383]
デバイスが表示オフ状態にある間に、処理ユニット1008は、(例えば、検出ユニット1010を用いて)第1の入力を検出するように、構成されている。第1の入力を検出したことに応答して、処理ユニット1008は、デバイスのディスプレイユニット1002を(例えば、アクティブ化ユニット1012を用いて)アクティブ化し、ディスプレイユニット1002上に、デバイスの表示オン状態に対応する第1のユーザインターフェースの表示を(例えば、表示有効化ユニット1014を用いて)有効化する、ように、構成されている。処理ユニット1008は、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、タッチ感知面ユニット1004上のスワイプジェスチャを(例えば、検出ユニット1010を用いて)検出するように構成されている。タッチ感知面ユニット1004上のスワイプジェスチャを検出したことに応答して、処理ユニット1008は、デバイスが表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツを表示する第2のユーザインターフェースの表示に(例えば、置換ユニット1016を用いて)置換し、デバイスが表示オン状態のロック解除モードにあり、スワイプジェスチャが第1の方向にあるという判断に従って、処理ユニット1008は、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツ及びデバイスが表示オン状態のロックモードにあるときに表示されない第1の追加コンテンツを表示する第2のユーザインターフェースの表示に(例えば、置換ユニット1016を用いて)置換するように構成されている。
[0384]
いくつかの実施形態では、第1のコンテンツは1つ以上の通知を含み、第1の追加コンテンツは、制限された通知情報を含む。
[0385]
いくつかの実施形態では、第1のコンテンツは、1つ以上のミニアプリケーションオブジェクトを含み、第1の追加コンテンツは、制限されたミニアプリケーションオブジェクト情報を含む。
[0386]
いくつかの実施形態では、処理ユニット1008は、タッチ感知面ユニット1004上のスワイプジェスチャを検出したことに応答して、デバイスが表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向とは異なる第2の方向にあるという判定に従って、第1のユーザインターフェースの表示を、第3のユーザインターフェースであって、第3のユーザインターフェースは第2のコンテンツを表示する第3のユーザインターフェースの表示と(例えば、置換ユニット1016を用いて)置換し、デバイスが表示オン状態のロック解除モードにあり、スワイプジェスチャが第2の方向にあるという判定に従って、第1のユーザインターフェースの表示を、第3のユーザインターフェースであって、第3のユーザインターフェースは、第2のコンテンツ及びデバイスが表示オン状態のロックモードにあるときには表示されない第2の追加コンテンツを表示する第3のユーザインターフェースの表示と(例えば、置換ユニット1016を用いて)置換するように更に構成されている。
[0387]
いくつかの実施形態では、第2のコンテンツは、1つ以上のミニアプリケーションオブジェクトを含み、第2の追加コンテンツは、制限されたミニアプリケーションオブジェクト情報を含む。
[0388]
いくつかの実施形態では、第2のコンテンツは、1つ以上の通知を含み、第2の追加コンテンツは制限された通知情報を含む。
[0389]
いくつかの実施形態では、第2のユーザインターフェースは第1の検索入力領域を含み、第3のユーザインターフェースは第2の検索入力領域を含む。
[0390]
いくつかの実施形態では、処理ユニット1008は、第1の検索入力領域及び第2の検索入力領域のそれぞれの検索入力領域で入力を(例えば、検出ユニット1010を用いて)検出するように更に構成されている。それぞれの検索領域で入力を検出したことに応答して、処理ユニット1008は、デバイスが表示オン状態のロックモードであるという判定に従って、検索結果の第1のセット表示を(例えば、表示有効化ユニット1014を用いて)有効化し、デバイスが表示オン状態のロック解除モードにあるという判定に従って、検索結果の第1のセットとは異なる検索結果の第2のセットの表示を(例えば、表示有効化ユニット1014を用いて)有効化するように構成されている。
[0391]
いくつかの実施形態では、デバイスが、表示オン状態のロック解除モードにあるか、又はロックモードにあるかの判定は、第1の入力を検出したことに応答して行われる。
[0392]
いくつかの実施形態では、デバイスが表示オン状態のロックモードにあるか、又は表示オン状態のロック解除モードにあるかの判定は、タッチ感知面ユニット1004上のスワイプジェスチャを検出したことに応答して行われる。
[0393]
いくつかの実施形態では、電子デバイスは、1つ以上のセンサユニット1006を含み、第1の入力を検出することは、1つ以上のセンサユニット1006を用いて、デバイスのコンテキストの変化を(例えば、検出ユニット1010を用いて)検出し、デバイスのコンテキストの変化を検出したことに応答して、デバイスのコンテキストの変化がディスプレイアクティブ化基準を満たすかどうかを判定することと、を含む。
[0394]
いくつかの実施形態では、第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスのアクティブ化を(例えば、検出ユニット1010を用いて)検出することを含む。
[0395]
いくつかの実施形態では、第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスとの接触であって、ディスプレイアクティブ化アフォーダンスをアクティブ化し、ディスプレイアクティブ化アフォーダンスを作動させない、ディスプレイアクティブ化アフォーダンスとの接触を(例えば、検出ユニット1010を用いて)検出することを含む。
[0396]
いくつかの実施形態では、第1の入力を検出することは、ディスプレイのアクティブ化アフォーダンスをアクティブ化してデバイスのディスプレイをアクティブ化し、ディスプレイアクティブ化アフォーダンスをアクティブ化せずに、ディスプレイアクティブ化アフォーダンスと関連付けられた少なくとも1つの追加機能を実行する、ディスプレイアクティブ化アフォーダンスとの接触を検出することを含む。
[0397]
いくつかの実施形態では、処理ユニット1008は、第1のユーザインターフェースが表示されている間に第2の入力を(例えば、検出ユニット1010を用いて)検出するように構成されている。第2の入力を検出したことに応答して、処理ユニット1008は、第1のユーザインターフェースの表示を、複数のアプリケーションの異なるアプリケーションに対応する複数のアプリケーションアイコンを含むユーザインターフェースの表示と(例えば、置換ユニット1016を用いて)置換するように、構成されている。
[0398]
いくつかの実施形態では、第2の入力を検出したことに応答して、処理ユニット1008は、デバイスが、表示オン状態のロックモードにあるか、又は表示オン状態のロック解除モードにあるかを(例えば、判定ユニット1018を用いて)判定し、デバイスが、表示オン状態のロックモードにあるという判定に従って、認証ユーザインターフェースの表示を(例えば、表示有効化ユニット1014を用いて)有効化するように構成されている。
[0399]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの機能のうちの、すべてよりも少ない、サブセットを実行するように、構成されている。
[0400]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子を表示する。
[0401]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトからの対応するアプリケーションからのコンテンツの一部を表示する。
[0402]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクト上の所定の入力が、それぞれのミニアプリケーションオブジェクトに対応するアプリケーションを起動する。
[0403]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイスのメモリに存在する関連付けられたアプリケーションとは異なる、デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する。
[0404]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する。
[0405]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する。
[0406]
いくつかの実施形態では、メモリ部分は、それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である。
[0407]
上述の情報処理方法における動作は、任意選択で、(例えば、図1A及び図3に関して上述したような)汎用プロセッサ又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって実施される。
[0408]
図6A〜図6Cを参照して上述した動作は、図1A〜図1B、又は図10に示される構成要素によって、任意選択で、実施される。例えば、表示動作602及び検出動作604は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186と比較し、タッチ感知面上の第1の位置における第1の接触(又は、デバイスの回転)が、ユーザインターフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、所定のイベント又はサブイベントに対応するかどうかを判定する。対応するの所定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176又はオブジェクト更新部177を、任意選択で使用するか又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A〜図1Bに記される構成要素に基づいてどのように実施されるかは明らかであろう。
[0409]
いくつかの実施形態によれば、図11は、説明される様々な実施形態の原理に従って構成された、電子デバイス1100の機能ブロック図を示す。このデバイスの機能ブロックは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択で実施され、様々な記載される実施形態の原理を実行する。図11に記載される機能ブロックは、任意選択で、組み合わされ、又はサブブロックに分離されて、様々な記載される実施形態の原理を実施することが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択でサポートする。
[0410]
図11に示すように、電子デバイス1100は、ディスプレイユニット1102、タッチ感知面ユニット1104、並びにディスプレイユニット1102及びタッチ感知面ユニット1104と結合された処理ユニット1108を含む。いくつかの実施形態では、処理ユニット1108は、検出ユニット1110、表示有効化ユニット1112、アクティブ化ユニット1114、及び置換ユニット1116を含む。
[0411]
デバイスが表示オフ状態にある間に、処理ユニット1108は、第1の入力を(例えば、検出ユニット1110を用いて)検出して、デバイスのディスプレイを例えば、アクティブ化ユニット1114を用いて)アクティブ化する(ように構成されている。第1の入力を検出したことに応答して、処理ユニット1108は、デバイスのディスプレイユニット1102を(例えば、アクティブ化ユニット1114を用いて)アクティブ化し、デバイスのディスプレイユニット1102上に、デバイスの表示オン状態に対応する第1のユーザインターフェースの表示を(例えば、表示有効化ユニット1112を用いて)有効化する、ように、構成されている。処理ユニット1108は、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、タッチ感知面ユニット1104上のスワイプジェスチャを(例えば、検出ユニット1110を用いて)検出するように構成されている。スワイプジェスチャを検出したことに応答して、処理ユニット1108は、スワイプジェスチャが第1の方向にあるという判定に従って、第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースと(例えば、置換ユニット1116を用いて)置換し、スワイプジェスチャが第1の方向とは異なる第2の方向にあるという判定に従って、第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されたミニアプリケーションオブジェクトユーザインターフェースであって、複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェース、の表示と(例えば、置換ユニット1116を用いて)置換し、スワイプジェスチャが第1の方向及び第2の方向とは異なる第3の方向にあるという判定に従って、マルチページの制御パネルユーザインターフェースの第1のページの表示を(例えば、表示有効化ユニット1112を用いて)有効化し、スワイプジェスチャが第1の方向、第2の方向及び第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成された通知ユーザインターフェースの表示を(例えば、表示有効化ユニット1112を用いて)有効化するように構成されている。
[0412]
いくつかの実施形態では、第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換することは、制御表示期間が経過するまで、カメラアプリケーションに関連付けられた1つ以上の制御アフォーダンスの表示を遅延させることを含む。
[0413]
いくつかの実施形態では、処理ユニット1108は、制御表示期間中に、第1のユーザインターフェースに戻るジェスチャを(例えば、検出ユニット1110を用いて)検出するように更に構成されている。制御表示期間中に、第1のユーザインターフェースに戻るジェスチャを検出したことに応答して、処理ユニット1108は、カメラアプリケーションユーザインターフェースの表示を、第1のユーザインターフェースの表示と(例えば、置換ユニット1116を用いて)置換するように、構成されている。
[0414]
いくつかの実施形態では、処理ユニット1108は、マルチページ制御パネルユーザインターフェースが表示されている間に、マルチページ制御パネルのユーザインターフェースの第1のページに対応するタッチ感知面ユニット1104の位置におけるジェスチャを(例えば、検出ユニット1110を用いて)検出し、マルチページ制御パネルの第1のページに対応する位置におけるジェスチャを検出したことに応答して、マルチページ制御パネルユーザインターフェースの第2のページの表示を(例えば、表示有効化ユニット1112を用いて)有効化する、ように更に構成されている。
[0415]
いくつかの実施形態では、処理ユニット1108は、マルチページ制御パネルユーザインターフェースの第2のページが表示されている間に、マルチページ制御パネルのユーザインターフェースの第2のページに対応するタッチ感知面ユニット1104の位置におけるジェスチャを(例えば、検出ユニット1110を用いて)検出し、マルチページ制御パネルユーザインターフェースの第2のページに対応する位置におけるジェスチャを検出したことに応答して、マルチページ制御パネルユーザインターフェースの第3のページの表示を(例えば、表示有効化ユニット1112を用いて)有効化する、ように、更に構成されている。
[0416]
いくつかの実施形態では、処理ユニット1108は、通知ユーザインターフェースが表示されている間に、通知ユーザインターフェースに含まれるそれぞれの通知に対応するタッチ感知面ユニット1104上の位置における解除ジェスチャを(例えば、検出ユニット1110を用いて)検出し、解除ジェスチャを検出したことに応答して、通知ユーザインターフェースにそれぞれの通知を表示することを停止する、ように、更に構成されている。
[0417]
いくつかの実施形態では、処理ユニット1108は、通知ユーザインターフェースが表示されている間に、通知ユーザインターフェースに含まれる第1の通知に対応するタッチ感知面ユニット1104上の位置における起動ジェスチャを(例えば、検出ユニット1110を用いて)検出し、起動ジェスチャを検出したことに応答して、第1の通知に対応するアプリケーションを起動する、ように、更に構成されている。
[0418]
いくつかの実施形態では、処理ユニット1108は、ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、ミニアプリケーションオブジェクトユーザインターフェースに含まれる第1のミニアプリケーションオブジェクトに対応するタッチ感知面ユニット1104上の位置における起動ジェスチャを(例えば、検出ユニット1110を用いて)検出し、起動ジェスチャを検出したことに応答して、第1のミニアプリケーションオブジェクトに対応するアプリケーションを起動する、ように、更に構成されている。
[0419]
いくつかの実施形態では、処理ユニット1108は、ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、ミニアプリケーションオブジェクトユーザインターフェースに含まれる第2のミニアプリケーションオブジェクトであって、第2のミニアプリケーションオブジェクトは、ミニアプリケーションオブジェクト情報を含む、第2のミニアプリケーションオブジェクトに対応するタッチ感知面ユニット1104上の位置における情報拡張ジェスチャを(例えば、検出ユニット1110を用いて)検出し、情報拡張ジェスチャを検出したことに応答して、第2のミニアプリケーションオブジェクトを拡張し、拡張された第2のミニアプリケーションオブジェクト内のミニアプリケーションオブジェクト情報及び追加のミニアプリケーションオブジェクト情報の表示を(例えば、表示有効化ユニット1112を用いて)有効化するように構成されている。
[0420]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの機能のうちの、すべてよりも少ない、サブセットを実行するように、構成されている。
[0421]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子を表示する。
[0422]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、それぞれのミニアプリケーションオブジェクトからの対応するアプリケーションからのコンテンツの一部を表示する。
[0423]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクト上の所定の入力が、それぞれのミニアプリケーションオブジェクトに対応するアプリケーションを起動する。
[0424]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイスのメモリに存在する関連付けられたアプリケーションとは異なる、デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する。
[0425]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する。
[0426]
いくつかの実施形態では、それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する。
[0427]
いくつかの実施形態では、メモリ部分は、それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である。
[0428]
上述の情報処理方法における動作は、任意選択で、(例えば、図1A及び図3に関して上述したような)汎用プロセッサ又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって実施される。
[0429]
図6A〜図6Cを参照して上述した動作は、図1A〜図1B、又は図11に示される構成要素によって、任意選択で、実施される。例えば、表示動作602及び検出動作604は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186と比較し、タッチ感知面上の第1の位置における第1の接触(又は、デバイスの回転)が、ユーザインターフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、所定のイベント又はサブイベントに対応するかどうかを判定する。対応するの所定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176又はオブジェクト更新部177を、任意選択で使用するか又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A〜図1Bに記される構成要素に基づいてどのように実施されるかは明らかであろう。
[0430]
いくつかの実施形態によれば、図12は、説明される様々な実施形態の原理に従って構成された、電子デバイス1200の機能ブロック図を示す。このデバイスの機能ブロックは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択で実施され、様々な記載される実施形態の原理を実行する。図12に記載される機能ブロックは、任意選択で、組み合わされ、又はサブブロックに分離されて、様々な記載される実施形態の原理を実施することが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択でサポートする。
[0431]
図12に示すように、電子デバイス1200は、デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示するように構成されたディスプレイユニット1202と、タッチ感知面ユニット1204と、ディスプレイユニット1202及びタッチ感知面ユニット1204に結合された処理ユニット1208と、を含む。いくつかの実施形態では、処理ユニット1208は、検出ユニット1210、表示有効化ユニット1212、追加ユニット1214、及び置換ユニット1216を含む。
[0432]
処理ユニット1208は、タッチ感知面ユニット1204上の複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、その第1のアプリケーションアイコンは複数のアプリケーションのうちの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応する第1の入力を(例えば、検出ユニット1210を用いて)検出するように構成されている。第1の入力を検出したことに応答して、処理ユニット1208は、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューの表示を(例えば、表示有効化ユニット1212を用いて)有効化するように構成されている。いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、複数のアプリケーションの第1のアプリケーションに対応し、オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに、第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む。処理ユニット1208は、第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するアフォーダンスに対応するタッチ感知面ユニット1204上の位置における第2の入力を(例えば、検出ユニット1210を用いて)検出するように更に構成されている。第2の入力を検出したことに応答して、処理ユニット1208は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを(例えば、追加ユニット1214を用いて)追加するように構成されている。
[0433]
いくつかの実施形態では、処理ユニット1208は、第1のユーザインターフェースを表示している間に、タッチ感知面ユニット1204上の第3の入力であって、その第3の入力は第1のユーザインターフェースから第2のユーザインターフェースへナビゲートするための第1の基準を満たす、第3の入力を(例えば、検出ユニット1210を用いて)検出するように構成されている。第3の入力を検出したことに応答して、処理ユニット1208は、第1のユーザインターフェースの表示を第2のユーザインターフェースと(例えば、置換ユニット1216を用いて)置換するように構成されており、第1のユーザインターフェースの表示を第2のユーザインターフェースと置換することは、第1のユーザインターフェースを(例えば、表示有効化ユニット1212を用いて)表示することを停止することと、第2のユーザインターフェースに、第1のミニアプリケーションオブジェクト、及び前記第1のアプリケーションとは異なる複数のアプリケーションのうちの第2のアプリケーションに対応する少なくとも第2のミニアプリケーションオブジェクトを同時に(例えば、表示有効化ユニット1212を用いて)表示することを含む、第2のユーザインターフェースの表示を(例えば、表示有効化ユニット1212を用いて)有効化することと、を含む。
[0434]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、少なくとも1つの選択可能な情報項目を含み、処理ユニット1208は、第2のユーザインターフェースが表示されている間に、少なくとも1つの選択可能な情報項目に対応するタッチ感知面ユニット1204上の位置における第4の入力を(例えば、検出ユニット1210を用いて)検出し、第4の入力を検出したことに応答して、選択可能な情報項目に関連付けられた追加の情報の表示を(例えば、表示有効化ユニット1212を用いて)有効化する、ように、構成されている。
[0435]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第2のユーザインターフェース内のミニアプリケーションオブジェクトの垂直スタック内の最上部の位置に追加される。
[0436]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションを識別する識別情報を含む。
[0437]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションによって提供される機能のサブセットを提供するように構成されている。
[0438]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションからのコンテンツのサブセットを含む。
[0439]
いくつかの実施形態では、処理ユニット1208は、第1の入力を検出したことに応答して、第1のアプリケーションに対応する選択可能な選択肢のメニューの表示を(例えば、表示有効化ユニット1212を用いて)有効化するように更に構成されている。
[0440]
いくつかの実施形態では、第1のミニアプリケーションオブジェクト上の所定の入力が第1のアプリケーションを起動する。
[0441]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションとは異なる、デバイスのメモリに存在するスタンドアローンアプリケーションとして動作する。
[0442]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、第1のアプリケーションの拡張又は構成要素として動作する。
[0443]
いくつかの実施形態では、第1のミニアプリケーションオブジェクトは、情報の一時記憶用の専用メモリ部分を有する。
[0444]
いくつかの実施形態では、メモリ部分は、第1のアプリケーションによってアクセス可能である。
[0445]
上述の情報処理方法における動作は、任意選択で、(例えば、図1A及び図3に関して上述したような)汎用プロセッサ又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって実施される。
[0446]
図6A〜図6Cを参照して上述した動作は、図1A〜図1B、又は図12に示される構成要素によって、任意選択で、実施される。例えば、表示動作602及び検出動作604は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186と比較し、タッチ感知面上の第1の位置における第1の接触(又は、デバイスの回転)が、ユーザインターフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、所定のイベント又はサブイベントに対応するかどうかを判定する。対応するの所定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176又はオブジェクト更新部177を、任意選択で使用するか又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A〜図1Bに記される構成要素に基づいてどのように実施されるかは明らかであろう。
[0447]
いくつかの実施形態によれば、図13は、様々な記載される実施形態の原理に従って構成された電子デバイス1300の機能ブロック図を示す。このデバイスの機能ブロックは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって、任意選択で実施され、様々な記載される実施形態の原理を実行する。図13に記載される機能ブロックは、任意選択で、組み合わされ、又はサブブロックに分離されて、様々な記載される実施形態の原理を実施することが当業者には理解されよう。したがって、本明細書における説明は、本明細書で説明されている機能ブロックの任意の可能な組み合わせ若しくは分離、又は更なる定義を任意選択でサポートする。
[0448]
図13に示すように、電子デバイスの1300は、ディスプレイユニット1302と、タッチ感知面ユニット1304と、1つ以上のセンサユニット1306と、ディスプレイユニット1302、タッチ感知面ユニット1304及び1つ以上のセンサユニット1306に結合された処理ユニット1308とを含む。いくつかの実施形態では、電子デバイスは、1つ以上のセンサユニット1006を含み、処理ユニット1008は、ディスプレイユニット1002、タッチ感知面ユニット1004、及び1つ以上のセンサユニット1006に結合される。いくつかの実施形態では、処理ユニット1308は、検出ユニット1310と、表示有効化ユニット1312と、ルーティングユニット1314と、ポピュレーティングユニット1316と、変更ユニット1318、トグルユニット1320と、を含む。
[0449]
処理ユニット1308は、ディスプレイユニット1302に初期ユーザインターフェースを表示している間に、タッチ感知面ユニット1304の第1のジェスチャを(例えば、検出ユニット1310を用いて)検出するように構成されている。第1のジェスチャを検出したことに応答して、処理ユニット1308は、ディスプレイユニット1302上に、マルチページ制御パネルの第1のページを(例えば、表示有効化ユニット1312を用いて)表示することを有効化するように構成されている。いくつかの実施形態では、マルチページ制御パネルの第1のページは、複数のデバイス制御アフォーダンスを含む。マルチページ制御パネルの第1のページを表示している間に、処理ユニット1308は、タッチ感知面ユニット1304上の第2のジェスチャを(例えば、検出ユニット1310を用いて)検出するように構成されている。第2のジェスチャを検出したことに応答して、処理ユニット1308は、マルチページ制御パネルの第2のページを表示することを(例えば、表示有効化ユニット1312を用いて)有効化するように構成されている。いくつかの実施形態では、マルチページ制御パネルの第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、マルチページ制御パネルの第2のページはディスプレイユニット1302上のマルチページ制御パネルの第1のページを置換する。
[0450]
いくつかの実施形態では、マルチページ制御パネルの第2のページを表示している間に、処理ユニット1308は、タッチ感知面ユニット1304上の第3のジェスチャを(例えば、検出ユニット1310を用いて)検出するように構成されており、第3のジェスチャを検出したことに応答して、第3のジェスチャが第1のジェスチャタイプであるという判定に従って、マルチページ制御パネルの第2のページをディスプレイ1302上に(例えば、表示有効化ユニット1312を用いて)表示することを停止する。
[0451]
いくつかの実施形態では、処理ユニット1308は、第3のジェスチャが第1のジェスチャタイプとは異なる第2のジェスチャタイプであるという判定に応答して、マルチページ制御パネルの第3のページを表示することを(例えば、表示有効化ユニット1312を用いて)有効化するように構成されている。いくつかの実施形態では、マルチページ制御パネルの第3のページは、複数の遠隔デバイス制御アフォーダンスを含む。
[0452]
いくつかの実施形態では、マルチページ制御パネルの第3のページに含まれる複数の遠隔デバイス制御アフォーダンスは、ユーザによって選択可能な複数の定義エリアのそれぞれの定義エリア内の異なるデバイスに対応する。
[0453]
いくつかの実施形態では、マルチページ制御パネルの第3のページを表示することは、マルチページ制御の第3のページが最後に表示されたときに、マルチページ制御パネルの第3のページに含まれていた1つ以上の遠隔デバイス制御を(例えば、表示有効化ユニット1312を用いて)再表示することを含む。
[0454]
いくつかの実施形態では、マルチページ制御パネルの第3のページを表示することは、マルチページ制御パネルの第3のページに、デバイスが現在配置されている定義エリアに対応する1つ以上の遠隔デバイス制御を(例えば、表示有効化ユニット1312を用いて)表示することを含む。
[0455]
いくつかの実施形態では、マルチページ制御パネルの第3のページは、アクティブ化されると、ユーザによって選択可能な複数の定義エリア識別子の表示を引き起こすように構成された定義エリアリストアフォーダンスを含む。
[0456]
いくつかの実施形態では、マルチページ制御パネルの第1のページは、初期ユーザインターフェースの一部をオーバーレイする。
[0457]
いくつかの実施形態では、初期ユーザインターフェースはアプリケーションユーザインターフェースであり、及びマルチページ制御パネルとアプリケーションユーザインターフェースは同時に表示される。
[0458]
いくつかの実施形態では、マルチページ制御パネルの第2のページを表示することを停止した後、処理ユニット1308は、タッチ感知面ユニット1304上の第4のジェスチャを(例えば、検出ユニット1310を用いて)検出し、第4のジェスチャを検出したことに応答して、マルチページ制御パネルの第2のページを(例えば、表示有効化ユニット1312を用いて)再表示する、ように構成されている。
[0459]
いくつかの実施形態では、複数のデバイス制御アフォーダンスは、少なくとも1つのトグル制御を含む。
[0460]
いくつかの実施形態では、マルチページ制御パネルの第2のページは、現在再生中のメディアのルーティング先の表示を含む。
[0461]
いくつかの実施形態では、マルチページ制御パネルの第2のページを表示している間に、処理ユニット1308は、現在再生中のメディアのルーティング先の表示に対応するタッチ感知面ユニット1304上の位置における入力を(例えば、検出ユニット1310を用いて)検出するように構成されている。いくつかの実施形態では、現在再生中のメディアのルーティング先は、第1のゾーンに対応する第1のデバイスを含む。現在再生中のメディアのルーティング先の表示に対応するタッチ感知面ユニット1304上の位置における入力を検出したことに応答して、処理ユニット1308は、メディア出力を、第2のゾーンに対応する第2のデバイスに(例えば、ルーティングユニット1314を用いて)ルーティングするように構成されている。
[0462]
いくつかの実施形態では、マルチページ制御パネルの第2のページは、メディアルーティング先リストアフォーダンスを含み、処理ユニット1308は、メディアルーティング先リストアフォーダンスに対応するタッチ感知面ユニット1304上の位置における入力を(例えば、検出ユニット1310を用いて)検出し、メディアルーティング先リストアフォーダンスに対応する位置における入力を検出したことに応答して、メディアルーティング先選択肢のリストの表示を(例えば、表示有効化ユニット1312を用いて)有効化するように構成されている。
[0463]
いくつかの実施形態では、処理ユニット1308は、メディアルーティング先選択肢のリストを、電子デバイスの識別子及び少なくとも1つの追加デバイスで(例えば、ポピュレーティングユニット1316を用いて)ポピュレートするように構成されており、メディアルーティング先選択肢のリストを、少なくとも1つの追加デバイスでポピュレートすることは、電子デバイスはメディア出力を1つ以上の遠隔バイスに現在ルーティングしているという判定に従って、メディアルーティング先選択肢のリストを、電子デバイスがメディア出力を現在ルーティングしている1つ以上の遠隔デバイスで(例えば、ポピュレーティングユニット1316を用いて)ポピュレートすることと、電子デバイスは1つ以上のペアリング対応デバイスと以前にペアリングされているという判定に従って、メディアルーティング先選択肢のリストを、1つ以上のペアリング対応デバイスで(例えば、ポピュレーティングユニット1316を用いて)ポピュレートすることと、を含む。
[0464]
いくつかの実施形態では、処理ユニット1308は、電子デバイスに近接して1つ以上の信号送信デバイスが検出されたという判定に従って、(例えば、ポピュレーティングユニット1316を用いて)メディアルーティング先選択肢のリストを、1つ以上の信号送信デバイスでポピュレートするように更に構成されている。
[0465]
いくつかの実施形態では、電子デバイスは、タッチ感知表面ユニット1304との接触強度を(例えば、検出ユニット1310を用いて)検出するための1つ以上のセンサユニット1306を含み、処理ユニット1308は、複数のデバイス制御アフォーダンスの第1の制御アフォーダンスに対応するタッチ感知面ユニット1304上の位置における第1の接触を検出することを含めて、(例えば、検出ユニット1310を用いて)第1の入力を検出し、第1の入力を検出したことに応答して、第1の入力は、第2の基準であって、第2の基準は、第1の接触の特性強度が、第2の基準が満たされるために第1の強度閾値を満たすことを要求する、第2の基準を満たすという判定に従って、第1の制御アフォーダンスに対応する制御のための1つ以上の変更選択肢の表示を(例えば、表示有効化ユニット1312を用いて)有効化し、第1の入力は、第3の基準であって、第3の基準は、第1の接触の特性強度が第1の強度閾値を満たすことを要求しない、第3の基準を満たすという判定に従って、第1の制御アフォーダンスに対応する制御の機能を(例えば、トグルユニット1320を用いて)トグルするように構成されている。
[0466]
いくつかの実施形態では、第1の制御アフォーダンスに対応する制御のための1つ以上の変更選択肢を表示している間に、処理ユニット1308は、1つ以上の変更選択肢の第1の変更選択肢をアクティブ化する第2の入力を(例えば、検出ユニット1310を用いて)検出し、第2の入力を検出したことに応答して、アクティブ化された第1の変更選択肢に従って、第1の制御アフォーダンスに対応する制御を(例えば、変更ユニット1318を用いて)変更するように構成されている。
[0467]
いくつかの実施形態では、マルチページ制御パネルのそれぞれのページは、マルチページ制御パネルが有する総ページ数のインジケータを含み、マルチページ制御パネルの現在表示されているページに対応するインジケータは、それぞれのページにおいて強調表示される。
[0468]
上述の情報処理方法における動作は、任意選択で、(例えば、図1A及び図3に関して上述したような)汎用プロセッサ又は特定用途向けチップなどの、情報処理装置内の1つ以上の機能モジュールを実行することによって実施される。
[0469]
図6A〜図6Cを参照して上述した動作は、図1A〜図1B、又は図13に示される構成要素によって、任意選択で、実施される。例えば、表示動作602及び検出動作604は、イベントソート部170、イベント認識部180、及びイベント処理部190によって、任意選択的に実施される。イベントソート部170のイベントモニタ171は、タッチ感知ディスプレイ112上の接触を検出し、イベントディスパッチャモジュール174は、イベント情報をアプリケーション136−1に配信する。アプリケーション136−1の対応するイベント認識部180は、そのイベント情報を対応するイベント定義186と比較し、タッチ感知面上の第1の位置における第1の接触(又は、デバイスの回転)が、ユーザインターフェース上のオブジェクトの選択、又は1つの向きから別の向きへのデバイスの回転などの、所定のイベント又はサブイベントに対応するかどうかを判定する。対応するの所定のイベント又はサブイベントが検出されると、イベント認識部180は、イベント又はサブイベントの検出に関連付けられたイベント処理部190をアクティブ化する。イベント処理部190は、アプリケーション内部状態192を更新するために、データ更新部176又はオブジェクト更新部177を、任意選択で使用するか又は呼び出す。いくつかの実施形態では、イベント処理部190は、アプリケーションにより表示されるものを更新するために、対応するGUI更新部178にアクセスする。同様に、当業者にとって、他の処理が図1A〜図1Bに記される構成要素に基づいてどのように実施されるかは明らかであろう。
[0470]
上述の記載は、説明の目的上、特定の実施形態を参照して記載されている。しかしながら、上記の例示的な説明は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を鑑みて、多くの変更及び変形が可能である。本発明の原理及びその実際的な応用を最良の形で説明し、それによって他の当業者が、想到される特定の用途に適した様々な変更で本発明及び様々な記載された実施形態を最良の形で使用することを有効化するために、これらの実施形態を選択し記載した。
[書類名]特許請求の範囲
[請求項1]
ディスプレイ及びタッチ感知面を有する電子デバイスにおいて、
前記デバイスが表示オフ状態にある間に、第1の入力を検出することと、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化し、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示することと、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出することと、
前記タッチ感知面上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあり、前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第1のコンテンツを表示する第2のユーザインターフェースの表示と置換し、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第2のユーザインターフェースであって、前記第2のユーザインターフェースは前記第1のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第1の追加コンテンツを表示する、前記第2のユーザインターフェースの表示と置換することと、
を含む、方法。
[請求項2]
前記第1のコンテンツは1つ以上の通知を含み、
前記第1の追加コンテンツは制限された通知情報を含む、
請求項1に記載の方法。
[請求項3]
前記第1のコンテンツは1つ以上のミニアプリケーションオブジェクトを含み、
前記第1の追加コンテンツは制限されたミニアプリケーションオブジェクト情報を含む、
請求項1又は2に記載の方法。
[請求項4]
前記タッチ感知面上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第2のコンテンツを表示する第3のユーザインターフェースの表示と置換し、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第3のユーザインターフェースであって、前記第3のユーザインターフェースは前記第2のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第2の追加コンテンツを表示する、前記第3のユーザインターフェースの表示と置換すること、
を含む、請求項1から3のいずれか一項に記載の方法。
[請求項5]
前記第2のコンテンツは1つ以上のミニアプリケーションオブジェクトを含み、
前記第2の追加コンテンツは制限されたミニアプリケーションオブジェクト情報を含む、
請求項4に記載の方法。
[請求項6]
前記第2のコンテンツは1つ以上の通知を含み、
前記第2の追加コンテンツは制限された通知情報を含む、
請求項4又は5に記載の方法。
[請求項7]
前記第2のユーザインターフェースは、第1の検索入力領域を含み、前記第3のユーザインターフェースは、第2の検索入力領域を含む、請求項4から6のいずれか一項に記載の方法。
[請求項8]
第1の検索入力領域及び第2の検索入力領域のそれぞれの検索入力領域で入力を検出することと、
前記それぞれの検索領域で前記入力を検出したことに応じて、
前記デバイスが前記表示オン状態のロックモードにあるという判定に従って、検索結果の第1のセットを表示し、
前記デバイスが前記表示オン状態のロック解除モードにあるという判定に従って、前記検索結果の第1のセットとは異なる検索結果の第2のセットを表示することと、
を含む、請求項7に記載の方法。
[請求項9]
前記デバイスが、前記表示オン状態の前記ロック解除モードにあるか、又は前記ロックモードにあるかの前記判定は、前記第1の入力を検出したことに応答して行われる、請求項1から8のいずれか一項に記載の方法。
[請求項10]
前記デバイスが、前記表示オン状態の前記ロックモードにあるか、又は前記表示オン状態の前記ロック解除モードにあるかの前記判定は、前記タッチ感知面上の前記スワイプジェスチャを検出したことに応答して行われる、請求項1から8のいずれか一項に記載の方法。
[請求項11]
前記電子デバイスは1つ以上のセンサを含み、前記第1の入力を検出することは、
前記1つ以上のセンサを用いて、前記デバイスのコンテキストの変化を検出することと、
前記デバイスの前記コンテキストの前記変化を検出したことに応答して、前記デバイスの前記コンテキストの前記変化がディスプレイアクティブ化基準を満たすかどうかを判定することと、を含む、
請求項1から10のいずれか一項に記載の方法。
[請求項12]
前記第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスのアクティブ化を検出することを含む、請求項1から11のいずれか一項に記載の方法。
[請求項13]
前記第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスとの接触であって、前記ディスプレイアクティブ化アフォーダンスをアクティブ化し、前記ディスプレイアクティブ化アフォーダンスを作動させない、ディスプレイアクティブ化アフォーダンスとの接触を検出することを含む、請求項1から12のいずれか一項に記載の方法。
[請求項14]
前記第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスとの接触であって、前記ディスプレイアクティブ化アフォーダンスをアクティブ化して前記デバイスの前記ディスプレイをアクティブ化し、前記ディスプレイアクティブ化アフォーダンスをアクティブ化せずに前記ディスプレイアクティブ化アフォーダンスに関連付けられた少なくとも1つの追加機能を実行する、ディスプレイアクティブ化アフォーダンスとの接触を検出することを含む、請求項1から13のいずれか一項に記載の方法。
[請求項15]
前記第1のユーザインターフェースが表示されている間に、第2の入力を検出することと、
前記第2の入力を検出したことに応答して、前記第1のユーザインターフェースの表示を、複数のアプリケーションの異なるアプリケーションに対応する複数のアプリケーションアイコンを含むユーザインターフェースの表示と置換することと、
を含む、請求項1から14のいずれか一項に記載の方法。
[請求項16]
前記第2の入力を検出したことに応答して、
前記デバイスが、前記表示オン状態のロックモードにあるか、又は前記表示オン状態のロック解除モードにあるかを判定することと、
前記デバイスが前記表示オン状態の前記ロックモードにあるという判定に従って、認証ユーザインターフェースを表示することと、
を含む、請求項15に記載の方法。
[請求項17]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの前記機能のうちの、すべてよりも少ない、サブセットを実行するように構成されている、請求項3から16のいずれか一項に記載の方法。
[請求項18]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子を表示する、請求項3から17のいずれか一項に記載の方法。
[請求項19]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションからのコンテンツの一部を表示する、請求項3から18のいずれか一項に記載の方法。
[請求項20]
それぞれのミニアプリケーションオブジェクト上の所定の入力が、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションを起動する、請求項3から19のいずれか一項に記載の方法。
[請求項21]
それぞれのミニアプリケーションオブジェクトは、前記デバイスの前記メモリ内に存在する関連付けられたアプリケーションとは異なる、前記デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する、請求項3から20のいずれか一項に記載の方法。
[請求項22]
それぞれのミニアプリケーションオブジェクトは、前記デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する、請求項3から20のいずれか一項に記載の方法。
[請求項23]
それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する、請求項3から22のいずれか一項に記載の方法。
[請求項24]
前記メモリ部分は、前記それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である、請求項23に記載の方法。
[請求項25]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは前記メモリに記憶され、前記1つ以上のプロセッサによって実行されるように構成され、前記1つ以上のプログラムは、
前記デバイスが表示オフ状態にある間に、第1の入力を検出する、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化し、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示する、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出する、並びに
前記タッチ感知面上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあり、前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第1のコンテンツを表示する第2のユーザインターフェースの表示と置換し、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第2のユーザインターフェースであって、前記第2のユーザインターフェースは前記第1のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第1の追加コンテンツを表示する、前記第2のユーザインターフェースの表示と置換する、命令を含む、電子デバイス。
[請求項26]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイ及びタッチ感知面を備えた電子デバイスによって実行されると、前記デバイスに、
前記デバイスが表示オフ状態にある間に、第1の入力を検出させ、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化させ、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示させ、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出させ、
前記タッチ感知面上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあり、前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第1のコンテンツを表示する第2のユーザインターフェースの表示と置換させ、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第2のユーザインターフェースであって、前記第2のユーザインターフェースは前記第1のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第1の追加コンテンツを表示する、前記第2のユーザインターフェースの表示と置換させる、コンピュータ可読記憶媒体。
[請求項27]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
前記デバイスが表示オフ状態にある間に、第1の入力を検出する手段と、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化するための手段、及び
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示するための手段と、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出するための手段と、
前記タッチ感知面上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあり、前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第1のコンテンツを表示する第2のユーザインターフェースの表示と置換するための手段、及び
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第2のユーザインターフェースであって、前記第2のユーザインターフェースは前記第1のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第1の追加コンテンツを表示する、前記第2のユーザインターフェースの表示と置換するための手段と、を備える、電子デバイス。
[請求項28]
ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置であって、
前記デバイスが表示オフ状態にある間に、第1の入力を検出するための手段と、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化するための手段、及び
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示するための手段と、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出するための手段と、
前記タッチ感知面上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあり、前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第1のコンテンツを表示する第2のユーザインターフェースの表示と置換するための手段、及び
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第2のユーザインターフェースであって、前記第2のユーザインターフェースは前記第1のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第1の追加コンテンツを表示する、前記第2のユーザインターフェースの表示と置換するための手段と、を備える、情報処理装置。
[請求項29]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、
を備え、前記1つ以上のプログラムが、前記メモリ内に記憶され、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項1から24に記載の方法のいずれかを実行する命令を含むことを特徴とする、電子デバイス。
[請求項30]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイとタッチ感知面とを有する電子デバイスによって実行されると、前記デバイスに、請求項1から24に記載の方法のいずれかを実行させる、コンピュータ可読記憶媒体。
[請求項31]
ディスプレイと、タッチ感知面と、メモリと、前記メモリ内に記憶された1つ以上のプログラムを実行するための1つ以上のプロセッサとを有する電子デバイス上のグラフィカルユーザインターフェースであって、請求項1から24に記載の方法のいずれかに従って表示されるユーザインターフェースを含む、グラフィカルユーザインターフェース。
[請求項32]
ディスプレイと、
タッチ感知面と、
請求項1から24に記載の方法のいずれかを実行する手段と、
を備える、電子デバイス。
[請求項33]
請求項1から24に記載の方法のいずれかを実行する手段
を備える、ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置。
[請求項34]
電子デバイスであって、
ユーザインターフェースを表示するように構成されたディスプレイユニットと、
接触を検出するように構成されたタッチ感知面ユニットと、
前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットであって、
前記デバイスが表示オフ状態にある間に、第1の入力を検出し、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化し、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示することを有効化し、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面ユニット上のスワイプジェスチャを検出し、
前記タッチ感知面ユニット上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあり、前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第1のコンテンツを表示する第2のユーザインターフェースの表示と置換し、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第2のユーザインターフェースであって、前記第2のユーザインターフェースは前記第1のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第1の追加コンテンツを表示する、前記第2のユーザインターフェースの表示と置換するように構成された、処理ユニットと、を備える、電子デバイス。
[請求項35]
前記第1のコンテンツは1つ以上の通知を含み、
前記第1の追加コンテンツは制限された通知情報を含む、
請求項34に記載の電子デバイス。
[請求項36]
前記第1のコンテンツは1つ以上のミニアプリケーションオブジェクトを含み、
前記第1の追加コンテンツは制限されたミニアプリケーションオブジェクト情報を含む、
請求項34又は35に記載の電子デバイス。
[請求項37]
前記処理ユニットは、
前記タッチ感知面ユニット上で前記スワイプジェスチャを検出したことに応答して、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、第2のコンテンツを表示する第3のユーザインターフェースの表示と置換し、
前記デバイスが前記表示オン状態のロック解除モードにあり、前記スワイプジェスチャが前記第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、前記第3のユーザインターフェースであって、前記第3のユーザインターフェースは前記第2のコンテンツ及び前記デバイスが前記表示オン状態の前記ロックモードにあるときに表示されない第2の追加コンテンツを表示する、前記第3のユーザインターフェースの表示と置換する、
ように更に構成されている、請求項34から36のいずれか一項に記載の電子デバイス。
[請求項38]
前記第2のコンテンツは1つ以上のミニアプリケーションオブジェクトを含み、
前記第2の追加コンテンツは制限されたミニアプリケーションオブジェクト情報を含む、
請求項37に記載の電子デバイス。
[請求項39]
前記第2のコンテンツは1つ以上の通知を含み、
前記第2の追加コンテンツは制限された通知情報を含む、
請求項37又は38に記載の電子デバイス。
[請求項40]
前記第2のユーザインターフェースは第1の検索入力領域を含み、前記第3のユーザインターフェースは第2の検索入力領域を含む、請求項37から39のいずれか一項に記載の電子デバイス。
[請求項41]
前記処理ユニットは、
前記第1の検索入力領域及び前記第2の検索入力領域のそれぞれの検索入力領域で入力を検出し、
前記それぞれの検索領域で前記入力を検出したことに応答して、
前記デバイスが前記表示オン状態のロックモードにあるという判定に従って、検索結果の第1のセットの表示を有効化し、
前記デバイスが前記表示オン状態のロック解除モードにあるという判定に従って、前記検索結果の第1のセットとは異なる検索結果の第2のセットの表示を有効化する、
ように更に構成されている、請求項40に記載の電子デバイス。
[請求項42]
前記デバイスが、前記表示オン状態の前記ロック解除モードにあるか、又は前記ロックモードにあるかの前記判定は、前記第1の入力を検出したことに応答して行われる、請求項34から41のいずれか一項に記載の電子デバイス。
[請求項43]
前記デバイスが、前記表示オン状態の前記ロックモードにあるか、又は前記表示オン状態の前記ロック解除モードにあるかの前記判定は、前記タッチ感知面ユニット上の前記スワイプジェスチャを検出したことに応答して行われる、請求項34から41のいずれか一項に記載の電子デバイス。
[請求項44]
前記電子デバイスは1つ以上のセンサユニットを含み、前記第1の入力を検出することは、
前記1つ以上のセンサユニットを用いて、前記デバイスのコンテキストの変化を検出することと、
前記デバイスの前記コンテキストの前記変化を検出したことに応答して、デバイスのコンテキストの変化がディスプレイアクティブ化基準を満たすかどうかを判定することと、を含む、
請求項34から43のいずれか一項に記載の電子デバイス。
[請求項45]
前記第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスのアクティブ化を検出することを含む、請求項34から44のいずれか一項に記載の電子デバイス。
[請求項46]
前記第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスとの接触であって、前記ディスプレイアクティブ化アフォーダンスをアクティブ化し、前記ディスプレイアクティブ化アフォーダンスを作動させない、ディスプレイアクティブ化アフォーダンスとの接触を検出することを含む、請求項34から45のいずれか一項に記載の電子デバイス。
[請求項47]
前記第1の入力を検出することは、ディスプレイアクティブ化アフォーダンスとの接触であって、前記ディスプレイアクティブ化アフォーダンスをアクティブ化して前記デバイスの前記ディスプレイをアクティブ化し、前記ディスプレイアクティブ化アフォーダンスをアクティブ化せずに前記ディスプレイアクティブ化アフォーダンスに関連付けられた少なくとも1つの追加機能を実行する、ディスプレイアクティブ化アフォーダンスとの接触を検出することを含む、請求項34から46のいずれか一項に記載の電子デバイス。
[請求項48]
前記処理ユニットは、
前記第1のユーザインターフェースが表示されている間に、第2の入力を検出し、
前記第2の入力を検出したことに応答して、前記第1のユーザインターフェースの表示を、複数のアプリケーションの異なるアプリケーションに対応する複数のアプリケーションアイコンを含むユーザインターフェースの表示と置換する、
ように更に構成されている、請求項34から47のいずれか一項に記載の電子デバイス。
[請求項49]
前記処理ユニットは、
前記第2の入力を検出したことに応答して、
前記デバイスが、前記表示オン状態のロックモードにあるか、又は前記表示オン状態のロック解除モードにあるかを判定し
前記デバイスが前記表示オン状態の前記ロックモードにあるという判定に従って、認証ユーザインターフェースの表示を有効化する、
ように更に構成されている、請求項48に記載の電子デバイス。
[請求項50]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの前記機能のうちのすべてよりも少ないサブセットを実行するように構成されている、請求項36から49のいずれか一項に記載の電子デバイス。
[請求項51]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子を表示する、請求項36から50のいずれか一項に記載の電子デバイス。
[請求項52]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションからのコンテンツの一部を表示する、請求項36から51のいずれか一項に記載の電子デバイス。
[請求項53]
それぞれのミニアプリケーションオブジェクト上の所定の入力が、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションを起動する、請求項36から52のいずれか一項に記載の電子デバイス。
[請求項54]
それぞれのミニアプリケーションオブジェクトは、前記デバイスの前記メモリ内に存在する関連付けられたアプリケーションとは異なる、前記デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する、請求項36から53のいずれか一項に記載の電子デバイス。
[請求項55]
それぞれのミニアプリケーションオブジェクトは、前記デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する、請求項36から53のいずれか一項に記載の電子デバイス。
[請求項56]
それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する、請求項36から55のいずれか一項に記載の電子デバイス。
[請求項57]
前記メモリ部分は、前記それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である、請求項56に記載の電子デバイス。
[請求項58]
ディスプレイ及びタッチ感知面を有する電子デバイスにおいて、
デバイスが表示オフ状態にある間に、デバイスのディスプレイをアクティブ化するための第1の入力を検出することと、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化し、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示することと、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出することと、
前記スワイプジェスチャを検出したことに応答して、
前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換し、
前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されているミニアプリケーションオブジェクトユーザインターフェースであって、前記複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、前記デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換し、
前記スワイプジェスチャが、前記第1の方向及び前記第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページを表示し、
前記スワイプジェスチャが前記第1の方向、前記第2の方向、及び前記第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成されている通知ユーザインターフェースを表示することと、
を含む、方法。
[請求項59]
前記第1のユーザインターフェースの表示を前記カメラアプリケーションユーザインターフェースの表示と置換することは、制御表示期間が経過するまで、前記カメラアプリケーションに関連付けられた1つ以上の制御アフォーダンスの表示を遅延させることを含む、請求項58に記載の方法。
[請求項60]
前記制御表示期間中に、前記第1のユーザインターフェースに戻るジェスチャを検出することと、
前記制御表示期間中に、前記第1のユーザインターフェースに戻る前記ジェスチャを検出したことに応答して、前記カメラアプリケーションユーザインターフェースの表示を、前記第1のユーザインターフェースの表示と置換することと、
を含む、請求項59に記載の方法。
[請求項61]
前記マルチページ制御パネルユーザインターフェースが表示されている間に、前記マルチページ制御パネルユーザインターフェースの第1のページに対応する前記タッチ感知面ユニット上の位置におけるジェスチャを検出することと、
前記マルチページ制御パネルの前記第1のページに対応する前記位置で前記ジェスチャを検出したことに応答して、前記マルチページ制御パネルユーザインターフェースの第2のページを表示することと、
を含む、請求項58から60のいずれか一項に記載の方法。
[請求項62]
前記マルチページ制御パネルユーザインターフェースの前記第2のページが表示されている間に、前記マルチページ制御パネルユーザインターフェースの前記第2のページに対応する前記タッチ感知面上の位置におけるジェスチャを検出することと、
前記マルチページ制御パネルユーザインターフェースの前記第2のページに対応する前記位置で前記ジェスチャを検出したことに応答して、前記マルチページ制御パネルユーザインターフェースの第3のページを表示することと、
を含む、請求項61に記載の方法。
[請求項63]
前記通知ユーザインターフェースが表示されている間に、前記通知ユーザインターフェースに含まれるそれぞれの通知に対応する前記タッチ感知面上の位置における解除ジェスチャを検出することと、
前記解除ジェスチャを検出したことに応答して、前記それぞれの通知を前記通知ユーザインターフェース内に表示することを停止することと、
を含む、請求項58から62のいずれか一項に記載の方法。
[請求項64]
前記通知ユーザインターフェースが表示されている間に、前記通知ユーザインターフェースに含まれる第1の通知に対応する前記タッチ感知面上の位置における起動ジェスチャを検出することと、
前記起動ジェスチャを検出したことに応答して、前記第1の通知に対応するアプリケーションを起動することと、
を含む、請求項58から63のいずれか一項に記載の方法。
[請求項65]
前記ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、前記ミニアプリケーションオブジェクトユーザインターフェースに含まれる第1のミニアプリケーションオブジェクトに対応する前記タッチ感知面上の位置における起動ジェスチャを検出することと、
前記起動ジェスチャを検出したことに応答して、前記第1のミニアプリケーションオブジェクトに対応するアプリケーションを起動することと、
を含む、請求項58から64のいずれか一項に記載の方法。
[請求項66]
前記ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、前記ミニアプリケーションオブジェクトユーザインターフェースに含まれる第2のミニアプリケーションオブジェクトであって、前記第2のミニアプリケーションオブジェクトはミニアプリケーションオブジェクト情報を含む、第2のミニアプリケーションオブジェクトに対応する前記タッチ感知面上の位置における情報拡張ジェスチャを検出することと、
前記情報拡張ジェスチャを検出したことに応答して、
前記第2のミニアプリケーションオブジェクトを拡張し、
前記ミニアプリケーションオブジェクト情報及び追加のミニアプリケーションオブジェクト情報を、前記拡張された第2のミニアプリケーションオブジェクトに表示することと、
を含む、請求項58から65のいずれか一項に記載の方法。
[請求項67]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの前記機能のうちの、すべてよりも少ない、サブセットを実行するように構成されている、請求項58から66のいずれか一項に記載の方法。
[請求項68]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子を表示する、請求項58から67のいずれか一項に記載の方法。
[請求項69]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションからのコンテンツの一部を表示する、請求項58から68のいずれか一項に記載の方法。
[請求項70]
それぞれのミニアプリケーションオブジェクト上の所定の入力が、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションを起動する、請求項58から69のいずれか一項に記載の方法。
[請求項71]
それぞれのミニアプリケーションオブジェクトは、前記デバイスの前記メモリ内に存在する関連付けられたアプリケーションとは異なる、前記デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する、請求項58から70のいずれか一項に記載の方法。
[請求項72]
それぞれのミニアプリケーションオブジェクトは、前記デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する、請求項58から70のいずれか一項に記載の方法。
[請求項73]
それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する、請求項58から72のいずれか一項に記載の方法。
[請求項74]
前記メモリ部分は、前記それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である、請求項73に記載の方法。
[請求項75]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは前記メモリに記憶され、前記1つ以上のプロセッサによって実行されるように構成され、前記1つ以上のプログラムは、
前記デバイスが表示オフ状態にある間に、前記デバイスの前記ディスプレイをアクティブ化する第1の入力を検出する命令と、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化し、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示する命令と、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出する命令と、
前記スワイプジェスチャを検出したことに応答して、
前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換し、
前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されているミニアプリケーションオブジェクトユーザインターフェースであって、前記複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、前記デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換し、
前記スワイプジェスチャが、前記第1の方向及び前記第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページを表示し、
前記スワイプジェスチャが前記第1の方向、前記第2の方向、及び前記第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成されている通知ユーザインターフェースを表示する命令と、を含む、電子デバイス。
[請求項76]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイ及びタッチ感知面を備えた電子デバイスによって実行されると、前記デバイスに、
前記デバイスが表示オフ状態にある間に、前記デバイスの前記ディスプレイをアクティブ化する第1の入力を検出させ、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化させ、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示させ、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出させ、
前記スワイプジェスチャを検出したことに応答して、
前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換させ、
前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されているミニアプリケーションオブジェクトユーザインターフェースであって、前記複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、前記デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換させ、
前記スワイプジェスチャが、前記第1の方向及び前記第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページを表示させ、
前記スワイプジェスチャが前記第1の方向、前記第2の方向、及び前記第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成されている通知ユーザインターフェースを表示させる、コンピュータ可読記憶媒体。
[請求項77]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
前記デバイスが表示オフ状態にある間に、前記デバイスの前記ディスプレイをアクティブ化する第1の入力を検出する手段と、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化する手段、及び
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示する手段と、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出する手段と、
前記スワイプジェスチャを検出したことに応答して、
前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換する手段、
前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されているミニアプリケーションオブジェクトユーザインターフェースであって、前記複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、前記デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換する手段、
前記スワイプジェスチャが、前記第1の方向及び前記第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページを表示する手段、及び
前記スワイプジェスチャが前記第1の方向、前記第2の方向、及び前記第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成されている通知ユーザインターフェースを表示する手段と、を備える、電子デバイス。
[請求項78]
ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置であって、
前記デバイスが表示オフ状態にある間に、前記デバイスの前記ディスプレイをアクティブ化する第1の入力を検出する手段と、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化する手段、及び
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示する手段と、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上のスワイプジェスチャを検出する手段と、
前記スワイプジェスチャを検出したことに応答して、
前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換する手段、
前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されているミニアプリケーションオブジェクトユーザインターフェースであって、前記複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、前記デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換する手段、
前記スワイプジェスチャが、前記第1の方向及び前記第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページを表示する手段、及び
前記スワイプジェスチャが前記第1の方向、前記第2の方向、及び前記第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成されている通知ユーザインターフェースを表示する手段と、を備える、情報処理装置。
[請求項79]
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは、前記メモリに記憶され、かつ、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、請求項58から74に記載の方法のいずれかを実行する命令を含む、電子デバイス。
[請求項80]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは、命令を含み、前記命令は、ディスプレイとタッチ感知面とを有する電子デバイスによって実行されると、前記デバイスに請求項58から74に記載の方法のいずれかを実行させる、コンピュータ可読記憶媒体。
[請求項81]
ディスプレイと、タッチ感知面と、メモリと、前記メモリ内に記憶された1つ以上のプログラムを実行するための1つ以上のプロセッサとを有する電子デバイス上のグラフィカルユーザインターフェースであって、前記グラフィカルユーザインターフェースは、請求項58から74に記載の方法のいずれかに従って表示されるユーザインターフェースを含む、グラフィカルユーザインターフェース。
[請求項82]
ディスプレイと、
タッチ感知面と、
請求項58から74に記載の方法のいずれかを実行する手段と、
を備える、電子デバイス。
[請求項83]
請求項58から74に記載の方法のいずれかを実行する手段と、
を備える、ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置。
[請求項84]
電子デバイスであって、
ユーザインターフェースを表示するように構成されたディスプレイユニットと、
接触を検出するように構成されたタッチ感知面ユニットと、
前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットであって、
前記デバイスが表示オフ状態にある間に、前記デバイスの前記ディスプレイをアクティブ化する第1の入力を検出し、
前記第1の入力を検出したことに応答して、
前記デバイスの前記ディスプレイをアクティブ化し、
前記ディスプレイ上に、前記デバイスの表示オン状態に対応する第1のユーザインターフェースを表示することを有効化し、
前記デバイスの前記表示オン状態に対応する前記第1のユーザインターフェースを表示している間に、前記タッチ感知面ユニット上のスワイプジェスチャを検出し、
前記スワイプジェスチャを検出したことに応答して、
前記スワイプジェスチャが第1の方向にあるという判定に従って、前記第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換し、
前記スワイプジェスチャが前記第1の方向とは異なる第2の方向にあるという判定に従って、前記第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されているミニアプリケーションオブジェクトユーザインターフェースであって、前記複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、前記デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換し、
前記スワイプジェスチャが、前記第1の方向及び前記第2の方向とは異なる第3の方向にあるという判定に従って、マルチページ制御パネルユーザインターフェースの第1のページの表示を有効化し、
前記スワイプジェスチャが前記第1の方向、前記第2の方向、及び前記第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成されている通知ユーザインターフェースの表示を有効化するように構成されている、処理ユニットと、を備える、電子デバイス。
[請求項85]
前記第1のユーザインターフェースの表示を前記カメラアプリケーションユーザインターフェースの表示と置換することは、制御表示期間が経過するまで、前記カメラアプリケーションに関連付けられた1つ以上の制御アフォーダンスの表示を遅延させることを含む、請求項84に記載の電子デバイス。
[請求項86]
前記処理ユニットは、
前記制御表示期間中に、前記第1のユーザインターフェースに戻るジェスチャを検出し、
前記制御表示期間中に、前記第1のユーザインターフェースに戻る前記ジェスチャを検出したことに応答して、前記カメラアプリケーションユーザインターフェースの表示を、前記第1のユーザインターフェースの表示と置換する、ように更に構成されている、請求項85に記載の電子デバイス。
[請求項87]
前記処理ユニットは、
前記マルチページ制御パネルユーザインターフェースが表示されている間に、前記マルチページ制御パネルユーザインターフェースの第1のページに対応する前記タッチ感知面ユニット上の位置におけるジェスチャを検出し、
前記マルチページ制御パネルの前記第1のページに対応する前記位置で前記ジェスチャを検出したことに応答して、前記マルチページ制御パネルユーザインターフェースの第2のページの表示を有効化する、ように更に構成されている、請求項84から86のいずれか一項に記載の電子デバイス。
[請求項88]
前記処理ユニットは、
前記マルチページ制御パネルユーザインターフェースの前記第2のページが表示されている間に、前記マルチページ制御パネルユーザインターフェースの前記第2のページに対応する前記タッチ感知面ユニット上の位置におけるジェスチャを検出し、
前記マルチページ制御パネルユーザインターフェースの前記第2のページに対応する前記位置で前記ジェスチャを検出したことに応答して、前記マルチページ制御パネルユーザインターフェースの第3のページの表示を有効化する、ように更に構成されている、請求項87に記載の電子デバイス。
[請求項89]
前記処理ユニットは、
前記通知ユーザインターフェースが表示されている間に、前記通知ユーザインターフェースに含まれるそれぞれの通知に対応する前記タッチ感知面ユニット上の位置における解除ジェスチャを検出し、
前記解除ジェスチャを検出したことに応答して、前記それぞれの通知を前記通知ユーザインターフェース内に表示することを停止する、ように更に構成されている、請求項84から88のいずれか一項に記載の電子デバイス。
[請求項90]
前記処理ユニットは、
前記通知ユーザインターフェースが表示されている間に、前記通知ユーザインターフェースに含まれる第1の通知に対応する前記タッチ感知面ユニット上の位置における起動ジェスチャを検出し、
前記起動ジェスチャを検出したことに応答して、前記第1の通知に対応するアプリケーションを起動する、ように更に構成されている、請求項84から89のいずれか一項に記載の電子デバイス。
[請求項91]
前記処理ユニットは、
前記ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、前記ミニアプリケーションオブジェクトユーザインターフェースに含まれる第1のミニアプリケーションオブジェクトに対応する前記タッチ感知面ユニット上の位置における起動ジェスチャを検出し、
前記起動ジェスチャを検出したことに応答して、前記第1のミニアプリケーションオブジェクトに対応するアプリケーションを起動する、ように更に構成されている、請求項84から90のいずれか一項に記載の電子デバイス。
[請求項92]
前記処理ユニットは、
前記ミニアプリケーションオブジェクトユーザインターフェースが表示されている間に、前記ミニアプリケーションオブジェクトユーザインターフェースに含まれる第2のミニアプリケーションオブジェクトであって、前記第2のミニアプリケーションオブジェクトはミニアプリケーションオブジェクト情報を含む、第2のミニアプリケーションオブジェクトに対応する前記タッチ感知面ユニット上の位置における情報拡張ジェスチャを検出し、
前記情報拡張ジェスチャを検出したことに応答して、
前記第2のミニアプリケーションオブジェクトを拡張し、
前記ミニアプリケーションオブジェクト情報及び追加のミニアプリケーションオブジェクト情報を、前記拡張された第2のミニアプリケーションオブジェクトに表示することを有効化する、ように更に構成されている、請求項84から91のいずれか一項に記載の電子デバイス。
[請求項93]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの前記機能のうちの、すべてよりも少ない、サブセットを実行するように構成されている、請求項84から92のいずれか一項に記載の電子デバイス。
[請求項94]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションの識別子を表示する、請求項84から93のいずれか一項に記載の電子デバイス。
[請求項95]
それぞれのミニアプリケーションオブジェクトは、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションからのコンテンツの一部を表示する、請求項84から94のいずれか一項に記載の電子デバイス。
[請求項96]
それぞれのミニアプリケーションオブジェクト上の所定の入力が、前記それぞれのミニアプリケーションオブジェクトの対応するアプリケーションを起動する、請求項84から95のいずれか一項に記載の電子デバイス。
[請求項97]
それぞれのミニアプリケーションオブジェクトは、前記デバイスの前記メモリ内に存在する関連付けられたアプリケーションとは異なる、前記デバイスのメモリに同じく存在するスタンドアローンアプリケーションとして動作する、請求項84から96のいずれか一項に記載の電子デバイス。
[請求項98]
それぞれのミニアプリケーションオブジェクトは、前記デバイス上の関連付けられたアプリケーションの拡張又は構成要素として動作する、請求項84から96のいずれか一項に記載の電子デバイス。
[請求項99]
それぞれのミニアプリケーションオブジェクトは、情報の一時記憶のための専用メモリ部分を有する、請求項84から98のいずれか一項に記載の電子デバイス。
[請求項100]
前記メモリ部分は、前記それぞれのミニアプリケーションオブジェクトの対応するフル機能のアプリケーションによってアクセス可能である、請求項99に記載の電子デバイス。
[請求項101]
ディスプレイ及びタッチ感知面を有する電子デバイスにおいて、
前記デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示することと、
前記複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、第1のアプリケーションアイコンは複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応するタッチ感知面上の位置における第1の入力を検出することと、
前記第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューであって、
前記第1のミニアプリケーションオブジェクトは、前記複数のアプリケーションの第1のアプリケーションに対応し、
前記オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューを表示することと、
前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する前記アフォーダンスに対応する前記タッチ感知面上の位置における第2の入力を検出することと、
前記第2の入力を検出したことに応答して、前記複数のミニアプリケーションオブジェクトを表示する前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加することと、
を含む、方法。
[請求項102]
前記第1のユーザインターフェースを表示している間に、前記タッチ感知面上の第3の入力であって、前記第3の入力は前記第1のユーザインターフェースから前記第2のユーザインターフェースへナビゲートする第1の基準を満たす、第3の入力を検出することと、
前記第3の入力を検出したことに応答して、前記第1のユーザインターフェースの表示を前記第2のユーザインターフェースと置換することと、を含み、前記第1のユーザインターフェースの表示を前記第2のユーザインターフェースと置換することは、
前記第1のユーザインターフェースの表示を停止すること、並びに
前記第2のユーザインターフェースに、前記第1のミニアプリケーションオブジェクト、及び前記第1のアプリケーションとは異なる前記複数のアプリケーションのうちの第2のアプリケーションに対応する少なくとも第2のミニアプリケーションオブジェクトを同時に表示することを含む、前記第2のユーザインターフェースを表示すること、を含む、請求項101に記載の方法。
[請求項103]
前記第1のミニアプリケーションオブジェクトは少なくとも1つの選択可能な情報項目を含む、請求項101又は102に記載の方法であって、
前記第2のユーザインターフェースが表示されている間に、前記少なくとも1つの選択可能な情報項目に対応する前記タッチ感知面上の位置における第4の入力を検出することと、
前記第4の入力を検出したことに応答して、前記選択可能な情報項目に関連付けられた追加の情報を表示することと、を含む、方法。
[請求項104]
前記第1のミニアプリケーションオブジェクトは、前記第2のユーザインターフェース内のミニアプリケーションオブジェクトの垂直スタック内の最上部の位置に追加される、請求項101から103のいずれか一項に記載の方法。
[請求項105]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションを識別する識別情報を含む、請求項101から104のいずれか一項に記載の方法。
[請求項106]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションによって提供される機能のサブセットを提供するように構成されている、請求項101から105のいずれか一項に記載の方法。
[請求項107]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションからのコンテンツのサブセットを含む、請求項101から106のいずれか一項に記載の方法。
[請求項108]
前記方法は、前記第1の入力を検出したことに応答して、前記第1のアプリケーションに対応する選択可能な選択肢のメニューを表示することを含む、請求項101から107のいずれか一項に記載の方法。
[請求項109]
前記第1のミニアプリケーションオブジェクト上の所定の入力が前記第1のアプリケーションを起動する、請求項101から108のいずれか一項に記載の方法。
[請求項110]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションとは異なる、前記デバイスのメモリに存在するスタンドアローンアプリケーションとして動作する、請求項101から109のいずれか一項に記載の方法。
[請求項111]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションの拡張又は構成要素として動作すること、請求項101から110のいずれか一項に記載の方法。
[請求項112]
前記第1のミニアプリケーションオブジェクトは、情報の一時記憶用の専用メモリ部分を有する、請求項101から111のいずれか一項に記載の方法。
[請求項113]
前記メモリ部分は、前記第1のアプリケーションによってアクセス可能である、請求項112に記載の方法。
[請求項114]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは前記メモリに記憶され、前記1つ以上のプロセッサによって実行されるように構成され、前記1つ以上のプログラムは、
前記デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示する命令と、
前記複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、前記第1のアプリケーションアイコンは前記複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応する前記タッチ感知面上の位置における第1の入力を検出する命令と、
前記第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューであって、
前記第1のミニアプリケーションオブジェクトは、前記複数のアプリケーションの第1のアプリケーションに対応し、
前記オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューを表示する命令と、
前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する前記アフォーダンスに対応する前記タッチ感知面上の位置における第2の入力を検出する命令と、
前記第2の入力を検出したことに応答して、前記複数のミニアプリケーションオブジェクトを表示する前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する命令と、を含む、電子デバイス。
[請求項115]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイ及びタッチ感知面を備えた電子デバイスによって実行されると、前記デバイスに、
前記デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示させ、
前記複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、前記第1のアプリケーションアイコンは前記複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応する前記タッチ感知面上の位置における第1の入力を検出させ、
前記第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューであって、
前記第1のミニアプリケーションオブジェクトは、前記複数のアプリケーションの第1のアプリケーションに対応し、
前記オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューを表示させ、
前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する前記アフォーダンスに対応する前記タッチ感知面上の位置における第2の入力を検出させ、
前記第2の入力を検出したことに応答して、前記複数のミニアプリケーションオブジェクトを表示する前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加させる、コンピュータ可読記憶媒体。
[請求項116]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
前記デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示する手段と、
前記複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、前記第1のアプリケーションアイコンは前記複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応する前記タッチ感知面上の位置における第1の入力を検出する手段と、
前記第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューであって、
前記第1のミニアプリケーションオブジェクトは、前記複数のアプリケーションの第1のアプリケーションに対応し、
前記オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューを表示する手段と、
前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する前記アフォーダンスに対応する前記タッチ感知面上の位置における第2の入力を検出する手段と、
前記第2の入力を検出したことに応答して、前記複数のミニアプリケーションオブジェクトを表示する前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する手段と、を備える、電子デバイス。
[請求項117]
ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置であって、
前記デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示する手段と、
前記複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、前記第1のアプリケーションアイコンは前記複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応する前記タッチ感知面上の位置における第1の入力を検出する手段と、
前記第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューであって、
前記第1のミニアプリケーションオブジェクトは、前記複数のアプリケーションの第1のアプリケーションに対応し、
前記オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューを表示する手段と、
前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する前記アフォーダンスに対応する前記タッチ感知面上の位置における第2の入力を検出する手段と、
前記第2の入力を検出したことに応答して、前記複数のミニアプリケーションオブジェクトを表示する前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する手段と、を備える、情報処理装置。
[請求項118]
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは、前記メモリに記憶され、かつ、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、請求項101から113に記載の方法のいずれかを実行する命令を含む、電子デバイス。
[請求項119]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイとタッチ感知面とを有する電子デバイスによって実行されると、前記デバイスに、請求項に記載の方法のいずれかを実行させる、コンピュータ可読記憶媒体。
[請求項120]
ディスプレイと、タッチ感知面と、メモリと、前記メモリ内に記憶された1つ以上のプログラムを実行するための1つ以上のプロセッサとを有する電子デバイス上のグラフィカルユーザインターフェースであって、請求項101から113に記載の方法のいずれかに従って表示されるユーザインターフェースを含む、グラフィカルユーザインターフェース。
[請求項121]
ディスプレイと、
タッチ感知面と、
請求項101から113に記載の方法のいずれかを実行する手段と、
を備える、電子デバイス。
[請求項122]
請求項101から113に記載の方法のいずれかを実行する手段
を備える、ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置。
[請求項123]
電子デバイスであって、
前記デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示するように構成されたディスプレイユニットと、
接触を検出するように構成されたタッチ感知面ユニットと、
前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットであって、
前記複数のアプリケーションアイコンの第1のアプリケーションアイコンであって、前記第1のアプリケーションアイコンは前記複数のアプリケーションの第1のアプリケーションに対応する、第1のアプリケーションアイコンに対応する前記タッチ感知面上の位置における第1の入力を検出し、
前記第1の入力を検出したことに応答して、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューであって、
前記第1のミニアプリケーションオブジェクトは、前記複数のアプリケーションの第1のアプリケーションに対応し、
前記オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は前記第1のミニアプリケーションオブジェクトのプレビューの表示を有効化し、
前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加する前記アフォーダンスに対応する前記タッチ感知面ユニット上の位置における第2の入力を検出し、
前記第2の入力を検出したことに応答して、前記複数のミニアプリケーションオブジェクトを表示する前記第2のユーザインターフェースに前記第1のミニアプリケーションオブジェクトを追加するように構成された、処理ユニットと、を備える、電子デバイス。
[請求項124]
前記処理ユニットは、
前記第1のユーザインターフェースを表示している間に、前記タッチ感知面ユニット上の第3の入力であって、前記第3の入力は前記第1のユーザインターフェースから前記第2のユーザインターフェースへナビゲートする第1の基準を満たす、第3の入力を検出し、
前記第3の入力を検出したことに応答して、前記第1のユーザインターフェースの表示を前記第2のユーザインターフェースと置換することと、を含み、前記第1のユーザインターフェースの表示を前記第2のユーザインターフェースと置換し、
前記第1のユーザインターフェースの表示を停止し、
前記第2のユーザインターフェースに、前記第1のミニアプリケーションオブジェクト、及び前記第1のアプリケーションとは異なる前記複数のアプリケーションのうちの第2のアプリケーションに対応する少なくとも第2のミニアプリケーションオブジェクトを同時に表示すること含む、前記第2のユーザインターフェースの表示を有効化する、ように更に構成されている、請求項123に記載の電子デバイス。
[請求項125]
前記第1のミニアプリケーションオブジェクトは少なくとも1つの選択可能な情報項目を含み、
前記処理ユニットは、
前記第2のユーザインターフェースが表示されている間に、前記少なくとも1つの選択可能な情報項目に対応する前記タッチ感知面ユニット上の位置における第4の入力を検出し、
前記第4の入力を検出したことに応答して、前記選択可能な情報項目に関連付けられた追加の情報の表示を有効化するように構成されている、請求項123又は124に記載の電子デバイス。
[請求項126]
前記第1のミニアプリケーションオブジェクトは、前記第2のユーザインターフェース内のミニアプリケーションオブジェクトの垂直スタック内の最上部の位置に追加される、請求項123から125のいずれか一項に記載の電子デバイス。
[請求項127]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションを識別する識別情報を含む、請求項123から126のいずれか一項に記載の電子デバイス。
[請求項128]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションによって提供される機能のサブセットを提供するように構成されている、請求項123から127のいずれか一項に記載の電子デバイス。
[請求項129]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションからのコンテンツのサブセットを含む、請求項123から128のいずれか一項に記載の電子デバイス。
[請求項130]
前記処理ユニットは、前記第1の入力を検出したことに応答して、前記第1のアプリケーションに対応する選択可能な選択肢のメニューの表示を有効化するように更に構成されている、請求項123から129のいずれか一項に記載の電子デバイス。
[請求項131]
前記第1のミニアプリケーションオブジェクト上の所定の入力が前記第1のアプリケーションを起動する、請求項123から130のいずれか一項に記載の電子デバイス。
[請求項132]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションとは異なる、前記デバイスのメモリに存在するスタンドアローンアプリケーションとして動作する、請求項123から131のいずれか一項に記載の電子デバイス。
[請求項133]
前記第1のミニアプリケーションオブジェクトは、前記第1のアプリケーションの拡張又は構成要素として動作する、請求項123から131のいずれか一項に記載の電子デバイス。
[請求項134]
前記第1のミニアプリケーションオブジェクトは、情報の一時記憶用の専用メモリ部分を有する、請求項123から133のいずれか一項に記載の電子デバイス。
[請求項135]
前記メモリ部分は、前記第1のアプリケーションによってアクセス可能である、請求項134に記載の電子デバイス。
[請求項136]
ディスプレイ及びタッチ感知面を有する電子デバイスにおいて、
前記ディスプレイ上に初期ユーザインターフェースを表示している間に、前記タッチ感知面上の第1のジェスチャを検出することと、
前記第1のジェスチャを検出したことに応答して、前記ディスプレイ上に、マルチページ制御パネルの第1のページであって、前記マルチページ制御パネルの前記第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示することと、
前記マルチページ制御パネルの前記第1のページを表示している間に、前記タッチ感知面上の第2のジェスチャを検出することと、
前記第2のジェスチャを検出したことに応答して、前記マルチページ制御パネルの第2のページであって、
前記マルチページ制御パネルの前記第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、
前記マルチページ制御パネルの前記第2のページは、前記ディスプレイ上の前記マルチページ制御パネルの前記第1のページを置換する、前記マルチページ制御パネルの第2のページを表示することと、
を含む、方法。
[請求項137]
前記マルチページ制御パネルの前記第2のページを表示している間に、前記タッチ感知面上の第3のジェスチャを検出することと、
前記第3のジェスチャを検出したことに応答して、前記第3のジェスチャが第1のジェスチャタイプであるという判定に従って、前記マルチページ制御パネルの前記第2のページを前記ディスプレイ上に表示することを停止することと、
を含む、請求項136に記載の方法。
[請求項138]
前記第3のジェスチャが前記第1のジェスチャタイプとは異なる第2のジェスチャタイプであるという判定に従って、前記マルチページ制御パネルの第3のページであって、前記マルチページ制御パネルの前記第3のページは、複数の遠隔デバイス制御アフォーダンスを含む、マルチページ制御パネルの第3のページを表示する、請求項137に記載の方法。
[請求項139]
前記マルチページ制御パネルの前記第3のページに含まれる前記複数の遠隔デバイス制御アフォーダンスは、ユーザによって選択可能な複数の定義エリアのそれぞれの定義エリア内の異なるデバイスに対応する、請求項138に記載の方法。
[請求項140]
前記マルチページ制御パネルの前記第3のページを表示することは、前記マルチページ制御の前記第3のページが最後に表示されたときに、前記マルチページ制御パネルの前記第3のページに含まれていた1つ以上の遠隔デバイス制御を再表示することを含む、請求項138又は139のいずれか一項に記載の方法。
[請求項141]
前記マルチページ制御パネルの前記第3のページを表示することは、前記マルチページ制御パネルの前記第3のページに、前記デバイスが現在配置されている定義エリアに対応する1つ以上の遠隔デバイス制御を表示することを含む、請求項138から140のいずれか一項に記載の方法。
[請求項142]
前記マルチページ制御パネルの前記第3のページは、アクティブ化されると、ユーザによって選択可能な複数の定義エリア識別子の表示を引き起こすように構成された定義エリアリストアフォーダンスを含む、請求項138から141のいずれか一項に記載の方法。
[請求項143]
前記マルチページ制御パネルの前記第1のページは、前記初期ユーザインターフェースの一部をオーバーレイする、請求項136から142のいずれか一項に記載の方法。
[請求項144]
前記初期ユーザインターフェースはアプリケーションユーザインターフェースであり、
前記マルチページ制御パネルと前記アプリケーションユーザインターフェースは同時に表示される、
請求項136から143のいずれか一項に記載の方法。
[請求項145]
前記マルチページ制御パネルの前記第2のページを表示することを停止した後で、前記タッチ感知面上の第4のジェスチャを検出することと、
前記第4のジェスチャを検出したことに応答して、前記マルチページ制御パネルの前記第2のページを再表示することと、
を含む、請求項136から144のいずれか一項に記載の方法。
[請求項146]
前記複数のデバイス制御アフォーダンスは、少なくとも1つのトグル制御を含む、請求項136から145のいずれか一項に記載の方法。
[請求項147]
前記マルチページ制御パネルの前記第2のページは、現在再生中のメディアのルーティング先の表示を含む、請求項136から146のいずれか一項に記載の方法。
[請求項148]
前記マルチページ制御パネルの前記第2のページを表示している間に、現在再生中のメディアのルーティング先であって、前記現在再生中のメディアの前記ルーティング先は第1のゾーンに対応する第1のデバイスを含む、現在再生中のメディアのルーティング先の表示に対応する前記タッチ感知面上の位置における入力を検出することと、
前記現在再生中のメディアの前記ルーティング先の前記表示に対応する前記タッチ感知面上の前記位置における前記入力を検出したことに応答して、メディア出力を第2のゾーンに対応する第2のデバイスにルーティングすることと、
を含む、請求項147に記載の方法。
[請求項149]
前記マルチページ制御パネルの前記第2のページはメディアルーティング先リストアフォーダンスを含む、請求項136から148のいずれか一項に記載の方法であって、
前記メディアルーティング先リストアフォーダンスに対応する前記タッチ感知面上の位置における入力を検出することと、
前記メディアルーティング先リストアフォーダンスに対応する前記位置における前記入力を検出したことに応答して、メディアルーティング先選択肢のリストを表示することと、を含む、方法。
[請求項150]
前記メディアルーティング先選択肢のリストを、前記電子デバイスの識別子及び少なくとも1つの追加デバイスでポピュレートすることを含み、前記メディアルーティング先選択肢のリストを前記少なくとも1つの追加デバイスでポピュレートすることは、
前記電子デバイスはメディア出力を1つ以上の遠隔デバイスに現在ルーティングしているという判定に従って、前記メディアルーティング先選択肢のリストを、前記電子デバイスがメディア出力を現在ルーティングしている前記1つ以上の遠隔デバイスでポピュレートすることと、
前記電子デバイスが1つ以上のペアリング対応デバイスと以前にペアリングされているという判定に従って、前記メディアルーティング先選択肢のリストを前記1つ以上のペアリング対応デバイスでポピュレートすることと、を含む、
請求項149に記載の方法。
[請求項151]
1つ以上の信号送信デバイスが前記電子デバイスに近接して検出されたという判定に従って、前記メディアルーティング先選択肢のリストを前記1つ以上の信号送信デバイスでポピュレートすることを含む、
請求項150に記載の方法。
[請求項152]
前記電子デバイスは前記タッチ感知面との接触の強度を検出するための1つ以上のセンサを含む、請求項136から151のいずれか一項に記載の方法であって、
前記複数のデバイス制御アフォーダンスのうちの第1の制御アフォーダンスに対応する前記タッチ感知面上の位置における第1の接触を検出することを含む、第1の入力を検出することと、
前記第1の入力を検出したことに応答して、
第2の基準であって、前記第2の基準は、前記第1の接触の特性強度が、前記第2の基準が満たされるために第1の強度閾値を満たすことを要求する、第2の基準を満たすという判定に従って、前記第1の制御アフォーダンスに対応する制御のための1つ以上の変更選択肢を表示し、
前記第1の入力は、第3の基準であって、前記第3の基準は、前記第1の接触の前記特性強度が前記第1の強度閾値を満たすことを必要としない、第3の基準を満たすという判定に従って、前記第1の制御アフォーダンスに対応する制御の機能をトグルすることと、を含む、方法。
[請求項153]
前記第1の制御アフォーダンスに対応する前記制御の前記1つ以上の変更選択肢を表示している間に、前記1つ以上の変更選択肢の第1の変更選択肢をアクティブ化する第2の入力を検出することと、
前記第2の入力を検出したことに応答して、前記アクティブ化された第1の変更選択肢に従って、前記第1の制御アフォーダンスに対応する前記制御を変更することと、
を含む、請求項152に記載の方法。
[請求項154]
前記マルチページ制御パネルのそれぞれのページは、前記マルチページ制御パネルが有する総ページ数の表示を含み、前記マルチページ制御パネルの現在表示されているページに対応するインジケータが、前記それぞれのページで強調表示される、請求項136から153のいずれか一項に記載の方法。
[請求項155]
電子デバイスであって、
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは前記メモリに記憶され、前記1つ以上のプロセッサによって実行されるように構成され、前記1つ以上のプログラムは、
前記ディスプレイ上に初期ユーザインターフェースを表示している間に、前記タッチ感知面上の第1のジェスチャを検出する命令と、
前記第1のジェスチャを検出したことに応答して、前記ディスプレイ上に、マルチページ制御パネルの第1のページであって、前記マルチページ制御パネルの前記第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示する命令と、
前記マルチページ制御パネルの前記第1のページを表示している間に、前記タッチ感知面上の第2のジェスチャを検出する命令と、
前記第2のジェスチャを検出したことに応答して、前記マルチページ制御パネルの第2のページあって、
前記マルチページ制御パネルの前記第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、
前記マルチページ制御パネルの前記第2のページは、前記ディスプレイ上の前記マルチページ制御パネルの前記第1のページを置換する、前記マルチページ制御パネルの第2のページを表示する命令と、を含む、方法。
[請求項156]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイ及びタッチ感知面を備えた電子デバイスによって実行されると、前記デバイスに、
前記ディスプレイ上に初期ユーザインターフェースを表示している間に、前記タッチ感知面上の第1のジェスチャを検出させ、
前記第1のジェスチャを検出したことに応答して、前記ディスプレイ上に、マルチページ制御パネルの第1のページであって、前記マルチページ制御パネルの前記第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示させ、
前記マルチページ制御パネルの前記第1のページを表示している間に、前記タッチ感知面上の第2のジェスチャを検出させ、
前記第2のジェスチャを検出したことに応答して、前記マルチページ制御パネルの第2のページであって、
前記マルチページ制御パネルの前記第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、
前記マルチページ制御パネルの前記第2のページは、前記ディスプレイ上の前記マルチページ制御パネルの前記第1のページを置換する、前記マルチページ制御パネルの第2のページを表示させる、コンピュータ可読記憶媒体。
[請求項157]
ディスプレイと、
タッチ感知面と、
前記ディスプレイ上に初期ユーザインターフェースを表示している間に、前記タッチ感知面上の第1のジェスチャを検出する手段と、
前記第1のジェスチャを検出したことに応答して、前記ディスプレイ上に、マルチページ制御パネルの第1のページであって、前記マルチページ制御パネルの前記第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示する手段と、
前記マルチページ制御パネルの前記第1のページを表示している間に、前記タッチ感知面上の第2のジェスチャを検出する手段と、
前記第2のジェスチャを検出したことに応答して、前記マルチページ制御パネルの第2のページであって、
前記マルチページ制御パネルの前記第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、
前記マルチページ制御パネルの前記第2のページは、前記ディスプレイ上の前記マルチページ制御パネルの前記第1のページを置換する、前記マルチページ制御パネルの第2のページを表示させる、手段と、
を備える、電子デバイス。
[請求項158]
ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置であって、
前記ディスプレイ上に初期ユーザインターフェースを表示している間に、前記タッチ感知面上の第1のジェスチャを検出する手段と、
前記第1のジェスチャを検出したことに応答して、前記ディスプレイ上に、マルチページ制御パネルの第1のページであって、前記マルチページ制御パネルの前記第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示する手段と、
前記マルチページ制御パネルの前記第1のページを表示している間に、前記タッチ感知面上の第2のジェスチャを検出する手段と、
前記第2のジェスチャを検出したことに応答して、前記マルチページ制御パネルの第2のページであって、
前記マルチページ制御パネルの前記第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、
前記マルチページ制御パネルの前記第2のページは、前記ディスプレイ上の前記マルチページ制御パネルの前記第1のページを置換する、前記マルチページ制御パネルの第2のページを表示する手段と、を備える、情報処理装置。
[請求項159]
ディスプレイと、
タッチ感知面と、
1つ以上のプロセッサと、
メモリと、
1つ以上のプログラムと、を備え、前記1つ以上のプログラムは、前記メモリに記憶され、かつ、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、請求項136から154に記載の方法のいずれかを実行する命令を含む、電子デバイス。
[請求項160]
1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、ディスプレイとタッチ感知面とを有する電子デバイスによって実行されると、前記デバイスに、請求項136から154に記載の方法のいずれかを実行させる、コンピュータ可読記憶媒体。
[請求項161]
ディスプレイと、タッチ感知面と、メモリと、前記メモリ内に記憶された1つ以上のプログラムを実行するための1つ以上のプロセッサとを有する電子デバイス上のグラフィカルユーザインターフェースであって、請求項136から154に記載の方法のいずれかに従って表示されるユーザインターフェースを含む、グラフィカルユーザインターフェース。
[請求項162]
ディスプレイと、
タッチ感知面と、
請求項136から154に記載の方法のいずれかを実行する手段と、
を備える、電子デバイス。
[請求項163]
請求項136から154に記載の方法のいずれかを実行する手段
を備える、ディスプレイ及びタッチ感知面を備えた電子デバイス内で使用される情報処理装置。
[請求項164]
ユーザインターフェースを表示するように構成されたディスプレイユニットと、
接触に合わせて構成されたタッチ感知面ユニットと、
前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットであって、
前記ディスプレイユニット上に初期ユーザインターフェースを表示している間に、前記タッチ感知面ユニット上の第1のジェスチャを検出し、
前記第1のジェスチャを検出したことに応答して、前記ディスプレイユニット上に、マルチページ制御パネルの第1のページであって、前記マルチページ制御パネルの前記第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示することを有効化し、
前記マルチページ制御パネルの前記第1のページを表示している間に、前記タッチ感知面ユニット上の第2のジェスチャを検出し、
前記第2のジェスチャを検出したことに応答して、前記マルチページ制御パネルの第2のページであって、
前記マルチページ制御パネルの前記第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、
前記マルチページ制御パネルの前記第2のページは、前記ディスプレイ上の前記マルチページ制御パネルの前記第1のページを置換する、前記マルチページ制御パネルの第2のページの表示を有効化するように構成された、処理ユニットと、
を備える、電子デバイス。
[請求項165]
前記処理ユニットは、
前記マルチページ制御パネルの前記第2のページを表示している間に、前記タッチ感知面ユニット上の第3のジェスチャを検出し、
前記第3のジェスチャを検出したことに応答して、前記第3のジェスチャが第1のジェスチャタイプであるという判定に従って、前記マルチページ制御パネルの前記第2のページを前記ディスプレイユニット上に表示することを停止する、ように更に構成されている、請求項164に記載の電子デバイス。
[請求項166]
前記処理ユニットは、前記第3のジェスチャが前記第1のジェスチャタイプとは異なる第2のジェスチャタイプであるという判定に従って、前記マルチページ制御パネルの第3のページであって、前記マルチページ制御パネルの前記第3のページは、複数の遠隔デバイス制御アフォーダンスを含む、前記マルチページ制御パネルの第3のページの表示を有効化するように更に構成されている、請求項165に記載の電子デバイス。
[請求項167]
前記マルチページ制御パネルの前記第3のページに含まれる前記複数の遠隔デバイス制御アフォーダンスは、ユーザによって選択可能な複数の定義エリアのそれぞれの定義エリア内の異なるデバイスに対応する、請求項166に記載の電子デバイス。
[請求項168]
前記マルチページ制御パネルの前記第3のページを表示することは、前記マルチページ制御の前記第3のページが最後に表示されたときに、前記マルチページ制御パネルの前記第3のページに含まれていた1つ以上の遠隔デバイス制御を再表示することを含む、請求項166又は167に記載の電子デバイス。
[請求項169]
前記マルチページ制御パネルの前記第3のページを表示することは、前記マルチページ制御パネルの前記第3のページに、前記デバイスが現在配置されている定義エリアに対応する1つ以上の遠隔デバイス制御を表示することを含む、請求項166から168のいずれか一項に記載の電子デバイス。
[請求項170]
前記マルチページ制御パネルの前記第3のページは、アクティブ化されると、ユーザによって選択可能な複数の定義エリア識別子の表示を引き起こすように構成された定義エリアリストアフォーダンスを含む、請求項166から169のいずれか一項に記載の電子デバイス。
[請求項171]
前記マルチページ制御パネルの前記第1のページは、前記初期ユーザインターフェースの一部をオーバーレイする、請求項164から170のいずれか一項に記載の電子デバイス。
[請求項172]
前記初期ユーザインターフェースはアプリケーションユーザインターフェースであり、
前記マルチページ制御パネルと前記アプリケーションユーザインターフェースは同時に表示される、
請求項164から171のいずれか一項に記載の電子デバイス。
[請求項173]
前記処理ユニットは、
前記マルチページ制御パネルの前記第2のページを表示することを停止した後で、前記タッチ感知面ユニット上の第4のジェスチャを検出し、
前記第4のジェスチャを検出したことに応答して、前記マルチページ制御パネルの前記第2のページを再表示する、ように更に構成されている、請求項164から172のいずれか一項に記載の電子デバイス。
[請求項174]
前記複数のデバイス制御アフォーダンスは、少なくとも1つのトグル制御を含む、請求項164から173のいずれか一項に記載の電子デバイス。
[請求項175]
前記マルチページ制御パネルの前記第2のページは、現在再生中のメディアのルーティング先の表示を含む、請求項164から174のいずれか一項に記載の電子デバイス。
[請求項176]
前記処理ユニットは、
前記マルチページ制御パネルの前記第2のページを表示している間に、現在再生中のメディアのルーティング先であって、前記現在再生中のメディアの前記ルーティング先は第1のゾーンに対応する第1のデバイスを含む、現在再生中のメディアのルーティング先の表示に対応する前記タッチ感知面ユニット上の位置における入力を検出し、
前記現在再生中のメディアの前記ルーティング先の前記表示に対応する前記タッチ感知面ユニット上の前記位置における前記入力を検出したことに応答して、メディア出力を第2のゾーンに対応する第2のデバイスにルーティングする、ように更に構成されている、請求項175に記載の電子デバイス。
[請求項177]
前記マルチページ制御パネルの前記第2のページはメディアルーティング先リストアフォーダンスを含む、請求項164から176のいずれか一項に記載の電子デバイスであって、
前記処理ユニットは、
前記メディアルーティング先リストアフォーダンスに対応する前記タッチ感知面ユニット上の位置における入力を検出し、
前記メディアルーティング先リストアフォーダンスに対応する前記位置における前記入力を検出したことに応答して、メディアルーティング先選択肢のリストの表示を有効化する、ように更に構成されている、電子デバイス。
[請求項178]
前記処理ユニットは、前記メディアルーティング先選択肢のリストを、前記電子デバイスの識別子及び少なくとも1つの追加デバイスでポピュレートするように更に構成されており、前記メディアルーティング先選択肢のリストを前記少なくとも1つの追加デバイスでポピュレートすることは、
前記電子デバイスはメディア出力を1つ以上の遠隔デバイスに現在ルーティングしているという判定に従って、前記メディアルーティング先選択肢のリストを、前記電子デバイスがメディア出力を現在ルーティングしている前記1つ以上の遠隔デバイスでポピュレートすることと、
前記電子デバイスが1つ以上のペアリング対応デバイスと以前にペアリングされているという判定に従って、前記メディアルーティング先選択肢のリストを前記1つ以上のペアリング対応デバイスでポピュレートすることと、を含む、
請求項177に記載の方法。
[請求項179]
前記処理ユニットは、
1つ以上の信号送信デバイスが前記電子デバイスに近接して検出されたという判定に従って、前記メディアルーティング先選択肢のリストを前記1つ以上の信号送信デバイスでポピュレートするように更に構成されている、請求項178に記載の電子デバイス。
[請求項180]
前記電子デバイスは前記タッチ感知面ユニットとの接触の強度を検出するための1つ以上のセンサユニットを含む、請求項164から179のいずれか一項に記載の電子デバイスであって、
前記処理ユニットは、
前記複数のデバイス制御アフォーダンスのうちの第1の制御アフォーダンスに対応する前記タッチ感知面ユニット上の位置における第1の接触を検出することを含む、第1の入力を検出し、
前記第1の入力を検出したことに応答して、
前記第1の入力は、第2の基準であって、前記第2の基準は、前記第1の接触の特性強度が、前記第2の基準が満たされるために第1の強度閾値を満たすことを要求する、第2の基準を満たすという判定に従って、前記第1の制御アフォーダンスに対応する制御のための1つ以上の変更選択肢の表示を有効化し、
前記第1の入力は、第3の基準であって、前記第3の基準は、前記第1の接触の前記特性強度が前記第1の強度閾値を満たすことを必要としない、第3の基準を満たすという判定に従って、前記第1の制御アフォーダンスに対応する制御の機能をトグルする、ように更に構成されている、電子デバイス。
[請求項181]
前記処理ユニットは、
前記第1の制御アフォーダンスに対応する前記制御の前記1つ以上の変更選択肢を表示している間に、前記1つ以上の変更選択肢の第1の変更選択肢をアクティブ化する第2の入力を検出し、
前記第2の入力を検出したことに応答して、前記アクティブ化された第1の変更選択肢に従って、前記第1の制御アフォーダンスに対応する前記制御を変更する、ように更に構成されている、請求項180に記載の電子デバイス。
[書類名] 要約書
[要約]
電子デバイスは、デバイスが表示オフ状態にある間に、第1の入力を検出する。第1の入力を検出することに応答して:デバイスはデバイスのディスプレイをアクティブ化する。デバイスは、ディスプレイ上に、デバイスの表示オン状態に対応する第1のユーザインターフェースを更に表示する。デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、デバイスはタッチ感知面上のスワイプジェスチャを検出する。タッチ感知面上のスワイプジェスチャを検出したことに応答して、デバイスが表示オン状態のロックモードにあり、スワイプジェスチャが第1の方向にあるという判定に従って、デバイスは、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツを表示する、第2のユーザインターフェースの表示と置換し、デバイスが表示オン状態のロック解除モードにあり、スワイプジェスチャが第1の方向にあるという判断に従って、デバイスは、第1のユーザインターフェースの表示を、第2のユーザインターフェースであって、第2のユーザインターフェースは第1のコンテンツ及びデバイスが表示オン状態のロックモードにあるときに表示されない第1の追加コンテンツを表示する、第2のユーザインターフェースと置換する。
電子デバイスは、デバイスが表示オフ状態にある間に、デバイスのディスプレイをアクティブ化する第1の入力を検出する。第1の入力を検出したことに応答して、デバイスはデバイスのディスプレイをアクティブ化し、ディスプレイ上に、デバイスの表示オン状態に対応する第1のユーザインターフェースを表示する。デバイスの表示オン状態に対応する第1のユーザインターフェースを表示している間に、デバイスはタッチ感知面上のスワイプジェスチャを検出する。スワイプジェスチャを検出したことに応答して、スワイプジェスチャが第1の方向にあるという判定に従って、デバイスは、第1のユーザインターフェースの表示をカメラアプリケーションユーザインターフェースの表示と置換し、スワイプジェスチャが第1の方向とは異なる第2の方向にあるという判定に従って、デバイスは、第1のユーザインターフェースの表示を、複数のミニアプリケーションオブジェクトを含むように構成されたミニアプリケーションオブジェクトユーザインターフェースであって、複数のミニアプリケーションオブジェクトのそれぞれのミニアプリケーションオブジェクトは、デバイスに記憶された対応するアプリケーションを有する、ミニアプリケーションオブジェクトユーザインターフェースの表示と、置換し、スワイプジェスチャが、第1の方向及び第2の方向とは異なる第3の方向にあるという判定に従って、デバイスは、マルチページ制御パネルユーザインターフェースの第1のページを表示し、スワイプジェスチャが第1の方向、第2の方向及び第3の方向とは異なる第4の方向にあるという判定に従って、複数の通知を表示するように構成された通知ユーザインターフェースを表示する。
電子デバイスは、デバイスにインストールされた複数のアプリケーションのうちの異なるアプリケーションに対応する複数のアプリケーションアイコンを含む第1のユーザインターフェースを表示する。デバイスは、複数のアプリケーションアイコンの第1のアプリケーションアイコンに対応するタッチ感知面上の第1の入力を検出し、第1のアプリケーションアイコンは、複数のアプリケーションの第1のアプリケーションに対応する。第1の入力を検出したことに応答して、デバイスは、オーバーレイ領域内における第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューであって、第1のミニアプリケーションオブジェクトは、複数のアプリケーションの第1のアプリケーションに対応し、オーバーレイ領域は、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに、第1のミニアプリケーションオブジェクトを追加するアフォーダンスを含む、第1のミニアプリケーションオブジェクト又は第1のミニアプリケーションオブジェクトのプレビューを表示する。デバイスは、第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加するアフォーダンスに対応するタッチ感知面上の位置における第2の入力を検出する。第2の入力を検出したことに応答して、デバイスは、複数のミニアプリケーションオブジェクトを表示する第2のユーザインターフェースに第1のミニアプリケーションオブジェクトを追加する。
電子デバイスは、ディスプレイ上に初期ユーザインターフェースを表示している間に、タッチ感知面上の第1のジェスチャを検出する。第1のジェスチャを検出したことに応答して、デバイスは、ディスプレイ上に、マルチページ制御パネルの第1のページであって、マルチページ制御パネルの第1のページは複数のデバイス制御アフォーダンスを含む、マルチページ制御パネルの第1のページを表示させる。マルチページ制御パネルの第1のページを表示している間に、デバイスは、タッチ感知面上の第2のジェスチャを検出する。第2のジェスチャを検出することに応答して、デバイスは、マルチページ制御パネルの第2のページであって、マルチページ制御パネルの第2のページは、複数のコンテンツ再生制御アフォーダンスを含み、マルチページ制御パネルの第2のページがディスプレイ上のマルチページ制御パネルの第1のページを置換する、マルチページ制御パネルの第2のページを表示する。
[書類名] 図面
[図1A]
[図1B]
[図2]
[図3]
[図4A]
[図4B]
[図4C]
[図4D]
[図4E]
[図5A−1]
[図5A−2]
[図5A−3]
[図5A−4]
[図5B]
[図5C]
[図5D]
[図5E]
[図5F−1]
[図5F−2]
[図5F−3]
[図5F−4]
[図5F−5]
[図5F−6]
[図5F−7]
[図5F−8]
[図5G]
[図5H]
[図5I]
[図5J]
[図5K]
[図5L]
[図5M]
[図5N]
[図5O]
[図5P]
[図5Q]
[図5R−1]
[図5R−2]
[図5S−1]
[図5S−2]
[図5T−1]
[図5T−2]
[図5T−3]
[図5T−4]
[図5U]
[図5V]
[図5W]
[図5X]
[図5Y]
[図5Z]
[図5AA]
[図5AB]
[図5AC]
[図5AD]
[図5AE]
[図5AF]
[図5AG]
[図5AH]
[図5AI]
[図5AJ]
[図5AK]
[図5AL]
[図5AM]
[図5AN]
[図5AO]
[図5AP]
[図5AQ]
[図5AR]
[図5AS]
[図5AT]
[図5AU]
[図5AV]
[図5AW]
[図5AX]
[図5AY]
[図5AZ]
[図5BA]
[図5BB]
[図5BC]
[図5BD]
[図5BE]
[図5BF]
[図5BG]
[図5BH]
[図5BI]
[図5BJ]
[図6A]
[図6B]
[図6C]
[図6D]
[図6E]
[図7A]
[図7B]
[図7C]
[図7D]
[図7E]
[図8A]
[図8B]
[図8C]
[図9A]
[図9B]
[図9C]
[図9D]
[図9E]
[図10]
[図11]
[図12]
[図13]

Claims (196)

  1. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示することと、
    前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部デバイスの表現を表示することと、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、
    前記第1のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示することと、
    前記制御可能な外部デバイスの前記複数の可能な状態を示す前記ユーザインタフェースオブジェクトを表示している間に、前記制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出することと、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスを前記指定された状態に設定する命令を送信することと、
    を含む方法。
  2. 個人に関連付けられたリモート電子デバイスが前記ロケーションに存在することを示すデータを受信することと、
    前記リモート電子デバイスが前記ロケーションに存在することを示す前記データを受信したことに応じて、前記第1のユーザインタフェース画面上に、前記リモート電子デバイスに関連付けられた前記個人の表現を表示することと、
    を更に含む、請求項1に記載の方法。
  3. 前記第1のユーザインタフェース画面上に、前記ロケーションの状態のインジケーションを表示することを更に含む、請求項1又は2に記載の方法。
  4. 前記第1のユーザインタフェース画面上に、前記ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現を表示することと、
    前記シーンプロファイルの選択に対応する第3のユーザ入力を検出することと、
    前記第3のユーザ入力を検出したことに応じて、前記シーンプロファイルに関連付けられた前記複数の制御可能な外部デバイスの表現を表示することと、
    を更に含む、請求項1又は2に記載の方法。
  5. 前記第1のユーザインタフェース画面を表示している間に、第4のユーザ入力を検出することと、
    前記第4のユーザ入力を検出したことに応じて、追加のシーンプロファイルを作成するオプションを表示することと、
    を更に含む、請求項4に記載の方法。
  6. 前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部カメラによってキャプチャされた、前記制御可能な外部カメラからのライブビデオフィードに含まれた画像を表示することを更に含む、請求項1又は2に記載の方法。
  7. 前記第1のユーザインタフェース画面を表示している間に、第5のユーザ入力を検出することと、
    前記第5のユーザ入力を検出したことに応じて、前記ロケーションに関連付けられた少なくとも1つの指定された部屋の表現を表示することと、
    前記少なくとも1つの指定された部屋の第1の指定された部屋の選択に対応する第6のユーザ入力を検出することと、
    前記第6のユーザ入力を検出したことに応じて、前記第1の指定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスの表現を表示することと、
    を更に含む、請求項1又は2に記載の方法。
  8. 前記第1のユーザインタフェース画面を表示している間に、第7のユーザ入力を検出することと、
    前記第7のユーザ入力を検出したことに応じて、前記ロケーションの少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの表現、並びに/又は前記自動化プロファイルを作成するオプションを表示することと、
    を更に含む、請求項1又は2に記載の方法。
  9. 前記第1のユーザインタフェース画面を表示している間に、第8のユーザ入力を検出することと、
    前記第8のユーザ入力を検出したことに応じて、異なるロケーションに関連付けられた情報を見る及び/又は追加のロケーションを追加するオプションを表示することと、
    を更に含む、請求項1又は2に記載の方法。
  10. 前記第1のユーザインタフェース画面を表示している間に、第9のユーザ入力を検出することと、
    前記第9のユーザ入力を検出したことに応じて、前記ロケーションのプロファイル情報を変更するオプションを表示することと、
    を更に含む、請求項1又は2に記載の方法。
  11. 前記第1のユーザインタフェース画面を表示している間に、第10のユーザ入力を検出することと、
    前記第10のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイスを前記ロケーションに関連付けるオプションを表示することと、
    を更に含む、請求項1又は2に記載の方法。
  12. 前記第1のユーザインタフェース画面を表示している間に、第11のユーザ入力を検出することと、
    前記第11のユーザ入力を検出したことに応じて、前記ロケーションに関連付けられた人々の表現を表示することと、
    を更に含む、請求項1又は2に記載の方法。
  13. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示し、
    前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部デバイスの表現を表示し、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示し、
    前記制御可能な外部デバイスの前記複数の可能な状態を示す前記ユーザインタフェースオブジェクトを表示している間に、前記制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスを前記指定された状態に設定する命令を送信する、命令を含む、電子デバイス。
  14. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示させ、
    前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部デバイスの表現を表示させ、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、
    前記第1のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示させ、
    前記制御可能な外部デバイスの前記複数の可能な状態を示す前記ユーザインタフェースオブジェクトを表示している間に、前記制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出させ、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスを前記指定された状態に設定する命令を送信させる、非一時的コンピュータ可読記憶媒体。
  15. ディスプレイと、
    タッチ感知面と、
    第1のユーザインタフェース画面上に、ロケーションのインジケーションを表示する手段と、
    前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部デバイスの表現を表示する手段と、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、
    前記第1のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトを表示する手段と、
    前記制御可能な外部デバイスの前記複数の可能な状態を示す前記ユーザインタフェースオブジェクトを表示している間に、前記制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出する手段と、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスを前記指定された状態に設定する命令を送信する手段と、
    を備える、電子デバイス。
  16. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項1から12のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  17. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項1から12のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  18. ディスプレイと、
    タッチ感知面と、
    請求項1から12のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  19. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、前記処理ユニットが、
    第1のユーザインタフェース画面上に、ロケーションのインジケーションの表示を有効にし、
    前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部デバイスの表現の表示を有効にし、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの複数の可能な状態を示すユーザインタフェースオブジェクトの表示を有効にし、
    前記制御可能な外部デバイスの前記複数の可能な状態を示す前記ユーザインタフェースオブジェクトが表示されている間に、前記制御可能な外部デバイスの指定された状態の選択に対応する第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスを前記指定された状態に設定する命令の送信を引き起こす、ように構成された、電子デバイス。
  20. 前記処理ユニットが、
    個人に関連付けられたリモート電子デバイスが前記ロケーションに存在することを示すデータを受信し、
    前記リモート電子デバイスが前記ロケーションに存在することを示す前記データを受信したことに応じて、前記第1のユーザインタフェース画面上に、前記リモート電子デバイスに関連付けられた前記個人の表現の表示を有効にする、
    ように更に構成された、請求項19に記載の電子デバイス。
  21. 前記処理ユニットが、
    前記第1のユーザインタフェース画面上に、前記ロケーションの状態のインジケーションの表示を有効にするように更に構成された、請求項19又は20に記載の電子デバイス。
  22. 前記処理ユニットが、
    前記第1のユーザインタフェース画面上に、前記ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現の表示を有効にし、
    前記シーンプロファイルの選択に対応する第3のユーザ入力を検出し、
    前記第3のユーザ入力を検出したことに応じて、前記シーンプロファイルに関連付けられた前記複数の制御可能な外部デバイスの表現の表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  23. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第4のユーザ入力を検出し、
    前記第4のユーザ入力を検出したことに応じて、追加のシーンプロファイルを作成するオプションの表示を有効にする、
    ように更に構成された、請求項22に記載の電子デバイス。
  24. 前記処理ユニットが、
    前記第1のユーザインタフェース画面上に、前記ロケーションの制御可能な外部カメラによってキャプチャされた、前記制御可能な外部カメラからのライブビデオフィードに含まれた画像の表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  25. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第5のユーザ入力を検出し、
    前記第5のユーザ入力を検出したことに応じて、前記ロケーションに関連付けられた少なくとも1つの指定された部屋の表現の表示を有効にし、
    前記少なくとも1つの指定された部屋の第1の指定された部屋の選択に対応する第6のユーザ入力を検出し、
    前記第6のユーザ入力を検出したことに応じて、前記第1の指定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスの表現の表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  26. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第7のユーザ入力を検出し、
    前記第7のユーザ入力を検出したことに応じて、前記ロケーションの少なくとも1つの制御可能な外部デバイスの状態を制御するための基準及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの表現、並びに/又は前記自動化プロファイルを作成するオプションの表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  27. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第8のユーザ入力を検出し、
    前記第8のユーザ入力を検出したことに応じて、異なるロケーションに関連付けられた情報を見る及び/又は追加のロケーションを追加するオプションの表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  28. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第9のユーザ入力を検出し、
    前記第9のユーザ入力を検出したことに応じて、前記ロケーションのプロファイル情報を変更するオプションの表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  29. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第10のユーザ入力を検出し、
    前記第10のユーザ入力を検出したことに応じて、第2の制御可能な外部デバイスを前記ロケーションに関連付けるオプションの表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  30. 前記処理ユニットが、
    前記第1のユーザインタフェース画面が表示されている間に、第11のユーザ入力を検出し、
    前記第11のユーザ入力を検出したことに応じて、前記ロケーションに関連付けられた人々の表現の表示を有効にする、
    ように更に構成された、請求項19又は20に記載の電子デバイス。
  31. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示することと、
    前記第1の制御可能な外部デバイスの前記第1の表現の選択に対応する第1のユーザ入力を検出することと、
    前記第1のユーザ入力を検出した後で、前記第1の制御可能な外部デバイス及び前記第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに追加することと、
    を含む方法。
  32. 前記制御可能な外部デバイスの前記第1の表現が、前記制御可能な外部デバイスの前記現在の状態のインジケーションを含む、請求項31に記載の方法。
  33. 前記ロケーションに位置している第2の制御可能な外部デバイスの表現を表示することと、
    前記第2の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出することと、
    前記第2のユーザ入力が閾値基準を満たすか否かを判定することと、
    前記第2のユーザ入力を検出したことに応じて、かつ前記閾値基準が満たされるという判定に従って、前記第2の制御可能な外部デバイスの第1の状態のインジケーションを表示することと、
    前記第2の制御可能な外部デバイスの前記第1の状態の選択に対応する第3のユーザ入力を検出することと、
    前記第3のユーザ入力を検出した後で、前記第2の制御可能な外部デバイス及び前記第2の制御可能な外部デバイスの前記第1の状態を識別するデータを前記シーンプロファイルに含めることと、
    を更に含む、請求項31又は32に記載の方法。
  34. 第4のユーザ入力を検出することと、
    前記第4のユーザ入力を検出したことに応じて、前記第1の制御可能な外部デバイスの第2の表現を含む第1のユーザインタフェース画面を表示することと、
    を更に含む、請求項31又は32に記載の方法。
  35. 前記第1のユーザインタフェース画面が、前記制御可能な外部デバイスに関連付けられた前記データを前記シーンプロファイルから除去すること、前記シーンプロファイルをテストすること、前記シーンプロファイルを指定すること、及び前記シーンプロファイルを削除することのうちの少なくとも1つを実行するオプションを含む、請求項34に記載の方法。
  36. 前記制御可能な外部デバイスの前記第1の表現を表示する前に、前記ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む既定のシーンプロファイルの表現を含む第2のユーザインタフェース画面を表示することを更に含む、請求項31又は32に記載の方法。
  37. 前記第2のユーザインタフェース画面を表示している間に、前記既定のシーンプロファイルの選択に対応する第5のユーザ入力を検出することと、
    前記第5のユーザ入力を検出したことに応じて、前記ロケーションの前記所定の制御可能な外部デバイスの複数の表現を含む第3のユーザインタフェース画面を表示することと、
    を更に含む、請求項36に記載の方法。
  38. 前記ロケーションの前記所定の制御可能な外部デバイスの前記複数の表現が、前記所定の制御可能な外部デバイスに対する前記所定の状態のインジケーションを含む、請求項37に記載の方法。
  39. 前記所定の制御可能な外部デバイスが、前記所定の制御可能な外部デバイスに対して前記電子デバイスによって前に実行されたアクションに基づいて判定される、請求項37に記載の方法。
  40. 前記所定の制御可能な外部デバイスの前記所定の状態が、前記所定の制御可能な外部デバイスに対して前に取られた、前記電子デバイスのユーザに関連付けられたアクションに基づいて判定される、請求項37に記載の方法。
  41. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示し、
    前記第1の制御可能な外部デバイスの前記第1の表現の選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出した後で、前記第1の制御可能な外部デバイス及び前記第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに追加する、
    命令を含む、電子デバイス。
  42. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示させ、
    前記第1の制御可能な外部デバイスの前記第1の表現の選択に対応する第1のユーザ入力を検出させ、
    前記第1のユーザ入力を検出した後で、前記第1の制御可能な外部デバイス及び前記第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに追加させる、
    非一時的コンピュータ可読記憶媒体。
  43. ディスプレイと、
    タッチ感知面と、
    ロケーションに位置している第1の制御可能な外部デバイスの第1の表現を表示する手段と、
    前記第1の制御可能な外部デバイスの前記第1の表現の選択に対応する第1のユーザ入力を検出する手段と、
    前記第1のユーザ入力を検出した後で、前記第1の制御可能な外部デバイス及び前記第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに追加する手段と、
    を備える、電子デバイス。
  44. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項31から40のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  45. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項31から40のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  46. ディスプレイと、
    タッチ感知面と、
    請求項31から40のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  47. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、前記処理ユニットが、
    ロケーションに位置している第1の制御可能な外部デバイスの第1の表現の表示を有効にし、
    前記第1の制御可能な外部デバイスの前記第1の表現の選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出した後で、前記第1の制御可能な外部デバイス及び前記第1の制御可能な外部デバイスの第1の状態を識別するデータをシーンプロファイルに追加する、
    ように構成された、電子デバイス。
  48. 前記制御可能な外部デバイスの前記第1の表現が、前記制御可能な外部デバイスの前記現在の状態のインジケーションを含む、請求項47に記載の電子デバイス。
  49. 前記処理ユニットが、
    前記ロケーションに位置している第2の制御可能な外部デバイスの表現の表示を有効にし、
    前記第2の制御可能な外部デバイスの選択に対応する第2のユーザ入力を検出し、
    前記第2のユーザ入力が閾値基準を満たすか否かを判定し、
    前記第2のユーザ入力を検出したことに応じて、かつ前記閾値基準が満たされるという判定に従って、前記第2の制御可能な外部デバイスの第1の状態のインジケーションの表示を有効にし、
    前記第2の制御可能な外部デバイスの前記第1の状態の選択に対応する第3のユーザ入力を検出し、
    前記第3のユーザ入力を検出した後で、前記第2の制御可能な外部デバイス及び前記第2の制御可能な外部デバイスの前記第1の状態を識別するデータを前記シーンプロファイルに含める、
    ように更に構成された、請求項47又は48に記載の電子デバイス。
  50. 前記処理ユニットが、
    第4のユーザ入力を検出し、
    前記第4のユーザ入力を検出したことに応じて、前記第1の制御可能な外部デバイスの第2の表現を含む第1のユーザインタフェース画面の表示を有効にする、
    ように更に構成された、請求項47又は48に記載の電子デバイス。
  51. 前記第1のユーザインタフェース画面が、前記制御可能な外部デバイスに関連付けられた前記データを前記シーンプロファイルから除去すること、前記シーンプロファイルをテストすること、前記シーンプロファイルを指定すること、及び前記シーンプロファイルを削除することのうちの少なくとも1つを実行するオプションを含む、請求項50に記載の電子デバイス。
  52. 前記処理ユニットが、
    前記制御可能な外部デバイスの前記第1の表現が表示される前に、前記ロケーションの所定の制御可能な電子デバイスの所定の状態に関するデータを含む既定のシーンプロファイルの表現を含む第2のユーザインタフェース画面の表示を有効にするように更に構成された、請求項47又は48に記載の電子デバイス。
  53. 前記処理ユニットが、
    前記第2のユーザインタフェース画面が表示されている間に、前記既定のシーンプロファイルの選択に対応する第5のユーザ入力を検出し、
    前記第5のユーザ入力を検出したことに応じて、前記ロケーションの前記所定の制御可能な外部デバイスの複数の表現を含む第3のユーザインタフェース画面の表示を有効にする、
    ように更に構成された、請求項52に記載の電子デバイス。
  54. 前記ロケーションの前記所定の制御可能な外部デバイスの前記複数の表現が、前記所定の制御可能な外部デバイスに対する前記所定の状態のインジケーションを含む、請求項53に記載の電子デバイス。
  55. 前記所定の制御可能な外部デバイスが、前記所定の制御可能な外部デバイスに対して前記電子デバイスによって前に実行されたアクションに基づいて判定される、請求項53に記載の電子デバイス。
  56. 前記所定の制御可能な外部デバイスの前記所定の状態が、前記所定の制御可能な外部デバイスに対して前に取られた、前記電子デバイスのユーザに関連付けられたアクションに基づいて判定される、請求項53に記載の電子デバイス。
  57. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    ユーザインタフェース画面上で、第1の基準の選択に対応する第1のユーザ入力を検出することと、
    前記第1のユーザ入力を検出したことに応じて、前記第1の基準を、少なくとも前記第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けることと、
    前記ユーザインタフェース画面上の第2のユーザ入力を検出することと、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションに位置している少なくとも第1の制御可能な外部デバイスの表現を表示することと、
    前記第1の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出することと、
    前記第1の制御可能な外部デバイスの指定された状態を示すデータを前記自動化プロファイルに追加することと、
    前記自動化基準が満たされたか否かを判定することと、
    前記自動化基準が満たされたという判定に従って、前記第1の制御可能な外部デバイスを前記指定された状態に設定する命令を送信することと、
    を含む方法。
  58. 前記第1の制御可能な外部デバイスの前記選択が、シーンプロファイルの選択を含み、前記シーンプロファイルが、前記第1の制御可能な外部デバイスを含む前記ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含む、請求項57に記載の方法。
  59. 前記自動化基準が、前記ロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、請求項57又は58に記載の方法。
  60. 前記自動化基準が、時刻に少なくとも部分的に基づく、請求項57又は58に記載の方法。
  61. 前記自動化基準が、前記ロケーションの制御可能な外部デバイスの状態に少なくとも部分的に基づく、請求項57又は58に記載の方法。
  62. 前記第1の制御可能な外部デバイスの前記指定された状態を示す前記データを前記自動化プロファイルに追加した後で、前記自動化プロファイルの概要を表示することを更に含む、請求項57又は58に記載の方法。
  63. 前記ロケーションに位置している第2の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出することと、
    前記第3のユーザ入力が入力閾値基準を満たすか否かを判定することと、
    前記第3のユーザ入力が前記入力閾値基準を満たすという判定に従って、前記第2の制御可能な外部デバイスの第1の状態のインジケーションを表示することと、
    前記第2の制御可能な外部デバイスの前記第1の状態の選択に対応する第4のユーザ入力を検出することと、
    前記第4のユーザ入力を検出したことに応じて、前記第2の制御可能な外部デバイス及び前記第2の制御可能な外部デバイスの前記第1の状態を識別するデータを前記自動化プロファイルに含めることと、
    を更に含む、請求項57又は58に記載の方法。
  64. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    ユーザインタフェース画面上で、第1の基準の選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記第1の基準を、少なくとも前記第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付け、
    前記ユーザインタフェース画面上の第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションに位置している少なくとも第1の制御可能な外部デバイスの表現を表示し、
    前記第1の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出し、
    前記第1の制御可能な外部デバイスの指定された状態を示すデータを前記自動化プロファイルに追加し、
    前記自動化基準が満たされたか否かを判定し、
    前記自動化基準が満たされたという判定に従って、前記第1の制御可能な外部デバイスを前記指定された状態に設定する命令を送信する、
    命令を含む、電子デバイス。
  65. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、ユーザインタフェース画面上で、第1の基準の選択に対応する第1のユーザ入力を検出させ、
    前記第1のユーザ入力を検出したことに応じて、前記第1の基準を、少なくとも前記第1の基準を含む自動化基準、及びロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータを含む自動化プロファイルに関連付けさせ、
    前記ユーザインタフェース画面上の第2のユーザ入力を検出させ、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションに位置している少なくとも第1の制御可能な外部デバイスの表現を表示させ、
    前記第1の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出させ、
    前記第1の制御可能な外部デバイスの指定された状態を示すデータを前記自動化プロファイルに追加させ、
    前記自動化基準が満たされたか否かを判定させ、
    前記自動化基準が満たされたという判定に従って、前記第1の制御可能な外部デバイスを前記指定された状態に設定する命令を送信させる、
    非一時的コンピュータ可読記憶媒体。
  66. ディスプレイと、
    タッチ感知面と、
    ユーザインタフェース画面上で第1の基準の選択に対応する第1のユーザ入力を検出する手段と、
    前記第1のユーザ入力を検出したことに応じて、前記第1の基準を、
    少なくとも前記第1の基準を含む自動化基準、及び
    ロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を表すデータ、
    を含む自動化プロファイルに関連付ける手段と、
    前記ユーザインタフェース画面上の第2のユーザ入力を検出する手段と、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションに位置している少なくとも第1の制御可能な外部デバイスの表現を表示する手段と、
    前記第1の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出する手段と、
    前記第1の制御可能な外部デバイスの指定された状態を示すデータを前記自動化プロファイルに追加する手段と、
    前記自動化基準が満たされたか否かを判定する手段と、
    前記自動化基準が満たされたという判定に従って、前記第1の制御可能な外部デバイスを前記指定された状態に設定する命令を送信する手段と、
    を備える、電子デバイス。
  67. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項57から62のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  68. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項57から62のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  69. ディスプレイと、
    タッチ感知面と、
    請求項57から62のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  70. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、前記処理ユニットが、
    ユーザインタフェース画面上で、第1の基準の選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記第1の基準を、
    少なくとも前記第1の基準を含む自動化基準、及び
    ロケーションに位置している少なくとも1つの制御可能な外部デバイスに対する少なくとも1つの指定された状態を、表すデータを含む自動化プロファイルに関連付け、
    前記ユーザインタフェース画面上の第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションに位置している少なくとも第1の制御可能な外部デバイスの表現を表示し、
    前記ロケーションに位置している前記第1の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出し、
    前記第1の制御可能な外部デバイスの指定された状態を示すデータを前記自動化プロファイルに追加し、
    前記自動化基準が満たされたか否かを判定し、
    前記自動化基準が満たされたという判定に従って、前記第1の制御可能な外部デバイスを前記指定された状態に設定する命令の送信を引き起こす、
    ように構成された、電子デバイス。
  71. 前記第1の制御可能な外部デバイスの前記選択が、シーンプロファイルの選択を含み、前記シーンプロファイルが、前記第1の制御可能な外部デバイスを含む前記ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含む、請求項70に記載の電子デバイス。
  72. 前記自動化基準が、前記ロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、請求項70又は71に記載の電子デバイス。
  73. 前記自動化基準が、時刻に少なくとも部分的に基づく、請求項70又は71に記載の電子デバイス。
  74. 前記自動化基準が、前記ロケーションの制御可能な外部デバイスの状態に少なくとも部分的に基づく、請求項70又は71に記載の電子デバイス。
  75. 前記処理ユニットが、
    前記第1の制御可能な外部デバイスの前記指定された状態を示す前記データを前記自動化プロファイルに追加した後で、前記自動化プロファイルの概要の表示を有効にするように更に構成された、請求項70又は71に記載の電子デバイス。
  76. 前記処理ユニットが、
    前記ロケーションに位置している第2の制御可能な外部デバイスの選択に対応する第3のユーザ入力を検出し、
    前記第3のユーザ入力が入力閾値基準を満たすか否かを判定し、
    前記第3のユーザ入力が前記入力閾値基準を満たすという判定に従って、前記第2の制御可能な外部デバイスの第1の状態のインジケーションの表示を有効にし、
    前記第2の制御可能な外部デバイスの前記第1の状態の選択に対応する第4のユーザ入力を検出し、
    前記第4のユーザ入力を検出したことに応じて、前記第2の制御可能な外部デバイス及び前記第2の制御可能な外部デバイスの前記第1の状態を識別するデータを前記自動化プロファイルに含める、
    ように更に構成された、請求項70又は71に記載の電子デバイス。
  77. ディスプレイと、タッチ感知面と、カメラと、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    前記カメラを使用して、パターンの画像をキャプチャすることと、
    前記パターンが、2つ以上の状態で動作するように構成されており、かつ前記2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定することと、
    前記パターンが前記制御可能な外部デバイスに対応するという判定に応じて、前記制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けることと、
    前記少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出することと、
    前記第1のユーザ入力を検出したことに応じて、前記選択された部屋を前記制御可能な外部デバイスに関連付けることと、
    を含む方法。
  78. 前記パターンの前記画像をキャプチャする前に、前記パターンの前記画像をキャプチャする命令を含む第1のユーザインタフェース画面を表示することを更に含む、請求項77に記載の方法。
  79. 前記第1のユーザインタフェース画面が、第2のユーザインタフェース画面上の第1のアフォーダンスの選択に応じて表示される、請求項78に記載の方法。
  80. 前記パターンが制御可能な外部デバイスに対応することを判定した後で、第2のユーザ入力を検出することと、
    前記第2のユーザ入力を検出したことに応じて、前記第2のユーザインタフェース画面上に前記制御可能な外部デバイスの表現を表示することと、
    を更に含む、請求項79に記載の方法。
  81. 前記パターンが制御可能な外部デバイスに対応することを判定した後で、前記制御可能な外部デバイスの表現を表示することを更に含む、請求項77から80のいずれか一項に記載の方法。
  82. ディスプレイと、
    タッチ感知面と、
    カメラと、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    前記カメラを使用して、パターンの画像をキャプチャし、
    前記パターンが、2つ以上の状態で動作するように構成されており、かつ前記2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し、
    前記パターンが前記制御可能な外部デバイスに対応するという判定に応じて、前記制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け、
    前記少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記選択された部屋を前記制御可能な外部デバイスに関連付ける、
    命令を含む、電子デバイス。
  83. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面と、カメラとを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    前記カメラを使用して、パターンの画像をキャプチャさせ、
    前記パターンが、2つ以上の状態で動作するように構成されており、かつ前記2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定させ、
    前記パターンが前記制御可能な外部デバイスに対応するという判定に応じて、前記制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付けさせ、
    前記少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出させ、
    前記第1のユーザ入力を検出したことに応じて、前記選択された部屋を前記制御可能な外部デバイスに関連付けさせる、
    非一時的コンピュータ可読記憶媒体。
  84. ディスプレイと、
    タッチ感知面と、
    カメラと、
    前記カメラを使用して、パターンの画像をキャプチャする手段と、
    前記パターンが、2つ以上の状態で動作するように構成されており、かつ前記2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定する手段と、
    前記パターンが前記制御可能な外部デバイスに対応するという判定に応じて、前記制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付ける手段と、
    前記少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出する手段と、
    前記第1のユーザ入力を検出したことに応じて、前記選択された部屋を前記制御可能な外部デバイスに関連付ける手段と、
    を備える、電子デバイス。
  85. ディスプレイと、
    タッチ感知面と、
    カメラと、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項77から81のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  86. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項77から81のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  87. ディスプレイと、
    タッチ感知面と、
    請求項77から81のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  88. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    画像をキャプチャするように構成されたカメラユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、前記処理ユニットが、
    前記カメラを使用して、パターンの画像のキャプチャを引き起こし、
    前記パターンが、2つ以上の状態で動作するように構成されており、かつ前記2つ以上の状態の間でリモートで制御可能な、制御可能な外部デバイスに対応することを判定し、
    前記パターンが前記制御可能な外部デバイスに対応するという判定に応じて、前記制御可能な外部デバイスを少なくとも1つの指定された部屋を有するロケーションに関連付け、
    前記少なくとも1つの指定された部屋からの部屋の選択を表す第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記選択された部屋を前記制御可能な外部デバイスに関連付ける、
    ように構成された、電子デバイス。
  89. 前記処理ユニットが、
    前記パターンの前記画像がキャプチャされる前に、前記パターンの前記画像をキャプチャする命令を含む第1のユーザインタフェース画面の表示を有効にするように更に構成された、請求項88に記載の電子デバイス。
  90. 前記第1のユーザインタフェース画面が、第2のユーザインタフェース画面上の第1のアフォーダンスの選択に応じて表示される、請求項89に記載の電子デバイス。
  91. 前記処理ユニットが、
    前記パターンが制御可能な外部デバイスに対応することを判定した後で、第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記第2のユーザインタフェース画面上に前記制御可能な外部デバイスの表現の表示を有効にする、
    ように更に構成された、請求項90に記載の電子デバイス。
  92. 前記処理ユニットが、
    前記パターンが制御可能な外部デバイスに対応することを判定した後で、前記制御可能な外部デバイスの表現の表示を有効にするように更に構成された、請求項88から91のいずれか一項に記載の電子デバイス。
  93. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出することと、
    前記基準の指定に対応する前記ユーザ入力を検出したことに応じて、前記位置に基づく基準を、前記位置に基づく基準を含む前記少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び前記少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、前記ロケーションに関連付けられた自動化プロファイルに追加することと、
    前記電子デバイスの前記位置を判定することと、
    前記電子デバイスの前記判定された位置に少なくとも部分的に基づいて、前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるか否かを判定することと、
    前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令を送信することと、
    を含む方法。
  94. 前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされないという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令を送信することを見合わせることを更に含む、請求項93に記載の方法。
  95. 前記位置に基づく基準のインジケーションを有する地図ビューを表示することを更に含む、請求項93又は94に記載の方法。
  96. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離未満にあるか否かを含む、請求項93又は94に記載の方法。
  97. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離より離れているか否かを含む、請求項93又は94に記載の方法。
  98. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離より離れたところから前記ロケーションから前記閾値距離未満に移動したか否かを含む、請求項93又は94に記載の方法。
  99. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離未満から前記ロケーションから前記閾値距離より離れて移動したか否かを含む、請求項93又は94に記載の方法。
  100. 時間に基づく基準の指定に対応するユーザ入力を検出することと、
    前記ユーザ入力を検出したことに応じて、前記時間に基づく基準を前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準に追加することと、
    を更に含む、請求項93又は94に記載の方法。
  101. 前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が、前記少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に部分的に基づく、請求項93又は94に記載の方法。
  102. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出し、
    前記基準の指定に対応する前記ユーザ入力を検出したことに応じて、前記位置に基づく基準を、前記位置に基づく基準を含む前記少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び前記少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、前記ロケーションに関連付けられた自動化プロファイルに追加し、
    前記電子デバイスの前記位置を判定し、
    前記電子デバイスの前記判定された位置に少なくとも部分的に基づいて、前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるか否かを判定し、
    前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令を送信する、
    命令を含む、電子デバイス。
  103. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出させ、
    前記基準の指定に対応する前記ユーザ入力を検出したことに応じて、前記位置に基づく基準を、前記位置に基づく基準を含む前記少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び前記少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、前記ロケーションに関連付けられた自動化プロファイルに追加させ、
    前記電子デバイスの前記位置を判定させ、
    前記電子デバイスの前記判定された位置に少なくとも部分的に基づいて、前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるか否かを判定させ、
    前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令を送信させる、
    非一時的コンピュータ可読記憶媒体。
  104. 電子デバイスであって、
    ディスプレイと、
    タッチ感知面と、
    少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出する手段と、
    前記基準の指定に対応する前記ユーザ入力を検出したことに応じて、前記位置に基づく基準を、前記位置に基づく基準を含む前記少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び前記少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、前記ロケーションに関連付けられた自動化プロファイルに追加する手段と、
    前記電子デバイスの前記位置を判定する手段と、
    前記電子デバイスの前記判定された位置に少なくとも部分的に基づいて、前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるか否かを判定する手段と、
    前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令を送信する手段と、
    を備える、電子デバイス。
  105. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項93から101のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  106. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項93から101のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  107. ディスプレイと、
    タッチ感知面と、
    請求項93から101のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  108. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、前記処理ユニットが、
    少なくとも1つの制御可能な外部デバイスを有する第1のロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、位置に基づく基準の指定に対応するユーザ入力を検出し、
    前記基準の指定に対応する前記ユーザ入力を検出したことに応じて、前記位置に基づく基準を、前記位置に基づく基準を含む前記少なくとも1つの制御可能な外部デバイスを制御するための自動化基準、及び前記少なくとも1つの制御可能な外部デバイスの指定された状態を表すデータを含む、前記ロケーションに関連付けられた自動化プロファイルに追加し、
    前記電子デバイスの前記位置を判定し、
    前記電子デバイスの前記判定された位置に少なくとも部分的に基づいて、前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるか否かを判定し、
    前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされるという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令の送信を引き起こす、
    ように構成された、電子デバイス。
  109. 前記処理ユニットが、
    前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が満たされないという判定に従って、前記少なくとも1つの制御可能な外部デバイスを前記指定された状態に設定する命令を送信することを見合わせるように更に構成された、請求項108に記載の電子デバイス。
  110. 前記処理ユニットが、
    前記位置に基づく基準のインジケーションを有する地図ビューの表示を有効にするように更に構成された、請求項108又は109に記載の電子デバイス。
  111. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離未満にあるか否かを含む、請求項108又は109に記載の電子デバイス。
  112. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離より離れているか否かを含む、請求項108又は109に記載の電子デバイス。
  113. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離より離れたところから前記ロケーションから前記閾値距離未満に移動したか否かを含む、請求項108又は109に記載の電子デバイス。
  114. 前記位置に基づく基準が、前記電子デバイスが前記第1のロケーションから閾値距離未満から前記ロケーションから前記閾値距離より離れて移動したか否かを含む、請求項108又は109に記載の電子デバイス。
  115. 前記処理ユニットが、
    時間に基づく基準の指定に対応するユーザ入力を検出し、
    前記ユーザ入力を検出したことに応じて、前記時間に基づく基準を前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準に追加する、
    ように更に構成された、請求項108又は109に記載の電子デバイス。
  116. 前記少なくとも1つの制御可能な外部デバイスを制御するための前記自動化基準が、前記少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に部分的に基づく、請求項108又は109に記載の電子デバイス。
  117. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定することと、
    前記自動化プロファイルの前記基準が満たされるという判定に従って、前記自動化プロファイルを識別するインジケーション、及び前記自動化プロファイルの実施を確認するインジケーションを含む通知を表示することと、
    ユーザ入力を検出することと、
    前記ユーザ入力を検出したことに応じて、
    前記自動化プロファイルの実施の確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施する命令を送信することと、
    前記自動化プロファイルの実施の非確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施しない命令を送信することと、
    を含む方法。
  118. 前記自動化プロファイルの前記基準が、前記少なくとも1つの制御可能な外部デバイスに関連付けられたロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、請求項117に記載の方法。
  119. 前記自動化プロファイルの前記基準が、時刻に少なくとも部分的に基づく、請求項117又は118に記載の方法。
  120. 前記自動化プロファイルの前記基準が、前記少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に少なくとも部分的に基づく、請求項117又は118に記載の方法。
  121. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し、
    前記自動化プロファイルの前記基準が満たされるという判定に従って、前記自動化プロファイルを識別するインジケーション、及び前記自動化プロファイルの実施を確認するインジケーションを含む通知を表示し、
    ユーザ入力を検出し、
    前記ユーザ入力を検出したことに応じて、
    前記自動化プロファイルの実施の確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施する命令の送信を引き起こし、
    前記自動化プロファイルの実施の非確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施しない命令の送信を引き起こす、
    命令を含む、電子デバイス。
  122. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定させ、
    前記自動化プロファイルの前記基準が満たされるという判定に従って、前記自動化プロファイルを識別するインジケーション、及び前記自動化プロファイルの実施を確認するインジケーションを含む通知を表示させ、
    ユーザ入力を検出させ、
    前記ユーザ入力を検出したことに応じて、
    前記自動化プロファイルの実施の確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施する命令を送信させ、
    前記自動化プロファイルの実施の非確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施しない命令を送信させる、
    非一時的コンピュータ可読記憶媒体。
  123. ディスプレイと、
    タッチ感知面と、
    少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定する手段と、
    前記自動化プロファイルの前記基準が満たされるという判定に従って、前記自動化プロファイルを識別するインジケーション、及び前記自動化プロファイルの実施を確認するインジケーションを含む通知を表示する手段と、
    ユーザ入力を検出する手段と、
    前記ユーザ入力を検出したことに応じて、
    前記自動化プロファイルの実施の確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施する命令を送信し、
    前記自動化プロファイルの実施の非確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施しない命令を送信する手段と、
    を備える、電子デバイス。
  124. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項117から120のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  125. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項117から120のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  126. ディスプレイと、
    タッチ感知面と、
    請求項117から120のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  127. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、
    前記処理ユニットが、
    少なくとも1つの制御可能な外部デバイスの状態を制御するための基準、及び前記少なくとも1つの制御可能な外部デバイスに対する指定された状態を表すデータを含む自動化プロファイルの基準が満たされるか否かを判定し、
    前記自動化プロファイルの前記基準が満たされるという判定に従って、前記自動化プロファイルを識別するインジケーション、及び前記自動化プロファイルの実施を確認するインジケーションを含む通知の表示を有効にし、
    ユーザ入力を検出し、
    前記ユーザ入力を検出したことに応じて、
    前記自動化プロファイルの実施の確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施する命令の送信をさせ、
    前記自動化プロファイルの実施の非確認に対応する前記ユーザ入力に従って、前記自動化プロファイルの前記指定された状態を実施しない命令の送信をさせる、
    ように構成された、電子デバイス。
  128. 前記自動化プロファイルの前記基準が、前記少なくとも1つの制御可能な外部デバイスに関連付けられたロケーションに対する前記電子デバイスの前記位置に少なくとも部分的に基づく、請求項127に記載の電子デバイス。
  129. 前記自動化プロファイルの前記基準が、時刻に少なくとも部分的に基づく、請求項127又は128に記載の電子デバイス。
  130. 前記自動化プロファイルの前記基準が、前記少なくとも1つの制御可能な外部デバイスの第1の制御可能な外部デバイスの状態に少なくとも部分的に基づく、請求項127又は128に記載の電子デバイス。
  131. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示することと、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出することと、
    前記第1のユーザ入力が入力基準を満たすか否かを判定することと、
    前記第1のユーザ入力が前記入力基準を満たさないという判定に従って、前記制御可能な外部デバイスの前記状態を前記複数の状態の第2の状態に設定する命令を送信することと、
    前記第1のユーザ入力が前記入力基準を満たすという判定に従って、
    前記制御可能な外部デバイスの前記複数の状態を示すアフォーダンスを表示することと、
    前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスを表示している間に、前記複数の状態の第3の状態の選択に対応する前記アフォーダンス上の第2のユーザ入力を検出することと、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの前記状態を前記第3の状態に設定する命令を送信することと、
    を含む方法。
  132. 前記複数の状態の前記状態が、連続的である、請求項131に記載の方法。
  133. 前記複数の状態の前記状態が、離散的である、請求項131に記載の方法。
  134. 前記制御可能な外部デバイスが、色が調節可能な電球であり、前記複数の状態が、複数の色を含む、請求項131から133のいずれか一項に記載の方法。
  135. 前記制御可能な外部デバイスの前記表現が、前記制御可能な外部デバイスの前記現在の状態のインジケーションを含む、請求項131から133のいずれか一項に記載の方法。
  136. 前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスを表示している間に、前記アフォーダンスに対応しない前記ディスプレイ上の位置の選択に対応する第3のユーザ入力を検出することと、
    前記第3のユーザ入力を検出したことに応じて、前記アフォーダンスを表示することを停止することと、
    を更に含む、請求項131から133のいずれか一項に記載の方法。
  137. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示し、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力が入力基準を満たすか否かを判定し、
    前記第1のユーザ入力が前記入力基準を満たさないという判定に従って、前記制御可能な外部デバイスの前記状態を前記複数の状態の第2の状態に設定する命令を送信し、
    前記第1のユーザ入力が前記入力基準を満たすという判定に従って、前記制御可能な外部デバイスの前記複数の状態を示すアフォーダンスを表示し、
    前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスを表示している間に、前記複数の状態の第3の状態の選択に対応する前記アフォーダンス上の第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの前記状態を前記第3の状態に設定する命令を送信する、
    命令を含む、電子デバイス。
  138. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示させ、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出させ、
    前記第1のユーザ入力が入力基準を満たすか否かを判定させ、
    前記第1のユーザ入力が前記入力基準を満たさないという判定に従って、前記制御可能な外部デバイスの前記状態を前記複数の状態の第2の状態に設定する命令を送信させ、
    前記第1のユーザ入力が前記入力基準を満たすという判定に従って、前記制御可能な外部デバイスの前記複数の状態を示すアフォーダンスを表示させ、
    前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスを表示している間に、前記複数の状態の第3の状態の選択に対応する前記アフォーダンス上の第2のユーザ入力を検出させ、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの前記状態を前記第3の状態に設定する命令を送信させる、
    非一時的コンピュータ可読記憶媒体。
  139. ディスプレイと、
    タッチ感知面と、
    複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現を表示する手段と、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出する手段と、
    前記第1のユーザ入力が入力基準を満たすか否かを判定する手段と、
    前記第1のユーザ入力が前記入力基準を満たさないという判定に従って、前記制御可能な外部デバイスの前記状態を前記複数の状態の第2の状態に設定する命令を送信する手段と、
    前記第1のユーザ入力が前記入力基準を満たすという判定に従って、前記制御可能な外部デバイスの前記複数の状態を示すアフォーダンスを表示し、
    前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスを表示している間に、前記複数の状態の第3の状態の選択に対応する前記アフォーダンス上の第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの前記状態を前記第3の状態に設定する命令を送信する手段と、
    を備える、電子デバイス。
  140. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項131から136のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  141. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項131から136のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  142. ディスプレイと、
    タッチ感知面と、
    請求項131から136のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  143. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、
    前記処理ユニットが、
    複数の状態で動作するように構成されており、かつ複数の状態の第1の状態にある制御可能な外部デバイスの表現の表示を有効にし、
    前記制御可能な外部デバイスの選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力が入力基準を満たすか否かを判定し、
    前記第1のユーザ入力が前記入力基準を満たさないという判定に従って、前記制御可能な外部デバイスの前記状態を前記複数の状態の第2の状態に設定する命令の送信を引き起こし、
    前記第1のユーザ入力が前記入力基準を満たすという判定に従って、前記制御可能な外部デバイスの前記複数の状態を示すアフォーダンスの表示を有効にし、
    前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスを表示している間に、前記複数の状態の第3の状態の選択に対応する前記アフォーダンス上の第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記制御可能な外部デバイスの前記状態を前記第3の状態に設定する命令の送信を引き起こす、
    ように構成された、電子デバイス。
  144. 前記複数の状態の前記状態が、連続的である、請求項143に記載の電子デバイス。
  145. 前記複数の状態の前記状態が、離散的である、請求項143に記載の電子デバイス。
  146. 前記制御可能な外部デバイスが、色が調節可能な電球であり、前記複数の状態が、複数の色を含む、請求項143から145のいずれか一項に記載の電子デバイス。
  147. 前記制御可能な外部デバイスの前記表現が、前記制御可能な外部デバイスの前記現在の状態のインジケーションを含む、請求項143から145のいずれか一項に記載の電子デバイス。
  148. 前記処理ユニットが、
    前記制御可能な外部デバイスの前記複数の状態を示す前記アフォーダンスが表示されている間に、前記アフォーダンスに対応しない前記ディスプレイ上の位置の選択に対応する第3のユーザ入力を検出し、
    前記第3のユーザ入力を検出したことに応じて、前記アフォーダンスの表示を停止させる、
    ように更に構成された、請求項143から145のいずれか一項に記載の電子デバイス。
  149. ディスプレイと、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    少なくとも1つの指定された部屋を含むロケーション内の前記電子デバイスの第1の位置を判定することと、
    前記第1の位置が前記少なくとも1つの指定された部屋の第1の部屋に対応することを判定することと、
    前記第1の位置が前記第1の部屋に対応することを判定したことに応じて、前記第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示することと、
    前記第1の制御可能な外部デバイスの前記表現を表示している間に、アプリケーションを開くアフォーダンスの選択に対応する第2のユーザ入力を検出することと、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションの前記第1の部屋以外の部屋に関連付けられた複数の制御可能な外部デバイスを制御するための前記アプリケーションを開くことと、
    を含む方法。
  150. 前記第1の部屋に関連付けられた前記第1の制御可能な外部デバイスの表現を表示した後で、前記ロケーション内の前記電子デバイスの第2の位置を判定することと、
    前記第2の位置が前記第1の部屋とは異なる前記少なくとも1つの指定された部屋の第2の部屋に対応することを判定することと、
    前記第2の位置が前記第2の部屋に対応することを判定したことに応じて、
    前記第1の部屋に関連付けられた前記第1の制御可能な外部デバイスの前記表現を表示することを停止することと、
    前記第2の部屋に関連付けられた第2の制御可能な外部デバイスの表現を表示することと、
    を更に含む、請求項149に記載の方法。
  151. 前記第1の制御可能な外部デバイスの前記表現が、前記第1の制御可能な外部デバイスの現在の状態を示す、請求項149又は150に記載の方法。
  152. 第1のユーザ入力を検出することと、
    前記第1のユーザ入力を検出したことに応じて、前記第1の制御可能な外部デバイスを第1の状態に設定する命令を送信することと、
    を更に含む、請求項149又は150に記載の方法。
  153. 前記電子デバイスの前記位置が、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される、請求項149又は150に記載の方法。
  154. 前記第2のユーザ入力が、アフォーダンスの選択を含む、請求項149又は150に記載の方法。
  155. 前記部屋の前記判定に基づいて、前記判定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスを含む、前記ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現を表示することを更に含む、請求項149又は150に記載の方法。
  156. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    少なくとも1つの指定された部屋を含むロケーション内の前記電子デバイスの第1の位置を判定し、
    前記第1の位置が前記少なくとも1つの指定された部屋の第1の部屋に対応することを判定し、
    前記第1の位置が前記第1の部屋に対応することを判定したことに応じて、前記第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示し、
    前記第1の制御可能な外部デバイスの前記表現を表示している間に、アプリケーションを開くアフォーダンスの選択に対応する第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションの前記第1の部屋以外の部屋に関連付けられた複数の制御可能な外部デバイスを制御するための前記アプリケーションを開く、
    命令を含む、電子デバイス。
  157. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイを備える電子デバイスの1つ以上のプロセッサによって実行されると、前記デバイスに、
    少なくとも1つの指定された部屋を含むロケーション内の前記電子デバイスの第1の位置を判定させ、
    前記第1の位置が前記少なくとも1つの指定された部屋の第1の部屋に対応することを判定させ、
    前記第1の位置が前記第1の部屋に対応することを判定したことに応じて、前記第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示させ、
    前記第1の制御可能な外部デバイスの前記表現を表示している間に、アプリケーションを開くアフォーダンスの選択に対応する第2のユーザ入力を検出させ、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションの前記第1の部屋以外の部屋に関連付けられた複数の制御可能な外部デバイスを制御するための前記アプリケーションを開かせる、
    非一時的コンピュータ可読記憶媒体。
  158. 電子デバイスであって、
    ディスプレイと、
    少なくとも1つの指定された部屋を含むロケーション内の前記電子デバイスの第1の位置を判定する手段と、
    前記第1の位置が前記少なくとも1つの指定された部屋の第1の部屋に対応することを判定する手段と、
    前記第1の位置が前記第1の部屋に対応することを判定したことに応じて、前記第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示する手段と、
    前記第1の制御可能な外部デバイスの前記表現を表示している間に、アプリケーションを開くアフォーダンスの選択に対応する第2のユーザ入力を検出する手段と、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションの前記第1の部屋以外の部屋に関連付けられた複数の制御可能な外部デバイスを制御するための前記アプリケーションを開く手段と、
    を備える、電子デバイス。
  159. ディスプレイと、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項149から155のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  160. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイを備える電子デバイスの1つ以上のプロセッサによって実行されると、前記デバイスに請求項149から155のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  161. ディスプレイと、
    請求項149から155のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  162. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、
    前記処理ユニットが、
    少なくとも1つの指定された部屋を含むロケーション内の前記電子デバイスの第1の位置を判定し、
    前記第1の位置が前記少なくとも1つの指定された部屋の第1の部屋に対応することを判定し、
    前記第1の位置が前記第1の部屋に対応することを判定したことに応じて、前記第1の部屋に関連付けられた第1の制御可能な外部デバイスの表現を表示し、
    前記第1の制御可能な外部デバイスの前記表現を表示している間に、アプリケーションを開くアフォーダンスの選択に対応する第2のユーザ入力を検出し、
    前記第2のユーザ入力を検出したことに応じて、前記ロケーションの前記第1の部屋以外の部屋に関連付けられた複数の制御可能な外部デバイスを制御するための前記アプリケーションを開く、
    ように構成された、電子デバイス。
  163. 前記処理ユニットが、
    前記第1の部屋に関連付けられた前記第1の制御可能な外部デバイスの表現が表示された後で、前記ロケーション内の前記電子デバイスの第2の位置を判定し、
    前記第2の位置が前記第1の部屋とは異なる前記少なくとも1つの指定された部屋の第2の部屋に対応することを判定し、
    前記第2の位置が前記第2の部屋に対応することを判定したことに応じて、
    前記第1の部屋に関連付けられた前記第1の制御可能な外部デバイスの前記表現の表示を停止させ、
    前記第2の部屋に関連付けられた第2の制御可能な外部デバイスの表現の表示を有効にする、
    ように更に構成された、請求項162に記載の電子デバイス。
  164. 前記第1の制御可能な外部デバイスの前記表現が、前記第1の制御可能な外部デバイスの現在の状態を示す、請求項162又は163に記載の電子デバイス。
  165. 前記処理ユニットが、
    第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記第1の制御可能な外部デバイスを第1の状態に設定する命令の送信を引き起こす、
    ように更に構成された、請求項162又は163に記載の電子デバイス。
  166. 前記電子デバイスの前記位置が、GPS、Bluetooth、及び/又はWiFi信号を用いて判定される、請求項162又は163に記載の電子デバイス。
  167. 前記第2のユーザ入力が、アフォーダンスの選択を含む、請求項162又は163に記載の電子デバイス。
  168. 前記処理ユニットが、
    前記部屋の前記判定に基づいて、前記判定された部屋に関連付けられた少なくとも1つの制御可能な外部デバイスを含む、前記ロケーションの複数の制御可能な外部デバイスの指定された状態に関するデータを含むシーンプロファイルの表現の表示を有効にするように更に構成された、請求項162又は163に記載の電子デバイス。
  169. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    第1の個人連絡先を表す第1のアフォーダンスを表示することと、
    前記第1の個人連絡先を表す前記第1のアフォーダンスの選択に対応する第1のユーザ入力を検出することと、
    ロケーションの制御可能な外部デバイスに関する情報を含む前記ロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示することと、
    前記第2のアフォーダンスの選択に対応する第2のユーザ入力を検出することと、
    前記第1の個人連絡先に関連付けられた外部デバイスに前記ロケーションプロファイルへの前記アクセスパラメータに基づくアクセスを許可することと、
    前記第1の個人連絡先に関連付けられた前記外部デバイスに前記ロケーションプロファイルにアクセスする招待を含むデータを送信することと、
    を含む、方法。
  170. 前記第1の個人連絡先に関連付けられた前記外部デバイスに前記招待を送信した後で、前記第1の個人連絡先が前記ロケーションに招待されたというインジケーションを表示することを更に含む、請求項169に記載の方法。
  171. 前記招待が、前記ロケーションプロファイルへのアクセスを許可する前に送信され、前記方法が、
    前記第1の個人連絡先が前記招待を受け入れたことを示すデータを受信することを更に含み、
    前記第1の個人連絡先が前記招待を受け入れたことを示す前記データを受信したことに応じて、前記ロケーションプロファイルへのアクセスが前記第1の個人連絡先に関連付けられた前記外部デバイスに許可される、請求項169又は170に記載の方法。
  172. 更に、前記第1の個人連絡先が前記招待を受け入れたことを示す前記データを受信したことに応じて、前記ロケーションに対する前記第1の個人連絡先に関連付けられた前記外部デバイスの前記物理的相対位置のインジケーションを表示することを更に含む、請求項171に記載の方法。
  173. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    第1の個人連絡先を表す第1のアフォーダンスを表示し、
    前記第1の個人連絡先を表す前記第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し、
    ロケーションの制御可能な外部デバイスに関する情報を含む前記ロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示し、
    前記第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し、
    前記第1の個人連絡先に関連付けられた外部デバイスに前記ロケーションプロファイルへの前記アクセスパラメータに基づくアクセスを許可し、
    前記第1の個人連絡先に関連付けられた前記外部デバイスに前記ロケーションプロファイルにアクセスする招待を含むデータを送信する、
    命令を含む、電子デバイス。
  174. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    第1の個人連絡先を表す第1のアフォーダンスを表示させ、
    前記第1の個人連絡先を表す前記第1のアフォーダンスの選択に対応する第1のユーザ入力を検出させ、
    ロケーションの制御可能な外部デバイスに関する情報を含む前記ロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示させ、
    前記第2のアフォーダンスの選択に対応する第2のユーザ入力を検出させ、
    前記第1の個人連絡先に関連付けられた外部デバイスに前記ロケーションプロファイルへの前記アクセスパラメータに基づくアクセスを許可させ、
    前記第1の個人連絡先に関連付けられた前記外部デバイスに前記ロケーションプロファイルにアクセスする招待を含むデータを送信させる、
    非一時的コンピュータ可読記憶媒体。
  175. ディスプレイと、
    タッチ感知面と、
    第1の個人連絡先を表す第1のアフォーダンスを表示する手段と、
    前記第1の個人連絡先を表す前記第1のアフォーダンスの選択に対応する第1のユーザ入力を検出する手段と、
    ロケーションの制御可能な外部デバイスに関する情報を含む前記ロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスを表示する手段と、
    前記第2のアフォーダンスの選択に対応する第2のユーザ入力を検出する手段と、
    前記第1の個人連絡先に関連付けられた外部デバイスに前記ロケーションプロファイルへの前記アクセスパラメータに基づくアクセスを許可する手段と、
    前記第1の個人連絡先に関連付けられた前記外部デバイスに前記ロケーションプロファイルにアクセスする招待を含むデータを送信する手段と、
    を備える、電子デバイス。
  176. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項169から172のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  177. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項169から172のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  178. ディスプレイと、
    タッチ感知面と、
    請求項169から172のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  179. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、
    前記処理ユニットが、
    第1の個人連絡先を表す第1のアフォーダンスの表示を有効にし、
    前記第1の個人連絡先を表す前記第1のアフォーダンスの選択に対応する第1のユーザ入力を検出し、
    ロケーションの制御可能な外部デバイスに関する情報を含む前記ロケーションに関連付けられたロケーションプロファイルへのアクセスを判定するアクセスパラメータを表す第2のアフォーダンスの表示を有効にし、
    前記第2のアフォーダンスの選択に対応する第2のユーザ入力を検出し、
    前記第1の個人連絡先に関連付けられた外部デバイスに前記ロケーションプロファイルへの前記アクセスパラメータに基づくアクセスを許可させ、
    前記第1の個人連絡先に関連付けられた前記外部デバイスに前記ロケーションプロファイルにアクセスする招待を含むデータの送信を引き起こす、
    ように構成された、電子デバイス。
  180. 前記処理ユニットが、
    前記第1の個人連絡先に関連付けられた前記外部デバイスに前記招待が送信された後で、前記第1の個人連絡先が前記ロケーションに招待されたというインジケーションの表示を有効にするように更に構成された、請求項179に記載の電子デバイス。
  181. 前記招待が、前記ロケーションプロファイルへのアクセスを許可する前に送信され、前記処理ユニットが、前記第1の個人連絡先が前記招待を受け入れたことを示すデータを受信するように更に構成されており、
    前記第1の個人連絡先が前記招待を受け入れたことを示す前記データを受信したことに応じて、前記ロケーションプロファイルへのアクセスが前記第1の個人連絡先に関連付けられた前記外部デバイスに許可される、請求項179又は180に記載の電子デバイス。
  182. 前記処理ユニットが、
    更に、前記第1の個人連絡先が前記招待を受け入れたことを示す前記データを受信したことに応じて、前記ロケーションに対する前記第1の個人連絡先に関連付けられた前記外部デバイスの前記物理的相対位置のインジケーションの表示を有効にするように更に構成された、請求項181に記載の電子デバイス。
  183. ディスプレイと、タッチ感知面と、1つ以上のプロセッサと、メモリとを備える電子デバイスで、
    ロケーションに関する情報を含み、かつ前記ロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信することと、
    前記データを受信したことに従って、前記第1の制御可能な外部デバイスに対応するアフォーダンスを表示することと、
    前記アフォーダンスの選択に対応する第1のユーザ入力を検出することと、
    前記第1のユーザ入力を検出したことに応じて、前記ロケーションのインジケーション及び前記第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示することと、
    を含む方法。
  184. 前記第1の制御可能な外部デバイスに対応する前記アフォーダンスが、シーンプロファイルに対応し、
    前記シーンプロファイルが、前記第1の制御可能な外部デバイスの指定された状態に関するデータを含み、
    前記ユーザインタフェース画面上の前記第1の制御可能な外部デバイスの前記表現が、前記シーンプロファイルの表現を含む、請求項183に記載の方法。
  185. 前記ロケーションに関する前記情報を取得する招待を表すデータを受信することを更に含み、前記ロケーションに関する前記情報が、前記招待を受け入れた後で受信される、請求項183又は184に記載の方法。
  186. 前記ユーザインタフェース画面が、前記ロケーションのインジケーション、及び現在前記ロケーションにあるリモート電子デバイスに関連付けられた個人の表現を更に含む、請求項183又は184に記載の方法。
  187. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、
    ロケーションに関する情報を含み、かつ前記ロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し、
    前記データを受信したことに従って、前記第1の制御可能な外部デバイスに対応するアフォーダンスを表示し、
    前記アフォーダンスの選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記ロケーションのインジケーション及び前記第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する、
    命令を含む、電子デバイス。
  188. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、
    ロケーションに関する情報を含み、かつ前記ロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信させ、
    前記データを受信したことに従って、前記第1の制御可能な外部デバイスに対応するアフォーダンスを表示させ、
    前記アフォーダンスの選択に対応する第1のユーザ入力を検出させ、
    前記第1のユーザ入力を検出したことに応じて、前記ロケーションのインジケーション及び前記第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示させる、
    非一時的コンピュータ可読記憶媒体。
  189. ディスプレイと、
    タッチ感知面と、
    ロケーションに関する情報を含み、かつ前記ロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信する手段と、
    前記データを受信したことに従って、前記第1の制御可能な外部デバイスに対応するアフォーダンスを表示する手段と、
    前記アフォーダンスの選択に対応する第1のユーザ入力を検出する手段と、
    前記第1のユーザ入力を検出したことに応じて、前記ロケーションのインジケーション及び前記第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する手段と、
    を備える、電子デバイス。
  190. ディスプレイと、
    タッチ感知面と、
    1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムと、
    を備える電子デバイスであって、
    前記1つ以上のプログラムが、前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムが、請求項183から186のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  191. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムが命令を含み、前記命令が、ディスプレイと、タッチ感知面とを備える電子デバイスの、1つ以上のプロセッサによって実行されると、前記デバイスに、請求項183から186のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  192. ディスプレイと、
    タッチ感知面と、
    請求項183から186のいずれか一項に記載の方法を実行する手段と、
    を備える、電子デバイス。
  193. グラフィックユーザインタフェースを表示するように構成されたディスプレイユニットと、
    接触を受けるように構成されたタッチ感知面ユニットと、
    前記ディスプレイユニット及び前記タッチ感知面ユニットに結合された処理ユニットと、
    を備える電子デバイスであって、
    前記処理ユニットが、
    ロケーションに関する情報を含み、かつ前記ロケーションの第1の制御可能な外部デバイスに関する情報を含むデータを受信し、
    前記データを受信したことに従って、前記第1の制御可能な外部デバイスに対応するアフォーダンスを表示し、
    前記アフォーダンスの選択に対応する第1のユーザ入力を検出し、
    前記第1のユーザ入力を検出したことに応じて、前記ロケーションのインジケーション及び前記第1の制御可能な外部デバイスの表現を含むユーザインタフェース画面を表示する、
    ように構成された、電子デバイス。
  194. 前記第1の制御可能な外部デバイスに対応する前記アフォーダンスが、シーンプロファイルに対応し、前記シーンプロファイルが、前記第1の制御可能な外部デバイスの指定された状態に関するデータを含み、前記ユーザインタフェース画面上の前記第1の制御可能な外部デバイスの前記表現が、前記シーンプロファイルの表現を含む、請求項193に記載の電子デバイス。
  195. 前記処理ユニットが、
    前記ロケーションに関する前記情報を取得する招待を表すデータを受信するように更に構成されており、前記ロケーションに関する前記情報が、前記招待を受け入れた後で受信される、請求項193又は194に記載の電子デバイス。
  196. 前記ユーザインタフェース画面が、前記ロケーションのインジケーション、及び現在前記ロケーションにあるリモート電子デバイスに関連付けられた個人の表現を更に含む、請求項193又は194に記載の電子デバイス。
JP2018562659A 2016-06-12 2017-05-31 制御可能な外部デバイスを管理するためのユーザインタフェース Active JP6934892B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020047952A JP7315508B2 (ja) 2016-06-12 2020-03-18 制御可能な外部デバイスを管理するためのユーザインタフェース
JP2022155232A JP7461430B2 (ja) 2016-06-12 2022-09-28 制御可能な外部デバイスを管理するためのユーザインタフェース

Applications Claiming Priority (15)

Application Number Priority Date Filing Date Title
US201662349057P 2016-06-12 2016-06-12
US62/349,057 2016-06-12
DKPA201670603 2016-08-09
DKPA201670605 2016-08-09
DKPA201670604 2016-08-09
DKPA201670603 2016-08-09
DKPA201670605A DK179593B1 (en) 2016-06-12 2016-08-09 USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
DKPA201670604A DK179494B1 (en) 2016-06-12 2016-08-09 USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
DKPA201670601A DK179925B1 (en) 2016-06-12 2016-08-09 USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
DKPA201670602A DK179594B1 (en) 2016-06-12 2016-08-09 USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
DKPA201670602 2016-08-09
DKPA201670601 2016-08-09
US15/427,516 2017-02-08
US15/427,516 US10353576B2 (en) 2016-06-12 2017-02-08 User interface for managing controllable external devices
PCT/US2017/035293 WO2017218192A1 (en) 2016-06-12 2017-05-31 User interface for managing controllable external devices

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020047952A Division JP7315508B2 (ja) 2016-06-12 2020-03-18 制御可能な外部デバイスを管理するためのユーザインタフェース

Publications (2)

Publication Number Publication Date
JP2019526095A true JP2019526095A (ja) 2019-09-12
JP6934892B2 JP6934892B2 (ja) 2021-09-15

Family

ID=61600954

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2018562659A Active JP6934892B2 (ja) 2016-06-12 2017-05-31 制御可能な外部デバイスを管理するためのユーザインタフェース
JP2020047952A Active JP7315508B2 (ja) 2016-06-12 2020-03-18 制御可能な外部デバイスを管理するためのユーザインタフェース
JP2022155232A Active JP7461430B2 (ja) 2016-06-12 2022-09-28 制御可能な外部デバイスを管理するためのユーザインタフェース

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2020047952A Active JP7315508B2 (ja) 2016-06-12 2020-03-18 制御可能な外部デバイスを管理するためのユーザインタフェース
JP2022155232A Active JP7461430B2 (ja) 2016-06-12 2022-09-28 制御可能な外部デバイスを管理するためのユーザインタフェース

Country Status (5)

Country Link
EP (4) EP3420441A4 (ja)
JP (3) JP6934892B2 (ja)
KR (6) KR102179470B1 (ja)
CN (9) CN109167871B (ja)
AU (4) AU2017286129B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
JP2023508005A (ja) * 2019-12-18 2023-02-28 グーグル エルエルシー オペレーティングシステムレベル分散型アンビエントコンピューティング
US11785387B2 (en) 2019-05-31 2023-10-10 Apple Inc. User interfaces for managing controllable external devices

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10552009B2 (en) 2014-09-02 2020-02-04 Apple Inc. Stopwatch and timer user interfaces
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US20200270871A1 (en) 2019-02-27 2020-08-27 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US11635928B2 (en) * 2019-01-04 2023-04-25 Apple Inc. User interfaces for content streaming
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
CN117170620A (zh) 2019-05-31 2023-12-05 苹果公司 用于音频媒体控件的用户界面
WO2021042177A1 (en) * 2019-09-06 2021-03-11 Breville Pty Limited Display assembly
CN110597146A (zh) * 2019-10-08 2019-12-20 六安市三鑫电器设备有限公司 一种集成电控柜及其控制方法
CN111726390B (zh) * 2020-05-06 2022-11-25 上海融客软件科技有限公司 基于Teamcenter的接口数据交互方法、装置、设备及存储介质
CN113671858B (zh) * 2020-05-15 2023-06-27 浙江宇视科技有限公司 一种电源控制电路及装置
EP4290858A2 (en) * 2020-06-03 2023-12-13 Apple Inc. Camera and visitor user interfaces
US11589010B2 (en) 2020-06-03 2023-02-21 Apple Inc. Camera and visitor user interfaces
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
CN112147964A (zh) * 2020-09-30 2020-12-29 维沃移动通信有限公司 设备管理方法、装置、电子设备和介质
CN112466088A (zh) * 2020-12-31 2021-03-09 江苏环城电力工程有限公司 一种电力安全警示装置
WO2023114528A2 (en) * 2021-12-17 2023-06-22 Lutron Technology Company Llc Gesture-based load control
WO2023235557A1 (en) * 2022-06-03 2023-12-07 Apple Inc. User interfaces for managing accessories

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002153678A (ja) * 2001-07-13 2002-05-28 Namco Ltd 情報配信システムおよび情報記憶媒体
JP2006350819A (ja) * 2005-06-17 2006-12-28 Toshiba Corp 家電機器制御システム
JP2011124665A (ja) * 2009-12-08 2011-06-23 Mitsubishi Electric Corp リモートコントロール装置及び設備機器システム
WO2014030540A1 (ja) * 2012-08-24 2014-02-27 株式会社 東芝 遠隔操作装置
JP2014160461A (ja) * 2013-01-25 2014-09-04 Morpho Inc 画像表示装置、画像表示方法およびプログラム
US20150008845A1 (en) * 2013-07-04 2015-01-08 Lg Innotek Co., Ltd. Lighting system and method of controlling the same
JP2015070327A (ja) * 2013-09-26 2015-04-13 京セラ株式会社 機器制御装置、機器制御方法および制御システム
JP2015128043A (ja) * 2013-11-28 2015-07-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 携帯端末の制御方法
JP2015128326A (ja) * 2013-03-29 2015-07-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 情報端末のプログラム、制御方法及び情報端末
JP2015149710A (ja) * 2014-01-10 2015-08-20 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 携帯端末の制御方法及びプログラム
JP2015154253A (ja) * 2014-02-14 2015-08-24 京セラ株式会社 操作端末、プログラム、及び方法
JP2015211035A (ja) * 2014-04-25 2015-11-24 幸康電子股▲ふん▼有限公司 携帯装置を利用して照明をプランニングするシステム及びその方法

Family Cites Families (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
JPH04175921A (ja) * 1990-11-09 1992-06-23 Hitachi Ltd 宅内情報盤
JP3465914B2 (ja) * 1992-12-01 2003-11-10 松下電器産業株式会社 シーン制御処理装置
WO1999038149A1 (en) 1998-01-26 1999-07-29 Wayne Westerman Method and apparatus for integrating manual input
JP4434424B2 (ja) * 2000-04-18 2010-03-17 株式会社ルネサステクノロジ ホームエレクトロニクスシステム、ホームサーバ装置およびコンピュータをホームサーバ装置として機能させるためのプログラムを記録したコンピュータ読取可能な記録媒体
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7933945B2 (en) * 2002-06-27 2011-04-26 Openpeak Inc. Method, system, and computer program product for managing controlled residential or non-residential environments
EP1555772A3 (en) * 2004-01-15 2013-07-17 Yamaha Corporation Remote control method of external devices
US7683889B2 (en) 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US8892629B2 (en) * 2005-09-01 2014-11-18 Samsung Electronics Co., Ltd. System and method for displaying a virtual meeting room
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US8516087B2 (en) * 2006-02-14 2013-08-20 At&T Intellectual Property I, L.P. Home automation system and method
US8645463B2 (en) * 2006-09-25 2014-02-04 Cisco Technology, Inc. Methods and apparatuses for managing resources within a virtual room
US8519963B2 (en) * 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US20090232028A1 (en) * 2008-03-11 2009-09-17 Aaron Baalbergen Configuration systems and methods for utilizing location information to configure devices in application systems
CN101989072B (zh) * 2009-07-31 2012-10-03 宁波家天下智能系统有限公司 一种家居设备控制器
KR20110022980A (ko) * 2009-08-28 2011-03-08 한국산업기술대학교산학협력단 기상 및 시간 정보를 이용하여 감성조명을 제어하기 위한 장치 및 그 방법
US20110252376A1 (en) * 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications
US8638222B2 (en) * 2010-04-19 2014-01-28 Microsoft Corporation Controllable device selection based on controller location
US8854318B2 (en) * 2010-09-01 2014-10-07 Nokia Corporation Mode switching
KR101924974B1 (ko) * 2011-01-04 2018-12-04 삼성전자주식회사 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법
US20120169583A1 (en) * 2011-01-05 2012-07-05 Primesense Ltd. Scene profiles for non-tactile user interfaces
FR2973186A1 (fr) * 2011-03-22 2012-09-28 Sagemcom Broadband Sas Procede et dispositif de configuration sur la base de regles de gestion
US8489065B2 (en) * 2011-05-03 2013-07-16 Robert M Green Mobile device controller application for any security system
US11165963B2 (en) * 2011-06-05 2021-11-02 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
CN103068095A (zh) * 2011-10-21 2013-04-24 扬升照明股份有限公司 照明系统及照明系统的控制方法
JP5908253B2 (ja) * 2011-10-28 2016-04-26 シャープ株式会社 機器制御装置及び機器制御方法
EP2602677B1 (en) * 2011-12-05 2018-02-21 Nxp B.V. Localization method, computer program product and localization device
US20130225197A1 (en) * 2012-02-24 2013-08-29 Broadcom Corporation Low Power Location Beacon
KR20130115611A (ko) * 2012-04-12 2013-10-22 엘지전자 주식회사 조명 장치 및 디바이스를 이용한 조명 제어 방법
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
US9397852B2 (en) * 2012-08-31 2016-07-19 Verizon Patent And Licensing Inc. Connected home user interface systems and methods
EP4164203A1 (en) * 2012-09-10 2023-04-12 Samsung Electronics Co., Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
CN102915630A (zh) * 2012-10-10 2013-02-06 鸿富锦精密工业(深圳)有限公司 远程门铃控制系统及其智能门铃装置
CN103347116A (zh) * 2012-11-09 2013-10-09 北京深思洛克软件技术股份有限公司 一种在智能手机中设置多安全模式的系统和方法
AU2013368443B2 (en) 2012-12-29 2016-03-24 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
EP2961189B1 (en) 2013-02-20 2019-01-30 Panasonic Intellectual Property Corporation of America Methode for controlling information apparatus and program
CN106793377B (zh) * 2013-02-20 2019-03-26 松下电器(美国)知识产权公司 信息终端的控制方法以及记录介质
US20140245160A1 (en) * 2013-02-22 2014-08-28 Ubiquiti Networks, Inc. Mobile application for monitoring and controlling devices
JP2014186961A (ja) * 2013-03-25 2014-10-02 Toshiba Lighting & Technology Corp 電気機器制御システム
WO2014184700A1 (en) 2013-05-13 2014-11-20 Koninklijke Philips N.V. Device with a graphical user interface for controlling lighting properties
JP6545155B2 (ja) * 2013-06-08 2019-07-17 アップル インコーポレイテッドApple Inc. 2つ以上のディスプレイを同期させるためのデバイス、方法、及びグラフィカルユーザインタフェース
JP6305390B2 (ja) * 2013-06-24 2018-04-04 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 情報通知方法、情報端末、およびプログラム
US9454251B1 (en) * 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
CN103476169B (zh) * 2013-07-18 2016-08-24 浙江生辉照明有限公司 一种基于led照明装置的室内导航控制系统及方法
CN104345950B (zh) * 2013-08-08 2019-02-05 联想(北京)有限公司 一种信息处理的方法及电子设备
US9898642B2 (en) * 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
CN105531671A (zh) * 2013-09-13 2016-04-27 高通股份有限公司 对用户界面的前台访问具有确定性控制的无线通信设备
US10025463B2 (en) * 2013-09-18 2018-07-17 Vivint, Inc. Systems and methods for home automation scene control
WO2015054291A1 (en) * 2013-10-09 2015-04-16 Mobile Technology Corporation, LLC Systems and methods for using spatial and temporal analysis to associate data sources with mobile devices
CN104766021A (zh) * 2014-01-04 2015-07-08 深圳富泰宏精密工业有限公司 权限控制系统及方法
US9893903B2 (en) * 2014-02-24 2018-02-13 Microsoft Technology Licensing, Llc Creating connections and shared spaces
US20150256355A1 (en) * 2014-03-07 2015-09-10 Robert J. Pera Wall-mounted interactive sensing and audio-visual node devices for networked living and work spaces
US9876652B2 (en) * 2014-05-20 2018-01-23 Savant Systems, Llc Automatic configuration of control device user interface in a home automation system
US20150339917A1 (en) * 2014-05-21 2015-11-26 Qualcomm Incorporated Triggering commands on a target device in response to broadcasted event notifications
KR102454196B1 (ko) * 2014-05-27 2022-10-14 삼성전자 주식회사 디스플레이 제어 방법 및 이를 제공하는 전자 장치
WO2015184387A1 (en) * 2014-05-30 2015-12-03 Apple Inc. Accessory management system using environment model
FR3022646B1 (fr) * 2014-06-20 2017-11-10 Somfy Sas Procede de fonctionnement d'un dispositif de commande d'une installation domotique d'un batiment et dispositif de commande.
CN104155938B (zh) * 2014-07-21 2018-01-09 惠州Tcl移动通信有限公司 一种家居设备管理方法及系统
US9898175B2 (en) * 2014-08-05 2018-02-20 Fibar Group S.A. Home network manager for home automation
JP2016051661A (ja) * 2014-09-01 2016-04-11 パナソニックIpマネジメント株式会社 照明制御装置及び照明システム
US10042336B2 (en) * 2014-09-09 2018-08-07 Savant Systems, Llc User-defined scenes for home automation
JP2016063520A (ja) 2014-09-22 2016-04-25 東芝ライテック株式会社 家電制御装置、家電制御システム及び家電制御方法
CN104820631A (zh) * 2014-10-29 2015-08-05 小米科技有限责任公司 对外部设备状态的呈现方法、装置及用户终端
CN104898603B (zh) * 2015-04-07 2017-12-26 联想(北京)有限公司 信息处理方法及电子设备
CN105069118B (zh) * 2015-08-11 2018-04-03 北京思特奇信息技术股份有限公司 一种基于gis配置的应用场景管理方法及系统
CN105159107B (zh) * 2015-08-17 2019-01-04 广州市果豆科技有限责任公司 一种智能家居控制方法、控制装置及控制系统
CN105263114B (zh) * 2015-10-29 2018-10-02 广东美的制冷设备有限公司 智能家居控制的回家模式判断方法、控制设备及系统
CN105553796A (zh) * 2015-12-31 2016-05-04 杭州智蚁科技有限公司 一种基于手机定位的智能家居控制方法及系统
KR20180051739A (ko) 2016-11-08 2018-05-17 삼성디스플레이 주식회사 표시 장치
WO2018175806A1 (en) 2017-03-24 2018-09-27 Intel IP Corporation Techniques to enable physical downlink control channel communications
CN107197441A (zh) * 2017-06-20 2017-09-22 北京小米移动软件有限公司 智能家居设备的工作模式控制方法和装置
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002153678A (ja) * 2001-07-13 2002-05-28 Namco Ltd 情報配信システムおよび情報記憶媒体
JP2006350819A (ja) * 2005-06-17 2006-12-28 Toshiba Corp 家電機器制御システム
JP2011124665A (ja) * 2009-12-08 2011-06-23 Mitsubishi Electric Corp リモートコントロール装置及び設備機器システム
WO2014030540A1 (ja) * 2012-08-24 2014-02-27 株式会社 東芝 遠隔操作装置
JP2014160461A (ja) * 2013-01-25 2014-09-04 Morpho Inc 画像表示装置、画像表示方法およびプログラム
JP2015128326A (ja) * 2013-03-29 2015-07-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 情報端末のプログラム、制御方法及び情報端末
US20150008845A1 (en) * 2013-07-04 2015-01-08 Lg Innotek Co., Ltd. Lighting system and method of controlling the same
JP2015070327A (ja) * 2013-09-26 2015-04-13 京セラ株式会社 機器制御装置、機器制御方法および制御システム
JP2015128043A (ja) * 2013-11-28 2015-07-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 携帯端末の制御方法
JP2015149710A (ja) * 2014-01-10 2015-08-20 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 携帯端末の制御方法及びプログラム
JP2015154253A (ja) * 2014-02-14 2015-08-24 京セラ株式会社 操作端末、プログラム、及び方法
JP2015211035A (ja) * 2014-04-25 2015-11-24 幸康電子股▲ふん▼有限公司 携帯装置を利用して照明をプランニングするシステム及びその方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US11785387B2 (en) 2019-05-31 2023-10-10 Apple Inc. User interfaces for managing controllable external devices
US11824898B2 (en) 2019-05-31 2023-11-21 Apple Inc. User interfaces for managing a local network
JP2023508005A (ja) * 2019-12-18 2023-02-28 グーグル エルエルシー オペレーティングシステムレベル分散型アンビエントコンピューティング
JP7412564B2 (ja) 2019-12-18 2024-01-12 グーグル エルエルシー オペレーティングシステムレベル分散型アンビエントコンピューティング
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message

Also Published As

Publication number Publication date
CN109302531B (zh) 2020-09-11
EP3420441A4 (en) 2019-04-24
KR102179470B1 (ko) 2020-11-16
JP2020144871A (ja) 2020-09-10
CN111835918B (zh) 2021-09-03
CN109167871B (zh) 2021-01-08
KR20200129199A (ko) 2020-11-17
JP7315508B2 (ja) 2023-07-26
KR20190002658A (ko) 2019-01-08
EP3420441A1 (en) 2019-01-02
KR102304936B9 (ko) 2023-02-21
AU2022291522B9 (en) 2024-02-22
KR20210118958A (ko) 2021-10-01
AU2022291522B2 (en) 2024-02-15
JP6934892B2 (ja) 2021-09-15
AU2020217458B2 (en) 2022-09-22
CN113518145A (zh) 2021-10-19
JP7461430B2 (ja) 2024-04-03
AU2020217458A1 (en) 2020-09-03
EP3751405A1 (en) 2020-12-16
KR102179470B9 (ko) 2023-02-21
CN107819928B (zh) 2021-08-10
CN113518145B (zh) 2023-02-10
KR102304936B1 (ko) 2021-09-27
CN113411443A (zh) 2021-09-17
CN113535609A (zh) 2021-10-22
CN109348052A (zh) 2019-02-15
AU2017286129B2 (en) 2018-12-20
KR102520097B1 (ko) 2023-04-11
CN109117078A (zh) 2019-01-01
CN107819928A (zh) 2018-03-20
KR102060995B9 (ko) 2023-02-21
KR20230051620A (ko) 2023-04-18
AU2022291522A1 (en) 2023-02-02
CN109167871A (zh) 2019-01-08
CN109302531A (zh) 2019-02-01
KR20230003649A (ko) 2023-01-06
EP3579093A1 (en) 2019-12-11
KR20200000475A (ko) 2020-01-02
EP4134799A1 (en) 2023-02-15
CN111835918A (zh) 2020-10-27
AU2017286129A1 (en) 2018-10-25
JP2023011557A (ja) 2023-01-24
EP3579093B1 (en) 2021-10-13
AU2019201853A1 (en) 2019-04-11
CN113411443B (zh) 2022-12-06
KR102060995B1 (ko) 2019-12-31
CN109117078B (zh) 2020-01-14

Similar Documents

Publication Publication Date Title
JP7461430B2 (ja) 制御可能な外部デバイスを管理するためのユーザインタフェース
JP7236497B2 (ja) 一般的なデバイス機能にアクセスするためのデバイス及び方法
US20230082492A1 (en) User interface for managing controllable external devices
WO2017218192A1 (en) User interface for managing controllable external devices
CN113093982A (zh) 用于访问常用设备功能的设备和方法
AU2017100666A4 (en) User interface for managing controllable external devices
DK201670620A1 (en) Devices and Methods for Accessing Prevalent Device Functions

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181129

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A525

Effective date: 20181129

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190621

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190621

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191008

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20191206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200318

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20200318

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20200326

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20200330

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20200529

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20200605

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20201113

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210209

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210212

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20210312

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210507

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20210628

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20210730

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20210730

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210824

R150 Certificate of patent or registration of utility model

Ref document number: 6934892

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150