JP7126034B1 - オーディオメディア制御のためのユーザインタフェース - Google Patents

オーディオメディア制御のためのユーザインタフェース Download PDF

Info

Publication number
JP7126034B1
JP7126034B1 JP2022079682A JP2022079682A JP7126034B1 JP 7126034 B1 JP7126034 B1 JP 7126034B1 JP 2022079682 A JP2022079682 A JP 2022079682A JP 2022079682 A JP2022079682 A JP 2022079682A JP 7126034 B1 JP7126034 B1 JP 7126034B1
Authority
JP
Japan
Prior art keywords
media
input
media item
user interface
information affordance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022079682A
Other languages
English (en)
Other versions
JP2022128605A (ja
Inventor
ディビッド チャンス グラハム,
テイラー ジー. キャリガン,
パトリック エル. コフマン,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US16/583,989 external-priority patent/US10996917B2/en
Application filed by Apple Inc filed Critical Apple Inc
Priority to JP2022129377A priority Critical patent/JP2022176955A/ja
Application granted granted Critical
Publication of JP7126034B1 publication Critical patent/JP7126034B1/ja
Publication of JP2022128605A publication Critical patent/JP2022128605A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72442User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for playing music files
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback

Abstract

方法は、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを含む。電子デバイスは、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取る。第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、第1のメディアアイテムを再生するプロセスが開始され、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、第1のメディアアイテムを表す第2のメディア情報アフォーダンスが表示される。【選択図】図6A

Description

関連出願の相互参照
本出願は、2019年9月26日に出願された「USER INTERFACES FOR AUDIO MEDIA CONTROL」と題された米国特許出願第16/583,989号、2019年9月26日に出願された「USER INTERFACES FOR AUDIO MEDIA CONTROL」と題された米国特許出願第16/584,490号、2020年5月30日に出願された「USER INTERFACES FOR AUDIO MEDIA CONTROL」と題された米国仮特許出願第63/032,603号、及び2019年5月31日に出願された「USER INTERFACES FOR AUDIO MEDIA CONTROL」と題された米国仮特許出願第62/855,852号に対する優先権を主張するものであり、それらのそれぞれの内容は、その全体が参照により本明細書に組み込まれる。
本開示は、概して、コンピュータユーザインタフェースに関し、より具体的には、オーディオ再生を制御するための技術に関する。
電子デバイス、特にスマートデバイスの数は、増加し続けている。これらのデバイスは、ますます互いに相互接続されており、ますます、より能力があり、より複雑なタスクを実行している。そのため、これらのデバイスは、周到に設計されたユーザインタフェースを有することがますます期待されている。
電子デバイスを使用してオーディオ再生を制御するための一部の技術は、概して煩雑であり、非効率である。例えば、一部の既存の技術では、複数回のキー押下又は打鍵を含む場合がある、複雑かつ時間のかかるユーザインタフェースが使用されている。そのような技術は、必要以上の時間を要し、ユーザの時間及びデバイスのエネルギーを浪費する。後者の問題は、バッテリ動作式デバイスにおいては特に重大である。
したがって、本技術は、オーディオ再生を制御するための、より速く、より効率的な方法及びインタフェースを電子デバイスに提供する。そのような方法及びインタフェースは、任意選択的に、オーディオ再生を制御するための他の方法を補完する又は置き換える。そのような方法及びインタフェースは、ユーザにかかる認識的負担を低減し、より効率的なヒューマン-マシンインタフェースを作成する。バッテリ動作式コンピューティングデバイスの場合、そのような方法及びインタフェースは、電力を節約し、バッテリ充電の間隔を長くする。
方法の例を本明細書に開示する。例示的な方法は、表示デバイスを備えた電子デバイスにおいて、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出することと、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示することと、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取ることと、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信することと、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体を本明細書で説明される。例示的な非一時的コンピュータ可読記憶媒体は、表示デバイスを備える電子デバイスの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出し、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示し、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取り、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体が本明細書で説明される。例示的な一時的コンピュータ可読記憶媒体は、表示デバイスを備える電子デバイスの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出し、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示し、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取り、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、命令を含む。
例示的な電子デバイスが、本明細書で説明される。例示的な電子デバイスは、表示デバイスと、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備え、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出し、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示し、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取り、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、命令を含む。
例示的な電子デバイスは、表示デバイスと、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出する手段と、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示する手段と、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取る手段と、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、手段と、を含む。
例示的な方法は、表示デバイスを備えた電子デバイスにおいて、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出することと、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、外部デバイス上で現在再生している第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示することと、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取ることと、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイス上の第1のメディアアイテムの再生を開始することと、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、表示デバイスを備える電子デバイスの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出し、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、外部デバイス上で現在再生している第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示し、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取り、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイス上の第1のメディアアイテムの再生を開始し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体は、表示デバイスを備える電子デバイスの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出し、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、外部デバイス上で現在再生している第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示し、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取り、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイス上の第1のメディアアイテムの再生を開始し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、命令を含む。
例示的な電子デバイスは、表示デバイスと、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備え、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出し、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、外部デバイス上で現在再生している第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示し、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取り、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイス上の第1のメディアアイテムの再生を開始し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、命令を含む。
例示的な電子デバイスは、表示デバイスと、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出する手段と、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、外部デバイス上で現在再生している第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示する手段と、第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取る手段と、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイス上の第1のメディアアイテムの再生を開始し、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンスであって、第1のメディア情報アフォーダンスとは異なり、かつ第1のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示する、手段と、を含む。
例示的な方法は、表示デバイスを備えた電子デバイスにおいて、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出することと、物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することと、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出することと、物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムの再生を開始することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、表示デバイスを備える電子デバイスの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出し、物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示し、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出し、物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムの再生を開始する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体は、表示デバイスを備える電子デバイスの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出し、物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示し、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出し、物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムの再生を開始する、命令を含む。
例示的な電子デバイスは、表示デバイスと、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備え、1つ以上のプログラムは、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出し、物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示し、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出し、物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムの再生を開始する、命令を含む。
例示的な電子デバイスは、表示デバイスと、外部デバイスに接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出する手段と、物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示する手段と、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出する手段と、物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムの再生を開始する手段と、を含む。
例示的な方法は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムにおいて、表示生成構成要素を介して、第1の複数の選択可能なユーザインタフェースオブジェクトを含む第1のユーザインタフェースを表示することを含み、第1の複数の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムにコンピュータシステムの状態を変更させる、第1の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第1の外部アクセサリデバイスに第1の機能を実行させる第2の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストとは異なる第2の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第2の外部アクセサリデバイスに第2の機能を実行させる、第2の選択可能なユーザインタフェースオブジェクトとは異なる第3の選択可能なユーザインタフェースオブジェクトであって、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、ユーザインタフェースに含まれない、第3の選択可能なユーザインタフェースオブジェクトと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、表示生成構成要素を介して、第1の複数の選択可能なユーザインタフェースオブジェクトを含む第1のユーザインタフェースを表示する命令を含み、第1の複数の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムにコンピュータシステムの状態を変更させる、第1の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第1の外部アクセサリデバイスに第1の機能を実行させる第2の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストとは異なる第2の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第2の外部アクセサリデバイスに第2の機能を実行させる、第2の選択可能なユーザインタフェースオブジェクトとは異なる第3の選択可能なユーザインタフェースオブジェクトであって、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、ユーザインタフェースに含まれない、第3の選択可能なユーザインタフェースオブジェクトと、を含む。
例示的な一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、表示生成構成要素を介して、第1の複数の選択可能なユーザインタフェースオブジェクトを含む第1のユーザインタフェースを表示する命令を含み、第1の複数の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムにコンピュータシステムの状態を変更させる、第1の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第1の外部アクセサリデバイスに第1の機能を実行させる第2の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストとは異なる第2の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第2の外部アクセサリデバイスに第2の機能を実行させる、第2の選択可能なユーザインタフェースオブジェクトとは異なる第3の選択可能なユーザインタフェースオブジェクトであって、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、ユーザインタフェースに含まれない、第3の選択可能なユーザインタフェースオブジェクトと、を含む。
例示的なコンピュータシステムは、1つ以上のプロセッサであって、コンピュータシステムは、表示生成構成要素及び1つ以上の入力デバイスと通信している、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備える。1つ以上のプログラムは、表示生成構成要素を介して、第1の複数の選択可能なユーザインタフェースオブジェクトを含む第1のユーザインタフェースを表示する命令を含み、第1の複数の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムにコンピュータシステムの状態を変更させる、第1の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第1の外部アクセサリデバイスに第1の機能を実行させる第2の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストとは異なる第2の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第2の外部アクセサリデバイスに第2の機能を実行させる、第2の選択可能なユーザインタフェースオブジェクトとは異なる第3の選択可能なユーザインタフェースオブジェクトであって、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、ユーザインタフェースに含まれない、第3の選択可能なユーザインタフェースオブジェクトと、を含む。
例示的なコンピュータシステムは、表示生成構成要素を介して、第1の複数の選択可能なユーザインタフェースオブジェクトを含む第1のユーザインタフェースを表示する手段を備え、コンピュータシステムは、表示生成構成要素及び1つ以上の入力デバイスと通信しており、第1の複数の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムにコンピュータシステムの状態を変更させる、第1の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第1の外部アクセサリデバイスに第1の機能を実行させる第2の選択可能なユーザインタフェースオブジェクトと、コンピュータシステムが第1の使用コンテキストとは異なる第2の使用コンテキストにあるとの判定に従って、選択されると、複数の外部アクセサリデバイスの第2の外部アクセサリデバイスに第2の機能を実行させる、第2の選択可能なユーザインタフェースオブジェクトとは異なる第3の選択可能なユーザインタフェースオブジェクトであって、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、ユーザインタフェースに含まれない、第3の選択可能なユーザインタフェースオブジェクトと、を含む。
例示的な方法は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムにおいて、外部メディア再生デバイスの現在のメディア再生状態を示すデータを受信することと、データを受信したことに応じて、かつ外部メディア再生デバイス制御基準のセットが満たされたとの判定に従って、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースであって、外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスにメディア再生動作を変更させる、第1の選択可能なユーザインタフェースオブジェクトを含み、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第1の所定のメディアアイテムの再生を開始させる、第2の選択可能なユーザインタフェースオブジェクトと、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第2の所定のメディアアイテムの再生を開始させる、第3の選択可能なユーザインタフェースオブジェクトと、を含む、ユーザインタフェースを表示することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部メディア再生デバイスの現在のメディア再生状態を示すデータを受信し、データを受信したことに応じて、かつ外部メディア再生デバイス制御基準のセットが満たされたとの判定に従って、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースであって、外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスにメディア再生動作を変更させる、第1の選択可能なユーザインタフェースオブジェクトを含み、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第1の所定のメディアアイテムの再生を開始させる、第2の選択可能なユーザインタフェースオブジェクトと、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第2の所定のメディアアイテムの再生を開始させる、第3の選択可能なユーザインタフェースオブジェクトと、を含む、ユーザインタフェースを表示する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、外部メディア再生デバイスの現在のメディア再生状態を示すデータを受信し、データを受信したことに応じて、かつ外部メディア再生デバイス制御基準のセットが満たされたとの判定に従って、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースであって、外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスにメディア再生動作を変更させる、第1の選択可能なユーザインタフェースオブジェクトを含み、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第1の所定のメディアアイテムの再生を開始させる、第2の選択可能なユーザインタフェースオブジェクトと、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第2の所定のメディアアイテムの再生を開始させる、第3の選択可能なユーザインタフェースオブジェクトと、を含む、ユーザインタフェースを表示する、命令を含む。
例示的なコンピュータシステムは、1つ以上のプロセッサであって、コンピュータシステムは、表示生成構成要素及び1つ以上の入力デバイスと通信している、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備える。1つ以上のプログラムは、外部メディア再生デバイスの現在のメディア再生状態を示すデータを受信し、データを受信したことに応じて、かつ外部メディア再生デバイス制御基準のセットが満たされたとの判定に従って、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースであって、外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスにメディア再生動作を変更させる、第1の選択可能なユーザインタフェースオブジェクトを含み、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第1の所定のメディアアイテムの再生を開始させる、第2の選択可能なユーザインタフェースオブジェクトと、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第2の所定のメディアアイテムの再生を開始させる、第3の選択可能なユーザインタフェースオブジェクトと、を含む、ユーザインタフェースを表示する、命令を含む。
例示的なコンピュータシステムは、外部メディア再生デバイスの現在のメディア再生状態を示すデータを受信する手段であって、コンピュータシステムは、表示生成構成要素及び1つ以上の入力デバイスと通信している、手段と、データを受信したことに応じて、かつ外部メディア再生デバイス制御基準のセットが満たされたとの判定に従って、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースであって、外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスにメディア再生動作を変更させる、第1の選択可能なユーザインタフェースオブジェクトを含み、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第1の所定のメディアアイテムの再生を開始させる、第2の選択可能なユーザインタフェースオブジェクトと、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第2の所定のメディアアイテムの再生を開始させる、第3の選択可能なユーザインタフェースオブジェクトと、を含む、ユーザインタフェースを表示する手段と、を備える。
例示的な方法は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムにおいて、表示生成構成要素を介して、ユーザインタフェースであって、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、1つ以上のメディア再生デバイスの第1のセットとは異なる1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションと、を含むユーザインタフェースを表示することと、ユーザインタフェースがインジケーションを含んでいる間に、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ることと、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、かつ基準のセットが満たされたとの判定に従って、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを含む、1つ又はメディア再生デバイスの第3のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示することと、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、1つ以上のメディア再生デバイスの第1のセットとは異なる1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションと、を含むユーザインタフェースを表示し、ユーザインタフェースがインジケーションを含んでいる間に、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、かつ基準のセットが満たされたとの判定に従って、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを含む、1つ又はメディア再生デバイスの第3のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示し、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、1つ以上のメディア再生デバイスの第1のセットとは異なる1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションと、を含むユーザインタフェースを表示し、ユーザインタフェースがインジケーションを含んでいる間に、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、かつ基準のセットが満たされたとの判定に従って、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを含む、1つ又はメディア再生デバイスの第3のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示し、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止する、命令を含む。
例示的なコンピュータシステムは、1つ以上のプロセッサであって、コンピュータシステムは、表示生成構成要素及び1つ以上の入力デバイスと通信している、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備える。1つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、1つ以上のメディア再生デバイスの第1のセットとは異なる1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションと、を含むユーザインタフェースを表示し、ユーザインタフェースがインジケーションを含んでいる間に、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、かつ基準のセットが満たされたとの判定に従って、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを含む、1つ又はメディア再生デバイスの第3のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示し、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止する、命令を含む。
例示的なコンピュータシステムは、表示生成構成要素を介して、ユーザインタフェースであって、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、1つ以上のメディア再生デバイスの第1のセットとは異なる1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションと、を含むユーザインタフェースを表示する手段と、ユーザインタフェースがインジケーションを含んでいる間に、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り手段と、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、かつ基準のセットが満たされたとの判定に従って、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを含む、1つ又はメディア再生デバイスの第3のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示し、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止する、手段と、を備える。
例示的な方法は、コンピュータシステムにおいて、コンピュータシステムがメディアを1つ以上のデバイスの第1のセットに提供している間に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスであって、1つ以上のデバイスの第2のセットと通信している第1の外部デバイスから、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第1の要求を示す第1のデータを受信することと、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第2の要求を示す第2のデータであって、1つ以上のデバイスの第2のセットと通信している第2の外部デバイスから受信される、又は1つ以上のデバイスの第2のセットの第1のデバイスから受信される、第2のデータを受信することと、を含む、第1のプロセスを開始することと、第1のデータ及び第2のデータを受信した後に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、コンピュータシステムがメディアを1つ以上のデバイスの第1のセットに提供している間に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスであって、1つ以上のデバイスの第2のセットと通信している第1の外部デバイスから、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第1の要求を示す第1のデータを受信することと、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第2の要求を示す第2のデータであって、1つ以上のデバイスの第2のセットと通信している第2の外部デバイスから受信される、又は1つ以上のデバイスの第2のセットの第1のデバイスから受信される、第2のデータを受信することと、を含む、第1のプロセスを開始し、第1のデータ及び第2のデータを受信した後に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体は、コンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、コンピュータシステムがメディアを1つ以上のデバイスの第1のセットに提供している間に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスであって、1つ以上のデバイスの第2のセットと通信している第1の外部デバイスから、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第1の要求を示す第1のデータを受信することと、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第2の要求を示す第2のデータであって、1つ以上のデバイスの第2のセットと通信している第2の外部デバイスから受信される、又は1つ以上のデバイスの第2のセットの第1のデバイスから受信される、第2のデータを受信することと、を含む、第1のプロセスを開始し、第1のデータ及び第2のデータを受信した後に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する、命令を含む。
例示的なコンピュータシステムは、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリとを備える。1つ以上のプログラムは、コンピュータシステムがメディアを1つ以上のデバイスの第1のセットに提供している間に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスであって、1つ以上のデバイスの第2のセットと通信している第1の外部デバイスから、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第1の要求を示す第1のデータを受信することと、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第2の要求を示す第2のデータであって、1つ以上のデバイスの第2のセットと通信している第2の外部デバイスから受信される、又は1つ以上のデバイスの第2のセットの第1のデバイスから受信される、第2のデータを受信することと、を含む、第1のプロセスを開始し、第1のデータ及び第2のデータを受信した後に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する、命令を含む。
例示的なコンピュータシステムは、コンピュータシステムがメディアを1つ以上のデバイスの第1のセットに提供している間に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを開始する手段であって、1つ以上のデバイスの第2のセットと通信している第1の外部デバイスから、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第1の要求を示す第1のデータを受信する手段と、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第2の要求を示す第2のデータであって、1つ以上のデバイスの第2のセットと通信している第2の外部デバイスから受信される、又は1つ以上のデバイスの第2のセットの第1のデバイスから受信される、第2のデータを受信する手段と、を含む、第1のプロセスを開始する手段と、第1のデータ及び第2のデータを受信した後に、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供する手段と、を備える。
例示的な方法は、1つ以上の入力デバイスと通信しているコンピュータシステムにおいて、第1のユーザから、動作を実行する第1の要求を受信することと、第1の要求に応じて、少なくとも第1の実行パラメータに基づいて実行される第1の動作の実行を開始することと、第1の動作の実行を開始した後に、1つ以上の入力デバイスを介して、動作を実行する第2の要求を受信することと、第2の要求を受信したことに応じて、第2の要求が第1のユーザによって行われたとの判定に従って、少なくとも第1の実行パラメータに基づいて実行される第2の動作の実行を開始することと、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定に従って、第1の動作とは異なる第3の動作の実行を開始することと、を含む。
例示的な非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、第1のユーザから、動作を実行する第1の要求を受信し、第1の要求に応じて、少なくとも第1の実行パラメータに基づいて実行される第1の動作の実行を開始し、第1の動作の実行を開始した後に、1つ以上の入力デバイスを介して、動作を実行する第2の要求を受信し、第2の要求を受信したことに応じて、第2の要求が第1のユーザによって行われたとの判定に従って、少なくとも第1の実行パラメータに基づいて実行される第2の動作の実行を開始し、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定に従って、第1の動作とは異なる第3の動作の実行を開始する、命令を含む。
例示的な一時的コンピュータ可読記憶媒体は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステムの1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶し、1つ以上のプログラムは、第1のユーザから、動作を実行する第1の要求を受信し、第1の要求に応じて、少なくとも第1の実行パラメータに基づいて実行される第1の動作の実行を開始し、第1の動作の実行を開始した後に、1つ以上の入力デバイスを介して、動作を実行する第2の要求を受信し、第2の要求を受信したことに応じて、第2の要求が第1のユーザによって行われたとの判定に従って、少なくとも第1の実行パラメータに基づいて実行される第2の動作の実行を開始し、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定に従って、第1の動作とは異なる第3の動作の実行を開始する、命令を含む。
例示的なコンピュータシステムは、1つ以上のプロセッサであって、コンピュータシステムは、表示生成構成要素及び1つ以上の入力デバイスと通信している、1つ以上のプロセッサと、1つ以上のプロセッサによって実行されるように構成された1つ以上のプログラムを記憶するメモリと、を備える。1つ以上のプログラムは、第1のユーザから、動作を実行する第1の要求を受信し、第1の要求に応じて、少なくとも第1の実行パラメータに基づいて実行される第1の動作の実行を開始し、第1の動作の実行を開始した後に、1つ以上の入力デバイスを介して、動作を実行する第2の要求を受信し、第2の要求を受信したことに応じて、第2の要求が第1のユーザによって行われたとの判定に従って、少なくとも第1の実行パラメータに基づいて実行される第2の動作の実行を開始し、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定に従って、第1の動作とは異なる第3の動作の実行を開始する、命令を含む。
例示的なコンピュータシステムは、第1のユーザから、動作を実行する第1の要求を受信する手段と、第1の要求に応じて、少なくとも第1の実行パラメータに基づいて実行される第1の動作の実行を開始する手段と、第1の動作の実行を開始した後に、1つ以上の入力デバイスを介して、動作を実行する第2の要求を受信する手段と、第2の要求を受信したことに応じて、第2の要求が第1のユーザによって行われたとの判定に従って、少なくとも第1の実行パラメータに基づいて実行される第2の動作の実行を開始し、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定に従って、第1の動作とは異なる第3の動作の実行を開始する、手段と、を備える。
これらの機能を実行する実行可能命令は、任意選択的に、1つ以上のプロセッサによって実行されるために構成された非一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に含まれる。これらの機能を実行する実行可能命令は、任意選択的に、1つ以上のプロセッサによって実行されるために構成された一時的コンピュータ可読記憶媒体又は他のコンピュータプログラム製品内に含まれる。
したがって、オーディオ再生を制御するための、より速く、より効率的な方法及インタフェースがデバイスに提供され、それによって、そのようなデバイスの有効性、効率、及びユーザ満足度が増す。そのような方法及びインタフェースは、オーディオ再生を制御するための他の方法を補完する、又は置き換えることができる。
説明される様々な実施形態をより良く理解するため、以下の図面と併せて、以下の「発明を実施するための形態」が参照されるべきであり、類似の参照番号は、以下の図の全てを通じて、対応する部分を指す。
いくつかの実施形態に係る、タッチ感知ディスプレイを有するポータブル多機能デバイスを示すブロック図である。
いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。
いくつかの実施形態に係る、タッチスクリーンを有するポータブル多機能デバイスを示す図である。
いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。
いくつかの実施形態に係る、ポータブル多機能デバイス上のアプリケーションのメニューの例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、ディスプレイとは別個のタッチ感知面を有する多機能デバイスの例示的なユーザインタフェースを示す図である。
いくつかの実施形態に係る、パーソナル電子デバイスを示す図である。
いくつかの実施形態に係る、パーソナル電子デバイスを示すブロック図である。
いくつかの実施形態に係るタッチ感知ディスプレイ及び強度センサを有するパーソナル電子デバイスの例示的な構成要素を示す。 いくつかの実施形態に係るタッチ感知ディスプレイ及び強度センサを有するパーソナル電子デバイスの例示的な構成要素を示す。
いくつかの実施形態に係るパーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 いくつかの実施形態に係るパーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 いくつかの実施形態に係るパーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。 いくつかの実施形態に係るパーソナル電子デバイスの例示的な構成要素及びユーザインタフェースを示す。
いくつかの実施形態に係る電子デバイスを示す。
いくつかの実施形態に係る電子デバイスを示すブロック図である。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的なデバイスのセットを示す図である。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。 いくつかの実施形態に係る例示的なユーザインタフェースを示す。
いくつかの実施形態に係る、例示的な方法を示す。
以下の説明は、例示的な方法、パラメータなどについて記載する。しかしながら、そのような説明は、本開示の範囲に対する限定として意図されるものではなく、むしろ例示的な実施形態の説明として提供されることを認識されたい。
オーディオ再生を制御するための効率的な方法及びインタフェースを提供する電子デバイスが必要とされている。以下に記載される技術により、ユーザが、2つのデバイスを互いに近接させることによって、1つのデバイスから別のデバイスにオーディオの再生を転送することを可能にする。例えば、電話機上で音楽を再生している間に、ユーザは、無線スピーカに近接して電話機を置き、音楽の再生を無線スピーカに転送することができ、これにより、電話機よりも良好な音質を提供することができる。電話機がスピーカに近接されると、電話機上に(例えば電話機のディスプレイの上部に)通知が表示され、音楽をスピーカ上で再生することができることをユーザに通知する。通知をタップして、スピーカ上の音楽の再生を開始することができる。再生を開始する代わりに、通知を引き下げるスワイプジェスチャにより、スピーカ上で再生するために選択することができる最近の及び/又はスケジュールされたメディアアイテムの待ち行列などの追加情報を有するインタフェースを提供する。スピーカ上で再生しているオーディオメディアは、同様の方法で電話機に転送することができる。オーディオをスピーカ上で再生している間に、電話機をスピーカに近接させることにより、通知をタップすることによりスピーカから電話機にオーディオを転送すること、及び通知をスワイプすることによりスピーカ上で再生しているメディアの追加情報を表示することを除いて、上述の通知と同様の通知を電話機に表示させる。いくつかの実施形態では、通知が表示されている間に、電話機をスピーカに更により近接させて、電話機のディスプレイ上のタッチ入力なしに再生を開始することができる。そのような技術により、オーディオメディアの再生を開始するユーザの認識的負担を軽減し、それによって、生産性を高めることができる。更に、そのような技術は、普通なら冗長なユーザ入力に浪費されるプロセッサ及びバッテリの電力を低減することができる。
以下、図1A~図1B、図2、図3、図4A~図4B、及び図5A~図5Jは、イベント通知を管理するための技術を実行する例示的なデバイスの説明を提供する。図6A~図6P及び図11A~図11Dは、オーディオ再生を制御するための例示的なユーザインタフェースを示す。図7~図8は、いくつかの実施形態に係る、オーディオ再生を制御する方法を示すフロー図である。図6A~図6P及び図11A~図11Dのユーザインタフェースは、図7~図8に示すプロセスを含む、後述するプロセスを例示するために使用される。図9A~図9D及び図11A~図11Dは、オーディオ再生を制御するための例示的なユーザインタフェースを示す。図10は、いくつかの実施形態に係る、オーディオ再生を制御する方法を示すフロー図である。図9A~図9D及び図11A~図11Dのユーザインタフェースは、図10に示すプロセスを含む、後述するプロセスを例示するために使用される。図12は、いくつかの実施形態に係る、例示的なデバイスのセットを示す図である。図12の図は、図14、図18、図20、及び図23に示すプロセスを含む、後述するプロセスを例示するために使用される。図13A~図13Nは、いくつかの実施形態に係る、コントロールを管理するための例示的なユーザインタフェースを示す。図14は、いくつかの実施形態に係る、コントロールを管理する方法を示すフロー図である。図13A~図13Nのユーザインタフェースは、図14に示すプロセスを含む、後述するプロセスを例示するために使用される。図15A~図15Lは、いくつかの実施形態に係る、オーディオ再生を制御するための例示的なユーザインタフェースを示す。図16は、いくつかの実施形態に係る、オーディオ再生を制御する方法を示すフロー図である。図15A~図15Lのユーザインタフェースは、図16に示すプロセスを含む、後述するプロセスを例示するために使用される。図17A~図17Pは、いくつかの実施形態に係る、デバイスのグループ上のオーディオ再生を制御するためのコントロールを管理するための例示的なユーザインタフェースを示す。図18は、デバイスのグループ上のオーディオ再生を制御するためのコントロールを管理する方法を示すフロー図である。図17A~図17Pのユーザインタフェースは、図18に示すプロセスを含む、後述するプロセスを例示するために使用される。図19A~図19Iは、いくつかの実施形態に係る、メディアを共有するための例示的なユーザインタフェースを示す。図20は、メディアを共有する方法を示すフロー図である。図19A~図19Iのユーザインタフェースは、図20に示すプロセスを含む、後述するプロセスを例示するために使用される。図21A~図21Fは、いくつかの実施形態に係る、音声入力を管理するための例示的なユーザインタフェースを示す。図22A~図22Fは、いくつかの実施形態に係る、音声入力を管理するための例示的なユーザインタフェースを示す。図23は、いくつかの実施形態に係る、音声入力を管理する方法を示すフロー図である。図21A~図21F及び図22A~図22Fのユーザインタフェースは、図23に示すプロセスを含む、後述するプロセスを例示するために使用される。
以下の説明では、様々な要素について説明するために、「第1の」、「第2の」などの用語を使用するが、これらの要素は、それらの用語によって限定されるべきではない。これらの用語は、ある要素を別の要素と区別するためにのみ使用される。例えば、記載する様々な実施形態の範囲から逸脱することなく、第1のタッチを第2のタッチと呼ぶこともでき、同様に第2のタッチを第1のタッチと呼ぶこともできる。第1のタッチ及び第2のタッチはどちらもタッチであるが、これらは同じタッチではない。
本明細書に記載する様々な実施形態の説明で使用される術語は、特定の実施形態を説明することのみを目的とし、限定的であることは意図されていない。記載する様々な実施形態の説明及び添付の特許請求の範囲では、単数形の「a(1つ、一)」、「an(1つ、一)」、及び「the(その、この)」は、文脈上別途明白に記載しない限り、複数形も同様に含むことが意図される。また、本明細書で使用されるとき、用語「及び/又は」は、関連する列挙された項目のうちの1つ以上のいずれか及び全ての考えられる組み合わせを指し、かつこれを含むことを理解されたい。用語「includes(含む)」、「including(含む)」、「comprises(含む、備える)」、及び/又は「comprising(含む、備える)」は、本明細書で使用する場合、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はそれらのグループの存在又は追加を除外しないことが更に理解されるであろう。
「~の場合(if)」という用語は、任意選択的に、文脈に応じて、「~とき(when)」若しくは「~とき(upon)」、又は「~と判定したことに応じて(in response to determining)」若しくは「~を検出したことに応じて(in response to detecting)」を意味すると解釈される。同様に、「~と判定された場合(if it is determined)」又は「[記載の状態又はイベント]が検出された場合(if[a stated condition or event]is detected)」という語句は、任意選択的に、文脈に応じて、「~と判定したとき(upon determining)」若しくは「~と判定したことに応じて(in response to determining)」、又は「[記載の状態又はイベント]を検出したとき(upon detecting[the stated condition or event])」若しくは「[記載の状態又はイベント]を検出したことに応じて(in response to detecting[the stated condition or event])」を意味すると解釈される。
電子デバイス、そのようなデバイス用のユーザインタフェース、及びそのようなデバイスを使用する関連するプロセスの実施形態が説明される。いくつかの実施形態では、デバイスは、PDA機能及び/又は音楽プレーヤ機能などの他の機能も含む、携帯電話などのポータブル通信デバイスである。ポータブル多機能デバイスの例示的な実施形態としては、カリフォルニア州クパチーノのApple Inc.からのiPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)のデバイスが挙げられるが、これらに限定されない。任意選択的に、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を有するラップトップ又はタブレットコンピュータなどの他のポータブル電子デバイスも使用される。また、いくつかの実施形態では、デバイスはポータブル通信デバイスではなく、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を有するデスクトップコンピュータであることも理解されたい。いくつかの実施形態では、電子デバイスは、表示生成構成要素と通信する(例えば、有線通信を介した無線通信を介して)コンピュータシステムである。表示生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムとは別個である。本明細書で使用するとき、「表示する」コンテンツは、コンテンツを視覚的に生成するために、有線又は無線接続で、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部の表示生成構成要素に送信することによって、コンテンツ(例えば、ディスプレイコントローラ156によってレンダリング又はデコードされたビデオデータ)を表示させることを含む。
以下の論考では、ディスプレイ及びタッチ感知面を含む電子デバイスについて説明する。しかしながら、電子デバイスは、任意選択的に、物理キーボード、マウス、及び/又はジョイスティックなどの1つ以上の他の物理ユーザインタフェースデバイスを含むことを理解されたい。
デバイスは、通常、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、テレビ会議アプリケーション、電子メールアプリケーション、インスタントメッセージングアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション、及び/又はデジタルビデオプレーヤアプリケーションのうちの1つ以上などの様々なアプリケーションをサポートする。
本デバイス上で実行される様々なアプリケーションは、タッチ感知面などの、少なくとも1つの共通の物理ユーザインタフェースデバイスを、任意選択的に使用する。タッチ感知面の1つ以上の機能、並びにデバイス上に表示される対応する情報は、アプリケーションごとに、及び/又はそれぞれのアプリケーション内で、任意選択的に、調整及び/又は変更される。このように、デバイスの共通の物理アーキテクチャ(タッチ感知面など)は、任意選択的に、ユーザにとって直観的かつ透明なユーザインタフェースを備える様々なアプリケーションをサポートする。
ここで、タッチ感知ディスプレイを備えるポータブルデバイスの実施形態に注意を向ける。図1Aは、いくつかの実施形態に係る、タッチ感知ディスプレイシステム112を有するポータブル多機能デバイス100を示すブロック図である。タッチ感知ディスプレイ112は、便宜上「タッチスクリーン」と呼ばれることがあり、「タッチ感知ディスプレイシステム」として知られている又は呼ばれることがある。デバイス100は、メモリ102(任意選択的に、1つ以上のコンピュータ可読記憶媒体を含む)、メモリコントローラ122、1つ以上の処理ユニット(CPU)120、周辺機器インタフェース118、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、入出力(I/O)サブシステム106、他の入力コントロールデバイス116、及び外部ポート124を含む。デバイス100は、任意選択的に、1つ以上の光センサ164を含む。デバイス100は、任意選択的に、デバイス100上の接触の強度を検出する1つ以上の接触強度センサ165(例えば、デバイス100のタッチ感知ディスプレイシステム112などのタッチ感知面)を含む。デバイス100は、任意選択的に、デバイス100上で触知出力を生成する(例えばデバイス100のタッチ感知ディスプレイシステム112又はデバイス300のタッチパッド355などのタッチ感知面上で触知出力を生成する)1つ以上の触知出力生成器167を含む。これらの構成要素は、任意選択的に、1つ以上の通信バス又は信号ライン103を介して通信する。
本明細書及び特許請求において使用されるとき、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指の接触)の力若しくは圧力(単位面積当たりの力)、又はタッチ感知面上の接触の力若しくは圧力に対する代理(プロキシ)を指す。接触の強度は、少なくとも4つの別個の値を含み、より典型的には、数百の(例えば、少なくとも256の)別個の値を含む、値の範囲を有する。接触の強度は、任意選択的に、様々な手法、及び様々なセンサ又はセンサの組み合わせを使用して、判定(又は測定)される。例えば、タッチ感知面の下又はそれに隣接する1つ以上の力センサは、任意選択的に、タッチ感知面上の様々なポイントにおける力を測定するために使用される。いくつかの実装形態では、複数の力センサからの力測定値が、接触の推定される力を決定するために組み合わされる(例えば、加重平均される)。同様に、スタイラスの感圧性先端部が、任意選択的に、タッチ感知面上のスタイラスの圧力を判定するために使用される。あるいは、タッチ感知面上で検出される接触エリアのサイズ及び/若しくはその変化、接触に近接するタッチ感知面の電気容量及び/若しくはその変化、並びに/又は、接触に近接するタッチ感知面の抵抗及び/若しくはその変化が、任意選択的に、タッチ感知面上の接触の力又は圧力の代替物として使用される。一部の実装形態では、接触の力又は圧力の代替測定値が、強度閾値を上回っているかどうかを判定するために直接使用される(例えば、強度閾値は、代替測定値に対応する単位で記述される)。いくつかの実装形態では、接触力又は圧力の代理測定値は、力又は圧力の推定値に変換され、力又は圧力の推定値が、強度閾値を上回っているかどうかを判定するために使用される(例えば、強度閾値は、圧力の単位で測定される圧力閾値である)。接触の強度をユーザ入力の属性として使用することにより、アフォーダンスを表示する実装面積が限られている低減されたサイズのデバイス上で、ユーザが他の方法ではアクセス不可能であり得る追加のデバイス機能にユーザがアクセスすること(例えば、タッチ感知ディスプレイ上で)、及び/又は、ユーザ入力を受け取ること(例えば、タッチ感知ディスプレイ、タッチ感知面、又は、ノブ若しくはボタンなどの物理的/機械的コントロールを介して)が可能となる。
本明細書及び特許請求の範囲で使用されるように、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対するそのデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、そのデバイスの別の構成要素(例えば、筐体)に対する物理的変位、又は、デバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、ユーザの手の指、手のひら、又は他の部分)に接触している状況では、物理的変位によって生成された触知出力は、そのデバイス又はデバイスの構成要素の物理的特性の認識される変化に相当する触感として、ユーザによって解釈されることになる。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として、任意選択的に解釈される。場合によっては、ユーザの動作により物理的に押された(例えば、変位された)タッチ感知面に関連付けられた物理アクチュエータボタンの移動がないときでさえ、ユーザは「ダウンクリック」又は「アップクリック」などの触感を感じる。別の例として、タッチ感知面の移動は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択的に解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」「ダウンクリック」、「粗さ」)に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な(又は、平均的な)ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。
デバイス100は、ポータブル多機能デバイスの一例に過ぎず、デバイス100は、任意選択的に、示されているものよりも多くの構成要素又は少ない構成要素を有するものであり、任意選択的に、2つ以上の構成要素を組み合わせるものであり、又は、任意選択的に、それらの構成要素の異なる構成若しくは配置を有するものであることを理解されたい。図1Aに示す様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアの両方の組み合わせで実施される。
メモリ102は、任意選択的に、高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイスなどの不揮発性メモリを含む。メモリコントローラ122は、任意選択的に、デバイス100の他の構成要素によるメモリ102へのアクセスを制御する。
周辺機器インタフェース118は、デバイスの入力及び出力周辺機器をCPU120及びメモリ102に結合するために使用することができる。1つ以上のプロセッサ120は、メモリ102に記憶された様々なソフトウェアプログラム及び/又は命令セットを動作させる又は実行して、デバイス100のための様々な機能を実行し、データを処理する。いくつかの実施形態では、周辺機器インタフェース118、CPU120、及びメモリコントローラ122は、任意選択的に、チップ104などの単一のチップ上に実装される。いくつかの他の実施形態では、それらは別々のチップ上に任意選択的に実装される。
RF(radio frequency、無線周波数)回路108は、電磁信号とも呼ばれるRF信号を送受信する。RF回路108は、電気信号を電磁信号に又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路108は、任意選択的に、これらの機能を実行するための周知の回路を含み、それらの回路としては、限定するものではないが、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(subscriber identity module、SIM)カード、メモリなどが挙げられる。RF回路108は、任意選択的に、ワールドワイドウェブ(World Wide Web、WWW)とも呼ばれるインターネット、イントラネット、並びに/又はセルラー電話ネットワーク、無線ローカルエリアネットワーク(local area network、LAN)及び/若しくはメトロポリタンエリアネットワーク(metropolitan area network、MAN)などの無線ネットワークなどのネットワークと、また他のデバイスと、無線通信によって通信する。RF回路108は、任意選択的に、短距離通信無線機などによって近距離通信(near field Communication、NFC)フィールドを検出するよく知られている回路を含む。無線通信は、任意選択的に、それだけに限定されるものではないが、モバイル通信用グローバルシステム(Global System for Mobile Communications、GSM)、拡張データGSM環境(Enhanced Data GSM Environment、EDGE)、高速ダウンリンクパケットアクセス(high-speed downlink packet access、HSDPA)、高速アップリンクパケットアクセス(high-speed uplink packet access、HSUPA)、エボリューションデータオンリ(Evolution,Data-Only、EV-DO)、HSPA、HSPA+、デュアルセルHSPA(Dual-Cell HSPA、DC-HSPDA)、ロングタームエボリューション(long term evolution、LTE)、近距離通信(NFC)、広帯域符号分割多元接続(wideband code division multiple access、W-CDMA)、符号分割多元接続(code division multiple access、CDMA)、時分割多元接続(time division multiple access、TDMA)、Bluetooth、Bluetoothローエネルギー(Bluetooth Low Energy、BTLE)、ワイヤレスフィデリティ(Wireless Fidelity、Wi-Fi)(例えば、IEEE802.11a、IEEE802.11b、IEEE802.11g、IEEE802.11n、及び/若しくはIEEE802.11ac)、ボイスオーバインターネットプロトコル(voice over Internet Protocol、VoIP)、Wi-MAX、電子メール用プロトコル(例えば、インターネットメッセージアクセスプロトコル(Internet message access protocol、IMAP)及び/若しくはポストオフィスプロトコル(post office protocol、POP))、インスタントメッセージング(例えば、拡張可能なメッセージング及びプレゼンスプロトコル(extensible messaging and presence protocol、XMPP)、インスタントメッセージング及びプレゼンスレベレイジングエクステンション用のセッション開始プロトコル(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions、SIMPLE)、インスタントメッセージング及びプレゼンスサービス(Instant Messaging and Presence Service、IMPS))、並びに/若しくはショートメッセージサービス(Short Message Service、SMS)、又は本明細書の出願日の時点でまだ開発されていない通信プロトコルを含む任意の他の適切な通信プロトコルを含む、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
オーディオ回路110、スピーカ111、及びマイクロフォン113は、ユーザとデバイス100との間のオーディオインタフェースを提供する。オーディオ回路110は、周辺機器インタフェース118からオーディオデータを受信し、このオーディオデータを電気信号に変換し、この電気信号をスピーカ111に送信する。スピーカ111は電気信号を人間の可聴音波に変換する。また、オーディオ回路110は、マイクロフォン113によって音波から変換された電気信号を受信する。オーディオ回路110は、電気信号をオーディオデータに変換し、このオーディオデータを処理のために周辺機器インタフェース118に送信する。オーディオデータは、任意選択的に、周辺機器インタフェース118によって、メモリ102及び/若しくはRF回路108から取得され、かつ/又はメモリ102及び/若しくはRF回路108に伝送される。いくつかの実施形態では、オーディオ回路110はまた、ヘッドセットジャック(例えば、図2の212)を含む。ヘッドセットジャックは、オーディオ回路110と、出力専用ヘッドホン又は出力(例えば片耳又は両耳用のヘッドホン)及び入力(例えばマイクロフォン)の両方を備えるヘッドセットなどの着脱可能なオーディオ入出力周辺機器との間のインタフェースを提供する。
I/Oサブシステム106は、タッチスクリーン112及び他の入力コントロールデバイス116などのデバイス100上の入出力周辺機器を、周辺機器インタフェース118に結合する。I/Oサブシステム106は、任意選択的に、ディスプレイコントローラ156、光センサコントローラ158、深度カメラコントローラ169、強度センサコントローラ159、触覚フィードバックコントローラ161、及び、他の入力デバイス若しくは制御デバイス用の1つ以上の入力コントローラ160を含む。1つ以上の入力コントローラ160は、他の入力コントロールデバイス116からの電気信号の受信/他の入力コントロールデバイス116への電気信号の送信を行う。他の入力コントロールデバイス116は、任意選択的に、物理ボタン(例えば、プッシュボタン、ロッカボタンなど)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイールなどを含む。いくつかの実施形態では、入力コントローラ(単数又は複数)160は、任意選択的に、キーボード、赤外線ポート、USBポート、及びマウスなどのポインタデバイスのうちのいずれかに結合される(又はいずれにも結合されない)。1つ以上のボタン(例えば、図2の208)は、任意選択的に、スピーカ111及び/又はマイクロフォン113の音量コントロールのためのアップ/ダウンボタンを含む。1つ以上のボタンは、任意選択的に、プッシュボタン(例えば、図2の206)を含む。いくつかの実施形態では、電子デバイスは、1つ以上の入力デバイスと通信する(例えば、有線通信を介した無線通信を介して)コンピュータシステムである。いくつかの実施形態では、1つ以上の入力デバイスは、タッチ感知面(例えば、タッチ感知ディスプレイの一部としてのトラックパッド)を含む。いくつかの実施形態では、1つ以上の入力デバイスは、入力としてユーザのジェスチャ(例えば、ハンドジェスチャ)を追跡するためなど、1つ以上のカメラセンサ(例えば、1つ以上の光センサ164及び/又は1つ以上の深度カメラセンサ175)を含む。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。
全体が参照により本明細書に組み込まれる、2005年12月23日出願の米国特許出願第11/322,549号、「Unlocking a Device by Performing Gestures on an Unlock Image」、米国特許第7,657,849号に記載されているように、プッシュボタンの素早い押下は、任意選択的に、タッチスクリーン112のロックを解放し、又は任意選択的に、タッチスクリーン上のジェスチャを使用してデバイスをロック解除するプロセスを開始する。プッシュボタン(例えば、206)のより長い押下は、任意選択的に、デバイス100への電力をオン又はオフにする。ボタンのうちの1つ以上の機能性は、任意選択的に、ユーザによってカスタマイズ可能である。タッチスクリーン112は、仮想又はソフトボタン及び1つ以上のソフトキーボードを実装するために使用される。
タッチ感知ディスプレイ112は、デバイスとユーザとの間の入力インタフェース及び出力インタフェースを提供する。ディスプレイコントローラ156は、タッチスクリーン112からの電気信号の受信、及び/又はタッチスクリーン112への電気信号の送信を行う。タッチスクリーン112は、ユーザに対して視覚出力を表示する。この視覚出力は、グラフィック、テキスト、アイコン、動画、及びそれらの任意の組み合わせ(総称して「グラフィック」)を任意選択的に含む。いくつかの実施形態では、視覚出力の一部又は全ては、任意選択的に、ユーザインタフェースオブジェクトに対応する。
タッチスクリーン112は、触覚及び/又は触知接触に基づくユーザからの入力を受け入れるタッチ感知面、センサ、又はセンサのセットを有する。タッチスクリーン112及びディスプレイコントローラ156は、(メモリ102内の任意の関連モジュール及び/又は命令セットと共に)、タッチスクリーン112上で接触(及び任意の接触の移動又は中断)を検出し、検出された接触をタッチスクリーン112に表示されたユーザインタフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ、又は画像)との対話に変換する。例示的な実施形態では、タッチスクリーン112とユーザとの間の接触点は、ユーザの指に対応する。
タッチスクリーン112は、任意選択的に、LCD(液晶ディスプレイ)技術、LPD(発光ポリマーディスプレイ)技術、又はLED(発光ダイオード)技術を使用するが、他の実施形態では、他のディスプレイ技術も使用される。タッチスクリーン112及びディスプレイコントローラ156は、任意選択的に、それだけに限定されるものではないが、容量性、抵抗性、赤外線、及び表面音波の技術、並びにタッチスクリーン112との1つ以上の接触点を判定する他の近接センサアレイ又は他の要素を含む、現在知られている又は今後開発される複数のタッチ感知技術のうちのいずれかを使用して、接触及びそのあらゆる移動又は中断を検出する。例示的な実施形態では、カリフォルニア州クパチーノのApple Inc.からのiPhone(登録商標)及びiPod Touch(登録商標)に見られるものなどの、投影型相互静電容量感知技術が使用される。
タッチスクリーン112のいくつかの実施形態におけるタッチ感知ディスプレイは、任意選択的に、それぞれ全体が参照により本明細書に組み込まれる、米国特許第6,323,846号(Westermanら)、第6,570,557号(Westermanら)、及び/若しくは第6,677,932号(Westerman)、並びに/又は米国特許公報第2002/0015024(A1)号に記載されているマルチタッチ感知タッチパッドに類似している。しかし、タッチスクリーン112はデバイス100からの視覚出力を表示するのに対して、タッチ感知タッチパッドは視覚出力を提供しない。
タッチスクリーン112のいくつかの実施形態におけるタッチ感知ディスプレイは、以下の出願に記載されている。
(1)2006年5月2日出願の米国特許出願第11/381,313号、「Multipoint Touch Surface Controller」、(2)2004年5月6日出願の米国特許出願第10/840,862号、「Multipoint Touchscreen」、(3)2004年7月30日出願の米国特許出願第10/903,964号、「Gestures For Touch Sensitive Input Devices」、(4)2005年1月31日出願の米国特許出願第11/048,264号、「Gestures For Touch Sensitive Input Devices」、(5)2005年1月18日出願の米国特許出願第11/038,590号、「Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices」、(6)2005年9月16日出願の米国特許出願第11/228,758号、「Virtual Input Device Placement On A Touch Screen User Interface」、(7)2005年9月16日出願の米国特許出願第11/228,700号、「Operation Of A Computer With A Touch Screen Interface」、(8)2005年9月16日出願の米国特許出願第11/228,737号、「Activating Virtual Keys Of A Touch-Screen Virtual Keyboard」、及び(9)2006年3月3日出願の米国特許出願第11/367,749号、「Multi-Functional Hand-Held Device」。これらの出願は全て、全体が参照により本明細書に組み込まれる。
タッチスクリーン112は、任意選択的に、100dpiを超える動画解像度を有する。いくつかの実施形態では、タッチスクリーンは、約160dpiの動画解像度を有する。ユーザは、任意選択的に、スタイラス、指などの任意の適した物体又は付属物を使用して、タッチスクリーン112に接触する。いくつかの実施形態では、ユーザインタフェースは、指ベースの接触及びジェスチャを主に使用して動作するように設計されるが、これは、タッチスクリーン上の指の接触面積がより大きいため、スタイラスベースの入力ほど正確でない可能性がある。一部の実施形態では、デバイスは、指による粗い入力を、ユーザによって所望されているアクションを実行するための、正確なポインタ/カーソルの位置又はコマンドに変換する。
いくつかの実施形態では、タッチスクリーンに加えて、デバイス100は、任意選択的に、特定の機能をアクティブ化又は非アクティブ化するためのタッチパッドを含む。一部の実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知エリアである。タッチパッドは、任意選択的に、タッチスクリーン112とは別個のタッチ感知面又はタッチスクリーンによって形成されるタッチ感知面の拡張部である。
デバイス100は、様々な構成要素に電力を供給する電力システム162も含む。電力システム162は、任意選択的に、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ(例えば、発光ダイオード(LED))、並びにポータブルデバイス内での電力の生成、管理、及び分配に関連付けられた任意の他の構成要素を含む。
また、デバイス100は、任意選択的に、1つ以上の光センサ164を含む。図1Aは、I/Oサブシステム106内の光センサコントローラ158に結合された光センサを示す。光センサ164は、任意選択的に、電荷結合デバイス(charge-coupled device、CCD)又は相補的金属酸化物半導体(complementary metal-oxide semiconductor、CMOS)フォトトランジスタを含む。光センサ164は、1つ以上のレンズを通って投影された環境からの光を受信し、その光を、画像を表すデータに変換する。光センサ164は、撮像モジュール143(カメラモジュールとも呼ばれる)と連携して、任意選択的に、静止画像又は動画をキャプチャする。いくつかの実施形態では、光センサは、デバイスの前面にあるタッチスクリーンディスプレイ112とは反対側のデバイス100の裏面に位置し、したがってタッチスクリーンディスプレイは、静止画像及び/又は動画の取得のためのビューファインダとして使用することが可能である。いくつかの実施形態では、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で見ている間に、ユーザの画像が、任意選択的に、テレビ会議のために入手されるように、光センサはデバイスの前面に配置される。いくつかの実施形態では、光センサ164の位置は、ユーザによって(例えば、デバイス筐体内でレンズ及びセンサを回転させることによって)変更することができ、したがって単一の光センサ164が、タッチスクリーンディスプレイと共に、テレビ会議にも静止画像及び/又は動画の取得にも使用される。
デバイス100は、任意選択的に、1つ以上の深度カメラセンサ175もまた含む。図1Aは、I/Oサブシステム106内の深度カメラコントローラ169に結合された深度カメラセンサを示す。深度カメラセンサ175は、環境からデータを受信して、視点(例えば、深度カメラセンサ)からのシーン内の対象物(例えば、顔面)の3次元モデルを作成する。いくつかの実施形態では、撮像モジュール143(カメラモジュールとも呼ばれる)と連携して、深度カメラセンサ175は、任意選択的に、撮像モジュール143によってキャプチャされた画像の異なる部分の深度マップを決定するために使用される。いくつかの実施形態では、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で見る間に、任意選択的に、深度情報を有するユーザの画像をテレビ会議のために取得し、また、深度マップデータを有する自撮り画像をキャプチャするために、デバイス100の前面に深度カメラセンサが配置されている。いくつかの実施形態では、深度カメラセンサ175は、デバイスの背面に、あるいはデバイス100の背面及び前面に配置される。いくつかの実施形態では、深度カメラセンサ175の位置は、ユーザによって(例えば、デバイスハウジング内でレンズ及びセンサを回転させることによって)変更することができ、したがって深度カメラセンサ175が、タッチスクリーンディスプレイと共に、テレビ会議にも静止画像及び/又は動画の取得にも使用される。
デバイス100はまた、任意選択的に、1つ以上の接触強度センサ165を含む。図1Aは、I/Oサブシステム106内の強度センサコントローラ159に結合された、接触強度センサを示す。接触強度センサ165は、任意選択的に、1つ以上のピエゾ抵抗ひずみゲージ、容量性力センサ、電気力センサ、圧電力センサ、光学力センサ、容量性タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(若しくは圧力)を測定するために使用されるセンサ)を含む。接触強度センサ165は、接触強度情報(例えば、圧力情報、又は圧力情報に対するプロキシ)を環境から受信する。いくつかの実施形態では、少なくとも1つの接触強度センサは、タッチ感知面(例えばタッチ感知ディスプレイシステム112)と並置される、又はそれに近接される。いくつかの実施形態では、少なくとも1つの接触強度センサは、デバイス100の前面に配置されたタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置される。
また、デバイス100は、任意選択的に、1つ以上の近接センサ166を含む。図1Aは、周辺機器インタフェース118と結合された近接センサ166を示す。あるいは、近接センサ166は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。近接センサ166は、任意選択的に、全体が参照により本明細書に組み込まれる、米国特許出願第11/241,839号、「Proximity Detector In Handheld Device」、第11/240,788号、「Proximity Detector In Handheld Device」、第11/620,702号、「Using Ambient Light Sensor To Augment Proximity Sensor Output」、第11/586,862号、「Automated Response To And Sensing Of User Activity In Portable Devices」、及び第11/638,251号、「Methods And Systems For Automatic Configuration Of Peripherals」で記載されているように機能する。いくつかの実施形態では、多機能デバイスが、ユーザの耳の近くに置かれた場合(例えば、ユーザが電話をかけている場合)、近接センサは、タッチスクリーン112をオフにして無効化する。
デバイス100はまた、任意選択的に、1つ以上の触知出力生成器167を含む。図1Aは、I/Oサブシステム106内の触覚フィードバックコントローラ161に結合された、触知出力生成器を示す。触知出力生成器167は、任意選択的に、スピーカ若しくは他のオーディオ構成要素などの1つ以上の電気音響デバイス、及び/又はモータ、ソレノイド、電気活性ポリマー、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素(例えば、デバイス上で電気信号を触知出力に変換する構成要素)などのエネルギーを直線の動きに変換する電気機械デバイスを含む。接触強度センサ165は、触知フィードバック生成命令を触覚フィードバックモジュール133から受信し、デバイス100のユーザが感知することが可能な触知出力をデバイス100上に生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器は、タッチ感知面(例えば、タッチ感知ディスプレイシステム112)と並置される、又はそれに近接しており、任意選択的に、タッチ感知面を垂直方向(例えば、デバイス100の表面の内/外)に、又は水平方向(例えば、デバイス100の表面と同じ平面内の前後)に移動させることによって、触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器センサは、デバイス100の前面に配置されたタッチスクリーンディスプレイ112の反対側である、デバイス100の背面に配置される。
また、デバイス100は、任意選択的に、1つ以上の加速度計168を含む。図1Aは、周辺機器インタフェース118に結合された加速度計168を示す。あるいは、加速度計168は、任意選択的に、I/Oサブシステム106内の入力コントローラ160に結合される。加速度計168は、任意選択的に、どちらも全体が参照により本明細書に組み込まれる、米国特許公開第20050190059号、「Acceleration-based Theft Detection System for Portable Electronic Devices」、及び米国特許公開第20060017692号、「Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer」に記載されているように機能する。いくつかの実施形態では、情報は、1つ以上の加速度計から受信したデータの分析に基づいて、縦長表示又は横長表示でタッチスクリーンディスプレイに表示される。デバイス100は、加速度計(単数又は複数)168に加えて、磁気計並びにデバイス100の位置及び向き(例えば、縦方向又は横方向)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信機を任意選択的に含む。
いくつかの実施形態では、メモリ102内に記憶されているソフトウェア構成要素は、オペレーティングシステム126、通信モジュール(又は命令セット)128、接触/動きモジュール(又は命令セット)130、グラフィックモジュール(又は命令セット)132、テキスト入力モジュール(又は命令セット)134、全地球測位システム(Global Positioning System、GPS)モジュール(又は命令セット)135、及びアプリケーション(又は命令セット)136を含む。更に、いくつかの実施形態では、メモリ102(図1A)又は370(図3)は、図1A及び図3に示すように、デバイス/グローバル内部状態157を記憶する。デバイス/グローバル内部状態157は、現在アクティブ状態のアプリケーションがある場合に、どのアプリケーションがアクティブであるかを示すアクティブアプリケーション状態、どのアプリケーション、ビュー、又は他の情報がタッチスクリーンディスプレイ112の様々な領域を占めているかを示す表示状態、デバイスの様々なセンサ及び入力コントロールデバイス116から取得した情報を含むセンサ状態、並びにデバイスの位置、及び/又は姿勢に関する位置情報のうちの1つ以上を含む。
オペレーティングシステム126(例えば、Darwin、RTXC、LINUX、UNIX、OS X、iOS、WINDOWS、又はVxWorksなどの組込み型オペレーティングシステム)は、全般的なシステムタスク(例えば、メモリ管理、記憶装置制御、電力管理など)を制御及び管理する様々なソフトウェア構成要素及び/又はドライバを含み、様々なハードウェア構成要素とソフトウェア構成要素との間の通信を容易にする。
通信モジュール128は、1つ以上の外部ポート124を介して他のデバイスとの通信を容易にし、RF回路108及び/又は外部ポート124が受信したデータを処理するための様々なソフトウェア構成要素をも含む。外部ポート124(例えば、ユニバーサルシリアルバス(Universal Serial Bus、USB)、FIREWIREなど)は、直接的に、又はネットワーク(例えばインターネット、無線LANなど)を介して間接的に、他のデバイスに結合するように適合されている。いくつかの実施形態では、外部ポートは、iPod(登録商標)(Apple Inc.の商標)デバイス上で使用される30ピンコネクタと同じ若しくは同様であり、かつ/又はそれに適合しているマルチピン(例えば、30ピン)コネクタである。
接触/動きモジュール130は、任意選択的に、タッチスクリーン112及び他のタッチ感知デバイス(例えば、タッチパッド又は物理クリックホイール)との接触を(ディスプレイコントローラ156と連携して)検出する。接触/動きモジュール130は、接触が生じたかどうかを判定すること(例えば、指ダウンイベントを検出すること)、接触の強度(例えば、接触の力若しくは圧力、又は接触の力若しくは圧力の代替物)を判定すること、接触の移動が存在するかどうかを判定し、タッチ感知面を横断する移動を追跡すること(例えば、指をドラッグする1つ以上のイベントを検出すること)、及び接触が停止したかどうかを判定すること(例えば、指アップイベント又は接触の中断を検出すること)などの、接触の検出に関する様々な動作を実行するための、様々なソフトウェア構成要素を含む。接触/動きモジュール130は、タッチ感知面から接触データを受信する。一連の接触データによって表される、接触点の移動を判定することは、任意選択的に、接触点の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向の変化)を判定することを含む。これらの動作は、任意選択的に、単一の接触(例えば、1本の指の接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。いくつかの実施形態では、接触/動きモジュール130及びディスプレイコントローラ156は、タッチパッド上の接触を検出する。
いくつかの実施形態では、接触/動きモジュール130は、ユーザによって動作が実行されたかどうかを判定するために(例えば、ユーザがアイコン上で「クリック」したかどうかを判定するために)、1つ以上の強度閾値のセットを使用する。いくつかの実施形態では、強度閾値の少なくとも1つのサブセットは、ソフトウェアパラメータに従って判定される(例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって決定されるのではなく、デバイス100の物理ハードウェアを変更することなく調整することができる)。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、トラックパッド又はタッチスクリーンディスプレイハードウェアを変更することなく、広範囲の既定閾値のうちのいずれかに設定することができる。加えて、いくつかの実装形態では、デバイスのユーザに、(例えば、個々の強度閾値を調整すること、及び/又は複数の強度閾値をシステムレベルのクリック「強度」パラメータによって一度に調整することによって)強度閾値のセットのうちの1つ以上を調整するソフトウェア設定が提供される。
接触/動きモジュール130は、任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターンを有する(例えば検出される接触の動き、タイミング、及び/又は強度が異なる)。したがって、ジェスチャは、任意選択的に、特定の接触パターンを検出することによって検出される。例えば、指タップジェスチャを検出することは、指ダウンイベントを検出し、それに続いて指ダウンイベントと同じ位置(又は実質的に同じ位置)(例えば、アイコンの位置)で指アップ(リフトオフ)イベントを検出することを含む。別の例として、タッチ感知面上で指スワイプジェスチャを検出することは、指ダウンイベントを検出し、それに続いて1つ以上の指ドラッグイベントを検出し、その後それに続いて指アップ(リフトオフ)イベントを検出することを含む。
グラフィックモジュール132は、表示されるグラフィックの視覚的な影響(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚的特性)を変化させる構成要素を含む、タッチスクリーン112又は他のディスプレイ上にグラフィックをレンダリング及び表示する様々な既知のソフトウェア構成要素を含む。本明細書では、「グラフィック」という用語は、それだけに限定されるものではないが、文字、ウェブページ、アイコン(ソフトキーを含むユーザインタフェースオブジェクトなど)、デジタル画像、動画、アニメーションなどを含む、ユーザに表示することができる任意のオブジェクトを含む。
いくつかの実施形態では、グラフィックモジュール132は、使用されることになるグラフィックを表すデータを記憶する。各グラフィックには、任意選択的に、対応するコードが割り当てられる。グラフィックモジュール132は、アプリケーションなどから、必要に応じて、座標データ及び他のグラフィック特性データと共に、表示されることとなるグラフィックを指定する1つ以上のコードを受信し、次にディスプレイコントローラ156に出力する画面の画像データを生成する。
触覚フィードバックモジュール133は、触知出力生成器167によって使用される命令を生成するための様々なソフトウェア構成要素を含み、触知出力生成器167は、ユーザのデバイス100との対話に応じて、デバイス100上の1つ以上の位置での触知出力を生成する。
テキスト入力モジュール134は、任意選択で、グラフィックモジュール132の構成要素であり、様々なアプリケーション(例えば、連絡先137、電子メール140、IM141、ブラウザ147、及びテキスト入力を必要とする任意の他のアプリケーション)でテキストを入力するためのソフトキーボードを提供する。
GPSモジュール135は、デバイスの位置を判定し、この情報を様々なアプリケーションで使用するために(例えば、位置に基づくダイヤル発呼で使用するために電話138に、写真/動画のメタデータとしてカメラ143に、並びに、気象ウィジェット、地域の職業別電話帳ウィジェット、及び地図/ナビゲーションウィジェットなどの、位置に基づくサービスを提供するアプリケーションに)提供する。
アプリケーション136は、任意選択的に、以下のモジュール(又は命令セット)又はそれらのサブセット若しくはスーパーセットを含む。
●連絡先モジュール137(アドレス帳又は連絡先リストと呼ばれることもある)、
●電話モジュール138、
●テレビ会議モジュール139、
●電子メールクライアントモジュール140、
●インスタントメッセージング(Instant messaging、IM)モジュール141、
●トレーニングサポートモジュール142、
●静止画像及び/又は動画用のカメラモジュール143、
●画像管理モジュール144、
●動画プレーヤモジュール、
●音楽プレーヤモジュール、
●ブラウザモジュール147、
●カレンダーモジュール148、
●任意選択的に、気象ウィジェット149-1、株式ウィジェット149-2、計算機ウィジェット149-3、目覚まし時計ウィジェット149-4、辞書ウィジェット149-5、及びユーザによって入手された他のウィジェット、並びにユーザ作成ウィジェット149-6のうちの1つ以上を含むウィジェットモジュール149、
●ユーザ作成ウィジェット149-6を作成するためのウィジェットクリエータモジュール150、
●検索モジュール151、
●動画プレーヤモジュール及び音楽プレーヤモジュールを一体化した動画及び音楽プレーヤモジュール152、
●メモモジュール153、
●地図モジュール154、並びに/又は、
●オンラインビデオモジュール155。
任意選択的にメモリ102に記憶される他のアプリケーション136の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
連絡先モジュール137は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、任意選択的に、アドレス帳又は連絡先リストを(例えば、メモリ102又はメモリ370内の連絡先モジュール137のアプリケーション内部状態192内に記憶して)管理するために使用される。連絡先モジュール137による管理には、
アドレス帳に名前を追加すること、アドレス帳から名前(単数又は複数)を削除すること、電話番号(単数又は複数)、電子メールアドレス(単数又は複数)、実際の住所(単数又は複数)、又は他の情報を名前に関連付けること、画像を名前に関連付けること、名前を分類して並べ替えること、電話番号又は電子メールアドレスを提供して、電話138、テレビ会議モジュール139、電子メール140、又はIM141による通信を開始かつ/又は促進すること、などが含まれる。
電話モジュール138は、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、任意選択的に、電話番号に対応する文字シーケンスの入力、連絡先モジュール137内の1つ以上の電話番号へのアクセス、入力された電話番号の修正、それぞれの電話番号のダイヤル、通話の実行、並びに通話終了時の接続切断及び通話停止のために使用される。前述したように、無線通信は、任意選択的に、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
テレビ会議モジュール139は、RF回路108、オーディオ回路110、スピーカ111、マイクロフォン113、タッチスクリーン112、ディスプレイコントローラ156、光センサ164、光センサコントローラ158、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、連絡先モジュール137、及び電話モジュール138と連携して、ユーザの指示に従ってユーザと1人以上の他の参加者との間のテレビ会議を開始、実行、及び終了するための実行可能な命令を含む。
電子メールクライアントモジュール140は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ユーザの指示に応じて電子メールを作成、送信、受信、及び管理するための実行可能な命令を含む。画像管理モジュール144と連携して、電子メールクライアントモジュール140は、カメラモジュール143で撮影された静止画像又は動画画像を有する電子メールの作成及び送信を非常に容易にする。
インスタントメッセージングモジュール141は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、インスタントメッセージに対応する文字シーケンスの入力、以前に入力された文字の修正、(例えば、電話通信ベースのインスタントメッセージ向けのショートメッセージサービス(Short Message Service、SMS)若しくはマルチメディアメッセージサービス(Multimedia Message Service、MMS)プロトコル、又はインターネットベースのインスタントメッセージ向けのXMPP、SIMPLE、若しくはIMPSを使用する)それぞれのインスタントメッセージの送信、インスタントメッセージの受信、及び受信したインスタントメッセージの閲覧のための実行可能な命令を含む。いくつかの実施形態では、送信される及び/又は受信されるインスタントメッセージは、任意選択的に、MMS及び/又は拡張メッセージングサービス(Enhanced Messaging Service、EMS)でサポートされるようなグラフィック、写真、オーディオファイル、動画ファイル、及び/又は他の添付ファイルを含む。本明細書では、「インスタントメッセージング」とは、電話通信ベースのメッセージ(例えば、SMS又はMMSを使用して送信されるメッセージ)と、インターネットベースのメッセージ(例えば、XMPP、SIMPLE、又はIMPSを使用して送信されるメッセージ)との両方を指す。
トレーニングサポートモジュール142は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、地図モジュール154、及び音楽プレーヤモジュールと連携して、トレーニング(例えば、時間、距離、及び/又はカロリー燃焼の目標を有する)を作成し、トレーニングセンサ(スポーツデバイス)と通信し、トレーニングセンサデータを受信し、トレーニングをモニタするために使用されるセンサを較正し、トレーニングのための音楽を選択及び再生し、並びに、トレーニングデータを表示、記憶、及び送信するための実行可能な命令を含む。
カメラモジュール143は、タッチスクリーン112、ディスプレイコントローラ156、光センサ164、光センサコントローラ158、接触/動きモジュール130、グラフィックモジュール132、及び画像管理モジュール144と連携して、静止画像若しくは(動画ストリームを含む)動画のキャプチャ及びメモリ102内への記憶、静止画像若しくは動画の特性の修正、又はメモリ102からの静止画像若しくは動画の削除のための実行可能な命令を含む。
画像管理モジュール144は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びカメラモジュール143と連携して、静止画像及び/若しくは動画の配置、修正(例えば、編集)、又はその他の操作、ラベル付け、削除、(例えば、デジタルスライドショー若しくはアルバムにおける)提示、及び記憶のための実行可能な命令を含む。
ブラウザモジュール147は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ウェブページ又はその一部分、並びにウェブページにリンクされた添付ファイル及び他のファイルの検索、リンク、受信、及び表示を含む、ユーザの指示に従ってインターネットをブラウジングするための実行可能な命令を含む。
カレンダーモジュール148は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、ユーザの指示に従って、カレンダー及びカレンダーに関連付けられたデータ(例えば、カレンダーアイテム、to-doリストなど)を作成、表示、修正、及び記憶するための実行可能な命令を含む。
ウィジェットモジュール149は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、任意選択的に、ユーザによってダウンロード及び使用されるミニアプリケーション(例えば、気象ウィジェット149-1、株式ウィジェット149-2、計算機ウィジェット149-3、目覚まし時計ウィジェット149-4、及び辞書ウィジェット149-5)、又はユーザによって作成されたミニアプリケーション(例えば、ユーザ作成ウィジェット149-6)である。いくつかの実施形態では、ウィジェットは、HTML(Hypertext Markup Language、ハイパーテキストマークアップ言語)ファイル、CSS(Cascading Style Sheets、カスケーディングスタイルシート)ファイル、及びJavaScriptファイルを含む。いくつかの実施形態では、ウィジェットは、XML(Extensible Markup Language、拡張可能マークアップ言語)ファイル及びJavaScriptファイル(例えば、Yahoo!ウィジェット)を含む。
ウィジェットクリエータモジュール150は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、及びブラウザモジュール147と連携して、任意選択的に、ウィジェットを作成する(例えば、ウェブページのユーザ指定部分をウィジェットにする)ために、ユーザによって使用される。
検索モジュール151は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ユーザの指示に従って1つ以上の検索基準(例えば、1つ以上のユーザ指定検索語)と一致するメモリ102内の文字、音楽、サウンド、画像、動画、及び/又は他のファイルを検索するための実行可能な命令を含む。
動画及び音楽プレーヤモジュール152は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、オーディオ回路110、スピーカ111、RF回路108、及びブラウザモジュール147と連携して、MP3又はAACファイルなどの1つ以上のファイル形式で記憶された録音済みの音楽及び他のサウンドファイルをユーザがダウンロード及び再生できるようにする実行可能な命令、並びに動画を(例えば、タッチスクリーン112上又は外部ポート124を介して接続された外部のディスプレイ上に)表示、提示、又は別の方法で再生するための実行可能な命令を含む。いくつかの実施形態では、デバイス100は、任意選択的に、iPod(Apple Inc.の商標)などのMP3プレーヤの機能を含む。
メモモジュール153は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、及びテキスト入力モジュール134と連携して、ユーザの指示に従ってメモ、to-doリストなどを作成及び管理するための実行可能な命令を含む。
地図モジュール154は、RF回路108、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、テキスト入力モジュール134、GPSモジュール135、及びブラウザモジュール147と連携して、任意選択的に、ユーザの指示に従って、地図及び地図に関連付けられたデータ(例えば、運転の道順、特定の場所又はその付近の店舗及び他の見どころに関するデータ、並びに他の位置ベースのデータ)を受信、表示、修正、及び記憶するために使用される。
オンラインビデオモジュール155は、タッチスクリーン112、ディスプレイコントローラ156、接触/動きモジュール130、グラフィックモジュール132、オーディオ回路110、スピーカ111、RF回路108、テキスト入力モジュール134、電子メールクライアントモジュール140、及びブラウザモジュール147と連携して、ユーザが特定のオンラインビデオへのアクセス、特定のオンラインビデオのブラウジング、(例えば、ストリーミング及び/又はダウンロードによる)受信、(例えば、タッチスクリーン上又は外部ポート124を介して接続された外部ディスプレイ上の)再生、特定のオンラインビデオへのリンクを有する電子メールの送信、並びにH.264などの1つ以上のファイル形式のオンラインビデオの他の管理を行うことを可能にする命令を含む。いくつかの実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール140ではなく、インスタントメッセージングモジュール141が使用される。オンラインビデオアプリケーションについての追加の説明は、その内容の全体が参照により本明細書に組み込まれる、2007年6月20日出願の米国仮特許出願第60/936,562号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」、及び2007年12月31日出願の米国特許出願第11/968,067号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」を参照されたい。
上記で特定したモジュール及びアプリケーションはそれぞれ、前述した1つ以上の機能及び本出願に記載した方法(例えば、本明細書に記載したコンピュータにより実装される方法及び他の情報処理方法)を実行する実行可能な命令のセットに対応する。これらのモジュール(例えば、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、様々な実施形態において、これらのモジュールの様々なサブセットが、任意選択的に、組み合わされ、又は別の方法で再構成される。例えば、動画プレーヤモジュールは、任意選択的に、音楽プレーヤモジュールと組み合わされて、単一のモジュール(例えば、図1Aの動画及び音楽プレーヤモジュール152)にされる。いくつかの実施形態では、メモリ102は、任意選択で、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ102は、上記で説明されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
いくつかの実施形態では、デバイス100は、そのデバイスにおける既定の機能のセットの動作がタッチスクリーン及び/又はタッチパッドのみを介して実行されるデバイスである。デバイス100が動作するための主要な入力コントロールデバイスとしてタッチスクリーン及び/又はタッチパッドを使用することにより、任意選択的に、デバイス100上の物理的な入力コントロールデバイス(プッシュボタン、ダイヤルなど)の数が削減される。
タッチスクリーン及び/又はタッチパッドを通じてのみ実行される既定の機能のセットは、任意選択的に、ユーザインタフェース間のナビゲーションを含む。いくつかの実施形態では、タッチパッドは、ユーザによってタッチされたときに、デバイス100上に表示される任意のユーザインタフェースから、メインメニュー、ホームメニュー、又はルートメニューにデバイス100をナビゲートする。このような実施形態では、「メニューボタン」は、タッチパッドを使用して実装される。一部の他の実施形態では、メニューボタンは、タッチパッドではなく、物理プッシュボタン又はその他の物理入力コントロールデバイスである。
図1Bは、いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。いくつかの実施形態では、メモリ102(図1A)又は370(図3)は、イベントソータ170(例えば、オペレーティングシステム126内)と、それぞれのアプリケーション136-1(例えば、前述のアプリケーション137~151、155、380~390のうちのいずれか)とを含む。
イベントソータ170は、イベント情報を受信し、イベント情報を配信するアプリケーション136-1、及びアプリケーション136-1のアプリケーションビュー191を判定する。イベントソータ170は、イベントモニタ171及びイベントディスパッチャモジュール174を含む。いくつかの実施形態では、アプリケーション136-1は、アプリケーションがアクティブ又は実行中であるときにタッチ感知ディスプレイ112に表示される現在のアプリケーションビューを示すアプリケーション内部状態192を含む。いくつかの実施形態では、デバイス/グローバル内部状態157は、どのアプリケーション(単数又は複数)が現在アクティブであるかを判定するためにイベントソータ170によって使用され、アプリケーション内部状態192は、イベント情報が配信されるアプリケーションビュー191を判定するためにイベントソータ170によって使用される。
いくつかの実施形態では、アプリケーション内部状態192は、アプリケーション136-1が実行を再開するときに使用すべき再開情報、アプリケーション136-1によって表示されている情報を示す又は表示する準備ができたユーザインタフェース状態情報、ユーザがアプリケーション136-1の前の状態又はビューに戻ることを可能にする状態キュー、及びユーザによって行われた前のアクションのリドゥ/アンドゥキューのうちの1つ以上などの追加の情報を含む。
イベントモニタ171は、周辺機器インタフェース118からイベント情報を受信する。イベント情報は、サブイベント(例えば、タッチ感知ディスプレイ112でのマルチタッチジェスチャの一部としてのユーザタッチ)に関する情報を含む。周辺機器インタフェース118は、I/Oサブシステム106、又は近接センサ166、加速度計(単数又は複数)168、及び/若しくは(オーディオ回路110を介した)マイクロフォン113などのセンサから受信する情報を送信する。周辺機器インタフェース118がI/Oサブシステム106から受信する情報は、タッチ感知ディスプレイ112又はタッチ感知面からの情報を含む。
いくつかの実施形態では、イベントモニタ171は、所定の間隔で周辺機器インタフェース118に要求を送信する。それに応じて、周辺機器インタフェース118は、イベント情報を送信する。他の実施形態では、周辺機器インタフェース118は、重要なイベント(例えば、所定のノイズ閾値を上回る及び/又は所定の持続時間を超える入力の受信)があるときのみイベント情報を送信する。
いくつかの実施形態では、イベントソータ170はまた、ヒットビュー判定モジュール172及び/又はアクティブイベント認識部判定モジュール173を含む。
ヒットビュー判定モジュール172は、タッチ感知ディスプレイ112が2つ以上のビューを表示しているときに、サブイベントが1つ以上のビュー内のどこで起きたかを判定するソフトウェア手順を提供する。ビューは、ユーザがディスプレイ上で見ることができる制御装置及び他の要素から構成されている。
アプリケーションに関連付けられたユーザインタフェースの別の態様は、本明細書ではアプリケーションビュー又はユーザインタフェースウィンドウと呼ばれることもあるビューのセットであり、その中で情報が表示され、タッチに基づくジェスチャが生じる。タッチが検出される(それぞれのアプリケーションの)アプリケーションビューは、任意選択的に、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルビューは、任意選択的に、ヒットビューと呼ばれ、また、適切な入力として認識されるイベントのセットは、任意選択的に、タッチによるジェスチャを開始する初期タッチのヒットビューに少なくとも部分的に基づいて決定される。
ヒットビュー判定モジュール172は、タッチに基づくジェスチャのサブイベントに関連する情報を受信する。アプリケーションが階層状に構成された複数のビューを有するとき、ヒットビュー判定モジュール172は、サブイベントを処理すべき階層内の最下位のビューとして、ヒットビューを特定する。ほとんどの状況では、ヒットビューは、開始サブイベント(例えば、イベント又は潜在的イベントを形成するサブイベントシーケンスにおける第1のサブイベント)が発生する最も低いレベルのビューである。ヒットビューがヒットビュー判定モジュール172によって特定されると、ヒットビューは、通常、ヒットビューとして特定されたタッチ又は入力ソースと同じタッチ又は入力ソースに関係する全てのサブイベントを受信する。
アクティブイベント認識部判定モジュール173は、ビュー階層内のどのビュー(単数又は複数)がサブイベントの特定のシーケンスを受信すべきかを判定する。いくつかの実施形態では、アクティブイベント認識部判定モジュール173は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール173は、サブイベントの物理位置を含む全てのビューがアクティブに関わりがあるビューであると判定し、したがって、全てのアクティブに関わりがあるビューが、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントが1つの特定のビューに関連付けられたエリアに完全に限定された場合でも、階層内の上位のビューは、依然としてアクティブに関わりがあるビューであり続ける。
イベントディスパッチャモジュール174は、イベント情報をイベント認識部(例えばイベント認識部180)にディスパッチする。アクティブイベント認識部判定モジュール173を含む実施形態では、イベントディスパッチャモジュール174は、アクティブイベント認識部判定モジュール173により判定されたイベント認識部にイベント情報を配信する。いくつかの実施形態では、イベントディスパッチャモジュール174は、それぞれのイベント受信部182によって取得されるイベント情報をイベントキューに記憶する。
いくつかの実施形態では、オペレーティングシステム126は、イベントソータ170を含む。あるいは、アプリケーション136-1がイベントソータ170を含む。更に他の実施形態では、イベントソータ170は、独立型のモジュールであり、又は接触/動きモジュール130などのメモリ102内に記憶されている別のモジュールの一部分である。
いくつかの実施形態では、アプリケーション136-1は、それぞれがアプリケーションのユーザインタフェースのそれぞれのビュー内で発生するタッチイベントを処理するための命令を含む、複数のイベント処理部190及び1つ以上のアプリケーションビュー191を含む。アプリケーション136-1の各アプリケーションビュー191は、1つ以上のイベント認識部180を含む。典型的には、それぞれのアプリケーションビュー191は、複数のイベント認識部180を含む。他の実施形態では、イベント認識部180のうちの1つ以上は、ユーザインタフェースキット、又は、アプリケーション136-1がメソッド及び他のプロパティを継承する上位レベルのオブジェクトなどの、別個のモジュールの一部である。いくつかの実施形態では、それぞれのイベント処理部190は、データ更新部176、オブジェクト更新部177、GUI更新部178、及び/又はイベントソータ170から受信されたイベントデータ179、のうちの1つ以上を含む。イベント処理部190は、任意選択的に、データ更新部176、オブジェクト更新部177、又はGUI更新部178を利用し又は呼び出して、アプリケーション内部状態192を更新する。あるいは、アプリケーションビュー191のうちの1つ以上が、1つ以上のそれぞれのイベント処理部190を含む。また、いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178のうちの1つ以上は、それぞれのアプリケーションビュー191に含まれる。
それぞれのイベント認識部180は、イベントソータ170からイベント情報(例えば、イベントデータ179)を受信し、イベント情報からイベントを特定する。イベント認識部180は、イベント受信部182及びイベント比較部184を含む。いくつかの実施形態では、イベント認識部180はまた、メタデータ183及びイベント配信命令188(任意選択的にサブイベント配信命令を含む)の少なくともサブセットも含む。
イベント受信部182は、イベントソータ170からイベント情報を受信する。イベント情報は、サブイベント、例えば、タッチ又はタッチの移動についての情報を含む。サブイベントに応じて、イベント情報はまた、サブイベントの位置などの追加の情報を含む。サブイベントがタッチの動きに関わるとき、イベント情報はまた任意選択的に、サブイベントの速さ及び方向を含む。一部の実施形態では、イベントは、1つの向きから別の向きへの(例えば、縦向きから横向きへ、又はその逆の)デバイスの回転を含み、イベント情報は、デバイスの現在の向き(デバイスの姿勢とも呼ぶ)についての対応する情報を含む。
イベント比較部184は、イベント情報を、定義済みのイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント又はサブイベントを判定するか、あるいはイベント又はサブイベントの状態を判定若しくは更新する。いくつかの実施形態では、イベント比較部184は、イベント定義186を含む。イベント定義186は、例えばイベント1(187-1)及びイベント2(187-2)などのイベント(例えば、既定のサブイベントのシーケンス)の定義を含む。いくつかの実施形態では、イベント(187)内のサブイベントは、例えば、タッチの開始、タッチの終了、タッチの移動、タッチの取り消し、及び複数のタッチを含む。一実施例では、イベント1(187-1)についての定義は、表示されたオブジェクト上のダブルタップである。ダブルタップは、例えば、所定の段階に対する表示オブジェクト上の第1のタッチ(タッチ開始)、所定の段階に対する第1のリフトオフ(タッチ終了)、所定の段階に対する表示オブジェクト上の第2のタッチ(タッチ開始)、及び所定の段階に対する第2のリフトオフ(タッチ終了)を含む。別の実施例では、イベント2(187-2)の定義は、表示されたオブジェクト上のドラッグである。ドラッグは、例えば、所定の段階に対する表示オブジェクト上のタッチ(又は接触)、タッチ感知ディスプレイ112にわたるタッチの移動、及びタッチのリフトオフ(タッチ終了)を含む。いくつかの実施形態では、イベントは、1つ以上の関連付けられたイベント処理部190に関する情報も含む。
いくつかの実施形態では、イベント定義187は、それぞれのユーザインタフェースオブジェクトについてのイベントの定義を含む。いくつかの実施形態では、イベント比較部184は、どのユーザインタフェースオブジェクトがサブイベントに関連付けられているかを判定するヒットテストを実行する。例えば、タッチ感知ディスプレイ112に3つのユーザインタフェースオブジェクトが表示されているアプリケーションビュー内で、タッチ感知ディスプレイ112上でタッチが検出されると、イベント比較部184は、ヒットテストを実行して、3つのユーザインタフェースオブジェクトのうちのどれがタッチ(サブイベント)に関連付けられているかを判定する。表示された各オブジェクトが、それぞれのイベント処理部190に関連付けられている場合、イベント比較部は、ヒットテストの結果を用いて、どのイベント処理部190をアクティブ化すべきかを判定する。例えば、イベント比較部184は、ヒットテストをトリガするサブイベント及びオブジェクトに関連付けられたイベント処理部を選択する。
いくつかの実施形態では、それぞれのイベント187の定義は、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するかどうかが判定されるまで、イベント情報の伝送を遅らせる遅延アクションも含む。
それぞれのイベント認識部180が一連のサブイベントがイベント定義186のイベントのいずれとも一致しないと判断した場合、それぞれのイベント認識部180は、イベント不可能、イベント失敗、又はイベント終了の状態に入り、その後は、タッチに基づくジェスチャの次のサブイベントを無視する。この状況では、ヒットビューについてアクティブのままである他のイベント認識部があれば、そのイベント認識部は、進行中のタッチによるジェスチャのサブイベントの追跡及び処理を続行する。
いくつかの実施形態では、それぞれのイベント認識部180は、イベント配信システムがどのようにサブイベント配信を実行すべきかをアクティブに関与しているイベント認識部に示す構成可能なプロパティ、フラグ、及び/又はリストを有するメタデータ183を含む。いくつかの実施形態では、メタデータ183は、イベント認識部が互いにどのように対話するか、又はイベント認識部が互いにどのように対話することが可能となるかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。いくつかの実施形態では、メタデータ183は、サブイベントがビュー階層又はプログラム階層における多様なレベルに配信されるかを示す構成可能なプロパティ、フラグ、及び/又はリストを含む。
いくつかの実施形態では、それぞれのイベント認識部180は、イベントの1つ以上の特定のサブイベントが認識されるときに、イベントに関連付けられたイベント処理部190をアクティブ化する。いくつかの実施形態では、それぞれのイベント認識部180は、イベントに関連付けられたイベント情報をイベント処理部190に配信する。イベント処理部190をアクティブ化することは、それぞれのヒットビューにサブイベントを送信する(及び、送信を延期する)こととは別個である。いくつかの実施形態では、イベント認識部180は、認識したイベントに関連付けられたフラグを投入し、そのフラグに関連付けられたイベント処理部190は、そのフラグを捕らえ、既定のプロセスを実行する。
いくつかの実施形態では、イベント配信命令188は、イベント処理部をアクティブ化することなくサブイベントについてのイベント情報を配信するサブイベント配信命令を含む。代わりに、サブイベント配信命令は、一連のサブイベントと関連付けられたイベント処理部に、又はアクティブに関与しているビューにイベント情報を配信する。一連のサブイベント又はアクティブに関与しているビューと関連付けられたイベント処理部は、イベント情報を受信し、所定の処理を実行する。
いくつかの実施形態では、データ更新部176は、アプリケーション136-1で使用されるデータを作成及び更新する。例えば、データ更新部176は、連絡先モジュール137で使用される電話番号を更新し、又は動画プレーヤモジュールで使用される動画ファイルを記憶する。いくつかの実施形態では、オブジェクト更新部177は、アプリケーション136-1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクト更新部177は、新たなユーザインタフェースオブジェクトを作成し、又はユーザインタフェースオブジェクトの位置を更新する。GUI更新部178は、GUIを更新する。例えば、GUI更新部178は、表示情報を準備し、タッチ感知ディスプレイ上に表示するために表示情報をグラフィックモジュール132に送る。
いくつかの実施形態では、イベント処理部(単数又は複数)190は、データ更新部176、オブジェクト更新部177、及びGUI更新部178を含む又はそれらへのアクセスを有する。いくつかの実施形態では、データ更新部176、オブジェクト更新部177、及びGUI更新部178は、それぞれのアプリケーション136-1又はアプリケーションビュー191の単一モジュールに含まれる。他の実施形態では、それらは、2つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の記載は、入力デバイスを用いて多機能デバイス100を動作させるための他の形態のユーザ入力にも適用されるが、それらの全てがタッチスクリーン上で開始されるわけではないことを理解されたい。例えば、キーボードの単一又は複数の押圧若しくは保持と任意選択的に連携される、マウスの移動及びマウスボタンの押圧、タッチパッド上のタップ、ドラッグ、スクロールなどの接触の移動、ペンスタイラス入力、デバイスの移動、口頭による命令、検出された眼球運動、バイオメトリック入力、並びに/又はそれらの任意の組み合わせを、任意選択的に、認識するイベントを定義するサブイベントに対応する入力として利用する。
図2は、いくつかの実施形態に係る、タッチスクリーン112を有するポータブル多機能デバイス100を示す。タッチスクリーンは、任意選択的に、ユーザインタフェース(user interface、UI)200内に1つ以上のグラフィックを表示する。本実施形態、並びに以下で説明される他の実施形態では、ユーザは、例えば、1本以上の指202(図には正確な縮尺では描かれていない)又は1つ以上のスタイラス203(図には正確な縮尺では描かれていない)を使用して、グラフィック上でジェスチャを実施することによって、それらのグラフィックのうちの1つ以上を選択することが可能となる。一部の実施形態では、1つ以上のグラフィックの選択は、ユーザが、その1つ以上のグラフィックとの接触を中断する場合に実施される。いくつかの実施形態では、ジェスチャは、デバイス100と接触した指の、1回以上のタップ、1回以上のスワイプ(左から右へ、右から左へ、上向きに及び/若しくは下向きに)、並びに/又は、ローリング(右から左へ、左から右へ、上向きに及び/若しくは下向きに)を、任意選択的に含む。一部の実装形態又は状況では、グラフィックとの不測の接触は、そのグラフィックを選択するものではない。例えば、選択に対応するジェスチャがタップである場合、アプリケーションアイコンの上をスイープするスワイプジェスチャは、任意選択的に、対応するアプリケーションを選択するものではない。
デバイス100は、任意選択的に、「ホーム」ボタン又はメニューボタン204などの1つ以上の物理ボタンをまた含む。前述したように、メニューボタン204は、任意選択的にデバイス100上で実行される1組のアプリケーション内の任意のアプリケーション136にナビゲートするために、任意選択的に使用される。あるいは、いくつかの実施形態では、メニューボタンは、タッチスクリーン112に表示されるGUI内のソフトキーとして実装される。
いくつかの実施形態では、デバイス100は、タッチスクリーン112、メニューボタン204、デバイスの電源をオン/オフにしてデバイスをロックするプッシュボタン206、音量調整ボタン208、加入者識別モジュール(SIM)カードスロット210、ヘッドセットジャック212、及びドッキング/充電用外部ポート124を含む。プッシュボタン206は、任意選択的に、ボタンを押し下げて、既定の期間にわたってボタンを押し下げた状態に保持することによって、デバイスの電源をオン/オフするため、ボタンを押し下げて、既定の時間が経過する前にボタンを解放することによってデバイスをロックするため、及び/又はデバイスをロック解除する、若しくはロック解除プロセスを開始するために、使用される。代替の実施形態では、デバイス100は、マイクロフォン113を介して、いくつかの機能をアクティブ化又は非アクティブ化するための口頭入力もまた受け入れる。デバイス100は、任意選択的に、タッチスクリーン112上の接触の強度を検出する1つ以上の接触強度センサ165、及び/又はデバイス100のユーザに対する触知出力を生成する1つ以上の触知出力生成器167もまた含む。
図3は、いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を有する例示的な多機能デバイスのブロック図である。デバイス300は、ポータブル型である必要はない。いくつかの実施形態では、デバイス300は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディアプレーヤデバイス、ナビゲーションデバイス、教育的デバイス(子供の学習玩具など)、ゲームシステム、又は制御デバイス(例えば、家庭用又は業務用コントローラ)である。デバイス300は、通常、1つ以上の処理ユニット(CPU)310、1つ以上のネットワーク又は他の通信インタフェース360、メモリ370、及びこれらの構成要素を相互接続する1つ以上の通信バス320を含む。通信バス320は、任意選択的に、システム構成要素間の通信を相互接続及び制御する回路(チップセットと呼ばれることもある)を含む。デバイス300は、ディスプレイ340を含む入出力(I/O)インタフェース330を含み、ディスプレイ340は、通常、タッチスクリーンディスプレイである。I/Oインタフェース330はまた、任意選択的に、キーボード及び/又はマウス(若しくは他のポインティングデバイス)350並びにタッチパッド355と、デバイス300上に触知出力を生成する(例えば、図1Aを参照して前述した触知出力生成器167に類似している)触知出力生成器357と、センサ359(例えば、光、加速度、近接、タッチ感知、及び/又は図1Aを参照して前述した、接触強度センサ165に類似している接触強度センサ)とを含む。メモリ370は、DRAM、SRAM、DDR RAM、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含み、任意選択的に、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含む。メモリ370は、任意選択で、CPU(単数又は複数)310からリモートに位置する1つ以上の記憶デバイスを含む。いくつかの実施形態では、メモリ370は、ポータブル多機能デバイス100(図1A)のメモリ102内に記憶されているプログラム、モジュール、及びデータ構造に類似したプログラム、モジュール、及びデータ構造、又はそのサブセットを記憶する。更に、メモリ370は、任意選択で、ポータブル多機能デバイス100のメモリ102に存在しない追加のプログラム、モジュール、及びデータ構造を記憶する。例えば、デバイス300のメモリ370は、任意選択的に、描画モジュール380、プレゼンテーションモジュール382、ワードプロセッシングモジュール384、ウェブサイト作成モジュール386、ディスクオーサリングモジュール388、及び/又はスプレッドシートモジュール390を記憶するのに対して、ポータブル多機能デバイス100(図1A)のメモリ102は、任意選択的に、これらのモジュールを記憶しない。
図3の上記で特定した要素はそれぞれ、任意選択的に、前述したメモリデバイスのうちの1つ以上の中に記憶される。上記で特定したモジュールはそれぞれ、前述した機能を実行する命令セットに対応する。上記で特定したモジュール又はプログラム(例えば、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって様々な実施形態では、これらのモジュールの様々なサブセットが、任意選択的に組み合わされ、又は他の方法で再構成される。いくつかの実施形態では、メモリ370は、任意選択で、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ370は、上記で説明されていない追加のモジュール及びデータ構造を任意選択的に記憶する。
次に、任意選択的に、例えばポータブル多機能デバイス100に実装されるユーザインタフェースの実施形態に注意を向ける。
図4Aは、いくつかの実施形態に係る、ポータブル多機能デバイス100上のアプリケーションのメニューの例示的なユーザインタフェースを示す。同様のユーザインタフェースは、デバイス300上に任意選択的に実装される。いくつかの実施形態では、ユーザインタフェース400は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
●セルラー信号及びWi-Fi信号などの無線通信(単数又は複数)用の信号強度インジケータ(単数又は複数)402、
●時刻404、
●Bluetoothインジケータ405、
●バッテリ状態インジケータ406、
●以下のような、頻繁に使用されるアプリケーションのアイコンを有するトレイ408
○不在着信又はボイスメールメッセージの数のインジケータ414を任意選択的に含む、「電話」とラベル付けされた、電話モジュール138のアイコン416、
○未読電子メールの数のインジケータ410を任意選択的に含む、「メール」とラベル付けされた、電子メールクライアントモジュール140のアイコン418、
○「ブラウザ」とラベル付けされた、ブラウザモジュール147のアイコン420、及び
○「iPod」とラベル付けされる、iPod(Apple Inc.の商標)モジュール152とも称される動画及び音楽プレーヤモジュール152用のアイコン422、及び
●以下のような、他のアプリケーションのアイコン、
○「メッセージ」とラベル付けされた、IMモジュール141のアイコン424、
○「カレンダー」とラベル付けされた、カレンダーモジュール148のアイコン426、
○「写真」とラベル付けされた、画像管理モジュール144のアイコン428、
○「カメラ」とラベル付けされた、カメラモジュール143のアイコン430、
○「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール155のアイコン432、
○「株価」とラベル付けされた、株式ウィジェット149-2のアイコン434、
○「マップ」とラベル付けされた、地図モジュール154のアイコン436、
○「天気」とラベル付けされた、気象ウィジェット149-1のアイコン438、
○「時計」とラベル付けされた、アラーム時計ウィジェット149-4のアイコン440、
○「トレーニングサポート」とラベル付けされた、トレーニングサポートモジュール142のアイコン442、
○「メモ」とラベル付けされた、メモモジュール153のアイコン444、及び
○デバイス100及びその様々なアプリケーション136の設定へのアクセスを提供する、「設定」とラベル付けされた、設定アプリケーション又はモジュールのアイコン446。
図4Aに示すアイコンラベルは、単なる例示であることに留意されたい。例えば、動画及び音楽プレーヤモジュール152のアイコン422は、「音楽」又は「音楽プレーヤ」とラベル付けされる、他のラベルが、様々なアプリケーションアイコンのために、任意選択的に使用される。一部の実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。一部の実施形態では、特定のアプリケーションアイコンのラベルは、その特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
図4Bは、ディスプレイ450(例えば、タッチスクリーンディスプレイ112)とは別個のタッチ感知面451(例えば、図3のタブレット又はタッチパッド355)を有するデバイス(例えば、図3のデバイス300)上の例示的なユーザインタフェースを示す。デバイス300はまた、任意選択的に、タッチ感知面451上の接触の強度を検出する1つ以上の接触強度センサ(例えば、センサ359のうちの1つ以上)、及び/又はデバイス300のユーザに対して触知出力を生成する1つ以上の触知出力生成器357を含む。
以下の例のうちのいくつかは、タッチスクリーンディスプレイ112(タッチ感知面及びディスプレイが組み合わされている)上の入力を参照して与えられるが、いくつかの実施形態では、デバイスは、図4Bに示すように、ディスプレイとは別個のタッチ感知面上の入力を検出する。いくつかの実施形態では、タッチ感知面(例えば、図4Bの451)は、ディスプレイ(例えば、450)上の1次軸(例えば、図4Bの453)に対応する1次軸(例えば、図4Bの452)を有する。これらの実施形態によれば、デバイスは、ディスプレイ上のそれぞれの位置に対応する位置(例えば、図4Bでは、460は468に対応し、462は470に対応する)で、タッチ感知面451との接触(例えば、図4Bの460及び462)を検出する。このようにして、タッチ感知面(例えば、図4Bの451)上でデバイスによって検出されるユーザ入力(例えば、接触460及び462、並びにこれらの移動)は、タッチ感知面がディスプレイとは別個であるとき、多機能デバイスのディスプレイ(例えば、図4Bの450)上のユーザインタフェースを操作するために、デバイスによって使用される。同様の方法が、本明細書に記載の他のユーザインタフェースに任意選択的に使用されることを理解されたい。
加えて、以下の例は、主に指入力(例えば、指接触、指タップジェスチャ、指スワイプジェスチャ)を参照して与えられる一方、いくつかの実施形態では、指入力のうちの1つ以上が別の入力デバイスからの入力(例えば、マウスベースの入力又はスタイラス入力)に置き換えられることを理解されたい。例えば、スワイプジェスチャは、任意選択的に、(例えば、接触の代わりに、)マウスクリックであって、その後に(例えば、接触の移動の代わりに)スワイプの経路に沿ったカーソルの移動を伴うマウスクリックによって置き換えられる。別の例として、タップジェスチャは、任意選択的に、カーソルがタップジェスチャの位置上に位置する間は、(例えば、接触を検出して、それに続いて接触の検出を停止する代わりに)マウスクリックによって置き換えられる。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスが、任意選択的に、同時に使用され、又はマウス及び指の接触が、任意選択的に、同時に使用されることを理解されたい。
図5Aは、例示的なパーソナル電子デバイス500を示す。デバイス500は、本体502を含む。いくつかの実施形態では、デバイス500は、デバイス100及び300(例えば、図1A~図4B)に関して説明された特徴のうちのいくつか又は全てを含むことができる。いくつかの実施形態では、デバイス500は、タッチ感知ディスプレイスクリーン504、以下ではタッチスクリーン504、を有する。あるいは、又はタッチスクリーン504に加えて、デバイス500は、ディスプレイ及びタッチ感知面を有する。デバイス100及び300と同様に、いくつかの実施形態では、タッチスクリーン504(又はタッチ感知面)は、任意選択的に、加えられている接触(例えば、タッチ)の強度を検出する1つ以上の強度センサを含む。タッチスクリーン504(又はタッチ感知面)の1つ以上の強度センサは、タッチの強度を表す出力データを提供することができる。デバイス500のユーザインタフェースは、タッチ(複数)に、その強度に基づいて応答することができ、これは、異なる強度のタッチが、デバイス500上で異なるユーザインタフェース動作を呼び出すことができることを意味する。
タッチ強度を検出し処理する例示的な技術は、例えば、それぞれ全体が参照により本明細書に組み込まれる関連出願である、国際特許第WO/2013/169849号として公開された、2013年5月8日出願の国際特許出願第PCT/US2013/040061号、「Device,Method,and Graphical User Interface for Displaying User Interface Objects Corresponding to an Application」、及び国際特許第WO/2014/105276号として公開された、2013年11月11日出願の国際特許出願第PCT/US2013/069483号、「Device,Method,and Graphical User Interface for Transitioning Between Touch Input to Display Output Relationships」を参照されたい。
いくつかの実施形態では、デバイス500は、1つ以上の入力機構506及び508を有する。入力機構506及び508は、含まれる場合、物理的であり得る。物理的入力機構の例としては、プッシュボタン及び回転可能機構が挙げられる。いくつかの実施形態では、デバイス500は、1つ以上のアタッチメント機構を有する。そのようなアタッチメント機構は、含まれる場合、例えば帽子、眼鏡類、イアリング、ネックレス、シャツ、ジャケット、ブレスレット、腕時計のバンド、チェーン、ズボン、ベルト、靴、財布、バックパックなどにデバイス500を取り付けることを可能にすることができる。これらのアタッチメント機構は、ユーザがデバイス500を着用することを可能にする。
図5Bは、例示的なパーソナル電子デバイス500を示す。いくつかの実施形態では、デバイス500は、図1A、図1B、及び図3に関して説明した構成要素のうちのいくつか又は全てを含むことができる。デバイス500は、I/Oセクション514を1つ以上のコンピュータプロセッサ516及びメモリ518に動作可能に結合するバス512を有する。I/Oセクション514は、ディスプレイ504に接続することができ、ディスプレイ504は、タッチ感知構成要素522と、任意選択的に強度センサ524(例えば、接触強度センサ)とを有することができる。加えて、I/Oセクション514は、Wi-Fi、Bluetooth、近距離通信(NFC)、セルラー、及び/又は他の無線通信技術を使用してアプリケーション及びオペレーティングシステムデータを受信する通信ユニット530と接続することができる。デバイス500は、入力機構506及び/又は508を含むことができる。入力機構506は、任意選択的に、例えば回転可能入力デバイス又は押下可能及び回転可能入力デバイスである。いくつかの実施例では、入力機構508は、任意選択的にボタンである。
いくつかの実施例では、入力機構508は、任意選択的にマイクロフォンである。パーソナル電子デバイス500は、任意選択的に、GPSセンサ532、加速度計534、方向センサ540(例えば、コンパス)、ジャイロスコープ536、動きセンサ538、及び/又はそれらの組み合わせなどの様々なセンサを含み、それらは全て、I/Oセクション514に動作可能に接続することができる。
パーソナル電子デバイス500のメモリ518は、コンピュータ実行可能命令を記憶するための1つ以上の非一時的コンピュータ可読記憶媒体を含むことができ、それらの命令は、1つ以上のコンピュータプロセッサ516によって実行されると、例えば、コンピュータプロセッサに、プロセス700、800、1000、1400、1600、1800、2000、2300(図7、図8、図10、図14、図18、図20、図23)を含む、以下に説明する技術を実行させることができる。コンピュータ可読記憶媒体は、命令実行システム、装置、若しくはデバイスによって、又は命令実行システム、装置、若しくはデバイスに関連して、使用されるコンピュータ実行可能命令を、有形に含み又は記憶することができる任意の媒体であり得る。いくつかの実施例では、記憶媒体は、一時的コンピュータ可読記憶媒体である。いくつかの実施例では、記憶媒体は、非一時的コンピュータ可読記憶媒体である。非一時的コンピュータ可読記憶媒体は、それらに限定されるものではないが、磁気、光学、及び/又は半導体記憶装置を含むことができる。そのような記憶装置の例としては、磁気ディスク、CD、DVD、又はBlu-ray技術に基づく光学ディスク、並びにフラッシュ、ソリッドステートドライブなどの常駐ソリッドステートメモリなどが挙げられる。パーソナル電子デバイス500は、図5Bの構成要素及び構成に限定されるものではなく、他の又は追加の構成要素を複数の構成で含むことができる。
本明細書で使用される「アフォーダンス」という用語は、任意選択的に、デバイス100、300、及び/又は500(図1A、図3、及び図5A~図5B)のディスプレイスクリーンに表示されるユーザ対話グラフィカルユーザインタフェースオブジェクトを指す。例えば、画像(例えば、アイコン)、ボタン、及び文字(例えば、ハイパーリンク)はそれぞれ、任意選択的に、アフォーダンスを構成する。
本明細書で使用される「フォーカスセレクタ」という用語は、ユーザが対話しているユーザインタフェースの現在の部分を示す入力要素を指す。カーソル又は他の位置マーカを含むいくつかの実装形態では、カーソルが「フォーカスセレクタ」として作用し、したがってカーソルが特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の上に位置する間に、入力(例えば、押下入力)がタッチ感知面(例えば、図3のタッチパッド355又は図4Bのタッチ感知面451)上で検出されたとき、特定のユーザインタフェース要素は、検出された入力に従って調整される。タッチスクリーンディスプレイ上のユーザインタフェース要素との直接対話を可能にするタッチスクリーンディスプレイ(例えば、図1Aのタッチ感知ディスプレイシステム112又は図4Aのタッチスクリーン112)を含むいくつかの実装形態では、タッチスクリーン上の検出された接触が「フォーカスセレクタ」として作用し、したがってタッチスクリーンディスプレイ上の特定のユーザインタフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインタフェース要素)の位置で入力(例えば、接触による押下入力)が検出されたとき、特定のユーザインタフェース要素が、検出された入力に従って調整される。いくつかの実装形態では、(例えば、フォーカスを1つのボタンから別のボタンへ動かすためにタブキー又は矢印キーを使用することによって)タッチスクリーンディスプレイ上の対応するカーソルの移動又は接触の移動なしに、フォーカスがユーザインタフェースの1つの領域からユーザインタフェースの別の領域に動かされ、これらの実装形態では、フォーカスセレクタは、ユーザインタフェースの種々の領域間でのフォーカスの移動に従って移動する。フォーカスセレクタがとる具体的な形態にかかわらず、フォーカスセレクタは、一般に、ユーザが意図するユーザインタフェースとの対話について(例えば、ユーザがそれを通じて対話することを意図しているユーザインタフェースの要素をデバイスに示すことによって)伝えるためにユーザによって制御されるユーザインタフェース要素(又はタッチスクリーンディスプレイ上の接触)である。例えば、タッチ感知面(例えば、タッチパッド又はタッチスクリーン)上で押圧入力が検出されている間の、対応のボタンの上のフォーカスセレクタ(例えば、カーソル、接触、又は選択ボックス)の位置は、その対応のボタンを(そのデバイスのディスプレイ上に示される他のユーザインタフェース要素ではなく)アクティブ化することをユーザが意図していることを示すものである。
本明細書及び特許請求の範囲において使用されるとき、接触の「特性強度」という用語は、接触の1つ以上の強度に基づく、その接触の特性を指す。いくつかの実施形態では、特性強度は複数の強度サンプルに基づく。特性強度は、任意選択的に、既定の数の強度サンプル、すなわち、既定のイベント(例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終了を検出する前、接触の強度の増大を検出する前若しくは後、及び/又は、接触の強度の減少を検出する前若しくは後の)に関連する所定の時間(例えば、0.05、0.1、0.2、0.5、1、2、5、10秒)の間に収集された強度サンプルのセットに基づく。接触の特性強度は、任意選択的に、接触の強度の最大値、接触の強度の平均(mean)値、接触の強度の平均(average)値、接触の強度の上位10パーセンタイル値、接触の強度の最大の2分の1の値、接触の強度の最大の90パーセントの値などのうちの1つ以上に基づいている。一部の実施形態では、特性強度を判定する際に(例えば、特性強度が経時的な接触の強度の平均であるときに)、接触の持続期間が使用される。一部の実施形態では、特性強度は、ユーザによって動作が実行されたかどうかを判定するために、1つ以上の強度閾値のセットと比較される。例えば、1つ以上の強度閾値のセットは、任意選択的に、第1の強度閾値及び第2の強度閾値を含む。この例では、第1の閾値を超えない特性強度を有する接触は第1の動作をもたらし、第1の強度閾値を上回るが第2の強度閾値を超えない特性強度を有する接触は第2の動作をもたらし、第2の閾値を超える特性強度を有する接触は第3の動作をもたらす。いくつかの実施形態では、特性強度と1つ以上の閾値との間の比較は、第1の動作を実行するべきか、それとも第2の動作を実行するべきかを判定するために使用されるのではなく、1つ以上の動作を実行するべきか否か(例えば、それぞれの動作を実行するべきか、それともそれぞれの動作を実行するのを見送るべきか)を判定するために使用される。
図5Cは、複数の強度センサ524A~524Dによってタッチ感知ディスプレイスクリーン504上で複数の接触552A~552Eを検出することを示している。図5Cは、追加として、強度単位に対する強度センサ524A~524Dの現在の強度測定値を示す強度ダイアグラムを含む。この例では、強度センサ524A及び524Dの強度測定値はそれぞれ9強度単位であり、強度センサ524B及び524Cの強度測定値はそれぞれ7強度単位である。いくつかの実装形態では、集約強度は、複数の強度センサ524A~524Dの強度測定値の和であり、この例では32強度単位である。いくつかの実施形態では、各接触に、集約強度の一部分であるそれぞれの強度が割り当てられる。図5Dは、力の中心554からの距離に基づいて、集約強度を接触552A~552Eに割り当てることを示している。この例では、接触552A、552B、及び552Eのそれぞれに、集約強度の8強度単位の接触の強度が割り当てられ、接触552C及び552Dのそれぞれに、集約強度の4強度単位の接触の強度が割り当てられる。より一般的には、一部の実装例では、各接触jは、既定の数学関数Ij=A・(Dj/ΣDi)に従って、集約強度Aの一部分である、それぞれの強度Ijが割り当てられ、ここで、Djは、力の中心からそれぞれの接触jまでの距離であり、ΣDiは、力の中心から全てのそれぞれ接触(例えば、i=1から最後まで)までの距離の和である。図5C~図5Dを参照して説明した動作は、デバイス100、300又は500と類似若しくは同一の電子デバイスを使用して行うことができる。いくつかの実施形態では、接触の特性強度は、接触の1つ以上の強度に基づいている。いくつかの実施形態では、強度センサは、単一の特性強度(例えば、単一の接触の単一の特性強度)を判定するために使用される。強度ダイアグラムは、表示ユーザインタフェースの一部ではなく、読み手の助けになるように図5C~図5Dに含まれていることに留意されたい。
一部の実施形態では、特性強度を判定する目的のために、ジェスチャの一部分が特定される。例えば、タッチ感知面は、任意選択的に、開始位置から遷移して終了位置に到達し、その位置で接触の強度が増大している、連続するスワイプ接触を受信する。この例では、終了位置での接触の特性強度は、任意選択的に、スワイプ接触全体ではなく、連続するスワイプ接触の一部分のみ(例えば、スワイプ接触のうち終了位置の部分のみ)に基づいている。いくつかの実施形態では、任意選択的に、接触の特性強度を判定する前に、平滑化アルゴリズムがスワイプ接触の強度に適用される。例えば、平滑化アルゴリズムは、任意選択的に、非加重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び/又は指数平滑化アルゴリズムのうちの1つ以上を含む。いくつかの状況では、これらの平滑化アルゴリズムは、特性強度を判定する目的のために、スワイプ接触強度の幅の狭いスパイク又は下落を排除する。
タッチ感知面上の接触の強度は、任意選択的に、接触検出強度閾値、軽い押下強度閾値、深い押下強度閾値、及び/又は1つ以上の他の強度閾値などの1つ以上の強度閾値に対して特徴付けられる。一部の実施形態では、軽い押下強度閾値は、通常、物理マウスのボタン又はトラックパッドをクリックすることに関連付けられた動作をデバイスが実行する強度に相当する。一部の実施形態では、深い押下強度閾値は、通常、物理マウスのボタン又はトラックパッドをクリックすることに関連付けられた動作とは異なる動作をデバイスが実行する強度に相当する。いくつかの実施形態では、軽い押下強度閾値を下回る(例えば、かつそれを下回ると接触が検出されなくなる公称接触検出強度閾値を上回る)特性強度を有する接触が検出されたとき、デバイスは、タッチ感知面上の接触の移動に従い、軽い押下強度閾値又は深い押下強度閾値に関連付けられた動作を実行することなく、フォーカスセレクタを動かす。一般に、特に明記しない限り、これらの強度閾値は、ユーザインタフェースの値の様々なセットの間で一貫している。
軽い押下強度閾値を下回る強度から、軽い押下強度閾値と深い押下強度閾値との間の強度への、接触の特性強度の増大は、「軽い押下」の入力と呼ばれることがある。深い押下強度閾値を下回る強度から、深い押下強度閾値を上回る強度への、接触の特性強度の増大は、「深い押下」の入力と呼ばれることがある。接触検出強度閾値を下回る強度から、接触検出強度閾値と軽い押下強度閾値との間の強度への、接触の特性強度の増大は、タッチ面上の接触の検出と呼ばれることがある。接触検出強度閾値を上回る強度から、接触検出強度閾値を下回る強度への、接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と呼ばれることがある。いくつかの実施形態では、接触検出強度閾値はゼロである。いくつかの実施形態では、接触検出強度閾値はゼロより大きい。
本明細書に記載するいくつかの実施形態では、それぞれの押下入力を含むジェスチャを検出したことに応じて、又はそれぞれの接触(若しくは複数の接触)によって実行されたそれぞれの押下入力を検出したことに応じて、1つ以上の動作が実行され、それぞれの押下入力は、押下入力強度閾値を上回る接触(又は複数の接触)の強度の増大を検出したことに少なくとも部分的に基づいて検出される。いくつかの実施形態では、それぞれの動作は、押下入力強度閾値を上回るそれぞれの接触の強度の増大(例えば、それぞれの押下入力の「ダウンストローク」)を検出したことに応じて実行される。いくつかの実施形態では、押下入力は、押下入力強度閾値を上回るそれぞれの接触の強度の増大、及びそれに続く押下入力強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、それに続く押下入力閾値を下回るそれぞれの接触の強度の減少(例えば、それぞれの押下入力の「アップストローク」)を検出したことに応じて実行される。
図5E~5Hは、図5Eの軽い押下強度閾値(例えば、「ITL」)を下回る強度から、図5Hの深い押下強度閾値(例えば、「ITD」)を上回る強度への、接触562の強度の増大に対応する押下入力を含むジェスチャの検出を示す。接触562によって実行されるジェスチャは、タッチ感知面560上で検出され、既定の領域574内に表示されたアプリケーションアイコン572A~572Dを含む表示ユーザインタフェース570上では、アプリ2に対応するアプリケーションアイコン572Bの上にカーソル576が表示される。いくつかの実施形態では、ジェスチャは、タッチ感知ディスプレイ504上に検出される。強度センサは、タッチ感知面560上の接触の強度を検出する。デバイスは、接触562の強度が深い押下強度閾値(例えば、「ITD」)を上回ってピークに達したと判定する。接触562は、タッチ感知面560上で維持される。ジェスチャの検出に応じて、ジェスチャ中に深い押下強度閾値(例えば、「ITD」)を上回る強度を有する接触562に従って、図5F~5Hに示すように、アプリ2に対して最近開いた文書の縮尺が低減された表現578A~578C(例えば、サムネイル)が表示される。いくつかの実施形態では、1つ以上の強度閾値と比較されるこの強度は、接触の特性強度である。接触562に対する強度ダイアグラムは、表示ユーザインタフェースの一部ではなく、読み手の助けになるように図5E~5Hに含まれていることに留意されたい。
いくつかの実施形態では、表現578A~578Cの表示は、アニメーションを含む。例えば、図5Fに示すように、表現578Aが、アプリケーションアイコン572Bに近接して最初に表示される。アニメーションが進むにつれて、図5Gに示すように、表現578Aは上方へ動き、表現578Bが、アプリケーションアイコン572Bに近接して表示される。次いで、図5Hに示すように、表現578Aが上方へ動き、表現578Bが表現578Aに向かって上方へ動き、表現578Cが、アプリケーションアイコン572Bに近接して表示される。表現578A~578Cは、アイコン572Bの上にアレイを形成する。いくつかの実施形態では、アニメーションは、図5F~5Gに示すように、接触562の強度に従って進行し、接触562の強度が深い押下強度閾値(例えば、「ITD」)に向かって増大するにつれて、表現578A~578Cが現れ、上方へ動く。いくつかの実施形態では、アニメーションの進行が基づいている強度は、接触の特性強度である。図5E~5Hを参照して説明する動作は、デバイス100、300、又は500に類似若しくは同一の電子デバイスを使用して実行することができる。
一部の実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある偶発的な入力を回避するために強度ヒステリシスを採用し、デバイスは、押下入力強度閾値との既定の関係を有するヒステリシス強度閾値を定義又は選択する(例えば、ヒステリシス強度閾値は、押下入力強度閾値よりもX強度単位低い、又はヒステリシス強度閾値は、押下入力強度閾値の75%、90%、若しくはなんらかの妥当な割合である)。したがって、いくつかの実施形態では、押下入力は、押下入力強度閾値を上回るそれぞれの接触の強度の増大、及びそれに続く押下入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、それぞれの動作は、それに続くヒステリシス強度閾値を下回るそれぞれの接触の強度の減少(例えば、それぞれの押下入力の「アップストローク」)を検出したことに応じて実行される。同様に、一部の実施形態では、押下入力は、デバイスが、ヒステリシス強度閾値以下の強度から押下入力強度閾値以上の強度への接触の強度の増大、及び任意選択的に、その後のヒステリシス強度以下の強度への接触の強度の減少を検出するときにのみ検出され、それぞれの動作は、押下入力(例えば、状況に応じて、接触の強度の増大又は接触の強度の減少)を検出したことに応じて実行される。
説明を容易にするために、押下入力強度閾値に関連付けられた押下入力、又は押下入力を含むジェスチャに応じて実行される動作の説明は、任意選択的に、押下入力強度閾値を上回る接触の強度の増大、ヒステリシス強度閾値を下回る強度から押下入力強度閾値を上回る強度への接触の強度の増大、押下入力強度閾値を下回る接触の強度の減少、及び/又は押下入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少のいずれかを検出したことに応じてトリガされる。更に、押下入力強度閾値を下回る接触の強度の減少を検出したことに応じて実行されるように動作が記載される例では、動作は、任意選択的に、押下入力強度閾値に対応し、かつそれよりも低いヒステリシス強度閾値を下回る接触の強度の減少を検出したことに応じて実行される。
図5Iは、例示的な電子デバイス580を示す。デバイス580は、本体580Aを含む。いくつかの実施形態では、デバイス580は、デバイス100、300、及び500(例えば、図1A~5B)に関して説明する特徴のうちのいくつか又は全てを含むことができる。いくつかの実施形態では、デバイス580は、1つ以上のスピーカ580B(本体580Aに隠す)、1つ以上のマイクロフォン580C、1つ以上のタッチ感知面580D、及び1つ以上のディスプレイ580Eを有する。代替の場合、又はディスプレイ及びタッチ感知面580Dに加えて、デバイスは、タッチ感知ディスプレイ(タッチスクリーンとも呼ばれる)を有する。デバイス100、300、及び500と同様に、いくつかの実施形態では、タッチ感知面580D(又はタッチスクリーン)は、任意選択的に、加えられている接触(例えば、タッチ)の強度を検出するための1つ以上の強度センサを含む。タッチ感知面580D(又はタッチスクリーン)の1つ以上の強度センサによって、タッチの強度を表す出力データが提供され得る。デバイス580のユーザインタフェースは、タッチ(複数)に、その強度に基づいて応答することができ、これは、異なる強度のタッチが、デバイス580上で異なるユーザインタフェース動作を呼び出すことができることを意味する。いくつかの実施形態では、1つ以上のディスプレイ580Eは、1つ以上の発光ダイオード(LED)である。例えば、ディスプレイは、単一のLED、LEDクラスタ(例えば、赤色、緑色、及び青色LED)、複数の分離LED、複数の分離LEDクラスタ、又は1つ以上のLEDの他の配置であり得る。例えば、ディスプレイ580Eは、円形状(例えば、リング)に配置された9個の分離LEDクラスタのアレイであってもよい。いくつかの実施例では、1つ以上のディスプレイは、別のタイプの発光要素のうちの任意の1つ以上から構成される。
図5Jは、例示的なパーソナル電子デバイス580を図示する。いくつかの実施形態では、デバイス580は、図1A、図1B、図3、及び図5A~5Bに関して説明した構成要素のうちのいくつか又は全てを含むことができる。デバイス580は、I/Oセクション594を1つ以上のコンピュータプロセッサ596及びメモリ598に動作可能に結合するバス592を有する。I/Oセクション594は、ディスプレイ582に接続することができ、ディスプレイ582は、タッチ感知構成要素584と、任意選択的に強度センサ585(例えば、接触強度センサ)とを有することができる。いくつかの実施形態では、タッチ感知構成要素584は、ディスプレイ582とは別個の構成要素である。加えて、I/Oセクション594は、Wi-Fi、Bluetooth、近距離通信(NFC)、セルラー、及び/又は他の無線通信技術を使用してアプリケーション及びオペレーティングシステムデータを受信する通信ユニット590と接続することができる。デバイス580は、入力メカニズム588を含むことができる。いくつかの実施例では、入力メカニズム588は、任意選択的にボタンである。いくつかの実施例では、入力メカニズム588は、任意選択的にマイクロフォンである。入力メカニズム588は任意選択的に、複数のマイクロフォン(例えば、マイクロフォンアレイ)である。
電子デバイス580は、音声を出力するスピーカ586を含む。デバイス580は、音声データを受信し、音声データを電気信号に変換し、電気信号をスピーカ586に送信するオーディオ回路(例えば、I/Oセクション594内)を含むことができる。スピーカ586は、電気信号を人間の可聴音波に変換する。オーディオ回路(例えば、I/Oセクション594内)はまた、マイクロフォン(例えば、入力メカニズム588)によって音波から変換された電気信号を受信する。オーディオ回路(例えば、I/Oセクション594内)は、電気信号を音声データに変換する。音声データは、任意選択的に、I/Oセクション594によって、(例えば、通信ユニット590の)メモリ598及び/又はRF回路から取得され、並びに/若しくはメモリ598及び/又はRF回路に送信される。
パーソナル電子デバイス580のメモリ598は、コンピュータ実行可能命令を記憶するための1つ以上の非一時的コンピュータ可読記憶媒体を含むことができ、それらの命令は、1つ以上のコンピュータプロセッサ596によって実行されると、例えば、コンピュータプロセッサに、プロセス800(図8)、プロセス1000(図10)、プロセス1200(図12)、プロセス1400(図14)、プロセス1600(図16)、プロセス1800(図18)、プロセス2000(図20)、及びプロセス2300(図23)を含む、以下に説明する技術を実行させることができる。コンピュータ可読記憶媒体は、命令実行システム、装置、若しくはデバイスによって、又は命令実行システム、装置、若しくはデバイスに関連して、使用されるコンピュータ実行可能命令を、有形に含み又は記憶することができる任意の媒体であり得る。いくつかの実施例では、記憶媒体は、一時的コンピュータ可読記憶媒体である。いくつかの実施例では、記憶媒体は、非一時的コンピュータ可読記憶媒体である。非一時的コンピュータ可読記憶媒体は、それらに限定されるものではないが、磁気、光学、及び/又は半導体記憶装置を含むことができる。そのような記憶装置の例としては、磁気ディスク、CD、DVD、又はBlu-ray技術に基づく光学ディスク、並びにフラッシュ、ソリッドステートドライブなどの常駐ソリッドステートメモリなどが挙げられる。パーソナル電子デバイス580は、図5Jの構成要素及び構成に限定されるものではなく、他の又は追加の構成要素を複数の構成で含むことができる。
本明細書では、「インストール済みアプリケーション」は、電子デバイス(例えば、デバイス100、300、及び/又は500)上へダウンロードされ、デバイス上で起動する準備ができた(例えば、開かれた)ソフトウェアアプリケーションを指す。いくつかの実施形態では、ダウンロードされたアプリケーションは、ダウンロードされたパッケージからプログラム部分を抽出し、抽出された部分をコンピュータシステムのオペレーティングシステムと統合するインストールプログラムによって、インストール済みアプリケーションになる。
本明細書では、「開いているアプリケーション」又は「実行中のアプリケーション」という用語は、保持された状態情報(例えば、デバイス/グローバル内部状態157及び/又はアプリケーション内部状態192の一部として)を有するソフトウェアアプリケーションを指す。開いている又は実行中のアプリケーションは、任意選択的に、以下のタイプのアプリケーションのうちのいずれか1つである。
●アプリケーションが使用されているデバイスのディスプレイスクリーンに現在表示されているアクティブなアプリケーション、
●現在表示されていないが、アプリケーションに対する1つ以上のプロセスが1つ以上のプロセッサによって処理されている背景アプリケーション(又は背景プロセス)、並びに
●稼働していないが、(それぞれ、揮発性及び不揮発性の)メモリに記憶されており、かつアプリケーションの実行を再開するために使用することができる状態情報を有する、中断又は休止状態のアプリケーション。
本明細書では、「閉じているアプリケーション」という用語は、保持された状態情報を有していないソフトウェアアプリケーションを指す(例えば、閉じているアプリケーションに対する状態情報は、デバイスのメモリ内に記憶されていない)。したがって、アプリケーションを閉じることは、アプリケーションに対するアプリケーションプロセスを停止及び/又は除去し、アプリケーションに対する状態情報をデバイスのメモリから除去することを含む。概して、第1のアプリケーション中に第2のアプリケーションを開いても、第1のアプリケーションは閉じない。第2のアプリケーションが表示されており、かつ第1のアプリケーションが表示を終了されたとき、第1のアプリケーションは背景アプリケーションになる。
次に、ポータブル多機能デバイス100、デバイス300、デバイス500、デバイス580などの電子デバイス上で実施されるユーザインタフェース(「UI」)及び関連プロセスの実施形態に注意を向ける。
図6A~図6Pは、いくつかの実施形態に係る、オーディオ再生を制御するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図7~図8の方法を含む後述のプロセスを例示するために使用される。
デバイスは、近接条件の満足を使用して、1つ以上の機能を実行することができる。1つのデバイスの別のデバイスへの近接度の使用は、(例えば、デバイスのうちの1つを保持する)ユーザが、デバイスの一方又は両方の上でなんらかのアクションを実行する(例えば、インタフェースを呼び出す)ことを望むという明確なインジケータとして使用することができる。例えば、これにより、機能を実行するために、(例えば、デバイスディスプレイ上の1つ以上のメニューをナビゲートするための)過剰なユーザ入力を回避することによって、デバイスリソースの浪費を防止することができる。更に、これにより、例えば、機能を実行する(例えば、ディスプレイ上のインタフェースを呼び出す)ために必要とされるユーザ入力の数を低減することによって、ユーザの時間を節約することもできる。
図6Aは、例示的な電子デバイス600(例えば、電話機)及びデバイス650(例えば、スマートスピーカ)を示す。いくつかの実施形態では、デバイス600は、デバイス100、300、又は500の1つ以上の特徴を含む。デバイス650は、デバイス580の1つ以上の特徴を含む。いくつかの実施形態では、デバイス650は、デバイス100、300、又は500の1つ以上の特徴を含む。図6Aに示す実施形態では、デバイス650は、キッチン内に配置され、「キッチンスピーカ」と指定される。デバイス600とデバイス650とは、デバイス600及びデバイス650がそれぞれ他方のデバイスに関する情報を取得することができるように、(例えば、Bluetooth、近距離通信、ネットワーク接続を介して)接続される。そのような情報は、デバイス上で現在再生している、又は最近再生されたオーディオに関する情報を含むことができる。
図6A~図6Pは、デバイス600及びデバイス650の例示的な物理的配置を示す。図6Aは、デバイス650と、デバイス650から離れた比較的長い距離にあるデバイス600と含む第1のシナリオを示す。図6Aは、第1のシナリオの例示的な俯瞰図を示す。図6Aに示すように、デバイス600及びデバイス650は、遠く離れている。図6Aは、デバイス650の周囲の近接条件範囲インジケータ652を示す。近接条件範囲インジケータは、本明細書では、「近接ゾーンインジケータ」、又は単に「近接ゾーン」とも呼ばれる。デバイス600は、近接条件範囲インジケータ652の内側にない。近接条件範囲インジケータは、理解を助けるために図に含まれるが、デバイス600又はデバイス650のいずれの上にも表示されない。近接条件範囲インジケータ652は、視覚的補助として含まれ、近接条件を満たす物理的近接度を表すことを意図している。例えば、範囲インジケータ652は、デバイス650の近距離通信検出回路の範囲を表すことができる。いくつかの実施形態では、任意の適切な技術を使用して、デバイス間の近接度を検出することができる。例えば、いくつかの実施例では、広帯域無線接続が使用される。広帯域無線接続は、例えば、1つ以上のデバイスの方向性、距離、及び向きのうちの1つ以上を判定するために使用される。したがって、(例えば、部分的又は完全に)近接条件範囲インジケータ652内の検出可能なデバイスの存在は、近接条件を満たすが、検出可能なデバイスが範囲インジケータ652の外側に位置する場合は、近接条件を満たさない。当業者であれば、物理的近接度の検出範囲が不均一であり得、多数の変数(例えば、無線干渉、空気湿度など)によって影響を受け得、三次元の空間内の点を含むことができ、これらの全てが本開示の範囲内であることが意図されていることを理解するであろう。したがって、近接条件範囲インジケータ652のグラフィカル表現は、近接条件が満たされているかどうかを判定する範囲を限定することを意図するものではない。更に、図は必ずしも縮尺通りではなく、単に視覚的補助として含まれる。したがって、特に断りがない限り、図に示される特徴のサイズ及び縮尺は、近接している又は近接条件を満たすために必要とされる距離に対する制限として意図するものではない。
図6Aは、デバイス600のオーディオアクティビティを示すオーディオアクティビティインジケータ625、及びデバイス650のオーディオアクティビティを示すオーディオアクティビティインジケータ675を示す。オーディオアクティビティインジケータ625及びオーディオアクティビティインジケータ675は、オーディオアクティビティインジケータ625及びオーディオアクティビティインジケータ675内の音符を通る斜線によって示されるように、図6Aに示すシナリオではデバイス600及びデバイス650が両方とも現在オーディオを出力していない(例えば、メディアを再生していない)ことを示す。オーディオアクティビティインジケータは、理解を助けるために図に含まれるが、デバイス600又はデバイス650のいずれの上にも表示されない。アクティビティインジケーションに加えて、以下に記載される図のいくつかはまた、オーディオ表現(例えば、672a~672c)も含み、これはまた、デバイス600上で再生している特定のメディアアイテムの理解を助けるために図に含まれる。これらのオーディオ表現はまた、デバイス600又はデバイス650のいずれの上にも表示されない。
図6Bは、デバイス650から離れた短い距離にあるデバイス600を含む第2のシナリオを示す。図6Bは、第2のシナリオの例示的な俯瞰図を示す。6Bに示すように、デバイス600及びデバイス650は、互いに近接し、この時、デバイス600は、少なくとも部分的に近接条件範囲インジケータ652内にある。近接条件範囲インジケータ652は、近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。
物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、デバイス600上で最近再生されたメディアアイテムを表すメディア情報アフォーダンス606を表示する。例示的なメディアアイテムとしては、音楽トラック、オーディオブック(又はチャプタなどのその一部分)、ポッドキャスト、ビデオ、及び電話通話が挙げられるが、これらに限定されない。いくつかの実施形態では、メディア情報アフォーダンス606は、デバイス600及びデバイス650の両方が現在オーディオを再生していないとの判定に従って、デバイス600上で最近再生されたメディアアイテムを表す。図6Bでは、メディア情報アフォーダンス606は、音楽トラック(例えば、曲)を表す。
メディア情報アフォーダンス606は、任意選択的に、(1)デバイス600が近接しているデバイス(例えば、キッチンスピーカとも呼ばれるデバイス650)を示す外部デバイスインジケータ606-1、(2)メディア情報アフォーダンス606に関連付けられたアクション又は機能(例えば、メディア情報アフォーダンス606の選択に応じて実行されるアクション)を示すアクションインジケータ606-2、(3)メディアアイテムを識別する情報(例えば、曲のタイトル(「Summertime」)及びアーティスト「DJ AP」)を提供するメディアアイテムインジケータ606-3、(4)メディアアイテムの状態(例えば、「最近再生された」)を記述するメディアアイテム状態インジケータ606-4、及び(5)メディアアイテムに関連付けられた画像(例えば、曲が含まれるアルバムのアルバムカバー)を含むメディアアイテムグラフィック606-5を含む、メディアアイテムに関する情報を提供するいくつかのグラフィカル要素を含む。
アクションインジケータ606-2によって示されるように、メディア情報アフォーダンス606の選択により、メディア情報アフォーダンス606に関連付けられたメディアアイテムをデバイス650上で再生させることができる。いくつかの実施形態では、メディア情報アフォーダンス606の選択に応じて実行されるアクションは、入力のタイプに依存する。例えば、入力610aによって示されるように、メディア情報アフォーダンス606上の入力に応じて、デバイス650は、動作を実行することができる。例えば、入力がタップジェスチャである場合、デバイス650上のメディアアイテムの再生が開始され、一方、入力がメディア情報アフォーダンス606上又はその近くで開始する下向きスワイプジェスチャである場合、異なる動作が実行される。
図6Bに示すように、デバイス600は、メディア情報アフォーダンス606上の入力(例えば、スワイプ)を受け取ることができる。入力を受け取ったことに応じて、かつ入力が(例えば、タップとは対照的に)スワイプであるとの判定に従って、デバイス600は、図6Cに示すように、メディア情報アフォーダンス608を表示する。図6B~図6Cに示す実施形態では、デバイス600はまた、メディア情報アフォーダンス606の表示を停止し、メディア情報アフォーダンス608によって占められていないユーザインタフェース604の部分を部分的に不明瞭化する(例えば、グレーアウトする、ぼかす)。メディア情報アフォーダンス608は、任意選択的に、(1)デバイス600が近接しているデバイス(例えば、キッチンスピーカとも呼ばれるデバイス650)を示す外部デバイスインジケータ608-1、(2)メディア情報アフォーダンス608に関連付けられたアクション又は機能(例えば、メディア情報アフォーダンス608の選択に応じて実行されるアクション)を示すアクションインジケータ608-2、(3)メディアアイテムを識別する情報(例えば、曲のタイトル(「Summertime」)及びアーティスト「DJ AP」)を提供するメディアアイテムインジケータ608-3、(4)メディアアイテムの状態(例えば、「最近再生された」)を記述するメディアアイテム状態インジケータ608-4、及び(5)メディアアイテムに関連付けられた画像(例えば、曲が含まれるアルバムのアルバムカバー)を含むメディアアイテムグラフィック608-5を含む、メディアアイテムに関する情報を提供するいくつかのグラフィカル要素を含む。いくつかの実施形態では、メディア情報アフォーダンス608は、メディア情報アフォーダンス606とは異なる。図6B~図6Cに示す実施形態では、メディア情報アフォーダンス608は、メディア情報アフォーダンス606よりも大きく、ディスプレイ602の中央又はその近くに表示され、メディア情報アフォーダンス606は、ディスプレイ602の上部又はその近くに表示される。例えば、アフォーダンス608内に提供されるメディア情報は、アフォーダンス606内に提供されるメディア情報の拡大された拡張バージョンであってもよい。
メディア情報アフォーダンス608が表示されている間のメディアアイテムの選択に対応する入力(例えば、メディアアイテムグラフィック608-5がメディア情報アフォーダンス608上に入力されている間のメディアアイテムグラフィック608-5上のタップ、又はメディア情報アフォーダンス608上のタップ)に応じて、デバイス650上のメディアアイテム「DJ APによるSummertime」の再生が開始される。
加えて、メディア情報アフォーダンス608は、デバイス650上で再生するために選択することができるメディアアイテムの待ち行列(例えば、図6Cのメディアアイテムグラフィック608-5、608-6)を含む。図6Cに示すように、メディア情報アフォーダンス608は、第2のメディアアイテムに対応するメディアアイテムグラフィック608-6を含む。図6Cでは、デバイス600は、メディア情報アフォーダンス608上の入力(例えば、右から左へのスワイプを表す入力601b)を受け取る。入力610bを受け取ったことに応じて、デバイス600は、図6Dに示すように、メディア情報アフォーダンス608内のメディアアイテムグラフィックを水平にスクロールする。メディア情報アフォーダンス608をスクロールすることは、メディア情報アフォーダンス608の左縁部から部分的に外れてメディアアイテムグラフィック608-5を移動させることと、メディア情報アフォーダンス608の中央にメディアアイテムグラフィック608-6を完全に表示することと、以前に完全に隠されていた(例えば、表示されていなかった)メディアアイテムグラフィック608-7を部分的に表示することと、を含む。スクロールすることの結果として、メディアアイテムインジケータ608-3は、メディアアイテムのグラフィック608-6に対応するメディアアイテムを識別する情報(例えば、プレイリスト(「Hit Mix」)及びユーザ「Jane」)を提供する、メディアアイテムインジケータ608-3aと置き換えられる(又は更新される)。いくつかの実施形態では、メディアアイテムグラフィック608-6に対応するメディアアイテムは、メディアアイテムグラフィック608-5に対応するメディアアイテムの直前に再生されたメディアアイテムであり、図6Dのメディアアイテム状態インジケータ608-4によって示されるように、最近再生されたと見なされる。いくつかの実施形態では、メディア情報アフォーダンス608内の待ち行列は、メディアアイテムグラフィック608-5に対応するメディアアイテムの後に再生されるようにスケジュールされたメディアアイテム(例えば、再生されることになる次の2つ、4つ、5つ、8つのメディアアイテム)を含む。そのようないくつかの実施形態では、メディアアイテムグラフィック608-6に対応するメディアアイテムは、メディアアイテムグラフィック608-5に対応するメディアアイテムの後に再生されるようにスケジュールされたメディアアイテムを表し、任意選択的に、メディアアイテム状態インジケータ608-4は、例えば、「次に」などのメディアアイテム状態インジケータと置き換えられる又は更新される。
図6Dでは、デバイス600は、メディアアイテムグラフィック608-6によって表されるメディアアイテムの選択に対応する入力610c(例えば、タップ)を受け取る。入力610cを受け取ったことに応じて、デバイス600は、デバイス650上のメディアアイテムグラフィック608-6によって表されるメディアアイテムの再生を開始する命令をデバイス650に送信する。図6Eは、デバイス650上のメディアアイテムの再生を開始した後のデバイス600及びデバイス650の状態を示す。図6Eでは、オーディオアクティビティインジケータ675は、デバイス650が現在オーディオを再生していることを示し、オーディオアクティビティインジケータ625は、デバイス600が依然としてオーディオを再生していないことを示す。メディア情報アフォーダンス608は、任意選択的に、現在の状態を反映するように更新され、更新されたアクションインジケータ608-2aは、デバイス650(「キッチンスピーカ」)を依然として識別する外部デバイスインジケータ608-1によって示されるように、メディアアイテム「JaneによるHit Mix」をデバイス650上で現在再生していることを示す。
図6Fは、デバイス600が近接条件範囲インジケータ652の内側にないシナリオを示しており、デバイス600は、(オーディオアクティビティインジケータ625によって示されるように)オーディオを再生しており、デバイス650は、(オーディオアクティビティインジケータ675によって示されるように)オーディオを再生していない。図6Fでは、デバイス600は、デバイス600上で現在再生されているメディアアイテムを示す、デバイス600上で実行されている音楽アプリケーションのユーザインタフェース614を表示する。図6Gは、デバイス600がオーディオ(例えば、アルバム「Sophomore」からのアーティスト「Mac Band」による曲「The Sound」)を再生しており、かつデバイス650がオーディオを再生していない間に、デバイス600が少なくとも部分的に近接条件範囲インジケータ652の内側に移動されていることを示す。近接条件範囲インジケータ652は、近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、条件が満たされているというインジケーションを(例えば、デバイス600とデバイス650との間でメディアアイテムを送信するために)送信する)。いくつかの実施例では、デバイス650は、近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。
物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、デバイス600上で現在再生しているメディアアイテムを表すメディア情報アフォーダンス616を表示する。いくつかの実施形態では、メディア情報アフォーダンス616は、デバイス600が現在メディアアイテムを再生しているとの判定に従って、デバイス600上で現在再生しているメディアアイテムを表す。
メディア情報アフォーダンス616は、任意選択的に、(1)デバイス600が近接しているデバイス(例えば、キッチンスピーカとも呼ばれるデバイス650)を示す外部デバイスインジケータ616-1、(2)メディア情報アフォーダンス616に関連付けられたアクション又は機能(例えば、メディア情報アフォーダンス616の選択に応じて実行されるアクション)を示すアクションインジケータ616-2、(3)メディアアイテムを識別する情報(例えば、曲のタイトル(「The Sound」)及びアーティスト「Mac Band」)を提供するメディアアイテムインジケータ616-3、(4)メディアアイテムの状態(例えば、「電話機から」)を記述するメディアアイテム状態インジケータ616-4、及び(5)メディアアイテムに関連付けられた画像(例えば、曲が含まれるアルバムのアルバムカバー)を含むメディアアイテムグラフィック616-5を含む、デバイス600上で現在再生されているメディアアイテムに関する情報を提供するいくつかのグラフィカル要素を含む。
アクションインジケータ616-2によって示されるように、メディア情報アフォーダンス616の選択により、メディア情報アフォーダンス616に関連付けられたメディアアイテムをデバイス650上で再生させることができる。更に、メディアアイテム状態インジケータ616-4は、再生されることになるメディアアイテムのソース(例えば、「電話機から」)を示す。
いくつかの実施形態では、現在再生しているメディアアイテムに対応するメディア情報アフォーダンス616は、最近再生されたメディアアイテムに対応するメディア情報アフォーダンス606と類似している。例えば、メディア情報アフォーダンス616の選択に応じて実行されるアクションは、入力のタイプに依存する。いくつかの実施形態では、メディア情報アフォーダンス616上のタップジェスチャに応じて、デバイス600上で現在再生しているメディアアイテムの再生が、デバイス650上で開始され、メディア情報アフォーダンス616上又はその近くで開始する下向きスワイプジェスチャにより、デバイス600に、上述のメディア情報アフォーダンス608と類似だが、図6Gのデバイス600上で現在再生しているメディアアイテムに関する情報を有するメディア情報アフォーダンスを表示させる。
図6Gでは、デバイス600は、メディア情報アフォーダンス616の選択に対応する入力610d(例えば、タップ)を受け取る。入力610dを受け取ったことに応じて、デバイス600は、デバイス600上で現在再生しているメディアアイテムの再生を開始する命令をデバイス650に送信する。図6Hに示すように、入力610dを受け取ったことに応じて、デバイス600は、更新されたメディア情報アフォーダンス616aを表示する(例えば、メディア情報アフォーダンス616を新しいアフォーダンスと置き換える、又はメディア情報アフォーダンス616の表示を維持するが、内部に表示された情報の少なくとも一部分を変更する)。図6Hでは、メディア情報アフォーダンス616aは、再生が開始されたことを示す更新されたアクションインジケータ616-2a(例えば、「スピーカに転送中」)を含む。いくつかの実施形態では、デバイス600は、メディア情報アフォーダンス606(図6B)上のタップに応じて、現在再生しているメディアアイテム「Mac BandによるThe Sound」の代わりに、最近再生されたメディアアイテムに対応する情報「DJ APによるSummertime」を有することを除いて、メディア情報アフォーダンス616aに類似したメディア情報アフォーダンスを表示する。
図6Iに示すように、更新されたメディア情報アフォーダンス616aを表示した後に(例えば、再生がデバイス650上で正常に開始したというインジケーションに応じて、又は入力610dを受け取った若しくはメディア情報アフォーダンス616aを表示した所定の時間後)、デバイス600は、メディア情報アフォーダンス616aを表示することを停止し、ユーザインタフェース614をグラフィカル要素614-2で更新して、(オーディオ状態インジケータ675によって示されるように)オーディオがデバイス650、「キッチンスピーカ」上で再生されていることを示す。オーディオ状態インジケータ625は、(例えば、入力610dに応じて)デバイス650上で再生が開始されると、デバイス600がオーディオを再生することを停止することを示す。いくつかの実施形態では、デバイス600は、デバイス650上で再生中にオーディオ(例えば、「Mac BandによるThe Sound」)を再生し続ける。
図6Jは、デバイス600が近接条件範囲インジケータ652の内側にないシナリオを示しており、デバイス600は、(オーディオアクティビティインジケータ625によって示されるように)オーディオを再生しており、デバイス650は、(オーディオアクティビティインジケータ675によって示されるように)デバイス600上で再生しているオーディオとは異なるオーディオを再生している。具体的には、図6Jでは、デバイス600は、ユーザインタフェース618上に示すように「O Christmas Tree」を再生しており、デバイス650は、オーディオ表現672aによって示されるように「Old MacDonald」を再生している。オーディオ表現672aは、例示目的のみのためにのみ提供されている。図6Jでは、デバイス600は、デバイス600上で現在再生されているメディアアイテムを示す、デバイス600上で実行されている音楽アプリケーションのユーザインタフェース618を表示する。図6Kは、デバイス600及びデバイス650の両方がそれらの対応するオーディオメディアアイテムを再生している間に、デバイス600が少なくとも部分的に近接条件範囲インジケータ652の内側に移動されていることを示す。近接条件範囲インジケータ652は、近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。
図6Kに示すように、物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、デバイス600上で現在再生しているメディアアイテムを表すメディア情報アフォーダンス620を表示する。いくつかの実施形態では、メディア情報アフォーダンス620は、デバイス600が現在メディアアイテムを再生しているとの判定に従って、(例えば、デバイス650がオーディオを再生しているか否かにかかわらず)デバイス600上で現在再生しているメディアアイテムを表す。いくつかの実施形態では、メディア情報アフォーダンス620は、デバイス600及びデバイス650が両方とも現在オーディオを再生しているとの判定に従って、デバイス600上で現在再生しているメディアアイテムを表す。
メディア情報アフォーダンス620は、任意選択的に、(1)デバイス600が近接しているデバイス(例えば、図6Kの「キッチンスピーカとも呼ばれるデバイス650)を示す外部デバイスインジケータ620-1、(2)メディア情報アフォーダンス620に関連付けられたアクション又は機能(例えば、メディア情報アフォーダンス620の選択に応じて実行されるアクション)を示すアクションインジケータ620-2、(3)メディアアイテムを識別する情報(例えば、曲のタイトル(「O Christmas Tree」)及びアーティスト「Carolers」)を提供するメディアアイテムインジケータ620-3、(4)メディアアイテムの状態(例えば、「電話機から」)を記述するメディアアイテム状態インジケータ620-4、及び(5)メディアアイテムに関連付けられた画像(例えば、曲が含まれるアルバムのアルバムカバー)を含むメディアアイテムグラフィック620-5を含む、デバイス600上で現在再生されているメディアアイテムに関する情報を提供するいくつかのグラフィカル要素を含む。
アクションインジケータ620-2によって示されるように、メディア情報アフォーダンス620の選択により、メディア情報アフォーダンス620に関連付けられたメディアアイテムをデバイス650上で再生させることができる。更に、メディアアイテム状態インジケータ620-4は、再生されることになるメディアアイテムのソース(例えば、「電話機から」)を示す。
いくつかの実施形態では、メディア情報アフォーダンス620は、メディア情報アフォーダンス616に類似している。例えば、メディア情報アフォーダンス620の選択に応じて実行されるアクションは、入力のタイプに依存する。いくつかの実施形態では、メディア情報アフォーダンス620上のタップジェスチャに応じて、デバイス600上で現在再生しているメディアアイテムの再生が、デバイス650上で開始され、メディア情報アフォーダンス620上又はその近くで開始する下向きスワイプジェスチャにより、デバイス600に、上述のメディア情報アフォーダンス608と類似だが、図6Kのデバイス600上で現在再生しているメディアアイテムに関する情報を有するメディア情報アフォーダンスを表示させる。
図6Kでは、デバイス600は、メディア情報アフォーダンス620の選択に対応する入力610e(例えば、タップ)を受け取る。入力610eを受け取ったことに応じて、デバイス600は、デバイス600上で現在再生しているメディアアイテムの再生を開始する命令をデバイス650に送信する。いくつかの実施形態では、入力610eを受け取ったことに応じて、デバイス600は、更新されたメディア情報アフォーダンス616aに類似した更新されたメディア情報アフォーダンスを表示して、デバイス600上で現在再生しているメディアアイテムがデバイス650上で再生するために転送されていることを示す。
図6Lに示すように、入力610eを受け取った後に(例えば、入力610eを受け取ったことに応じて)、デバイス600は、メディア情報アフォーダンス620を表示することを停止し、ユーザインタフェース618をグラフィカル要素618-2で更新して、(オーディオ状態インジケータ675によって示されるように)オーディオがデバイス650、「キッチンスピーカ」上で再生されていることを示す。オーディオ状態インジケータ625は、(例えば、入力610eに応じて)デバイス650上で再生が開始されると、デバイス600がオーディオを再生することを停止することを示す。オーディオ状態インジケーション675は、デバイス650がオーディオ(例えば、オーディオ表現672bによって示される「O Christmas Tree」)を再生していることを示す。いくつかの実施形態では、デバイス600は、デバイス650上で再生中にオーディオ(例えば、「O Christmas Tree」)を再生し続ける。
図6Mは、デバイス600が近接条件範囲インジケータ652の内側にないシナリオを示しており、デバイス600は、(オーディオアクティビティインジケータ625によって示されるように)オーディオを再生しておらず、デバイス650は、(オーディオアクティビティインジケータ675によって示されるように、The Starsによる「Anything」(例えば672c))オーディオを再生している。図6Mでは、デバイス600は、ユーザインタフェース604(例えば、アプリケーションアイコンを有するホーム画面)を表示する。図6Nは、デバイス600及びデバイス650の両方がそれらの対応するオーディオメディアアイテムを再生している間に、デバイス600が少なくとも部分的に近接条件範囲インジケータ652の内側に移動されていることを示す。近接条件範囲インジケータ652は、近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。
物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、デバイス650上で現在再生しているメディアアイテムを表すメディア情報アフォーダンス622を表示する。いくつかの実施形態では、メディア情報アフォーダンス622は、デバイス650が現在メディアアイテムを再生しており、かつデバイス600が現在メディアアイテムを再生していないとの判定に従って、デバイス650上で現在再生しているメディアアイテムを表す。いくつかの実施形態では、メディア情報アフォーダンス620は、デバイス650が現在メディアアイテムを再生しているとの判定に従って、(例えば、デバイス600がメディアアイテムを再生しているか否かにかかわらず)デバイス650上で現在再生しているメディアアイテムを表す。
メディア情報アフォーダンス622は、任意選択的に、(1)デバイス600が近接しているデバイス(例えば、キッチンスピーカとも呼ばれるデバイス650)を示す外部デバイスインジケータ622-1、(2)メディア情報アフォーダンス622に関連付けられたアクション又は機能(例えば、メディア情報アフォーダンス622の選択に応じて実行されるアクション)を示すアクションインジケータ622-2、(3)メディアアイテムを識別する情報(例えば、曲のタイトル(「Anything」)及びアーティスト「The Stars」)を提供するメディアアイテムインジケータ622-3、及び(4)メディアアイテムに関連付けられた画像(例えば、曲が含まれるアルバムのアルバムカバー)を含むメディアアイテムグラフィック622-4を含む、デバイス650上で現在再生されているメディアアイテムに関する情報を提供するいくつかのグラフィカル要素を含む。
アクションインジケータ622-2によって示されるように、メディア情報アフォーダンス622の選択により、メディア情報アフォーダンス622に関連付けられたメディアアイテムをデバイス600上で再生させる(例えばデバイス650から転送させる)ことができる。
いくつかの実施形態では、メディア情報アフォーダンス622の選択に応じて実行されるアクションは、入力のタイプに依存する。例えば、メディア情報アフォーダンス622上のタップジェスチャに応じて、デバイス650上で現在再生しているメディアアイテムの再生が、デバイス600上で開始され、メディア情報アフォーダンス622上又はその近くで開始する下向きスワイプジェスチャにより、デバイス600に、上述のメディア情報アフォーダンス608と類似だが、図6Nのデバイス650上で現在再生しているメディアアイテムに関する情報を有するメディア情報アフォーダンスを表示させる。
図6Nでは、デバイス600は、メディア情報アフォーダンス622の選択に対応する入力610f(例えば、タップ)を受け取る。入力610fを受け取ったことに応じて、デバイス600は、デバイス650上で現在再生しているメディアアイテムのデバイス600上の再生を開始する。図6Oに示すように、入力610fを受け取ったことに応じて、デバイス600は、更新されたアクションインジケータ622-2aを有する(更新されたメディア情報アフォーダンス616aに類似した)更新されたメディア情報アフォーダンス622aを表示して、デバイス650上で現在再生しているメディアアイテムがデバイス600上で再生するために転送されていることを示す。
図6Pに示すように、更新されたメディア情報アフォーダンス622aを表示した後に(例えば、再生がデバイス600上で正常に開始したというインジケーションに応じて、又は入力610fを受信した若しくはメディア情報アフォーダンス622aを表示した所定の時間後)、デバイス600は、メディア情報アフォーダンス622aを表示することを停止し、ユーザインタフェース624を表示して、(オーディオ状態インジケータ625によって示されるように)オーディオがデバイス600上で再生されていることを示す。いくつかの実施形態では、ユーザインタフェース624は、デバイス600上で再生を開始したことに応じて起動される音楽アプリケーションに対応し、ユーザがデバイス600上の再生を更に制御することを可能にする。オーディオ状態インジケータ675は、(例えば、入力610fに応じて)デバイス600上で再生が開始されると、デバイス650がオーディオを再生することを停止することを示す。いくつかの実施形態では、デバイス650は、デバイス600上で再生中にオーディオ(例えば、The Starsによる「Anything」)を再生し続ける。
図7は、いくつかの実施形態に係る、電子デバイスを使用してオーディオ再生を制御する方法を示すフロー図である。方法700は、表示デバイス(例えば、602)を備えたデバイス(例えば、100、300、500、又は600)において実行される。方法700のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法700は、オーディオ再生を制御するための直感的な方法を提供する。この方法は、オーディオ再生を制御するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的にオーディオ再生を制御することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
いくつかの実施形態では、電子デバイス(例えば、600)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、表示生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。表示生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザの入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部の表示生成構成要素に送信して、(例えば、表示デバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
電子デバイスは、外部デバイス(例えば、650)に接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件(例えば、652によって表される)を満たすというインジケーションを検出する(702)。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすとの判定に応じて提供される。いくつかの実施形態では、近接条件は、電子デバイスとの間の距離が閾値距離(例えば、6インチ、12インチ、18インチ、24インチ)未満である場合に満たされる。
物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、表示デバイスを介して、第1のメディアアイテム(例えば、音楽トラック、オーディオブック(又はチャプタなどのその一部分)、ポッドキャスト、ビデオ、電話通話、電子デバイス上で現在再生しているメディアアイテム、電子デバイス上で再生されて終了した又は停止された直近のメディアアイテム、ユーザがメディアアプリケーションを起動する又はプレイリストを選択すると、プレイリスト内の第1のトラックなどの、電子デバイス上で次に再生されるようにスケジュールされたメディアアイテム)を表す第1のメディア情報アフォーダンス(例えば606、616、620)を表示し(704)、第1のメディア情報アフォーダンスは、第1のメディアアイテムに関する情報の第1のセット(例えば、606-1~606-5)を含む。物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することにより、物理的近接度が近接条件を満たすことをユーザに示すことによって、フィードバックを自動的に提供し、したがって、第1のメディア情報アフォーダンスを表示するために必要とされる入力の数を低減する。改善されたフィードバックを提供し、動作を実行するために必要とされる入力の数を低減し、更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
電子デバイスは、第1のメディア情報アフォーダンスの選択を表す第1の入力(例えば、610a、610d、610e)を受け取る(706)。
第1の入力を受け取ったことに応じて(708)、第1の入力が第1のタイプの入力(例えば、第1のメディア情報アフォーダンスに対応する位置における電子デバイスのタッチ感知ディスプレイ上のタップジェスチャ)であるとの判定に従って、電子デバイスは、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信する(710)(例えば、図6H~図6I)。
第1の入力を受け取ったことに応じて(708)、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力(例えば、第1のメディア情報アフォーダンス上の方向性スワイプジェスチャ)であるとの判定に従って、電子デバイスは、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンス(例えば、608)を表示し(712)、第2のメディア情報アフォーダンスは、第1のメディア情報アフォーダンスとは異なり、第1のメディアアイテムに関する情報の第2のセットを含む。第1のメディアアフォーダンスを選択する入力のタイプに応じて、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信すること、又は第1のメディアアイテムを表す第2のメディア情報アフォーダンスを表示することにより、追加の表示されたコントロールによりユーザインタフェースを雑然とさせることなく、第1のメディアアフォーダンスに関する追加の制御オプションを提供する。表示される追加コントローラによってUIを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、電子デバイスは、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信することなく、第2のメディア情報アフォーダンスを表示する。いくつかの実施形態では、情報の第2のセットは、情報の第1のセットを含むが、異なって表示される。いくつかの実施形態では、第2のメディア情報アフォーダンスは、第1のメディアアイテムに関する追加情報(例えば、より詳細)及び/又は第1のメディアアイテムのより大きいグラフィカル表現を含む。いくつかの実施形態では、情報の第2のセットは、第1のメディアアイテムに続くメディアアイテム(例えば、第1のメディアアイテムの後に再生されるようにスケジュールされたメディアアイテム)、及び/又は待ち行列内の第1のメディアアイテムの前のメディアアイテム(例えば、第1のメディアアイテムの前に再生された、又はプレイリストなどのメディアアイテムのリスト内の第1のメディアアイテムの前に配置されたメディアアイテム)を含む、メディアアイテムの待ち行列を含む。
いくつかの実施形態では、第1のメディア情報アフォーダンスは、外部デバイスを識別するインジケーション(例えば、606-1、606-2)を含む。いくつかの実施形態では、第2のメディア情報アフォーダンスは、外部デバイスを識別するインジケーションを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディア情報アフォーダンスの選択により外部デバイス上の第1のメディアアイテムの再生を開始することを示すインジケーションを含む。
いくつかの実施形態では、第1の入力を受け取ったことに応じて、かつ第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイスは、第1のメディア情報アフォーダンスの視覚的外観(例えば、612-2a)を変えて、外部デバイス上の第1のメディアアイテムの再生が開始されたことを示す(例えば、図6Hを参照)。いくつかの実施形態では、第1のメディア情報アフォーダンスの視覚的外観を変えることは、任意選択的に第1のメディアアイテムに関する情報の第1のセットの少なくとも一部の表示を維持している間に、外部デバイス上の第1のメディアアイテムの再生が開始されたことを示すテキストを表示することを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスの視覚的外観を変えることは、第1のメディア情報アフォーダンスの選択により外部デバイス上の第1のメディアアイテムの再生を開始するというインジケーションを外部デバイス上の第1のメディアアイテムの再生が開始されたというインジケーション(例えば、テキスト)と置き換えることを含む。
いくつかの実施形態では、第1のメディアアイテムに関する情報の第1のセットは、第1のメディアアイテムに対応するメディアアイテムのタイプを示す(例えば、606-5、902-4)。例示的なメディアアイテムのタイプとしては、音楽トラック、オーディオブック、ポッドキャスト、ビデオ、及び電話通話が挙げられるが、これらに限定されない。いくつかの実施形態では、電話通話メディアアイテムに関する情報の第1のセットは、通話の参加者のアバターを含む。
いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始することの一部として、第1のメディアアイテムがデータ送信条件を満たす(例えば、第1のメディアアイテムが電話通話である、第1のメディアアイテムが電子デバイスに利用可能であるが外部デバイスには利用可能ではないアプリケーション、サービス、又はアカウントによって提供される)との判定に従って、電子デバイスは、第1のメディアアイテムのデータを外部デバイスに送信する。いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始することの一部として、第1のメディアアイテムがデータ送信条件を満たさない(例えば、第1のメディアアイテムが、外部デバイスがアクセスを有する特定のアプリケーション、サービス、又はアカウントによって提供される)との判定に従って、電子デバイスは、第1のメディアアイテムのデータを外部デバイスに送信することを取り止める。第1のメディアアイテムがデータ送信条件を満たすかどうかに基づいて、第1のメディアアイテムのデータを外部デバイスに送信する(又は送信しない)ことにより、ユーザがデータを送信するために追加の入力を提供する必要があることを回避する。更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のメディアアイテムを含むメディアアイテムの待ち行列は、再生を開始する前に電子デバイス上に存在する。そのようないくつかの実施形態では、再生を開始することは、待ち行列を外部デバイスに転送することを含む。いくつかの実施形態では、第1のメディアアイテムは、共通のユーザアカウントを介して電子デバイス及び外部デバイスの両方にアクセス可能である。いくつかの実施形態では、外部デバイスは、共通のユーザアカウントから第1のメディアアイテムを取得する(例えば、第1のアイテムの再生は、第1のメディアアイテムを電子デバイスから外部デバイスにストリーミングすることを含まない)。いくつかの実施形態では、外部デバイスは、共通のユーザアカウントから待ち行列を取得する。
いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信した後に、時間条件が満たされた(例えば、第1のタイプの第1の入力を受け取ってから閾値時間が経過した)との判定に応じて、電子デバイスは、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止する(例えば、図6Iを参照)。
いくつかの実施形態では、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、かつ第1の入力を受け取る前に、電子デバイスは、電子デバイスと外部デバイスとの間の物理的近接度が物理的分離条件(例えば、656によって表される)を満たすというインジケーションを検出する。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が物理的分離条件を満たすとの判定に応じて提供される。いくつかの実施形態では、物理的分離条件は、電子デバイスと外部デバイスとの間の距離が既定の閾値距離を上回る場合に満たされる。いくつかの実施形態では、物理的分離条件に関連付けられた閾値距離は、(第1の)近接条件に関連付けられた第1の閾値距離よりも大きい。例えば、物理的分離条件は、電子デバイスと外部デバイスとの間の距離が第3の閾値距離(例えば、20フィート)を上回る場合に満たされ、第1の近接条件は、電子デバイスと外部デバイスとの間の距離が第1の閾値距離(例えば、1~2フィート)未満である場合に満たされ、第3の閾値距離は、第1の閾値距離よりも大きい。いくつかの実施形態では、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、かつ第1の入力を受け取る前に、物理的近接度が物理的分離条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止する(例えば、図11D)。物理的近接度が物理的分離条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止することにより、第1のメディア情報アフォーダンスの選択をでは外部デバイス上で再生をもはや開始することができないことを示すフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速かつ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のタイプの入力は、タップジェスチャ(例えば、610d)を含み、第2のタイプの入力は、スワイプ又はドラッグジェスチャ(例えば、610a、垂直上向き若しくは垂直下向きスワイプ又はドラッグジェスチャ)を含む。
いくつかの実施形態では、第1のメディアアイテムを表す第2のメディア情報アフォーダンスを表示している間に、電子デバイスは、第2のメディア情報アフォーダンスの選択を表す第2の入力(例えば、610c)を受け取る。いくつかの実施形態では、第2のメディア情報アフォーダンスの選択を表す第2の入力を受け取ったことに応じて、電子デバイスは、外部デバイス上の第2のメディアアイテムの再生を開始する命令を外部デバイスに送信する。いくつかの実施形態では、第2のメディアアイテムは、第1のメディアアイテムである。いくつかの実施形態では、第2のメディア情報アフォーダンスは、第1のメディアアイテムの表現及び少なくとも1つの他のメディアアイテムの表現を含むメディアアイテムの待ち行列を表す。そのようないくつかの実施形態では、電子デバイスは、入力(例えば、水平スワイプ又はドラッグジェスチャ)に応じて、待ち行列をスクロールする。いくつかの実施形態では、待ち行列内のメディアアイテムの選択に対応する入力に応じて、電子デバイスは、外部デバイス上の選択されたメディアアイテムの再生を開始する命令を外部デバイスに送信する。(例えば、第1のメディアアイテムに関する追加情報を有する)第2のメディア情報アフォーダンスを表示し、第2のメディア情報アフォーダンスの選択に応じて、外部デバイス上の第2のメディアアイテムの再生を開始することにより、ユーザに追加情報及び/又は外部デバイス上の再生に対する制御を提供することによって、改善されたフィードバックを提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速かつ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出することは、電子デバイスが第1のメディアアイテムの再生を引き起こしている間に行われる(例えば、図6G)。いくつかの実施形態では、再生を引き起こすことは、電子デバイスの1つ以上のスピーカを介してメディアアイテムを出力すること、又は1つ以上の接続された外部スピーカで出力を引き起こすことを含む。いくつかの実施形態では、第1の入力を受け取ったことに応じて、かつ第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイスは、電子デバイスにおける第1のメディアアイテムの再生を引き起こすことを停止する(例えば、図6Iを参照)。いくつかの実施形態では、電子デバイスは、第1のメディアアイテムを再生し続ける。
いくつかの実施形態では、第1のメディア情報アフォーダンスは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出している間に第1のメディアアイテムを電子デバイス上で再生しているとの判定に従って、第1のメディアアイテムを表す(例えば、図6G)。いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信することは、第1のメディアアイテムを電子デバイス上で現在再生しているとの判定に従って実行される。
いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始することの一部として、電子デバイスは、外部デバイス上で第3のメディアアイテムを再生することを停止する(例えば、図6Lを参照)。
いくつかの実施形態では、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出している間に、電子デバイスがメディアアイテムを再生していないとの判定に従って(例えば、図6B)、第1のメディアアイテムは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出する前の直近に電子デバイス上で再生されたメディアアイテムである。いくつかの実施形態では、第1のメディア情報アフォーダンスは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出した時点で、外部デバイスがメディアアイテムを再生していないとの判定に従って、電子デバイス上で直近に再生されたメディアアイテムを表す。
方法700に関連して上述したプロセスの詳細(例えば、図7)はまた、後述する方法にも類似する方式で適用可能であることに留意されたい。例えば、方法800及び/又は方法1000は、方法700を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法700の動作706は、方法1000の動作1004に記載された第1のメディア情報アフォーダンスを選択するために実行することができ、動作708、710、及び/又は712は、選択に応じて、方法1000の一部として実行することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図8は、いくつかの実施形態に係る、電子デバイスを使用してオーディオ再生を制御する方法を示すフロー図である。方法800は、表示デバイス(例えば、602)を備えたデバイス(例えば、100、300、500、又は600)において実行される。方法800のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法800は、オーディオ再生を制御するための直感的な方法を提供する。この方法は、オーディオ再生を制御するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的にオーディオ再生を制御することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
いくつかの実施形態では、電子デバイス(例えば、600)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、表示生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。表示生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザの入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部の表示生成構成要素に送信して、(例えば、表示デバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
電子デバイスは、外部デバイス(例えば、650)に接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が近接条件(例えば、652によって表される)を満たすというインジケーションを検出する(802)。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすとの判定に応じて提供される。いくつかの実施形態では、近接条件は、電子デバイス間の距離が閾値距離(例えば、6インチ、12インチ、18インチ、24インチ)未満である場合に満たされる。
物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、表示デバイスを介して、外部デバイス上で現在再生している第1のメディアアイテム(例えば、音楽トラック、オーディオブック(又はチャプタなどのその一部分)、ポッドキャスト、ビデオ、電話通話)を表す第1のメディア情報アフォーダンス(例えば、622)を表示する(804)。いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディアアイテムを外部デバイス上で現在再生しており、かつ電子デバイス上で現在再生していないとの判定に従って、第1のメディアアイテムを表す。いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディアアイテムに関する情報の第1のセット(例えば、622-1~622-4)を含む。物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することにより、物理的近接度が近接条件を満たすことをユーザに示すことによって、フィードバックを自動的に提供し、したがって、第1のメディア情報アフォーダンスを表示するために必要とされる入力の数を低減する。改善されたフィードバックを提供し、動作を実行するために必要とされる入力の数を低減し、更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
電子デバイスは、第1のメディア情報アフォーダンスの選択を表す第1の入力(例えば、610f)を受け取る(806)。
第1の入力を受け取ったことに応じて(808)、第1の入力が第1のタイプの入力(例えば、第1のメディア情報アフォーダンスに対応する位置における電子デバイスのタッチ感知ディスプレイ上のタップジェスチャ)であるとの判定に従って、電子デバイスは、電子デバイス上の第1のメディアアイテムの再生を開始する(810)。
第1の入力を受け取ったことに応じて(808)、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力(例えば、第1のメディア情報アフォーダンス上の方向性スワイプジェスチャ)であるとの判定に従って、電子デバイスは、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンス(例えば、608)を表示し(812)、第2のメディア情報アフォーダンスは、第1のメディア情報アフォーダンスとは異なり、第1のメディアアイテムに関する情報の第2のセットを含む。第1のメディアアフォーダンスを選択する入力のタイプに応じて、電子デバイス上の第1のメディアアイテムの再生を開始すること、又は第1のメディアアイテムを表す第2のメディア情報アフォーダンスを表示することにより、追加の表示されたコントロールによりユーザインタフェースを雑然とさせることなく、第1のメディアアフォーダンスに関する追加の制御オプションを提供する。表示される追加コントローラによってUIを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、情報の第2のセットは、情報の第1のセットを含むが、異なって表示される。いくつかの実施形態では、第2のメディア情報アフォーダンスは、第1のメディアアイテムに関する追加情報(例えば、より詳細)及び/又は第1のメディアアイテムのより大きいグラフィカル表現を含む。いくつかの実施形態では、情報の第2のセットは、第1のメディアアイテムに続くメディアアイテム(例えば、第1のメディアアイテムの後に再生されるようにスケジュールされたメディアアイテム)、及び/又は待ち行列内の第1のメディアアイテムの前のメディアアイテム(例えば、第1のメディアアイテムの前に再生された、又はプレイリストなどのメディアアイテムのリスト内の第1のメディアアイテムの前に配置されたメディアアイテム)を含む、メディアアイテムの待ち行列を含む。
いくつかの実施形態では、電子デバイスは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出した時点で、電子デバイスがオーディオメディアアイテムを再生していないとの判定に従って、外部デバイス上で現在再生している第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示する(例えば、図6N)。
いくつかの実施形態では、第1のメディア情報アフォーダンスは、電子デバイスを識別するインジケーション(例えば、622-2)を含む。いくつかの実施形態では、第2のメディアアフォーダンスは、電子デバイスを識別するインジケーションを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディア情報アフォーダンスの選択により電子デバイス上の第1のメディアアイテムの再生を開始することを示すインジケーションを含む。
いくつかの実施形態では、第1の入力を受け取ったことに応じて、かつ第1の入力が第1のタイプの入力であるとの判定に従って、電子デバイスは、第1のメディア情報アフォーダンスの視覚的外観(例えば、622-2a)を変えて、電子デバイス上の第1のメディアアイテムの再生が開始されたことを示す。いくつかの実施形態では、第1のメディア情報アフォーダンスの視覚的外観を変えることは、任意選択的に第1のメディアアイテムに関する情報の第1のセットの少なくとも一部の表示を維持している間に、電子デバイス上の第1のメディアアイテムの再生が開始されたことを示すテキストを表示することを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスの視覚的外観を変えることは、第1のメディア情報アフォーダンスの選択により電子デバイス上の第1のメディアアイテムの再生を開始するというインジケーションを電子デバイス上の第1のメディアアイテムの再生が開始されたというインジケーション(例えば、テキスト)と置き換えることを含む。
いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディアアイテムのソースとして外部デバイスを識別するインジケーション(例えば、622-1)を含む。
いくつかの実施形態では、第1のメディアアイテムに関する情報の第1のセットは、第1のメディアアイテムに対応するメディアアイテムのタイプを示す(例えば、622-4、902-4)。例示的なメディアアイテムのタイプとしては、音楽トラック、オーディオブック、ポッドキャスト、ビデオ、及び電話通話が挙げられるが、これらに限定されない。いくつかの実施形態では、電話通話メディアアイテムに関する情報の第1のセットは、通話の参加者のアバターを含む。
いくつかの実施形態では、電子デバイス上の第1のメディアアイテムの再生を開始することの一部として、第1のメディアアイテムがデータ送信条件を満たす(例えば、第1のメディアアイテムが外部デバイスに利用可能だが電子デバイスには利用可能でないアプリケーション又はアカウントによって提供される)との判定に従って、電子デバイスは、第1のメディアアイテムのデータを外部デバイスから受信する。いくつかの実施形態では、第1のメディアアイテムを含むメディアアイテムの待ち行列は、再生を開始する前に外部デバイス上に存在する。そのようないくつかの実施形態では、再生を開始することは、待ち行列を電子デバイスに転送することを含む。いくつかの実施形態では、電子デバイス上の第1のメディアアイテムの再生を開始することの一部として、第1のメディアアイテムがデータ送信条件を満たさない(例えば、電子デバイスが第1のメディアアイテムのデータを外部デバイスに送信していた、第1のメディアアイテムが電話通話である、第1のメディアアイテムが、電子デバイスがアクセスを有する特定のアプリケーション、サービス、又はアカウントによって提供される)との判定に従って、電子デバイスは、第1のメディアアイテムのデータを外部デバイスから受信することを取り止めする。第1のメディアアイテムがデータ送信条件を満たすかどうかに基づいて、第1のメディアアイテムのデータを外部デバイスから受信する(又は受信しない)ことにより、ユーザがデータを受信するために追加の入力を提供する必要があることを回避する。更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のメディアアイテムを含むメディアアイテムの待ち行列は、再生を開始する前に外部デバイス上に存在する。そのようないくつかの実施形態では、再生を開始することは、待ち行列を電子デバイスに転送することを含む。いくつかの実施形態では、第1のメディアアイテムは、共通のユーザアカウントを介して電子デバイス及び外部デバイスの両方にアクセス可能である。いくつかの実施形態では、電子デバイスは、共通のユーザアカウントから第1のメディアアイテムを取得する(例えば、第1のアイテムの再生は、第1のメディアアイテムを外部デバイスから電子デバイスにストリーミングすることを含まない)。いくつかの実施形態では、電子デバイスは、共通のユーザアカウントから待ち行列を取得する。
いくつかの実施形態では、電子デバイス上の第1のメディアアイテムの再生を開始した後に、時間条件が満たされた(例えば、第1のタイプの第1の入力を受け取ってから閾値時間が経過した)との判定に応じて、電子デバイスは、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止する(例えば、図6Pを参照)。
いくつかの実施形態では、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示した後に、かつ第1の入力を受け取る前に、電子デバイスは、電子デバイスと外部デバイスとの間の物理的近接度が物理的分離条件(例えば、656によって表される)を満たすというインジケーションを検出する。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が物理的分離条件を満たすとの判定に応じて提供される。いくつかの実施形態では、物理的分離条件は、電子デバイスと外部デバイスとの間の距離が既定の閾値距離を上回る場合に満たされる。いくつかの実施形態では、物理的分離条件に関連付けられた閾値距離は、(第1の)近接条件に関連付けられた第1の閾値距離よりも大きい。例えば、物理的分離条件は、電子デバイスと外部デバイスとの間の距離が第3の閾値距離(例えば、20フィート)を上回る場合に満たされ、第1の近接条件は、電子デバイスと外部デバイスとの間の距離が第1の閾値距離(例えば、1~2フィート)未満である場合に満たされ、第3の閾値距離は、第1の閾値距離よりも大きい。いくつかの実施形態では、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示した後に、かつ第1の入力を受け取る前に、物理的近接度が物理的分離条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止する(例えば、図11Dを参照)。物理的近接度が物理的分離条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止することにより、第1のメディア情報アフォーダンスの選択では電子デバイス上で再生をもはや開始することができないことを示すフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速かつ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のタイプの入力は、タップジェスチャ(例えば、610f)を含み、第2のタイプの入力は、スワイプ又はドラッグジェスチャ(例えば、610a、垂直上向き若しくは垂直下向きスワイプ又はドラッグジェスチャ)を含む。
いくつかの実施形態では、第1のメディアアイテムを表す第2のメディア情報アフォーダンス(例えば、608)を表示している間に、電子デバイスは、第2のメディア情報アフォーダンスの選択を表す第2の入力(例えば、610c)を受け取る。いくつかの実施形態では、第2のメディア情報アフォーダンスの選択を表す第2の入力を受け取ったことに応じて、電子デバイスは、電子デバイス上の第2のメディアアイテムの再生を開始する。いくつかの実施形態では、第2のメディアアイテムは、第1のメディアアイテムである。いくつかの実施形態では、第2のメディア情報アフォーダンスは、第1のメディアアイテムの表現及び少なくとも1つの他のメディアアイテムの表現を含むメディアアイテムの待ち行列を表す。そのようないくつかの実施形態では、電子デバイスは、入力(例えば、水平スワイプ又はドラッグジェスチャ)に応じて、待ち行列をスクロールする。いくつかの実施形態では、待ち行列内のメディアアイテムの選択に対応する入力に応じて、電子デバイスは、電子デバイス上の選択されたメディアアイテムの再生を開始する。(例えば、第1のメディアアイテムに関する追加情報を有する)第2のメディア情報アフォーダンスを表示し、第2のメディア情報アフォーダンスの選択に応じて、電子デバイス上の第2のメディアアイテムの再生を開始することにより、ユーザに追加情報及び/又は外部デバイス上の再生に対する制御を提供することによって、改善されたフィードバックを提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速かつ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の入力を受け取ったことに応じて、かつ第1の入力が第1のタイプの入力であるとの判定に従って、外部デバイスは、第1のメディアアイテムを再生することを停止する(例えば、図6Pを参照)。いくつかの実施形態では、外部デバイスは、第1のメディアアイテムを再生し続ける。
方法800に関連して上述したプロセスの詳細(例えば、図8)はまた、後述する方法にも類似する方式で適用可能であることに留意されたい。例えば、方法1000は、方法800を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法800の動作806は、方法1000の動作1004に記載された第1のメディア情報アフォーダンスを選択するために実行することができ、動作808、810、及び/又は812は、選択に応じて、方法1000の一部として実行することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図9A~図9Dは、いくつかの実施形態に係る、メディアの再生を制御するための例示的な方法及びユーザインタフェースを示す。いくつかの実施形態では、図9A~図9Dを参照して説明する技術は、ユーザがタッチ入力により異なるデバイス上のメディアアイテムの再生を開始することを可能にする。
図9Aは、図6A~図6Pを参照して上述したデバイス600、デバイス650、及び近接条件範囲インジケータ652を示す。加えて、図9Aは、再生近接条件範囲インジケータ654を示す。以下でより詳細に説明するように、メディアアイテムの再生は、デバイス600を再生近接条件範囲インジケータ654内に持ってくることによって、自動的に(例えば、606、608、616、620、及び622などのメディア情報アフォーダンスの選択なしに)開始することができる。
再生近接条件範囲インジケータ654は、視覚的補助として含まれ、再生近接条件を満たす物理的近接度を表すことを意図している。(例えば、部分的又は完全に)再生近接条件範囲インジケータ654内の検出可能なデバイス(例えば、600)の存在は、再生近接条件を満たすが、検出可能なデバイスが再生近接条件範囲インジケータ654の外側に位置する場合は、再生近接条件を満たさない。再生近接条件範囲インジケータ654のグラフィカル表現は、再生近接条件が満たされているかどうかを判定する範囲を限定することを意図するものではない。更に、図は必ずしも縮尺通りではなく、単に視覚的補助として含まれる。したがって、特に断りがない限り、図に示される特徴のサイズ及び縮尺は、近接している又は再生近接条件を満たすために必要とされる距離に対する制限として意図するものではない。しかし、図9Aの矢印d1及びd2によって示されるように、再生近接条件範囲インジケータ654は、近接条件範囲インジケータ652の内側にあり(例えば、d1は、d2よりも大きい)、それにより、デバイス600は、近接条件範囲インジケータ652に関連付けられた近接条件を満たすためよりも、再生近接条件範囲インジケータ654に関連付けられた再生近接条件を満たすためにデバイス650により近接していなければならない。
図9Aは、デバイス600が近接条件範囲インジケータ652の内側にないシナリオを示しており、デバイス600は、(電話ユーザインタフェース900及びオーディオアクティビティインジケータ625によって示されるように)アクティブな電話通話を有し、デバイス650は、(オーディオアクティビティインジケータ675によって示されるように)オーディオを再生していない。図9Aでは、デバイス600は、(オーディオ状態インジケータ900-1によって示されるように)電話通話のためのオーディオ出力を提供し、かつ電話通話のためのオーディオ入力を受信している。図9A~図9Dは電話通話メディアアイテムを参照して説明されているが、記載された技術は、他のタイプのメディアアイテム(例えば、ビデオ通話、音楽トラック、オーディオブック、ポッドキャスト)に適用することができる。同様に、図6A~図6Pを参照して上述した技術は、電話通話に適用することができる。
図9Bは、デバイス600が、デバイス600上の電話通話中に少なくとも部分的に近接条件範囲インジケータ652の内側に移動されていることを示す。近接条件範囲インジケータ652は、近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。
物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、デバイス600上で現在再生しているメディアアイテム(例えば、ユーザインタフェース900に関連付けられた電話通話)を表すメディア情報アフォーダンス902を表示する。メディア情報アフォーダンス902は、電話通話メディアアイテムに適用されるようなメディア情報アフォーダンス606、608、616、620、及び622に類似している。
メディア情報アフォーダンス902は、任意選択的に、(1)デバイス600が近接しているデバイス(例えば、キッチンスピーカとも呼ばれるデバイス650)を示す外部デバイスインジケータ902-1、(2)メディア情報アフォーダンス902に関連付けられたアクション又は機能(例えば、メディア情報アフォーダンス902の選択に応じて実行されるアクション)を示すアクションインジケータ902-2、(3)メディアアイテムを識別する情報(例えば、通話参加者(「John Appleseed」)及び現在の通話ソース「電話機」)を提供するメディアアイテムインジケータ902-3、及び(4)メディアアイテムに関連付けられた画像を含むメディアアイテムグラフィック902-4を含む、図9Bの電話通話に関する情報を提供するいくつかのグラフィカル要素を含む。図9Bに示す実施形態では、メディアアイテムグラフィック902-4は、通話の相手方の通話参加者の表現(例えば、アバター)と、電話機を表すアイコン又はサムネイルとを含む。いくつかの実施形態では、メディアアイテムグラフィック902-4内の通話参加者の表現は、参加者のイニシャル又は名前を含む。
図9Bは、メディア情報アフォーダンス902がデバイス600上に表示されている間に、かつデバイス600上の電話通話が進行中である間に、デバイス600が少なくとも部分的に再生近接条件範囲インジケータ654の内側に移動されることを示す。再生近接条件範囲インジケータ654は、再生近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が再生近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、再生近接条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、再生近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、再生近接条件が満たされているというインジケーションを送信する)。
物理的近接度が再生近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、デバイス650上の電話通話の再生を開始する。図9Cに示すように、物理的近接度が再生近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、更新されたアクションインジケータ902-2aを有する(更新されたメディア情報アフォーダンス616a及び622aに類似した)更新されたメディア情報アフォーダンス902aを表示して、デバイス600上で現在進行中の電話通話がデバイス600に転送されていることを示す。いくつかの実施形態では、電話通話の再生を開始することは、デバイス650上で電話通話のオーディオを出力することを含む。いくつかの実施形態では、物理的近接度が再生近接条件を満たすというインジケーションを検出したことに応じて、デバイス650は、電話通話のためのオーディオ入力を受信することを開始する(例えば、デバイス650によって受信されたオーディオは、他の参加者に送信される)。いくつかの実施形態では、デバイス600は、電話通話のソースのままである。
図9Dに示すように、更新されたメディア情報アフォーダンス902aを表示した後に(例えば、再生がデバイス650上で正常に開始したというインジケーションに応じて、又は物理的近接度が再生近接条件を満たすというインジケーションを検出した若しくはメディア情報アフォーダンス902aを表示した所定の時間後)、デバイス600は、メディア情報アフォーダンス902aを表示することを停止し、ユーザインタフェース900を更新して、(更新されたオーディオ状態インジケータ900-1aによって示されるように)オーディオがデバイス650上で再生されていることを示す。
図10は、いくつかの実施形態に係る、電子デバイスを使用してオーディオ再生を制御する方法を示すフロー図である。方法1000は、表示デバイス(例えば、602)を備えたデバイス(例えば、100、300、500、又は600)において実行される。方法1000のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法1000は、オーディオ再生を制御するための直感的な方法を提供する。この方法は、オーディオ再生を制御するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的にオーディオ再生を制御することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
いくつかの実施形態では、電子デバイス(例えば、600)は、コンピュータシステムである。コンピュータシステムは、任意選択的に、表示生成構成要素と1つ以上の入力デバイスとの通信(例えば、有線通信、無線通信)である。表示生成構成要素は、CRTディスプレイを介したディスプレイ、LEDディスプレイを介したディスプレイ、又は画像投影を介した表示などの視覚的な出力を提供するように構成されている。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムと一体化される。いくつかの実施形態では、表示生成構成要素は、コンピュータシステムとは別個である。1つ以上の入力デバイスは、ユーザの入力を受けるタッチ感知面など、入力を受け取るように構成される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムと一体化される。いくつかの実施形態では、1つ以上の入力デバイスは、コンピュータシステムとは別個である。したがって、コンピュータシステムは、有線又は無線接続を介して、データ(例えば、画像データ又はビデオデータ)を、一体型又は外部の表示生成構成要素に送信して、(例えば、表示デバイスを使用して)コンテンツを視覚的に生成することができ、1つ以上の入力デバイスからの入力を、有線又は無線接続で受信することができる。
電子デバイスは、外部デバイス(例えば、650)に接続されている間に、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件(例えば、652によって表される)を満たすというインジケーションを検出する(1002)。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすとの判定に応じて提供される。いくつかの実施形態では、第1の近接条件は、電子デバイスと外部デバイスとの間の距離が第1の閾値距離(例えば、6インチ、12インチ、18インチ、24インチ)未満である場合に満たされる。
物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、表示デバイスを介して、第1のメディアアイテム(例えば、音楽トラック、オーディオブック(又はチャプタなどのその一部分)、ポッドキャスト、ビデオ、電話通話、電子デバイス上で再生されることになるメディアアイテム(例えば、電子デバイス上で現在再生しているメディアアイテム、電子デバイス上で再生されて終了した又は停止された直近のメディアアイテム、ユーザがメディアアプリケーションを起動する又はプレイリストを選択すると、プレイリスト内の第1のトラックなどの、電子デバイス上で次に再生されるようにスケジュールされたメディアアイテム)、外部デバイス上で再生されることになるメディアアイテム)を表す第1のメディア情報アフォーダンス(例えば、902)を表示する(1004)。物理的近接度が第1の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することにより、物理的近接度が近接条件を満たすことをユーザに示すことによって、フィードバックを自動的に提供し、したがって、第1のメディア情報アフォーダンスを表示するために必要とされる入力の数を低減する。改善されたフィードバックを提供し、動作を実行するために必要とされる入力の数を低減し、更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示している間に、電子デバイスは、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件(例えば、654によって表される)を満たすというインジケーションを検出する(1006)。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすとの判定に応じて提供される。いくつかの実施形態では、第2の近接条件は、電子デバイスと外部デバイスとの間の距離が第2の閾値距離未満である場合に満たされ、第2の閾値距離は、第1の閾値距離未満(例えば、0インチ、0.5インチ、1インチ、1.5インチ、2インチ、6インチ未満)である。いくつかの実施形態では、第2の近接条件は、電子デバイスが第1の近接条件を満たすために必要とされる近接度(例えば、第1のメディア情報アフォーダンスの表示をトリガするために必要とされる近接度)よりも外部デバイスに近接していることに対応する。
物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、第1のメディアアイテムの再生を開始する(1008)(例えば、図9C)。いくつかの実施形態では、第1のメディアアイテムの再生を開始することは、第1のメディア情報アフォーダンスの選択を検出することなく実行される。いくつかの実施形態では、第1のメディアアイテムの再生を開始することにより、第1のメディアアイテムを電子デバイス上で再生させる。いくつかの実施形態では、第1のメディアアイテムの再生を開始することにより、第1のメディアアイテムを外部デバイス上で再生させる。いくつかの実施形態では、第1のメディアアイテムの再生を開始することは、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信することを含む。物理的近接度が第2の近接条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムの再生を開始することにより、物理的近接度が近接条件を満たすことをユーザに示すことによって、フィードバックを自動的に提供し、したがって、第1のメディア情報アフォーダンスを表示するために必要とされる入力の数を低減する。改善されたフィードバックを提供し、動作を実行するために必要とされる入力の数を低減し、更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の近接条件は、電子デバイスと外部デバイスとの間の物理的近接度が第1の閾値距離(例えば、652、D1)未満である場合に満たされる。いくつかの実施形態では、第2の近接条件は、電子デバイスと外部デバイスとの間の物理的近接度が第1の閾値距離未満の第2の閾値距離(例えば、654、D2)未満である場合に満たされる。
いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディアアイテムの再生を開始することができるデバイスを識別するインジケーション(例えば、902-1、902-2)を含む。いくつかの実施形態では、第2のメディア情報アフォーダンスは、第1のメディアアイテムの再生が開始されているデバイス(例えば、宛先デバイス)を識別するインジケーションを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディアアイテムの再生を開始することができるデバイスのインジケーション、及び第1のメディア情報アフォーダンスの選択により示されたデバイス上の第1のメディアアイテムの再生を開始することを含む。
いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、電子デバイスは、第1のメディア情報アフォーダンスの視覚的外観(例えば、902-2a)を変えて、第1のメディアアイテムの再生が開始されたことを示す。いくつかの実施形態では、第1のメディア情報アフォーダンスの視覚的外観を変えることは、任意選択的に第1のメディアアイテムに関する少なくとも一部の情報の表示を維持している間に、第1のメディアアイテムの再生が開始されたことを示すテキストを表示することを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスの視覚的外観を変えることは、第1のメディア情報アフォーダンスの選択により第1のメディアアイテムの再生を開始するというインジケーションを第1のメディアアイテムの再生が開始されたというインジケーション(例えば、テキスト)と置き換えることを含む。
いくつかの実施形態では、第1のメディア情報アフォーダンスは、第1のメディアアイテムに対応するメディアアイテムのタイプを示す(例えば、606-5、622-4、902-4)。例示的なメディアアイテムのタイプとしては、音楽トラック、オーディオブック、ポッドキャスト、ビデオ、及び電話通話が挙げられるが、これらに限定されない。いくつかの実施形態では、電話通話メディアアイテムに関する第1のメディア情報アフォーダンスは、通話の参加者のアバターを含む。
いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、第1のメディアアイテムがデータ送信条件を満たす(例えば、第1のメディアアイテムが、第1のメディアアイテムの再生が開始されているデバイスに利用可能でないアプリケーション、サービス、又はアカウントによって提供される)との判定に従って、電子デバイスは、電子デバイスと外部デバイスとの間で第1のメディアアイテムのデータを送信する。いくつかの実施形態では、第1のメディアアイテムを含むメディアアイテムの待ち行列は、再生を開始する前に最初に第1のメディアアイテムのソースであるデバイス上に存在する。そのようないくつかの実施形態では、再生を開始することは、第1のメディアアイテムの再生が開始されているデバイスに待ち行列を転送することを含む。いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、第1のメディアアイテムがデータ送信条件を満たさない(例えば、第1のメディアアイテムが、電子デバイス及び外部デバイスの両方がアクセスを有する特定のアプリケーション、サービス、又はアカウントによって提供される)との判定に従って、電子デバイスと外部デバイスとの間で電子デバイスは、第1のメディアアイテムのデータを送信することを取り止める。第1のメディアアイテムがデータ送信条件を満たすかどうかに基づいて、電子デバイスと外部デバイスとの間で第1のメディアアイテムのデータを送信する(又は送信しない)ことにより、ユーザがデータを送信するために追加の入力を提供する必要があることを回避する。更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を行うことにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のメディアアイテムを含むメディアアイテムの待ち行列は、再生を開始する前に(例えば、電子デバイス又は外部デバイス上に)存在する。そのようないくつかの実施形態では、再生を開始することは、電子デバイスと外部デバイスとの間で待ち行列を転送することを含む。いくつかの実施形態では、第1のメディアアイテムは、共通のユーザアカウントを介して電子デバイス及び外部デバイスの両方にアクセス可能である。いくつかの実施形態では、再生が開始されるデバイスは、共通のユーザアカウントから第1のメディアアイテムを取得する(例えば、第1のアイテムの再生は、第1のメディアアイテムを電子デバイスと外部デバイスとの間でストリーミングすることを含まない)。いくつかの実施形態では、再生が開始されるデバイスは、共通のユーザアカウントから待ち行列を取得する。
いくつかの実施形態では、第1のメディアアイテムの再生を開始した後に、時間条件が満たされた(例えば、物理的近接度が第2の近接条件を満たすというインジケーションを検出してから閾値時間が経過した)との判定に応じて、電子デバイスは、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止する(例えば、図9C~図9Dを参照)。
いくつかの実施形態では、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示した後に、かつ物理的近接度が第2の近接条件を満たすというインジケーションを検出する前に、電子デバイスは、電子デバイスと外部デバイスとの間の物理的近接度が物理的分離条件(例えば、656によって表される)を満たすというインジケーションを検出する。いくつかの実施形態では、インジケーションは、電子デバイスと外部デバイスとの間の物理的近接度が物理的分離条件を満たすとの判定に応じて提供される。いくつかの実施形態では、物理的分離条件は、電子デバイスと外部デバイスとの間の距離が既定の閾値距離を上回る場合に満たされる。いくつかの実施形態では、物理的分離条件に関連付けられた閾値距離は、第1の近接条件に関連付けられた閾値距離(例えば、第1の閾値距離)よりも大きい。例えば、物理的分離条件は、電子デバイスと外部デバイスとの間の距離が第3の閾値距離(例えば、20フィート)を上回る場合に満たされ、第1の近接条件は、電子デバイスと外部デバイスとの間の距離が第1の閾値距離(例えば、1~2フィート)未満である場合に満たされ、第3の閾値距離は、第1の閾値距離よりも大きい。いくつかの実施形態では、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示した後に、かつ物理的近接度が第2の近接条件を満たすというインジケーションを検出する前に、物理的近接度が物理的分離条件を満たすというインジケーションを検出したことに応じて、電子デバイスは、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止する(例えば、図11C~図11Dを参照)。物理的近接度が物理的分離条件を満たすというインジケーションを検出したことに応じて、第1のメディアアイテムを表す第1のメディア情報アフォーダンスを表示することを停止することにより、第1のメディア情報アフォーダンスの選択では再生をもはや開始することができないことを示すフィードバックをユーザに提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速かつ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、物理的近接度が第2の近接条件を満たすというインジケーションを検出する前に、電子デバイスは、第1のメディア情報アフォーダンスの選択を表す入力(例えば、610a、610d、610e、610f)を検出する。いくつかの実施形態では、物理的近接度が第2の近接条件を満たすというインジケーションを検出する前に、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力(例えば、第1のメディア情報アフォーダンスに対応する位置における電子デバイスのタッチ感知ディスプレイ上のタップジェスチャ)であるとの判定に従って、電子デバイスは、第1のメディアアイテムの再生を開始する。いくつかの実施形態では、物理的近接度が第2の近接条件を満たすというインジケーションを検出する前に、第1の入力を受け取ったことに応じて、第1の入力が第1のタイプの入力とは異なる第2のタイプの入力(例えば、第1のメディア情報アフォーダンス上の方向性スワイプジェスチャ)であるとの判定に従って、電子デバイスは、表示デバイスを介して、第1のメディアアイテムを表す第2のメディア情報アフォーダンス(例えば、608)を表示し、第2のメディア情報アフォーダンスは、第1のメディア情報アフォーダンスとは異なる。第1のメディアアフォーダンスを選択する入力のタイプに応じて、第1のメディアアイテムの再生を開始すること、又は第1のメディアアイテムを表す第2のメディア情報アフォーダンスを表示することにより、追加の表示されたコントロールによりユーザインタフェースを雑然とさせることなく、第1のメディアアフォーダンスに関する追加の制御オプションを提供する。表示される追加コントローラによってUIを雑然とさせることなく、追加制御オプションを提供することにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときにユーザを適切な入力を付与するのを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のメディアアイテムを表す第2のメディア情報アフォーダンスを表示している間に、電子デバイスは、第2のメディア情報アフォーダンスの選択を表す第2の入力(例えば、610c)を受け取る。いくつかの実施形態では、第2のメディア情報アフォーダンスの選択を表す第2の入力を受け取ったことに応じて、電子デバイスは、第2のメディアアイテムの再生を開始する。いくつかの実施形態では、第2のメディアアイテムは、第1のメディアアイテムである。いくつかの実施形態では、第2のメディア情報アフォーダンスは、第1のメディアアイテムの表現及び少なくとも1つの他のメディアアイテムの表現を含むメディアアイテムの待ち行列を表す。そのようないくつかの実施形態では、電子デバイスは、入力(例えば、水平スワイプ又はドラッグジェスチャ)に応じて、待ち行列をスクロールする。いくつかの実施形態では、待ち行列内のメディアアイテムの選択に対応する入力に応じて、電子デバイスは、選択されたメディアアイテムの再生を開始する。(例えば、第1のメディアアイテムに関する追加情報を有する)第2のメディア情報アフォーダンスを表示し、第2のメディア情報アフォーダンスの選択に応じて第2のメディアアイテムの再生を開始することにより、ユーザに追加情報及び/又は再生に対する制御を提供することによって、改善されたフィードバックを提供する。改善されたフィードバックを提供することにより、デバイスの操作性が向上し、(例えば、デバイスを操作する/デバイスと対話するときにユーザが適切な入力を行うのを支援しユーザの誤りを削減することによって)ユーザデバイスインタフェースがより効率的になり、このことにより更に、ユーザがデバイスをより迅速かつ効率的に使用可能になることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出している間に、第1のメディアアイテムを電子デバイス上で再生しているとの判定に従って(例えば、図6G)、電子デバイスは、電子デバイス上の第1のメディアアイテムの再生を停止し、外部デバイス上の第1のメディアアイテムの再生を開始する(例えば、図6I)。いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、電子デバイスと外部デバイスとの間の物理的近接度が第2の近接条件を満たすというインジケーションを検出している間に、第1のメディアアイテムを外部デバイス上で再生しているとの判定に従って、電子デバイスは、外部デバイス上の第1のメディアアイテムの再生を停止し、電子デバイス上の第1のメディアアイテムの再生を開始する。
いくつかの実施形態では、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出している間に、第1のメディアアイテムを電子デバイス上で再生している(例えば、図6G及び図6Kを参照)。いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、外部デバイス上の第1のメディアアイテムの再生を開始することを含む。いくつかの実施形態では、第1のメディア情報アフォーダンスは、電子デバイスと外部デバイスとの間の第1の物理的近接度が近接条件を満たすというインジケーションを検出した時点で、電子デバイスが第1のメディアアイテムを再生しているとの判定に従って、第1のメディアアイテムを表す。いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始する命令を外部デバイスに送信することは、第1のメディアアイテムを電子デバイス上で現在再生しているとの判定に従って実行される。いくつかの実施形態では、第1のメディアアイテムの再生を開始することは、電子デバイス上で第1のメディアアイテムを再生することを停止することを含む。
いくつかの実施形態では、外部デバイス上の第1のメディアアイテムの再生を開始することの一部として、電子デバイスは、外部デバイス上で第3のメディアアイテムを再生することを停止する(例えば、図6L)。
いくつかの実施形態では、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出している間に、電子デバイスも外部デバイスもメディアアイテムを再生していないとの判定に従って(例えば、6B)、第1のメディアアイテムは、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出する前の直近に電子デバイス上で再生されたメディアアイテムである。いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、電子デバイスは、外部デバイス上の第1のメディアアイテムの再生を開始する。いくつかの実施形態では、第1のメディア情報アフォーダンスは、電子デバイスと外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出した時点で、外部デバイスがメディアアイテムを再生していないとの判定に従って、電子デバイス上で直近に再生されたメディアアイテムを表す。
いくつかの実施形態では、電子デバイスと外部デバイスとの間の物理的近接度が第1の近接条件を満たすというインジケーションを検出している間に、電子デバイスがメディアアイテムを再生しておらず、かつ外部デバイスがメディアアイテムを再生しているとの判定に従って(例えば、図6N)、第1のメディアアイテムは、外部デバイス上で再生しているメディアアイテムである。いくつかの実施形態では、第1のメディアアイテムの再生を開始することの一部として、電子デバイスは、電子デバイス上の第1のメディアアイテムの再生を開始する。
方法1000に関して上述したプロセス(例えば、図10)の詳細はまた、上述した方法にも類似の方式で適用可能であることに留意されたい。例えば、方法700及び/又は方法800は、方法1000を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法1000の動作1006及び1008は、方法700及び/又は方法800に記載される第1のメディアアイテムの再生を開始するために、方法700及び/又は方法800に適用することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図11A~図11Dは、例えば、メディア情報アフォーダンス606、608、616、620、622、及び902などのグラフィカル要素の表示を停止するための技術を示す。図11Aは、上述したようなデバイス600、デバイス650、及び近接条件範囲インジケータ652を示す。加えて、図11Aは、要素除去条件範囲インジケータ656を含む。要素除去条件範囲インジケータ656は、視覚的補助として含まれ、要素除去条件を満たす範囲を表すことを意図している。(例えば、部分的又は完全に)要素除去条件範囲インジケータ656の外側の検出可能なデバイス(例えば、600)の存在は、要素除去条件を満たすが、検出可能なデバイスが要素除去条件範囲インジケータ656の内側に位置する場合は、要素除去条件を満たさない。要素除去条件範囲インジケータ656のグラフィカル表現は、要素除去条件が満たされているかどうかを判定する範囲を限定することを意図するものではない。更に、図は必ずしも縮尺通りではなく、単に視覚的補助として含まれる。したがって、特に断りがない限り、図に示される特徴のサイズ及び縮尺は、要素除去条件を満たすために必要とされる距離に対する制限として意図するものではない。しかし、要素除去条件範囲インジケータ656は、近接条件範囲インジケータ652の外側にあり、それにより、デバイス600は、近接条件範囲インジケータ652に関連付けられた近接条件を満たすためよりも、要素除去条件範囲インジケータ656に関連付けられた要素除去条件を満たすためにデバイス650から更に離れていなければならない。
図11Aは、デバイス600が近接条件範囲インジケータ652の内側にないシナリオを示す(例えば、図6A、図6F、図6J、図6M、又は図9A)。図11Bは、デバイス600が少なくとも部分的に近接条件範囲インジケータ652の内側に移動されていることを示す(例えば、図6B、図6G、図6K、図6N、又は図9B)。近接条件範囲インジケータ652は、近接条件を満たす物理的近接度を表すので、デバイス600は、デバイス600とデバイス650との間の物理的近接度が近接条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、近接条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、条件が満たされているというインジケーションを送信する)。物理的近接度が近接条件を満たすというインジケーションを検出したことに応じて、デバイス600は、メディアアイテムを表すメディア情報アフォーダンス1100(例えば、メディア情報アフォーダンス606、608、616、620、622、又は902)を表示する。いくつかの実施形態では、メディア情報アフォーダンスによって表されるメディアアイテムは、上述のように、デバイス600及び/又はデバイス650のオーディオ出力状態に基づく。
図11Cは、メディア情報アフォーダンス1100が表示されている間に、デバイス600が近接条件範囲インジケータ652の外側に移動されるが、要素除去条件範囲インジケータ656内に留まることを示す。図11Cに示すように、デバイス600は、メディア情報アフォーダンス1100の表示を継続する。
図11Dは、メディア情報アフォーダンス1100が表示されている間に、デバイス600が要素除去条件範囲インジケータ656の外側に移動されることを示す。要素除去条件範囲インジケータ656は、要素除去条件を満たす物理的範囲を表すので、デバイス600は、デバイス600とデバイス650との間の物理的範囲が要素除去条件を満たすというインジケーションを検出する(例えば、かつこれに応じて、デバイス650との通信を開始し、例えば、要素除去条件が満たされているというインジケーションを送信する)。いくつかの実施例では、デバイス650は、要素除去条件が満たされているというインジケーションを検出する(例えば、かつこれに応じて、デバイス600との通信を開始し、例えば、要素除去条件が満たされているというインジケーションを送信する)。デバイス600とデバイス650との間の物理的範囲が要素除去条件を満たすというインジケーションを検出したことに応じて、デバイス600は、メディア情報アフォーダンス1100の表示を停止する(例えば、ディスプレイ602からメディア情報アフォーダンス1100を除去する)。
図12は、図1200を含み、いくつかの実施形態に係る、物理的構造体、並びに物理的構造体内及びその周囲に配置された例示的なデバイスのセットを示す。図12は、図14、図16、図18、図20、及び図23に示すプロセスを含む、後述するプロセスを例示するために使用される。
図1200は、ホーム1202及びアクセサリデバイスのセット(例えば、デバイス1246、デバイス1204など)を含む。ホーム1202の内部は、キッチン1202a、ダイニングルーム1202b、寝室1202c、リビングルーム1202d、及びサンルーム1202eなどの、複数の部屋を含む。キッチン1202aは、ホーム1202の左上部分にあり、ダイニングルーム1202bは、キッチン1202aと寝室1202cの間にあり、寝室1202cは、ダイニングルーム1202bの右にある。キッチン1202a及びダイニングルーム1202bは、それらの間に壁を有していないが、ダイニングルーム1202b及び寝室1202cは、それらの間に壁を有している。リビングルーム1202dは、ホーム1202の左下部分にあり、サンルーム1202eは、ホーム1202の右下部分にある。ホーム1202の外部に位置するのは、ポーチ1202fである。いくつかの実施形態では、ホーム1202は、図12に示す部屋以外の部屋を含み、かつ/又は図12に示す部屋を除外する。図1200はホームを示しているが、これは単に一例であり、本明細書に記載される技術は、オフィスビル、ホテル、アパートなどの他のタイプの物理的構造体で機能することができることを認識されたい。図12に示すように、ホーム1202の各部分(例えば、部屋、ポーチ)は、少なくとも1つのデバイスを有する。しかしながら、いくつかの実施形態では、ホーム1202の一部分は、デバイスを有さない。
図12に示すように、キッチンスピーカ1206は、キッチン1202a内のレンジと壁との間のカウンタ上に配置されている。ダイニングルーム照明1212及びダイニングルームスピーカ1216は、ダイニングルーム1202b内に配置されている。ダイニングルーム照明1212は、ダイニングルームテーブル上に配置されており、ダイニングルームスピーカ1216は、ダイニングルームテーブルの右に配置されている。加えて、ダイニングルーム1202b内の壁に、サーモスタット1218も存在する。寝室1202c内では、寝室照明1232は、ベッドの一方の側に隣接し、寝室スピーカ1236は、ベッドの反対側に配置されている。リビングルーム1202dでは、リビングルームスピーカ1246及びリビングルームスピーカ1248は、テレビ1244の両側にあり、リビングルームランプ1242は、テレビ1244の前に配置されている。サンルーム1202eでは、サンルームスピーカ1256及びサンルームスピーカ1258は、部屋の両側に配置されている。ポーチ1202f上に位置するのは、ポーチ照明1262、カメラドアベル1264、及びドアベル1266などのデバイスである。
この例では、図12に示すスピーカ(例えば、キッチンスピーカ1206、ダイニングルームスピーカ1216、寝室スピーカ1236、リビングルームスピーカ1246、リビングルームスピーカ1248、サンルームスピーカ1256、及びサンルームスピーカ1258)、照明(例えば、ダイニングルーム照明1212、寝室照明1232、リビングルームランプ1242、ポーチ照明1262)、サーモスタット1218、テレビ1244、ドアベルカメラ1264、及びドアベル1266は、ホーム1202に割り当てられる(例えば、ホーム1202に対応するデバイスのグループに(例えば、ホーム1202に関連付けられたユーザアカウントによって)プログラムでマッピングされる)。加えて、それぞれの個々のスピーカ、照明、テレビ、サーモスタット、カメラ、及びドアベルはまた、それが配置されたホームの一部分(例えば、部屋、部分)に割り当てられる(例えば、それに対応するグループにマッピングされる)。例えば、キッチンスピーカ1206は、キッチン1202aに割り当てられ(例えば、それに対応するグループにプログラムでマッピングされる)、ダイニングルーム照明1212、ダイニングルームスピーカ1216、サーモスタット1218は、ダイニングルーム1202bに割り当てられ、寝室照明1232及び寝室スピーカ1236は、寝室1202cに割り当てられ、リビングルームランプ1242、テレビ1244、リビングルームスピーカ1246、及びリビングルームスピーカ1248は、リビングルーム1202dに割り当てられ、サンルームスピーカ1256及びサンルームスピーカ1258は、サンルーム1202eに割り当てられ、ポーチ照明1262、カメラドアベル1264、及びドアベル1266は、ポーチ1202fに割り当てられる。いくつかの実施形態では、ホーム1202の一部分に対応する各グループもまた、ホーム全体1202に割り当てられる。したがって、この実施例では、ホーム1202の部屋又はホーム1202のポーチにマッピングされるデバイスもまた、ホーム全体1202に同時にマッピングされる。
いくつかの実施形態では、図12に示すスピーカ、照明、カメラ、ドアベル、及びテレビは、1つ以上のネットワーク(例えば、無線ネットワーク(例えば、Bluetooth、NFC、Wi-Fi、4Gなど))を介して互いに直接的に接続された、又は間接的に接続されたスマートデバイスである。いくつかの実施形態では、スピーカは、上述のように、デバイス650の1つ以上の構成要素を含む。いくつかの実施形態では、スマートアプライアンス、スマートサーモスタット、スマートプラグアウトレットなどの他のスマートデバイスは、1つ以上のネットワークに接続される。いくつかの実施形態では、1つ以上のパーソナルデバイスをホーム1202に割り当てることができる。いくつかの実施形態では、ホーム1202に割り当てられたパーソナルデバイスは、電子デバイス600を含む。いくつかの実施形態では、パーソナルデバイスは、1つ以上のタブレット、スマートウォッチ、ラップトップ、デスクトップなどを含む。
図13A~図13Mは、いくつかの実施形態に係る、コントロールを管理するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図14に示すプロセスを含む、後述するプロセスを例示するために使用される。
図13A~図13Iは、デバイス600のユーザコンテキストに基づいて複数のコントロールの表示を管理するための例示的なシナリオを示す。図13A~図13Iのほとんどは、ホーム(例えば、ホーム1202)の概略図及びホームの物理的プロパティに対するデバイスの表現(例えば、ホームの壁又は部屋に対するデバイスの位置)を含む。例えば、図13Aのホーム1202は、デバイス600の位置を表す位置1302aにおけるインジケーション(例えば、人のシンボル)を含む。概略図は、説明のための視覚的補助として例示の目的のためのみに提供される。したがって、概略図は、デバイス600が特定の位置にあるかどうかを判定する範囲を限定することを意図するものではない。更に、図は必ずしも縮尺通りではなく、単に視覚的補助として含まれる。したがって、特に断りがない限り、図に示される特徴のサイズ及び縮尺は、デバイス600が特定の使用コンテキストにあるために必要とされる位置に対する制限として意図するものではない。
図13Aは、ユーザインタフェース1320を表示するデバイス600を示す。ユーザインタフェース1320は、静的コントロール部分1322(ユーザインタフェース1320の上部付近に位置する)と静的コントロール部分1326(ユーザインタフェース1320の底部付近に位置する)との間に視覚的に位置する動的コントロール部分1324を含む。コントロール部分のそれぞれ(例えば、1324、1322、及び1326)は、複数のコントロールを含むものとして図13Aに示されている。しかしながら、本明細書に記載されるように、ユーザインタフェース1320の静的コントロール部分(例えば、1322及び1326)内に提示されるコントロールは、(例えば、本明細書に記載されるように)デバイス600の使用コンテキストが変化するときに、変化しない。したがって、静的コントロール部分内に提示されるコントロールは、デバイスの使用コンテキストが変化したとしても持続する。しかしながら、ユーザインタフェース1320の動的コントロール部分(例えば、1324)内に提示されるコントロールは、(例えば、本明細書に記載されるように)デバイス600の使用コンテキストが変化するときに(例えば、デバイス600がコントロールのうちの1つ以上に向けられたユーザ入力を検出することなく)変化することができる。したがって、動的コントロール部分1324内に提示されるコントロールは、変化する使用コンテキストに基づいて動的である。
図13Aに示すように、静的コントロール部分(例えば、1322及び1326)は、デバイス600にローカルな動作を実行するための複数のコントロール(「ローカル動作コントロール」)を含む。例えば、図13Aに示すように、静的コントロール部分1322は、無線接続コントロール1322a、セルラー接続コントロール1322b、音楽アプリケーションコントロール1322c、及び向きロックコントロール1332dなどの複数のローカル動作コントロールを含む。同様に、静的コントロール部分1326は、フラッシュライトコントロール1332e及び計算機コントロール1332fを含む。ユーザインタフェース1320上の各デバイスコントロールは、選択されると、(例えば、ホーム1202のアクセサリデバイスなどのアクセサリデバイスの状態を変更することなく)デバイス600の状態を変更する。
デバイスコントロールは、異なる方法でデバイス600の状態を変更することができる。いくつかの実施形態では、デバイス600の状態は、接続設定(例えば、無線、セルラー、Bluetooth設定)又は表示設定(例えば、デバイス600の向きが変化するときに表示を変更すること又は変更しないこと)などのデバイス600の設定のうちの1つ以上が変化するときに、変更される。例えば、いくつかの実施形態では、デバイス600は、無線接続コントロール1322aの選択を検出し、選択を検出したことに応じて、デバイス600の無線接続状態を変更する(例えば、無線ネットワークに接続するためのデバイス600の能力をオン/オフする)。いくつかの実施形態では、デバイス600の状態は、デバイス600のメディアの出力が変化するときに変更される。例えば、いくつかの実施形態では、デバイス600は、音楽アプリケーションコントロール1332cの選択を検出し、選択を検出したことに応じて、デバイス600のメディアの出力の状態を変更する(例えば、巻き戻す、早送りする、再生する)。いくつかの実施形態では、デバイス600の状態は、デバイス600の表示状態が変化すると変更される(例えば、ローカル動作コントロールのうちの1つの選択を受信したことに応じて、異なるユーザインタフェースを表示する、ローカル動作コントロールのうちの1つの選択を受信したことに応じて、コントロールの異なるセットを表示する)。例えば、いくつかの実施形態では、デバイス600は、計算機コントロール1332fの選択を検出し、選択を検出したことに応じて、ユーザインタフェース1320を計算機アプリケーションのユーザインタフェースと置き換えることによって、デバイス600の状態を変更する。いくつかの実施形態では、デバイス600の状態は、デバイス600の1つ以上のハードウェア構成要素がオン/オフにされると変更される。例えば、いくつかの実施形態では、デバイス600は、フラッシュライトコントロール1332eの選択を検出し、選択を検出したことに応じて、デバイス600の一部であるライトの状態を変更する。
図13Aに示すように、動的コントロール部分1324は、帰宅シーンコントロール1334a及びポーチ照明コントロール1334bなどの、デバイス600が動作している使用コンテキストに基づいて表示される動的アクセサリデバイスコントロールを含む。動的アクセサリデバイスコントロールは、デバイス600の外部にあるアクセサリデバイスを制御するためのコントロールである。図13Aでは、帰宅シーンコントロール1334a及びポーチ照明コントロール1334bは、(例えば、図12に関して上述したような)ホーム1202内のアクセサリデバイスを制御するためのコントロールである。図13Aでは、帰宅シーンコントロール1334aは、複数のデバイスを制御するマクロである。したがって、いくつかの実施形態では、デバイス600は、帰宅シーンコントロール1334a上のタップジェスチャを検出し、帰宅シーンコントロール1334a上のタップジェスチャを検出したことに応じて、サーモスタット1218をオンさせて所望の温度に設定させ、リビングルームランプ1242をオンにさせ、リビングルームスピーカ1248にジャズ音楽を再生させる、命令を送信する。比較すると、ポーチ照明コントロール1334bは、1つのデバイス(例えば、ポーチ照明1262)のみを制御し、1つの機能を実行する(例えば、ポーチ照明1262をオン/オフにトグルする)。したがって、いくつかの実施形態では、デバイス600は、ポーチ照明コントロール1334b上のタップジェスチャを検出し、タップジェスチャを検出したことに応じて、ポーチ照明1262をオン又はオフにさせる命令を送信する。
図13Aで上述したように、帰宅シーンコントロール1334a及びポーチ照明コントロール1334bは、デバイス600がホーム1202の外側にある(例えば、1302aによって示されるような)位置にあることに対応する使用コンテキストでデバイス600が動作しているため、動的コントロール部分1324内に表示される。したがって、いくつかの実施形態では、デバイス600が動的コントロール部分1324内に帰宅シーンコントロール1334a及びポーチ照明コントロール1334bを表示する場合、デバイス600がホーム1202の外側に位置する(又は図13Aの対応する使用コンテキストで動作している)ときに、これらの特定のコントロールがデバイス600を操作しているユーザにより有用であるとの判定が行われている。
図13Aに示すように、ホームコントロール1333もまた、動的部分1324内に表示される。図13Aでは、ホームコントロール1333は、ホーム1202に対応するコントロールであり、それにより、ホームコントロール1333が選択されると、デバイス600は、現在表示されていない1つ以上のアクセサリデバイスコントロールを表示する。加えて、ホームコントロール1333の選択は、ホーム1202に割り当てられたアクセサリデバイスを制御するために利用可能であるアクセサリデバイスコントロールの全セットを有するユーザインタフェース(例えば、1つ以上のユーザインタフェース画面)にデバイス600がナビゲートされることを可能にするアクセスポイントである。
図13Aでは、デバイス600は、複数のホームに関連付けられている(例えば、異なるホームに割り当てられたアクセサリデバイスを管理することが許可されている)。ホーム1202に割り当てられており、かつデバイス600が関連付けられている別のホームに割り当てられていないアクセサリデバイスを表示するようにデバイス600が現在構成されているため、ホームコントロール1333は、ホーム1202に対応する識別子(例えば、「123 MAIN ST」、ホーム1202の住所)を含む。いくつかの実施形態では、デバイス600は、デバイス600が(例えば、1つ以上のデータベース内で)ホームのユーザ、管理者、ゲストなどのうちの1つ以上として登録されると、ホームに関連付けられる。
いくつかの実施形態では、デバイス600が別のホームに割り当てられたアクセサリデバイスコントロールを表示するように構成されている場合、デバイス600は、図13Aに表示されているものとは異なる識別子をホームコントロール1333上に表示する。いくつかの実施形態では、デバイス600が別のホームに割り当てられたアクセサリデバイスを表示するように構成されている場合、デバイス600は、異なる動的デバイスコントロール(例えば、特定のホームに関連するデバイスコントロール)を表示する。いくつかの実施形態では、対応するホームがデバイス600が関連付けられている最も近いホームであるとの判定が行われると、デバイス600が対応するホームに割り当てられたアクセサリデバイスコントロールを表示するように構成されている場合。これらの実施形態のうちのいくつかでは、「現在のホーム」設定がアクティブに設定されているときにのみ、判定(例えば、最も近いホームの判定)が行われる。いくつかの実施形態では、「現在のホーム」設定が非アクティブに設定されると、デバイス600は、デバイス600がアクセサリデバイスコントロールのセットを表示した最後のホームに割り当てられたアクセサリデバイスコントロールを表示するように構成される。いくつかの実施形態では、デバイス600は、対応するホームの少なくとも1つのアクセサリデバイスに動作を実行させる命令をデバイス600が送信した最後のホームに割り当てられたアクセサリデバイスコントロールを表示するように構成される。いくつかの実施形態では、デバイス600が1つのホームのみに関連付けられているとき、デバイス600は、ホームコントロール1333上の識別子として「ホーム」を表示する。いくつかの実施形態では、デバイス600が、任意のコントロールを有さない(又は、ホームに割り当てられたコントロールが特定の基準(例えば、特定の数又は特定の種類のアクセサリ)を満たさない、ホームに割り当てられたアクセサリデバイスコントロールを表示するように構成されている場合、デバイス600は、(例えば、図13Aに示すよりも大きいサイズに)ホームコントロール1333をサイズ変更し、それにより、ホームコントロール1333は、動的部分1324の大部分を実質的に埋める(例えば、2行を占める)。
図13Bでは、概略図は、デバイス600が(例えば、図13Aの)位置1302aから位置1302bに移動していることを示す。概略図によって示されるように、デバイス600は、家1202の内側にあり、具体的には、デバイス600が位置1302bにある間、寝室1202c内にある。
図13Bでは、デバイス600が図13Aのコンテキストとは異なる使用コンテキストで動作しているとの判定がなされる。ここで、デバイス600が家1202の外側にある位置(例えば、1302a)から家1202の内側にある位置(例えば、1302b)に移動しているため、デバイス600は、異なる使用コンテキストで動作している。具体的には、図13Bでは、デバイス600が寝室1202cの内側(及び/又は家1202の内部)に位置することに対応する使用コンテキストでデバイス600が動作しているとの判定がなされる。
図13Bに示すように、デバイスがホーム1202内に位置する(例えばデバイスが寝室内に位置する)と判定されるため、デバイス600は、動的コントロール部分1324を更新して、図13Aに表示されていた動的アクセサリデバイスコントロールのセットとは異なる動的アクセサリデバイスコントロールのセットを表示する。図13Bに示すように、デバイス600は、図13Aの動的コントロール部分1324に表示されたアクセサリコントロールとは異なる、読書時間シーンコントロール1334c、寝室照明コントロール1334d(例えば、選択されると、寝室照明1232をオン/オフにさせる)、寝室スピーカコントロール1334e(例えば、選択されると、寝室スピーカ1236にメディア再生を一時停止又は開始させる)、及びおやすみシーンコントロール1334fを表示する。更に、図13Bに表示されたコントロールは、寝室1202c内の1つ以上のアクセサリデバイス(例えば、寝室照明1232、寝室スピーカ1236)を制御するためのものであり、図13Aのコントロールのいずれも、寝室内のアクセサリのいずれかを制御するためのものでなかった。したがって、図13Bでは、動的コントロール部分1324内に表示されたコントロールは、図13Aの動的コントロール部分1324内に表示されたコントロールよりも、ユーザ及びデバイス600が寝室1202c内に位置するときに、ユーザに潜在的により関連する。
図13Bに示すように、デバイス600は、デバイス600が異なる使用コンテキストで動作しているとの判定に関わりなく、ホームコントロール1333を表示し続ける。図13Bに示すように、ホームコントロール1333は、ホームコントロール1333が図13Aに表示されたのと、同じサイズであり、動的コントロール部分1324内の同じ位置に表示される。
図13A及び図13Bの動的コントロール部分1324を比較すると、動的コントロール部分1324のサイズは、同じままであり、ユーザインタフェース1320の同じ領域を占める。しかしながら、図13Aの動的コントロール部分1324内に表示されたコントロールの数は、3つ(例えば、ホームコントロール1333、帰宅シーンコントロール1334a、ポーチ照明コントロール1334b)であったが、図13Bの動的コントロール部分1324内に表示されたコントロールの数は、5つ(例えば、ホームコントロール1333、読書シーンコントロール1334c、寝室照明コントロール1334d、寝室スピーカコントロール1334e、及びおやすみシーンコントロール1334f)である。したがって、図13A~図13Bによって示されるように、デバイス600は、動的コントロール部分1324のサイズを変更することなく、動的コントロール部分1324内に異なる数のコントロールを表示する。図13A~図13Bを比較すると、デバイス600は、デバイス600が特定の使用コンテキストにあることにより、動的コントロール部分1324内に表示されるコントロールの数がより多い場合に、より小さいサイズのアクセサリデバイスコントロールを表示することによって、このユーザインタフェースを達成する。例えば、図13Aのポーチコントロール1334bは、図13Bで読書シーンコントロール1334c及びおやすみシーンコントロール1334fが合わせて占める、動的コントロール部分1324のほぼ同じエリアを占めていた。更に、帰宅シーンコントロール1334aは、図13Bで寝室照明コントロール1334d及び寝室スピーカコントロール1334eが合わせて占める、動的コントロール部分1324のほぼ同じエリアを占める。
図13Bに示すように、ホームコントロール1333は、ホームコントロール1333が図13Aであったのと、動的コントロール部分1324内で同じサイズ及び同じ位置のままである。したがって、動的コントロール部分1324内の他のコントロールとは異なり、ホームコントロール1333は、図13A~図13Bで動作している使用コンテキスト及び/又は動的コントロール部分1324内に表示される他のコントロールの数(例えば、0よりも多い数)に関わりなく、同じサイズのままであり、同じ位置に表示される。いくつかの実施形態では、ホーム1333のサイズ及び/又は位置は、デバイス600が異なる使用コンテキストで動作しているとき、又は動的コントロール部分1324内に表示される他のコントロールの数(例えば、0よりも多い数)に基づいて、変化する。図13Bでは、22:10(午後10:10)のユーザインタフェース1320は、表示されている。
図13Cでは、デバイス600が異なる使用コンテキストで動作しているとの判定が行われるが、デバイス600は、デバイス600が図13Bであったのと、図13Cで同じ位置にある。ここで、デバイス600が図13Bで表示された時間(22:10)とは異なる時間(例えば、06:42(午前6:42))のユーザインタフェース1320を表示しているため、デバイス600は、異なる使用コンテキストで動作している。
図13Cに示すように、06:42のユーザインタフェース1320が表示されていることに対応する使用コンテキストでデバイス600が動作しているので、デバイス600は、コントロールの異なるセットを表示する。図13Cに示すように、デバイス600は、図13Bで以前に表示されていたおやすみシーンコントロール1334fをおはようシーンコントロール1334gと置き換えている。換言すれば、図13Cでは、デバイス600は、(例えば、図13Bの)以前の使用コンテキストで表示されていたのと同じ数のコントロールを表示するが、コントロールのセットは異なり、これは、デバイス600が異なる使用コンテキストに基づくためである。いくつかの実施形態では、デバイス600は、デバイス600が図13Bで以前に表示していたのとは異なる数のコントロールを図13Cで表示する。図13Cでは、デバイス600は、ホームコントロール1333上のジェスチャ1350c(例えば、タップジェスチャ、長い押圧ジェスチャ)を検出する。
図13D~図13Eは、図13Cのジェスチャ1350cを検出したことに応じてデバイス600が表示することができる例示的なユーザインタフェースを示す。図13Dに示すように、ジェスチャ1350cを検出したことに応じて、デバイス600は、ホームアプリケーションのユーザインタフェース1340を表示し、ユーザインタフェース1320を表示することを停止する。図13Dに示すように、ユーザインタフェース1340は、アクセサリデバイスコントロール1336を含む。図13Dに示すように、ユーザインタフェース1340は、ユーザインタフェース1340上に表示された情報がユーザインタフェース1340上に表示されたシーン(例えば、1344)及びアクセサリ(例えば、1346)コントロールに関連することを示すために、ホーム602(「123 Main Street」)に関連付けられた識別子を含む。図13Dでは、ユーザインタフェース1340上に表示されたホーム602に関連付けられた識別子は、上述したような図13A~図13Cのホームコントロール1333上に表示されていた識別子と同じである。いくつかの実施形態では、「ホーム」がホームコントロール1333上に表示される識別子である場合(例えば、デバイス600が1つのホームのみに関連付けられているため)、ユーザインタフェース1340上に表示される識別子は、ホームコントロール上に表示される識別子とは異なる(例えば、「123 異なる住所」)。
図13Dでは、ジェスチャ1350cを検出したことに応じて、デバイス600は、ホームアプリケーションを起動し、ホームアプリケーションのユーザインタフェースを表示している。ホームアプリケーションのユーザインタフェースを表示している間に、デバイス600は、(例えば、ユーザインタフェースのナビゲーションを介して)ホーム602に割り当てられたアクセサリデバイスのセットを制御するための利用可能なコントロールを表示することができる。図13Dでは、アクセサリデバイスコントロール1336は、図13Cで表示された動的アクセサリデバイスコントロールのうちの1つ以上と同じ機能を有する1つ以上のアクセサリデバイスコントロールを含む。例えば、寝室照明コントロール1336dは、図13Cの寝室照明コントロール1334dと同じ機能を有する。図13Dでは、アクセサリデバイスコントロール1336は、図13Cで表示された動的アクセサリデバイスコントロールによって実行される機能とは異なる機能を実行する1つ以上のアクセサリデバイスコントロールを含む1つ以上を含む。例えば、ダイニングルーム照明コントロール1336gは、ダイニングルーム照明1212に機能を実行させ、図13Dに表示されているが、図13Cでダイニングルーム照明1212に機能を実行させるコントロールは存在しない。
図13Eに示すように(例えば、図13Dの代替として)、ジェスチャ1350cを検出したことに応じて、デバイス600は、ユーザインタフェース1320を更新して(例えば、ユーザインタフェース1320を表示し続け)、ユーザインタフェース1340の構成要素のうちの1つ以上を表示する。図13Eに示すように、ユーザインタフェース1320は、アクセサリデバイスコントロール1336を含む。図13Eでは、第1の6つのアクセサリデバイスコントロールはまた、(例えば、図13Dの)ユーザインタフェース1340を介して表示される。更に、図13Eでは、図13Dよりも多くの数のアクセサリデバイスコントロール1336が表示されている。アクセサリデバイスコントロール1336(例えば、追加のアクセサリデバイスコントロール)を表示する場所を空けるために、デバイス600は、ホームコントロール1333及びローカル動作コントロール(例えば、無線接続コントロール1322a、フラッシュライトコントロール1332eなど)をユーザインタフェース1320のそれらの対応する部分に表示することを停止する。加えて、アクセサリデバイスコントロール1336は、図13Eで同じサイズであるが、動的アクセサリデバイスコントロールは、図13Cで異なるサイズであった。加えて、アクセサリデバイスコントロール1336のうちの少なくとも1つは、ローカル動作コントロールが図13Cで表示されていたユーザインタフェース1320の部分に表示される。いくつかの実施形態では、デバイス600は、(例えば、図13Dに関して上述したように)デバイス600がユーザインタフェース1340上にアクセサリデバイスコントロールを表示するために使用したのと同様の1つ以上の技術を使用して、ユーザインタフェース1320上にアクセサリデバイスコントロール(及び/又は他の構成要素)を表示する。
いくつかの実施形態では、デバイス600は、(例えば、デバイス600が図13Dでユーザインタフェース1340を表示したときとは対照的に)ホームアプリケーションを起動することなく、図13Eのアクセサリデバイスコントロール1336を表示する。
いくつかの実施形態では、デバイス600は、受け取ったジェスチャのタイプに基づいて、図13Eのインタフェース1320又は図13Dのユーザインタフェース1340を表示する。例えば、いくつかの実施形態では、ジェスチャ1350cが第1のタイプのジェスチャ(例えば、タップジェスチャ、長い押圧ジェスチャ)であるとの判定がなされると、デバイス600は、図13Dのユーザインタフェース1340を表示する。いくつかの実施形態では、ジェスチャ1350cが第1のタイプ(例えば、長い押圧ジェスチャ、タップジェスチャ)とは異なるタイプのジェスチャであるとの判定がなされると、デバイス600は、図13Eのユーザインタフェース1320を表示する。したがって、いくつかの実施形態では、これらのユーザインタフェース(例えば、図13Dの1340、図13Eの1320)は、図13Cのホームコントロール1333上で受け取られた入力のタイプに基づいてアクセスすることができる。
図13F~図13Gは、デバイス600が図13Eで異なる2つのジェスチャを検出したときにデバイス600が表示することができる例示的なユーザインタフェースを示す。図13Eでは、デバイス600は、ナビゲーションコントロール1334上のタップジェスチャ1350e1を検出する。図13Fに示すように、タップジェスチャ1350e1を検出したことに応じて、デバイス600は、ユーザインタフェース1320を更新して、メニュー1338を表示し、アクセサリデバイスコントロール1336を表示することを停止する。表示メニュー1338は、寝室ナビゲーションコントロール1338dなどの家1202内の個々の部屋に対応するコントロールにナビゲートするためのコントロールを含む。いくつかの実施形態では、デバイス600は、寝室ナビゲーションコントロール1338d上のタップジェスチャを検出したことに応じて、寝室1202c内で利用可能なデバイス(例えば寝室照明1232、寝室スピーカ1236)を制御するためのアクセサリデバイスコントロールを表示する。いくつかの実施形態では、寝室ナビゲーションコントロール1338d上のタップジェスチャを検出したことに応じて、寝室1202c内で利用可能なデバイスを制御するためのアクセサリデバイスコントロールは、図13Cの動的コントロール部分1334内に表示されたアクセサリデバイスコントロールとは異なる1つ以上のアクセサリデバイスコントロールを含む。
あるいは、図13Eでは、デバイス600は、ダイニングルーム照明コントロール1336g上のジェスチャ1350e2(例えば、プレスアンドホールド)を検出する。図13Gに示すように、ジェスチャ1350e2を検出したことに応じて、デバイス600は、ユーザインタフェース1360を表示し、ユーザインタフェース1320を表示することを停止する。ユーザインタフェース1360は、選択されると、ダイニングルーム照明コントロール1336gの選択によりダイニングルーム照明1216に実行させることができるのとは異なる機能をダイニングルーム照明1216に実行するようにデバイス600に命令(単数又は複数)を送信させる、追加のコントロールを含む。例えば、図13Eでは、ダイニングルーム照明コントロール1336gの選択(例えば、タップジェスチャ)により、ダイニングルーム照明コントロール1336gをオン/オフにさせる命令をデバイス600に送信させる。しかしながら、13Gでは、ユーザインタフェース1360は、照明調光器コントロール1362(例えば、選択されると、ダイニングルーム照明1216を暗くさせる)及び色変更コントロール1364(例えば、選択されると、ダイニングルーム照明に色を変更させ、これによって図13Eのダイニングルーム照明コントロール1336gとは異なる機能をデバイス600に実行させることができる)を含む。
図13Hに示すように、デバイス600は、(例えば、図13Gでユーザインタフェース1320を表示した後のある時点で)ユーザインタフェース1320の動的コントロール部分1324内にホームコントロール1333及び動的アクセサリデバイスコントロール、並びに静的部分内にローカル動作コントロールを有するユーザインタフェース1320を表示する。しかしながら、図13Hに表示されている動的アクセサリデバイスコントロールのセットは、デバイス600が異なる使用コンテキストで動作しているとの判定がなされたため、図13Cに表示されている動的アクセサリデバイスコントロールとは異なる。具体的には、デバイス600は、寝室照明コントロール1334dの代わりに、ダイニングルーム照明コントロール1334h(例えば、選択されると、ダイニングルーム照明1212をオン/オフにさせる命令をデバイス600に送信させるコントロール)を表示する。図13Hでは、デバイス600は、コントロールの過去の使用に基づいて判定された使用コンテキストでデバイス600が動作しているため、ダイニングルーム照明コントロール1334hを表示する。具体的には、600は、ダイニングルーム照明1216及び/又はアクセスコントロールが直近に使用されたとの判定がなされたため(例えば、図13Gのユーザインタフェース1360が最近表示された、及び/又は図13Eのジェスチャ1350e2が最近検出されたため)、図13C(又は13F)において異なるユーザコンテキストで動作している。いくつかの実施形態では、コントロールの過去の使用はまた、コントロールが最も頻繁に使用された、最も頻繁にアクセスされた、お気に入りに登録された(例えば、ユーザ選択によって)、直近にアクセスされ、直近に表示された、直近に相互作用された、コントロール又はその任意の組み合わせのうちの1つ以上であることに基づいて判定することができる。
図13Iでは、デバイス600が異なる位置にある(例えば、図13Iの位置1302cが図13Hの位置1302bとは異なる)ため、デバイス600が(例えば、図13Hとは)異なる使用コンテキストで動作しているとの判定がなされる。具体的には、図13Iでデバイス600が動作している使用コンテキストは、デバイス600がリビングルーム1202d(例えば、又はデバイス600が図13Hにおいて動作していた部屋(例えば、寝室1202c)とは異なる部屋)内で動作しているので判定される。
図13Iに示すように、デバイス600がリビングルーム1202d内(例えば、異なる使用コンテキスト)で動作しているため、デバイス600は、図13Hで以前に表示されていたコントロールのセットとは異なるコントロールのセットを動的コントロール部分1224内に表示する。例えば、図13Iでは、デバイス600は、図13Hで以前に表示されていなかったサーモスタットコントロール1334i、リビングルームコントロール1334j、ダイニングルームコントロール1334g、キッチンコントロール1334kを表示する。加えて、動的コントロール部分1224だが、図13Hの動的コントロール部分1224内に表示されていたコントロールの数よりも、図13Iの動的コントロール部分1224内に、より多くの数のコントロールが表示される。図13Iでは、これは、図13A~図13Cに関連して上述したような1つ又は技術(例えば、より小さいコントロールを表示すること)を使用して達成される。図13Iでは、デバイス600は、デバイス600の反時計回りの回転1350iを検出する(例えば、デバイス600は、反時計回りに90度物理的に回転される)。
図13Jに示すように、反時計回りの回転1350iを検出したことに応じて、デバイス600は、ユーザインタフェース1320の表示を縦向きから横向きに遷移させる。図13Jに示すように、デバイス600が横向きのユーザインタフェースを表示すると、デバイス600は、静的部分1326内に以前に表示されていたローカル動作コントロールなどのローカル動作コントロールの一部を表示することを停止する。加えて、図13Jでは、デバイス600はまた、動的コントロール部分1324から動的デバイスコントロールの一部(例えば、図13Iのキッチンファンコントロール1334k)を表示することを停止する。
図13Kに示すように(例えば、図13Iを表示した後のある時点で)、デバイス600は、(例えば、図13A~図13Jでロック解除状態にあることとは対照的に)デバイス600がロック状態にあることを示すユーザインタフェース1370を表示する。図13Kでは、デバイス600は、ユーザインタフェース1370上のスワイプジェスチャ1350kを検出する。
図13Lに示すように、スワイプジェスチャ1350kを検出したことに応じて、デバイス600は、デバイス600がロック状態で動作しているため、任意の動的デバイスコントロール及びホームコントロール1333なしにユーザインタフェース1320を表示する(例えば、動的コントロール部分1324内に動的コントロールを含まない)。図13Lでは、インジケーション1352は、動的コントロール領域1324内に表示される。インジケーション1352は、動的デバイスコントロールが表示されるために、デバイス600がロック解除されなければならないことをユーザに通知する。いくつかの実施形態では、ユーザインタフェース1320は、デバイス600が(例えば、コントロールへの許可されていないアクセスを制限するため、並びに/又は動的デバイスコントロール及び/若しくはホームコントロール1333が表示される前に認証を必要とするために)セキュリティ上の理由でロック状態で動作している間に、任意の動的デバイスコントロール及びホームコントロール1333なしに表示される。いくつかの実施形態では、デバイス600は、許可されていないユーザがコントロールのうちの1つ以上の選択を介してホーム1202内のアクセサリデバイスに機能を実行させることを防止するために、動的デバイスコントロール及びホームコントロール1333を省略する。
図13Mでは、デバイス600は、(例えば、図13Iを表示した後のある時点で)ロック解除状態にある。図13Mに示すように、デバイス600は、アクティブ状態にある(例えば、設定は、オンである)動的コントロール設定アフォーダンス1382を含むユーザインタフェース1380を表示する。図13Mでは、デバイス600は、動的コントロール設定アフォーダンス1382上のタップジェスチャ13Mを検出する。
図13Nに示すように、タップジェスチャ13Mを検出したことに応じて、デバイス600は、アクティブ状態から非アクティブ状態(例えば、設定は、オフである)に動的コントロール設定アフォーダンス1382をトグルする。いくつかの実施形態では、図13Nでは、デバイス600は、ユーザインタフェース1380上のスワイプを検出する。いくつかの実施形態では、ユーザインタフェース1380上のスワイプジェスチャを検出したことに応じて、デバイス600は、動的コントロール設定1382が非アクティブ状態にあるため、任意の動的デバイスコントロール及びホームコントロール1333なしにユーザインタフェース1320を表示する(例えば、動的コントロール部分1324を除去する)。
図14は、いくつかの実施形態に係る、コントロールを管理する方法を示すフロー図である。方法1400は、表示生成構成要素(例えば、602)及び1つ以上の入力デバイスと通信しているコンピュータシステム(例えば、100、300、500、又は600)において実行される。方法1400のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
以下に記載されるように、いくつかの実施形態に係るコントロールを管理する方法1400。この方法は、いくつかの実施形態に係るコントロールを管理するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的にオーディオ再生を制御することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
コンピュータシステムは、表示生成構成要素を介して、第1のユーザインタフェース(例えば、320)(例えば、コントロールセンタ(例えば、コンピュータシステム上の1つ以上の設定(例えば、1つ以上のWi-Fi設定、Bluetooth設定、表示設定(例えば、輝度コントロール)、サウンド設定)、又は第1の複数の選択可能なユーザインタフェースオブジェクト(例えば、1332a~1332f、1333、1334a~1334k)(例えば、アフォーダンス)(例えば、第1の複数の選択可能なユーザインタフェースオブジェクトは、複数のアクセサリデバイス(例えば、スマートホームアクセサリデバイス(例えば、スマート(例えば、インテリジェントな)電球、サーモスタット、ドアロック、ドアオープナ(例えば、ガレージドアオープナ)、スピーカ、テレビ、電気コンセント、テーブルタップ、カメラ、器具(例えば、冷蔵庫、レンジ)))を制御するための複数の選択可能なユーザインタフェースオブジェクトを含む)を含む(かつ/又は第1のユーザインタフェース上に表示される)コンピュータシステムと通信している1つ以上のアクセサリデバイスを制御する(例えば、設定する)複数の選択可能なユーザインタフェースオブジェクトを有するユーザインタフェース))を表示する(1402)。いくつかの実施形態では、第1のユーザインタフェースを表示する前に、コンピュータシステムは、表示生成構成要素を介して第1のユーザインタフェース(例えば、コントロールセンタ(例えば、コンピュータシステム上の1つ以上の設定(例えば、1つ以上のWi-Fi設定、Bluetooth設定、表示設定(例えば、輝度コントロール)、サウンド設定)、又はコンピュータシステムと通信している1つ以上のアクセサリデバイスを制御する(例えば、設定する)複数の選択可能なユーザインタフェースオブジェクトを有するユーザインタフェース))を表示する要求に対応する入力(例えば、1つ以上の入力デバイス上のスワイプジェスチャ)を受け取り、表示生成構成要素を介して第1のユーザインタフェースを表示する要求に対応する入力を受け取ったことに応じて、コンピュータシステムは、第1のユーザインタフェースを表示する。いくつかの実施形態では、複数の選択可能なユーザインタフェースオブジェクトのうちの少なくとも1つは、デバイスの第1のグループに関連付けられている、又はマッピングされている。いくつかの実施形態では、デバイスの第1のグループは、トップレベルの位置(又は宛先)(例えば、第1のタイプの位置)(例えば、ホーム位置、ビジネス、オフィス(例えば、トップレベルの位置である位置(例えば、1つ以上の位置(例えば、サブ位置)並びに/又はトップレベルの位置の位置によって定義されるエリア及び/若しくは周辺部内にある1つ以上の領域(又はゾーン)を定義する位置、位置の階層のトップレベルにある位置、1つ以上の位置(例えば、サブ位置)及び/又は1つ以上の領域(又はゾーン)に(例えば、プログラムで)リンクされた位置)))に関連付けられている、又はマッピングされている。いくつかの実施形態では、デバイスの第1グループは、デバイスの複数のサブグループを含むことができる。いくつかの実施形態では、デバイスのサブグループは、サブ位置(例えば、トップレベルの位置内に配置された(例えば、トップレベルの位置の境界、エリア、若しくは周辺部内の、かつ/又はトップレベルの位置に対して(例えば、ユーザによって)定義された、特定された、かつ/若しくはリンクされた(例えば、プログラムでリンクされた))部屋、及び/又はゾーン(例えば、トップレベルの位置内のトップレベルの位置(例えば、トップレベルの位置内のリビングルーム及びダイニングルームを含む娯楽ゾーン、トップレベルの位置内の2つ以上の寝室、リビングルーム、バスルームを含むパーソナルゾーン)内の2つ以上のサブ位置によって定義された(例えば、トップレベルの位置の境界、エリア、若しくは周辺部内の、かつ/又は(例えば、ユーザによって)定義された、特定された、かつ/若しくはリンクされた)位置)に関連付けられている、又はマッピングされている。いくつかの実施形態では、第1のユーザインタフェースは、制御ユーザインタフェースである。いくつかの実施形態では、第1のユーザインタフェースは、別のユーザインタフェース(例えば、それの上にオーバーレイなしに以前に表示されたユーザインタフェース)の上に重ね合わせられる。いくつかの実施形態では、第1のユーザインタフェースは、音楽を制御するためのコントロール(例えば、スライダ、選択可能なユーザインタフェースオブジェクト(例えば、アフォーダンス))と、1つ以上の設定(例えば、Wi-Fi、機内モード、Bluetooth、セルラー接続をオン/オフにトグルするための)(例えば、表示生成構成要素の輝度を調整するための、コンピュータシステムの1つ以上のスピーカの音を調整するための)と、1つ以上の状態インジケータ(例えば、バッテリパーセンテージインジケーション、Wi-Fiインジケーション、セルラー接続インジケーション、Bluetoothインジケータ)とを含む。いくつかの実施形態では、第1のユーザインタフェースは、トップレベルの位置に関連付けられていない、又はマッピングされていない複数のコントロールを含む。
第1の複数の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムに、コンピュータシステムの状態を変更させる(例えば、コンピュータシステムの表示生成構成要素の輝度を変更(例えば、調整)させる、コンピュータシステムの1つ以上のスピーカの音を変更させる、状態(Wi-Fi、機内モード、Bluetoothの(例えば、オン/オフ))を変更させる、コンピュータシステムのディスプレイスクリーン上に表示されたユーザインタフェースを変更させる又は変化させる(例えば、以前に表示されていなかった、かつ/又は第1のユーザインタフェースとは異なる第2のユーザインタフェースを表示させる))(例えば、コンピュータシステム(例えば、デバイス600)に対する外部デバイスの状態を変更することなく)、第1の選択可能なユーザインタフェースオブジェクト(1404)(例えば、1332a~1332f、1333)(例えば、ホームアプリボタン)を含む。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが動作している使用コンテキストに関わりなく表示される。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、選択されると、外部アクセサリデバイス(例えば、第1の外部アクセサリデバイス及び第2のアクセサリデバイス)(又は任意の外部アクセサリデバイス)に機能を実行させることなく、コンピュータシステム(例えば、電話機)の状態を変更する。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、選択されると、アクセサリを制御しない。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、選択されると、コンピュータシステムに第1のユーザインタフェースとは異なる第2のユーザインタフェースを表示させる。いくつかの実施形態では、第1のユーザインタフェースは、オーバーレイである(例えば、別のユーザインタフェースの上に重ね合わせられ、他のユーザインタフェースの一部分は視認可能である)が、第2のユーザインタフェースは、オーバーレイではない。いくつかの実施形態では、第2のユーザインタフェースは、1つ以上のアクセサリデバイスを制御するための第2の複数の選択可能なユーザインタフェースの選択可能なユーザインタフェースオブジェクトを含む(例えば、第2のユーザインタフェース上に表示される)。いくつかの実施形態では、アクセサリを制御するための第2の複数の選択可能なユーザインタフェースオブジェクトは、選択可能なユーザインタフェースオブジェクトの第1のグループのうちの又はより多く(又は複数)を含み、選択可能なユーザインタフェースオブジェクトの第1のグループのうちの1つ以上(又は複数)を含まない。いくつかの実施形態では、アクセサリを制御するための第2の複数の選択可能なユーザインタフェースオブジェクトは、選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、選択可能なユーザインタフェースオブジェクトの第1のグループのうちの1つ以上(又は複数)は、第2のユーザインタフェースを使用することにナビゲートすることができる。
第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第1の使用コンテキスト(例えば、コンピュータシステムの状態、使用時間(例えば、第1のユーザインタフェースを表示する時間)、使用位置(例えば、第1のユーザインタフェースが表示されているときの(例えば、1つ以上のGPSセンサによって判定された)位置、1つ以上のアクセサリの過去の使用のうちの1つ以上)にあるとの判定に従って(1406)、選択されると、複数の外部アクセサリデバイスの第1の外部アクセサリデバイス(例えば、スマートホームアクセサリデバイス(例えば、スマート(例えば、インテリジェントな)電球、サーモスタット、ドアロック、ドアオープナ(例えば、ガレージドアオープナ)、スピーカ、テレビ、電気コンセント、テーブルタップ、カメラ、器具(例えば、冷蔵庫、レンジ)))に第1の機能(例えば、第1の使用コンテキスト(例えば、それにコンピュータシステムがあること)に基づいて選択される第1の機能)を実行させる(例えば、外部アクセサリデバイスに、外部アクセサリデバイスが実行するように構成されている1つ以上の機能を実行させる(例えば、オン/オフさせる、温度を設定させる、ロック解除/ロックさせる))第2の選択可能なユーザインタフェースオブジェクト(例えば、1334a~1334k(例えば、1334b))を含む。
第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第1の使用コンテキストとは異なる第2の使用コンテキストにあるとの判定に従って(1408)、選択されると、複数の外部アクセサリデバイスの第2の外部アクセサリデバイス(例えば、1206、1212、1216、1232、1236、1242、1244、1246、1248、1242、1256、1258、1262、1264、1266)(例えば、スマートホームアクセサリデバイス(例えば、スマート(例えば、インテリジェントな)電球、サーモスタット、ドアロック、ドアオープナ(例えば、ガレージドアオープナ)、スピーカ、テレビ、電気コンセント、テーブルタップ、カメラ、器具(例えば、冷蔵庫、レンジ)))に第2の機能を実行させる(例えば、アクセサリデバイスに1つ以上の機能を実行させる)(例えば、オン/オフさせる、温度を設定させる、ロック解除/ロックさせる)(例えば、外部アクセサリデバイスに、外部アクセサリデバイスが実行するように構成されている1つ以上の機能を実行させる(例えば、オン/オフさせる、温度を設定させる、ロック解除/ロックさせる))(例えば、コンピュータシステムの状態、使用時間(例えば、第1のユーザインタフェースを表示する時間)、第1のユーザインタフェースが表示されているときの使用位置(例えば、(例えば、1つ以上のGPSセンサによって判定された)位置)、1つ以上のアクセサリの過去の使用のうちの1つ以上)(例えば、第1の使用コンテキスト(例えば、それにコンピュータシステムがあること)に基づいて選択される第1の機能)、第2の選択可能なユーザインタフェースオブジェクトとは異なる第3の選択可能なユーザインタフェースオブジェクト(例えば、1334a~1334k(例えば、1334d))を含み、第3の選択可能なユーザインタフェースオブジェクト(例えば、1334a~1334k(例えば、1334d))は、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、ユーザインタフェース内に含まれない。いくつかの実施形態では、第2の使用コンテキストに基づいて選択される機能は、第1の使用コンテキストに基づいて選択される機能とは異なる。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトは、第2の選択可能なユーザインタフェースオブジェクトを表示することなく表示される。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトは、第2の選択可能なユーザインタフェースオブジェクトとユーザインタフェース上の同じ位置を占めない。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトは、(例えば、第1及び第2の使用コンテキストの両方が満たされているかどうかに関わりなく)第2の選択可能なユーザインタフェースオブジェクトとは異なるサイズである。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、ディスプレイ上の固定位置上に(例えば、コンピュータシステムの使用コンテキストに関わりなく同じ位置に)表示される。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第2の使用コンテキストにあるときに、ユーザインタフェースに含まれない。いくつかの実施形態では、第1の使用コンテキストは、第1のユーザインタフェースが表示生成構成要素を介して表示されている間に、第2の使用コンテキストに変化し、いくつかの実施形態では、第1の選択可能なオブジェクト以外に以前に表示されていた選択可能な使用可能なオブジェクトが表示されることを停止する、又は以前に表示されていなかった新しい選択可能な使用可能なオブジェクトが表示される。(例えば、コンピュータシステムの使用コンテキストに基づいて)所定の条件が満たされたときに、1つ以上の外部デバイスに異なる機能を実行させるための動的選択可能なユーザインタフェースオブジェクトを表示することにより、関連する選択可能なユーザインタフェースオブジェクトに関するフィードバックをユーザに提供し、並びに、追加の表示されたコントロールによりUIを雑然とさせることなく、コンピュータシステムによって提供される選択可能なオブジェクトによって制御することができるコンピュータシステム及び外部デバイスのより多くの制御をユーザに提供する。追加の表示されたコントロールでUIを雑然とすることなく、改善された視覚的フィードバック及びコンピュータシステムの追加の制御を提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。第1及び第2の使用コンテキストの両方において利用可能な、一貫した選択可能なユーザインタフェースオブジェクト(例えば、第1の選択可能なユーザインタフェースオブジェクト)を表示することにより、コンピュータシステムの1つ以上の設定を変更するための一貫した制御をユーザに提供する。第1及び第2の使用コンテキストの両方において利用可能な制御をユーザに提供することにより、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。コンピュータシステムが特定の使用コンテキストにあるとの判定に従って、動的選択可能なユーザインタフェースオブジェクトを表示することにより、ユーザがコンピュータシステムを適切に操作することを可能にする。ユーザに提示されるそのような情報の認知コンテンツは、コンピュータシステム内で実施されている内部状態に関し、したがって、技術的効果である。例えば、コンピュータシステム内で実施されている内部状態は、動的に変化し、異なる選択可能なユーザインタフェースオブジェクトが結果として表示される。動的選択可能なユーザインタフェースオブジェクトのそのような提示により、コンピュータシステムと対話するようにユーザに促す。
いくつかの実施形態では、第1の外部アクセサリデバイス(例えば、1206、1212、1216、1232、1236、1242、1244、1246、1248、1242、1256、1258、1262、1264、1266)は、第2の外部アクセサリデバイス(例えば、1206、1212、1216、1232、1236、1242、1244、1246、1248、1242、1256、1258、1262、1264、1266)とは異なる。いくつかの実施形態では、選択されると、第2のデバイスを含む複数のデバイスに複数の機能を実行させる第2の選択可能なユーザインタフェースオブジェクト(例えば、第2の選択可能なユーザインタフェースオブジェクトは、選択されると、マクロ(例えば、プログラム、シーン)を起動させることを開始し、マクロは、複数のデバイスに既定の(例えば、又はカスタマイズされた)シーケンスで複数の機能を実行させる)。
いくつかの実施形態では、第1の使用コンテキストは、第1のユーザインタフェースが第1の時間(例えば、図13Aの22:10)に(例えば、第1の時間範囲の間に)表示されているときに満たされる要件を含む。いくつかの実施形態では、第2の使用コンテキストは、第1のユーザインタフェースが第1の時間とは異なる第2の時間(例えば、図13Cの06:42)に(例えば、第1の時間範囲とは異なる第2の時間範囲の間に)表示されているときに満たされる要件を含む。いくつかの実施形態では、第1のユーザインタフェース(又は第2のユーザインタフェース)が第1の時間(又は第2の時間)に表示されていることは、コンピュータシステムが第1の時間(又は第2の時間)に(又は第1の時間(若しくは第2の時間)の前の時間に)第1のユーザインタフェースデバイスを表示する要求(例えば、スワイプ)を受け取ることに基づく。いくつかの実施形態では、コンピュータシステムが第1の使用コンテキストにあるとの判定は、現在時刻の判定を含む。いくつかの実施形態では、コンピュータシステムが第2の使用コンテキストにあるとの判定は、現在時刻の判定を含む。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、第1の期間中にのみ第2の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、第1の期間とは異なる第2の期間中にのみ第3の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第2の期間は、第1の期間に重なり合わない。異なる時間に、かつそれらの時間に関連する動的選択可能なユーザインタフェースオブジェクトを表示することにより、あまり関連しない制御オプションによりユーザインタフェースを雑然とさせることなく、関連する制御オプションを提供する。追加の表示されたコントロールでUIを雑然とすることなく、改善された制御オプションを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1の使用コンテキストは、コンピュータシステムが第1の位置(例えば、1302a、1302b、1302c)(例えば、第1の1つ以上の位置に対応する)で検出されるときに満たされる要件を含む。いくつかの実施形態では、第2の使用コンテキストは、コンピュータシステムが第1の位置とは異なる第2の位置(例えば、1302a、1302b、1302c)(例えば、第1の1つ以上の位置とは異なる第2の1つ以上の位置に対応する)で検出されるときに満たされる要件を含む。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第1の位置にあるときにのみ、第2の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第2の位置にあるときに、第3の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第1の位置及び第2の位置は、重なり合わない。異なる位置に対して、かつそれらの位置に関連する動的選択可能なユーザインタフェースオブジェクトを表示することにより、あまり関連しない制御オプションによりユーザインタフェースを雑然とさせることなく、関連する制御オプションを提供する。追加の表示されたコントロールでUIを雑然とすることなく改善された制御オプションを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1の使用コンテキストは、コンピュータシステムが第1の外部アクセサリデバイスに第3の機能(例えば、1360、1334h)(例えば、第1の機能と同じ又は異なる機能)を以前に実行させていたときに満たされる要件を含む。いくつかの実施形態では、第1の外部アクセサリデバイスは、最も通常制御されるデバイス又は直近に制御されたデバイスである。いくつかの実施形態では、第2の使用コンテキストは、コンピュータシステムが第2の外部アクセサリデバイスに第4の機能(例えば、1360、1334h)(例えば、第2の機能と同じ又は異なる機能)を以前に実行させていたときに満たされる要件を含む。いくつかの実施形態では、第2の外部アクセサリデバイスは、最も通常制御されるデバイス又は直近に制御されたデバイスである。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第1の外部アクセサリデバイスに第3の機能を以前に実行させていたときにのみ、第2の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第2の外部アクセサリデバイスに第4の機能を以前に実行させていたときに、第3の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第3の機能及び第4の機能は、異なる。外部アクセサリデバイスを用いた制御オプションの以前の使用に基づいて、1つ以上の外部デバイスに異なる機能を実行させるための動的選択可能なユーザインタフェースオブジェクトを表示することにより、あまり関連しない制御オプションによりユーザインタフェースを雑然とさせることなく、より関連する制御オプションを提供する。追加の表示されたコントロールでUIを雑然とすることなく改善された制御オプションを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを含む第1の数の選択可能なユーザインタフェースオブジェクト(例えば、図13Aの1333、1334a~1334b)を含む。いくつかの実施形態では、第1の複数の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムが第2の使用コンテキストにあるとの判定に従って、第1の選択可能なユーザインタフェースオブジェクト及び第3の選択可能なユーザインタフェースオブジェクトを含む第2の数の選択可能なユーザインタフェースオブジェクト(例えば、図13Aの1333、1334c~1334f)を含む。いくつかの実施形態では、第1の数は、第2の数とは異なる(例えば、第1の数は、第2の数よりも大きい、第1の数は、第2の数よりも小さい)。コンピュータシステムが動作している使用コンテキストに基づいて、異なる数のコントロールを提供することにより、(例えば、UI内の空いているスペースを埋めるために)関連しない追加のコントロールによりUIを雑然とさせることなく、関連する数のコントロールをユーザに提供する。追加の表示されたコントロールでUIを雑然とすることなくコンピュータシステムの追加のコントロールを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクトに対応する第1のユーザ入力(例えば、タップ入力、プレスアンドホールド入力)を受け取る。いくつかの実施形態では、第1のユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上の外部アクセサリデバイスを制御するためのユーザインタフェース(例えば、1320、1340)(例えば、ホーム管理アプリケーションによって生成されたアプリケーション)を表示し、ユーザインタフェースは、コンピュータシステムが1つ以上の外部アクセサリデバイスの第1のセットに対応する第1の位置(例えば、第1のホーム(例えば、「123 Main Street」))に現在関連付けられていることを含む第1の使用コンテキストにコンピュータシステムがあることに従って、選択されると、1つ以上の外部アクセサリデバイスの第1のセットの第1の外部アクセサリデバイス(例えば、スマートホームアクセサリデバイス(例えば、スマート(例えば、インテリジェントな)電球、サーモスタット、ドアロック、ドアオープナ(例えば、ガレージドアオープナ)、スピーカ、テレビ、電気コンセント、テーブルタップ、カメラ、器具(例えば、冷蔵庫、レンジ)))に第5の機能を実行させる(例えば、外部アクセサリデバイスに、外部アクセサリデバイスが実行するように構成されている1つ以上の機能を実行させる(例えば、オン/オフさせる、温度を設定させる、ロック解除/ロックさせる)第1の外部アクセサリデバイスユーザインタフェースオブジェクト(例えば、1336)を含み、コンピュータシステムが1つ以上の外部アクセサリデバイスの第1のセットとは異なる1つ以上の外部アクセサリデバイスの第2のセットに対応する第2の位置(例えば、第2のホーム(例えば、「345 First Street」))に現在関連付けられていることを含む第2の使用コンテキストにコンピュータシステムがあることに従って、選択されると、1つ以上の外部アクセサリデバイスの第2のセットの第1の外部アクセサリデバイス(例えば、スマートホームアクセサリデバイス(例えば、スマート(例えば、インテリジェントな)電球、サーモスタット、ドアロック、ドアオープナ(例えば、ガレージドアオープナ)、スピーカ、テレビ、電気コンセント、テーブルタップ、カメラ、器具(例えば、冷蔵庫、レンジ)))に第6の機能を実行させる(例えば、外部アクセサリデバイスに、外部アクセサリデバイスが実行するように構成されている1つ以上の機能を実行させる(例えば、オン/オフさせる、温度を設定させる、ロック解除/ロックさせる))第2の外部アクセサリデバイスユーザインタフェースオブジェクト(例えば、1336)を含む。コンピュータシステムがコンテキスト上関連付けられている位置に基づいて、異なる外部アクセサリデバイスのための異なるコントロールを含む1つ以上の外部アクセサリデバイスを制御するためのユーザインタフェースを表示することにより、デバイスの現在の位置により関連する制御オプションをユーザに提供する。追加の表示されたコントロールでUIを雑然とすることなくコンピュータシステムの追加のコントロールを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1のユーザインタフェースは、コンピュータシステムが第1のユーザ構成可能モード(例えば、図13Mの1382)(例えば、動的外部アクセサリデバイスコントロールが第1のユーザインタフェース内に表示するように有効にされているモード、コンピュータシステムの設定ユーザインタフェース内で選択することができるモード)にある間に表示される。いくつかの実施形態では、コンピュータシステムが第2のユーザ構成可能モード(例えば、図13Nの1382)(例えば、動的外部アクセサリデバイスコントロールが第1のユーザインタフェース内に表示するように有効にされているモード、コンピュータシステムの設定ユーザインタフェース内で選択することができるモード)にある間に、コンピュータシステムは、第2の複数のユーザインタフェースオブジェクトを含む第2のユーザインタフェース(例えば、図13Lの1320)を表示する。いくつかの実施形態では、第2の複数のユーザインタフェースオブジェクトは、第1の複数のユーザインタフェースオブジェクトの第1のサブセットを含み、かつ第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを含む第1の複数のユーザインタフェースオブジェクトの第2のサブセットの任意の選択可能なユーザインタフェースオブジェクトを含まない。いくつかの実施形態では、第2のサブセットは、外部アクセサリデバイスに機能を実行させる、第1の複数のユーザインタフェースオブジェクトの任意の選択可能なユーザインタフェースオブジェクトを含む。動的デバイスコントロールが無効にされているときに動的選択可能なユーザインタフェースオブジェクトを表示しないことにより、動的デバイスコントロールが無効にされているかどうかに関するフィードバックを提供し、機能に対する追加の制御をユーザに提供する。改善された視覚的フィードバック及び機能に対する制御を提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1のユーザインタフェースは、コンピュータシステムがロック解除ユーザインタフェース状態(例えば、ユーザインタフェース機能の第1のセット(例えば、デフォルトセット)が利用可能である状態)にある間に表示される。いくつかの実施形態では、コンピュータシステムがロックユーザインタフェース状態(例えば、13K~13L)(例えば、ユーザインタフェース機能の第1のセットのうちの1つ以上が利用可能ではない状態(制限されたユーザインタフェース状態))にある間に、コンピュータシステムは、第3の複数のユーザインタフェースオブジェクトを含む第3のユーザインタフェース(例えば、図13Lの1320)を表示する。いくつかの実施形態では、第3の複数のユーザインタフェースオブジェクトは、第1の複数のユーザインタフェースオブジェクトの第3のサブセットを含み、かつ第1の複数のユーザインタフェースオブジェクトの第4のサブセットを含まない。いくつかの実施形態では、第4のサブセットは、第2の選択可能なユーザインタフェースオブジェクト及び/又は第3の選択可能なユーザインタフェースオブジェクトを含む。いくつかの実施形態では、第4のサブセットは、外部アクセサリデバイスに機能を実行させる、第1の複数のユーザインタフェースオブジェクトの任意の選択可能なユーザインタフェースオブジェクトを含む。ロック状態にある間に第1の複数のユーザインタフェースオブジェクトのサブセットを表示していない間に、第1の複数のユーザインタフェースオブジェクトのサブセットを表示することにより、コンピュータシステムが、ロック状態にある間にどのコントロールが提供されるかを制限することを可能にし、これにより、コンピュータシステムがロックされているときに(例えば、電子デバイスがより安全な状態にある、又はコンピュータシステムの追加の機能にアクセスするために一種のパスコードを提供する必要がある状況で)選択可能なユーザインタフェースオブジェクトへの意図しないアクセスを保護する。改善されたセキュリティを提供することにより、ユーザインタフェースをより安全にし、許可されていない入力を低減し、加えて、ユーザがコンピュータシステムをより安全かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力(例えば、タップジェスチャ、長い押圧ジェスチャ)を受け取る。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、かつ第2の選択可能なユーザインタフェースオブジェクト又は第3の選択可能なユーザインタフェースオブジェクトを含む第1のユーザインタフェース(例えば、図13Eの1320)を表示している間に、コンピュータシステムは、第2の選択可能なユーザインタフェースオブジェクト及び第3の選択可能なユーザインタフェースオブジェクトとは異なる第6の選択可能なユーザインタフェースオブジェクト(例えば、1336、1336g)を表示する。いくつかの実施形態では、第6の選択可能なユーザインタフェースオブジェクトの選択により、複数の外部アクセサリデバイスの第7の外部アクセサリデバイス(例えば、スマートホームアクセサリデバイス(例えば、スマート(例えば、インテリジェントな)電球、サーモスタット、ドアロック、ドアオープナ(例えば、ガレージドアオープナ)、スピーカ、テレビ、電気コンセント、テーブルタップ、カメラ、器具(例えば、冷蔵庫、レンジ)))に第7の機能を実行させる(例えば、アクセサリデバイスに1つ以上の機能を実行させる(例えば、オン/オフさせる、温度を設定させる、ロック解除/ロックさせる))。いくつかの実施形態では、第7の機能は、第1の機能及び第2の機能とは異なる。いくつかの実施形態では、第7の外部アクセサリデバイスは、第1の外部アクセサリデバイス及び第2の外部アクセサリデバイスとは異なる。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクト(及び/又は、選択されると、コンピュータシステムに、状態を変更させる(例えば、コンピュータシステムの表示生成構成要素の輝度を変更させる(例えば、調整させる)、コンピュータシステムの1つ以上のスピーカの音を変更させる、状態(Wi-Fi、機内モード、Bluetoothの(例えば、オン/オフ))を変更させる、コンピュータシステムのディスプレイスクリーン上に表示されているユーザインタフェースを修正又は変更させる(例えば、以前に表示されていなかった、かつ/又は第1のユーザインタフェースとは異なる第2のユーザインタフェースを表示させる))他の選択可能なユーザインタフェースオブジェクト)を表示することを停止する。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、特定の順序で(例えば、対応する外部アクセサリデバイスが割り当てられた部屋によって)ソートされた外部アクセサリデバイスを制御するための複数の選択可能なユーザインタフェースオブジェクトを表示する。入力(例えば、長い押圧入力)を受け取ったことに応じて、第1のユーザインタフェース上に動的に表示されていなかった追加の選択可能なユーザインタフェースオブジェクトを表示することにより、第1のユーザインタフェースを雑然とさせることなく、追加の制御オプションをユーザに提供する。ユーザインタフェースを雑然とさせることなく、追加の制御オプションを提供することにより、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときにユーザが適切な入力を提供するように支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量が削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1の位置は、第1の物理的構造体(例えば、家、ホーム、オフィスビル)に関連付けられた位置から所定の距離未満の位置である。いくつかの実施形態では、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第2の外部アクセサリデバイスは、第1の物理的構造体の内部位置に関連付けられる。
いくつかの実施形態では、第2の物理的構造体は、第1のエリアと、第1のエリアとは異なる第2のエリアとを含む。いくつかの実施形態では、第1の位置は、物理的構造体の第2のエリア内にあることなく、物理的構造体の第1のエリア内にある位置である。いくつかの実施形態では、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第2の外部アクセサリデバイスは、第1のエリアに関連付けられ、第2のエリアに関連付けられていない。
いくつかの実施形態では、第2の位置は、物理的構造体(例えば、家、ホーム、オフィスビル)から所定の距離未満でない位置である。いくつかの実施形態では、コンピュータシステムが第2の使用コンテキストにあるとの判定に従って、第3の外部アクセサリデバイスは、物理的構造体の外部位置に関連付けられる。
いくつかの実施形態では、第1のユーザインタフェースは、第1の部分と第2の部分と、コンピュータとを含む。いくつかの実施形態では、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第1の部分は、1つ以上の選択可能なユーザインタフェースオブジェクトの固定レイアウトに基づいて表示され、第2の部分は、1つ以上の選択可能なユーザインタフェースオブジェクトの第1の可変レイアウトを含む。いくつかの実施形態では、コンピュータシステムが第2の使用コンテキストにあるとの判定に従って、第1の部分は、固定レイアウトに基づいて表示され、第2の部分は、1つ以上の選択可能なユーザインタフェースオブジェクトの第2の可変レイアウトに基づいて表示される。いくつかの実施形態では、第2の可変レイアウトは、第3の可変レイアウトとは異なる。
いくつかの実施形態では、コンピュータシステムが一定の向きにある間に、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第1の選択可能なユーザインタフェースオブジェクトは、第1のユーザインタフェースの一部分を占める(例えば、その内部にあり、かつそれを埋める)第3のレイアウトで表示され、コンピュータシステムが第2の使用コンテキストにあるとの判定に従って、第2の選択可能なユーザインタフェースオブジェクトは、第1のユーザインタフェースの一部分を占める(例えば、その内部にあり、かつそれを埋める)第4のレイアウトで表示される。いくつかの実施形態では、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第1の数の選択可能なユーザインタフェースは、第1のユーザインタフェースの一部分を占める第3のレイアウトで表示される。いくつかの実施形態では、コンピュータシステムが第2の使用コンテキストにあるとの判定に従って、第2の数の選択可能なユーザインタフェースは、第3のレイアウトとは異なる第4のレイアウトで表示され、第2のレイアウトは、第1のユーザインタフェースの一部分を占める。いくつかの実施形態では、第3のレイアウトは、第4のレイアウトとは異なる。
いくつかの実施形態では、第2のユーザインタフェースを表示することの一部として、コンピュータシステムは、第2の選択可能なユーザインタフェースオブジェクトに対応する選択可能なユーザインタフェースオブジェクト、及び第3の選択可能なユーザインタフェースオブジェクトに対応する選択可能なユーザインタフェースオブジェクトのうちの少なくとも1つを表示する(又は両方を同時に表示する)。
いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトに対応する選択可能なユーザインタフェースオブジェクトを表示することなく、第2のユーザインタフェースを表示している間に、コンピュータシステムは、第3のユーザインタフェースを表示する要求に対応するユーザ入力を受け取る。いくつかの実施形態では、第3のユーザインタフェースを表示する要求を受信したことに応じて、コンピュータシステムは、第2の選択可能なユーザインタフェースオブジェクトに対応する選択可能なユーザインタフェースオブジェクトを表示することを含む、第3のユーザインタフェースを表示する。
いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、動的コントロールの数に関わりなく同じサイズである。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、第1のユーザインタフェースの第2の部分内に表示される。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトが第1のユーザインタフェースの第2の部分内に表示されている間に、コンピュータシステムは、コンピュータシステムが第1の使用コンテキストにあるとの判定に従って、第1の選択可能なユーザインタフェースオブジェクトは、第1のサイズを有し、コンピュータシステムが第2の使用コンテキストにあるとの判定に従って、第1の選択可能なユーザインタフェースオブジェクトは、第1のサイズとは異なる第2のサイズを有する。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、第1のユーザインタフェースの第1の部分内に表示され、第1の選択可能なユーザインタフェースオブジェクトが第1のユーザインタフェースの第1の部分内に表示されている間に、第1の選択可能なユーザインタフェースオブジェクトは、コンピュータシステムの使用コンテキストに関わりなく同じサイズである。
方法1400に関して上述したプロセス(図14)の詳細はまた、上述/後述する方法にも類似の方式で適用可能であることに留意されたい。例えば、方法800は、方法1400を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法800の動作806は、コンピュータシステムが方法1400の動作1402を実行している間に表示することができる第1のメディア情報アフォーダンスを選択するために実行することができ、動作808、810、及び/又は812は、選択に応じて、方法1400の一部として実行することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図15A~図15Lは、いくつかの実施形態に係る、オーディオ再生を制御するための例示的なユーザインタフェースを示す。これらの図におけるユーザインタフェースは、図7、図8、図10、及び図16に示すプロセスを含む、後述するプロセスを例示するために使用される。
図15A~図15Dは、外部メディア再生デバイス(例えば、リビングルームスピーカ1248)がメディアを現在再生している例示的なシナリオを示す。図15A~図15Dはまた、外部メディア再生デバイスがメディアを現在再生しており、かつデバイス600が外部メディア再生デバイスから離れたそれぞれの距離である間に表示されるユーザインタフェースを示す。図15A~図15Dは、デバイス600の位置(例えば、1502a~1502c)が外部メディア再生デバイスの位置から離れている、それぞれの距離(例えば、1504a~1504c)の表現を含む概略図1500を含む。概略図1500は、説明のための視覚的補助として、例示の目的のためのみに提供される。したがって、概略図1500は、デバイス600が外部メディア再生デバイスから所定の距離内にあるかどうかを判定する範囲を限定することを意図するものではない。更に、図は必ずしも縮尺通りではなく、単に視覚的補助として含まれる。したがって、特に断りがない限り、図に示される特徴のサイズ及び縮尺は、外部メディア再生デバイスから離れた所定の距離内にあるために必要とされる距離に対する制限として意図するものではない。いくつかの実施形態では、図15A~図15Dに関連して説明する技術は、上述のように(例えば、近接範囲インジケータ652によって表されるように、図6A~図6Pに関連して上述した1つ以上の技術を使用して)、デバイス600が近接条件範囲内にあることに関連して上述した技術と同様である。
図15Aは、複数のアプリケーションアイコンを含むユーザインタフェース1508を表示するデバイス600を示す。図15Aの概略図1500によって示すように、デバイス600は、リビングルームスピーカ1248から離れた距離1504aである位置1502aにある。
図15Bでは、概略図1500は、リビングルームスピーカ1248から離れた距離1504bである位置1502bにデバイス600が現在あることを示す。距離1504bは、図15Aに示された距離1504aよりも短い。したがって、図15Bでは、デバイス600は、デバイス600が図15Aであったよりもリビングルームスピーカ1248に近い。
図15Bでは、外部デバイス制御基準のセット(例えば、制御基準)が満たされないとの判定がなされる。ここで、デバイス600がリビングルームスピーカ1248に十分に近接していない(例えば、距離1504bが所定の距離(例えば、1、3、5メートル)内でない)ため、制御基準が満たされないとの判定がなされる。いくつかの実施形態では、制御基準が満たされているかどうかの判定は、デバイス600又はデバイス600と通信しているサーバなどの1つ以上の他のデバイスによって行われる。
図15Bに示すように、デバイス600は、(例えば、デバイス600がリビングルームスピーカ1248から離れた距離1504bであるとき)外部デバイス制御基準が満たされないため、ユーザインタフェース1508を更新しない、又はユーザインタフェース1508とは異なるユーザインタフェースを表示しない。
図15Cでは、概略図1500は、リビングルームスピーカ1248から離れた距離1504cである位置1502cにデバイス600が現在あることを示す。距離1504cは、図15Bに示された距離1504bよりも短い。したがって、図15Cでは、デバイス600は、デバイス600が図15Bであったよりもリビングルームスピーカ1248に近い。
図15Cでは、制御基準が満たされるとの判定がなされる。ここで、デバイス600がリビングルームスピーカ1248に十分に近接している(例えば、距離1504cが所定の距離(例えば、1、3、5メートル)内である)ため、制御基準が満たされるとの判定がなされる。図15Cでは、デバイス600がデバイス600の任意のユーザインタフェース要素に向けられた任意の特定のジェスチャ又はユーザ入力を受け取ることなく、制御基準が満たされるとの判定がなされる。いくつかの実施形態では、制御基準が満たされているかどうかを判定するとき、リビングルームスピーカ1248に対するデバイス600の物理的な向きに基づいていない判定がなされる。換言すれば、いくつかの実施形態では、制御基準は、デバイス600がリビングルームスピーカ1248若しくは環境内の任意の他の対象に対応する位置に配置されているか、又はそれから離れて配置されているかに基づいて満たされる基準を含まない。いくつかの実施形態では、制御基準が満たされているかどうかを判定するとき、電子デバイス600の特定の移動かどうかに基づいて(例えば、デバイス600がリビングルームスピーカ1248に対応する位置に向かって加速しているかどうかに基づいて)いない判定がなされる。いくつかの実施形態では、異なる2つの外部メディア再生デバイスに対して制御基準が満たされるとき(例えば、デバイス600が異なる2つの外部メディア再生デバイスに十分に近接しているとき)、デバイス600は、デバイス600に最も近いデバイス又はメディアを現在再生しているデバイス600に最も近いデバイスに対応するユーザインタフェース1510(又は後述するユーザインタフェース1530)に類似したユーザインタフェースを自動的に表示する。
いくつかの実施形態では、制御基準は、外部メディア再生デバイスでメディアの再生を開始するために、音声コマンドがデバイス600から行われるときに満たされる基準を含む。いくつかの実施形態では、音声コマンドは、1つ以上の発話認識及び/又はバイオメトリックアルゴリズムによって分析されて、音声がデバイス600に(例えば、アカウントを介して)関連付けられているユーザに属すると判定する。したがって、いくつかの実施形態では、音声コマンドを外部メディア再生デバイスに発行するものとして認識されたユーザに関連付けられたデバイスは、ユーザインタフェース(例えば、ユーザインタフェース1510又はユーザインタフェース1530(以下で説明する)など)を自動的に表示し(例えば、制御基準が満たされているため)、ユーザに関連付けられていないデバイスは、両方のデバイスが外部メディア再生デバイスに十分近接している(例えば、それから所定の距離内である)場合であっても、ユーザインタフェースを自動的には表示しない(例えば、制御基準が満たされていないため)。
いくつかの実施形態では、制御基準は、デバイス600が外部メディア再生デバイスと同じアカウント(例えば、モバイルデバイスアカウント、メディアストレージアカウント、メディアプロバイダアカウント)にログインしているときに満たされる基準を含む。いくつかの実施形態では、外部メディア再生デバイスと同じアカウントにログインしているデバイスは、ユーザインタフェースを自動的に表示し、外部メディア再生デバイスと同じアカウントにログインしていないデバイスは、両方のデバイスが外部メディア再生デバイスに十分に近接している(例えば、それから所定の距離内にある)場合であっても、ユーザインタフェースを自動的に表示しない。
いくつかの実施形態では、制御基準は、デバイス600がメディア再生と同じアカウントにログインしており、外部メディア再生デバイスがメディアを再生しており、かつ/又はデバイス600がデバイス600と同じ部屋(例えば、リビングルーム1202d)にあるときに満たされる基準を含む。いくつかの実施形態では、外部メディア再生デバイスと同じアカウントにログインしている2つ以上のデバイスが存在し、かつ2つ以上のデバイスが外部メディア再生デバイスに十分に近接しているとき、デバイスのうちの少なくとも1つは、外部メディア再生デバイス上のメディアの再生を制御している(例えば、デバイスからのコマンドが外部メディア再生デバイスに送信されるとき)、又はユーザインタフェース1510若しくはユーザインタフェース1530(以下で説明する)などのユーザインタフェースを表示している、どのデバイスかのインジケーション(例えば、デバイスの所有者に関連付けられた識別子)を表示する。
制御基準が満たされているかどうかに関する判定と共に、図15Aのオーディオアクティビティインジケータ1592によって示されるように、リビングルームスピーカ1248がメディアを再生するように現在構成されている(例えば、メディアを現在出力している)との判定がなされる。図15Cでは、概略図1500は、リビングルームスピーカ1248の上のオーディオアクティビティインジケータ1592と、ダイニングルームスピーカ1216の上のオーディオアクティビティインジケータ1594とを含む。オーディオアクティビティインジケータ1592(例えば、音符)は、オーディオアクティビティインジケータ1594(例えば、「それを通るスラッシュを有する音符」)と対比することができ、それにより、オーディオアクティビティインジケータ1592は、リビングルームスピーカ1248がメディアを現在出力していることを示し、オーディオアクティビティインジケータ1594は、ダイニングルームスピーカ1216がメディアを現在出力していないことを示す。オーディオアクティビティインジケータ1592及びオーディオアクティビティインジケータ1594は、オーディオアクティビティインジケータ675及びオーディオアクティビティインジケータ625それぞれと、同様の目的のために提供され、同じプロパティを有することを理解されたい。
図15Cに示すように、デバイス600は、制御基準が満たされ、かつリビングルームスピーカ1248がメディアを現在再生しているとの判定が行われたため、ユーザインタフェース1510を表示する。ユーザインタフェース1510は、デバイス識別子1512、デバイス識別子1514、現在のメディア識別子1516、タイマーコントロール1528、並びに再生位置コントロール1518、巻き戻しコントロール1520、一時停止コントロール1522、早送りコントロール1524、及び音量レベルコントロール1526などのメディア再生コントロールを含む。デバイス識別子1512及びデバイス識別子1514は、ユーザインタフェース1510を介して制御することができるデバイスの名前を示す。したがって、図15Cでは、デバイス識別子1512及びデバイス識別子1514は、デバイス600がリビングルームスピーカ1248に十分に近接しているため、リビングルームスピーカ1248をユーザインタフェース1510を介して制御することができること(例えば、「リビングルーム」)を示す。図15Cに示すように、デバイス識別子1512はまた、ユーザインタフェース1510を介して制御することができるデバイスのタイプのグラフィカル表現の隣に表示される。したがって、図15Cでは、グラフィカル表現は、スピーカである。現在のメディア識別子1516は、現在再生されている又はリビングルームスピーカ1248によって制御されているメディアを示す。したがって、図15Cでは、リビングルームスピーカ1248は、「アーティスト1」によって演奏される曲「トラック1」を再生している。
タイマーコントロール1528は、タイマーを制御するための複数のコントロール(例えば、一時停止コントロール、停止コントロール)を任意選択的に含む。図15Cでは、タイマーコントロール1528は、非メディア関連アプリケーション(例えば、タイマーアプリケーション、アラームアプリケーション)に対応する。したがって、図15Cでは、タイマーコントロール1528は、メディア再生コントロールが対応するメディア関連アプリケーション(例えば、音楽アプリケーション、ビデオアプリケーション、ポッドキャストアプリケーション)とは異なるタイプのアプリケーションに対応する。
図15Cでは、メディア再生コントロールのうちの任意の1つが(例えば、ジェスチャを介して)選択されると、リビングルームスピーカ1248にメディア再生動作を変更させる命令が、デバイス600によって送信される。例えば、巻き戻しコントロール1520に向けられたジェスチャを受け取ったことに応じて、デバイス600は、リビングルームスピーカ1248に現在再生している「トラック1」を巻き戻させる命令を送信する。
図15Cに示すように、再生位置コントロール1518は、再生位置インジケータ1518aを含む。図15Cでは、再生位置インジケータ1518aは、メディアの現在の再生位置(例えば、再生されているメディアの現在の時間)に対応する再生位置コントロール1518上の位置にある。図15Cでは、メディア再生コントロールがリビングルームスピーカ1248上で再生されているメディアの現在の状態と同期しているように、再生位置インジケータ1518aは、メディアの再生の状態及び残りの時間を示すデータに基づいて、再生位置コントロール1518上の位置に表示される。図15Cでは、デバイス600は、再生位置コントロール1518の再生位置インジケータ1518a上のドラッグジェスチャ1550cを検出する。
図15Dに示すように、ドラッグジェスチャ1550cを検出したことに応じて、デバイス600は、再生位置インジケータ1518aを再生位置コントロール1518上の第1の位置から再生位置コントロール1518上の第2の位置に移動させる。再生位置コントロール1518上の新しい位置に再生位置インジケータ1518aを表示することと共に、デバイス600は、スピーカにメディアの再生を再生位置コントロール1518上の第1の位置に対応するメディアの位置(例えば、図15Cの00:30)から再生位置コントロール1518上の第2の位置に対応するメディアの位置(例えば、02:15)にスキップさせる命令をリビングルームスピーカ1248に送信する。
図15E~図15Fは、外部メディア再生デバイス(例えば、ダイニングルームスピーカ1216)がメディアを現在再生していない例示的なシナリオを示す。図15E~図15Fはまた、外部メディア再生デバイスがメディアを現在再生しておらず、かつデバイス600が外部メディア再生デバイスから離れたそれぞれの距離である間に表示されるユーザインタフェースを示す。図15E~図15Fは、デバイス600の対応する位置(例えば、1502e~1502f)が外部メディア再生デバイスの位置から離れている、それぞれの距離(例えば、1504e~1504f)の対応する表現を含む概略図1500を含む。いくつかの実施形態では、図15E~図15Fに関連して説明する技術は、上述のように(例えば、近接範囲インジケータ652によって表されるように、図6A~図6Pに関連して上述した1つ以上の技術を使用して)、デバイス600が近接条件範囲内にあることに関連して上述した技術と同様である。
図15Eでは、概略図1500は、リビングルームスピーカ1248から離れた距離1504d及びダイニングルームスピーカ1216から離れた距離1504eである位置1502eにデバイス600が現在あることを示す。距離1504dは、(図15C及び図15Dに示されるような)距離1504cよりも長い。したがって、図15Eでは、デバイス600は、図15Dでデバイス600があったよりもリビングルームスピーカ1248から更に離れている。
図15Eでは、デバイス600が任意の外部メディアデバイス(例えば、リビングルームスピーカ1248、ダイニングルームスピーカ1216)に近接していないため、制御基準が満たされないとの判定がなされる。したがって、図15Eに示すように、デバイス600は、(例えば、図15C~図15Dに関連して上述したように)リビングルームスピーカ1248を制御していたメディア再生コントロールを含んでいたユーザインタフェース1510を表示することを自動的に停止し、アプリケーションアイコンのセットを有するユーザインタフェース1508を再表示する。いくつかの実施形態では、制御基準が満たされないとの判定がなされると、デバイス600は、デバイス600上に表示されたユーザインタフェースを変更するジェスチャが受け取られるまで、かつ/又は制御基準が満たされるまで(例えば、リビングルームスピーカ1248とは異なるデバイスに対して)、ユーザインタフェース1510を表示し続ける。
図15Fでは、概略図1500は、ダイニングルームスピーカ1216から離れた距離1504fである位置1502fにデバイス600が現在あることを示す。距離1504fは、(図15Eに示されるような)距離1504eよりも短い。したがって、図15Fでは、デバイス600は、デバイス600が図15Eであったよりもダイニングルームスピーカ1216に近い。
図15Fでは、制御基準が満たされるとの判定がなされる。ここで、デバイス600がダイニングルームスピーカ1216に十分に近接している(例えば、距離1502fが制御するための所定の距離(例えば、1、3、5メートル)内である)ため、制御基準が満たされるとの判定がなされる。制御基準が満たされているかどうかに関する判定と共に、(図15Cに関して上述したように)オーディオアクティビティインジケータ1594によって示されるように、ダイニングルームスピーカ1216がメディアを現在再生していない(例えば、メディアを現在出力していない)との判定がなされる。
図15Fに示すように、デバイス600は、制御基準が満たされ、かつダイニングルームスピーカ1216がメディアを現在再生していないとの判定が行われたため、ユーザインタフェース1530を表示する。いくつかの実施形態では、ユーザインタフェース1530は、デバイス600がダイニングルーム1202bに入ったと判定されたときに表示される。
ユーザインタフェース1530は、デバイス識別子(例えば、「ダイニングルーム」)及びタイマー又はアラームコントロール(例えば、タイマーコントロール1528)などの、ユーザインタフェース1510と同様の構成要素を含む。しかしながら、ダイニングルームスピーカ1216が(例えば、メディアを再生する代わりに)メディアを現在再生していないため、ユーザインタフェース1530は、推奨メディアアイテムグラフィック1532を含む。いくつかの実施形態では、ユーザインタフェース1530内に表示されるタイマー又はアラームコントロールは、(例えば、別のデバイスが制御されているため、及び/又は対応するユーザインタフェースを介して制御されているデバイスが異なるメディア再生状態にあるため)ユーザインタフェース1510内に表示されるタイマー又はアラームコントロールとは異なる。
図15Fに示すように、推奨メディアアイテムグラフィック1532は、プレイリスト(例えば、推奨メディアアイテムグラフィック1532a、1532d)、ポッドキャスト(例えば、推奨メディアアイテムグラフィック1532b、1532e)、及びアルバム(例えば、推奨メディアアイテムグラフィック1532c、1532f)などの、異なるタイプのメディアアイテムを表す。推奨メディアアイテムグラフィック1532のそれぞれは、図15Fのダイニングルームスピーカ1216上で再生するように推奨されている所定のメディアアイテムを表す。推奨メディアアイテムグラフィックのそれぞれは、対応する推奨メディアアイテムを提供している(例えば、ホストしている、記憶している、転送している)ソース(例えば、ソースアプリケーション又はソースデバイス)を示すソースインジケータを含む。例えば、推奨メディアアイテムグラフィック1532a(例えば、「プレイリスト1」)は、推奨メディアアイテムグラフィック1532aによって表される推奨メディアアイテムがデバイス600上にローカルに記憶されていることを示すソースインジケータ1532a1を有する。別の例として、推奨メディアアイテムグラフィック1532c(例えば、「アルバム1」)は、推奨メディアアイテムグラフィック1532cによって表される推奨メディアアイテムが音楽アプリケーションによって提供されていることを示すソースインジケータ1532c1を有する。いくつかの実施形態では、第1の推奨メディアアイテムグラフィック(例えば、1532a)は、デバイス600上で現在再生している(又は再生されることになる待ち行列内の最初のものである)メディアアイテムに対応する。いくつかの実施形態では、デバイス600が推奨メディアアイテムグラフィック1532のうちの1つ上のタップジェスチャを検出すると、ダイニングルームスピーカ1216は、対応する推奨メディアアイテムグラフィックによって表されるメディアの再生を開始する。いくつかの実施形態では、プレイリストメディアアイテムを表すメディアアイテムを選択することにより、ダイニングルームスピーカ1216にプレイリストメディアアイテムの一部である複数のメディアアイテムを再生させる。いくつかの実施形態では、デバイス600は、メディアアイテムグラフィック(例えば、608-7)に関連して(例えば、図6C~図6Eで)上述した技術を使用して、推奨メディアアイテムグラフィック1532のうちの1つ以上を表示、選択、及び/又は推奨メディアアイテムグラフィック1532のうちの1つ以上に向けられたジェスチャ(単数又は複数)に応答する。いくつかの実施形態では、左向き又は右向きスワイプジェスチャがユーザインタフェース1510上で(例えば、図15Cで)検出されると、デバイス600は、ユーザインタフェース1510上に表示されたコンテンツを変更することなく(例えば、ユーザインタフェース1510が表示されることになる任意の推奨メディアアイテムグラフィックを含まないため)、ユーザインタフェース1510の表示を継続する。図15Fでは、デバイス600は、ユーザインタフェース1530上の左向きスワイプジェスチャ1550fを検出する。
図15Gに示すように、左向きスワイプジェスチャ1550fを検出したことに応じて、デバイス600は、推奨メディアアイテムグラフィックを左にスライドさせて、新たに表示された推奨メディアアイテムグラフィック1532g及び推奨メディアアイテムグラフィック1532hなどの追加の推奨メディアアイテムグラフィックを表示する。ここで、推奨メディアアイテムグラフィック1532g及び推奨メディアアイテムグラフィック1532hはそれぞれ、図15Fの推奨メディアアイテムグラフィック1532a~1532fによって表されていなかったメディアアイテムを表す。図15Gでは、デバイス600は、ユーザインタフェース1530上の上向きスワイプジェスチャ1550gを検出する。
図15Hに示すように、上向きスワイプジェスチャ1550gを検出したことに応じて、デバイス600は、ユーザインタフェース1530を上向きにスクロールして、アラームコントロール1534a及びアラームコントロール1534bなどの非メディア関連アプリケーションに対応する追加のコントロールを表示する。いくつかの実施形態では、上向き又は下向きスワイプジェスチャがユーザインタフェース1510上で(例えば、図15Cで)検出されると、デバイス600は、ユーザインタフェースをスクロールして、非メディア関連アプリケーションに対応する追加のコントロールを表示する。いくつかの実施形態では、アラームコントロール1534a上のジェスチャを検出したことに応じて、デバイス600は、アラームコントロール1534aに関連付けられた時間(例えば、午前5:00)にオンにするようにアラームをスケジュールする。
図15Cに戻って見ると、デバイス600がロック解除状態にあり、かつ他のデバイスコントロール(例えば、デバイス600の音量、輝度、Bluetooth接続を制御するためのコントロール)を有する音楽アプリケーションコントロール(例えば、1572)を表示していない間に、デバイス600は、ユーザインタフェース1510を表示していた。図15I~図15Jに示すように、デバイス600は、デバイス600が異なる状態にある(かつ制御基準が満たされ、かつ外部デバイスがメディアを現在再生していると判定される)ときに、ユーザインタフェース1510に対応する異なるユーザインタフェースを表示する。図15Iは、デバイス600がロック状態にあるため、ユーザインタフェース1560を表示するデバイス600を示す。ユーザインタフェース1560は、デバイス識別子(例えば、「リビングルーム」)及び1つ以上の同様のメディア再生コントロールなどの、ユーザインタフェース1510と同様の構成要素を含む。しかしながら、ユーザインタフェース1560は、任意のタイマー及び/又はアラームコントロールを含まない。図15Jは、デバイス600が他のデバイスコントロールを有する音楽アプリケーションコントロール(例えば、1572)を表示しているため、ユーザインタフェース1560を表示するデバイス600を示す。ユーザインタフェース1570は、現在のメディア識別子(例えば、「トラック1」)などの、ユーザインタフェース1510と同様の構成要素を含む。しかしながら、ユーザインタフェース1560は、任意のタイマー及び/又はアラームコントロールを含まない。加えて、ユーザインタフェース1572は、再生位置コントロール1518及び音量レベルコントロール1526などのユーザインタフェース1510上に表示されていたメディアコントロールの全てを含まない。
図15Fに戻って見ると、デバイス600がロック解除状態にあり、かつ複数の他のデバイスコントロール(例えば、デバイス600の音量、輝度、Bluetooth接続などを制御するためのコントロール)を有する音楽アプリケーションコントロール(例えば、1592)を表示していない間に、デバイス600は、ユーザインタフェース1530を表示していた。図15K~図15Lに示すように、デバイス600は、デバイス600が異なる状態にある(かつ制御基準が満たされ、かつ外部デバイスがメディアを現在再生していないと判定される)ときに、ユーザインタフェース1530に対応する異なるユーザインタフェースを表示する。図15Kは、デバイス600がロック状態にあるため、ユーザインタフェース1580を表示するデバイス600を示す。ユーザインタフェース1580は、デバイス識別子(例えば、「ダイニングルーム」)などの、ユーザインタフェース1530と同様の構成要素を含む。しかしながら、ユーザインタフェース1580は、任意のタイマー及び/又はアラームコントロールを含まず、低減された数の推奨メディアアイテムグラフィックを含む。更に、表示される推奨メディアアイテムグラフィックは、任意のソースインジケータを含まない。図15Lは、デバイス600が複数の他のデバイスコントロールを有する音楽アプリケーションコントロール(例えば、1582)を表示しているため、ユーザインタフェース1590を表示するデバイス600を示す。ユーザインタフェース1590は、ユーザインタフェース1530と同様の構成要素を含む。しかしながら、ユーザインタフェース1590は、任意のタイマー及び/若しくはアラームコントロール、又は推奨メディアアイテムグラフィックを含まない。
図16は、いくつかの実施形態に係る、電子デバイスを使用してオーディオ再生を制御する方法を示すフロー図である。方法1600は、表示生成構成要素(例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム)及び1つ以上の入力デバイス(例えば、タッチ感知面)と通信しているコンピュータシステム(例えば、100、300、500、又は600)(例えば、スマートフォン、スマートウォッチ)において実行される。方法1600の動作のいくつかは、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法1600は、オーディオ再生を制御するための直感的な方法を提供する。この方法は、オーディオ再生を制御するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的にオーディオ再生を制御することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
コンピュータシステムは、外部メディア再生デバイス(例えば、1216、1248)(例えば、スピーカ、テレビ、デジタルメディアプレーヤ)の現在のメディア(例えば、オーディオ及び/又は視覚メディア)の再生状態(例えば、オーディオメディア又は視覚メディアを出力する状態)を示すデータを受信する(例えば、1602)。いくつかの実施形態では、データは、外部メディア再生デバイスから(例えば、有線又は無線接続を介して)直接受信される。いくつかの実施形態では、データは、中間サーバを介して受信される。
コンピュータシステムは、データを受信したことに応じて、かつ外部メディア再生デバイス制御基準のセットが満たされたとの判定に従って、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェース(例えば、1510又は1530)を表示する(1604)。いくつかの実施形態では、外部デバイスメディア制御基準のセットは、コンピュータシステムがメディア再生デバイスに接続されているときに満たされる基準を含む。いくつかの実施形態では、判定は、コンピュータシステムに関連付けられた(例えば、任意の)アプリ上で(例えば、任意の)ユーザ入力とは無関係に行われる(例えば、判定は、自動的に行われる)。いくつかの実施形態では、ユーザインタフェースは、外部メディア再生デバイス(例えば、スピーカ、テレビ、デジタルメディアプレーヤ)の現在のメディア再生状態を示すデータを受信したことに応じて、ユーザ入力を介在することなく、自動的に表示される。いくつかの実施形態では、データは、外部メディア再生デバイスから(例えば、有線又は無線接続を介して)直接受信される。いくつかの実施形態では、データは、中間サーバを介して受信される。いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、コンピュータシステムの移動に基づく(例えば、加速度計データに基づく)任意の基準を含まない。いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、コンピュータシステムの物理的向きに基づく(例えば、加速度計又はジャイロスコープデータに基づく)任意の基準を含まない。
外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースは、(例えば、1592によって示されるように)外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、1つ以上の入力デバイスを介して選択されると(例えば、1550cを介して)、(例えば、いくつかの実施形態では、外部メディア再生デバイスに直接又は間接的に(例えば、サーバを介して)コマンドを送信することによって)外部メディア再生デバイスにメディア再生動作を変更させる(例えば、動作を一時停止又は停止させる、現在再生しているメディアから異なるメディアに遷移させる、早送り動作をさせる、巻き戻し動作をさせる、音量増加又は減少動作をさせる)第1の選択可能なユーザインタフェースオブジェクト(例えば、図15Cの1518、1520、1522、1526)を含む(例えば、それを表示することを含む)(1606)。
外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースは、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示す(例えば、(例えば、1594によって示されるように)メディア再生デバイスがオーディオメディア又は視覚メディアを出力していない)との判定に従って(1608)、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第1の所定のメディアアイテム(例えば、推奨メディアアイテム、外部メディア再生デバイス上で再生されるように現在構成されていないメディアアイテム)の再生を開始させる、第2の選択可能なユーザインタフェースオブジェクト(1610)(例えば、1532a~1532f)を含む。外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースは、外部メディア再生デバイスがメディア再生動作を現在実行していないことをデータが示す(例えば、メディア再生デバイスがオーディオメディア又は視覚メディアを出力していない)との判定に従って(1608)、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに第2の所定のメディアアイテム(例えば、推奨メディアアイテム、外部メディア再生デバイス上で再生されるように現在構成されていないメディアアイテム)の再生を開始させる、第3の選択可能なユーザインタフェースオブジェクト(1612)(例えば、1532a~1532f)を含む。いくつかの実施形態では、外部メディア再生デバイスがメディア再生動作を現在実行していることをデータが示すとの判定に従って、コンピュータシステムは、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに所定のメディアアイテムの再生を開始させる、選択可能なユーザインタフェースオブジェクトの表示を取り止める。いくつかの実施形態では、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースを表示している間に、コンピュータシステムは、異なる外部メディア再生デバイスのメディアを制御するための(例えば、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースとは異なる)別のユーザインタフェースを表示することを停止する。いくつかの実施形態では、ユーザインタフェースは、外部デバイスに関連付けられた識別子を含む。外部デバイスがメディアを現在再生しているかどうかに基づいて、再生されているメディアを変更するための選択可能なオブジェクトを提供する、又は推奨される(例えば、所定の)アイテムを示す選択可能なオブジェクトを提供するように選択することにより、外部デバイスの現在の状態に関するフィードバックをユーザに提供し、外部デバイス上のメディア再生の状態を変更するために開始することができる動作を示すフィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。制御基準が満たされたときに(例えば、コンピュータシステムが再生メディアであるかどうかを含む所定の条件が満たされるかどうかに関わりなく)、外部デバイスに非メディア関連機能を実行させる第3の選択可能なユーザインタフェースオブジェクトを表示することにより、他の状況下でユーザインタフェースを雑然とさせることなく、外部デバイスに対する追加の制御をユーザに提供する。UIを雑然とさせることなくコンピュータシステムの追加のコントロールを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第2の(又は第1の)選択可能なユーザインタフェースオブジェクトは、表示されると、コンピュータシステムが第1の表示状態(例えば、ロック解除状態(例えば、認証(例えば、パスワード認証、生体認証など)を必要とすることなくコンピュータシステムの機能がアクセス可能である状態)及びロック状態(例えば、コンピュータシステムの少なくともいくつかの機能へのアクセスが認証(例えば、パスワード認証、生体認証など)を必要とする状態)のうちの1つ)で動作しているとの判定に従って、第1の視覚的外観(例えば、1510、1530)で表示される(例えば、ロック状態では、第1の選択可能なオブジェクト(例えば、コントロール(例えば、動作を一時停止又は停止する、現在再生しているメディアから異なるメディアに遷移させる、早送り動作、巻き戻し動作、音量増加又は減少動作))は、第1の視覚的外観の一部分内に(例えば、ウィンドウ表示エリア内に)表示される(例えば、日付及び/又は時間、ロック状態などのインジケーションを含む))(例えば、ロック解除状態では、コントロールは、第1の視覚的外観の全体に表示される)。
いくつかの実施形態では、第2の(又は第1の)選択可能なユーザインタフェースオブジェクトは、表示されると、コンピュータシステムが第1の表示状態とは異なる第2の表示状態(例えば、ロック解除状態(例えば、認証(例えば、パスワード認証、生体認証など)を必要とすることなくコンピュータシステムの機能がアクセス可能である状態)及びロック状態(例えば、コンピュータシステムの機能へのアクセスが認証(例えば、パスワード認証、生体認証など)を必要とする状態)のうちの1つ)で動作しているとの判定に従って、第1の視覚的外観とは異なる第2の視覚的外観(例えば、1560、1570、1580、1590)で表示される(例えば、ロック状態では、第1の選択可能なオブジェクト(例えば、コントロール(例えば、動作を一時停止又は停止する、現在再生しているメディアから異なるメディアに遷移させる、早送り動作、巻き戻し動作、音量増加又は減少動作))は、第2の視覚的外観の一部分内に(例えば、ウィンドウ表示エリア内に)表示される(例えば、日付及び/又は時間、ロック状態などのインジケーションを含む))(例えば、ロック解除状態では、コントロールは、第2の視覚的外観の全体に表示される)。いくつかの実施形態では、コンピュータシステムが第1の表示状態で動作しているとの判定に従って、第2の選択可能なユーザインタフェースオブジェクトは、第3の視覚的外観で表示される。いくつかの実施形態では、コンピュータシステムが第1の表示状態とは異なる第2の表示状態で動作しているとの判定に従って、第1の選択可能なユーザインタフェースオブジェクトは、第4の視覚的外観とは異なる第3の視覚的外観で表示される。所定の条件が満たされると、選択可能なユーザインタフェースオブジェクトを異なるように表示することにより、ユーザが提供されたフィードバックを介して、電子デバイスが動作している状態を素早く認識することを可能にする。改善された視覚的フィードバックをユーザに提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザデバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、表示生成構成要素を介して、外部メディア再生デバイスにおけるメディア再生を制御する(例えば、動作を一時停止又は停止する、現在再生しているメディアから異なるメディアに遷移させる動作、早送り動作、巻き戻し動作、音量増加又は減少動作)ためのユーザインタフェース(例えば、1510、1530)を表示している間に、コンピュータシステムは、コンピュータシステムが第1の位置(例えば、1502c)(例えば、建物(例えば、ホーム)内のエリア、部屋)から第2の位置(例えば、1502f)(例えば、建物(例えば、ホーム)内のエリア、部屋)に移動したというインジケーション(例えば、内部で生成されたインジケーション、外部で生成されたインジケーション)を受信する。いくつかの実施形態では、インジケーションは、外部メディア再生デバイスから(例えば、有線又は無線接続を介して)コンピュータシステムの構成要素から直接受信される。いくつかの実施形態では、データは、中間サーバを介して受信される。いくつかの実施形態では、コンピュータシステムが第1のエリア(例えば、1202d)から第2のエリア(例えば、1202b)(例えば、建物(例えば、ホーム)内の部屋)に移動したというインジケーションを受信したことに応じて、コンピュータシステムは、外部再生デバイスにおけるメディア再生を制御するためのユーザインタフェース(例えば、1510、1530)を変更する(例えば、コンピュータシステムの動作を制御する(例えば、動作を一時停止又は停止する、現在再生しているメディアから異なるメディアへの遷移、早送り動作、巻き戻し動作、音量増加又は減少動作)ように変更される)(例えば、デフォルトユーザインタフェース(例えば、動作を制御するためのデフォルトユーザインタフェースオブジェクトを有する)に変更される)。いくつかの実施形態では、ユーザインタフェースの変更は、別の外部再生デバイスを制御するようにユーザインタフェースを変更することを含む。所定の条件が満たされたときに、外部デバイスにおけるメディア再生を制御するためのユーザインタフェースを自動的に変更することにより、コンピュータシステムの位置に基づいて変化するユーザインタフェースを提供し、利用可能な選択可能なユーザインタフェースオブジェクトが様々な外部デバイスにどのように影響を及ぼすかをユーザが見ることを可能にする。更なるユーザ入力を必要とせずに1組の状態が満たされた場合に最適化された動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。いくつかの実施形態では、メディア再生動作を変更することは、再生動作の速度を変えること(例えば、早送り)(例えば、1520、1524)、メディアの再生を一時停止すること(例えば、1522)、メディアの再生を巻き戻すこと(例えば、1520)、及びメディアの再生の音量を変更すること(例えば、1526)からなる群から選択される変更を含む。
いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、コンピュータシステムと外部メディア再生デバイスとの間の距離(例えば、1504a~1504d、1504f)が閾値距離(例えば、所定の閾値距離(例えば、1、2、5、10、20フィート))を下回るときに満たされる基準を含む。外部デバイスとコンピュータシステムとの間の距離に基づいて、外部デバイスを制御するための選択可能なユーザインタフェースオブジェクトを有するユーザインタフェースを表示することにより、近接基準を満たすユーザのみに選択可能なユーザインタフェースを提示すること可能にすることによって、コンピュータシステムのセキュリティを強化する。改善されたセキュリティを提供することにより、ユーザインタフェースをより安全にし、許可されていない入力を低減し、加えて、ユーザがコンピュータシステムをより安全かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、外部メディア再生デバイスにおけるメディアの再生を開始する音声コマンド(例えば、再生して)がコンピュータシステムで受信されるときに満たされる基準を含む。いくつかの実施形態では、コンピュータシステムは、(例えば、1つ以上の音声認識技術を介して)特定のユーザによって発行されたものとして音声コマンドを識別する。所定の条件が満たされた(例えば、ユーザの音声が検出された、この音声は外部デバイスが機能を実行するためのコマンドに対応する)ときに、外部デバイスを制御するための選択可能なユーザインタフェースオブジェクトを有するユーザインタフェースを表示することにより、特定の基準を満たすユーザのみに選択可能なユーザインタフェースオブジェクトを自動的に提示することを可能にすることによって、コンピュータシステムのセキュリティを強化する。改善されたセキュリティを提供することにより、ユーザインタフェースをより安全にし、許可されていない入力を低減し、加えて、ユーザがコンピュータシステムをより安全かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、外部メディア再生デバイスが第1のタイプ(例えば、ヘッドホン)であるとの判定がなされるときに満たされる基準を含む。いくつかの実施形態では、第1のタイプの外部メディア再生デバイスは、コンピュータシステムに接続される前に、別のデバイスと接続及び/又はペアリングされていない。第1のタイプのデバイスが接続されると、外部デバイスを制御するための選択可能なユーザインタフェースオブジェクトを有するユーザインタフェースを自動的に表示することにより、更なる入力を必要とせずに、最適化された制御オプションをユーザに提供する。更なるユーザ入力を必要とせずに1組の状態が満たされた場合に最適化された動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、外部メディア再生デバイスがメディアを現在再生しており、かつコンピュータシステム及び外部メディア再生デバイスが同じアカウント(例えば、メディアプロバイダアカウント、モバイルデバイスのアカウント、メディアストレージアカウントなど)に現在ログインしているときに満たされる基準を含む。コンピュータシステムが外部デバイスと同じアカウントにログインしているときに、外部デバイスを制御するための選択可能なユーザインタフェースオブジェクトを有するユーザインタフェースを表示することにより、特定の基準を満たすユーザのみに選択可能なユーザインタフェースオブジェクトを自動的に提示すること可能にすることによって、コンピュータシステムのセキュリティを強化する。改善されたセキュリティを提供することにより、ユーザインタフェースをより安全にし、許可されていない入力を低減し、加えて、ユーザがコンピュータシステムをより安全かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、外部メディア再生デバイス制御基準のセットは、コンピュータシステム及び外部メディア再生デバイスが同じ位置(例えば、エリア、同じ部屋内、既定の境界又は周辺部など)内にあり、かつコンピュータシステム及び外部メディア再生デバイスが同じアカウント(例えば、メディアプロバイダアカウント、モバイルデバイスのアカウント、メディアストレージアカウントなど)に現在ログインしているとの判定がなされるときに満たされる基準を含む。コンピュータシステムが、外部デバイスが位置しているのと同じエリア(例えば、部屋)内にあり、かつ外部デバイスと同じアカウントにログインしているときに、外部デバイスを制御するための選択可能なユーザインタフェースオブジェクトを有するユーザインタフェースを表示することにより、近接基準を満たすユーザのみに選択可能なユーザインタフェースを自動的に提示すること可能にすることによって、コンピュータシステムのセキュリティを強化する。改善されたセキュリティを提供することにより、ユーザインタフェースをより安全にし、許可されていない入力を低減し、加えて、ユーザがコンピュータシステムをより安全かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトは、第1の所定のメディアアイテムのソース(例えば、1532a1、1532c1)(例えば、ソースデバイス(例えば、パーソナルデバイス、サードパーティアプリケーション、メディアプロバイダなど)及び/又はソースアプリケーション)のインジケーションを含む。いくつかの実施形態では、所定のメディアアイテムは、複数のソースからのメディアアイテムを含み、ソースを表すインジケーションは、メディアアイテムの少なくとも1つのメディアアイテムの対応するソースを示す。所定のメディアアイテムのソースのインジケーションを表示することにより、ユーザが推奨メディアアイテムを提供しているソース(例えば、アプリケーション又はデバイス)を素早く認識することを可能にするフィードバックをユーザに提供する(例えば、これにより、ユーザが推奨メディアアイテムを変更する方法を理解するのに役立つ)。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1の所定のメディアアイテム(例えば、1532a)は、複数のメディアアイテムを含むプレイリスト(例えば、所定のプレイリスト)である。プレイリストである所定のメディアアイテムを表示することにより、過度の入力を必要とせずに、所定のメディアアイテムに関連付けられた複数のメディアアイテムをユーザが迅速に選択又は再生することを可能にする。制御オプションを最適化し、過度の入力を低減することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトを表示している間に、コンピュータシステムは、ジェスチャ(例えば、第1の方向(例えば、水平又は垂直)の第1のタイプのジェスチャ(例えば、スワイプ)(例えば、表示生成構成要素の第1の位置に対応する位置で開始されるジェスチャ)を受け取る。いくつかの実施形態では、ジェスチャ(例えば、1550f、1550g)を受け取ったことに応じて、かつジェスチャ(例えば、1550f)が第1の方向(例えば、水平)であるとの判定に従って、コンピュータシステムは、選択されると、外部メディア再生デバイスに第1の所定のメディアアイテム及び第2の所定のメディアアイテムとは異なる第3の所定のメディアアイテムの再生を開始させる(例えば、第3の推奨メディアアイテムを表示させる)、第3の選択可能なユーザインタフェースオブジェクト(例えば、1532g、1532h)を表示する。いくつかの実施形態では、ジェスチャ(例えば、1550f、1550g)を受け取ったことに応じて、かつジェスチャ(例えば、1550g)が第1の方向とは異なる第2の方向であるとの判定に従って、コンピュータシステムは、選択されると、外部メディア再生デバイスに非メディア関連機能(例えば、外部メディア再生デバイスにメディア再生を開始させることを含まない機能)を実行させる、第4の選択可能なユーザインタフェースオブジェクト(例えば、1534a、1534b)を表示する。いくつかの実施形態では、非メディア関連機能は、タイマー機能又はアラーム機能である。いくつかの実施形態では、第1の方向は、第2の方向に対して垂直である。いくつかの実施形態では、第1の方向は、第2の方向の反対ではない。いくつかの実施形態では、第4の選択可能なユーザインタフェースオブジェクト(例えば、タイマー)を表示することは、第2の選択可能なユーザインタフェースオブジェクトを表示することを停止することを含む。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトを表示することは、第2の選択可能なユーザインタフェースオブジェクトを表示することを停止することを含む。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトを表示している間に、第2のジェスチャを受け取り、第2のジェスチャを受け取ったことに応じて、かつ第2のジェスチャが第1の方向であるとの判定に従って、推奨コンテンツの表示を取り止め、かつ/又は表示若しくはユーザインタフェースを維持し(例えば、追加のコンテンツを表示しない、又はジェスチャを受け取る前に以前に表示されていた視覚コンテンツの表示を維持する)、第2のジェスチャが第2の方向であるとの判定に従って、第4の選択可能なユーザインタフェースオブジェクトを表示する。異なる方向性ジェスチャに基づいて異なるタイプの選択可能なユーザインタフェースオブジェクトを表示することにより、ユーザインタフェースを雑然とさせることなく、より多くの制御オプションをユーザに提供する。表示される追加コントローラによってUIを雑然とさせることなく、追加制御できるようにすることにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースは、1つ以上の入力デバイスを介して選択されると、外部メディア再生デバイスに非メディア関連機能を実行させる、第3の選択可能なユーザインタフェースオブジェクト(例えば、1534a、1534b)を含む。いくつかの実施形態では、非メディア関連機能は、タイマー機能又はアラーム機能である。いくつかの実施形態では、メディア再生動作は、第1のアプリケーション(例えば、メディア再生アプリケーション)によって実行され、非メディア関連機能は、外部メディア再生デバイスの第2のアプリケーションによって実行される。
いくつかの実施形態では、別のコンピュータシステム(例えば、スマートフォン、スマートウォッチ)が外部メディア再生デバイスに接続され、かつ外部メディア再生デバイスにメディア再生動作制御動作を変更させるように有効にされているとの判定に従って、コンピュータシステム及び別のコンピュータシステムが同じアカウント(例えば、メディアプロバイダアカウント、モバイルデバイスのアカウント、メディアストレージアカウントなど)にログインしているとの判定がなされたときに、別のコンピュータシステムのインジケーションを表示する。
いくつかの実施形態では、(例えば、コンピュータシステムのマイクロフォンを介した)音声入力が検出され、かつ音声入力がコンピュータシステムに関連付けられたユーザに対応すると判定されると、音声入力は、ユーザによって外部メディアデバイスを制御するためのものである、又は更にそのために提供されている。いくつかの実施形態では、コンピュータシステムに関連付けられたユーザは、また外部メディアデバイスを制御するために音声入力を提供した同じユーザであり、選択されると、別のコンピュータシステムに外部再生デバイスのメディア再生動作を変更させる、選択可能なユーザインタフェースオブジェクトを表示することを取り止めるように別のコンピュータシステムに命令が送信される。いくつかの実施形態では、別のコンピュータシステムは、外部再生メディアデバイスと同じエリア内(例えば、同じ部屋、既定の境界又は周辺部内など)にある。
いくつかの実施形態では、外部メディア再生デバイスの現在のメディア(例えば、オーディオ及び/又は視覚メディア)の再生状態(例えば、オーディオメディア又は視覚メディアを出力する状態)を示すデータは、現在のメディアの現在の再生時間のインジケーションを含み、再生しているメディアの残りの時間を提供するためのユーザインタフェースオブジェクトは、現在の再生時間のインジケーションに基づいて現在の再生状態を示すように更新される。
いくつかの実施形態では、外部メディア再生デバイスにおけるメディア再生を制御するためのユーザインタフェースは、外部メディア再生デバイスに関連付けられた識別子(例えば、外部メディア再生デバイスを表す名前、ラベル、シンボル(例えば、「スピーカ」)、及び/又は外部メディアデバイスの位置(例えば、「キッチン」))を含む。
いくつかの実施形態では、所定のメディアアイテムは、コンピュータシステム(例えば、スマートフォン、スマートウォッチ)上で再生しているメディアアイテム(例えば、オーディオ及び/又は視覚メディア)に対応し、メディアアイテムを表すインジケーション(例えば、画像)を含む。いくつかの実施形態では、所定のメディアアイテムの各メディアアイテムに対して、ソースのインジケーション(例えば、画像)(例えば、ソースデバイス(例えば、パーソナルデバイス、サードパーティアプリケーション、メディアプロバイダなど)、及び/又はソースアプリケーション)を表示する。
方法1600に関して上述したプロセス(例えば、図16)の詳細はまた、上述した方法にも類似の方式で適用可能であることに留意されたい。例えば、方法800は、方法1600を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法800の動作806は、方法1600の動作1608に記載された第1のメディア情報アフォーダンスを選択するために実行することができ、動作808、810、及び/又は812は、選択に応じて、方法1600の一部として実行することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図17A~図17Pは、いくつかの実施形態に係る、デバイスのグループ上のオーディオ再生を制御するためのコントロールを管理するための例示的なユーザインタフェースを示す。いくつかの実施形態では、図17A~図17Pを参照して以下に説明するユーザインタフェースは、電子デバイス600がデバイスの新しいグループを作成し、デバイスの新しいグループ上のメディアの再生を制御するためのユーザインタフェース要素を提供することを可能にする。これらの図におけるユーザインタフェースは、図18及び図23に示すプロセスを含む、後述するプロセスを例示するために使用される。
図17Aは、ユーザインタフェース1700を表示するデバイス600を示す。ユーザインタフェース1700は、デバイス600上で実行されている音楽アプリケーションのユーザインタフェースである。ユーザインタフェース1700は、メディア出力制御アフォーダンス1702及びグラフィカル要素1704aを含む。グラフィカル要素1704aは、メディア表現1706に対応するメディア(例えば、「アーティスト1」による「トラック1」)がデバイス600(例えば、「電話機」)上で、及び/又はデバイス600に物理的に接続された1つ以上のスピーカを介して、現在再生されていることを示す。いくつかの実施形態では、ユーザインタフェース1700は、1つ以上の構成要素と共に、又は(例えば、図6F及び図6Iで)上述したような1つ以上の技術を使用して、表示される。例えば、いくつかの実施形態では、デバイス600は、グラフィカル要素614-2に関して上述したように、1つ以上の技術を使用してグラフィカル要素1704aを表示する。図17Aでは、デバイス600は、メディア出力制御アフォーダンス1702上のタップジェスチャ1750aを検出する(例えば、又はメディア出力制御アフォーダンス1702の選択に対応する位置でのジェスチャを検出する)。図17Bに示すように、タップジェスチャ1750aを検出したことに応じて、デバイス600は、ユーザインタフェース1700の一部分の上にメディア出力制御オーバーレイ1710を表示する。いくつかの実施形態では、タップジェスチャ1750aを検出したことに応じて、デバイス600は、ユーザインタフェース1700を表示することを停止する。いくつかの実施形態では、タップジェスチャ1750aを検出したことに応じて、メディア出力制御オーバーレイ1710は、デバイス600のディスプレイの大部分を占める。
図17Bに示すように、メディア出力制御オーバーレイ1710は、選択インジケータ1712a(例えば、図17Bのチェックマーク)と共に表示される、電話出力アフォーダンス1712を含む。電話出力アフォーダンス1712は、メディアがデバイス600を介して再生される(及び/又は制御される)ように現在構成されていることを示すために、選択インジケータ1712aと共に表示される。図17Bでは、メディアがデバイス600を介して再生されるように現在構成されているというインジケーションはまた、(例えば、図17Aに関して上述したように)グラフィカル要素1704aによっても示される。いくつかの実施形態では、デバイスがメディアを再生するように現在構成されているとき、デバイスは、メディアを現在出力している。
メディア出力制御オーバーレイ1710はまた、ヘッドホン出力アフォーダンス1714、キッチン出力アフォーダンス1716、ダイニングルーム出力アフォーダンス1718、及びリビングルーム出力アフォーダンス1720などの、1つ以上の外部デバイス上のメディアの出力を制御するための追加のアフォーダンスを任意選択的に含む。図17Bに示すように、メディアの出力を制御するためのこれらの追加の出力アフォーダンスは、これらの追加のアフォーダンスのそれぞれに対応するそれぞれのデバイスを介して再生されるようにメディアが現在構成されていないため、任意の選択インジケータと共に表示されない。ここで、これらの追加のアフォーダンスのそれぞれに対応する外部デバイスについては、前述した。例えば、キッチン出力アフォーダンス1716が選択インジケータと共に表示されているとき、メディアは、キッチンスピーカ1206を介して再生される又は制御されるように構成されており、ダイニングルーム出力アフォーダンス1718が選択インジケータと共に表示されているとき、メディアは、ダイニングルームスピーカ1216を介して再生される又は制御されるように構成されており、リビングルーム出力アフォーダンス1720が選択インジケータと共に表示されているとき、メディアは、リビングルームテレビ1244を介して再生される又は制御されるように構成されている。いくつかの実施形態では、出力アフォーダンスは、複数の外部デバイスに対応することができる。例えば、いくつかの実施形態では、リビングルーム出力アフォーダンス1720が選択インジケータと共に表示されているとき、メディアは、リビングルームテレビ1244、リビングルームスピーカ1246、及びリビングルームスピーカ1248を介して再生される又は制御されるように構成されている。
いくつかの実施形態では、寝室1202c内のスピーカ(例えば、寝室スピーカ1236)及び/又はサンルーム1202e内のスピーカ(例えば、サンルームスピーカ1256及びサンルームスピーカ1258)を介してメディアの出力を制御するためのアフォーダンスなどの、メディアの出力を制御するための1つ以上の他のアフォーダンスが、メディア出力制御オーバーレイ1710に含まれる。いくつかの実施形態では、デバイス600は、メディア出力制御アフォーダンス1702上の別のタップジェスチャを検出したことに応じて、ユーザインタフェース1710を表示することを停止する(例えば、図17Aに示すように、ユーザインタフェース1700を表示する)。図17Bでは、デバイス600は、キッチン出力アフォーダンス1716の一部分上のタップジェスチャ1750bを検出する。
図17Cでは、タップジェスチャ1750bを検出したことに応じて、デバイス600は、メディア(例えば、図17Aのメディア表現1706に対応するメディア)の再生を開始する命令をキッチンスピーカ1206に送信する。いくつかの実施形態では、メディアの再生を開始する命令をデバイスに送信することは、デバイスを介して再生される又は制御されるようにメディアを構成することの一部である。
図17Cに示すように、デバイス600はまた、タップジェスチャ1750bを検出したことに応じて、キッチン出力アフォーダンス1716を更新して、選択インジケータ1716aを含む。ここで、選択インジケータ1716aは、キッチンスピーカ1206がメディア(例えば、メディアは、図17Aのメディア表現1706に対応するメディア)を再生する、及び/又はメディアを制御するように現在構成されていることを示す。加えて、キッチンスピーカ1206がメディアを再生する及び/又はメディアを制御するように現在構成されているため、デバイス600は、グラフィカル要素1704a(例えば、電話機がメディアを再生するように構成されていることを示していたグラフィカル)をグラフィカル要素1704b(例えば、「キッチン」)と置き換えて、メディアがキッチン1202aに関連付けられたデバイス(例えば、キッチンスピーカ1206)を介して再生される又は制御されるように現在構成されていることを示す。更に、図17Cでは、デバイス600は、デバイス600がデバイス600に物理的に接続された1つ以上のスピーカではメディアをもはや出力していない(又は出力するように構成されていない)ため、グラフィカル要素1704aを表示することを停止する。図17Cでは、デバイス600は、(例えば、キッチン出力アフォーダンス1716の)選択インジケータ1716aが表示されている間に、ダイニングルーム出力アフォーダンス1718の一部分上のタップジェスチャ1750cを検出する。
図17Dでは、タップジェスチャ1750cを検出したことに応じて、デバイス600は、メディア(例えば、図17Aのメディア表現1706に対応するメディア)の再生を開始する命令をダイニングルームスピーカ1216に送信し、それにより、命令を受信した後に、ダイニングルームスピーカ1216は、メディアを再生するように構成される。図17Cに示すように、デバイス600はまた、タップジェスチャ1750cを検出したことに応じて、ダイニングルーム出力アフォーダンス1718を更新して、選択インジケータ1718aを含む。ここで、選択インジケータ1718aは、ダイニングルームスピーカ1216がメディアを再生する、及び/又はメディアを制御するように現在構成されていることを示す。ダイニングルーム出力アフォーダンス1718が選択インジケータ1718aを含むことに加えて、キッチン出力アフォーダンス1716は、選択インジケータ1716aを含み続ける。したがって、タップジェスチャ1750dを検出したことに応じて、デバイス600は、キッチンスピーカ及びダイニングルームスピーカから一時的なグループを作成し、グラフィカル要素1704b(例えば、「キッチン」)をグラフィカル要素1704c(例えば、「キッチン及びダイニングルーム」)と置き換える。グラフィカル要素1704cは、キッチン1202aに関連付けられた1つ以上のデバイス及びリビングルーム1202に関連付けられた1つ以上のデバイスによって再生される、又は制御されるようにメディアが現在構成されていることを示し、デバイスの一時的なグループ化を生成する。
図17B~図17Cに戻って見ると、(例えば、タップジェスチャ1750bを検出したことに応じて)デバイス600がメディアを再生するように構成されることを停止していた間に、キッチンスピーカ1206は、メディアを再生するように構成されていた。しかしながら、図17C~図17Dでは、(例えば、タップジェスチャ1750cを検出したことに応じて)キッチンスピーカ1206及びリビングルームスピーカ1216の両方が、メディアを再生するように構成されている。したがって、この例では、デバイス600は、メディアが同時に複数のデバイス上で再生される(又はそれによって制御される)ことを可能にし(例えば、メディアアウト制御オーバーレイ1710上の1つ以上の入力を介して)、家1202の部屋に割り当てられたデバイスの第1のグループ、及び家1202の異なる部屋に割り当てられたデバイスの第2のグループなどのデバイスの一時的なグループ化を生成する。一時的なグループは、選択されるとメディアを受信するためのデバイスのユーザ作成グループであり、ユーザ又はデバイスが個々にデバイスのそれぞれにメディアを送信するように選択する必要なしに、同じメディアを同時に再生することができる。いくつかの実施形態では、図17Dで電話出力アフォーダンス1712上のタップジェスチャを検出したことに応じて、デバイス600は、選択インジケータ1716a及び1718aを表示することを停止し、(例えば、図17Bに示すように)選択インジケータ1712aを表示し、キッチン及びダイニングルームスピーカがメディアを再生するように構成されることを停止している間に、メディアを出力する。図17Dでは、デバイス600は、選択インジケータ1716a及び1718aが同時に表示された後の所定の期間(例えば、5秒、10秒、30秒)内にキッチン出力アフォーダンス1716の一部分上のタップジェスチャ1750dを検出する。
図17Eでは、タップジェスチャ1750dを検出したことに応じて、デバイス600は、メディアの再生を停止する命令をキッチンルームスピーカ1206に送信し、それにより、命令を受信した後に、キッチンルームスピーカ1206は、メディアを再生するように構成されない。図17Eに示すように、タップジェスチャ1750dを検出したことに応じて、デバイス600は、選択インジケータ1716aを表示することを停止する。タップジェスチャ1750dを検出したことに応じて、デバイス600はまた、グラフィカル要素1704c(例えば、「キッチン及びダイニングルーム」)をグラフィカル要素1704d(例えば、「ダイニングルーム」)と置き換え、ダイニングルームスピーカ1216がメディアを再生するように構成されており、かつキッチンスピーカ1206がメディアを再生するようにもはや構成されていないことを示す。
図17F~図17Hは、2つの(又はそれよりも多い)選択インジケータが同時に表示された後(かつ/又はデバイスの2つの(又はそれよりも多い)一時的なグループ化がメディアを再生するように同時に構成された後)の所定の期間内にタップジェスチャが検出されないシナリオを示す。図17Eでは、デバイス600は、キッチン出力アフォーダンス1716の一部分上のタップジェスチャ1750eを検出する。
図17Fでは、タップジェスチャ1750eを検出したことに応じて、デバイス600は、(例えば、図17Dに関連して)上述した技術と類似の1つ以上の技術を実行する。したがって、図17Fに示すように、キッチン出力アフォーダンス1716は、選択インジケータ1716aと共に表示され、ダイニングルーム出力アフォーダンス1718は、選択インジケータ1718aと共に表示される。加えて、図17Fでは、キッチンスピーカ1206及びダイニングルームスピーカ1216は、グラフィカル要素1704cによって示されるように、メディアを再生するように構成されている。
図17Gでは、デバイス600は、選択インジケータが同時に表示された後の所定の期間(例えば、5秒、10秒、30秒)内に(例えば、図17Fのアフォーダンス1712、1714、1716、1718、1720の任意の部分上の)タップジェスチャを検出しない。図17Gに示すように、デバイス600は、合体する及び/又はマージするキッチン出力アフォーダンス1716及びダイニングルーム出力アフォーダンス1718のアニメーションを表示して、キッチン及びダイニングルーム内のデバイス間の一時的なグループ化を生成する単一の出力アフォーダンスを形成する。デバイス600は所定の期間が経過する前にタップジェスチャを検出しなかったため、グループ化は、持続する。アニメーションを表示するときに、デバイス600は、キッチン出力アフォーダンス1716とダイニングルーム出力アフォーダンス1718との間の境界を表示することを停止し、キッチン出力アフォーダンス1716及びダイニングルーム出力アフォーダンス1718を一緒にまとめる(又は移動する)。更に、デバイス600はまた、グラフィックアイコン(例えば、図17Gのスピーカアイコン)を一緒にマージする。
図17Hに示すように、デバイス600は、選択インジケータ1722aを含むキッチン及びダイニングルーム出力アフォーダンス1722を表示する。キッチン及びダイニングルーム出力アフォーダンス1722は、キッチン出力アフォーダンス1716及びダイニングルーム出力アフォーダンス1718が図17Gに関して上述したアニメーションを介して合体して、キッチン及びダイニングルームからのデバイスの一時的なグループを作成することの結果である。図17Hに示すように、キッチン及びダイニングルーム出力1722は、キッチン出力アフォーダンス1716に関連付けられた識別子(図17Fの「キッチン」)とダイニングルーム出力アフォーダンス1718に関連付けられた識別子(図17Fの「ダイニングルーム」)との組み合わせである識別子(「キッチン及びダイニングルーム」)を含む。加えて、キッチン及びダイニングルーム出力アフォーダンス1722はまた、キッチン及びダイニングルーム出力アフォーダンス1722の一部分の選択に応じて、メディアを再生するように構成又は構成解除することができるスピーカの数(「2つのスピーカ」)も含む。いくつかの実施形態では、スピーカの数は、スピーカデバイスの数(例えば、異なる部屋に割り当てられたスピーカの数)を識別する。いくつかの実施形態では、スピーカの数は、合体されたスピーカグループ内のスピーカの総数を識別する。いくつかの実施形態では、デバイス600は、図17Gで合体アニメーションを表示せず、アニメーションを伴わずになど異なる方法で、キッチン出力アフォーダンス1716及びダイニングルーム出力アフォーダンス1718を置き換えるキッチン及びダイニングルーム出力アフォーダンス1722を表示する。いくつかの実施形態では、デバイス600は、タップジェスチャ1750eを検出した直後に、選択インジケータ1722aを含むキッチン及びダイニングルーム出力アフォーダンス1722を表示する。いくつかの実施形態では、デバイス600は、タップジェスチャ1750eを検出した直後、かつメディア出力制御オーバーレイ1710を出て再表示した直後に、選択インジケータ1722aを含むキッチン及びダイニングルーム出力アフォーダンス1722を表示する。換言すれば、メディア出力制御オーバーレイ1710は、少なくとも2つの出力アフォーダンスが新たな出力アフォーダンスに合体されるために、タップジェスチャ1750eを検出した後に表示される必要はない。いくつかの実施形態では、デバイス600は、少なくとも2つの出力アフォーダンスを一緒に合体する前又は後に、(例えば、1つ以上のジェスチャを介して)確認を受信する。いくつかの実施形態では、(例えば、合体させないための)否定確認を受信したことに応じて、デバイス600は、少なくとも2つの出力アフォーダンスを別個であるものとして表示し続ける(かつ/又は再表示する)。いくつかの実施形態では、(例えば、合体させるための)肯定確認を受信したことに応じて、合体されたグループは、表示されたままであり、かつ/又は表示される。
図17Hに示すように、キッチン及びダイニングルーム出力アフォーダンス1722はまた、拡張アフォーダンス1722bも含む。図17Hでは、拡張アフォーダンス1722bは、選択インジケータ1722aが表示された部分(例えば、右部分)とは、キッチン及びダイニングルーム出力アフォーダンス1722の異なる部分(例えば、左部分)上に表示されている。加えて、拡張アフォーダンスは、合体された出力アフォーダンス(例えば、出力アフォーダンス1722)上にのみ表示され、合体されていない出力アフォーダンス(例えば、出力アフォーダンス1720)上に表示されない。
図17Hに示すように、キッチンスピーカ1206及びダイニングルームスピーカ1216は、グラフィカル要素1704c(例えば、「キッチン及びダイニングルーム」)によって示されるように、メディアを再生するように構成されたままである。いくつかの実施形態では、デバイス600は、選択インジケータ1722a(例えば、キッチン及びダイニングルーム出力アフォーダンス1722の右部分)上のタップジェスチャ1750h1を検出する。いくつかの実施形態では、タップジェスチャ1750h1を検出したことに応じて、デバイス600は、(1)選択インジケータ1722及びグラフィカル要素1704cを表示することを停止し、(2)キッチンスピーカ1206及びダイニングルームスピーカ1216にメディア(例えば、図17Aのメディア表現1706に対応するメディア)の再生を停止する命令を送信し、それにより、キッチンスピーカ1206及びダイニングルームスピーカ1216は、命令を受信した後に、メディアを再生するように構成されない。いくつかの実施形態では、(1)選択インジケータ1722a及びグラフィカル要素1704cを表示することを停止した後に、かつ/又は(2)キッチンスピーカ1206及びダイニングルームスピーカ1216に命令を送信した後に、デバイス600は、キッチン及びダイニングルーム出力アフォーダンス1722を表示し続け、キッチン及びリビングルームのための別個の出力アフォーダンスを再表示しない。いくつかの実施形態では、デバイス600は、(例えば、選択インジケータ1722a上の)ジェスチャが所定の期間の間に検出されたかどうかに関わりなく、キッチン及びダイニングルーム出力アフォーダンス1722を表示し続ける。換言すれば、キッチンスピーカ1206及びダイニングルームスピーカ1216は、メディアを再生するようにもはや構成されていないが、キッチン及びダイニングルーム出力アフォーダンス1722は、表示され続ける。いくつかの実施形態では、デバイス600は、選択インジケータ1722aが表示されていない間にタップジェスチャを受け取ったことに応じて、キッチンスピーカ1206及びダイニングルームスピーカ1216にメディアを再生する命令を送信する。図17Hでは、デバイス600は、選択インジケータ1722aが表示されている間に、リビングルーム出力アフォーダンス1720の一部分上のタップジェスチャ1750h2を検出する。
図17Iに示すように、タップジェスチャ1750h2を検出したことに応じて、(例えば、図17G~図17Hに関連して上述したのと同様の技術を使用して)所定の期間内に(例えば、選択インジケータ上の)後続のジェスチャが検出されなかったため、デバイス600は、キッチン及びダイニングルーム出力アフォーダンス1722、並びにリビングルーム出力アフォーダンス1720を合体して、キッチン-ダイニング-リビングルーム出力アフォーダンス1724を表示する。図17Iに示すように、キッチン-ダイニング-リビングルーム出力アフォーダンス1724は、キッチン出力アフォーダンス1716の識別子(「キッチン」)と、ダイニングルーム出力アフォーダンス1718(例えば、「2」のうちの1つ)と、リビングルーム出力アフォーダンス1720(例えば、「2」のうちの1つ)との組み合わせである識別子(「キッチン+2」)を含む。加えて、キッチン-ダイニング-リビングルーム出力アフォーダンス1724は、アフォーダンスが選択されるとメディアを再生するように構成されたデバイスの数のインジケーション(例えば、「3つのスピーカ」)を含む。
図17Hに示すように、タップジェスチャ1750h2を検出したことに応じて、デバイス600はまた、テレビ1244に命令を送信し、それによりテレビ1244は、メディアを再生するように構成される。したがって、テレビ1244に命令を送信した後に、キッチン1202aに割り当てられたデバイス、ダイニングルーム1202bに割り当てられたデバイス、及びリビングルーム1202dに割り当てられたデバイスは、メディアを再生するように構成される。この指定は、図17Iで表示されているグラフィカル要素1704e(例えば、「キッチン+2」)によって反映される。
いくつかの実施形態では、デバイス600は、(例えば、図17G~図17Hで)上述したような1つ以上の技術を使用して、キッチン-ダイニング-リビングルーム出力アフォーダンス1724を表示する。いくつかの実施形態では、デバイス600は、選択インジケータ1724b(例えば、キッチン及びダイニングルーム出力アフォーダンス1724の右部分)上のタップジェスチャ1750i1を検出する。いくつかの実施形態では、タップジェスチャ1750i1を検出したことに応じて、デバイス600は、(1)選択インジケータ1724b及びグラフィカル要素1704eを表示することを停止し、(2)キッチンスピーカ1206、ダイニングルームスピーカ1216、テレビ1244にメディア(例えば、図17Aのメディア表現1706に対応するメディア)の再生を停止する命令を送信し、それにより、キッチンスピーカ1206、ダイニングルームスピーカ1216、テレビ1244は、命令を受信した後に、メディアを再生するように構成されない。いくつかの実施形態では、デバイス600は、タップジェスチャ1750i1又はタップジェスチャ1750i1に続くジェスチャを検出したことに応じて、(例えば、デバイス600がタップジェスチャ1750h1又はタップジェスチャ1750h1に続くジェスチャを検出することに関連して)上述した技術と同様の技術を使用する。
図17Iに示すように、キッチン-ダイニング-リビングルーム出力アフォーダンス1724はまた、(例えば、拡張アフォーダンス1722bに関連して)上述した技術と同様の技術を使用して表示される拡張アフォーダンス1724bも含む。図17Iでは、デバイス600は、拡張アフォーダンス1724b上のタップジェスチャ1724i2を検出する。
図17Jに示すように、タップジェスチャ1724i2を検出したことに応じて、デバイス600は、キッチン-ダイニング-リビングルーム出力アフォーダンス1724を作成するために合体されていた個々の出力アフォーダンスを表示することによって、キッチン-ダイニング-リビングルーム出力アフォーダンス1724を拡張する。したがって、図17Jでは、キッチン出力アフォーダンス1716、ダイニングルーム出力アフォーダンス1718、及びリビングルーム出力アフォーダンス1720は、キッチン-ダイニング-リビングルーム出力アフォーダンス1724の間に表示される。いくつかの実施形態では、図17Jでは、キッチン-ダイニング-リビングルーム出力アフォーダンス1724を構成する個々の出力アフォーダンスが表示されているときに、キッチン-ダイニング-リビングルーム出力アフォーダンス1724は、表示されたままである。
特に、図17Jに示すように、キッチン出力アフォーダンス1716、ダイニングルーム出力アフォーダンス1718、及びリビングルーム出力アフォーダンス1720は、選択インジケータ1716a、1718a、及び1720aそれぞれと共に表示される。したがって、メディアは、表示され続けているグラフィカル要素1704e(「キッチン+2」)によっても表されているように、キッチンスピーカ1206、ダイニングルームスピーカ1216、及びテレビ1244を介して再生される又は制御されるように現在構成されている。図17Jでは、デバイス600は、選択インジケータ1718a上のタップジェスチャ1750jを検出する。
図17Kに示すように、図17Jでタップジェスチャ1750jを検出したことに応じて、デバイス600は、選択インジケーション1718aを表示することを停止し、タップジェスチャを介して選択されなかったため、他の選択インジケータの表示を維持する。加えて、タップジェスチャ1750jを検出したことに応じて、デバイス600は、メディアの再生を停止する命令をダイニングルームスピーカ1216に送信し、それにより、ダイニングルームスピーカ1216は、表示されているグラフィカル要素1704f(例えば、「キッチン及びリビングルーム」)によっても表されるように、命令を受信した後に、メディアを再生するように構成されない。
図17Lでは、デバイス600は、タップジェスチャ1750jを検出した後の所定の期間(例えば、5秒、10秒、30秒)内に(例えば、図17Fのアフォーダンス1712、1714、1716、1718、1720の任意の部分上の)タップジェスチャを検出しない。図17Lに示すように、デバイス600は、上述した技術と類似の1つ以上の技術を使用して、キッチン出力アフォーダンス1716及びリビングルーム出力アフォーダンス1720を合体して、キッチン及びリビングルーム出力アフォーダンス1726を表示する。特に、図17Lに示すように、タップジェスチャ1750jを検出したことに応じて、デバイス600が合体されたグループ(例えば、キッチン-ダイニング-リビングルーム出力アフォーダンス1724)からダイニングルームアフォーダンス1718(及び/又はダイニングルームスピーカ1216)を効果的に除去したため、ダイニングルームアフォーダンス1718は、キッチン及びリビングルーム出力アフォーダンス1726とは別個に表示される。
図17Mは、ユーザインタフェース1700及びメディア出力制御オーバーレイ1710の代わりに表示することができる代替ユーザインタフェースである、ユーザインタフェース1760を表示するデバイス600を示す。デバイス600は、1つ以上の構成要素と共に、及び/又はメディア出力制御オーバーレイ1710に関して上述したような1つ以上の技術を使用して、ユーザインタフェース1760を表示する。例えば、いくつかの実施形態では、デバイス600は、タップジェスチャ1750h2を検出することに関連して上述したものと同様の技術を使用して、ダイニングルーム出力アフォーダンス1718の一部分上のタップジェスチャ1724m1を検出したことに応じて、キッチン-ダイニング-リビングルーム出力アフォーダンス1726を表示する。いくつかの実施形態では、ユーザインタフェース1760は、(例えば、図13Aの)ユーザインタフェース1320上に表示されている音楽コントロール1332c上のタップジェスチャを検出したことに応じて、表示される。
ユーザインタフェース1760はまた、アフォーダンス1762などの、ユーザインタフェース1700上に表示されない他の構成要素、及びメディア出力制御オーバーレイ1710も含む。図17Mでは、デバイス600は、アフォーダンス1762上のタップジェスチャ1750m2を検出する。
図17Nに示すように、図17Mでタップジェスチャ1750m2を検出したことに応じて、デバイス600は、ユーザインタフェース1760を表示することを停止し、ユーザインタフェース1770を表示する。ユーザインタフェース1770は、デバイスのグループ上で再生しているメディアの状態(例えば、再生中ユーザインタフェース)を示す複数のグループアフォーダンス(例えば、1772、1776、及び1780)を含む。ユーザインタフェース1770上のグループアフォーダンスは、(例えば、17Lに示すような)現在構成されている出力アフォーダンスとの1対1の関係を有する。したがって、17Nでは、電話グループアフォーダンス1772は、電話出力アフォーダンス1712に関連し、キッチン及びリビングルームグループアフォーダンス1776は、キッチン及びリビングルーム出力アフォーダンス1726に関連し、ダイニングルームグループアフォーダンス1780は、ダイニングルーム出力アフォーダンス1718に関連する。いくつかの実施形態では、ユーザインタフェース1770上のアフォーダンスのグループは、メディア出力制御オーバーレイ1710及び/又はユーザインタフェース1760上に構成及び/又は表示されている出力アフォーダンスに基づいて、動的に更新される。いくつかの実施形態では、デバイス600は、キッチン及びリビングルーム出力アフォーダンス1726上でタップジェスチャ1750nを検出する。いくつかの実施形態では、タップジェスチャ1750nを検出したことに応じて、デバイス600は、選択されると、キッチンスピーカ1206及びテレビ1244に(例えば、図15C~図15Dに関連して上述したような)メディア再生動作を変更させる、メディア再生コントロール(例えば、再生、一時停止、録音、シャッフル、巻き戻し、早送り、音量レベルのアフォーダンス/コントロールのうちの1つ以上)を有するユーザインタフェースを表示する。いくつかの実施形態では、メディア再生コントロールが表示されている間に、電話グループアフォーダンス1772、キッチン及びリビングルームグループアフォーダンス1776、及びダイニングルームグループアフォーダンス1780のうちの1つ以上が表示される。
図17Oは、ユーザインタフェース1508を表示するデバイス600を示す。図17Oに示すように、ユーザインタフェース1780は、キッチン1202a及びリビングルーム1202dに関連付けられたデバイスが接続されている(又はメディアを再生するために利用可能である)ことを示す通知1782を含む。したがって、図17Oは、キッチン及びリビングルーム出力アフォーダンス1726に対応するグループ化などの合体されたグループ化(例えば、新たに作成されたグループ)のインジケーションにより電子デバイスにおいて通知を受信することができることを示す。
図17Pは、ユーザインタフェース1790を表示するタブレットデバイス1700(例えば、タブレットデバイス1700は、デバイス100、300、500、及び600の1つ以上の特徴を含む)を示す。ここで、タブレットデバイスは、図17Pに示すように、デバイス600とは異なる。図17Pに示すように、ユーザインタフェース1790は、ユーザインタフェース1760と類似しており、ユーザインタフェース1760に関して上述したものと類似の1つ以上の技術を使用して表示される。更に、ユーザインタフェース1790は、デバイス600が再生しているメディア(例えば、図17Aの「アーティスト1」による「トラック1」)からのメディア(例えば、「アーティスト2」による「トラック2」)をタブレットデバイスが再生していることを示す。
特に、図17Pでは、ユーザインタフェース1790は、(例えば、図17J~図17Lに記載されるように)デバイス600を介して作成されたキッチン及びリビングルーム出力アフォーダンス1726を含む。したがって、図17Pは、新たに作成された出力アフォーダンスが他のデバイスに利用可能であり得ることを示す。いくつかの実施形態では、新たに作成された出力アフォーダンスが他のデバイスに利用可能であるかどうかは、1つ以上のプライバシー設定に基づく。いくつかの実施形態では、新たに作成された出力アフォーダンスは、(例えば、1つ以上のプライバシー設定の状態に基づいて)だれでも利用可能である。いくつかの実施形態では、新たに作成された出力アフォーダンスは、(例えば、1つ以上のプライバシー設定の状態に基づいて)ホーム1202に関連付けられたデバイスと同じネットワーク(例えば、又はネットワークのグループのうちの1つ)に接続されているデバイスにのみ利用可能である。いくつかの実施形態では、新たに作成された出力アフォーダンスは、(例えば、1つ以上のプライバシー設定の状態に基づいて)ホーム1202に関連付けられるように(例えば、ユーザアカウントによって)指定されたデバイスのみに利用可能である。いくつかの実施形態では、新たに作成された出力アフォーダンスは、(例えば、1つ以上のプライバシー設定の状態に基づいて)図12のホーム1202に関連付けられたアカウントなどの、デバイス600も登録されている同じアカウント(又はアカウントのグループ)に登録されているデバイスにのみ利用可能である。いくつかの実施形態では、新たに作成された出力アフォーダンスは、(例えば、1つ以上のプライバシー設定の状態に基づいて)デバイス600の特定の近接度内にあるデバイスにのみ利用可能である。
図18は、電子デバイスを使用してデバイスのグループ上のオーディオ再生を制御するためのコントロールを管理する方法を示すフロー図である。方法1800は、表示生成構成要素(例えば、602)(例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム)及び1つ以上の入力デバイス(例えば、タッチ感知面)と通信しているコンピュータシステム(例えば、100、300、500、又は600)(例えば、スマートフォン、スマートウォッチ)において実行される。
後述するように、方法1800は、デバイスのグループ上のオーディオ再生を制御するためのコントロールを管理するための直感的な方法を提供する。この方法は、デバイスのグループ上のオーディオ再生を制御するためのコントロールを管理するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的にオーディオ再生を制御することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
コンピュータシステムは、表示生成構成要素を介して、1つ以上のメディア再生デバイス(例えば、コンピュータシステム、外部再生デバイス(例えば、スピーカ、テレビ、スマートホームアプライアンス))の第1のセットを制御するための、第1の選択可能なユーザインタフェースオブジェクト(例えば、1716、1718、1720)(例えば、キッチン内に位置する再生デバイスを選択するためのアフォーダンスなどのアフォーダンス)を含むユーザインタフェース(例えば、1710、1760、1790)を表示する(1802)。いくつかの実施形態では、コンピュータシステムは、外部再生デバイスに接続されている。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーション(例えば、シンボル(例えば、チェックマーク)、色、第2の選択可能なユーザインタフェースオブジェクトの選択の押圧又は押下状態)に対応する(例えば、それと共に表示される(例えば、それと共に現在表示されている)、それに隣接して(例えば、隣に)表示される、又はそれを含む)。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、1つ以上のメディア再生デバイスの第1のセットを表すインジケーション(例えば、ラベル(例えば、メディアデバイスを制御するための複数の選択可能なユーザインタフェースオブジェクトのそれぞれに対して表示される固有の一連の英数字))を含む。いくつかの実施形態では、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り(例えば、検出し)、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセットにメディアの再生を制御させる(例えば、出力させる、出力させない)命令を1つ以上のメディア再生デバイスの第1のセットに送信し、かつ/又はコンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット上の再生を開始するように構成される。
ユーザインタフェースは、1つ以上のメディア再生デバイスの第1のセットとは異なる1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクト(例えば、1716、1718、1720、1722)(例えば、ダイニングルーム内に位置する再生デバイスを選択するためのアフォーダンスなどのアフォーダンス)を含む。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトは、1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーション(例えば、シンボル(例えば、チェックマーク)、色、第2の選択可能なユーザインタフェースオブジェクトの選択の押圧又は押下状態)に対応しない(例えば、それと共に表示されない(例えば、それと共に現在表示されていない)、それ隣接して(例えば、隣に)表示されない、又はそれを含まない)。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトは、1つ以上のメディア再生デバイスの第2のセットを表すインジケーション(例えば、ラベル(例えば、メディアデバイスの再生を制御するための複数の選択可能なユーザインタフェースオブジェクトのそれぞれに対して表示される固有の一連の英数字))を含む。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトは、第1の選択可能なユーザインタフェースオブジェクトとは異なる。いくつかの実施形態では、コンピュータシステムは、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り(例えば、検出し)、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第2のセットにメディアの再生を制御させる(例えば、再生させる、再生させない)命令を1つ以上のメディア再生デバイスの第2のセットに送信し、かつ/又はコンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット上の再生を開始するように構成される。
ユーザインタフェースは、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーション(例えば、1716a、1718a、1720a、1722a)(例えば、シンボル(例えば、チェックマーク)、色、第1の選択可能なユーザインタフェースオブジェクトの選択の押圧又は押下状態)を含む。いくつかの実施形態では、インジケーションは、第1の選択可能なユーザインタフェースオブジェクトと共に表示される(例えば、同時に表示される)、それに隣接して(例えば、隣に)若しくはその上に表示される、又はそれに含まれる。いくつかの実施形態では、第1の選択可能なユーザインタフェースが選択されているというインジケーションは、1つ以上の再生デバイスの第1のセットがメディアを再生している(又は(例えば、コンピュータシステムを介して)メディアを再生するように構成されている)というインジケーションである。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーション(例えば、シンボル(例えば、チェックマーク)、色、第2の選択可能なユーザインタフェースオブジェクトの選択の押圧又は押下状態)に対応する(例えば、それと共に表示される(例えば、それと共に現在表示されている)、それに隣接して(例えば、隣に)表示される、又はそれを含む)。いくつかの実施形態では、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取り(例えば、検出し)、第1の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセットにメディアの再生を制御させる(例えば、出力させる、出力させない)命令を1つ以上のメディア再生デバイスの第1のセットに送信し、かつ/又はコンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット上の再生を開始するように構成される。
ユーザインタフェースがインジケーションを含んでいる間に(かつ、いくつかの実施形態では、ユーザインタフェースが1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーションを含んでいない間に)、コンピュータシステムは、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力(例えば、1750e)を受け取る(1804)。
第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力(例えば、1750e)を受け取ったことに応じて、かつ基準のセット(例えば、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトが両方とも選択されていること(又は第1の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション、及び第2の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション)を含む基準、所定の期間(例えば、5、10、30、60秒)の間に第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトが両方とも選択されていること(又は第1の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション、及び第2の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション)を含む基準)が満たされたとの判定に従って(1806)、コンピュータシステムは、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを含む、1つ又はメディア再生デバイスの第3のセットを制御するための第3の選択可能なユーザインタフェースオブジェクト(例えば、1722)を表示する(1808)。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第2のセットにメディアの再生を制御させる(例えば、再生させる、再生させない)命令を1つ以上のメディア再生デバイスの第2のセットに送信する。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第2のセット上の再生を開始するように構成される。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーション(例えば、第2の選択可能なユーザインタフェースオブジェクトに対応する(例えば、それに隣接して(例えば、隣に)又はその上に表示される)シンボル(例えば、チェックマーク)、色、選択の押圧又は押下状態)を用いて表示する。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトは、1つ以上のデバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーション(例えば、シンボル(例えば、チェックマーク)、色、第2の選択可能なユーザインタフェースオブジェクトの選択の押圧又は押下状態)に対応する(例えば、それと共に表示される(例えば、それと共に現在表示されている)、それに隣接して(例えば、隣に)表示される、又はそれを含む)。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトは、1つ以上のメディア再生デバイスの第1のセット及び第2の1つ以上の再生デバイスを表すインジケーション(例えば、ラベル(例えば、メディアデバイスの再生を制御するための複数の選択可能なユーザインタフェースオブジェクトのそれぞれに対して表示される固有の一連の英数字))を含む。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトは、第1の選択可能なユーザインタフェースオブジェクトからのラベルの1つ以上の部分と、第2の選択可能なユーザインタフェースオブジェクト上のラベルからの1つ以上の部分とを含む。
第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力(例えば、1750e)を受け取ったことに応じて、かつ基準のセット(例えば、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトが両方とも選択されていること(又は第1の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション、及び第2の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション)を含む基準、所定の期間(例えば、5、10、30、60秒)の間に第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトが両方とも選択されていること(又は第1の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション、及び第2の選択可能なユーザインタフェースオブジェクトが表示されているというインジケーション)を含む基準)が満たされたとの判定に従って(1806)、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクト(例えば、1716)及び第2のユーザインタフェースオブジェクト(例えば、1718)(並びに第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーション)を表示することを停止する(1810)。いくつかの実施形態では、1つ以上のメディア再生デバイスの第1のセットがメディアを再生しているというインジケーション(例えば、シンボル(例えば、チェックマーク)、色、選択の押圧又は押下状態)と共に第1の選択可能なユーザインタフェースオブジェクトが表示されているときに、1つ以上のメディア再生デバイスの第1のセットがメディアを再生しているとの判定がなされる。いくつかの実施形態では、コンピュータシステムがメディアを1つ以上のメディア再生デバイスの第1のセットに送信しているときに、1つ以上のメディア再生デバイスの第1のセットが再生メディアであるとの判定がなされる。いくつかの実施形態では、コンピュータシステムは、)第2の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取ったことに応じて(例えば、対応する基準が満たされているかに関わりなく)即座に、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示し、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止する。いくつかの実施形態では、コンピュータシステムは、基準の対応するセットが満たされた後に又は基準の対応するセットが満たされているとの判定に従ってのみ、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示し、第1の選択可能なユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトを表示することを停止する。いくつかの実施形態では、対応する基準は、第2の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取った後に、かつ/又は第1の選択可能なユーザインタフェースオブジェクトが、1つ以上のメディア再生デバイスの第1のセットがメディアを再生しているというインジケーションを含んでいる(かつ第2の選択可能なユーザインタフェースオブジェクトが、1つ以上のメディア再生デバイスの第1のセットがメディアを再生しているというインジケーションを含んでいる)間に満たされる基準を含む。いくつかの実施形態では、基準の対応するセットが満たされているとの判定に従って、コンピュータシステムは、以前に表示されていた選択可能なユーザインタフェースオブジェクトの表示を維持し、選択可能なユーザインタフェースオブジェクトは、第1の選択可能なユーザインタフェースオブジェクト、第2の選択可能なユーザインタフェースオブジェクト、又は第3の選択可能なユーザインタフェースオブジェクトではない。いくつかの実施形態では、基準の対応するセットが満たされていないとの判定に従って、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットの再生を制御するための第3の選択可能なユーザインタフェースオブジェクトの表示を取り止める。いくつかの実施形態では、基準の対応するセットが満たされていないとの判定に従って、コンピュータシステムは、第1のユーザインタフェースオブジェクト及び第2のユーザインタフェースオブジェクトの表示を維持する。第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを介して制御されていたデバイスのグループを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示する一方で、これらのオブジェクトを表示することを停止することにより、単一のコントロールを用いてデバイスの複数のセットを制御するオプションをユーザに提供する。追加の表示された制御でUIを雑然とすることなくコンピュータシステムの追加の制御を提供することで、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトを表示している間に、コンピュータシステムは、第3の選択可能なユーザインタフェースオブジェクト(例えば、1722a)の選択(例えば、関連付けられた位置(例えば、第3の選択可能なユーザインタフェースオブジェクトが表示されている位置か、又は第1の入力を受け取ったことに応じて表示される位置か)に対応する第3の選択可能なユーザインタフェースオブジェクトの一部分上の選択)に対応する第1のユーザ入力(例えば、1750h1)(例えば、第3の選択可能なユーザインタフェースオブジェクトの一部分上のタップ入力)を受け取る。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの選択に対応する第1のユーザ入力を受け取ったことに応じて、かつ第3の選択可能なユーザインタフェースオブジェクト(例えば、1722)が選択されている(例えば、1つ以上のメディア再生デバイスの第1のセット及び第2のメディア再生デバイスがメディアを再生している)というインジケーション(例えば、単一のインジケーション)をユーザインタフェースが(例えば、第3の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力が受信された時点で)含むことに従って(例えば、判定に従って)、コンピュータシステムは、ユーザインタフェース内に、第3の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーション(例えば、1722a)(例えば、シンボル(例えば、チェックマーク)、色、第3の選択可能なユーザインタフェースオブジェクトの選択の押圧又は押下状態)を表示することを停止する。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取ったことに応じて(かつ、いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトが、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーションを含むとの判定に従って)、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセット上の再生を開始するように構成されない。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの選択に対応する第1のユーザ入力を受け取ったことに応じて、かつ第3の選択可能なユーザインタフェース(例えば、1722)オブジェクトが選択されているというインジケーション(例えば、単一のインジケーション)をユーザインタフェースが含まないことに従って(例えば、判定に従って)、コンピュータシステムは、ユーザインタフェース内に、第3の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーション(例えば、1722a)を表示する。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの第1の選択に対応するユーザ入力を受け取ったことに応じて(かつ第3の選択可能なユーザインタフェースオブジェクトが、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットがメディアを再生しているというインジケーションを含まないとの判定に従って)、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセット上の再生を開始するように構成される。第3の選択可能なユーザインタフェースオブジェクトの既存の選択状態に基づいて、デバイスのグループを制御するための第3の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションを更新することにより、オブジェクトの更新された選択状態に関するフィードバックをユーザに提供する。ユーザに改善された視覚的フィードバックを提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクト(例えば、1716)は、1つ以上のメディア再生デバイスの第1のセットに関連付けられた識別子(例えば、名前又はシンボル)を含む。いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクト(例えば、1718)は、1つ以上のメディア再生デバイスの第2のセットに関連付けられた識別子(例えば、名前又はシンボル)を含む。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクトの識別子は、第2の選択可能なユーザインタフェースオブジェクトに関連付けられた識別子とは異なる。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクト(例えば、1722)を表示することの一部として、コンピュータシステムは、1つ以上のメディア再生デバイスの第3のセットに関連付けられた識別子を表示する。いくつかの実施形態では、識別子は、1つ以上のメディア再生デバイスの第1のセットに関連付けられた識別子を表す部分(例えば、シンボル、名前、テキスト、又は数字の部分)及び1つ以上のメディア再生デバイスの第2のセットに関連付けられた識別子を表す部分(例えば、シンボル、名前、テキスト、又は数字の部分)を含む。第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトの識別子に基づく識別子を有する第3の選択可能なユーザインタフェースオブジェクトを表示することにより、第3の選択可能なオブジェクトに関連付けられた動作を示す視覚的フィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステムは、第3の選択可能なユーザインタフェースオブジェクトを表示している間に、第3の選択可能なユーザインタフェースオブジェクト(例えば、1724)の選択(例えば、関連付けられた位置(例えば、第3の選択可能なユーザインタフェースオブジェクトが表示されている、又は第1の入力を受け取ったことに応じて表示される位置)に対応しない第3の選択可能なユーザインタフェースオブジェクトの一部分上の選択)に対応する第2のユーザ入力(例えば、1750i2)(例えば、第3の選択可能なユーザインタフェースオブジェクトの一部分上のタップ入力)を受け取る。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの選択に対応する第2のユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクト(例えば、1716(例えば、図17Kの))と、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示する。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの選択に対応する第2のユーザ入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクト(例えば、1718(例えば、図17Kの))と、第2の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示する。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの選択に対応する第2のユーザ入力を受け取ったことに応じて、第3の選択可能なユーザインタフェースオブジェクトを表示することを停止し、外部デバイスのグループの表現の表示を維持することは、コントロール(例えば、1つ以上のメディア再生デバイスの第3のセットに関連付けられた表現、表現は、1つ以上のメディア再生デバイスの第1のセットに関連付けられた識別子を表す部分と、1つ以上のメディア再生デバイスの第2のセットに関連付けられた識別子を表す部分とを含む)である。第3の選択可能なユーザインタフェースオブジェクトが選択されているときに、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースを表示することにより、第3の選択可能なユーザインタフェースオブジェクトに対応する選択可能なユーザインタフェースオブジェクトのグループに対する制御をユーザに提供する。追加の表示された制御でUIを雑然とすることなくコンピュータシステムの追加の制御を提供することで、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示しており、かつ1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第2の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示している間に、コンピュータシステムは、第1の選択可能なユーザインタフェースオブジェクトの1つ以上の選択に対応する1つ以上のユーザ入力を受け取る。いくつかの実施形態では、1つ以上のユーザ入力(例えば、1750k)を受け取ったことに応じて(例えば、1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第2の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示している間に)、かつ第1の選択可能なユーザインタフェースオブジェクトの1つ以上の選択のうちの最後(例えば、1750k)が、コンピュータシステムに第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションを表示することを停止させたとの判定に従って、コンピュータシステムは、第3の選択可能なユーザインタフェースオブジェクトを表示することなく、第1の選択可能なユーザインタフェースオブジェクト(例えば、1716)及び第2の選択可能なユーザインタフェースオブジェクト(例えば、1720)を表示し続ける。いくつかの実施形態では、1つ以上のユーザ入力(例えば、1750k)を受け取ったことに応じて(例えば、1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第2の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示している間に)、かつ第1の選択可能なユーザインタフェースオブジェクトの1つ以上の選択のうちの最後が、コンピュータシステムに第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションの表示をさせたとの判定に従って、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを表示することなく、第3の選択可能なユーザインタフェースオブジェクトを表示する。1つ以上のユーザ入力に応じて、第3の選択可能なユーザインタフェースオブジェクトを表示することなく、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを表示し続けることにより、外部デバイスの第1のセットがもはや第3のユーザインタフェースオブジェクトに関連付けられていないというフィードバックをユーザに提供する。ユーザに改善された視覚的フィードバックを提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速且つ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、ユーザインタフェースは、1つ以上のメディア再生デバイスの第4のセット(例えば、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセット(及び1つ以上のメディア再生デバイスの第3のセット)とは異なる1つ以上のメディア再生デバイスのセット)を制御するための第4の選択可能なユーザインタフェースオブジェクト(例えば、1720)を含む。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクト(例えば、1722)及び第4の選択可能なユーザインタフェースオブジェクト(例えば、1720)を表示している(かつ/又は、いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトの選択に対応する第2のユーザ入力を受け取ったことに応じて、1つ以上のメディア再生デバイスの第1のセットを制御するための第1の選択可能なユーザインタフェースオブジェクトと、第1の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示しており、かつ1つ以上のメディア再生デバイスの第2のセットを制御するための第2の選択可能なユーザインタフェースオブジェクトと、第2の選択可能なユーザインタフェースオブジェクトが選択されているというインジケーションとを表示している)間に、コンピュータシステムは、第4のユーザインタフェースオブジェクトの選択に対応するユーザ入力(例えば、1750h2)を受け取る。いくつかの実施形態では、第4のユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取った受け取ったことに応じて、コンピュータシステムは、ユーザインタフェース内に、1つ以上のメディア再生デバイスの第1のセット、1つ以上のメディア再生デバイスの第2のセット、及び1つ以上のメディア再生デバイスの第4のセットを制御するための第5の選択可能なユーザインタフェースオブジェクト(例えば、1724)を表示する。いくつかの実施形態では、第4のユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、第3の選択可能なユーザインタフェースオブジェクト(例えば、1722)及び第4の選択可能なユーザインタフェースオブジェクト(例えば、1724)を表示することを停止する。いくつかの実施形態では、新しいスピーカが追加されると(例えば、第4の選択可能なユーザインタフェースオブジェクトの選択)、コンピュータシステムは、第3の選択可能なユーザインタフェースオブジェクトが表示されており、かつ選択されているというインジケーションを有するかどうか、又は第1及び第2のユーザインタフェースオブジェクトが表示されており、かつ選択されているというインジケーションを有するかどうかに関わりなく、新しいスピーカを第3の選択可能なユーザインタフェースオブジェクトのスピーカと共にオーディオソースとして追加する。第1の選択可能なユーザインタフェースオブジェクト、第2の選択可能なユーザインタフェースオブジェクト、及び第4の選択可能なオブジェクトを介して制御されていたデバイスのグループを制御するための第5の選択可能なユーザインタフェースオブジェクトを表示する一方で、これらのオブジェクトをもはや別個に表示しないことにより、ユーザインタフェースを雑然とさせることなく、ユーザにコンピュータシステムの制御を提供する。追加の表示されたコントロールでUIを雑然とすることなく、コンピュータシステムの追加のコントロールをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて、コンピュータシステムは、コンピュータシステムとは異なる第2のコンピュータシステム(例えば、サーバ、パーソナルデバイス)に、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトのグループ化を示すグループ化情報(例えば、図17Pの1726)を送信する。いくつかの実施形態では、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトのグループ化を示すことを含む、グループ化情報を送信することは、第3の選択可能なユーザインタフェースオブジェクトに対応する情報を送信することを含む。いくつかの実施形態では、第3の選択可能なユーザインタフェースオブジェクトは、コンピュータシステム(及び第2のコンピュータシステム)とは異なる第3のコンピュータシステムを介して表示されるように構成されている。いくつかの実施形態では、送信された情報は、第3のコンピュータシステムにおける(その上の、それを介した)第3の選択可能なユーザインタフェースオブジェクトの表示を引き起こす。いくつかの実施形態では、第3のコンピュータシステムは、第1のコンピュータシステムと同じユーザアカウントに割り当てられる。いくつかの実施形態では、グループ化情報を送信することにより、第3のシステムに、第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトのグループ化を示す情報を受信させる。第3の選択可能なユーザインタフェースオブジェクトがコンピュータシステムとは異なる第2のコンピュータシステムを介して表示されるように構成されていることを示す情報を送信することにより、追加の入力を介して動作に手動で影響を及ぼす必要なしに、別のコンピュータシステムを情報により更新する能力をユーザに提供する。更なるユーザ入力を必要とせずに1組の状態が満たされた場合に最適化された動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、ユーザインタフェース内に、第3の選択可能なユーザインタフェースオブジェクト(例えば、1722)を表示した後に、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット(及び/又は1つ以上のメディア再生デバイスの第2のセット)がコンピュータシステムに接続されている(例えば、接続が行われる前にユーザ入力なしに自動的に接続されている)というインジケーションに対応するデータを受信する。いくつかの実施形態では、データを受信したことに応じて、コンピュータシステムは、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットがコンピュータシステムに接続されていることを示す通知(例えば、1782)(例えば、自動接続アラート)を表示する。いくつかの実施形態では、通知は、以前に表示された別の通知とは異なる色(例えば、青色)である。第3の選択可能なユーザインタフェースオブジェクトの選択によって制御することができるデバイスがコンピュータシステムに接続された(例えば、自動的に接続された)という通知を表示することにより、デバイスのグループ(例えば、デバイスの動的グループ)がコンピュータシステムに接続されていることを示す視覚的フィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、ユーザインタフェース(例えば、1710)を表示している間に、コンピュータシステムは、ユーザインタフェース上の第1の位置における(例えば、第2のユーザインタフェース(例えば、メディア再生インタフェース)を表示するための選択可能なユーザインタフェースオブジェクト上の)ユーザ入力を受け取る。いくつかの実施形態では、ユーザインタフェース上の第1の位置(例えば、1702の位置)におけるユーザ入力を受け取ったことに応じて、コンピュータシステムは、表示生成構成要素を介して、1つ以上の入力デバイスを介して選択されると、(かつ、いくつかの実施形態では、コマンドを直接又は間接的に(例えば、サーバを介して)外部メディア再生デバイスに送信することによって)メディアを再生している1つ以上の外部メディア再生デバイスにメディア再生動作を変更させる(例えば、動作を一時停止させる又は停止させる、現在再生しているメディアから異なるメディアに遷移させる、早送り動作、巻き戻し動作、音量増加又は減少動作、反復動作、シャッフル動作(例えば、図17Aのユーザインタフェース1700上の))選択可能なユーザインタフェースオブジェクトを含む第2のユーザインタフェース(例えば、1700)(例えば、メディア再生インタフェース)を表示する。既存の再生動作のメディア再生動作を変更するためのオプションを含む第2のユーザインタフェースを表示することにより、初期ユーザインタフェースを雑然とさせることなく、ユーザがメディア再生デバイスのセットを制御するためのユーザインタフェースから再生動作を変更するためのユーザインタフェースに遷移することを可能にする。表示される追加コントローラによってUIを雑然とさせることなく、追加制御できるようにすることにより、デバイスの操作性が高められ、ユーザ-デバイスインタフェースを(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを減らすことによって)より効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、基準のセットは、第2の選択可能なユーザインタフェースオブジェクトというインジケーション及び第1の選択可能なユーザインタフェースオブジェクトが所定の期間(例えば、2、3、30秒)(例えば、所定の期間は、ゼロではなく、かつ人間が知覚可能である)の間に選択されたというインジケーションのときに満たされる基準を含む。一定の期間の後に第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを介して制御されていたデバイスのグループを制御するための第3の選択可能なユーザインタフェースオブジェクトを表示することにより、オブジェクトが第3のユーザインタフェースオブジェクトによって置き換えられる前に、第1の選択可能なユーザインタフェースオブジェクトの選択を反転させる能力をユーザに提供し、それによって意図しない入力の発生を低減する。選択を反転させるオプションを提供することにより、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときにユーザが適切な入力を提供するように支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量が削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、ユーザインタフェースを、かつ第3の選択可能なユーザインタフェースオブジェクトの一部として表示している(例えば、かつ第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースオブジェクトを表示することを停止している)間に、コンピュータシステムは、第3のユーザインタフェースオブジェクト(例えば、第3の選択可能なユーザインタフェースオブジェクトを表示するための第1の選択可能なユーザインタフェースオブジェクトの表示及び第2の選択可能なユーザインタフェースオブジェクトの表示の(例えば、それをマージする、合体させる、組み合わせる)アニメーション)を表示する前に(例えば、第3の選択可能なユーザインタフェースオブジェクトを表示する前に)、(例えば、第1の選択可能なユーザインタフェースオブジェクトの第2の部分を含むことなく)第1の選択可能なユーザインタフェースオブジェクトの第1の部分(例えば、図17Gに示す1716の一部分)と、(例えば、第2の選択可能なユーザインタフェースオブジェクトの第2の部分を含むことなく)第2の選択可能なユーザインタフェースオブジェクトの第1の部分(例えば、図17Gに示す1718の部分)とを含む単一のユーザインタフェースオブジェクト(例えば、図17Gの1716と1718の組み合わせ)を表示する。いくつかの実施形態では、アニメーションを表示している間に、第1の選択可能なユーザインタフェースオブジェクトの一部分及び第3の選択可能なユーザインタフェースオブジェクトの一部分は、時間におけるインスタンス中に接合されるように見える。いくつかの実施形態では、(例えば、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取ったことに応じて)第3の選択可能なユーザインタフェースオブジェクトを表示することは、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットに、1つ以上のメディア再生デバイスの第1のセット及び1つ以上のメディア再生デバイスの第2のセットに選択可能なユーザインタフェースオブジェクトの表示のアニメーション(例えば、メディア再生デバイスの少なくとも2つのセットの表現の)(例えば、合体する)を表示させる情報を送信することを含む。第3の選択可能なユーザインタフェースオブジェクトを形成するように合体する第1の選択可能なユーザインタフェースオブジェクト及び第2の選択可能なユーザインタフェースのアニメーションを表示することにより、第3の選択可能なユーザインタフェースオブジェクトに対応する選択可能なユーザインタフェースオブジェクト又はコントロールのグループに関するフィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトの選択に対応するユーザ入力を受け取った後に、コンピュータシステムは、第3の選択可能なユーザインタフェースオブジェクトを確認するための選択可能なユーザインタフェースオブジェクトを表示する。(ユーザが第1及び選択可能なユーザインタフェースオブジェクトを選択すると)第3の選択可能なユーザインタフェースオブジェクトの視覚特性を更新して、第1の選択可能なユーザインタフェースオブジェクトの状態変化を反映し、第1及び第2の選択可能なユーザインタフェースオブジェクトのグループ化を確認するためのユーザインタフェースを表示することにより、ユーザが第1及び第2の選択可能なユーザインタフェースオブジェクトを意図せずにグループ化することを回避するように支援することによって、コンピュータシステムのより多くの制御をユーザに提供し、これにより、動作を実行する前に確認が必要であることをユーザが認識することを可能にする。確認ユーザインタフェース要素を提供することにより、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときにユーザが適切な入力を提供するように支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量が削減し、コンピュータシステムのバッテリ寿命を改善する。
方法1800に関連して上述したプロセスの詳細(例えば、図18)はまた、後述する方法にも類似する方式で適用可能であることに留意されたい。例えば、方法800は、方法1800を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法800の動作806は、方法1800の動作1808に記載されたスピーカのグループに対応する第1のメディア情報アフォーダンスを選択するために実行することができ、動作808、810、及び/又は812は、選択に応じて、方法1800の一部として実行することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
図19A~図19Iは、いくつかの実施形態に係る、メディアを共有するための例示的なユーザインタフェースを示す。これらの図のユーザインタフェースは、図20に示すプロセスを含む、後述するプロセスを例示するために使用される。
図19Aは、例示的なディスプレイスクリーン1902(例えば、「JaneのTV」)、バッド1906a(例えば、「Janeのバッド)、及びリモコン1904を示す。図19Aでは、ディスプレイスクリーン1902は、通信リンク1908aによって示されるように、メディアをバッド1906aと共有するようにリンクされ構成されたマルチメディアデバイス(例えば、デバイス又は別の出力デバイスでの出力のためのマルチメディアコンテンツを記憶及び/又は生成するデバイス)である。リモコン1904はまた、リモコン1904を介して検出されたジェスチャが処理のためにディスプレイスクリーン1902に送信されるように、ディスプレイスクリーン1902にリンクされている。いくつかの実施形態では、第2のデバイスにリンクされたデバイス(例えば、ディスプレイスクリーン、ヘッドホン、電話機)は、第2のデバイスと(例えば、無線又は有線媒体を介して)動作可能に通信している、又は(例えば、Bluetooth、近距離通信、ネットワーク接続を介して)接続された(例えば、ペアリングされた)デバイスである。
いくつかの実施形態では、ディスプレイスクリーン1902は、それ自体がマルチメディアデバイスであるのではなく、ディスプレイスクリーン1902での出力のためのマルチメディアコンテンツを提供するマルチメディアデバイスに直接リンクされている。いくつかの実施形態では、ディスプレイスクリーン1902又はディスプレイスクリーン1902にリンクされたマルチメディアデバイスは、デバイス100、300、又は500の1つ以上の特徴を含む。いくつかの実施形態では、マルチメディアデバイスは、メディアをディスプレイスクリーン1902及びバッド1906aと共有するように構成されている。いくつかの実施形態では、ディスプレイスクリーン1902がマルチメディアデバイスにリンクされているシナリオでは、マルチメディアデバイスはまた、リモコン1904を介して検出されたジェスチャが処理のためにマルチメディアデバイスに送信されるように、リモコン1904にリンクされている。いくつかの実施形態では、(例えば、ディスプレイスクリーン1902にリンクされている)マルチメディアデバイスは、1つ以上のジェスチャ(又はリモコン1904から送信された1つ以上のジェスチャのインジケーション)を受け取ったことに応じて、ディスプレイスクリーン1902に1つ以上のユーザインタフェース要素を表示させる。いくつかの実施形態では、マルチメディアデバイスは、メディア(例えば、オーディオ)がバッド1906aによって出力するために利用可能であるように、メディアをバッド1906aと共有する。したがって、以下の説明は、多くの場合、簡略にするために、アクションを実行する、(例えば、アカウントに関連付けられた)エンティティに属する、又は1つ以上のデバイス(例えば、ヘッドホン、電話機)にリンクされているディスプレイスクリーン1902を参照する。しかしながら、以下の説明は、ディスプレイスクリーン1902及び1つ以上のデバイスにリンクされた1つ以上のマルチメディアデバイスが存在するシナリオを企図し、除外しない。これらのシナリオでは、マルチメディアデバイス(単数又は複数)(かつディスプレイスクリーンではない)は、エンティティに属する、かつ/又は1つ以上のアクションを実行する(例えば、ディスプレイスクリーン1902上の1つ以上のユーザインタフェースの表示を引き起こす、1つ以上のジェスチャを受け取る、メディアを共有する、及び/又はディスプレイスクリーン1902に関して本明細書で説明する他のロジックを実行するなど)ことができる。
図19Aでは、ディスプレイスクリーン1902は、Janeに属する(例えば、「JaneのTV」)。加えて、バッド1906aは、Janeに属するヘッドホンである(例えば、「Jane」である(例えば、又はその単語を含む)識別子又は名前を含むユーザアカウントに関連付けられている)。したがって、いくつかの実施形態では、デバイスは、デバイスがエンティティ(例えば、「Jane」)を表す識別子又は名前を含むユーザアカウントに関連付けられている(例えば、ログインしている)ときに、エンティティ(例えば、人、建物、家)に属する。
図19Aに示すように、ディスプレイスクリーン1902は、ユーザインタフェース1930を表示する。ユーザインタフェース1930は、スピーカグループ1922及びヘッドホングループ1924を含む。スピーカグループ1922は、1つ以上のスピーカコントロールを含み、各スピーカコントロールは、ディスプレイスクリーン1902から特定のスピーカにメディアを共有するためのコントロールである。スピーカコントロールは、キッチンスピーカコントロール1926を含む。キッチンスピーカコントロール1926は、(例えば、図12に関して説明したような)キッチンスピーカ1206がディスプレイスクリーン1902にリンクされている又は以前にリンクされているため、表示される。ヘッドホングループ1924は、ディスプレイスクリーン1902から、ディスプレイスクリーン1902にリンクされている又は以前にリンクされているヘッドホンにメディアを共有するための1つ以上のコントロールを含む。ヘッドホングループ1924は、共有インジケーション1932a(例えば、ユーザインタフェース1930上の「Janeのバッド」の隣のチェックマーク)と共に表示されたバッドコントロール1932(「Janeのバッド」)を含む。共有インジケーション1932aは、バッド1906aがディスプレイスクリーン1902にリンクされ、ディスプレイスクリーン1902によって共有されたメディアを受信するように構成されていることを示す。特に、キッチンスピーカコントロール1926は、キッチンスピーカ1206がディスプレイスクリーン1902によって共有されたメディアを受信するように構成されていないため、共有インジケーションと共に表示されていない。バッドコントロール1932に加えて、オーディオ共有コントロール1934もヘッドホングループ1924の内側に配置される。図19Aでは、オーディオ共有コントロール1934は、バッドコントロール1932の下に表示されている。いくつかの実施形態では、オーディオ共有コントロール1934は、所定の数(例えば、1)未満のヘッドホン(例えば、バッド)がディスプレイスクリーン1902にリンクされ、ディスプレイスクリーン1902からメディアを受信するように構成されているときには、表示されない。いくつかの実施形態では、オーディオ共有コントロール1934は、ディスプレイスクリーン1902にリンクされ、ディスプレイスクリーン1902からメディアを受信するように構成されているヘッドホンの数に関わりなく、表示される。
図19Bに示すように、ディスプレイスクリーン1902は、通信リンク1908bによって示されるように、デバイス1910(「Nickの電話機」)にリンクされている。デバイス1910は、通信リンク1912bによって示されるように、バッド1906b(例えば、「Nickのバッド」)にリンクされている。いくつかの実施形態では、デバイス1910は、1つ以上の構成要素を含み、デバイス600に関して本明細書に記載されるような1つ以上の技術を使用する。
図19Bでは、バッド1906a(例えば、「Janeのバッド」)及びバッド1906b(例えば、「Nickのバッド」)は、ディスプレイスクリーン1902から所定の距離内にあり、それにより、バッドのそれぞれは、バッドのそれぞれの対応するプロパティ(例えば、構成プロパティ、位置)が条件のセットを満たす場合、ディスプレイスクリーン1902からメディアを受信するように構成することができる。したがって、図19Bでは、バッド1906aのプロパティは、現在、(例えば、図19Bのバッドコントロール1932の隣のチェックマークによって示されるように)条件のセットを満たしている。したがって、バッド1906aは、ディスプレイスクリーン1902からメディアを受信するように構成されている。一方、バッド1906bのプロパティは、現在、条件のセットを満していない。したがって、バッド1906bは、ディスプレイスクリーン1902からメディアを受信するように構成されていない。
本明細書で使用するとき、一対のバッドがディスプレイスクリーン1902にリンクされ、ディスプレイスクリーン1902からメディアを受信するように構成されているとき、ディスプレイスクリーン1902は、一対のバッドとオーディオメディア(例えば、ディスプレイスクリーン1902によって現在再生されているメディア)を共有するように現在構成されている。したがって、バッド1906bがディスプレイスクリーン1902からメディアを受信するように構成されていないため、ディスプレイスクリーン1902は、バッド1906bによって出力することができるメディアを共有するように現在構成されていない(例えば、又は共有することができない)。しかしながら、バッド1906aがディスプレイスクリーン1902にリンクされ、ディスプレイスクリーン1902からメディアを受信するように構成されているため、ディスプレイスクリーン1902は、バッド1906aによって出力することができるメディアを共有するように現在構成されている。加えて、図19Bでは、一対のバッドのプロパティが条件のセットを満し、かつディスプレイスクリーン1902の近く(例えば、それから所定の距離内)にあるとき、バッドは、ディスプレイスクリーン1902に自動的にリンクされ、ディスプレイスクリーン1902からメディアを受信するように構成される(例えば、ディスプレイスクリーンは、メディアをバッド1902aと共有することができる)。したがって、いくつかの実施形態では、バッド1906aがディスプレイスクリーン1902の近くに移動されたときに、バッド1906aは、ディスプレイスクリーン1902に自動的にリンクされ、ディスプレイスクリーン1902からメディアを受信するように構成されていた。
いくつかの実施形態では、条件のセットは、一対のバッドが、ディスプレイスクリーン1902が関連付けられている同じユーザアカウントに関連付けられている(例えば、登録されている、ログインしている)ときに満たされる条件を含む。いくつかの実施形態では、条件のセットは、バッドのセットが、ディスプレイスクリーン1902が関連付けられているアカウントを介してディスプレイスクリーンからメディアを受信することが許可されているものとして指定されているときに満たされる条件を含む。いくつかの実施形態では、条件のセットは、バッドのセットが過去にディスプレイスクリーン1902に接続されている(かつ、いくつかの実施形態では、ディスプレイスクリーン1902に接続することが許可され続ける)というインジケーションがあるときに満たされる条件を含む。
図19C~図19Iは、メディアをバッド1906bによって出力することができるように、ディスプレイスクリーン1902がディスプレイスクリーン1902によって現在再生されているメディアを共有するように構成されてるように、ディスプレイスクリーン1902をバッド1906bと接続するプロセスを示す。図19Bでは、リモコン1904は、下向きナビゲーションジェスチャ1950bを受け取り、下向きナビゲーションジェスチャ1950bのインジケーションを処理のためにディスプレイスクリーン1902に送信する。
図19Cに示すように、下向きナビゲーションジェスチャ1950bのインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、選択インジケータを(例えば、図19Bの)バッドコントロール1932に表示されることから(例えば、図19Cの)オーディオ共有コントロール1934に移動させる。図19Cでは、リモコン1904は、オーディオ共有コントロール1934に向けられた選択ジェスチャ1950cを受け取り、選択ジェスチャ1950cのインジケーションを処理のためにディスプレイスクリーン1902に送信する。
図19C1に示すように、選択ジェスチャ1950cのインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、ユーザインタフェース1930上に重ね合わされたユーザインタフェース1938を表示する。いくつかの実施形態では、共有キャンセルオプション1938cに向けられた選択ジェスチャのインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、ユーザインタフェース1938を表示することを停止し、ユーザインタフェース1930を表示し続ける。ユーザインタフェース1938は、一時的共有オプション1938a、永続的共有オプション1938b、及び共有キャンセルオプション1938cなどの共有オプションを含む。いくつかの実施形態では、共有キャンセルオプション1938cに向けられた選択ジェスチャのインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、メディアを共有するプロセスを開始しない(例えば、ユーザインタフェース1930上に重ね合わされたユーザインタフェース1938を表示することを停止する)。
いくつかの実施形態では、永続的共有オプション1938bに向けられた選択ジェスチャのインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、メディアを周辺デバイス(例えば、「Nickのバッド」1906b)と共有するプロセスを開始し、それにより、プロセスの完了により、ディスプレイスクリーン1902がメディアを周辺デバイスと共有することを手動で構成解除される(又は、周辺デバイスがディスプレイスクリーン1902からメディアを受信することを手動で構成解除される)まで(例えば、共有のための一時的な期間を伴わずに)、メディアを周辺デバイスと共有するようにディスプレイスクリーン1902を構成する。いくつかの実施形態では、ディスプレイスクリーン1902は、オーディオコントロール1934に向けられた選択ジェスチャ1950cを受け取ったことに応じてユーザインタフェース1938を表示せず、代わりに、図19Dのユーザインタフェース1940を表示する。そのような実施形態では、ディスプレイスクリーン1902は、共有オプション1938bの選択に関して記載されたものと同様の方法で、メディアの提供に関する所定の時間制限なしにメディアをバッド1906bに提供するように構成される。図19Cでは、リモコン1904は、一時的共有オプション1938aに向けられた選択ジェスチャ1950c1を受け取り、選択ジェスチャ1950c1のインジケーションを処理のためにディスプレイスクリーン1902に送信する。
図19Dでは、選択ジェスチャ1950c1のインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、ユーザインタフェース1940を表示し、メディアを共有するプロセスを開始し、それにより、プロセスの完了により、一時的な期間(例えば、既定の期間)にわたってメディアを周辺デバイスと共有するようにディスプレイスクリーン1902が構成されるように構成する。いくつかの実施形態では、一時的な期間は、特定の時間から所定の時間(例えば、現在から1時間)、ディスプレイスクリーン1902によって出力されている現在のメディアの持続時間に基づく期間(例えば、映画の持続時間、現在再生している映画内に残っている残りの時間)、時間間隔又は所定のイベント(例えば、日、週)の終了に基づく期間などの既定の期間である。したがって、選択ジェスチャ1950c1のインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、(例えば、手動で構成解除される必要なく)一時的な期間後に周辺デバイスとメディアを共有することを自動的に構成解除される。いくつかの実施形態では、選択ジェスチャ1950c1のインジケーションを受信したことに応じて、デバイス600は、異なる選択可能な一時的な期間オプション(例えば、既定の期間、メディアの持続時間及び/又は所定のイベントに基づく時間)を有するユーザインタフェースを表示する。また、オプションのうちの1つに向けられた選択を受信したことに応じて、デバイス600は、ユーザインタフェース1940を表示し、選択された期間オプションに基づいてメディアを共有するプロセスを開始する。
図19Dでは、選択ジェスチャ1950c1のインジケーション(又は、時間オプションの選択)を受信したことに応じて、メディアを共有するプロセスの一部として、デバイス600は、1つ以上の通知を送信するプロセスを開始する。1つ以上の通知を送信するプロセスを開始することの一部として、ディスプレイスクリーン1902は、ディスプレイスクリーン1902の近くにある1つ以上のデバイス(例えば、デバイス1910)に通知を表示させる命令又は要求を送信する。図19Dでは、命令は、バッドのセットにリンクされ、かつ/又はペアリングされているデバイス(例えば、電話機、タブレットなど)にのみ送信される。いくつかの実施形態では、命令は、他のデバイスに送信することができる(例えば、命令は、通知を表示するブロードキャストされた要求であってもよい)。
図19Dに示すように、ユーザインタフェース1940は、通知が少なくとも1つの近くのデバイスに送信され、近くのデバイスに接続された一対のバッド(例えば、又は別のタイプのアクセサリデバイス)とメディアを共有するようにディスプレイスクリーン1902を構成するように対話されるべきであるというインジケーションを含む。ユーザインタフェース1940はまた、選択されると、ディスプレイスクリーン1902にユーザインタフェース1930を再表示させる、キャンセルコントロール1942を含む。図19Dでは、デバイス1910(例えば、「Nickの電話機」)は、(例えば、ディスプレイスクリーン1902によって開始された通知を送信するプロセスを介して)共有通知が表示されるべきであることを示すデータを受信する。
図19Eに示すように、通知が表示されるべきであることを示すデータを受信したことに応じて、デバイス1910(例えば、「Nickの電話機」)は、共有通知1960を表示する。共有通知1960は、バッド1906b(「Nickのバッド」)をディスプレイスクリーン1902にリンクして、ディスプレイスクリーン1902からメディアを受信するように構成することができることを示す。図19Eでは、デバイス1910は、共有通知1960上のジェスチャ1952e(例えば、プレスアンドホールドジェスチャ)を検出する。
図19Fに示すように、ジェスチャ1952eを検出したことに応じて、デバイス1910は、オーディオ共有コントロール1962を表示し、オーディオ共有コントロール1902の選択により、マルチメディアデバイスがデバイス(例えば、コントロールを表示しているデバイス、デバイス1910)に接続されたアクセサリデバイス(例えば、バッド1906b)とオーディオを共有することを可能にする。図19Fでは、デバイス1910は、オーディオ共有コントロール1962上のジェスチャ1952f(例えば、タップジェスチャ)を検出する。
図19Gでは、ジェスチャ1952fを検出したことに応じて、デバイス1910は、(例えば、上記で(例えば、図19Dで)開始されたメディアを共有するプロセスのステップとして)ディスプレイスクリーン1902とバッド1906bとの間でメディアを共有するプロセスの開始を引き起こす。メディアを共有するプロセスの開始を引き起こすことの一部として、デバイス1910は、ディスプレイスクリーン1902に図19Gに示すユーザインタフェース1970を表示させる命令を送信する。図19Gに示すように、ユーザインタフェース1970は、オーディオ共有コントロール1972、及びキャンセルコントロール1974(例えば、選択されると、ディスプレイスクリーン1902にユーザインタフェース1930を再表示させる)を含む。図19Gでは、リモコン1904は、オーディオ共有コントロール1972に向けられた選択ジェスチャ1950gを受け取り、選択ジェスチャ1950gのインジケーションを処理のためにディスプレイスクリーン1902に送信する。
図19Hに示すように、選択ジェスチャ1950gのインジケーションを受信したことに応じて、ディスプレイスクリーン1902は、ユーザインタフェース1980を表示する。ユーザインタフェース1980は、アクセサリデバイスがディスプレイスクリーン1902からメディアを受信することができるように、アクセサリデバイス(例えば、バッド1906b、「Nickのバッド」)(例えば、マルチメディアデバイスとアクセサリデバイスとの間でメディアを共有するプロセスの開始を引き起こしたデバイスにリンクされている)を構成する1つ以上の命令を含む。ここで、命令は、(例えば、ディスプレイスクリーン1902からメディアを受信するようにバッド1906bを構成するために)ユーザがバッド1906bにリンクされているケース上のボタンを保持しなければならないことを示す、「ボタンNickのバッドケースを保持してください」と述べる。図19Hでは、プレスアンドホールドジェスチャ1956hが、(例えば、通信リンク1914bによって示されるように)バッド1906b(例えば、「Nickのバッド」)にリンクされたケース1986(例えば、Nickのバッドケース」)において検出される。
図19Iでは、プレスアンドホールドジェスチャ1956hが検出された後に、ディスプレイスクリーン1902は、(例えば、通信リンク1908cによって示されるように)バッド1906bにリンクされ、バッド1906bに出力する(例えば、送信する)ことができるメディアを共有するように構成される(それにより、バッド1906bは、バッド1906bの1つ以上のスピーカを使用してメディアを出力(例えば、再生)することができる)。図19Iに示すように、ディスプレイスクリーン1902は、ユーザインタフェース1930を再表示し、ユーザインタフェース1930は、ここで、インジケーション1936a(例えば、「Nickのバッド」の隣のチェックマーク)と共に表示されるバッドコントロール1936を含む。インジケーション1936aは、バッド1906bがディスプレイスクリーン1902にリンクされ、ディスプレイスクリーン1902によって共有されたメディアを受信するように構成されていることを示す。特に、図19Hでは、(例えば、インジケーション1936aによって示される)バッド1906a及び(例えば、インジケーション1932aによって示される)1906bは、ディスプレイスクリーン1902からメディアを受信するように同時に構成されている。したがって、1906a及び1906bは、ディスプレイスクリーン1902によって現在再生されているメディアを同時に出力することができる。更に、図19C1において一時的共有オプション1938aが選択された実施形態では、バッド1906bは、一時的な期間にわたってメディアを受信するように構成されている。したがって、いくつかの実施形態では、ディスプレイスクリーン1902は、異なる期間にわたってメディアをバッド1906b及び1906aと共有するように構成される(例えば、ディスプレイスクリーン1902は、(例えば、永続的共有オプション1938bに関連して上述したように)手動構成解除のイベントまで、又はバッド1906bがメディアを受信するように構成されている期間とは異なる一時的期間の間、メディアをバッド1906aと共有するように構成される)。図19Iに示すように、ユーザインタフェース1930は、もはやオーディオ共有コントロール1934を含まない。いくつかの実施形態では、ユーザインタフェース1930は、最大量(例えば、2つ、3つ、5つ)のアクセサリデバイスがディスプレイスクリーン1902からメディアを受信するように同時に構成されているとの判定がなされたため、オーディオ共有コントロール1934をもはや含まない。いくつかの実施形態では、ユーザインタフェース1930は、最大量のアクセサリデバイスがディスプレイスクリーン1902からメディアを受信するように同時に構成されているかどうかに関わりなく、オーディオ共有コントロール1934を含み続ける。
図19Iに示すように、バッド1906bは、ディスプレイスクリーン1902に直接リンクされ、それにより、ディスプレイスクリーン1902は、出力されるためにメディアをバッド1906bと直接共有する。いくつかの実施形態では、バッド1906bは、ディスプレイスクリーン1902と直接リンクされず、それにより、ディスプレイスクリーン1902は、メディアをデバイス1910(例えば、19Hの)と共有し、デバイス1910は、出力されるためにメディアをバッド1906bと共有する。いくつかの実施形態では、バッド1906bがディスプレイスクリーン1902からメディアを受信するように構成されているとき、バッド1906bは、図19Iでデバイス1910にもはやリンクされていない。いくつかの実施形態では、バッド1906bは、バッド1906bがディスプレイスクリーン1902に直接リンクされているかどうかに関わりなく、デバイス1910にリンクされたままである(例えば、バッド1906bがディスプレイスクリーン1902からメディアを受信するように構成されている場合)。いくつかの実施形態では、バッド(例えば、1906a、1906b)は、ディスプレイスクリーン1902から動作可能な通信範囲の外に出てもよい。バッドが動作可能な通信範囲の外に移動する場合、バッドは、ディスプレイスクリーン1902上で現在再生しているメディアのオーディオをもはや再生しないことがある。バッドが動作可能な通信範囲に戻ると、バッドがディスプレイスクリーン1902に永続的に接続されている場合、又はバッドが一時的に接続されているが、時間が一時的な接続期間内である場合、バッドは、(例えば、更なるユーザ入力を必要とすることなく、又は再設定を必要とすることなく)ディスプレイスクリーン1902上で現在再生しているメディアのオーディオ部分を再開することができる。いくつかの実施態様では、ディスプレイスクリーン1902は、バッドを手動で接続解除する1つ以上のユーザインタフェースオプションを提供する。バッドを手動で接続解除することによって、永続的にリンクされていたバッドは、ディスプレイスクリーン1902のヘッドホンセクションにもはや表示されず、一時的にリンクされていたバッドは、一時的な期間の持続時間(例えば、残りの持続時間)にわたってリンクされない。
特に、(例えば、図19A~図19Iに関連して)上述したように、ディスプレイスクリーン1902は、(例えば、図19C1の選択ジェスチャ1950c1を介して)オーディオ共有コントロール1934が選択された後に、メディアをバッド1906bと共有するように自動的には構成されない。代わりに、ディスプレイスクリーン1902がメディアをバッド1906bと共有するように構成することができる前に、(例えば、図19C1の選択ジェスチャ1950c1を介して)ディスプレイスクリーン1902及び(例えば、図19Fの選択ジェスチャ1952fを介して)(例えば、バッド1906bと既にリンクされている)デバイス1910から、明示的な確認が必要とされる。両方のデバイスからのこの明示的な確認を必要とすることにより、セキュリティを強化し、かつ/又は意図しないオーディオの共有若しくは受信のリスクを低減する。例えば、図19A~図19FにおいてJane及びNickが彼らの各自のデバイスのそれぞれに対して制御を有していると仮定すると、上述した技術は、JaneのディスプレイスクリーンがNickの許可なしにNickのバッドによって出力されるメディアを共有することができるリスクを低減する。また、上述した技術は、NickがJaneの許可なしにNickのバッドを介してディスプレイスクリーン1902から受信されるメディアを聴くことができるリスクを低減する。したがって、上述した技術は、それぞれの各自のデバイスのユーザによって意図されるように、各デバイスが対応するデバイスからメディアを受信/出力している可能性を増大させる。
図20は、いくつかの実施形態に係る、電子デバイスをデバイス使用して複数のデバイスにおけるオーディオ再生を管理する方法を示すフロー図である。方法2000は、コンピュータシステム(例えば、100、300、500、1902)において実行される。方法1902のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法2000は、直感的方法、又は複数のデバイスにおけるオーディオ再生を管理することを提供する。この方法は、ユーザの認識的負担又は複数のデバイスにおけるオーディオ再生を管理することを軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式コンピューティングデバイスの場合には、ユーザがより高速かつより効率的に複数のデバイスにおけるオーディオ再生を管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
コンピュータシステム(例えば、1902)がメディア(例えば、オーディオメディア(例えば、音楽))を1つ以上のデバイスの第1のセット(例えば、1906a)に提供している間に(例えば、かつ、いくつかの実施形態では、(例えば、1つ以上の設定又は無線接続(例えば、Bluetooth又はWi-Fi接続)を介して)1つ以上のデバイスの第1のセットにおけるメディア再生を制御する(例えば、1つ以上のデバイスの第1のセットにメディアを再生させる)ように構成されている間に)、コンピュータは、1つ以上のデバイスの第1のセット(例えば、906a)にメディアを提供し続けている間に(例えば、1932)、メディアを1つ以上のデバイスの第2のセット(例えば、1906b)に提供する(かつ、いくつかの実施形態では、1つ以上のデバイスの第2のセットにおけるメディア再生を制御する)第1のプロセスを開始する(2002)。
メディアを1つ以上のデバイスの第2のセット(例えば、1906b)に提供するプロセスを開始することの一部として、コンピュータシステムは、1つ以上のデバイスの第2のセット(例えば、1906b)と通信している第1の外部デバイス(例えば、1910)(例えば、スマートフォン、スマートウォッチ、パーソナルコンピュータ、タブレットコンピュータ)から、メディアを1つ以上のデバイスの第2のセットに提供する第1のプロセスを進行する第1の要求(例えば、許可承認)を示す第1のデータを受信する(2004)。
メディアを1つ以上のデバイスの第2のセットに提供するプロセスを開始することの一部として、コンピュータシステムは、メディアを1つ以上のデバイスの第2のセット(例えば、1906b)に提供する第1のプロセスを進行する第2の要求(例えば、許可、承認)を示す第2のデータを受信し(2006)、第2のデータは、1つ以上のデバイスの第2のセット(例えば、1906b)と通信している第2の外部デバイス(例えば、1986)(例えば、1つ以上のデバイスの第2のセットと他のデバイスとの接続を容易にするデバイス(例えば、第2のデータの送信を引き起こす入力デバイスを含む1つ以上のデバイスの第2のセットのケース))から受信される、又は1つ以上のデバイスの第2のセットの第1のデバイス(例えば、1912)から受信される。
メディアを1つ以上のデバイスの第2のセット(例えば、1906b)に提供するプロセスを開始することの一部として、コンピュータシステムは、第1のデータ及び第2のデータを受信した後に(かつ、いくつかの実施形態では、第1のデータ及び第2のデータを受信したことに応じて)、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセット(例えば、1906b)に提供する(2008)。第1の外部デバイス、及び第2の外部デバイス又は1つ以上のデバイスの第2のセットの第1のデバイスの両方からデータを受信した後に、メディアを1つ以上のデバイスの第2のセットに提供することにより、メディアの意図されていない提供の可能性を低減し、コンピュータシステムのユーザ及びデバイスの第2のセットのユーザの両方のためのメディア提供のセキュリティを高める。間違った動作の可能性を低減し、セキュリティを強化することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに、適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を低減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステムは、表示生成構成要素(例えば、1902)と通信している。いくつかの実施形態では、第1のプロセスを開始する前に、コンピュータシステムは、表示生成構成要素を介して、メディア提供基準の第1のセットが満たされているとの判定に従って、選択されると第1のプロセスを開始させる第1の選択可能なユーザインタフェースオブジェクト(例えば、1934)(例えば、「オーディオ共有」アフォーダンス)を含む、第1のユーザインタフェース(例えば、1930)(例えば、デバイスのセットへのメディアの提供を制御するためのインタフェース、制御ユーザインタフェース)。いくつかの実施形態では、メディア提供基準の第1のセットが満たされないとの判定に従って、第1のユーザインタフェースは、第1の選択可能なユーザインタフェースオブジェクトを含まない。いくつかの実施形態では、第1のユーザインタフェース(例えば、1930)は、コンピュータシステムが1つ以上のデバイスの第1のセットにオーディオを提供しているという(例えば、第1の選択可能なユーザインタフェースオブジェクトと同時に表示される)インジケーション(例えば、グラフィカル及び/又はテキストのインジケーション)を含む。いくつかの実施形態では、メディア提供基準の第1のセットは、コンピュータシステムが所定の数(例えば、1、2、3未満、2未満)の1つ以上のデバイスのセットにメディアを提供していると満たされる。いくつかの実施形態では、所定のタイプの1つ以上のデバイスのセット(例えば、無線ヘッドホン)にメディアを提供しているときに満たされる。第1のプロセスを開始するためのインタフェースオブジェクトを条件付きで表示することにより、いつプロセスが開始のために利用可能であるかに関するフィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。システムがメディアを所定の数のデバイスに現在提供しているかどうかに基づいて、第1のプロセスを開始するためのインタフェースオブジェクトを条件付きで表示することにより、いつプロセスが開始のために利用可能であるかに関するフィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1のプロセスは、第1のデータを受信する前に、1つ以上のデバイスの第2のセット(例えば、1906b)と通信している第1の外部デバイス(例えば、1910)への、メディアを1つ以上のデバイスの第2のセットに提供することを許可する第1の要求の送信を開始すること(例えば、1つ以上の中間デバイス(例えば、サーバ、ネットワークデバイス、ルータ)を介して送信すること、又は送信させること)を含む。いくつかの実施形態では、要求は、選択されると第1のデータの送信を引き起こす選択可能なユーザインタフェースオブジェクト(例えば、1960e)を第1の外部デバイス(例えば、1912)に表示させる(例えば、要求は、命令である)。メディアの提供を許可する要求を送信することにより、第1の外部デバイスに第1のデータを促す能力をコンピュータシステムに提供し、メディア提供プロセスの有用性を改善する。改善された有用性を提供することにより、ユーザ-システム対話を高め、システムの使用を促進し、これによりコンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1の外部デバイスへの第1の要求の送信を開始することの一部として、コンピュータシステム(例えば、1902)は、複数の潜在的な外部デバイス(例えば、1912、1906b)への要求(例えば、メディアを共有する要求)のブロードキャストを開始する(例えば、ブロードキャストする、又は1つ以上の中間デバイス(例えば、サーバ、ネットワークデバイス、ルータ)によってブロードキャストさせる)(例えば、潜在的に複数の受信者への不特定送信)。要求をブロードキャストすることにより、第1のデータを提供することが可能なデバイスによる要求の受信を最適化し、メディア提供プロセスの有用性を改善する。改善された有用性を提供することにより、ユーザ-システム対話を高め、システムの使用を促進し、これによりコンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステムは、第1の要求の送信を開始するとき(例えば、第1の外部デバイスと通信していない(又はペアリングされた関係ではない))又は1つ以上のデバイスの第2のセットと通信していない。
いくつかの実施形態では、第1のデータを受信したことに応じて(かつ、いくつかの実施形態では、第2のデータを受信する前に)、コンピュータシステムは、第2の選択可能なユーザインタフェースオブジェクト(例えば、1972)を含む確認ユーザインタフェース(例えば、1970)を表示する。いくつかの実施形態では、コンピュータは、第2の選択可能なユーザインタフェースオブジェクトに対応する入力を(例えば、1950gを介して)受け取るいくつかの実施形態では、第2の選択可能なユーザインタフェースオブジェクトに対応する入力を受け取ったことに応じて、コンピュータシステムは、第2の外部デバイスにおいて入力(例えば、特定の入力)を提供するプロンプト(例えば、1980)(例えば、グラフィカルプロンプト、テキストプロンプト)を表示する、又は1つ以上のデバイスの第2のセットの第1のデバイスにおいて入力(例えば、特定の入力)を提供するプロンプト(例えば、1980)を表示する。いくつかの実施形態では、確認ユーザインタフェースは、第2のデータを受信する前に表示される。第2の外部デバイスにおいて又は1つ以上のデバイスの第2のセットの第1のデバイスにおいて入力を提供するプロンプトを表示することにより、システム-ユーザ対話を改善し、メディア提供プロセスを進行させるのに必要なステップに関するフィードバックをユーザに提供する。ユーザ-システム対話を改善し、システムの使用を促進することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、メディアを1つ以上のデバイスの第1のセットに提供している間に、メディアを1つ以上のデバイスの第2のセットに提供することの一部として、コンピュータシステムは、メディアが1つ以上のデバイスの第2のセットに提供されているというインジケーション(例えば、1936)(例えば、グラフィカルインジケーション、テキストインジケーション)を表示する(かつ、いくつかの実施形態では、メディアが1つ以上のデバイスの第1のセットに提供されているというインジケーションも表示する)。システムがメディアを1つ以上のデバイスの第2のセットに提供しているというインジケーションを表示することにより、どのデバイスがメディアを現在提供されているかに関するフィードバックをユーザに提供する。改善された視覚的フィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第1のプロセスを開始する前に、1つ以上のデバイスの第2のセット(例えば、1906b)は、第1の外部デバイス(例えば、1912)によって提供されるメディアを再生するように構成されている。
いくつかの実施形態では、コンピュータシステムは、第1のユーザアカウントに関連付けられている(例えば、サインインしている)。いくつかの実施形態では、第1の外部デバイスは、第1のユーザアカウントとは異なる第2のユーザアカウントに関連付けられている。いくつかの実施形態では、メディアを1つ以上のデバイスの第2のセットに提供することは、コンピュータシステムと1つ以上のデバイスの第2のセットとの間の直接接続(例えば、無線接続)を介して行われる。いくつかの実施形態では、メディアを1つ以上のデバイスの第2のセットに提供することは、メディアを第1の外部デバイスに提供して、1つ以上のデバイスの第2のセットに提供することを含む。
いくつかの実施形態では、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供することの一部として、一時的共有オプション(例えば、1938a)の選択に対応する入力(例えば、1950c1)(例えば、第1のデータを受信する前にコンピュータシステムによって表示されていた共有の持続時間を選択するためのユーザインタフェース上で受けられた入力)が受け取られたとの判定に従って、コンピュータシステムは、第1の所定の期間以下にわたってメディアを1つ以上のデバイスの第2のセットに提供する(例えば、オーディオの提供は、所定の期間の後で自動的に(例えば、ユーザ入力を必要とせずに)中止/停止/終了される)。いくつかの実施形態では、メディアを1つ以上のデバイスの第1のセットに提供し続けている間に、メディアを1つ以上のデバイスの第2のセットに提供することの一部として、非一時的(例えば、不定の)共有オプションの選択に対応する入力(例えば、第1のデータを受信する前にコンピュータシステムによって表示されていた共有の持続時間を選択するためのユーザインタフェース上で受け取られた入力)が受信されたとの判定に従って、コンピュータシステムは、メディアを1つ以上のデバイスの第2のセットに提供することに関する所定の時間制限を構成することなく、メディアを1つ以上のデバイスの第2のセットに提供する。いくつかの実施形態では、第1の所定の期間は、現在時刻から所定の期間(例えば、メディアの提供の開始後、又は一時的共有オプションの選択に対応する入力の受信後の1時間)、現在再生しているメディアに基づいて選択された所定の期間(例えば、現在再生しているメディア(例えば、映画)内の残っている時間)、及び所定のイベントまで(例えば、現在の日付の終わりまで、日没まで)の所定の期間からなる群から選択される。いくつかの実施形態では、非一時的(例えば、不定の)共有オプション(例えば、1938b)の選択に対応する入力(例えば、第1のデータを受信する前にコンピュータシステムによって表示されていた共有の持続時間を選択するためのユーザインタフェース上で受け取られた入力)との判定に従って、メディアを1つ以上のデバイスの第2のセットに提供することに関する所定の時間制限を構成することなく、メディアを1つ以上のデバイスの第2のセットに提供する。第1の所定の期間以下にわたってメディアを1つ以上のデバイスの第2のセットに提供するオプションを提供することにより、共有の持続時間を制限するオプションをユーザに提供し、これによりセキュリティを高め、意図しないオーディオの共有のリスクを低減することができる。追加の制御オプションを提供し、セキュリティを高めることにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
方法2000に関連して上述したプロセスの詳細(例えば、図20)はまた、後述する方法にも類似する方式で適用可能であることに留意されたい。例えば、方法2000は、方法1700を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。簡潔にするために、これらの詳細は、以下で繰り返さない。
図21A~図21Fは、いくつかの実施形態に係る、音声入力を管理するための例示的なユーザインタフェースを示す。具体的には、図21A~図21Fは、複数のユーザから音声入力が検出され、検出された音声入力に応じてメディアが出力されるシナリオを示す。これらの図におけるユーザインタフェースは、図18及び図23に示すプロセスを含む、後述するプロセスを例示するために使用される。
図21Aは、キッチンスピーカ1206、ダイニングルームスピーカ1216、寝室スピーカ1236、リビングルームスピーカ1246、リビングルームスピーカ1248、サンルームスピーカ1256、及びサンルームスピーカ1258などの複数のスピーカデバイスを含むホーム1202の図を示す。図21Aでは、デバイスは、ホーム1202及び/又はホーム1202の特定の部屋に割り当てられていることを含む、図12に関して上述したように、1つ以上のプロパティを有する。
ホーム1202の図に加えて、図21Aはまた、(例えば、図17Nに関して)上述したような1つ以上の技術を使用してユーザインタフェース1770を表示するデバイス600も示す。ユーザインタフェース1770は、電話グループアフォーダンス1770、リビング及びダイニングルームグループアフォーダンス2172、寝室グループアフォーダンス2178、及びサンルームグループアフォーダンス2180などの複数のグループアフォーダンスを含む。図21Aでは、グループアフォーダンスは、図17Nに関連して上述したように、それぞれの出力アフォーダンスに対応する。更に、リビング及びダイニングルームグループアフォーダンス2172は、(例えば、図17A~図17Pに関連して)上述したものと類似の1つ以上の技術を使用して作成されたグループ化を識別する。いくつかの実施形態では、キッチングループアフォーダンスもまた、ユーザインタフェース1770内に表示される、又は図21Aのユーザインタフェース1770内に表示される他のグループアフォーダンスのうちの1つの表示を置き換える。
図21Aに示すように、Jane及びJohnは、ダイニングルームスピーカ1216に近接して位置している。図21Aでは、ダイニングルームスピーカ1216は、音声入力2150a(例えば、Janeによって発言された「Hey Assistant、ダイニングルーム及びリビングルームグループ上でクラシック音楽を再生して」)を検出する。ここで、音声入力2150aは、(例えば、図17A~図17Pに関して)上述したものと類似の1つ以上の技術を使用してグループ化された特定のグループスピーカ(例えば、「ダイニングルーム及びリビングルームグループ」)上でクラシック音楽の再生を開始する命令に対応する。
図21Bに示すように、音声入力2150aを検出したことに応じて、ダイニングルームスピーカ1216は、音声入力2150aと一致する動作の実行を開始する。例えば、図21Bでは、ダイニングルームスピーカ1216は、ダイニングルームスピーカ1216、リビングルームスピーカ1246、及びリビングルームスピーカ1248(例えば、ダイニングルーム及びリビングルームグループに割り当てられたスピーカ)にクラシック音楽を出力させる命令を送信する。図21Bでは、クラシック音楽の出力は、各スピーカの上に示されるクラシック出力インジケータ2114a、2114b、2114cによって表される。特に、図21Bでは、キッチン、寝室、及びサンルーム内のスピーカは、それらがメディアを再生していないため(例えば、それらがダイニングルーム及びリビングルームグループに関連付けられていないため)、それらの上に出力インジケータを含まない。
図21Bでは、ダイニングルームスピーカ1216は、音声入力2150b(例えば、Janeによって発言された「Hey Assistant、ジャズ音楽を再生して」)を(例えば、クラシック音楽をスピーカ上で再生している間に)検出する。ここで、音声入力2150bは、ジャズ音楽の再生を開始する命令に対応する。しかしながら、音声入力2150bは、(例えば、音声入力2150aとは対照的に)このタイプの音楽が再生されるべきスピーカのグループのインジケーションを含まない。音声入力2150bを検出したことに応じて、図21Aの音声入力2150aを発言した同じユーザ(例えば、「Jane」)によって音声入力2150bが発言されたとの判定がなされる。
図21Cに示すように、音声入力2150aを発言した同じユーザ(例えば、「Jane」)によって音声入力2150bが発言されたとの判定がなされたため、ダイニングルームスピーカ1216、リビングルームスピーカ1246、及びリビングルームスピーカ1248(例えば、ダイニングルーム及びリビングルームグループに割り当てられたスピーカ)は、クラシック音楽の代わりにジャズ音楽を出力させられる。更に、ダイニングルーム及びリビングルームスピーカは、音声入力2150bがスピーカのグループのインジケーションを含まなかったにもかかわらず、ジャズ音楽を出力させられる。図21Cでは、ジャズ音楽の出力は、各スピーカの上に示されるジャズ出力インジケータ2116a、2116b、及び2116cによって表される。
図21Cでは、ダイニングルームスピーカ1216は、音声入力2152c(例えば、Johnによって発言された「Hey Assistant、ロック音楽を再生して」)を(例えば、ジャズ音楽をスピーカ上で再生している間に)検出する。ここで、音声入力2152cは、ロック音楽の再生を開始する命令に対応する。しかしながら、音声入力2152cは、音声入力2150aでリンクされた、このタイプの音楽が再生されるべきスピーカのグループのインジケーションを含まない。音声入力2152cを検出したことに応じて、音声入力2152cが図21Bの音声入力2150b(例えば、及び/又は図21Aの音声入力2150a)を発言したユーザ(例えば、「Jane」)とは異なるユーザ(例えば、「John」、又はJaneとして認識されないユーザ)によって発言されたとの判定がなされる。いくつかの実施形態では、音声入力が同じ又は異なるユーザによって発言されたかの判定は、1つ以上の発話認識アルゴリズムを介して行われる。いくつかの実施形態では、人々のうちの1人以上に関連付けられたバイオメトリックデータは、データベースに記憶され、音声入力が同じユーザに対応するかどうかを判定するためにアクセスされる。いくつかの実施形態では、新しい音声入力が以前の音声入力とは異なるユーザによって発言されたものとして認識されるとき、異なるユーザは、特定のユーザとして(例えば、記憶されたバイオメトリックユーザを介して)及び/又は既知のユーザとして認識される。いくつかの実施形態では、新しい音声入力が以前の音声入力とは異なるユーザによって発言されたものとして認識されるとき、異なるユーザは、(例えば、異なるユーザに関して記憶された十分なバイオメトリックデータが存在しないため)未知のユーザとして認識される。
図21Dに示すように、音声入力2152cが音声入力2150b(及び/又は2150a)を発言したユーザ(例えば、「Jane」)とは異なるユーザ(例えば、「John」)によって発言されたとの判定がなされたため、ダイニングルームスピーカ1216は、オーディオ出力2148d(例えば、「ここでですか?、又はリビングルーム及びダイニングルームグループでですか?」)を提供する。オーディオ出力2148dは、スピーカのいずれかがメディアを出力させられる前に、どこでロック音楽を出力するかに関する確認をダイニングルームスピーカ1216が必要とすることを示す。具体的には、オーディオ出力2148は、ロック音楽をダイニングルームスピーカ1216単独で出力する(例えば、「ここで」)、又はダイニングルームスピーカ1216、リビングルームスピーカ1246、及びリビングルームスピーカ1248上で出力する(例えば、「ダイニングルーム及びリビングルームグループ」)選択を行うことができることを示す。特に、ダイニングルームスピーカ1216は、Johnが、自身の音声入力(例えば、デバイスグループ識別子を有さない音声入力2152c)がJaneの音声入力(例えば、音声入力2150b)のスピーカの同じグループに影響を及ぼすことを意図しているかどうかを判定することの不確実性のために、確認を得るためのオーディオ出力2148dを提供する。図21Dでは、オーディオ出力2148dの前及び後に、ジャズ音楽は、ダイニングルーム及びリビングルームスピーカによって出力され続ける。図21Dでは、音声入力2152cが以前の音声入力を発言した同じユーザ(例えば、「Jane」)からのものであったとの判定がなされた場合、ロック音楽は、ダイニングルーム及びリビングルームスピーカによって出力されることになる。
図21Eでは、ダイニングルームスピーカ1216は、前のコマンドがダイニングルームスピーカ1216のみに適用されるべきであることを示す音声入力2152d(「ここで」)を検出する。図21Fに示すように、音声入力2152dを検出したことに応じて、ダイニングルームスピーカ1216は、ジャズ音楽を出力することを停止させられ、ロック出力インジケータ2118aによって示されるように、ロック音楽を出力することを開始させられる。特に、図21Eに示すように、音声入力2152dが検出されたため、リビングルームスピーカ1246及び1248は、(例えば、ジャズ音楽インジケータ2116b及び2116cによって示されるように)ジャズ音楽を出力し続ける。いくつかの実施形態では、前のコマンドがダイニングルーム及びリビンググループに適用されるべきであることを示す音声入力を検出したことに応じて、ロック音楽は、ダイニングルーム及びリビングスピーカによって出力され、ジャズ音楽は、出力されない(例えば、ダイニングルーム及びリビングルームスピーカは、音楽を出力することを停止する)。
図21Fに示すように、音声入力2152dを検出したことに応じて、ユーザインタフェース1770は、リビングルーム(例えば、2182)及びダイニングルーム(例えば、2184)のための別個のグループアフォーダンスを表示して、(例えば、図17A~図17Pに関して上述したように)ダイニングルーム及びリビングルームが異なるメディアを現在出力している、かつ/又は同期していない若しくは同じグループに含まれないことを反映する。したがって、ユーザインタフェース1710は、リビング及びダイニングルームグループアフォーダンス2172を含まない。いくつかの実施形態では、音声入力2152を検出したことに応じて、ユーザインタフェース1710は、(例えば、ユーザインタフェース1710上の任意のユーザ入力なしに)自動的に更新されて、別個のダイニングルーム及びリビングルームグループアフォーダンスに対応する出力アフォーダンスを表示し、リビング及びダイニングルームグループアフォーダンス2172に対応する出力アフォーダンスの表示を停止する。
図22A~図22Fは、いくつかの実施形態に係る、音声入力を管理するための例示的なユーザインタフェースを示す。具体的には、図22A~図22Fは、複数のユーザから音声入力が検出され、検出された音声入力に応じてタイマーが制御されるシナリオを示す。これらの図におけるユーザインタフェースは、図18及び図23に示すプロセスを含む、後述するプロセスを例示するために使用される。
図22Aは、ダイニングルームスピーカ1216などの複数のデバイスを含むホーム1202の図を示す。図22Aでは、デバイスは、図12で上述したように、1つ以上のプロパティを有し、ホーム1202及び/又はホーム1202の特定の部屋に割り当てられる。図22Aに示すように、Jane及びJohnは、ダイニングルームスピーカ1216の周囲に位置している。図22Aでは、ダイニングルームスピーカ1216は、音声入力2250a(例えば、Janeによって発言された「Hey Assistant、キッチンタイマーを5分に設定して」)を検出する。ここで、音声入力2150aは、「キッチン」と名付けられたタイマー(例えば、キッチンタイマー)を5分間にわたって開始する命令に対応する。
図22Bに示すように、音声入力2250aを検出したことに応じて、ダイニングルームスピーカ1216は、キッチンタイマーを開始させる。加えて、ダイニングルームスピーカ1216は、キッチンタイマーが開始されたことを示すオーディオ出力2248bを提供する。
図22Cに示すように、ダイニングルームスピーカ1216は、音声入力2250c(例えば、Janeによって発言された「タイマーを一時停止して」)を検出する。図22Cでは、音声入力2250cを検出したことに応じて、(例えば、図21B~図21Dに関して)上述した技術と同様の技術を使用して、音声入力2250aと同じユーザ(例えば、「Jane」)によって音声入力2250cが発言されたとの判定がなされる。
図22Dに示すように、音声入力2250cが同じユーザによって発言されたとの判定がなされたため、ダイニングルームスピーカ1216は、キッチンタイマーを一時停止させる。加えて、ダイニングルームスピーカ1216は、オーディオ出力2248d(例えば、「キッチンタイマーを一時停止しました」)を提供して、キッチンタイマーが一時停止されたことを示す。
図22Eに示すように、ダイニングルームスピーカ1216は、音声入力2252e(例えば、Johnによって発言された「Hey Assistant、タイマーを再開して」)を検出する。図22Eでは、音声入力2252eを検出したことに応じて、(例えば、図21B~図21Dに関して)上述した技術と同様の技術を使用して、検出された以前の音声入力(例えば、音声入力2250c)を発言したユーザとは異なるユーザ(例えば、「John」、又はJaneとして識別されなかったユーザ)によって音声入力2252eが発言されたとの判定がなされる。
図22Fに示すように、音声入力2252eが異なるユーザによって発言されたとの判定がなされたため、ダイニングルームスピーカ1216は、キッチンタイマーを再開することなく(例えば、音声入力2252eに関連付けられた動作を実行することなく)、オーディオ出力2248f(例えば、「本当にJaneのキッチンタイマーを再開したいですか」)を提供する。ここで、オーディオ出力2248fは、異なるユーザ(例えば、「John」)がキッチンタイマーを最初に開始又は設定したユーザ(例えば、「Jane」)によって開始されたキッチンタイマーをキャンセルすることを意図しているかどうかに関する確認を得ることを意図している。Janeが音声入力2252eと同じ語句を発言する実施形態では、キッチンのタイマーは、ダイニングルームスピーカ1216がオーディオ出力2248fを提供することなく、再開される。
図21A~図21F及び図22A~図22Fに記載され上述した技術と同様の技術を組み込む、1つ以上の他のシナリオ(例えば、音楽、アラーム、タイマー、ナビゲーションなどのアプリケーションに関するシナリオ)を実現することができる。例えば、いくつかの実施形態では、ダイニングルームスピーカ1216は、午前6:00に設定された「起床」と名付けられたアラーム(又はタイマー)を開始する、Janeからの音声入力を受信することができる。これらの実施形態のいくつかでは、ダイニングルームスピーカ1216は、午前8:00に設定された「起床」と名付けられた別のアラーム(又はタイマー)を開始する、Johnからの後続の音声入力を受信することができる。実施形態の第1のセットでは、両方のアラームを開始した後に、ダイニングルームスピーカ1216は、起床アラームをキャンセルするJaneからの音声入力を受信し、音声入力を受信したことに応じて、かつJaneが以前の音声入力(例えば、8:10に設定された「起床」と名付けられたアラームのときにJohnが提供した)を提供しなかったため、ダイニングルームスピーカ1216は、JaneがJaneの起床タイマー又はJohnの起床タイマーをキャンセルすることを意図しているかを確認するオーディオ出力を提供する。実施形態の第2のセットでは、両方のアラームを開始した後に、ダイニングルームスピーカ1216は、起床アラームをキャンセルするJohnからの音声入力を受信し、音声入力を受信したことに応じて、かつJohnが以前の音声入力を提供したため、ダイニングルームスピーカ1216は、Johnが開始したタイマーをキャンセルする。実施形態の第3のセットでは、両方のアラームを開始した後に、ダイニングルームスピーカ1216は、起床アラームをキャンセルするJane又はJohnからの音声入力を受信し、音声入力を受信したことに応じて、ダイニングルームスピーカ1216は、確認するための出力を提供することなく、音声入力を提供した対応するユーザによって開始されたアラームをキャンセルする。
図23は、いくつかの実施形態に係る、電子デバイスを使用して音声入力を管理する方法を示すフロー図である。方法2300は、表示生成構成要素及び1つ以上の入力デバイスと通信しているコンピュータシステム(例えば、100、300、500、600、650)において実行される。方法2300のいくつかの動作は、任意選択的に組み合わされ、いくつかの動作の順序は、任意選択的に変更され、いくつかの動作は、任意選択的に省略される。
後述するように、方法2300は、音声入力を管理するための直感的な方法を提供する。この方法は、音声入力を管理するためのユーザの認識的負担を軽減し、それにより、より効率的なヒューマン-マシンインタフェースを作り出す。バッテリ動作式のコンピューティングデバイスの場合には、ユーザが再生をより高速かつより効率的に管理することを可能にすることにより、電力が節約され、バッテリ充電の間隔が増す。
コンピュータシステムは、第1のユーザ(例えば、音声認識及び/又は認証を介して識別されたユーザ)から、動作(例えば、メディア再生、タイマーを開始すること、アラームを開始すること)を実行する第1の要求(例えば、口頭要求、自然言語要求、発言)を受信する(2302)。いくつかの実施形態では、第1の要求は、コンピュータシステムで動作している又はコンピュータシステムと通信しているデジタルアシスタントによって処理される。
コンピュータシステムは、第1の要求に応じて、第1の動作(例えば、2150a、2114a~2114c)の実行を開始し(2304)、第1の動作は、少なくとも第1の実行パラメータ(例えば、2150a)(例えば、動作を実行するための1つ以上のコンピュータシステムのセット(例えば、「グループ1」、「全てのデバイス」)、ユーザ/要求者の識別情報、動作のタイプ(例えば、メディア再生、タイマーを開始すること)、(例えば、メディア再生、メディア識別子(例えば、クラシック音楽、ロック音楽、特定の曲)の)実行を制御する変数)に基づいて実行される。いくつかの実施形態では、第1の要求は、第1の実行パラメータを含む(例えば、要求は、「グループ1で音楽を再生して」を含む)。
コンピュータシステムは、第1の動作(例えば、2150a、2114a~2114c、2248b)の実行を開始した後に(例えば、第1の動作の実行が進行中である間に)、コンピュータシステムは、1つ以上の入力デバイスを介して、動作(例えば、メディア再生、タイマーを開始すること、アラームを開始すること)を実行する第2の要求(例えば、2150b、2152c)(例えば、口頭要求、自然言語要求、発言)を受信する(2306)。
第2の要求を受信したことに応じて(2308)、かつ第2の要求が第1のユーザによって行われた(例えば、2150b、2250a)との判定に従って(例えば、音声認識に基づいて)、コンピュータシステムは、第2の動作(例えば、2150b、2114a~2114c、2248c、2248d)(例えば、メディア再生、タイマーを開始すること、アラームを開始すること)の実行を開始し(例えば、実行する)(2310)、第2の動作は、少なくとも第1の実行パラメータに基づいて実行される。いくつかの実施形態では、コンピュータシステムは、第1の実行パラメータが第2の要求において指定されることを必要とせずに、第2の動作の実行のために、第1の動作の第1の実行パラメータを自動的に採用する。
第2の要求(例えば、2152c)を受信したことに応じて(2308)、かつ第2の要求が第1のユーザとは異なる第2のユーザ(例えば、(例えば、音声認識を介して識別された)明確に定義された識別情報を有するユーザ)、第1のユーザではないものとして識別されたが、特定の認識された識別情報を有さないユーザ)によって行われたとの判定に従って、コンピュータシステムは、第1の動作(例えば、2116a~2116c)とは異なる第3の動作(例えば、2248f)の実行を開始する(例えば、実行する)(2312)。要求が第1の要求と同じユーザによって行われたかどうかに基づいて、第2の要求に応じて異なる動作を実行することにより、最適な動作を実行するために必要とされるユーザ入力(例えば、第1又は第2の動作を実行するかを定義する入力)の数を低減する。更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を実行することにより、デバイスの操作性が高められ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第2の要求(例えば、2152c、2150b、2252e)は、第1の動作の実行が進行中である間に、受信される。いくつかの実施形態では、第1の動作の効果(例えば、再生動作の結果としての音楽再生)が進行中である間に。
いくつかの実施形態では、第1の実行パラメータ(例えば、2152c、2150b、2252e、2250cを発言した人)は、第1のユーザの識別情報である。ユーザが自身の識別情報を提供する必要なしに、第1のユーザの識別情報に基づいて第1及び第2の動作の両方を実行することにより、第1及び第2の動作を実行するために必要とされる入力の数を低減する。更なるユーザ入力を必要とせずに条件のセットが満たされたときに動作を実行することにより、デバイスの操作性が高められ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力をもたらすようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、コンピュータシステムは、1つ以上の出力デバイス(例えば、オーディオ生成構成要素(例えば、スピーカ)、表示生成構成要素)と通信している。いくつかの実施形態では、第3の動作は、1つ以上の出力デバイスを介して、第4の動作(例えば、メディア再生、タイマーを開始すること、アラームを開始すること)を実行するための1つ以上のデバイスのセット(例えば、コンピュータシステムを含むデバイスのセット)を識別する入力(例えば、オーディオ入力)の要求(例えば、2148d、2248f)(例えば、視覚要求(例えば、テキスト又はグラフィック)、オーディオ要求(例えば、口頭語句))を出力することを含む。いくつかの実施形態では、第4の動作は、少なくとも第2の実行パラメータ(例えば、第2の要求に含まれていた(例えば、メディア再生、メディア識別子(例えば、クラシック音楽、ロック音楽、特定の曲)の)実行を制御する変数)に基づいて実行される。動作を実行するためのデバイスのセットを識別する入力の要求を出力することにより、誤ったデバイスのセットにおいて動作を実行する可能性が低減される。動作を間違って実行する可能性を低減しながら、動作を実行することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに、適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を低減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の動作は、1つ以上のデバイスの第1のセット(例えば、1216、1246、1248)(例えば、コンピュータシステムを含むデバイスのセット)において実行される(例えば、それによって実行される)。いくつかの実施形態では、第4の動作(例えば、2118a)を実行するための1つ以上のデバイスのセットを識別する入力の要求(例えば、2148d)を出力した後に、コンピュータシステムは、1つ以上の入力デバイスを介して、1つ以上のデバイスの第1のセットとは異なる1つ以上のデバイスの第2のセット(例えば、1216)(例えば、コンピュータシステムを含むデバイスのセット)を識別する第1の入力(例えば、2152c、2252e)を受け取る。いくつかの実施形態では、第1の入力を受け取ったことに応じて、コンピュータシステムは、1つ以上のデバイスの第2のセットにおける第4の動作の実行を開始する。出力された要求の後に受け取られた入力によって識別されたデバイスの第2のセットにおいて第4の動作を実行することにより、第4の動作の実行に対する追加の制御をユーザに提供する。ユーザに追加の制御を提供することにより、デバイスの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援しユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがデバイスをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、デバイスのバッテリ寿命を改善する。
いくつかの実施形態では、第1の動作の実行を開始した後、かつ第4の動作(例えば、2118a)の実行を開始する前に、コンピュータシステムは、1つ以上のデバイスの第1のセット(例えば、1216、1246、1248)のメンバとして、少なくとも第1の外部デバイス(例えば、1216)(例えば、スマートフォン、デジタルメディアプレーヤ、パーソナルコンピュータ)に識別可能である。いくつかの実施形態では、第4の動作(例えば、2118a)の実行を開始した後に、コンピュータシステムは、1つ以上のデバイスの第2のセットのメンバとして、少なくとも第1の外部デバイス(例えば、1216)に識別可能である。いくつかの実施形態では、コンピュータシステムは、1つ以上のデバイスの第1のセットのメンバとして、もはや識別可能ではない。コンピュータシステムの識別可能なメンバシップを変更することにより、コンピュータシステムの現在のメンバシップに関するフィードバックをユーザに提供する。改善されたフィードバックをユーザに提供することにより、コンピュータシステムの操作性を向上させ、(例えば、デバイスを操作する/デバイスと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-デバイスインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第4の動作を実行するための1つ以上のデバイスのセットを識別する入力の要求は、第4の動作を実行するための可能な(例えば、可能性のある、予測される)実行パラメータ(例えば、「ここで」又は「このデバイスで」)を識別することを含む。いくつかの実施形態では、第2の動作は、第1の要求を実行するために使用される同じ複数のデバイスを使用して実行される。
いくつかの実施形態では、第1の動作(例えば、2114a~2114c)の実行を開始した後に(例えば、第1の動作の実行が進行中である間に)、コンピュータシステムは、1つ以上の入力デバイスを介して、動作(例えば、メディア再生、タイマーを開始すること、アラームを開始すること)を実行する第3の要求(例えば、2150b)(例えば、口頭要求、自然言語要求、発言)を受信する。第3の要求に応じて、コンピュータシステムは、第5の動作(例えば、メディア再生、タイマーを開始すること、アラームを開始すること)の実行を開始する。いくつかの実施形態では、第5の動作の実行は、第4の要求を行ったユーザの識別情報に関係なく行われる(例えば、第5の動作は、異なるユーザに対して同じ方法で実行される)。ユーザ識別情報とは無関係に特定の動作を実行することにより、全てのユーザにわたって一貫して実行される特定の動作をユーザに提供する。改善された、かつ/又は追加の制御オプションを提供することにより、コンピュータシステムの操作性を向上させ、(例えば、コンピュータシステムを操作する/コンピュータシステムと対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)ユーザ-システムインタフェースをより効率的にし、加えて、ユーザがコンピュータシステムをより迅速かつ効率的に使用できるようにすることによって、電力使用量を削減し、コンピュータシステムのバッテリ寿命を改善する。
いくつかの実施形態では、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定は、第2のユーザの特定の識別情報の判定を含む。いくつかの実施形態では、第2の要求は、口頭要求/発言であり、識別は、音声認識を介して行われる。
いくつかの実施形態では、第2の要求が第1のユーザとは異なる第2のユーザによって行われたとの判定は、第2のユーザの特定の識別情報の判定を含まない(例えば、第2の要求は、第1のユーザプロファイルを含む任意のユーザプロファイルに一致しないユーザによって行われる)。
いくつかの実施形態では、第1の動作(及び、いくつかの実施形態では、また第2の動作)は、メディア(例えば、音楽)を再生すること(例えば、2114a~2114c)、タイマーを開始すること(例えば、2248b)、アラームを開始すること、及びナビゲーション命令を提供することからなる群から選択される。
方法2300に関して上述したプロセス(例えば、図23)の詳細はまた、上述した方法にも類似の方式で適用可能であることに留意されたい。例えば、方法1800は、方法2300を参照して上述した様々な方法の特性のうちの1つ以上を任意選択的に含む。例えば、方法1800の動作1808は、方法2300の2304に記載されているようなアクションを実行するためのスピーカの新しいグループを作成するために実行することができる。簡潔にするために、これらの詳細は、以下で繰り返さない。
上記は、説明を目的として、特定の実施形態を参照して記述されている。しかしながら、上記の例示的な論考は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。本技術の原理、及びそれらの実際の適用を最もよく説明するために、実施形態が選択及び記載されている。それにより、他の当業者は、意図された具体的な用途に適するような様々な修正を用いて、本技術及び様々な実施形態を最も良好に利用することが可能となる。
添付図面を参照して、本開示及び例を十分に説明してきたが、様々な変更及び修正が、当業者には明らかとなるであろうことに留意されたい。そのような変更及び修正は、特許請求の範囲によって定義されるような、本開示及び例の範囲内に含まれるものとして理解されたい。
上述したように、本技術の一態様は、様々なソースから入手可能なデータを収集及び使用して、ユーザへのオーディオメディアの配信を改善することである。本開示は、いくつかの例において、この収集されたデータが、特定の人を一意に特定する個人情報データ、又は特定の人に連絡する若しくはその所在を突き止めるために使用できる個人情報データを含み得ることを考察する。そのような個人情報データとしては、人口統計データ、位置ベースのデータ、電話番号、電子メールアドレス、ツイッターID、住所、オーディオメディアサービス(例えば、音楽ストリーミングサービス)のアカウント情報及び/若しくはユーザの好み、ユーザの健康若しくはフィットネスレベルに関するデータ若しくは記録(例えば、バイタルサイン測定値、服薬情報、運動情報)、誕生日、又は任意の他の識別情報若しくは個人情報を挙げることができる。
本開示は、本技術におけるそのような個人情報データの使用がユーザの利益になる使用であり得る点を認識するものである。例えば、よりユーザの興味を引くオーディオメディアを提供するために、個人情報データが使用されてもよい。したがって、そのような個人情報データの使用は、ユーザによる提供されるコンテンツの計算された制御を可能にする。更に、ユーザに利益をもたらす、個人情報データに関する他の使用もまた、本開示によって考察される。例えば、健康データ及びフィットネスデータは、ユーザの全般的なウェルネスについての洞察を提供するために使用することができ、又は、ウェルネスの目標を追求するための技術を使用している個人への、積極的なフィードバックとして使用することもできる。
本開示は、そのような個人情報データの収集、分析、開示、転送、記憶、又は他の使用に関与するエンティティが、確固たるプライバシーポリシー及び/又はプライバシー慣行を遵守することを考察する。具体的には、そのようなエンティティは、個人情報データを秘密として厳重に保守するための、業界又は政府の要件を満たしているか又は上回るものとして一般に認識されている、プライバシーのポリシー及び慣行を実施し、一貫して使用するべきである。そのようなポリシーは、ユーザによって容易にアクセス可能であるべきであり、データの収集及び/又は使用が変化するにつれて更新されるべきである。ユーザからの個人情報は、そのエンティティの合法的かつ正当な使用のために収集されるべきであり、それらの合法的使用を除いては、共有又は販売されるべきではない。更に、そのような収集/共有は、ユーザに告知して同意を得た後に実施されるべきである。更に、そのようなエンティティは、そのような個人情報データへのアクセスを保護して安全化し、その個人情報データへのアクセスを有する他者が、それらのプライバシーポリシー及び手順を遵守することを保証するための、あらゆる必要な措置を講じることを考慮するべきである。更に、そのようなエンティティは、広く受け入れられているプライバシーのポリシー及び慣行に対する自身の遵守を証明するために、第三者による評価を自らが受けることができる。更に、ポリシー及び慣行は、収集及び/又はアクセスされる具体的な個人情報データのタイプに適合されるべきであり、また、管轄権固有の考慮事項を含めた、適用可能な法令及び規格に適合されるべきである。例えば、アメリカ合衆国では、特定の健康データの収集又はアクセスは、医療保険の相互運用性と説明責任に関する法律(Health Insurance Portability and Accountability Act、HIPAA)などの、連邦法及び/又は州法によって管理することができ、その一方で、他国における健康データは、他の規制及びポリシーの対象となり得るものであり、それに従って対処されるべきである。それゆえ、各国の異なる個人データの種類に対して、異なるプライバシー慣行が保たれるべきである。
前述のことがらにもかかわらず、本開示はまた、個人情報データの使用又は個人情報データへのアクセスを、ユーザが選択的に阻止する実施形態も考察する。すなわち、本開示は、そのような個人情報データへのアクセスを防止又は阻止するように、ハードウェア要素及び/又はソフトウェア要素を提供できることを考察する。例えば、オーディオストリーミングサービスの場合では、本技術は、ユーザが、サービスの登録中又はその後のいつでも、個人情報データの収集への参加の「オプトイン」又は「オプトアウト」を選択できるように構成することができる。別の実施例では、ユーザは、オーディオストリーミングサービスのユーザの好み又はアカウント情報を提供しないように選択することができる。更に別の実施例では、ユーザは、プリファレンスデータが維持される期間を制限する、又はベースラインプリファレンスプロファイルの展開を完全に禁止するかを選択することができる。「オプトイン」及び「オプトアウト」の選択肢を提供することに加えて、本開示は、個人情報のアクセス又は使用に関する通知を提供することを考察する。例えば、ユーザの個人情報データにアクセスすることとなるアプリのダウンロード時にユーザに通知され、その後、個人情報データがアプリによってアクセスされる直前に再びユーザに注意してもよい。
更に、本開示の意図は、個人情報データを、意図しない若しくは許可されていないアクセス又は使用の危険性を最小限に抑える方法で、管理及び処理するべきであるという点である。データの収集を制限し、データがもはや必要とされなくなった時点で削除することによって、危険性を最小限に抑えることができる。更に、適用可能な場合、特定の健康関連アプリケーションにおいて、ユーザのプライバシーを保護するために、データの非特定化を使用することができる。非特定化は、適切な場合には、特定の識別子(例えば、生年月日など)を除去すること、記憶されたデータの量又は特異性を制御すること(例えば、位置データを住所レベルよりも都市レベルで収集すること)、データがどのように記憶されるかを制御すること(例えば、データをユーザ全体にわたって集約すること)及び/又は他の方法によって、容易にすることができる。
それゆえ、本開示は、1つ以上の様々な開示された実施形態を実施するための、個人情報データの使用を広範に網羅するものであるが、本開示はまた、そのような個人情報データにアクセスすることを必要とせずに、それらの様々な実施形態を実施することも可能であることを考察する。すなわち、本技術の様々な実施形態は、そのような個人情報データの全て又は一部分が欠如することにより、実施不可能となるものではない。例えば、ユーザに関連付けられたデバイスによって要求されるコンテンツなどの非個人情報データ若しくは必要最小限の個人情報、オーディオコンテンツ配信サービスが入手可能な他の非個人情報、又は公的に入手可能な情報に基づいて嗜好を推測することによって、オーディオコンテンツを選択し、ユーザに配信することができる。

Claims (19)

  1. 方法であって、
    表示デバイスを備えた電子デバイスにおいて、
    外部デバイスに接続されている間に、前記電子デバイスと前記外部デバイスとの間の物理的近接度が近接条件を満たすというインジケーションを検出することと、
    前記物理的近接度が前記近接条件を満たすという前記インジケーションを検出したことに応じて、前記表示デバイスを介して、第1のメディアアイテムを表す第1のメディア情報アフォーダンスであって、前記第1のメディアアイテムに関する情報の第1のセットを含む、第1のメディア情報アフォーダンスを表示することと、
    前記第1のメディア情報アフォーダンスの選択を表す第1の入力を受け取ることと、
    前記第1の入力を受け取ったことに応じて、
    前記第1の入力が第1のタイプの入力であるとの判定に従って、
    記外部デバイス上の前記第1のメディアアイテムの再生を開始する命令を前記外部デバイスに送信することと、
    メディア再生の複数の制御を含むユーザインタフェースを表示することであって、メディア再生の前記複数の制御を含む前記ユーザインタフェースは、前記第1の入力を受け取ったことに応じて前記表示デバイスに表示が開始される、ことと、
    前記第1のメディアアイテムを表す前記第1のメディア情報アフォーダンスの表示を停止することと、
    前記第1の入力が前記第1のタイプの入力とは異なる第2のタイプの入力であるとの判定に従って、前記表示デバイスを介して、前記第1のメディアアイテムとは異なる第2のメディアアイテムを表す第2のメディア情報アフォーダンスであって、前記第1のメディア情報アフォーダンスとは異なり、かつ前記第のメディアアイテムに関する情報の第2のセットを含む、第2のメディア情報アフォーダンスを表示することと、
    を含む、方法。
  2. 前記第1のメディア情報アフォーダンスは、前記外部デバイスを識別するインジケーションを含む、請求項1に記載の方法。
  3. 前記第1の入力を受け取ったことに応じて、かつ前記第1の入力が前記第1のタイプの入力であるとの前記判定に従って、前記第1のメディア情報アフォーダンスの視覚的外観を変えて、前記外部デバイス上の前記第1のメディアアイテムの再生が開始されたことを示すこと、
    を更に含む、請求項1又は2に記載の方法。
  4. 前記第1のメディアアイテムに関する情報の前記第1のセットは、前記第1のメディアアイテムに対応するメディアアイテムのタイプを示す、請求項1から3のいずれか一項に記載の方法。
  5. 前記外部デバイス上の前記第1のメディアアイテムの再生を開始することは、
    前記第1のメディアアイテムがデータ送信条件を満たすとの判定に従って、前記第1のメディアアイテムのデータを前記外部デバイスに送信することと、
    前記第1のメディアアイテムが前記データ送信条件を満たさないとの判定に従って、前記第1のメディアアイテムのデータを前記外部デバイスに送信することを取り止めることと、
    を含む、請求項1から4のいずれか一項に記載の方法。
  6. 記第1のメディアアイテムを表す前記第1のメディア情報アフォーダンス示を停止することは、時間条件が満たされたとの判定に応じて行われる、請求項1から5のいずれか一項に記載の方法。
  7. 前記第1のメディアアイテムを表す前記第1のメディア情報アフォーダンスを表示している間に、かつ前記第1の入力を受け取る前に、
    前記電子デバイスと前記外部デバイスとの間の前記物理的近接度が物理的分離条件を満たすというインジケーションを検出することと、
    前記物理的近接度が前記物理的分離条件を満たすという前記インジケーションを検出したことに応じて、前記第1のメディアアイテムを表す前記第1のメディア情報アフォーダンスを表示することを停止することと、
    を更に含む、請求項1から6のいずれか一項に記載の方法。
  8. 前記第1のタイプの入力はタップジェスチャを含み、前記第2のタイプの入力は、スワイプ又はドラッグジェスチャを含む、請求項1から7のいずれか一項に記載の方法。
  9. 前記第1のメディアアイテムを表す前記第2のメディア情報アフォーダンスを表示している間に、前記第2のメディア情報アフォーダンスの選択を表す第2の入力を受け取ることと、
    前記第2のメディア情報アフォーダンスの選択を表す前記第2の入力を受け取ったことに応じて、前記外部デバイス上の第2のメディアアイテムの再生を開始する命令を前記外部デバイスに送信することと、
    を更に含む、請求項8に記載の方法。
  10. 前記電子デバイスと前記外部デバイスとの間の前記物理的近接度が近接条件を満たすという前記インジケーションを検出することは、前記電子デバイスが前記第1のメディアアイテムの再生を引き起こしている間に行われ、前記方法は、
    前記第1の入力を受け取ったことに応じて、かつ前記第1の入力が前記第1のタイプの入力であるとの判定に従って、前記電子デバイスにおける前記第1のメディアアイテムの再生を引き起こすことを停止すること、
    を更に含む、請求項1から9のいずれか一項に記載の方法。
  11. 前記第1のメディア情報アフォーダンスは、前記電子デバイスと前記外部デバイスとの間の前記物理的近接度が前記近接条件を満たすという前記インジケーションを検出している間に前記第1のメディアアイテムを前記電子デバイス上で再生しているとの判定に従って、前記第1のメディアアイテムを表す、請求項1から10のいずれか一項に記載の方法。
  12. 前記外部デバイス上の前記第1のメディアアイテムの再生を開始することは、前記外部デバイス上で第3のメディアアイテムを再生することを停止することを含む、請求項11に記載の方法。
  13. 前記電子デバイスと前記外部デバイスとの間の前記物理的近接度が前記近接条件を満たすという前記インジケーションを検出している間に、前記電子デバイスがメディアアイテムを再生していないとの判定に従って、前記第1のメディアアイテムは、前記電子デバイスと前記外部デバイスとの間の前記物理的近接度が前記近接条件を満たすという前記インジケーションを検出する前の直近に前記電子デバイス上で再生されたメディアアイテムである、請求項1から12のいずれか一項に記載の方法。
  14. 前記第1のメディアアイテムを表す前記第2のメディア情報アフォーダンスを表示している間に、前記第2のメディア情報アフォーダンスの選択を表す第2の入力を受け取ることと、
    前記第2の入力を受け取ったことに応じて、前記外部デバイス上の前記第1のメディアアイテムの再生を開始する命令を前記外部デバイスに送信することと、
    を更に含む、請求項1から13のいずれか一項に記載の方法。
  15. 前記第2のメディアアイテムを表す前記第2のメディア情報アフォーダンスを表示している間に、第2の入力を受け取ることと、
    前記第2の入力を受け取ったことに応じて、前記第1のメディアアイテム及び前記第2のメディアアイテムとは異なる第3のメディアアイテムを表す第3のメディア情報アフォーダンスを前記表示デバイスを介して表示するために、前記第2のメディア情報アフォーダンスをスクロールすることであって、前記第3のメディアアイテムは前記第3のメディアアイテムに関する情報の第3のセットを含む、ことと、
    前記第3のメディア情報アフォーダンスを表示している間に、前記第3のメディア情報アフォーダンスの選択に対応する第3の入力を受け取ることと、
    前記第3のメディア情報アフォーダンスの選択に対応する前記第3の入力を受け取ったことに応じて、前記外部デバイス上の前記第3のメディアアイテムの再生を開始する命令を前記外部デバイスに送信することと、
    を更に含む、請求項1から14のいずれか一項に記載の方法。
  16. メディア再生の前記複数の制御を含むユーザインタフェースは、前記外部デバイス上でオーディオが現在再生されていることを示すユーザインタフェース要素を含み、前記ユーザインタフェース要素は、前記第1の入力を受け取ったことに応じて表示が開始される、請求項1から15のいずれか一項に記載の方法。
  17. 請求項1から16のいずれか一項に記載の方法をコンピュータに実行させるコンピュータプログラム。
  18. 電子デバイスであって、
    請求項17に記載のコンピュータプログラムを格納したメモリと、
    前記メモリに格納された前記コンピュータプログラムを実行可能な1以上のプロセッサと
    を備える、電子デバイス。
  19. 電子デバイスであって、
    請求項1から16のいずれか一項に記載の方法を実行する手段を備える、電子デバイス。
JP2022079682A 2019-05-31 2022-05-13 オーディオメディア制御のためのユーザインタフェース Active JP7126034B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022129377A JP2022176955A (ja) 2019-05-31 2022-08-15 オーディオメディア制御のためのユーザインタフェース

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
US201962855852P 2019-05-31 2019-05-31
US62/855,852 2019-05-31
US16/584,490 2019-09-26
US16/583,989 2019-09-26
US16/583,989 US10996917B2 (en) 2019-05-31 2019-09-26 User interfaces for audio media control
US16/584,490 US11010121B2 (en) 2019-05-31 2019-09-26 User interfaces for audio media control
US202063032603P 2020-05-30 2020-05-30
US63/032,603 2020-05-30
PCT/US2020/035488 WO2020243691A1 (en) 2019-05-31 2020-05-31 User interfaces for audio media control
JP2021563716A JP7075547B2 (ja) 2019-05-31 2020-05-31 オーディオメディア制御のためのユーザインタフェース

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021563716A Division JP7075547B2 (ja) 2019-05-31 2020-05-31 オーディオメディア制御のためのユーザインタフェース

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022129377A Division JP2022176955A (ja) 2019-05-31 2022-08-15 オーディオメディア制御のためのユーザインタフェース

Publications (2)

Publication Number Publication Date
JP7126034B1 true JP7126034B1 (ja) 2022-08-25
JP2022128605A JP2022128605A (ja) 2022-09-02

Family

ID=73551508

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2021563716A Active JP7075547B2 (ja) 2019-05-31 2020-05-31 オーディオメディア制御のためのユーザインタフェース
JP2022079682A Active JP7126034B1 (ja) 2019-05-31 2022-05-13 オーディオメディア制御のためのユーザインタフェース
JP2022129377A Pending JP2022176955A (ja) 2019-05-31 2022-08-15 オーディオメディア制御のためのユーザインタフェース

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021563716A Active JP7075547B2 (ja) 2019-05-31 2020-05-31 オーディオメディア制御のためのユーザインタフェース

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022129377A Pending JP2022176955A (ja) 2019-05-31 2022-08-15 オーディオメディア制御のためのユーザインタフェース

Country Status (7)

Country Link
US (3) US11620103B2 (ja)
EP (3) EP4231124A1 (ja)
JP (3) JP7075547B2 (ja)
KR (4) KR20240049648A (ja)
CN (4) CN117170620A (ja)
AU (4) AU2020282362B2 (ja)
WO (1) WO2020243691A1 (ja)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8572513B2 (en) 2009-03-16 2013-10-29 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
JP6328797B2 (ja) 2014-05-30 2018-05-23 アップル インコーポレイテッド 1つのデバイスの使用から別のデバイスの使用への移行
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
WO2016036541A2 (en) 2014-09-02 2016-03-10 Apple Inc. Phone user interface
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
EP3788775B1 (en) * 2018-05-02 2021-09-22 Telefonaktiebolaget LM Ericsson (publ) User equipment, method by a user equipment, and network node
USD898759S1 (en) * 2019-01-04 2020-10-13 Apple Inc. Display screen or portion thereof with animated graphical user interface
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
KR20240049648A (ko) 2019-05-31 2024-04-16 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
KR20210042520A (ko) * 2019-10-10 2021-04-20 삼성전자주식회사 전자 장치 및 이의 제어 방법
CN111225266B (zh) * 2020-02-25 2022-03-15 上海哔哩哔哩科技有限公司 用户界面交互方法和系统
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11553618B2 (en) * 2020-08-26 2023-01-10 PassiveLogic, Inc. Methods and systems of building automation state load and user preference via network systems activity
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
CN112860164B (zh) * 2021-01-22 2022-02-08 璞真生活有限公司 香薰机的控制方法、控制装置、移动终端及存储介质
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
KR20230023212A (ko) * 2021-08-10 2023-02-17 삼성전자주식회사 상태 변경에 따라 음성 명령 처리 결과를 출력하는 전자 장치 및 그의 동작 방법
WO2023049023A1 (en) * 2021-09-24 2023-03-30 Apple Inc. Media controls user interface
CN114564265B (zh) * 2021-12-22 2023-07-25 上海小度技术有限公司 有屏智能设备的交互方法、装置以及电子设备
US11546323B1 (en) 2022-08-17 2023-01-03 strongDM, Inc. Credential management for distributed services
US11736531B1 (en) 2022-08-31 2023-08-22 strongDM, Inc. Managing and monitoring endpoint activity in secured networks
US11765159B1 (en) 2022-09-28 2023-09-19 strongDM, Inc. Connection revocation in overlay networks
US11698700B1 (en) * 2022-11-15 2023-07-11 Jackpocket Inc. Systems and methods for automated interaction with a touch-screen device
US11916885B1 (en) 2023-01-09 2024-02-27 strongDM, Inc. Tunnelling with support for dynamic naming resolution
US11765207B1 (en) * 2023-03-17 2023-09-19 strongDM, Inc. Declaring network policies using natural language

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160026429A1 (en) 2014-07-23 2016-01-28 Sonos, Inc. Zone Grouping
US20160062606A1 (en) 2014-09-02 2016-03-03 Sonos, Inc. Zone Recognition

Family Cites Families (1481)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5347628A (en) 1990-01-18 1994-09-13 International Business Machines Corporation Method of graphically accessing electronic data
JP2516287B2 (ja) 1990-05-31 1996-07-24 インターナショナル・ビジネス・マシーンズ・コーポレイション デ―タ表示方法及び装置
US5202961A (en) 1990-06-08 1993-04-13 Apple Computer, Inc. Sequential information controller
US5305435A (en) 1990-07-17 1994-04-19 Hewlett-Packard Company Computer windows management system and method for simulating off-screen document storage and retrieval
JPH04258090A (ja) 1991-02-13 1992-09-14 Hitachi Ltd 映像同期処理方法および装置
FR2693810B1 (fr) 1991-06-03 1997-01-10 Apple Computer Systemes d'interfaces d'utilisateurs a acces direct a une zone secondaire d'affichage.
DE69222102T2 (de) 1991-08-02 1998-03-26 Grass Valley Group Bedienerschnittstelle für Videoschnittsystem zur Anzeige und interaktive Steuerung von Videomaterial
US6061062A (en) 1991-12-20 2000-05-09 Apple Computer, Inc. Zooming controller
WO1993014454A1 (en) 1992-01-10 1993-07-22 Foster-Miller, Inc. A sensory integrated data interface
JPH05266169A (ja) 1992-03-24 1993-10-15 Toshiba Corp 画像処理装置
US5999173A (en) 1992-04-03 1999-12-07 Adobe Systems Incorporated Method and apparatus for video editing with video clip representations displayed along a time line
US5404316A (en) 1992-08-03 1995-04-04 Spectra Group Ltd., Inc. Desktop digital video processing system
US5682326A (en) 1992-08-03 1997-10-28 Radius Inc. Desktop digital video processing system
US5754174A (en) 1992-08-27 1998-05-19 Starfish Software, Inc. User interface with individually configurable panel interfaces for use in a computer system
DE69333530T2 (de) 1992-12-17 2005-07-28 Voxson Ltd. Informationsübertragungssystem zur erhöhung der effektiven informationsübermittlungsrate
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
JPH0728689A (ja) 1993-07-09 1995-01-31 Hitachi Ltd 情報処理装置
US5758180A (en) 1993-04-15 1998-05-26 Sony Corporation Block resizing function for multi-media editing which moves other blocks in response to the resize only as necessary
KR0132749B1 (ko) 1993-08-05 1998-04-24 가나이 쯔또무 아이콘 메뉴 표시장치 및 아이콘 메뉴 표시방법
US5557724A (en) 1993-10-12 1996-09-17 Intel Corporation User interface, method, and apparatus selecting and playing channels having video, audio, and/or text streams
JPH07219970A (ja) 1993-12-20 1995-08-18 Xerox Corp 加速フォーマットでの再生方法及び再生装置
JP3546337B2 (ja) 1993-12-21 2004-07-28 ゼロックス コーポレイション 計算システム用ユーザ・インタフェース装置及びグラフィック・キーボード使用方法
US5513342A (en) 1993-12-28 1996-04-30 International Business Machines Corporation Display window layout system that automatically accommodates changes in display resolution, font size and national language
US5521841A (en) 1994-03-31 1996-05-28 Siemens Corporate Research, Inc. Browsing contents of a given video sequence
US5487143A (en) 1994-04-06 1996-01-23 Altera Corporation Computer user interface having tiled and overlapped window areas
CA2124028C (en) 1994-05-20 2000-07-25 Derek Kent William Smith Directional actuator for electronic media navigation
US5568603A (en) 1994-08-11 1996-10-22 Apple Computer, Inc. Method and system for transparent mode switching between two different interfaces
US5614940A (en) 1994-10-21 1997-03-25 Intel Corporation Method and apparatus for providing broadcast information with indexing
US5495566A (en) 1994-11-22 1996-02-27 Microsoft Corporation Scrolling contents of a window
JPH08147138A (ja) 1994-11-24 1996-06-07 Taito Corp 情報提供装置
JPH08166783A (ja) 1994-12-13 1996-06-25 Hitachi Ltd 情報処理装置
US5611060A (en) 1995-02-22 1997-03-11 Microsoft Corporation Auto-scrolling during a drag and drop operation
US5657246A (en) 1995-03-07 1997-08-12 Vtel Corporation Method and apparatus for a video conference user interface
WO1996031829A1 (en) 1995-04-06 1996-10-10 Avid Technology, Inc. Graphical multimedia authoring system
US6496182B1 (en) 1995-06-07 2002-12-17 Microsoft Corporation Method and system for providing touch-sensitive screens for the visually impaired
US6108704A (en) 1995-09-25 2000-08-22 Netspeak Corporation Point-to-point internet protocol
JP3597647B2 (ja) 1995-09-29 2004-12-08 株式会社東芝 符号化方法及び装置
JP3786294B2 (ja) 1995-10-02 2006-06-14 ソニー株式会社 画像制御装置および方法
US5732184A (en) 1995-10-20 1998-03-24 Digital Processing Systems, Inc. Video and audio cursor video editing system
US5760767A (en) 1995-10-26 1998-06-02 Sony Corporation Method and apparatus for displaying in and out points during video editing
US20020002562A1 (en) 1995-11-03 2002-01-03 Thomas P. Moran Computer controlled display system using a graphical replay device to control playback of temporal data representing collaborative activities
US5778053A (en) 1995-12-21 1998-07-07 Intel Corporation Answering machine services for data conferences
US5864868A (en) 1996-02-13 1999-01-26 Contois; David C. Computer control system and user interface for media playing devices
JP3591120B2 (ja) 1996-03-19 2004-11-17 富士通株式会社 メニュー画面制御装置
JP2003264621A (ja) 1996-04-26 2003-09-19 Mitsubishi Electric Corp 携帯情報端末装置
US5880733A (en) 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
US5793366A (en) 1996-11-12 1998-08-11 Sony Corporation Graphical display of an animated data stream between devices on a bus
US6006227A (en) 1996-06-28 1999-12-21 Yale University Document stream operating system
JPH1091281A (ja) 1996-08-19 1998-04-10 Internatl Business Mach Corp <Ibm> 情報処理機器
JPH1066008A (ja) 1996-08-23 1998-03-06 Kokusai Denshin Denwa Co Ltd <Kdd> 動画像検索編集装置
US6407757B1 (en) 1997-12-18 2002-06-18 E-Book Systems Pte Ltd. Computer-based browsing method and computer program product for displaying information in an electronic book form
US5760772A (en) 1996-08-30 1998-06-02 Novell, Inc. Method for automatically resizing a child window
US6140987A (en) 1996-09-18 2000-10-31 Intellinet, Inc. User interface for home automation system
FI111674B (fi) 1996-10-31 2003-08-29 Nokia Corp Käyttäjäliityntä
US6115037A (en) 1996-11-15 2000-09-05 Hitachi Denshi Kabushiki Kaisha Motion image control method and apparatus
US5936623A (en) 1996-11-18 1999-08-10 International Business Machines Corporation Method and apparatus for selecting a particular object from among a large number of objects
US6544295B1 (en) 1996-11-18 2003-04-08 Starfish Software, Inc. Methods for managing preferred internet sites in a computer system having a browser
US5815153A (en) 1996-11-20 1998-09-29 International Business Machines Corporation Multifunction control with changeable appearance
US6175922B1 (en) 1996-12-04 2001-01-16 Esign, Inc. Electronic transaction systems and methods therefor
JPH10198517A (ja) 1997-01-10 1998-07-31 Tokyo Noukou Univ 表示装置の表示内容制御方法
EP1016021A4 (en) 1997-01-27 2004-05-19 Benjamin Slotznick SYSTEM FOR DELIVERING AND SIMULTANEOUSLY PLAYING PRIMARY AND SECONDARY INFORMATION AND FOR PLAYING ONLY SECONDARY INFORMATION DURING THE INTERSTITIAL TIME
US20010038391A1 (en) 1997-01-28 2001-11-08 Hideo Fukuchi Information display apparatus
JPH10232757A (ja) 1997-02-19 1998-09-02 Sharp Corp メディア選択装置
US5872566A (en) 1997-02-21 1999-02-16 International Business Machines Corporation Graphical user interface method and system that provides an inertial slider within a scroll bar
US5874958A (en) 1997-03-31 1999-02-23 Sun Microsystems, Inc. Method and apparatus for accessing information and items across workspaces
CA2202106C (en) 1997-04-08 2002-09-17 Mgi Software Corp. A non-timeline, non-linear digital multimedia composition method and system
US6031529A (en) 1997-04-11 2000-02-29 Avid Technology Inc. Graphics design software user interface
US6362837B1 (en) 1997-05-06 2002-03-26 Michael Ginn Method and apparatus for simultaneously indicating rating value for the first document and display of second document in response to the selection
FI115689B (fi) 1997-05-21 2005-06-15 Nokia Corp Menetelmä ja järjestely matkaviestimen näytöllä esitettävän tiedon vierittämiseksi
JP3624626B2 (ja) 1997-05-28 2005-03-02 ソニー株式会社 情報処理装置および方法、並びに記録媒体
GB9715256D0 (en) 1997-07-21 1997-09-24 Rank Xerox Ltd Token-based docement transactions
CN1126025C (zh) 1997-08-12 2003-10-29 松下电器产业株式会社 窗口显示装置
US6166736A (en) 1997-08-22 2000-12-26 Natrificial Llc Method and apparatus for simultaneously resizing and relocating windows within a graphical display
DE19743551C1 (de) 1997-10-01 1999-02-11 Siemens Ag Verfahren zum Einlesen eines Datenwertes
US6393462B1 (en) 1997-11-13 2002-05-21 International Business Machines Corporation Method and apparatus for automatic downloading of URLs and internet addresses
WO1999027681A2 (en) 1997-11-25 1999-06-03 Motorola Inc. Audio content player methods, systems, and articles of manufacture
JP2000101879A (ja) 1998-09-25 2000-04-07 Canon Inc 撮像装置
GB2333215B (en) 1998-01-13 2002-05-08 Sony Electronics Inc Systems and methods for enabling manipulation of a plurality of graphic images on a display screen
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
CN1151704C (zh) 1998-01-23 2004-05-26 音响株式会社 声像定位装置和方法
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
KR100595917B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US6308187B1 (en) 1998-02-09 2001-10-23 International Business Machines Corporation Computer system and method for abstracting and accessing a chronologically-arranged collection of information
FI980427A (fi) 1998-02-25 1999-08-26 Ericsson Telefon Ab L M Menetelmä, järjestely ja laite todentamiseen
US6351765B1 (en) 1998-03-09 2002-02-26 Media 100, Inc. Nonlinear video editing system
US6236400B1 (en) 1998-04-02 2001-05-22 Sun Microsystems, Inc. Method and apparatus for controlling the display of hierarchical information
US6118450A (en) 1998-04-03 2000-09-12 Sony Corporation Graphic user interface that is usable as a PC interface and an A/V interface
US6446080B1 (en) 1998-05-08 2002-09-03 Sony Corporation Method for creating, modifying, and playing a custom playlist, saved as a virtual CD, to be played by a digital audio/visual actuator device
US6393430B1 (en) 1998-05-08 2002-05-21 Sony Corporation Method and system for automatically recording music data files by using the hard drive of a personal computer as an intermediate storage medium
JPH11338600A (ja) 1998-05-26 1999-12-10 Yamatake Corp 設定数値変更方法および設定数値変更装置
US6584479B2 (en) 1998-06-17 2003-06-24 Xerox Corporation Overlay presentation of textual and graphical annotations
US7831930B2 (en) 2001-11-20 2010-11-09 Universal Electronics Inc. System and method for displaying a user interface for a remote control application
JP2000105772A (ja) 1998-07-28 2000-04-11 Sharp Corp 情報管理装置
US6366296B1 (en) 1998-09-11 2002-04-02 Xerox Corporation Media browser using multimodal analysis
US6317784B1 (en) 1998-09-29 2001-11-13 Radiowave.Com, Inc. Presenting supplemental information for material currently and previously broadcast by a radio station
JP3123990B2 (ja) 1998-10-05 2001-01-15 埼玉日本電気株式会社 携帯無線端末
JP3580710B2 (ja) 1998-10-15 2004-10-27 松下電器産業株式会社 分散型インターネットブラウザシステムとその表示方法
US6452609B1 (en) 1998-11-06 2002-09-17 Supertuner.Com Web application for accessing media streams
JP2000163193A (ja) 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
US6178403B1 (en) 1998-12-16 2001-01-23 Sharp Laboratories Of America, Inc. Distributed voice capture and recognition system
US20020048224A1 (en) 1999-01-05 2002-04-25 Dygert Timothy W. Playback device having text display and communication with remote database of titles
JP2000209324A (ja) 1999-01-12 2000-07-28 Nec Corp 宛先発信制御システムおよび宛先発信制御方法
US20020059295A1 (en) 1999-01-29 2002-05-16 Harold Aaron Ludtke Method and system for distributed queues in a multimedia network
JP2000284879A (ja) 1999-01-29 2000-10-13 Square Co Ltd ゲーム装置、ビデオゲームにおけるコマンド入力方法、及び、その方法を実現するためのプログラムを記録したコンピュータ読み取り可能な記録媒体
DE69921956T2 (de) 1999-02-11 2006-02-09 Sony International (Europe) Gmbh Edgerät für die drahtlose Telekommunikation und Verfahren zur Anzeige von Symbolen auf einer Anzeigevorrichtung eines solchen Endgeräts
JP3921865B2 (ja) 1999-03-11 2007-05-30 カシオ計算機株式会社 データ処理システムおよびそのプログラム記録媒体
US6456305B1 (en) 1999-03-18 2002-09-24 Microsoft Corporation Method and system for automatically fitting a graphical display of objects to the dimensions of a display window
US6590594B2 (en) 1999-03-25 2003-07-08 International Business Machines Corporation Window scroll-bar
US6847778B1 (en) 1999-03-30 2005-01-25 Tivo, Inc. Multimedia visual progress indication system
US6262724B1 (en) 1999-04-15 2001-07-17 Apple Computer, Inc. User interface for presenting media information
US6515681B1 (en) 1999-05-11 2003-02-04 Prophet Financial Systems, Inc. User interface for interacting with online message board
US6369835B1 (en) 1999-05-18 2002-04-09 Microsoft Corporation Method and system for generating a movie file from a slide show presentation
GB2350523B (en) 1999-05-26 2003-11-26 Nokia Mobile Phones Ltd Communication device
JP4021589B2 (ja) 1999-06-07 2007-12-12 株式会社日立製作所 データ管理方法及びその実施装置
AU781021B2 (en) 1999-06-18 2005-04-28 Echarge Corporation Method and apparatus for ordering goods, services and content over an internetwork using a virtual payment account
US6553345B1 (en) 1999-08-26 2003-04-22 Matsushita Electric Industrial Co., Ltd. Universal remote control allowing natural language modality for television and multimedia searches and requests
US6976229B1 (en) 1999-12-16 2005-12-13 Ricoh Co., Ltd. Method and apparatus for storytelling with digital photographs
JP2001202176A (ja) 2000-01-24 2001-07-27 Casio Comput Co Ltd 情報表示装置、情報表示プログラムが記録された記録媒体
US20020026442A1 (en) 2000-01-24 2002-02-28 Lipscomb Kenneth O. System and method for the distribution and sharing of media assets between media players devices
US6539343B2 (en) 2000-02-03 2003-03-25 Xerox Corporation Methods for condition monitoring and system-level diagnosis of electro-mechanical systems with multiple actuating components operating in multiple regimes
US7240296B1 (en) 2000-02-11 2007-07-03 Microsoft Corporation Unified navigation shell user interface
WO2001065446A1 (en) 2000-02-29 2001-09-07 Cdcoupon, Llc Method and system for distribution of electronic coupons
EP1133119B1 (en) 2000-03-10 2006-12-13 Nokia Corporation Proximity based service adaption
US20010039497A1 (en) 2000-03-30 2001-11-08 Hubbard Edward A. System and method for monitizing network connected user bases utilizing distributed processing systems
US6674452B1 (en) 2000-04-05 2004-01-06 International Business Machines Corporation Graphical user interface to query music by examples
US20010030667A1 (en) 2000-04-10 2001-10-18 Kelts Brett R. Interactive display interface for information objects
JP4434424B2 (ja) 2000-04-18 2010-03-17 株式会社ルネサステクノロジ ホームエレクトロニクスシステム、ホームサーバ装置およびコンピュータをホームサーバ装置として機能させるためのプログラムを記録したコンピュータ読取可能な記録媒体
JP4325075B2 (ja) 2000-04-21 2009-09-02 ソニー株式会社 データオブジェクト管理装置
WO2001082086A1 (fr) 2000-04-24 2001-11-01 Matsushita Electric Industrial Co., Ltd. Dispositif de definition de droit d'acces et terminal gestionnaire
JP4042340B2 (ja) 2000-05-17 2008-02-06 カシオ計算機株式会社 情報機器
JP2001331758A (ja) 2000-05-22 2001-11-30 Sumisho Computer Systems Corp 認証ワークフローシステム、認証サーバ装置、決裁に関する認証方法、記録媒体
US6879322B2 (en) 2000-05-30 2005-04-12 Fujitsu Limited Three-dimensional object display system, three-dimensional object display method and recording medium recording a three-dimensional object display program
US7451389B2 (en) 2000-06-06 2008-11-11 Microsoft Corporation Method and system for semantically labeling data and providing actions based on semantically labeled data
US7240297B1 (en) 2000-06-12 2007-07-03 International Business Machines Corporation User assistance system
US6714233B2 (en) 2000-06-21 2004-03-30 Seiko Epson Corporation Mobile video telephone system
EP1212885B1 (en) 2000-06-21 2009-04-29 Seiko Epson Corporation Mobile telephone and radio communication device cooperatively processing incoming call
US6477117B1 (en) 2000-06-30 2002-11-05 International Business Machines Corporation Alarm interface for a smart watch
US7081905B1 (en) 2000-06-30 2006-07-25 International Business Machines Corporation Method and apparatus for dynamically controlling scroller speed employed for a user interface of a wearable appliance
US6556222B1 (en) 2000-06-30 2003-04-29 International Business Machines Corporation Bezel based input mechanism and user interface for a smart watch
SE517484C2 (sv) 2000-06-30 2002-06-11 Nokia Corp Föräldrakontroll av anordningar som levererar mediainnehåll
US6677965B1 (en) 2000-07-13 2004-01-13 International Business Machines Corporation Rubber band graphical user interface control
US6745186B1 (en) 2000-08-17 2004-06-01 Eastman Kodak Company Product and method for organizing and searching digital images
JP2002074322A (ja) 2000-08-31 2002-03-15 Sony Corp 情報処理装置及び情報処理方法並びにデータ記録媒体
US6834371B1 (en) 2000-08-31 2004-12-21 Interactive Video Technologies, Inc. System and method for controlling synchronization of a time-based presentation and its associated assets
JP2002082745A (ja) 2000-09-07 2002-03-22 Sony Corp 情報処理装置及び方法、並びにプログラム格納媒体
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7319454B2 (en) 2000-11-10 2008-01-15 Microsoft Corporation Two-button mouse input using a stylus
KR100369646B1 (ko) 2000-11-23 2003-01-30 삼성전자 주식회사 휴대용 단말기의 사용자 인터페이스방법
US7080159B2 (en) 2000-12-15 2006-07-18 Ntt Docomo, Inc. Method and system for effecting migration of application among heterogeneous devices
US20080060011A1 (en) 2000-12-22 2008-03-06 Hillcrest Laboratories, Inc. Zoomable user interfaces for television
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7299416B2 (en) 2001-02-15 2007-11-20 Denny Jaeger Metro for creating and using linear time line and play rectangle
US20020116276A1 (en) 2001-02-20 2002-08-22 Ottley Steven R. Intuitive graphical user interface for dynamically addressing electronic shopping cart deliverables
US20020137565A1 (en) 2001-03-09 2002-09-26 Blanco Victor K. Uniform media portal for a gaming system
JP3762243B2 (ja) 2001-03-26 2006-04-05 陣山 俊一 情報処理方法、情報処理プログラム並びに携帯情報端末装置
JP2002288125A (ja) 2001-03-27 2002-10-04 Just Syst Corp 作業状態再現システム、作業状態再現方法
US20020142734A1 (en) 2001-04-03 2002-10-03 James Wickstead Miniaturized wrist phone
US7134093B2 (en) 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
US6757517B2 (en) 2001-05-10 2004-06-29 Chin-Chi Chang Apparatus and method for coordinated music playback in wireless ad-hoc networks
US20050024341A1 (en) 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
JP2002342356A (ja) 2001-05-18 2002-11-29 Nec Software Kyushu Ltd 情報提供システム,方法,およびプログラム
JP2002351768A (ja) 2001-05-29 2002-12-06 Mitsubishi Electric Corp 転送者端末及び情報転送方法
US20020191028A1 (en) 2001-06-19 2002-12-19 Senechalle David A. Window manager user interface
JP2003030245A (ja) 2001-07-12 2003-01-31 Sony Corp 情報閲覧装置、情報閲覧システム、サーバ装置、端末装置、情報閲覧方法、情報提供方法、情報閲覧プログラム、情報提供プログラムおよび記録媒体
US6922147B1 (en) 2001-07-12 2005-07-26 Ann S. Viksnins Warning system sensing child left behind in infant seat in vehicle
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
JP2003043978A (ja) 2001-07-31 2003-02-14 Sharp Corp 対面式表示装置
US7369997B2 (en) 2001-08-01 2008-05-06 Microsoft Corporation Controlling speech recognition functionality in a computing device
JP4593842B2 (ja) 2001-08-03 2010-12-08 キヤノン株式会社 動画像検索装置及びその制御方法
EP1413116A1 (en) 2001-08-03 2004-04-28 Matsushita Electric Industrial Co., Ltd. Access control system
US7200590B2 (en) 2001-08-15 2007-04-03 Yahoo! Inc. Data sharing
US20030188183A1 (en) 2001-08-27 2003-10-02 Lee Lane W. Unlocking method and system for data on media
JP4174980B2 (ja) 2001-08-28 2008-11-05 株式会社日立プラントテクノロジー シール剤印刷装置
US6690365B2 (en) 2001-08-29 2004-02-10 Microsoft Corporation Automatic scrolling
US6995745B2 (en) 2001-09-13 2006-02-07 E-Book Systems Pte Ltd. Electromechanical information browsing device
US7191233B2 (en) 2001-09-17 2007-03-13 Telecommunication Systems, Inc. System for automated, mid-session, user-directed, device-to-device session transfer system
AUPR815201A0 (en) 2001-10-08 2001-11-01 University Of Wollongong, The Session mobility using digital items
KR20030030384A (ko) 2001-10-10 2003-04-18 김수경 비누 조성물 및 이를 이용하여 비누를 제조하는 방법
US7046230B2 (en) 2001-10-22 2006-05-16 Apple Computer, Inc. Touch pad handheld device
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US20070085841A1 (en) 2001-10-22 2007-04-19 Apple Computer, Inc. Method and apparatus for accelerated scrolling
CA2467826C (en) 2001-10-23 2012-03-13 Visto Corporation System and method for merging remote and local data in a single user interface
GB2381692B (en) 2001-10-31 2004-09-08 Alphamosaic Ltd Video-telephony system
US7415502B2 (en) 2001-11-16 2008-08-19 Sbc Technology Resources, Inc. Method and system for intelligent routing based on presence detection
US7091964B2 (en) 2001-11-30 2006-08-15 Palm, Inc. Electronic device with bezel feature for receiving input
AU2002366409A1 (en) 2001-12-14 2003-06-30 Koninklijke Philips Electronics N.V. Method of enabling interaction using a portable device
US20030112938A1 (en) 2001-12-17 2003-06-19 Memcorp, Inc. Telephone answering machine and method employing caller identification data
TW546942B (en) 2001-12-19 2003-08-11 Inventec Multimedia & Telecom Battery status voice alert method for wireless communication equipment
CA2471469A1 (en) 2001-12-21 2003-07-03 Brylton Software Ltd. Synchronised formative learning system, method, and computer program
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
US8004496B2 (en) 2002-01-08 2011-08-23 Koninklijke Philips Electronics N.V. User interface for electronic devices for controlling the displaying of long sorted lists
WO2003062976A1 (fr) 2002-01-22 2003-07-31 Fujitsu Limited Dispositif et procede pour la selection d'element de menu
JP4417721B2 (ja) 2002-01-22 2010-02-17 富士通株式会社 電子機器とメニュー項目選択方法およびそのプログラム
US7138997B2 (en) 2002-06-28 2006-11-21 Autodesk, Inc. System for physical rotation of volumetric display enclosures to facilitate viewing
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
US20030182139A1 (en) 2002-03-22 2003-09-25 Microsoft Corporation Storage, retrieval, and display of contextual art with digital media files
US9412417B2 (en) 2002-04-05 2016-08-09 Apple Inc. Persistent group of media items for a media device
US7797446B2 (en) 2002-07-16 2010-09-14 Apple Inc. Method and system for updating playlists
US6971017B2 (en) 2002-04-16 2005-11-29 Xerox Corporation Ad hoc secure access to documents and services
US7987491B2 (en) 2002-05-10 2011-07-26 Richard Reisman Method and apparatus for browsing using alternative linkbases
JP3793740B2 (ja) 2002-05-13 2006-07-05 株式会社モバイルコンピューティングテクノロジーズ 携帯型情報端末装置、表示制御情報、及び表示制御方法
JP3761165B2 (ja) 2002-05-13 2006-03-29 株式会社モバイルコンピューティングテクノロジーズ 表示制御装置、携帯型情報端末装置、プログラム、及び表示制御方法
TWI238348B (en) 2002-05-13 2005-08-21 Kyocera Corp Portable information terminal, display control device, display control method, and recording media
US7191411B2 (en) 2002-06-06 2007-03-13 Moehrle Armin E Active path menu navigation system
DE60328335D1 (de) 2002-06-07 2009-08-27 Panasonic Corp System zur Klangbildsteuerung
AU2003233103A1 (en) 2002-06-17 2003-12-31 Koninklijke Philips Electronics N.V. Method for authentication between devices
JP4108406B2 (ja) 2002-06-28 2008-06-25 クラリオン株式会社 表示制御装置
JP2004038896A (ja) 2002-06-28 2004-02-05 Clarion Co Ltd 表示制御手段
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US8762236B1 (en) 2002-07-15 2014-06-24 Paymentech, Llc System and apparatus for transaction data format and function verification
US20040019640A1 (en) 2002-07-25 2004-01-29 Bartram Linda Ruth System and method for distributing shared storage for collaboration across multiple devices
US7166791B2 (en) 2002-07-30 2007-01-23 Apple Computer, Inc. Graphical user interface and methods of use thereof in a multimedia player
US7606560B2 (en) 2002-08-08 2009-10-20 Fujitsu Limited Authentication services using mobile device
JP2004102682A (ja) 2002-09-10 2004-04-02 Nec Corp 端末ロックシステムおよび端末ロック方法
US9100493B1 (en) 2011-07-18 2015-08-04 Andrew H B Zhou Wearable personal digital device for facilitating mobile device payments and personal use
US20040066710A1 (en) 2002-10-03 2004-04-08 Yuen Wai Man Voice-commanded alarm clock system, and associated methods
US20040073432A1 (en) 2002-10-15 2004-04-15 Stone Christopher J. Webpad for the disabled
US7169996B2 (en) 2002-11-12 2007-01-30 Medialab Solutions Llc Systems and methods for generating music using data/music data file transmitted/received via a network
US7199786B2 (en) 2002-11-29 2007-04-03 Daniel Suraqui Reduced keyboards system using unistroke input and having automatic disambiguating and a recognition method using said system
JP2004192573A (ja) 2002-12-13 2004-07-08 Fujitsu Ltd 情報処理装置及び情報表示方法
US7370290B2 (en) 2002-12-19 2008-05-06 Microsoft Corporation Contact card
US20040130581A1 (en) 2003-01-03 2004-07-08 Microsoft Corporation Interaction model
US20050240756A1 (en) 2003-01-12 2005-10-27 Yaron Mayer System and method for improving the efficiency, comfort, and/or reliability in Operating Systems, such as for example Windows.
US7098896B2 (en) 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
JP2004295159A (ja) 2003-02-07 2004-10-21 Sony Corp アイコン表示システム、アイコン表示方法、電子機器装置およびコンピュータプログラム
US7739597B2 (en) 2003-02-24 2010-06-15 Microsoft Corporation Interactive media frame display
US7373657B2 (en) 2003-03-10 2008-05-13 Avaya Technology Corp. Method and apparatus for controlling data and software access
US20050021418A1 (en) 2003-03-18 2005-01-27 Matt Marcus Remote activation of digital media
US7404149B2 (en) 2003-03-28 2008-07-22 International Business Machines Corporation User-defined assistive GUI glue
JP4340566B2 (ja) 2003-04-01 2009-10-07 株式会社リコー Webページ生成装置、組み込み装置、Webページ生成の制御方法、Webページ生成プログラム及び記録媒体
US20060160090A1 (en) 2003-04-11 2006-07-20 Macina Robert A Composition splice variants and methods relating to cancer specific genes and proteins
US20050097135A1 (en) 2003-04-18 2005-05-05 Ian Epperson Touch panel user interface
CA2522604A1 (en) 2003-04-18 2004-11-04 Benjamin Firooz Ghassabian Systems to enhance data entry in mobile and fixed environment
US20040235520A1 (en) 2003-05-20 2004-11-25 Cadiz Jonathan Jay Enhanced telephony computer user interface allowing user interaction and control of a telephone using a personal computer
KR20070026808A (ko) 2003-05-21 2007-03-08 가부시키가이샤 히다치 하이테크놀로지즈 지문센서내장 휴대 단말장치
JP4341298B2 (ja) 2003-05-23 2009-10-07 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP2004356816A (ja) 2003-05-28 2004-12-16 Hitachi Ltd 通信システム、通信端末及び通信端末の動作プログラム
JP4062171B2 (ja) 2003-05-28 2008-03-19 ソニー株式会社 積層構造の製造方法
WO2004107786A1 (en) 2003-05-28 2004-12-09 Nokia Corporation Method and radio terminal equipment arrangement of indicating incoming connection
GB0312465D0 (en) 2003-05-30 2003-07-09 Therefore Ltd A data input method for a computing device
US20040268400A1 (en) 2003-06-26 2004-12-30 Microsoft Corporation Quick starting video content
WO2005003907A2 (en) 2003-06-26 2005-01-13 Ebay Inc. Method and apparatus to authenticate and authorize user access to a system
US7433714B2 (en) 2003-06-30 2008-10-07 Microsoft Corporation Alert mechanism interface
KR100991172B1 (ko) 2003-07-14 2010-11-02 소니 주식회사 정보기록장치 및 정보기록방법
KR100538579B1 (ko) 2003-07-14 2005-12-22 이지케어텍(주) 온라인 상에서의 의무기록서식 관리 방법
WO2005008444A2 (en) 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
JP2005044036A (ja) 2003-07-24 2005-02-17 Ricoh Co Ltd スクロール制御方法、その方法をコンピュータに実行させるプログラム
US8234395B2 (en) 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US8290603B1 (en) * 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US7082573B2 (en) 2003-07-30 2006-07-25 America Online, Inc. Method and system for managing digital assets
US7546470B2 (en) 2003-08-13 2009-06-09 International Business Machines Corporation Selective computer component activation apparatus method and system
US7535465B2 (en) 2003-09-02 2009-05-19 Creative Technology Ltd. Method and system to display media content data
US20050052458A1 (en) 2003-09-08 2005-03-10 Jaron Lambert Graphical user interface for computer-implemented time accounting
CN1525723A (zh) 2003-09-16 2004-09-01 海信集团有限公司 用计算机收发手机短信息的方法
US7756726B2 (en) 2003-09-25 2010-07-13 International Business Machines Corporation Secured medical sign-in
EP1668473B1 (en) 2003-09-26 2012-11-14 Disney Enterprises, Inc. Cell phone parental control
JP2005109720A (ja) 2003-09-29 2005-04-21 Sony Corp 通信システム、情報処理装置および方法、記録媒体、並びにプログラム
CN1860481A (zh) 2003-09-30 2006-11-08 皇家飞利浦电子股份有限公司 使用内容标识符来下载cd封面图片以表示音频内容项
US20130097302A9 (en) 2003-10-01 2013-04-18 Robert Khedouri Audio visual player apparatus and system and method of content distribution using the same
US7532196B2 (en) 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
US7415720B2 (en) 2003-10-31 2008-08-19 Samsung Electronics Co., Ltd. User authentication system and method for controlling the same
EP1538536A1 (en) 2003-12-05 2005-06-08 Sony International (Europe) GmbH Visualization and control techniques for multimedia digital content
US20070143495A1 (en) 2003-12-08 2007-06-21 Shai Porat Personal messaging systems
US7305438B2 (en) 2003-12-09 2007-12-04 International Business Machines Corporation Method and system for voice on demand private message chat
JP2005190108A (ja) 2003-12-25 2005-07-14 Kureo:Kk 表示制御プログラム、表示制御方法および表示制御装置
US7895537B2 (en) 2003-12-29 2011-02-22 International Business Machines Corporation Method and apparatus for setting attributes and initiating actions through gestures
US7631276B2 (en) 2003-12-29 2009-12-08 International Business Machines Corporation Method for indication and navigating related items
US7421656B2 (en) 2004-01-05 2008-09-02 Microsoft Corporation Systems and methods for interacting with a user interface of a media player
US20050162402A1 (en) 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
US7580866B2 (en) 2004-02-10 2009-08-25 Verizon Business Global Llc Apparatus, methods, and computer readable medium for determining the location of a portable device in a shopping environment
US7437005B2 (en) 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
US7441207B2 (en) 2004-03-18 2008-10-21 Microsoft Corporation Method and system for improved viewing and navigation of content
US7403769B2 (en) 2004-03-23 2008-07-22 Nokia Corporation System and method for music synchronization in a mobile device
US20050216839A1 (en) 2004-03-25 2005-09-29 Keith Salvucci Audio scrubbing
US9374607B2 (en) 2012-06-26 2016-06-21 Sonos, Inc. Media playback system with guest access
US20050229112A1 (en) 2004-04-13 2005-10-13 Clay Timothy M Method and system for conveying an image position
US8028323B2 (en) 2004-05-05 2011-09-27 Dryden Enterprises, Llc Method and system for employing a first device to direct a networked audio device to obtain a media item
WO2005109829A1 (en) 2004-05-06 2005-11-17 Koninklijke Philips Electronics N.V. Method device and program for seamlessly transferring the execution of a software application from a first to a second device
US8526646B2 (en) 2004-05-10 2013-09-03 Peter V. Boesen Communication device
US7370244B2 (en) 2004-05-26 2008-05-06 Sap Ag User-guided error correction
US7353466B2 (en) 2004-05-28 2008-04-01 Microsoft Corporation System and method for generating message notification objects on dynamically scaled timeline
GB2431500B (en) 2004-06-18 2009-03-25 Microth Inc Stroke-based data entry device, system, and method
US7519223B2 (en) 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
US7197121B2 (en) 2004-06-30 2007-03-27 Glenayre Electronics, Inc. Audio chunking
US7379047B2 (en) 2004-06-30 2008-05-27 Microsoft Corporation Using a physical object to control an attribute of an interactive display application
US20060020904A1 (en) 2004-07-09 2006-01-26 Antti Aaltonen Stripe user interface
US20060019649A1 (en) 2004-07-21 2006-01-26 Feinleib David A System and method for remote telephone ringer
US7765243B2 (en) 2004-07-26 2010-07-27 Sandisk Il Ltd. Unified local-remote logical volume
EP2000894B1 (en) 2004-07-30 2016-10-19 Apple Inc. Mode-based graphical user interfaces for touch sensitive input devices
US7730223B1 (en) 2004-07-30 2010-06-01 Apple Inc. Wireless home and office appliance management and integration
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
KR100958490B1 (ko) 2004-07-30 2010-05-17 애플 인크. 사용자 인터페이스 방법, 미디어 항목들을 통해 스크롤하는방법, 디스플레이 및 터치 스크린을 갖는 사용자-조작되는전자 장치 상에서 수행되는 방법, 디스플레이 및 터치감지 입력 장치를 갖는 컴퓨팅 장치 상에서 수행되는 방법,컴퓨팅 시스템, 컴퓨팅 장치, 터치 감지 장치를 통해플로팅 컨트롤을 기동시키는 컴퓨터 구현 방법 및 컴퓨터구현 방법
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
WO2006013485A2 (en) 2004-08-02 2006-02-09 Koninklijke Philips Electronics N.V. Pressure-controlled navigating in a touch screen
US7724242B2 (en) 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US7619615B1 (en) 2004-08-31 2009-11-17 Sun Microsystems, Inc. Method and apparatus for soft keys of an electronic device
US8232969B2 (en) 2004-10-08 2012-07-31 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
CN101308442B (zh) 2004-10-12 2012-04-04 日本电信电话株式会社 三维指示方法和三维指示装置
US20060085751A1 (en) 2004-10-14 2006-04-20 O'brien John P Music user interface
US7810035B2 (en) 2004-10-15 2010-10-05 Microsoft Corporation Browsing web content using predictive navigation links
US7706637B2 (en) 2004-10-25 2010-04-27 Apple Inc. Host configured for interoperation with coupled portable media player device
US10200468B2 (en) 2004-11-18 2019-02-05 Microsoft Technology Licensing, Llc Active agenda
US8478363B2 (en) 2004-11-22 2013-07-02 The Invention Science Fund I, Llc Transfer then sleep
JP4411193B2 (ja) 2004-12-09 2010-02-10 富士フイルム株式会社 ディスプレイ付き撮像装置及び画像表示装置
EP1672471A1 (en) 2004-12-14 2006-06-21 Thomson Multimedia Broadband Belgium Content playback device with touch screen
DE102005040125A1 (de) 2004-12-17 2006-06-29 Volkswagen Ag Bedienvorrichtung
US7629966B2 (en) 2004-12-21 2009-12-08 Microsoft Corporation Hard tap
US7489306B2 (en) 2004-12-22 2009-02-10 Microsoft Corporation Touch screen accuracy
CN1797295A (zh) 2004-12-25 2006-07-05 鸿富锦精密工业(深圳)有限公司 一种用于选择动态选项的图形用户界面
JP4896397B2 (ja) 2004-12-28 2012-03-14 富士通株式会社 プログラム、制限方法及びコンピュータ
KR100677421B1 (ko) 2004-12-30 2007-02-02 엘지전자 주식회사 휴대단말기에서의 참조필드 이용방법
US20060146074A1 (en) 2004-12-31 2006-07-06 Harrison Edward R Display for rotatable steering device
US7593782B2 (en) 2005-01-07 2009-09-22 Apple Inc. Highly portable media device
US20060161621A1 (en) 2005-01-15 2006-07-20 Outland Research, Llc System, method and computer program product for collaboration and synchronization of media content on a plurality of media players
US8700729B2 (en) 2005-01-21 2014-04-15 Robin Dua Method and apparatus for managing credentials through a wireless network
JP2006209258A (ja) 2005-01-25 2006-08-10 Kenwood Corp Av処理装置、av処理方法及びプログラム
US8682722B1 (en) 2005-01-28 2014-03-25 Advertising.Com Llc Controlling user experience
US7454192B1 (en) 2005-02-04 2008-11-18 Sprint Communications Company, L.P. Postal address validation using mobile telephone location information
US20060178110A1 (en) 2005-02-09 2006-08-10 Nokia Corporation System and method for interacting with an entity by means of a mobile station via a user-wearable terminal
US20060176278A1 (en) 2005-02-10 2006-08-10 Motorola, Inc. Method and system for display orientation
US7707044B2 (en) 2005-02-11 2010-04-27 Avaya Inc. Use of location awareness to transfer communications sessions between terminals in a healthcare environment
US7783065B2 (en) 2005-03-18 2010-08-24 Nyko Technologies, Inc. Wireless headphone kit for media players
KR20060102724A (ko) 2005-03-24 2006-09-28 삼성전자주식회사 휴대단말기와 그에 따른 리모트 컨트롤 장치
US20060224882A1 (en) 2005-03-31 2006-10-05 Microsoft Corporation Method and system for unlocking a computing device
US7750893B2 (en) 2005-04-06 2010-07-06 Nintendo Co., Ltd. Storage medium storing input position processing program, and input position processing device
US20060236847A1 (en) 2005-04-07 2006-10-26 Withop Ryan L Using images as an efficient means to select and filter records in a database
JP2006295753A (ja) 2005-04-14 2006-10-26 Matsushita Electric Ind Co Ltd 録画再生装置、録画再生方法、及び録画再生プログラム
JP2008541206A (ja) 2005-04-19 2008-11-20 マイクロソフト コーポレーション ネットワーク商取引
US20090144391A1 (en) 2007-11-30 2009-06-04 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Audio sharing
US20060246874A1 (en) 2005-04-28 2006-11-02 Sullivan Scott L Cell phone systems
US20060250578A1 (en) 2005-05-06 2006-11-09 Pohl Garrick G Systems and methods for controlling, monitoring, and using remote applications
US8244179B2 (en) 2005-05-12 2012-08-14 Robin Dua Wireless inter-device data processing configured through inter-device transmitted data
US20060256090A1 (en) 2005-05-12 2006-11-16 Apple Computer, Inc. Mechanical overlay
CN100440947C (zh) 2005-05-13 2008-12-03 海尔集团公司 一种多功能电视机
US9743266B2 (en) 2005-05-23 2017-08-22 Invention Science Fund I, Llc Device pairing via device to device contact
US7530029B2 (en) 2005-05-24 2009-05-05 Microsoft Corporation Narrow mode navigation pane
KR100708135B1 (ko) 2005-05-25 2007-04-17 삼성전자주식회사 항목의 블록화를 이용한 스크롤 방법 및 장치
US20060271425A1 (en) 2005-05-27 2006-11-30 Microsoft Corporation Advertising in application programs
US20060271867A1 (en) 2005-05-27 2006-11-30 Wang Kong Q Mobile communications terminal and method therefore
WO2006131914A2 (en) 2005-06-06 2006-12-14 Chip Pc Israel Ltd Multi-level thin-clients management system and method
KR100643306B1 (ko) 2005-06-13 2006-11-10 삼성전자주식회사 리모트 컨트롤에서의 선택 위치 또는 방향과 동일한 위치또는 방향의 메뉴를 선택할 수 있는 사용자 인터페이스를제공하는 장치 및 방법
US20060281449A1 (en) 2005-06-14 2006-12-14 Huang Kun Enhanced call register menu
US20060288226A1 (en) 2005-06-15 2006-12-21 Stelor Productions, Llc. System and method for establishing and authorizing a security code
US20060286971A1 (en) 2005-06-17 2006-12-21 Maly John W Automatic storage of contact information on a cellular phone
US7831054B2 (en) 2005-06-28 2010-11-09 Microsoft Corporation Volume control
US20070004451A1 (en) 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
AU2005203074A1 (en) 2005-07-14 2007-02-01 Canon Information Systems Research Australia Pty Ltd Image browser
US7567898B2 (en) 2005-07-26 2009-07-28 Broadcom Corporation Regulation of volume of voice in conjunction with background sound
CN1908981A (zh) 2005-08-01 2007-02-07 富士通株式会社 用于物理销售点交易的无线计算机钱包
JP2007041976A (ja) 2005-08-05 2007-02-15 Canon Inc データ処理装置、ファイル処理方法、記憶媒体およびプログラム
US20070048714A1 (en) 2005-08-12 2007-03-01 Microsoft Corporation Media player service library
EP1760619A1 (en) 2005-08-19 2007-03-07 STMicroelectronics Ltd. System for restricting data access
EP2017729B1 (en) 2005-08-23 2018-08-08 BlackBerry Limited Method and system for transferring an application state from a first electronic device to a second electronic device
US20070055947A1 (en) 2005-09-02 2007-03-08 Microsoft Corporation Animations and transitions
US7487346B2 (en) 2005-09-06 2009-02-03 Apple Inc. Techniques and graphical user interfaces for categorical shuffle
KR100802615B1 (ko) 2005-09-09 2008-02-13 엘지전자 주식회사 이동 단말기의 이벤트 표시 장치 및 그 방법
CN100437671C (zh) 2005-09-09 2008-11-26 中国工商银行股份有限公司 异地授权系统及方法
US20070057775A1 (en) 2005-09-10 2007-03-15 O'reilly Mike R Unpredictable alarm clock
EP1932141A4 (en) 2005-09-13 2009-08-19 Spacetime3D Inc SYSTEM AND METHOD FOR FORMING A THREE-DIMENSIONAL USER GRAPHIC INTERFACE
US9629384B2 (en) 2005-09-14 2017-04-25 S & P Ingredient Development, Llc Low sodium salt composition
US20070070045A1 (en) 2005-09-27 2007-03-29 Shu-Chuan Sung Entering a character into an electronic device
CN101278253B (zh) 2005-09-28 2010-08-18 株式会社爱可信 终端设备及管理和显示状态信息及显示菜单窗口的方法
EP1936476A1 (en) 2005-10-07 2008-06-25 Matsushita Electric Industrial Co., Ltd. Input device and portable terminal having same
US7378954B2 (en) 2005-10-21 2008-05-27 Barry Myron Wendt Safety indicator and method
JP4394062B2 (ja) 2005-10-28 2010-01-06 アルプス電気株式会社 パッド型入力装置
US20070097090A1 (en) 2005-10-31 2007-05-03 Battles Amy E Digital camera user interface
US7849323B2 (en) 2005-11-09 2010-12-07 Emc Corporation Password presentation for multimedia devices
US20070115933A1 (en) 2005-11-22 2007-05-24 Sbc Knowledge Ventures Lp Method for maintaining continuity of a multimedia session between media devices
JP2007158919A (ja) 2005-12-07 2007-06-21 Fujifilm Corp 画像表示装置及び画像表示方法
US20070136778A1 (en) 2005-12-09 2007-06-14 Ari Birger Controller and control method for media retrieval, routing and playback
JP4894252B2 (ja) 2005-12-09 2012-03-14 ソニー株式会社 データ表示装置、データ表示方法及びデータ表示プログラム
TW200723081A (en) 2005-12-13 2007-06-16 Universal Scient Ind Co Ltd Circular multimedia playback progress indicator and method of indicating signals thereof
US20070150918A1 (en) 2005-12-22 2007-06-28 Sony Ericsson Mobile Communications Ab Methods, devices, and computer program products for providing parental control over access to media content using a mobile terminal
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
JP4881615B2 (ja) 2005-12-23 2012-02-22 パナソニック株式会社 電子機器の認証についての識別管理システム
US7467352B2 (en) 2005-12-29 2008-12-16 Motorola, Inc. Method and apparatus for mapping corresponding functions in a user
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US20070168369A1 (en) 2006-01-04 2007-07-19 Companionlink Software, Inc. User interface for a portable electronic device
US7596761B2 (en) 2006-01-05 2009-09-29 Apple Inc. Application user interface with navigation bar showing current and prior application contexts
US7574672B2 (en) 2006-01-05 2009-08-11 Apple Inc. Text entry interface for a portable communication device
DE602006001570D1 (de) 2006-01-10 2008-08-07 Alcatel Lucent Verfahren und Zugangsserver, um einen Benutzer eine zentrale Anmeldungsprozedur bereitzustellen
JP4651681B2 (ja) 2006-01-10 2011-03-16 富士通株式会社 端末装置およびコンピュータプログラム
WO2007142703A1 (en) 2006-01-20 2007-12-13 Conversational Computing Corporation Wearable display interface client
US7934169B2 (en) 2006-01-25 2011-04-26 Nokia Corporation Graphical user interface, electronic device, method and computer program that uses sliders for user input
CA2640261A1 (en) 2006-01-26 2007-08-09 Imprivata, Inc. Systems and methods for multi-factor authentication
WO2007120963A2 (en) 2006-01-30 2007-10-25 Jarman Matthew T Synchronizing filter metadata with a multimedia presentation
US8078990B2 (en) 2006-02-01 2011-12-13 Research In Motion Limited Secure device sharing
EP1816821B1 (en) 2006-02-01 2011-05-18 Research In Motion Limited System and method for validating a user of an account using a wireless device
JP2009093206A (ja) 2006-02-02 2009-04-30 Panasonic Corp 通信端末装置及び情報通知方法
US8954852B2 (en) 2006-02-03 2015-02-10 Sonic Solutions, Llc. Adaptive intervals in navigating content and/or media
EP1987627B1 (en) 2006-02-03 2016-11-16 Mideye AB A system, an arrangement and a method for end user authentication
JP5161794B2 (ja) 2006-02-10 2013-03-13 アップル インコーポレイテッド 動的インタラクティブエンターテイメントベニュー
US7827289B2 (en) 2006-02-16 2010-11-02 Dell Products, L.P. Local transmission for content sharing
WO2007102110A2 (en) 2006-03-07 2007-09-13 Koninklijke Philips Electronics N.V. Method of transferring data
JP4850682B2 (ja) 2006-03-07 2012-01-11 富士通株式会社 ロックシステム、ロック解除装置、機器、ロック解除方法及び回路装置
US9953097B2 (en) 2006-03-16 2018-04-24 Ebay Inc. System and method for managing network traffic routing
WO2007107708A2 (en) 2006-03-20 2007-09-27 British Telecommunications Public Limited Company Establishing communications
US20070226778A1 (en) 2006-03-22 2007-09-27 Jorg Pietruszka Bluetooth theft protection
CN100521610C (zh) 2006-03-31 2009-07-29 腾讯科技(深圳)有限公司 客户端播放网络媒体文件的方法及客户端
US9395905B2 (en) 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US7818264B2 (en) 2006-06-19 2010-10-19 Visa U.S.A. Inc. Track data encryption
KR101194539B1 (ko) 2006-04-12 2012-10-26 삼성전자주식회사 미디어 파일 빠른 검색 방법 및 장치
US20070249288A1 (en) 2006-04-14 2007-10-25 Kamran Moallemi Distance-based security
WO2007128069A1 (en) 2006-05-05 2007-11-15 On Q Technologies Pty Ltd System and method for purchasing digital content
EP2018744B1 (en) 2006-05-05 2010-09-08 Nxp B.V. Authentication of devices in a wireless network
KR100679412B1 (ko) 2006-05-11 2007-02-07 삼성전자주식회사 관성센서를 구비한 휴대단말의 알람기능 제어방법 및 장치
JP2007304854A (ja) 2006-05-11 2007-11-22 Hitachi Electronics Service Co Ltd セキュリティシステム及び保守用パソコン
US8086698B2 (en) 2006-06-02 2011-12-27 Google Inc. Synchronizing configuration information among multiple clients
US8015014B2 (en) 2006-06-16 2011-09-06 Storz Endoskop Produktions Gmbh Speech recognition system with user profiles management component
CN101485128B (zh) 2006-06-19 2016-08-03 维萨美国股份有限公司 便携式消费者设备验证系统
US8594742B2 (en) 2006-06-21 2013-11-26 Symbol Technologies, Inc. System and method for monitoring a mobile device
US8010555B2 (en) 2006-06-30 2011-08-30 Aperio Technologies, Inc. System and method for managing images over a network
US8467766B2 (en) 2006-07-06 2013-06-18 Qualcomm Incorporated Methods and systems for managing payment sources in a mobile environment
US20080010387A1 (en) 2006-07-07 2008-01-10 Bryce Allen Curtis Method for defining a Wiki page layout using a Wiki page
US20080011827A1 (en) 2006-07-17 2008-01-17 Research In Motion Limited Automatic management of security information for a security token access device with multiple connections
US8079068B2 (en) 2006-07-17 2011-12-13 Research In Motion Limited Management of multiple connections to a security token access device
US8112794B2 (en) 2006-07-17 2012-02-07 Research In Motion Limited Management of multiple connections to a security token access device
JP5054336B2 (ja) 2006-07-19 2012-10-24 クラリオン株式会社 表示装置およびナビゲーション装置
US20080017704A1 (en) 2006-07-24 2008-01-24 First Data Corporation Contactless Electronic Wallet Payment Device
KR100778367B1 (ko) 2006-08-02 2007-11-22 삼성전자주식회사 휴대 단말기 및 그의 이벤트 처리 방법
US8677257B2 (en) 2006-08-04 2014-03-18 Apple Inc. Granular graphical user interface element
US9009115B2 (en) 2006-08-04 2015-04-14 Apple Inc. Restoring electronic information
KR100834959B1 (ko) 2006-08-11 2008-06-03 삼성전자주식회사 멀티미디어 콘텐츠 재생 방법 및 장치
KR101305497B1 (ko) 2006-08-14 2013-09-05 삼성전자주식회사 클라이언트 컴퓨터 및 원격관리 시스템 및 원격관리방법
US7525424B2 (en) 2006-08-15 2009-04-28 Patented Technology Incorporated Illuminated trail marker apparatus
US9773262B2 (en) 2006-08-17 2017-09-26 Mastercard International Incorporated Purchase Integrated file structure useful in connection with apparatus and method for facilitating account restructuring in an electronic bill payment system
RU2009111002A (ru) 2006-08-27 2010-10-10 Май Мобайл Вотч Лимитед (Cn) Мобильный телефон-часы для системы gsm
US8572169B2 (en) 2006-08-28 2013-10-29 Myspace, Llc System, apparatus and method for discovery of music within a social network
CN100591011C (zh) 2006-08-31 2010-02-17 华为技术有限公司 一种认证方法及系统
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8014760B2 (en) 2006-09-06 2011-09-06 Apple Inc. Missed telephone call management for a portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7996792B2 (en) 2006-09-06 2011-08-09 Apple Inc. Voicemail manager for portable multifunction device
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8736557B2 (en) 2006-09-11 2014-05-27 Apple Inc. Electronic device with image based browsers
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US9202509B2 (en) 2006-09-12 2015-12-01 Sonos, Inc. Controlling and grouping in a multi-zone media system
US8788080B1 (en) 2006-09-12 2014-07-22 Sonos, Inc. Multi-channel pairing in a media system
US8290820B2 (en) 2006-09-13 2012-10-16 Microsoft Corporation Methods of maintaining a journal of media encounters between co-existing portable devices
CN101517563A (zh) 2006-09-13 2009-08-26 微软公司 维护媒体会遇的日志
US20080091717A1 (en) 2006-09-27 2008-04-17 Zachary Adam Garbow Generation of Collaborative Playlist Based Upon Musical Preference Data from Multiple Digital Media Players
US7983614B2 (en) 2006-09-29 2011-07-19 Sony Ericsson Mobile Communications Ab Handover for audio and video playback devices
US7978177B2 (en) 2006-09-29 2011-07-12 Varia Holdings Llc Scrolling behavior-influenced algorithm selection to facilitate adaptive scrolling
US8434133B2 (en) 2006-10-06 2013-04-30 Fmr Llc Single-party, secure multi-channel authentication
US20080084400A1 (en) 2006-10-10 2008-04-10 Outland Research, Llc Touch-gesture control of video media play on handheld media players
GB0621189D0 (en) 2006-10-25 2006-12-06 Payfont Ltd Secure authentication and payment system
US8090087B2 (en) 2006-10-26 2012-01-03 Apple Inc. Method, system, and graphical user interface for making conference calls
US20080109764A1 (en) 2006-11-07 2008-05-08 Mikko Linnamaki Interface for selecting audio-video sources in a limited display environment
US20080126935A1 (en) 2006-11-08 2008-05-29 Ross James Blomgren Audio Visual Entertainment System and Method of Operation
US20080114980A1 (en) 2006-11-13 2008-05-15 Thangapandi Sridhar System, method and apparatus for using standard and extended storage devices in two-factor authentication
US20080114678A1 (en) 2006-11-15 2008-05-15 David Lawrence Bennett Method and apparatus for remote authorization
JP2010509992A (ja) 2006-11-17 2010-04-02 任天堂株式会社 ビデオゲームプログラムのダウンロードシステムおよびダウンロード方法
GB0624582D0 (en) 2006-12-08 2007-01-17 Visible Computing Ltd USB autorun devices
US20080141378A1 (en) 2006-12-12 2008-06-12 Mclean Ivan Hugh Method and apparatus for creating licenses in a mobile digital rights management network
US8706777B2 (en) 2006-12-18 2014-04-22 Microsoft Corporation Media content catalogs
AU2006252196B2 (en) 2006-12-21 2009-05-14 Canon Kabushiki Kaisha Scrolling Interface
US8943410B2 (en) 2006-12-22 2015-01-27 Apple Inc. Modified media presentation during scrubbing
US7656275B2 (en) 2006-12-22 2010-02-02 Research In Motion Limited System and method for controlling an alarm for an electronic device
US8504922B2 (en) 2006-12-29 2013-08-06 Microsoft Corporation Enhanced user navigation to previously visited areas in a media environment
US8583090B2 (en) 2006-12-29 2013-11-12 Nokia Corporation Transferring task completion to another device
US7777732B2 (en) 2007-01-03 2010-08-17 Apple Inc. Multi-event input system
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US8519964B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
US20080168395A1 (en) 2007-01-07 2008-07-10 Bas Ording Positioning a Slider Icon on a Portable Multifunction Device
WO2008085742A2 (en) 2007-01-07 2008-07-17 Apple Inc. Portable multifunction device, method and graphical user interface for interacting with user input elements in displayed content
US20080168185A1 (en) 2007-01-07 2008-07-10 Robbin Jeffrey L Data Synchronization with Host Device in Accordance with Synchronization Preferences
US7844915B2 (en) 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US8116807B2 (en) 2007-01-07 2012-02-14 Apple Inc. Airplane mode indicator on a portable multifunction device
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
US8060825B2 (en) 2007-01-07 2011-11-15 Apple Inc. Creating digital artwork based on content file metadata
CN101606124B (zh) 2007-01-25 2013-02-27 夏普株式会社 多窗口管理装置及信息处理装置
KR20090113310A (ko) 2007-01-26 2009-10-29 퓨전원 인코포레이티드 모바일 디바이스에서 사용하기 위한 콘텐츠를 백업하는 시스템 및 방법
KR100815523B1 (ko) 2007-02-08 2008-03-20 삼성전자주식회사 단말의 음악 재생 및 표시 방법과 이를 이용한 장치
US20080208762A1 (en) 2007-02-22 2008-08-28 First Data Corporation Payments using a mobile commerce device
US20100106647A1 (en) 2007-02-28 2010-04-29 Raja Raman Method and system for close range communication using audio tones
US8362873B2 (en) 2007-03-01 2013-01-29 Deadman Technologies, Llc Control of equipment using remote display
US20080222546A1 (en) 2007-03-08 2008-09-11 Mudd Dennis M System and method for personalizing playback content through interaction with a playback device
JP5042307B2 (ja) 2007-03-09 2012-10-03 パイオニア株式会社 エフェクト装置、av処理装置およびプログラム
CN100544305C (zh) 2007-03-16 2009-09-23 钱晓东 一种基于即时通讯平台的用户信息分享及管理的方法
US20080250319A1 (en) 2007-04-05 2008-10-09 Research In Motion Limited System and method for determining media playback behaviour in a media application for a portable media device
US8280539B2 (en) 2007-04-06 2012-10-02 The Echo Nest Corporation Method and apparatus for automatically segueing between audio tracks
DE602007007581D1 (de) 2007-04-17 2010-08-19 Harman Becker Automotive Sys Akustische Lokalisierung eines Sprechers
US8364139B2 (en) 2007-04-19 2013-01-29 Apple Inc. Personal area network systems and devices and methods for use thereof
US8868053B2 (en) 2007-04-20 2014-10-21 Raphael A. Thompson Communication delivery filter for mobile device
CN101299694B (zh) 2007-04-30 2012-04-25 华为技术有限公司 家庭网络中访客管理的方法及系统、家庭网关
US8483413B2 (en) 2007-05-04 2013-07-09 Bose Corporation System and method for directionally radiating sound
US8325936B2 (en) 2007-05-04 2012-12-04 Bose Corporation Directionally radiating sound in a vehicle
US7979809B2 (en) 2007-05-11 2011-07-12 Microsoft Corporation Gestured movement of object to display edge
US8705722B2 (en) 2007-05-22 2014-04-22 Verizon Patent And Licensing Inc. Automatic routing of communications to user endpoints
US7835988B2 (en) 2007-06-05 2010-11-16 Mastercard International, Inc. Methods and apparatus for preventing fraud in payment processing transactions
CN101321156B (zh) 2007-06-06 2011-05-04 艾威梯科技(北京)有限公司 基于第一互通协议进行第二互通协议扩展的方法和系统
US20080313257A1 (en) 2007-06-15 2008-12-18 Allen James D Method and Apparatus for Policy-Based Transfer of an Application Environment
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US20090006846A1 (en) 2007-06-27 2009-01-01 Apple Inc. Bluetooth device as security access key
US8763058B2 (en) 2007-06-28 2014-06-24 Apple Inc. Selective data downloading and presentation based on user interaction
US8068925B2 (en) * 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
US7750895B2 (en) 2007-06-29 2010-07-06 Microsoft Corporation Navigating lists using input motions
US20090006958A1 (en) 2007-06-29 2009-01-01 Nokia Corporation Method, Apparatus and Computer Program Product for Providing an Object Selection Mechanism for Display Devices
JP2009017486A (ja) 2007-07-09 2009-01-22 Victor Co Of Japan Ltd コンテンツ再生装置
CN101350938B (zh) 2007-07-17 2011-05-25 中兴通讯股份有限公司 一种无线电子广告牌系统
EP2018032A1 (en) 2007-07-20 2009-01-21 Nederlandse Organisatie voor toegepast- natuurwetenschappelijk onderzoek TNO Identification of proximate mobile devices
US8316410B2 (en) 2007-07-23 2012-11-20 At&T Intellectual Property I, Lp Apparatus and method for communicating media between communication devices
JP5340567B2 (ja) 2007-07-24 2013-11-13 株式会社エヌ・ティ・ティ・ドコモ 通信端末、情報管理装置及びプログラム
US8200681B2 (en) 2007-08-22 2012-06-12 Microsoft Corp. Collaborative media recommendation and sharing technique
US8900731B2 (en) 2007-08-24 2014-12-02 Motorola Solutions, Inc. Charger system for communication devices using a charger circuit to communicate a charge status to a portable host device
US7956848B2 (en) 2007-09-04 2011-06-07 Apple Inc. Video chapter access and license renewal
US9477395B2 (en) 2007-09-04 2016-10-25 Apple Inc. Audio file interface
US8532285B2 (en) 2007-09-05 2013-09-10 Avaya Inc. Method and apparatus for call control using motion and position information
KR20090029138A (ko) 2007-09-17 2009-03-20 삼성전자주식회사 동작에 의한 사용자 명령 입력 방법 및 이를 적용한멀티미디어 기기
CN102749997B (zh) 2007-09-18 2016-06-22 微软技术许可有限责任公司 移动终端和控制该移动终端的操作的方法
TW200915698A (en) 2007-09-29 2009-04-01 Acer Inc Device to change the efficacy of charging or discharging based on the status of battery
US8893284B2 (en) 2007-10-03 2014-11-18 Motorola Mobility Llc Method and system for providing extended authentication
US20090100383A1 (en) 2007-10-16 2009-04-16 Microsoft Corporation Predictive gesturing in graphical user interface
EP2056627A1 (en) 2007-10-30 2009-05-06 SonicEmotion AG Method and device for improved sound field rendering accuracy within a preferred listening area
US8818941B2 (en) 2007-11-11 2014-08-26 Microsoft Corporation Arrangement for synchronizing media files with portable devices
US8154608B2 (en) 2007-11-13 2012-04-10 Olympus Corporation Digital camera security
US8217906B2 (en) 2007-11-16 2012-07-10 Sony Ericsson Mobile Communications Ab User interface, apparatus, method, and computer program for viewing of content on a screen
TW200929974A (en) 2007-11-19 2009-07-01 Ibm System and method for performing electronic transactions
US9986293B2 (en) 2007-11-21 2018-05-29 Qualcomm Incorporated Device access control
CN101925916B (zh) 2007-11-21 2013-06-19 高通股份有限公司 基于媒体偏好控制电子设备的方法和系统
EP2063327A1 (fr) 2007-11-26 2009-05-27 EM Microelectronic-Marin SA Circuit électronique de gestion du fonctionnement de périphériques d'une montre
US8624809B2 (en) 2007-11-29 2014-01-07 Apple Inc. Communication using light-emitting device
US8600457B2 (en) 2007-11-30 2013-12-03 Microsoft Corporation Sleep mode for mobile communication device
US7873748B2 (en) 2007-11-30 2011-01-18 International Business Machines Corporation Synchronization of locally and remotely stored browser data
KR101419701B1 (ko) 2007-12-03 2014-07-21 삼성전자주식회사 멀티미디어 재생장치에서 멀티 터치를 이용한 재생 제어 방법
US20090146962A1 (en) 2007-12-05 2009-06-11 Nokia Corporation Mobile communication terminal and method
US8775647B2 (en) 2007-12-10 2014-07-08 Deluxe Media Inc. Method and system for use in coordinating multimedia devices
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
JP2008099330A (ja) 2007-12-18 2008-04-24 Sony Corp 情報処理装置、携帯電話機
CN101188506B (zh) 2007-12-20 2012-07-18 康佳集团股份有限公司 一种linux操作系统的媒体播放器及其实现方法
US8849914B2 (en) 2007-12-20 2014-09-30 The Vanguard Group, Inc. System and method for synchronized co-browsing by users in different web sessions
US20090164923A1 (en) 2007-12-21 2009-06-25 Nokia Corporation Method, apparatus and computer program product for providing an adaptive icon
US8405621B2 (en) 2008-01-06 2013-03-26 Apple Inc. Variable rate media playback methods for electronic devices with touch interfaces
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US20090177966A1 (en) 2008-01-06 2009-07-09 Apple Inc. Content Sheet for Media Player
WO2009086599A1 (en) 2008-01-07 2009-07-16 Avega Systems Pty Ltd A user interface for managing the operation of networked media playback devices
US8724600B2 (en) 2008-01-07 2014-05-13 Tymphany Hong Kong Limited Systems and methods for providing a media playback in a networked environment
US8581957B2 (en) 2008-01-09 2013-11-12 Sony Corporation Video conference using an external video stream
CN101488138B (zh) 2008-01-18 2011-06-22 鹏智科技(深圳)有限公司 网络文件下载服务器及方法
US8424079B2 (en) 2008-01-25 2013-04-16 Research In Motion Limited Method, system and mobile device employing enhanced user authentication
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US8344998B2 (en) 2008-02-01 2013-01-01 Wimm Labs, Inc. Gesture-based power management of a wearable portable electronic device with display
JP2009187146A (ja) 2008-02-04 2009-08-20 Fuji Xerox Co Ltd 情報処理システム及び情報処理プログラム
KR101503714B1 (ko) 2008-02-05 2015-03-20 삼성전자주식회사 Gui 제공방법 및 이를 적용한 멀티미디어 기기
US8151215B2 (en) 2008-02-07 2012-04-03 Sony Corporation Favorite GUI for TV
US8595757B2 (en) 2008-03-05 2013-11-26 At&T Intellectual Property I, L.P. System and method of sharing media content
US20090248737A1 (en) 2008-03-27 2009-10-01 Microsoft Corporation Computing environment representation
JP4692566B2 (ja) 2008-03-28 2011-06-01 ブラザー工業株式会社 通信装置
TWI454087B (zh) 2008-03-31 2014-09-21 Packetvideo Corp 在一網路中管理媒體的方法以及具有用以管理在一網路中的媒體之程式指令的電腦可讀式媒體
US8077157B2 (en) 2008-03-31 2011-12-13 Intel Corporation Device, system, and method of wireless transfer of files
US8612888B2 (en) 2008-04-01 2013-12-17 Litl, Llc Method and apparatus for managing digital media content
US8285811B2 (en) 2008-04-17 2012-10-09 Eloy Technology, Llc Aggregating media collections to provide a primary list and sorted sub-lists
US8051370B2 (en) 2008-04-23 2011-11-01 Microsoft Corporation Intelligent autocompletion
US7860936B1 (en) 2008-05-09 2010-12-28 Symantec Corporation Verifying instant messaging aliases via online parental control accounts
US8218403B2 (en) 2008-05-11 2012-07-10 Research In Motion Limited Electronic device and method providing improved indication that an alarm clock is in an ON condition
ES2526789T3 (es) 2008-05-11 2015-01-15 Blackberry Limited Dispositivo electrónico y método que proporcionan un procesado de un acontecimiento de reloj predeterminado durante el funcionamiento de un modo de tiempo de descanso
US20090282078A1 (en) 2008-05-12 2009-11-12 Motion Limited Unified media file architecture
US9024890B2 (en) 2008-05-17 2015-05-05 David H. Chin Comparison of an applied gesture on a touch screen of a mobile device with a remotely stored security gesture
GB2460306B (en) 2008-05-29 2013-02-13 Intrasonics Sarl Data embedding system
US8830181B1 (en) 2008-06-01 2014-09-09 Cypress Semiconductor Corporation Gesture recognition system for a touch-sensing surface
US20090307616A1 (en) 2008-06-04 2009-12-10 Nokia Corporation User interface, device and method for an improved operating mode
US20090307633A1 (en) 2008-06-06 2009-12-10 Apple Inc. Acceleration navigation of media device displays
US20090304205A1 (en) 2008-06-10 2009-12-10 Sony Corporation Of Japan Techniques for personalizing audio levels
US8249660B2 (en) 2008-06-11 2012-08-21 At&T Intellectual Property I, Lp System and method for display timeout on mobile communication devices
US20090311993A1 (en) 2008-06-16 2009-12-17 Horodezky Samuel Jacob Method for indicating an active voice call using animation
US8977710B2 (en) 2008-06-18 2015-03-10 Qualcomm, Incorporated Remote selection and authorization of collected media transmission
US8909940B2 (en) 2008-06-23 2014-12-09 Intel Corporation Extensible pre-boot authentication
KR101498623B1 (ko) 2008-06-25 2015-03-04 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US8069232B2 (en) 2008-06-30 2011-11-29 Microsoft Corporation Wireless synchronization of media content and subscription content
KR101517967B1 (ko) 2008-07-07 2015-05-06 엘지전자 주식회사 휴대 단말기 및 그 제어방법
KR101524616B1 (ko) 2008-07-07 2015-06-02 엘지전자 주식회사 자이로센서를 구비한 휴대 단말기 및 그 제어방법
US8662401B2 (en) 2008-07-25 2014-03-04 First Data Corporation Mobile payment adoption by adding a dedicated payment button to mobile device form factors
KR101446521B1 (ko) 2008-08-12 2014-11-03 삼성전자주식회사 터치 스크린의 정보 스크롤 제어 방법 및 장치
US20100042835A1 (en) 2008-08-18 2010-02-18 Keep Security Inc. System and method for permission confirmation by transmitting a secure request through a central server to a mobile biometric device
CN101340274A (zh) 2008-08-21 2009-01-07 北京搜狗科技发展有限公司 一种数据同步的方法及装置
US8218790B2 (en) 2008-08-26 2012-07-10 Apple Inc. Techniques for customizing control of volume level in device playback
KR101521920B1 (ko) 2008-08-29 2015-05-20 엘지전자 주식회사 이동 단말기 및 그의 음악재생 제어방법
KR101565378B1 (ko) 2008-09-03 2015-11-03 엘지전자 주식회사 이동단말기 및 그 제어 방법
CN101359291B (zh) 2008-09-08 2012-05-23 华为终端有限公司 一种更换界面风格的方法与设备
US20100070490A1 (en) 2008-09-17 2010-03-18 Eloy Technology, Llc System and method for enhanced smart playlists with aggregated media collections
US8385822B2 (en) 2008-09-26 2013-02-26 Hewlett-Packard Development Company, L.P. Orientation and presence detection for use in configuring operations of computing devices in docked environments
US10380573B2 (en) 2008-09-30 2019-08-13 Apple Inc. Peer-to-peer financial transaction devices and methods
US8510136B2 (en) 2008-09-30 2013-08-13 Verizon Patent And Licensing Inc. Event ticket purchasing
US8245143B2 (en) 2008-10-08 2012-08-14 Research In Motion Limited Method and handheld electronic device having a graphical user interface which arranges icons dynamically
US20100094834A1 (en) 2008-10-15 2010-04-15 Concert Technology Corporation Bridging in a media sharing system
US8624836B1 (en) 2008-10-24 2014-01-07 Google Inc. Gesture-based small device input
US8949955B2 (en) 2008-10-29 2015-02-03 Symantec Corporation Method and apparatus for mobile time-based UI for VIP
CN101409743A (zh) 2008-11-06 2009-04-15 中兴通讯股份有限公司 一种移动通信终端及其与计算机进行无线通信的方法
US9009053B2 (en) 2008-11-10 2015-04-14 Google Inc. Multisensory speech detection
KR101609162B1 (ko) 2008-11-13 2016-04-05 엘지전자 주식회사 터치 스크린을 구비한 이동 단말기 및 이를 이용한 데이터 처리 방법
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100131978A1 (en) 2008-11-26 2010-05-27 Eyecon Technologies, Inc. Visualizing media content navigation with unified media devices controlling
KR101050642B1 (ko) 2008-12-04 2011-07-19 삼성전자주식회사 와치 폰 및 상기 와치 폰에서 통화수행 방법
GB2466038A (en) 2008-12-09 2010-06-16 Alexzandre Anthony Capurro Authorisation of cashless payment using SMS
US8331992B2 (en) 2008-12-19 2012-12-11 Verizon Patent And Licensing Inc. Interactive locked state mobile communication device
USD736254S1 (en) 2008-12-26 2015-08-11 Sony Corporation Display panel or screen with an icon
US8505078B2 (en) 2008-12-28 2013-08-06 Qualcomm Incorporated Apparatus and methods for providing authorized device access
KR101467796B1 (ko) 2009-01-12 2014-12-10 엘지전자 주식회사 이동단말기 및 그 제어 방법
US20110306393A1 (en) 2010-06-15 2011-12-15 Tomasz Goldman Headset base with display and communications base
US8363866B2 (en) 2009-01-30 2013-01-29 Panasonic Automotive Systems Company Of America Audio menu navigation method
US9183881B2 (en) 2009-02-02 2015-11-10 Porto Technology, Llc System and method for semantic trick play
US10175848B2 (en) 2009-02-09 2019-01-08 Nokia Technologies Oy Displaying a display portion including an icon enabling an item to be added to a list
US20100223542A1 (en) 2009-02-27 2010-09-02 Research In Motion Limited Method, system and apparatus for providing pinned bookmarks
US20100229094A1 (en) 2009-03-04 2010-09-09 Apple Inc. Audio preview of music
US20100235784A1 (en) 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US8572513B2 (en) 2009-03-16 2013-10-29 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US8566044B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US11076189B2 (en) 2009-03-30 2021-07-27 Time Warner Cable Enterprises Llc Personal media channel apparatus and methods
US20100250376A1 (en) 2009-03-31 2010-09-30 Srikanth Nandiraju Virtual terminal for mobile devices
CN101854278A (zh) 2009-04-01 2010-10-06 升东网络科技发展(上海)有限公司 即时通讯中的多媒体传输系统和方法
JP5275883B2 (ja) 2009-04-08 2013-08-28 株式会社エヌ・ティ・ティ・ドコモ クライアント端末連携システム、連携サーバ装置、クライアント端末、クライアント端末連携方法
US20100259482A1 (en) 2009-04-10 2010-10-14 Microsoft Corporation Keyboard gesturing
US8243949B2 (en) 2009-04-14 2012-08-14 Plantronics, Inc. Network addressible loudspeaker and audio play
US8060571B2 (en) 2009-04-15 2011-11-15 Sling Media, Inc. Sharing of audio/visual content with a selected user
JP5370744B2 (ja) 2009-04-23 2013-12-18 横河電機株式会社 測定システム
US20100272250A1 (en) 2009-04-28 2010-10-28 Michael Shen-Yuan Yap Method and System for Pulling a Call
EP2247087B1 (en) 2009-04-28 2011-08-24 Research In Motion Limited Method and system for pulling a call
KR101789113B1 (ko) 2009-05-03 2017-10-23 에스에무케이 가부시키가이샤 휴대폰과 같은 이동 통신 디바이스를 이용하는 지불 단말기;자동 이체 지불 트랜잭션의 방법
CN101882409A (zh) 2009-05-06 2010-11-10 中兴通讯股份有限公司 电子广告系统及其广告播放方法
US8669945B2 (en) 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
KR101602221B1 (ko) 2009-05-19 2016-03-10 엘지전자 주식회사 이동 단말 및 그 제어 방법
JP5388114B2 (ja) 2009-05-19 2014-01-15 シャープ株式会社 情報通信システム、通信装置、通信プログラム、および通信方法
US9241062B2 (en) 2009-05-20 2016-01-19 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US20100306657A1 (en) 2009-06-01 2010-12-02 3Dlabs Inc., Ltd. Audio-Enhanced User Interface for Browsing
KR20100132705A (ko) 2009-06-10 2010-12-20 삼성전자주식회사 컨텐츠 리스트 제공방법 및 이를 적용한 멀티미디어 기기
US8281244B2 (en) 2009-06-11 2012-10-02 Apple Inc. User interface for media playback
KR101590357B1 (ko) 2009-06-16 2016-02-01 엘지전자 주식회사 휴대 단말기, 휴대 단말기 동작방법 및 휴대 단말기 싱크 시스템
US9191721B2 (en) 2009-06-16 2015-11-17 Harman International Industries, Incorporated Networked audio/video system
US8045961B2 (en) 2009-06-22 2011-10-25 Mourad Ben Ayed Systems for wireless authentication based on bluetooth proximity
US8548523B2 (en) 2009-07-01 2013-10-01 At&T Intellectual Property I, L.P. Methods, apparatus, and computer program products for changing ring method based on type of connected device
US20110016089A1 (en) 2009-07-16 2011-01-20 Apple Inc. Restoring data to a mobile device
CN101610155A (zh) 2009-07-20 2009-12-23 成都市华为赛门铁克科技有限公司 远程授权方法、装置及系统
KR20110012477A (ko) 2009-07-30 2011-02-09 삼성전자주식회사 휴대단말기에서 자바 어플리케이션을 이용한 데이터 저장 방법 및 장치
US8978130B2 (en) 2009-08-05 2015-03-10 Technology Policy Associates, Llc Method and system for child authentication
US9563350B2 (en) 2009-08-11 2017-02-07 Lg Electronics Inc. Mobile terminal and method for controlling the same
US8233272B2 (en) 2009-08-25 2012-07-31 Mindray Ds Usa, Inc. Display units for use in monitoring patients and related systems and methods
SE534980C2 (sv) 2009-08-26 2012-03-06 Svenska Utvecklings Entreprenoeren Susen Ab Metod för att väcka en insomnad motorfordonsförare
US20110054647A1 (en) 2009-08-26 2011-03-03 Nokia Corporation Network service for an audio interface unit
CN102576487A (zh) 2009-09-01 2012-07-11 Lg电子株式会社 用于控制外部装置及其远程控制器的方法
TWI554076B (zh) 2009-09-04 2016-10-11 普露諾洛股份有限公司 遠距離的電話管理器
US8412185B2 (en) 2009-09-14 2013-04-02 Nokia Corporation Method and apparatus for switching devices using near field communication
JP4738520B2 (ja) 2009-09-18 2011-08-03 株式会社東芝 電子機器および通信制御方法
US8594980B2 (en) 2009-09-18 2013-11-26 Verizon Patent And Licensing Inc. Method and apparatus of template model view generation for home monitoring and control
CN101673207B (zh) 2009-09-25 2013-04-10 成都致远诺亚舟教育科技有限公司 手持式学习终端的程序更新方法
CN101673298A (zh) 2009-09-29 2010-03-17 深圳市融创天下科技发展有限公司 一种视频点播中的视频数据分布式缓存方法
US20110082902A1 (en) 2009-10-01 2011-04-07 Apple Inc. Systems and methods for providing media pools in a communications network
US8312392B2 (en) 2009-10-02 2012-11-13 Qualcomm Incorporated User interface gestures and methods for providing file sharing functionality
US8756010B2 (en) 2009-10-12 2014-06-17 Qualcomm Incorporated Method and apparatus for identification of points of interest within a predefined area
KR101663474B1 (ko) 2009-10-13 2016-10-10 삼성전자주식회사 휴대단말기, 휴대단말기의 바탕화면 표시 방법 및 저장 매체
US8924893B2 (en) 2009-10-14 2014-12-30 At&T Mobility Ii Llc Locking and unlocking of an electronic device using a sloped lock track
US20110106671A1 (en) 2009-10-30 2011-05-05 Bank Of America Corporation Financial Transaction Error Detection
US9176542B2 (en) 2009-11-06 2015-11-03 Sony Corporation Accelerometer-based touchscreen user interface
US8839128B2 (en) 2009-11-25 2014-09-16 Cooliris, Inc. Gallery application for content viewing
CA2781396C (en) 2009-12-01 2018-05-01 Ringcentral, Inc. Universal call management platform
KR20110063297A (ko) 2009-12-02 2011-06-10 삼성전자주식회사 휴대용단말기 및 그 제어방법
JP2011118662A (ja) 2009-12-03 2011-06-16 Toshiba Corp シンクライアント型の情報処理システム
US9268466B2 (en) 2009-12-09 2016-02-23 Citrix Systems, Inc. Methods and systems for updating a dock with a user interface element representative of a remote application
US20110142234A1 (en) 2009-12-15 2011-06-16 Michael Leonard Rogers Multi-Factor Authentication Using a Mobile Phone
US8411604B2 (en) 2009-12-21 2013-04-02 Research In Motion Limited Methods and apparatus for use in facilitating access to aggregator services for mobile communication devices via wireless communication networks
US8458780B1 (en) 2009-12-21 2013-06-04 Emc Corporation Pluggable login architecture and dynamic resource recognition
KR20110074024A (ko) 2009-12-24 2011-06-30 삼성전자주식회사 멀티미디어 기기
KR20110077260A (ko) 2009-12-30 2011-07-07 주식회사 아이리버 애플리케이션과 상호작용하는 컨트롤 키를 제공하는 모바일 디바이스 및 그 방법
KR101626621B1 (ko) 2009-12-30 2016-06-01 엘지전자 주식회사 원형 디스플레이부를 구비한 이동 통신 단말기의 데이터 제어 방법 및 이를 적용한 이동 통신 단말기
US10169740B2 (en) 2009-12-31 2019-01-01 International Business Machines Corporation Tag cloud buddy list for messaging contacts
JP2011141683A (ja) 2010-01-06 2011-07-21 Ricoh Co Ltd 画像処理装置、表示装置、認証システム、表示制御方法、表示制御プログラム、及びそのプログラムを記録した記録媒体
US8525839B2 (en) 2010-01-06 2013-09-03 Apple Inc. Device, method, and graphical user interface for providing digital content products
US20110163966A1 (en) 2010-01-06 2011-07-07 Imran Chaudhri Apparatus and Method Having Multiple Application Display Modes Including Mode with Display Resolution of Another Apparatus
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8301121B2 (en) 2010-01-22 2012-10-30 Sony Ericsson Mobile Communications Ab Regulating alerts generated by communication terminals responsive to sensed movement
US9338276B2 (en) 2010-01-26 2016-05-10 Apple Inc. Gating accessory connection
GB201001728D0 (en) 2010-02-03 2010-03-24 Skype Ltd Screen sharing
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
DE102010008622A1 (de) 2010-02-19 2011-08-25 Airbus Operations GmbH, 21129 Gehäuseloses Staufach
US8869263B2 (en) 2010-02-26 2014-10-21 Blackberry Limited Wireless communications system providing mobile device authentication bypass based upon user-wearable security device and related methods
US20110218765A1 (en) 2010-03-02 2011-09-08 Rogers Janice L Illustrating and Displaying Time and The Expiration Thereof
US8464063B2 (en) 2010-03-10 2013-06-11 Avaya Inc. Trusted group of a plurality of devices with single sign on, secure authentication
US8614560B2 (en) 2010-03-26 2013-12-24 Nokia Corporation Method and apparatus for determining interaction mode
JP2011209786A (ja) 2010-03-29 2011-10-20 Sony Corp 情報処理装置、および情報処理方法、並びにプログラム
JP2011210138A (ja) 2010-03-30 2011-10-20 Sony Corp 電子機器、画像出力方法及びプログラム
US20110242002A1 (en) 2010-03-30 2011-10-06 Jonathan Kaplan Hand-held device with a touch screen and a touch strip
CN102209321B (zh) 2010-03-31 2013-10-09 华为终端有限公司 一种切换处理方法及通信系统以及相关设备
US8917632B2 (en) 2010-04-07 2014-12-23 Apple Inc. Different rate controller configurations for different cameras of a mobile device
US9058186B2 (en) 2010-04-07 2015-06-16 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9413836B2 (en) 2010-04-08 2016-08-09 At&T Intellectual Property I, L.P. Communication routing based on presence in a confined wireless environment
US8380177B2 (en) 2010-04-09 2013-02-19 Paydiant, Inc. Mobile phone payment processing methods and systems
US9110505B2 (en) 2010-04-16 2015-08-18 Innovative Devices Inc. Wearable motion sensing computing interface
US8638222B2 (en) 2010-04-19 2014-01-28 Microsoft Corporation Controllable device selection based on controller location
US8699674B2 (en) 2010-04-21 2014-04-15 Angel.Com Incorporated Dynamic speech resource allocation
EP2381372A1 (en) 2010-04-23 2011-10-26 Research In Motion Limited Visual shuffling of media icons
US20110271181A1 (en) 2010-04-28 2011-11-03 Acer Incorporated Screen unlocking method and electronic apparatus thereof
US8494439B2 (en) 2010-05-04 2013-07-23 Robert Bosch Gmbh Application state and activity transfer between devices
US9559869B2 (en) 2010-05-04 2017-01-31 Qwest Communications International Inc. Video call handling
JP5678468B2 (ja) 2010-05-06 2015-03-04 株式会社リコー 画像処理システム及び動作管理方法
KR101695810B1 (ko) 2010-05-07 2017-01-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
FI20105493A0 (fi) 2010-05-07 2010-05-07 Polar Electro Oy Tehonsiirto
AU2011250886A1 (en) 2010-05-10 2013-01-10 Icontrol Networks, Inc Control system user interface
JP2011238125A (ja) 2010-05-12 2011-11-24 Sony Corp 画像処理装置および方法、並びにプログラム
US20110281568A1 (en) 2010-05-13 2011-11-17 Rovi Technologies Corporation Management of incoming telephony communications in a local media network
WO2011146898A2 (en) 2010-05-21 2011-11-24 Bologh Mark J Internet system for ultra high video quality
KR101673925B1 (ko) 2010-05-26 2016-11-09 삼성전자주식회사 터치 락 상태를 가지는 단말기 및 이의 운용 방법
US20110291971A1 (en) 2010-05-28 2011-12-01 Funai Electric Co., Ltd. Highly Integrated Touch Screen Handheld Device
US20110304556A1 (en) 2010-06-09 2011-12-15 Microsoft Corporation Activate, fill, and level gestures
US20120089951A1 (en) 2010-06-10 2012-04-12 Cricket Communications, Inc. Method and apparatus for navigation within a multi-level application
EP2580735A4 (en) 2010-06-10 2015-07-01 Cricket Communications Inc MOBILE DEVICE FOR MEDIA ACCESS AND PLACEMENT
CN101873386A (zh) 2010-06-13 2010-10-27 华为终端有限公司 一种移动终端及其来电提示方法
JP4977236B2 (ja) 2010-06-16 2012-07-18 株式会社東芝 情報端末、ランチャー・プログラムおよび方法
US9798822B2 (en) 2010-06-29 2017-10-24 Apple Inc. Location based grouping of browsing histories
US20110319056A1 (en) 2010-06-29 2011-12-29 Enterproid Hk Ltd Remote access to a mobile device
KR101658087B1 (ko) 2010-07-02 2016-09-21 엘지전자 주식회사 이동단말기 및 그의 증강현실을 이용한 정보 표시 방법
DE202010010266U1 (de) 2010-07-06 2010-10-14 Holzma Plattenaufteiltechnik Gmbh Plattenaufteilanlage
US8972903B2 (en) 2010-07-08 2015-03-03 Apple Inc. Using gesture to navigate hierarchically ordered user interface screens
US8500031B2 (en) 2010-07-29 2013-08-06 Bank Of America Corporation Wearable article having point of sale payment functionality
CA2748199A1 (en) 2010-08-04 2012-02-04 Iwatchlife Inc. Method and system for making video calls
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
WO2012020866A1 (ko) 2010-08-13 2012-02-16 엘지전자 주식회사 이동단말기, 디스플레이 장치 및 그 제어 방법
JP5510185B2 (ja) 2010-08-20 2014-06-04 ソニー株式会社 情報処理装置、プログラム及び表示制御方法
US8519834B2 (en) 2010-08-22 2013-08-27 Andrea Theresa Jersa Wrist wound vibrating device
CN103329560B (zh) 2010-08-26 2017-02-08 泰瑞克·塔勒布 用于创建为社交网络定制的多媒体内容频道的系统和方法
US8611559B2 (en) 2010-08-31 2013-12-17 Apple Inc. Dynamic adjustment of master and individual volume controls
US10140301B2 (en) 2010-09-01 2018-11-27 Apple Inc. Device, method, and graphical user interface for selecting and using sets of media player controls
US8854318B2 (en) 2010-09-01 2014-10-07 Nokia Corporation Mode switching
CN103339623B (zh) 2010-09-08 2018-05-25 纽昂斯通讯公司 涉及因特网搜索的方法和设备
US8341142B2 (en) 2010-09-08 2012-12-25 Nuance Communications, Inc. Methods and apparatus for searching the Internet
US20120062470A1 (en) 2010-09-10 2012-03-15 Chang Ray L Power Management
CN101931655A (zh) 2010-09-10 2010-12-29 北京开心人信息技术有限公司 一种在线状态的提示方法与系统
US20120066731A1 (en) 2010-09-14 2012-03-15 Verizon Patent And Licensing Inc. Customer service contact
US8886710B2 (en) 2010-09-24 2014-11-11 Amazon Technologies, Inc. Resuming content across devices and formats
US8606948B2 (en) 2010-09-24 2013-12-10 Amazon Technologies, Inc. Cloud-based device interaction
US20120215878A1 (en) 2010-09-28 2012-08-23 Adam Kidron Content delivery platform apparatuses, methods and systems
US20120078789A1 (en) 2010-09-29 2012-03-29 Ebay Inc. Offline to online payment
US8954290B2 (en) 2010-09-30 2015-02-10 Fitbit, Inc. Motion-activated display of messages on an activity monitoring device
US8749484B2 (en) 2010-10-01 2014-06-10 Z124 Multi-screen user interface with orientation based control
US8923997B2 (en) 2010-10-13 2014-12-30 Sonos, Inc Method and apparatus for adjusting a speaker system
US8473577B2 (en) 2010-10-13 2013-06-25 Google Inc. Continuous application execution between multiple devices
US20120096386A1 (en) 2010-10-19 2012-04-19 Laurent Baumann User interface for application transfers
US20130205375A1 (en) 2010-10-27 2013-08-08 Telefonaktiebolaget L M Ericsson (Publ) Authorizing an electronic device to control a media rendering unit
CN101976171A (zh) 2010-10-29 2011-02-16 东莞宇龙通信科技有限公司 一种触摸设备的解锁方法、系统及触摸设备
US9262595B2 (en) 2010-10-29 2016-02-16 Qualcomm Incorporated Methods and systems for accessing licensable items in a geographic area
US9251503B2 (en) 2010-11-01 2016-02-02 Microsoft Technology Licensing, Llc Video viewing and tagging system
US9262002B2 (en) 2010-11-03 2016-02-16 Qualcomm Incorporated Force sensing touch screen
US20120115608A1 (en) 2010-11-05 2012-05-10 Howard Pfeifer Method and apparatus for controlling an audio parameter of a plurality of wagering game machines
US8640021B2 (en) 2010-11-12 2014-01-28 Microsoft Corporation Audience-based presentation and customization of content
WO2012068551A1 (en) 2010-11-18 2012-05-24 Google Inc. Surfacing off-screen visible objects
KR101808625B1 (ko) 2010-11-23 2018-01-18 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
US9053103B2 (en) 2010-11-23 2015-06-09 Nokia Technologies Oy Method and apparatus for interacting with a plurality of media files
US20120143694A1 (en) 2010-12-03 2012-06-07 Microsoft Corporation Using behavioral data to manage computer services
EP2649596B1 (en) 2010-12-09 2020-10-07 UTC Fire & Security Corporation Wake-up circuit for a security device
KR101830651B1 (ko) 2011-01-04 2018-02-21 엘지전자 주식회사 정보 표시 장치 및 그 방법
EP2474925A1 (en) 2011-01-05 2012-07-11 QNX Software Systems Limited Media player navigation
US8655345B2 (en) 2011-01-08 2014-02-18 Steven K. Gold Proximity-enabled remote control
US9684394B2 (en) 2011-01-10 2017-06-20 Apple Inc. Button functionality
CN102065148A (zh) 2011-01-12 2011-05-18 无锡网芯科技有限公司 基于通信网络的存储系统访问授权方法
US9002420B2 (en) 2011-01-19 2015-04-07 Ram Pattikonda Watch having an interface to a mobile communications device
CN201928419U (zh) 2011-01-21 2011-08-10 青岛海信移动通信技术股份有限公司 一种耳机及配置有所述耳机的移动通信终端
US8825362B2 (en) 2011-01-27 2014-09-02 Honda Motor Co., Ltd. Calendar sharing for the vehicle environment using a connected cell phone
US9049494B2 (en) 2011-01-31 2015-06-02 Cbs Interactive, Inc. Media playback control
WO2012104288A1 (en) 2011-02-03 2012-08-09 Telefonaktiebolaget L M Ericsson (Publ) A device having a multipoint sensing surface
EP2487871A1 (en) 2011-02-11 2012-08-15 Telefónica, S.A. Method and system for transmission of application status between different devices
US20120210226A1 (en) 2011-02-11 2012-08-16 Sony Network Entertainment International Llc Method to playback a recently-played asset via a second display
US10146329B2 (en) 2011-02-25 2018-12-04 Nokia Technologies Oy Method and apparatus for providing different user interface effects for different motion gestures and motion properties
US20120222092A1 (en) 2011-02-25 2012-08-30 Qualcomm Incorporated Controlling access to media for an electronic device
US20120223959A1 (en) 2011-03-01 2012-09-06 Apple Inc. System and method for a touchscreen slider with toggle control
KR20120100433A (ko) 2011-03-04 2012-09-12 삼성에스디에스 주식회사 사용자 정보와 3차원 지아이에스 데이터를 활용한 모바일정보 제공 시스템
JP5885185B2 (ja) 2011-03-07 2016-03-15 京セラ株式会社 携帯端末装置
JP5749524B2 (ja) 2011-03-09 2015-07-15 京セラ株式会社 携帯端末、携帯端末の制御プログラムおよび携帯端末の制御方法
US8904305B2 (en) 2011-03-11 2014-12-02 Google Inc. Automatically hiding controls
US8392259B2 (en) 2011-03-17 2013-03-05 Research In Motion Limited Methods and apparatus to obtain transaction confirmation
WO2012126078A1 (en) 2011-03-23 2012-09-27 Research In Motion Limited Method for conference call prompting from a locked device
US9298287B2 (en) 2011-03-31 2016-03-29 Microsoft Technology Licensing, Llc Combined activation for natural user interface systems
JP5161333B2 (ja) 2011-03-31 2013-03-13 株式会社エヌ・ティ・ティ・ドコモ 情報表示サーバ、情報表示システム、及び情報表示方法
US10630795B2 (en) 2011-03-31 2020-04-21 Oath Inc. Systems and methods for transferring application state between devices based on gestural input
US9337999B2 (en) 2011-04-01 2016-05-10 Intel Corporation Application usage continuum across platforms
US9239605B1 (en) 2011-04-04 2016-01-19 Google Inc. Computing device power state transitions
US8938312B2 (en) 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9727124B2 (en) 2011-04-19 2017-08-08 Apple Inc. Power saving application update in a portable electronic device
US9832183B2 (en) 2011-04-19 2017-11-28 Early Warning Services, Llc Key management using quasi out of band authentication architecture
CN102750066A (zh) 2011-04-20 2012-10-24 上海三旗通信科技股份有限公司 触屏终端在锁屏状态下实现特定功能控制方式
US9493130B2 (en) 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US20120272145A1 (en) 2011-04-22 2012-10-25 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Method for using radio presets as application shortcuts
EP2702752B1 (en) 2011-04-27 2019-09-18 BlackBerry Limited System and method for automatically answering a call on a communication device
ES2870588T3 (es) 2011-04-29 2021-10-27 American Greetings Corp Sistemas, procedimientos y aparatos para crear, editar, distribuir y visualizar tarjetas de felicitación electrónicas
US9606643B2 (en) 2011-05-02 2017-03-28 Microsoft Technology Licensing, Llc Extended above the lock-screen experience
US10222974B2 (en) 2011-05-03 2019-03-05 Nokia Technologies Oy Method and apparatus for providing quick access to device functionality
US10402898B2 (en) 2011-05-04 2019-09-03 Paypal, Inc. Image-based financial processing
US9141616B2 (en) 2011-05-06 2015-09-22 Google Inc. Physical confirmation for network-provided content
US8171137B1 (en) 2011-05-09 2012-05-01 Google Inc. Transferring application state across devices
US8224894B1 (en) 2011-05-09 2012-07-17 Google Inc. Zero-click sharing of application context across devices
US8812601B2 (en) 2011-05-09 2014-08-19 Google Inc. Transferring application state across devices with checkpoints
US20120290943A1 (en) 2011-05-10 2012-11-15 Nokia Corporation Method and apparatus for distributively managing content between multiple users
US20120297017A1 (en) 2011-05-20 2012-11-22 Microsoft Corporation Privacy-conscious personalization
US8954177B2 (en) 2011-06-01 2015-02-10 Apple Inc. Controlling operation of a media device based upon whether a presentation device is currently being worn by a user
US9478251B2 (en) 2011-06-03 2016-10-25 Apple Inc. Graphical user interfaces for displaying media items
US9201895B2 (en) 2011-06-03 2015-12-01 Apple Inc. Management of downloads from a network-based digital data repository based on network performance
CN103582873B (zh) 2011-06-05 2017-07-14 苹果公司 用于显示从多个应用接收到的通知的系统和方法
US20120311444A1 (en) 2011-06-05 2012-12-06 Apple Inc. Portable multifunction device, method, and graphical user interface for controlling media playback using gestures
WO2012174435A1 (en) 2011-06-16 2012-12-20 Richard Tao Systems and methods for a virtual watch
US9891800B2 (en) 2011-06-17 2018-02-13 Nokia Technologies Oy Method and apparatus for providing a notification mechanism
US8663018B2 (en) 2011-06-29 2014-03-04 Amazon Technologies, Inc. Data locker synchronization
WO2013000150A1 (en) 2011-06-30 2013-01-03 Nokia Corporation Method, apparatus and computer program product for retrieval of lost or forgotten passwords
TW201301118A (zh) 2011-06-30 2013-01-01 Gcca Inc 雲端通訊裝置以及使用雲端通訊裝置之智慧行動裝置
US8639706B1 (en) 2011-07-01 2014-01-28 Google Inc. Shared metadata for media files
US9582598B2 (en) 2011-07-05 2017-02-28 Visa International Service Association Hybrid applications utilizing distributed models and views apparatuses, methods and systems
US9639506B2 (en) 2011-07-07 2017-05-02 Honeywell International Inc. Interface for home energy manager
EP2732647A4 (en) 2011-07-13 2015-01-21 Blackberry Ltd SYSTEMS AND METHOD FOR DISPLAYING OVERSCROLL REGIONS ON ELECTRONIC DEVICES
US20130017846A1 (en) 2011-07-14 2013-01-17 Htc Corporation Systems and Methods for Smart Texting on Mobile Devices
US8726371B2 (en) 2011-07-18 2014-05-13 Cisco Technology, Inc. Enhanced security for devices enabled for wireless communications
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
US8854299B2 (en) 2011-07-22 2014-10-07 Blackberry Limited Orientation based application launch system
US8823318B2 (en) 2011-07-25 2014-09-02 ConvenientPower HK Ltd. System and method for operating a mobile device
US20130027289A1 (en) 2011-07-27 2013-01-31 Lg Electronics Inc. Electronic device
US9071418B2 (en) 2011-07-29 2015-06-30 Blackfire Research Corporation Synchronous media rendering of demuxed media components across multiple devices
US9438697B2 (en) 2011-08-01 2016-09-06 Quickbiz Holdings Limited, Apia User interface content state synchronization across devices
US20130041790A1 (en) 2011-08-12 2013-02-14 Sivakumar Murugesan Method and system for transferring an application state
US9864632B2 (en) 2011-08-17 2018-01-09 Open Invention Network, Llc System and method for transfer of an application state between devices
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US8789156B2 (en) 2011-08-19 2014-07-22 International Business Machines Corporation Data management with a networked mobile device
US8750677B2 (en) 2011-08-23 2014-06-10 Microsoft Corporation Method for transferring media playback from a different device
US9122311B2 (en) 2011-08-24 2015-09-01 Apple Inc. Visual feedback for tactile and non-tactile user interfaces
US9819710B2 (en) 2011-08-25 2017-11-14 Logitech Europe S.A. Easy sharing of wireless audio signals
KR101955976B1 (ko) 2011-08-25 2019-03-08 엘지전자 주식회사 제한된 사용자 인터페이스를 가진 장치의 활성화
KR101419984B1 (ko) 2011-08-26 2014-07-15 주식회사 팬택 클라우드 환경에서 nfc를 이용한 콘텐츠 공유 시스템 및 방법
US20130055082A1 (en) 2011-08-26 2013-02-28 Jorge Fino Device, Method, and Graphical User Interface for Navigating and Previewing Content Items
KR101962445B1 (ko) 2011-08-30 2019-03-26 삼성전자 주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 사용자 인터페이스 제공 방법
KR101719994B1 (ko) 2011-09-07 2017-03-27 엘지전자 주식회사 이동단말기 및 그 제어방법
US8976128B2 (en) 2011-09-12 2015-03-10 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US8769286B2 (en) 2011-09-20 2014-07-01 Daon Holdings Limited Methods and systems for increasing the security of electronic messages
US20130073286A1 (en) 2011-09-20 2013-03-21 Apple Inc. Consolidating Speech Recognition Results
US9286384B2 (en) 2011-09-21 2016-03-15 Sonos, Inc. Methods and systems to share media
US9052810B2 (en) 2011-09-28 2015-06-09 Sonos, Inc. Methods and apparatus to manage zones of a multi-zone media playback system
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US8769624B2 (en) 2011-09-29 2014-07-01 Apple Inc. Access control utilizing indirect authentication
CN108337380B (zh) 2011-09-30 2022-08-19 苹果公司 自动调整用户界面以用于免提交互
US8682973B2 (en) 2011-10-05 2014-03-25 Microsoft Corporation Multi-user and multi-device collaboration
CN103037064B (zh) 2011-10-08 2015-02-11 英华达(上海)科技有限公司 个性化屏幕解锁方法及其系统
US8917877B2 (en) 2011-10-12 2014-12-23 Sony Corporation Distance-based rendering of media files
US20180032997A1 (en) 2012-10-09 2018-02-01 George A. Gordon System, method, and computer program product for determining whether to prompt an action by a platform in connection with a mobile device
KR101820734B1 (ko) 2011-10-14 2018-03-13 삼성전자 주식회사 모바일 단말기를 위한 동적 잠금 해제 방법 및 장치
EP2769272A1 (en) 2011-10-18 2014-08-27 Slyde Watch SA A method and circuit for switching a wristwatch from a first power mode to a second power mode
KR101834995B1 (ko) 2011-10-21 2018-03-07 삼성전자주식회사 디바이스 간 컨텐츠 공유 방법 및 장치
US8718628B2 (en) 2011-10-24 2014-05-06 Verizon Patent And Licensing Inc. Intelligent call identification
JP5739303B2 (ja) 2011-10-25 2015-06-24 京セラ株式会社 携帯端末、ロック制御プログラムおよびロック制御方法
JP5908253B2 (ja) 2011-10-28 2016-04-26 シャープ株式会社 機器制御装置及び機器制御方法
US20130111579A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Electronic device mode, associated apparatus and methods
US8739070B2 (en) 2011-11-01 2014-05-27 WMODE, Inc. System, method and apparatus for providing an application carousel
US8639230B2 (en) 2011-11-04 2014-01-28 Google Inc. Transferring an active call to another device
US8225191B1 (en) 2011-11-07 2012-07-17 Google Inc. Synchronizing web browsers
US9582178B2 (en) 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US9031847B2 (en) 2011-11-15 2015-05-12 Microsoft Technology Licensing, Llc Voice-controlled camera operations
US20130120106A1 (en) 2011-11-16 2013-05-16 Motorola Mobility, Inc. Display device, corresponding systems, and methods therefor
US8719734B2 (en) 2011-11-16 2014-05-06 Microsoft Corporation Two-stage swipe gesture recognition
JP5825631B2 (ja) 2011-11-17 2015-12-02 アルパイン株式会社 電子装置
US8655385B2 (en) 2011-11-18 2014-02-18 Blackberry Limited Social networking methods and apparatus for use in facilitating participation in user-relevant social groups
WO2013075071A1 (en) 2011-11-18 2013-05-23 Ayman Hammad Mobile wallet store and service injection platform apparatuses, methods and systems
US9661073B2 (en) 2011-11-18 2017-05-23 Google Inc. Web browser synchronization with multiple simultaneous profiles
CN102508707A (zh) 2011-11-21 2012-06-20 宇龙计算机通信科技(深圳)有限公司 信息编辑方法和终端
US20130174044A1 (en) 2011-11-22 2013-07-04 Thomas Casey Hill Methods and apparatus to control presentation devices
FR2983177B1 (fr) 2011-11-29 2014-06-06 Airbus Operations Sas Dispositif de dialogue interactif entre un operateur d'un aeronef et un systeme de guidage dudit aeronef.
TWI487364B (zh) 2011-12-01 2015-06-01 Amtran Technology Co Ltd 裝置間切換通話之方法及通訊電子裝置
US8392617B1 (en) 2011-12-06 2013-03-05 Google Inc. Browsing context continuation across multiple devices
CN102523213B (zh) 2011-12-13 2014-09-17 华为终端有限公司 服务器、终端鉴权方法以及服务器、终端
TW201324310A (zh) 2011-12-14 2013-06-16 Acer Inc 螢幕解鎖方法
US9245020B2 (en) 2011-12-14 2016-01-26 Microsoft Technology Licensing, Llc Collaborative media sharing
US20130162411A1 (en) 2011-12-22 2013-06-27 Qualcomm Incorporated Method and apparatus to adapt a remote control user interface
US20130305354A1 (en) 2011-12-23 2013-11-14 Microsoft Corporation Restricted execution modes
KR101679343B1 (ko) 2011-12-28 2016-11-24 노키아 테크놀로지스 오와이 애플리케이션 스위쳐
RU2601831C2 (ru) 2011-12-28 2016-11-10 Нокиа Текнолоджиз Ой Предоставление открытого экземпляра приложения
US9191699B2 (en) 2011-12-29 2015-11-17 Sonos, Inc. Systems and methods for connecting an audio controller to a hidden audio network
US9247492B2 (en) 2011-12-29 2016-01-26 Sonos, Inc. Systems and methods for multi-network audio control
CA2861984C (en) 2011-12-29 2019-04-16 Telefonaktiebolaget L M Ericsson (Publ) Technique for handling a status change in an interconnect node
KR20130082190A (ko) 2012-01-11 2013-07-19 엘지전자 주식회사 단말기 및 아이콘 표시 방법
US9213822B2 (en) 2012-01-20 2015-12-15 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
US9436929B2 (en) 2012-01-24 2016-09-06 Verizon Patent And Licensing Inc. Collaborative event playlist systems and methods
JP5999452B2 (ja) 2012-01-26 2016-09-28 パナソニックIpマネジメント株式会社 携帯端末及び機器連携方法
EP2807594B1 (en) 2012-01-26 2021-08-25 BlackBerry Limited Methods and devices for distributing content to an electronic device
US9431980B2 (en) 2012-01-30 2016-08-30 Echostar Ukraine Llc Apparatus, systems and methods for adjusting output audio volume based on user location
JP5906097B2 (ja) 2012-01-31 2016-04-20 キヤノン株式会社 電子機器、その制御方法、プログラム、及び記録媒体
US9680927B2 (en) 2012-02-05 2017-06-13 Apple Inc. Cloud tabs
JP5705888B2 (ja) 2012-02-06 2015-04-22 株式会社コナミデジタルエンタテインメント 管理サーバ、その制御方法、及びそのプログラム
US9507630B2 (en) 2012-02-09 2016-11-29 Cisco Technology, Inc. Application context transfer for distributed computing resources
US8995960B2 (en) 2012-02-10 2015-03-31 Dedo Interactive, Inc. Mobile device authentication
KR102008495B1 (ko) 2012-02-24 2019-08-08 삼성전자주식회사 데이터 공유 방법 및 이를 위한 이동 단말기
KR101849925B1 (ko) 2012-02-24 2018-04-18 삼성전자주식회사 무선 통신 네트워크에서 디바이스 탐색 방법 및 장치
US8988349B2 (en) 2012-02-28 2015-03-24 Google Technology Holdings LLC Methods and apparatuses for operating a display in an electronic device
US8947382B2 (en) 2012-02-28 2015-02-03 Motorola Mobility Llc Wearable display device, corresponding systems, and method for presenting output on the same
EP3965042A1 (en) 2012-02-29 2022-03-09 Apple Inc. Method, device and secure element for conducting a secured financial transaction on a device
US9702723B2 (en) 2012-03-01 2017-07-11 Nokia Technologies Oy Method and apparatus for receiving user estimation of navigational instructions
US9189062B2 (en) 2012-03-07 2015-11-17 Google Technology Holdings LLC Portable electronic device and method for controlling operation thereof based on user motion
US9936329B2 (en) 2012-03-09 2018-04-03 Nokia Technologies Oy Methods, apparatuses, and computer program products for operational routing between proximate devices
US8725113B2 (en) 2012-03-12 2014-05-13 Google Inc. User proximity control of devices
EP2825943A1 (en) 2012-03-13 2015-01-21 Telefonaktiebolaget LM Ericsson (Publ) An apparatus and method for navigating on a touch sensitive screen thereof
GB2500375A (en) 2012-03-13 2013-09-25 Nec Corp Input commands to a computer device using patterns of taps
US8751577B2 (en) 2012-03-15 2014-06-10 Google Inc. Methods and systems for ordering and voting on shared media playlists
US20150051913A1 (en) 2012-03-16 2015-02-19 Lg Electronics Inc. Unlock method using natural language processing and terminal for performing same
US10469897B2 (en) 2012-03-19 2019-11-05 Sonos, Inc. Context-based user music menu systems and methods
US9934713B2 (en) 2012-03-28 2018-04-03 Qualcomm Incorporated Multifunction wristband
ES2553713T1 (es) 2012-04-01 2015-12-11 Authentify, Inc. Autentificación segura en un sistema con múltiples partes
JP2012168966A (ja) 2012-04-10 2012-09-06 Toshiba Corp 情報端末、そのプログラムおよび方法
US10142122B1 (en) 2012-04-11 2018-11-27 Google Llc User interfaces, systems and methods for configuring smart devices for interoperability with a smart hub device
GB201206564D0 (en) 2012-04-13 2012-05-30 Intrasonics Sarl Event engine synchronisation
US9507327B2 (en) 2012-04-20 2016-11-29 Liaison Home Automation, Llc Systems and methods for controlling home and commercial environments including one touch and intuitive functionality
US20130283199A1 (en) 2012-04-24 2013-10-24 Microsoft Corporation Access to an Application Directly from a Lock Screen
CN102707994B (zh) 2012-04-27 2014-08-20 西安电子科技大学 局域网络中手持移动设备控制电脑的方法
US20170372405A9 (en) 2012-05-04 2017-12-28 Kachyng, Inc. Quick transaction completion using mobile device
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
US10235014B2 (en) 2012-05-09 2019-03-19 Apple Inc. Music user interface
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US20130311597A1 (en) 2012-05-16 2013-11-21 Apple Inc. Locally backed cloud-based storage
US9086937B2 (en) 2012-05-16 2015-07-21 Apple Inc. Cloud-based application resource files
CN111176516B (zh) 2012-05-18 2023-10-20 苹果公司 用于操纵用户界面的设备、方法和图形用户界面
US8718716B2 (en) 2012-05-23 2014-05-06 Steven Earl Kader Method of displaying images while charging a smartphone
US8850037B2 (en) 2012-05-24 2014-09-30 Fmr Llc Communication session transfer between devices
CN102737313A (zh) 2012-05-25 2012-10-17 天地融科技股份有限公司 一种给电子签名工具授权校验的方法、系统及电子签名工具
KR101959347B1 (ko) 2012-05-25 2019-03-18 삼성전자주식회사 복수의 통신 단말을 이용한 다중 디스플레이 방법, 기계로 읽을 수 있는 저장 매체 및 통신 단말
US9191988B2 (en) 2012-05-26 2015-11-17 Qualcomm Incorporated Smart pairing using bluetooth technology
CN103458215B (zh) 2012-05-29 2016-11-23 国基电子(上海)有限公司 切换视频通话的系统、手机、电子装置及切换方法
CN102750086A (zh) 2012-05-31 2012-10-24 上海必邦信息科技有限公司 电子设备间实现无线分享显示页面控制的方法
US9230556B2 (en) 2012-06-05 2016-01-05 Apple Inc. Voice instructions during navigation
US10025920B2 (en) 2012-06-07 2018-07-17 Early Warning Services, Llc Enterprise triggered 2CHK association
KR101909030B1 (ko) 2012-06-08 2018-10-17 엘지전자 주식회사 비디오 편집 방법 및 이를 위한 디지털 디바이스
WO2013185109A2 (en) 2012-06-08 2013-12-12 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US8971556B2 (en) 2012-06-10 2015-03-03 Apple Inc. Remotely controlling a hearing device
EP2674889B1 (en) 2012-06-11 2018-05-30 Samsung Electronics Co., Ltd Mobile device and control method thereof
CN102695302B (zh) 2012-06-15 2014-12-24 吴芳 用于扩展便携终端电子设备移动通信功能的系统和方法
US9020923B2 (en) 2012-06-18 2015-04-28 Score Revolution, Llc Systems and methods to facilitate media search
US20130346068A1 (en) 2012-06-25 2013-12-26 Apple Inc. Voice-Based Image Tagging and Searching
US8880648B1 (en) 2012-06-27 2014-11-04 Audible, Inc. Automated transition of content consumption across devices
US9247068B2 (en) 2012-06-27 2016-01-26 Blackberry Limited Apparatus, system and method of call notifications to active communication devices
JP6050625B2 (ja) 2012-06-28 2016-12-21 サターン ライセンシング エルエルシーSaturn Licensing LLC 情報処理装置及び情報処理方法、コンピューター・プログラム、並びに情報通信システム
US9436687B2 (en) 2012-07-09 2016-09-06 Facebook, Inc. Acquiring structured user data using composer interface having input fields corresponding to acquired structured data
US20140026188A1 (en) 2012-07-23 2014-01-23 Justin L. Gubler Systems, methods, and devices for restricting use of electronic devices based on proximity to wireless devices
US8990343B2 (en) 2012-07-30 2015-03-24 Google Inc. Transferring a state of an application from a first computing device to a second computing device
US8995687B2 (en) 2012-08-01 2015-03-31 Sonos, Inc. Volume interactions for connected playback devices
KR101899819B1 (ko) 2012-08-03 2018-09-20 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101892233B1 (ko) 2012-08-03 2018-08-27 삼성전자주식회사 휴대용 단말기에서 상황인식을 이용한 알람 서비스 방법 및 장치
CN102902453A (zh) 2012-08-07 2013-01-30 北京小米科技有限责任公司 一种播放器控制面板显示方法及装置
US8930005B2 (en) 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
US9024995B2 (en) 2012-08-09 2015-05-05 Samsung Electronics Co., Ltd. Video calling using a remote camera device to stream video to a local endpoint host acting as a proxy
US9736265B2 (en) 2012-08-09 2017-08-15 Facebook, Inc. Handling notifications
KR101971911B1 (ko) 2012-08-16 2019-04-24 삼성전자주식회사 이미지를 디스플레이하기 위한 방법 및 그 전자 장치
WO2014030876A1 (en) 2012-08-24 2014-02-27 Samsung Electronics Co., Ltd. Method and apparatus for determining item based on interaction environment
JP6051681B2 (ja) 2012-08-24 2016-12-27 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR102174437B1 (ko) 2012-08-24 2020-11-04 삼성전자주식회사 화면 상의 이미지를 이용하여 인터랙션 정보를 제공하는 장치 및 방법
CN102866828B (zh) 2012-08-29 2015-11-25 腾讯科技(深圳)有限公司 一种终端控制方法和设备
US9230076B2 (en) * 2012-08-30 2016-01-05 Microsoft Technology Licensing, Llc Mobile device child share
TWI619067B (zh) 2012-08-31 2018-03-21 財團法人資訊工業策進會 Screen unlocking method with time information, unlocking system and recording medium
GB2505476B (en) 2012-08-31 2019-02-27 Metaswitch Networks Ltd Processing communication sessions
US8826415B2 (en) 2012-09-04 2014-09-02 Apple Inc. Automated device access
US9131332B2 (en) 2012-09-10 2015-09-08 Qualcomm Incorporated Method of providing call control information from a mobile phone to a peripheral device
US9069469B2 (en) 2012-09-10 2015-06-30 Apple Inc. Sharing and synchronizing data across users of cloud computing systems
US20140075311A1 (en) 2012-09-11 2014-03-13 Jesse William Boettcher Methods and apparatus for controlling audio volume on an electronic device
KR101992189B1 (ko) 2012-09-19 2019-06-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8769651B2 (en) 2012-09-19 2014-07-01 Secureauth Corporation Mobile multifactor single-sign-on authentication
EP2901392B1 (en) 2012-09-25 2018-11-07 Google LLC Securing personal identification numbers for mobile payment applications by combining with random components
US9251787B1 (en) 2012-09-26 2016-02-02 Amazon Technologies, Inc. Altering audio to improve automatic speech recognition
JP2014071835A (ja) 2012-10-01 2014-04-21 Fujitsu Ltd 電子機器及び処理制御方法
US9600552B2 (en) 2012-10-02 2017-03-21 Nextbit Systems Inc. Proximity based application state synchronization
RU2523040C2 (ru) 2012-10-02 2014-07-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Регулировка яркости экрана для мобильного устройства
TWI490773B (zh) 2012-10-09 2015-07-01 Ind Tech Res Inst 使用者介面操控方法及具有使用者介面的電子裝置以及內儲操控使用者介面的程式之程式產品
CN102905181B (zh) 2012-10-12 2015-10-21 北京奇艺世纪科技有限公司 一种实现移动终端在线播放视频的方法、装置和系统
US20140108558A1 (en) 2012-10-12 2014-04-17 Citrix Systems, Inc. Application Management Framework for Secure Data Sharing in an Orchestration Framework for Connected Devices
KR20140047887A (ko) 2012-10-15 2014-04-23 삼성전자주식회사 메모 기능 수행 시 모드 전환이 가능한 전자 장치 및 방법
TW201416959A (zh) 2012-10-16 2014-05-01 Yun-Heng Shiu 網頁介面
JP2014087126A (ja) 2012-10-22 2014-05-12 Sharp Corp 電力管理装置、電力管理装置の制御方法および電力管理装置の制御プログラム
US9575650B2 (en) 2012-10-26 2017-02-21 Htc Corporation Mobile communications device, non-transitory computer-readable medium and method of switching screen of mobile communications device from screen locked state to screen unlocked state
US9277017B2 (en) 2012-10-30 2016-03-01 Netiq Corporation Techniques for device independent session migration
US10057400B1 (en) * 2012-11-02 2018-08-21 Majen Tech, LLC Lock screen interface for a mobile device apparatus
WO2014074089A1 (en) * 2012-11-06 2014-05-15 D & M Holding Inc. Selectively coordinated audio player system
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US8994827B2 (en) 2012-11-20 2015-03-31 Samsung Electronics Co., Ltd Wearable electronic device
WO2014078965A1 (en) 2012-11-22 2014-05-30 8303142 Canada Inc. System and method for managing several mobile devices simultaneously
US20140149884A1 (en) 2012-11-26 2014-05-29 William Joseph Flynn, III User-Based Interactive Elements
US9606725B2 (en) 2012-11-30 2017-03-28 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Collaborative overlay of user interface elements rendered on the display of a computing device
US9549323B2 (en) 2012-12-03 2017-01-17 Samsung Electronics Co., Ltd. Method and mobile terminal for controlling screen lock
CN103870255B (zh) 2012-12-12 2019-02-12 腾讯科技(深圳)有限公司 浮动组件显示方法及装置
WO2014089763A1 (en) 2012-12-12 2014-06-19 Intel Corporation Single- gesture device unlock and application launch
US9098177B2 (en) 2012-12-13 2015-08-04 Google Technology Holdings LLC Apparatus and methods for facilitating context handoff between devices in a cloud based wireless personal area network
US9185742B2 (en) 2012-12-13 2015-11-10 Google Technology Holdings LLC System and methods for a cloud based wireless personal area network service enabling context activity handoffs between devices
US20150243163A1 (en) 2012-12-14 2015-08-27 Biscotti Inc. Audio Based Remote Control Functionality
JP5780235B2 (ja) 2012-12-18 2015-09-16 コニカミノルタ株式会社 情報処理システム、情報処理装置、プログラム及び携帯端末装置
JP5796789B2 (ja) 2012-12-20 2015-10-21 カシオ計算機株式会社 情報処理システムにおける無線端末、無線端末による携帯情報端末の起動方法
US9710628B2 (en) 2012-12-21 2017-07-18 Nokia Technologies Oy Unlocking an apparatus
US9367624B2 (en) 2012-12-21 2016-06-14 Yahoo! Inc. Identity workflow that utilizes multiple storage engines to support various lifecycles
US9294853B1 (en) 2012-12-28 2016-03-22 Google Inc. Audio control process
US10320803B2 (en) 2012-12-28 2019-06-11 Dish Technologies Llc Determining eligibility for multiple client media streaming
EP3435220B1 (en) 2012-12-29 2020-09-16 Apple Inc. Device, method and graphical user interface for transitioning between touch input to display output relationships
US10691230B2 (en) 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US11513675B2 (en) 2012-12-29 2022-11-29 Apple Inc. User interface for manipulating user interface objects
US20150189425A1 (en) 2013-01-01 2015-07-02 Aliphcom Mobile device speaker control
US20150189426A1 (en) 2013-01-01 2015-07-02 Aliphcom Mobile device speaker control
KR102131646B1 (ko) 2013-01-03 2020-07-08 삼성전자주식회사 디스플레이장치 및 그 제어방법
US10051103B1 (en) * 2013-01-10 2018-08-14 Majen Tech, LLC Screen interface for a mobile device apparatus
US11431834B1 (en) * 2013-01-10 2022-08-30 Majen Tech, LLC Screen interface for a mobile device apparatus
KR102002420B1 (ko) 2013-01-18 2019-10-01 삼성전자주식회사 이동기기를 이용하는 스마트 홈 시스템
KR101822463B1 (ko) 2013-01-21 2018-01-26 삼성전자주식회사 복수 개의 아이콘들을 화면상에 배치하는 장치 및 이의 운용 방법
US9575632B2 (en) 2013-01-25 2017-02-21 Cable Television Laboratories, Inc. Content scrubbing
US9621562B2 (en) 2013-01-28 2017-04-11 International Business Machines Corporation Propagating authentication between terminals
CN103067625A (zh) 2013-01-29 2013-04-24 周万荣 一种呼叫及数据转移的方法及终端和系统
CN103984494A (zh) 2013-02-07 2014-08-13 上海帛茂信息科技有限公司 用于多种设备间的直觉式用户互动系统及方法
US9319019B2 (en) 2013-02-11 2016-04-19 Symphonic Audio Technologies Corp. Method for augmenting a listening experience
US9565226B2 (en) 2013-02-13 2017-02-07 Guy Ravine Message capturing and seamless message sharing and navigation
SG11201404650XA (en) 2013-02-20 2014-11-27 Panasonic Ip Corp America Program and method for controlling information terminal
JP5529358B1 (ja) 2013-02-20 2014-06-25 パナソニック株式会社 携帯情報端末の制御方法及びプログラム
CN104126313B (zh) 2013-02-20 2018-12-07 松下电器(美国)知识产权公司 信息终端的控制方法和装置
KR20140104215A (ko) 2013-02-20 2014-08-28 삼성전자주식회사 자동 페어링 기능을 갖는 무선 네트워크 오디오 시스템 및 이를 이용한 자동 페어링 방법
CN104247445B (zh) 2013-02-20 2018-10-12 松下电器(美国)知识产权公司 便携信息终端的控制方法
EP2770708B1 (en) 2013-02-22 2017-04-05 BlackBerry Limited Device, system and method for generating application data
JP5963695B2 (ja) 2013-03-01 2016-08-03 株式会社J−WAVEi メッセージ送信プログラム、メッセージ送信装置、及びメッセージ配信システム
US9891662B2 (en) 2013-03-04 2018-02-13 Lg Electronics Inc. Double unlocking apparatus of a portable device equipped with an expandable display and controlling method thereof
US20140258292A1 (en) 2013-03-05 2014-09-11 Clip Interactive, Inc. Apparatus, system, and method for integrating content and content services
US9319149B2 (en) 2013-03-13 2016-04-19 Aliphcom Proximity-based control of media devices for media presentations
US9866924B2 (en) 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
US20140315163A1 (en) 2013-03-14 2014-10-23 Apple Inc. Device, method, and graphical user interface for a group reading environment
US9179199B2 (en) 2013-03-14 2015-11-03 Apple Inc. Media playback across multiple devices
US10219093B2 (en) 2013-03-14 2019-02-26 Michael Luna Mono-spatial audio processing to provide spatial messaging
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US20160028869A1 (en) 2013-03-15 2016-01-28 Apple Inc. Providing remote interactions with host device using a wireless device
US20160037345A1 (en) 2013-03-15 2016-02-04 Apple Inc. Controlling access to protected functionality of a host device using a wireless device
US9628414B1 (en) 2013-03-15 2017-04-18 Google Inc. User state based engagement
US20140282240A1 (en) 2013-03-15 2014-09-18 William Joseph Flynn, III Interactive Elements for Launching from a User Interface
US9113300B2 (en) 2013-03-15 2015-08-18 Apple Inc. Proximity fence
WO2014142960A1 (en) 2013-03-15 2014-09-18 Intel Corporation Mechanisms for locking computing devices
US20170293610A1 (en) 2013-03-15 2017-10-12 Bao Tran Voice assistant
US20140282103A1 (en) 2013-03-16 2014-09-18 Jerry Alan Crandall Data sharing
US8954611B2 (en) 2013-03-21 2015-02-10 Nextbit Systems Inc. Mechanism for sharing states of applications and devices across different user profiles
FI20135275A (fi) 2013-03-22 2014-09-23 Meontrust Oy Tapahtumien auktorisointimenetelmä ja -järjestelmä
US9565181B2 (en) 2013-03-28 2017-02-07 Wendell D. Brown Method and apparatus for automated password entry
US10027723B2 (en) 2013-04-12 2018-07-17 Provenance Asset Group Llc Method and apparatus for initiating communication and sharing of content among a plurality of devices
CN103260079A (zh) 2013-04-12 2013-08-21 深圳市龙视传媒有限公司 一种多屏互动的控制方法及控制装置
US9247363B2 (en) 2013-04-16 2016-01-26 Sonos, Inc. Playback queue transfer in a media playback system
US20150193392A1 (en) 2013-04-17 2015-07-09 Google Inc. User Interface for Quickly Checking Agenda and Creating New Events
KR102171444B1 (ko) 2013-04-22 2020-10-29 엘지전자 주식회사 스마트 워치 및 제어 방법
US20140320387A1 (en) 2013-04-24 2014-10-30 Research In Motion Limited Device, System and Method for Generating Display Data
US9699295B2 (en) 2013-04-24 2017-07-04 Xiaomi Inc. Method for displaying an icon and terminal device thereof
US9323455B2 (en) 2013-04-27 2016-04-26 Lg Electronics Inc. Mobile terminal and method of controlling an external mobile terminal
US9721175B2 (en) 2013-05-08 2017-08-01 Jpmorgan Chase Bank, N.A. Systems and methods for high fidelity multi-modal out-of-band biometric authentication through vector-based multi-profile storage
CN105474157A (zh) 2013-05-09 2016-04-06 亚马逊技术股份有限公司 移动设备界面
US9104853B2 (en) 2013-05-16 2015-08-11 Symantec Corporation Supporting proximity based security code transfer from mobile/tablet application to access device
KR102010298B1 (ko) 2013-05-21 2019-10-21 엘지전자 주식회사 영상표시장치 및 영상표시장치의 동작방법
KR20140136633A (ko) 2013-05-21 2014-12-01 삼성전자주식회사 휴대형 전자장치의 애플리케이션 실행 방법 및 그에 관한 장치
AU2013101046A4 (en) 2013-05-23 2013-09-19 Nowww.Us Pty Ltd A process for Encrypted Login to a Secure Computer Network, for the Creation of a Session of Encrypted Communications Between Computers and a Device Including a Mobile Phone Logged into a Network, for the Persistence of Encrypted Communications between Communication Devices, and for the Termination of Communications.
US9374326B2 (en) 2013-05-23 2016-06-21 Dropbox, Inc. Providing information for shared content
US9798510B2 (en) * 2013-05-29 2017-10-24 Sonos, Inc. Connected state indicator
US9735978B2 (en) 2013-05-29 2017-08-15 Sonos, Inc. Playback queue control via a playlist on a mobile device
US20140359637A1 (en) 2013-06-03 2014-12-04 Microsoft Corporation Task continuance across devices
KR102124476B1 (ko) 2013-06-03 2020-06-19 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US9294455B2 (en) 2013-06-04 2016-03-22 Google Inc. Maintaining video conference session continuity during transfer of session to alternative device
US9497231B2 (en) 2013-06-04 2016-11-15 Echostar Technologies L.L.C. Real-time placeshifting of media content to paired devices
US9979438B2 (en) 2013-06-07 2018-05-22 Apple Inc. Controlling a media device using a mobile device
US9654073B2 (en) 2013-06-07 2017-05-16 Sonos, Inc. Group volume control
KR20140143555A (ko) 2013-06-07 2014-12-17 삼성전자주식회사 휴대 장치의 잠금 화면 상에서 빠른 어플리케이션 실행 방법 및 이를 위한 휴대 장치
WO2014197339A1 (en) 2013-06-08 2014-12-11 Apple Inc. Device, method, and graphical user interface for synchronizing two or more displays
KR102318442B1 (ko) 2013-06-18 2021-10-28 삼성전자주식회사 사용자 단말 장치 및 그 홈 네트워크 관리 방법
US10564813B2 (en) 2013-06-18 2020-02-18 Samsung Electronics Co., Ltd. User terminal apparatus and management method of home network thereof
WO2014204222A1 (ko) 2013-06-18 2014-12-24 삼성전자 주식회사 사용자 단말 장치 및 그 홈 네트워크 관리 방법
TWI493437B (zh) 2013-06-19 2015-07-21 義隆電子股份有限公司 經由識別掃滑手勢來開啓視窗控制列的方法及觸控系統
KR102155680B1 (ko) 2013-06-21 2020-09-14 삼성전자주식회사 사용자 단말장치, 제어장치, 사용자 단말장치의 구동방법, 제어장치의 구동방법 및 제어대상장치의 제어시스템
US9389691B2 (en) 2013-06-21 2016-07-12 Blackberry Limited Devices and methods for establishing a communicative coupling in response to a gesture
WO2014204286A1 (en) 2013-06-21 2014-12-24 Samsung Electronics Co., Ltd. User terminal and driving method thereof, control device and driving method thereof, and control system of controlled device
US10205762B2 (en) 2013-06-28 2019-02-12 Koninklijke Philips N.V. System, method and devices for bluetooth party-mode
JP5654642B1 (ja) 2013-07-05 2015-01-14 ソフトバンクモバイル株式会社 認証システム及びプログラム
US9846879B2 (en) 2013-07-08 2017-12-19 Visa International Service Association Bank account number validation
KR102065407B1 (ko) 2013-07-11 2020-01-13 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
JPWO2015008409A1 (ja) 2013-07-19 2017-03-02 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 情報端末の制御方法及びプログラム
EP3025267A4 (en) 2013-07-23 2017-03-22 Ericsson AB Media distribution system with manifest-based entitlement enforcement
KR101560448B1 (ko) 2013-07-24 2015-10-16 한국과학기술원 스크린 록 환경에서 특정 어플리케이션 호출을 위한 방법
KR20150012464A (ko) 2013-07-25 2015-02-04 삼성전자주식회사 디스플레이 장치 및 개인화 서비스 제공 방법
US9912978B2 (en) 2013-07-29 2018-03-06 Apple Inc. Systems, methods, and computer-readable media for transitioning media playback between multiple electronic devices
KR102127927B1 (ko) 2013-07-30 2020-07-09 엘지전자 주식회사 이동 단말기, 스마트 워치 및 이동 단말기와 스마트 워치간 보안 인증방법
GB2516861A (en) 2013-08-01 2015-02-11 Mastercard International Inc Paired Wearable payment device
RU2016108315A (ru) 2013-08-12 2017-09-19 Хеон Со ПАК Электронное усстройство, система управления, носитель записи и способ использования дополнительного кода
US9568891B2 (en) 2013-08-15 2017-02-14 I.Am.Plus, Llc Multi-media wireless watch
US9948690B2 (en) 2013-08-15 2018-04-17 Comcast Cable Communications, Llc Caching media in a media fling system
KR20150021311A (ko) 2013-08-20 2015-03-02 삼성전자주식회사 단말기의 배터리 절약 방법 및 장치
US20150058744A1 (en) 2013-08-22 2015-02-26 Ashvin Dhingra Systems and methods for managing graphical user interfaces
CN104426847A (zh) 2013-08-22 2015-03-18 腾讯科技(深圳)有限公司 互联网服务安全访问和验证的方法、系统和服务器
US8914752B1 (en) 2013-08-22 2014-12-16 Snapchat, Inc. Apparatus and method for accelerated display of ephemeral messages
US9202029B2 (en) 2013-08-27 2015-12-01 Maan ALDUAIJI Computer device, a method for controlling a login status of a computer device and a server
US9100944B2 (en) 2013-08-28 2015-08-04 Qualcomm Incorporated Wireless connecting mobile devices and wearable devices
US20150066762A1 (en) 2013-08-28 2015-03-05 Geoffrey W. Chatterton Authentication system
US9798443B1 (en) 2013-09-10 2017-10-24 Amazon Technologies, Inc. Approaches for seamlessly launching applications
KR20150031010A (ko) * 2013-09-13 2015-03-23 삼성전자주식회사 잠금 화면 제공 장치 및 방법
EP3047354A1 (en) 2013-09-17 2016-07-27 Koninklijke Philips N.V. Gesture enabled simultaneous selection of range and value
US20150079563A1 (en) 2013-09-17 2015-03-19 Sony Corporation Nonverbal audio cues during physical activity
CN103576902A (zh) 2013-09-18 2014-02-12 酷派软件技术(深圳)有限公司 控制终端设备的方法及系统
US20150089359A1 (en) 2013-09-25 2015-03-26 At&T Mobility Ii Llc Intelligent Adaptation of Home Screens
KR102109407B1 (ko) 2013-09-25 2020-05-12 엘지전자 주식회사 스마트 와치 및 제어 방법
US9288596B2 (en) 2013-09-30 2016-03-15 Sonos, Inc. Coordinator device for paired or consolidated players
US9654545B2 (en) 2013-09-30 2017-05-16 Sonos, Inc. Group coordinator device selection
US9977591B2 (en) 2013-10-01 2018-05-22 Ambient Consulting, LLC Image with audio conversation system and method
US9063640B2 (en) * 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
KR102169952B1 (ko) 2013-10-18 2020-10-26 엘지전자 주식회사 웨어러블 디바이스 및 그 제어 방법
US20150111559A1 (en) 2013-10-23 2015-04-23 Recurring Ventures LLC System, method and article for managing mobile devices
US20150120545A1 (en) 2013-10-28 2015-04-30 Jpmorgan Chase Bank, N.A. Non-compliant payment capture systems and methods
CN104572325B (zh) 2013-10-29 2018-07-06 腾讯科技(深圳)有限公司 一种递进式响应表单处理方法和终端
KR102091606B1 (ko) 2013-10-30 2020-03-20 엘지전자 주식회사 단말기 및 그 제어 방법
WO2015065125A1 (ko) 2013-10-31 2015-05-07 엘지전자(주) 전자 기기 및 전자 기기의 제어 방법
KR20150049977A (ko) 2013-10-31 2015-05-08 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
CN103558916A (zh) 2013-11-07 2014-02-05 百度在线网络技术(北京)有限公司 人机交互系统、方法及其装置
KR20150055275A (ko) 2013-11-13 2015-05-21 삼성전자주식회사 팜 터치를 이용한 전자장치 제어 방법 및 장치
US10454783B2 (en) 2014-02-05 2019-10-22 Apple Inc. Accessory management system using environment model
US10110932B2 (en) 2013-11-18 2018-10-23 Cable Television Laboratories, Inc. Session administration
US9111076B2 (en) 2013-11-20 2015-08-18 Lg Electronics Inc. Mobile terminal and control method thereof
AU2014353473C1 (en) 2013-11-22 2018-04-05 Apple Inc. Handsfree beam pattern configuration
WO2015083969A1 (en) 2013-12-05 2015-06-11 Lg Electronics Inc. Mobile terminal and method for controlling the same
KR102114616B1 (ko) 2013-12-06 2020-05-25 엘지전자 주식회사 스마트 와치 및 제어 방법
US8738723B1 (en) 2013-12-10 2014-05-27 Google Inc. Predictive forwarding of notification data
US20150159904A1 (en) 2013-12-11 2015-06-11 Honeywell International Inc. Rotary dial mechanism for a building automation controller
KR102061913B1 (ko) 2013-12-12 2020-01-02 삼성전자주식회사 전자 장치의 동작을 제어하기 위한 방법 및 장치
US9319782B1 (en) 2013-12-20 2016-04-19 Amazon Technologies, Inc. Distributed speaker synchronization
US10018470B2 (en) 2013-12-20 2018-07-10 Apple Inc. Location-based operating modes
TW201527631A (zh) 2013-12-20 2015-07-16 Jetdian Technology Inc 配合近場無線傳輸裝置的鎖固/解鎖方法
US9563328B2 (en) 2013-12-23 2017-02-07 Microsoft Technology Licensing, Llc Information surfacing with visual cues indicative of relevance
WO2015097829A1 (ja) 2013-12-26 2015-07-02 株式会社東芝 方法、電子機器およびプログラム
US20150186892A1 (en) 2013-12-30 2015-07-02 Tencent Technology (Shenzhen) Company Limited Methods and systems for verifying a transaction
JP2017508312A (ja) 2013-12-30 2017-03-23 トムソン ライセンシングThomson Licensing 近さ依存のメディア再生
US20150193069A1 (en) 2014-01-03 2015-07-09 Harman International Industries, Incorporated Seamless content transfer
KR102277752B1 (ko) 2014-01-06 2021-07-16 삼성전자주식회사 웨어러블 기기를 이용한 홈 디바이스 제어 장치 및 제어 방법
US20150193196A1 (en) 2014-01-06 2015-07-09 Alpine Electronics of Silicon Valley, Inc. Intensity-based music analysis, organization, and user interface for audio reproduction devices
US9804817B2 (en) 2014-01-06 2017-10-31 Harman International Industries, Incorporated Apparatus and method for automatic device selection for wireless media devices
US8811951B1 (en) 2014-01-07 2014-08-19 Google Inc. Managing display of private information
US10433128B2 (en) 2014-01-07 2019-10-01 Visa International Service Association Methods and systems for provisioning multiple devices
KR20150082824A (ko) 2014-01-08 2015-07-16 삼성전자주식회사 장치 제어 방법 및 제어 장치
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
US9514748B2 (en) 2014-01-15 2016-12-06 Microsoft Technology Licensing, Llc Digital personal assistant interaction with impersonations and rich multimedia in responses
US20150205511A1 (en) 2014-01-17 2015-07-23 Apple Inc. Systems And Methods For An Animated Graphical User Interface
US10162593B2 (en) 2014-01-22 2018-12-25 Apple Inc. Coordinated hand-off of audio data transmission
US10114892B2 (en) 2014-01-22 2018-10-30 Google Llc Creating a single playlist with multiple authors
CN103793138A (zh) 2014-01-24 2014-05-14 宇龙计算机通信科技(深圳)有限公司 移动终端及后台应用程序的显示方法
US9369282B2 (en) 2014-01-29 2016-06-14 Red Hat, Inc. Mobile device user authentication for accessing protected network resources
US20150223005A1 (en) 2014-01-31 2015-08-06 Raytheon Company 3-dimensional audio projection
US10212143B2 (en) 2014-01-31 2019-02-19 Dropbox, Inc. Authorizing an untrusted client device for access on a content management system
US20150222680A1 (en) 2014-02-04 2015-08-06 Ford Global Technologies, Llc Local network media sharing
US9185117B2 (en) 2014-02-07 2015-11-10 Bank Of America Corporation User authentication by geo-location and proximity to user's close network
US9208301B2 (en) 2014-02-07 2015-12-08 Bank Of America Corporation Determining user authentication requirements based on the current location of the user in comparison to the users's normal boundary of location
US20150229782A1 (en) 2014-02-11 2015-08-13 Nxp B.V. Notification volume adjustment based on distance from paired device
CN103793075B (zh) 2014-02-14 2017-02-15 北京君正集成电路股份有限公司 一种应用在智能手表上的识别方法
EP2911149B1 (en) 2014-02-19 2019-04-17 Nokia Technologies OY Determination of an operational directive based at least in part on a spatial audio property
US10885510B2 (en) 2014-02-21 2021-01-05 Paypal, Inc. Facilitating payments using wearable devices
US9372610B2 (en) 2014-02-21 2016-06-21 Sonos, Inc. Media system controller interface
KR102166781B1 (ko) 2014-02-22 2020-10-16 삼성전자주식회사 요청 정보에 따른 장치 제어 방법 및 이를 지원하는 장치
US20150242597A1 (en) 2014-02-24 2015-08-27 Google Inc. Transferring authorization from an authenticated device to an unauthenticated device
US9408008B2 (en) 2014-02-28 2016-08-02 Sonos, Inc. Playback zone representations
US9537661B2 (en) 2014-02-28 2017-01-03 Verizon Patent And Licensing Inc. Password-less authentication service
EP2916195B1 (en) 2014-03-03 2019-09-11 LG Electronics Inc. Mobile terminal and controlling method thereof
US9679054B2 (en) 2014-03-05 2017-06-13 Sonos, Inc. Webpage media playback
KR20150104985A (ko) 2014-03-07 2015-09-16 삼성전자주식회사 사용자 단말 및 오디오 시스템, 그리고 이의 스피커 제어 방법
US20150261493A1 (en) 2014-03-11 2015-09-17 Sonos, Inc. Playback Zone Representations
US20150262182A1 (en) 2014-03-12 2015-09-17 The Toronto-Dominion Bank Systems and methods for providing populated transaction interfaces based on contextual triggers
US9450812B2 (en) 2014-03-14 2016-09-20 Dechnia, LLC Remote system configuration via modulated audio
US9888207B2 (en) 2014-03-17 2018-02-06 Microsoft Technology Licensing, Llc Automatic camera selection
US9722962B2 (en) 2014-03-21 2017-08-01 Facebook, Inc. Providing message status notifications during electronic messaging
US9431021B1 (en) 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
US20150278799A1 (en) 2014-03-27 2015-10-01 Karthikeyan Palanisamy System incorporating wireless share process
US9661058B2 (en) 2014-08-10 2017-05-23 Belkin International Inc. Grouping of network devices
JP2014131359A (ja) 2014-04-07 2014-07-10 Dainippon Printing Co Ltd 端末装置、携帯電話機、動作管理方法及び動作管理プログラム等
US20150286694A1 (en) 2014-04-08 2015-10-08 International Business Machines Corporation Integrating a mobile payment application with other applications utilizing analytic analysis
CN112134708A (zh) 2014-04-15 2020-12-25 创新先进技术有限公司 一种授权方法、请求授权的方法及装置
US9392104B2 (en) * 2014-04-15 2016-07-12 Google Inc. Limiting user interaction with a computing device based on proximity of a user
US10444715B2 (en) 2014-05-01 2019-10-15 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
US10554439B2 (en) 2014-05-01 2020-02-04 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
US20150302856A1 (en) 2014-04-17 2015-10-22 Qualcomm Incorporated Method and apparatus for performing function by speech input
US20150301506A1 (en) 2014-04-22 2015-10-22 Fahad Koumaiha Transparent capacitive touchscreen device overlying a mechanical component
US10129599B2 (en) 2014-04-28 2018-11-13 Sonos, Inc. Media preference database
US9680960B2 (en) 2014-04-28 2017-06-13 Sonos, Inc. Receiving media content based on media preferences of multiple users
US9666204B2 (en) 2014-04-30 2017-05-30 Qualcomm Incorporated Voice profile management and speech signal generation
US20150324552A1 (en) 2014-05-12 2015-11-12 Sonos, Inc. Share Restriction for Media Items
KR102185702B1 (ko) 2014-05-16 2020-12-02 삼성전자주식회사 컨텐츠 출력 장치, 모바일 장치 및 그 제어 방법
US9537811B2 (en) 2014-10-02 2017-01-03 Snap Inc. Ephemeral gallery of ephemeral messages
US9324067B2 (en) 2014-05-29 2016-04-26 Apple Inc. User interface for payments
JP6328797B2 (ja) 2014-05-30 2018-05-23 アップル インコーポレイテッド 1つのデバイスの使用から別のデバイスの使用への移行
US9967401B2 (en) 2014-05-30 2018-05-08 Apple Inc. User interface for phone call routing among devices
US10055567B2 (en) 2014-05-30 2018-08-21 Apple Inc. Proximity unlock and lock operations for electronic devices
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
KR102302350B1 (ko) * 2014-06-02 2021-09-15 삼성전자 주식회사 보안 기능을 제공하는 방법 및 장치
US20170257472A1 (en) 2014-06-04 2017-09-07 Sonova Ag Audio device network and audio device pairing method
US20150355818A1 (en) 2014-06-04 2015-12-10 Sonos, Inc. Continuous Playback Queue
US9363254B2 (en) 2014-06-04 2016-06-07 Sonos, Inc. Cloud queue access control
US20150358043A1 (en) 2014-06-05 2015-12-10 Samsung Electronics Co., Ltd. Wearable device, main unit of wearable device, fixing unit of wearable device, and control method of wearable device
US9264423B2 (en) 2014-06-12 2016-02-16 Nadapass, Inc. Password-less authentication system and method
US9715824B2 (en) 2014-06-13 2017-07-25 Huawei Technologies Co., Ltd. Method and control device for selecting controlled device
US9084003B1 (en) 2014-06-19 2015-07-14 Google Inc. Methods, systems, and media for media playback
EP3108350B1 (en) 2014-06-24 2022-05-18 Apple Inc. Music now playing user interface
US9535986B2 (en) 2014-06-27 2017-01-03 Sonos, Inc. Application launch
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9519413B2 (en) 2014-07-01 2016-12-13 Sonos, Inc. Lock screen media playback control
US20160004393A1 (en) 2014-07-01 2016-01-07 Google Inc. Wearable device user interface control
US10073607B2 (en) 2014-07-03 2018-09-11 Qualcomm Incorporated Single-channel or multi-channel audio control interface
GB2528260A (en) 2014-07-14 2016-01-20 Mastercard International Inc System and method for loading and reloading prepaid payment cards from mobile devices
KR101698098B1 (ko) * 2014-07-23 2017-01-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US9615787B2 (en) 2014-07-24 2017-04-11 Lenovo (Singapre) Pte. Ltd. Determining whether to change a time at which an alarm is to occur based at least in part on sleep data
US10454913B2 (en) 2014-07-24 2019-10-22 Hewlett Packard Enterprise Development Lp Device authentication agent
US9661440B2 (en) 2014-07-25 2017-05-23 Qualcomm Incorporated Methods and systems for triggering efficient application synchronization
KR102287160B1 (ko) 2014-07-31 2021-08-06 엘지전자 주식회사 웨어러블 디바이스 및 그것의 제어방법
WO2016018057A1 (en) 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method and device for providing function of mobile terminal
US20160036996A1 (en) 2014-08-02 2016-02-04 Sony Corporation Electronic device with static electric field sensor and related method
US10045105B2 (en) 2014-08-12 2018-08-07 Bose Corporation Wireless communication between endpoint devices
CN104166458A (zh) 2014-08-12 2014-11-26 广州华多网络科技有限公司 控制多媒体播放器的方法及装置
JP6574476B2 (ja) 2014-08-15 2019-09-11 アップル インコーポレイテッドApple Inc. 別デバイスのロック解除に使用される認証済みデバイス
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
JP6044604B2 (ja) 2014-08-18 2016-12-14 カシオ計算機株式会社 端末装置、およびプログラム
KR102418119B1 (ko) 2014-08-25 2022-07-07 삼성전자 주식회사 시계 화면 구성 방법 및 이를 구현한 웨어러블 전자장치
KR102393815B1 (ko) 2014-08-29 2022-05-03 하만인터내셔날인더스트리스인코포레이티드 무선 스피커 시스템
US10089607B2 (en) 2014-09-02 2018-10-02 Apple Inc. Mobile merchant proximity solution for financial transactions
DE202015006066U1 (de) 2014-09-02 2015-12-14 Apple Inc. Kleinere Schnittstellen zur Handhabung von Benachrichtigungen
US10254948B2 (en) 2014-09-02 2019-04-09 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
WO2016036541A2 (en) 2014-09-02 2016-03-10 Apple Inc. Phone user interface
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
TWI600322B (zh) 2014-09-02 2017-09-21 蘋果公司 用於操作具有整合式相機之電子器件之方法及相關電子器件,以及非暫時性電腦可讀取儲存媒體
US9680982B2 (en) 2014-09-03 2017-06-13 Fibar Group S.A. Emergency communication device
WO2016037155A1 (en) 2014-09-04 2016-03-10 PWV Inc Speaker discovery and assignment
US20160073482A1 (en) 2014-09-05 2016-03-10 Qualcomm Incorporated Implementing a target lighting scene in an internet of things environment using a mobile light output device
US10042336B2 (en) 2014-09-09 2018-08-07 Savant Systems, Llc User-defined scenes for home automation
US20170097621A1 (en) 2014-09-10 2017-04-06 Crestron Electronics, Inc. Configuring a control sysem
KR102192419B1 (ko) * 2014-09-11 2020-12-17 삼성전자주식회사 웨어러블 장치를 사용하여 전자 장치를 제어하는 방법 및 전자 장치의 동작 방법
US9940016B2 (en) 2014-09-13 2018-04-10 Microsoft Technology Licensing, Llc Disambiguation of keyboard input
BR102014023229B1 (pt) 2014-09-18 2020-02-27 Samsung Eletrônica da Amazônia Ltda. Método para autenticação de transação de vários fatores utilizando dispositivos vestíveis
US9582296B2 (en) 2014-09-18 2017-02-28 International Business Machines Corporation Dynamic multi-user computer configuration settings
KR102258052B1 (ko) 2014-09-25 2021-05-28 삼성전자주식회사 전자 장치에서 다른 전자 장치와 컨텐츠를 공유하기 위한 장치 및 방법
US20160092665A1 (en) 2014-09-27 2016-03-31 Intel Corporation Liveness Detection for User Authentication
WO2016052876A1 (en) 2014-09-30 2016-04-07 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof
US9521212B2 (en) 2014-09-30 2016-12-13 Sonos, Inc. Service provider user accounts
US9269083B1 (en) 2014-09-30 2016-02-23 Wal-Mart Stores, Inc. Mobile device payment
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
WO2016057117A1 (en) 2014-10-10 2016-04-14 Thomson Licensing Method and apparatus for control of media content delivery
CN105631372B (zh) 2014-10-13 2020-06-12 麦克斯韦尔福瑞斯特私人有限公司 接近监测设备和方法
US10055094B2 (en) 2014-10-29 2018-08-21 Xiaomi Inc. Method and apparatus for dynamically displaying device list
CN104460593B (zh) 2014-10-29 2017-10-10 小米科技有限责任公司 模式切换方法及装置
US10346828B2 (en) 2014-11-07 2019-07-09 Paypal, Inc. Payment processing apparatus
CN105657483B (zh) 2014-11-10 2019-06-04 扬智科技股份有限公司 多媒体播放系统、多媒体文件分享方法及其控制方法
US10027667B2 (en) 2014-11-12 2018-07-17 Time Warner Cable Enterprises Llc Methods and apparatus for provisioning services which require a device to be securely associated with an account
US10713699B1 (en) 2014-11-14 2020-07-14 Andersen Corporation Generation of guide materials
KR102354763B1 (ko) 2014-11-17 2022-01-25 삼성전자주식회사 주변 기기를 식별하는 전자 기기 및 이의 주변 기기 식별 방법
CN106063376B (zh) 2014-11-25 2018-05-22 飞利浦灯具控股公司 基于邻近度的照明控制
US20160156992A1 (en) * 2014-12-01 2016-06-02 Sonos, Inc. Providing Information Associated with a Media Item
US9864570B2 (en) 2014-12-09 2018-01-09 Harman International Industries, Incorporated Proximity based temporary audio sharing
US10223689B2 (en) 2014-12-10 2019-03-05 American Express Travel Related Services Company, Inc. System and method for over the air provisioned wearable contactless payments
WO2016099048A1 (en) 2014-12-15 2016-06-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling group action
US9912758B2 (en) 2014-12-16 2018-03-06 Yahoo Holdings, Inc. Continuing an application session on a different device
KR102212212B1 (ko) 2014-12-17 2021-02-04 삼성전자주식회사 휴대 장치 및 휴대 장치의 위치 정보 제어방법
US10445055B2 (en) 2014-12-23 2019-10-15 Lg Electronics Inc. Mobile terminal, audio output device and audio output system comprising same
EP3037784B1 (en) 2014-12-23 2019-05-01 Nokia Technologies OY Causation of display of supplemental map information
KR102297193B1 (ko) 2014-12-24 2021-09-02 삼성전자 주식회사 사용자 식별 기능을 가지는 전자장치 및 사용자 인증 방법
US9112849B1 (en) 2014-12-31 2015-08-18 Spotify Ab Methods and systems for dynamic creation of hotspots for media control
CN104503688B (zh) 2014-12-31 2018-03-02 小米科技有限责任公司 智能硬件设备的控制实现方法及装置
US9699559B2 (en) 2015-01-05 2017-07-04 Pwv Inc. Discovery, control, and streaming of multi-channel audio playback with enhanced time synchronization
KR20160092363A (ko) 2015-01-27 2016-08-04 엘지전자 주식회사 이동단말기 및 그 제어방법
US10348656B2 (en) 2015-02-06 2019-07-09 Jamdeo Canada Ltd. Methods and devices for display device notifications and key handling
US9294476B1 (en) 2015-02-18 2016-03-22 Keeper Security, Inc. User-defined identity verification system
US9329831B1 (en) 2015-02-25 2016-05-03 Sonos, Inc. Playback expansion
US9779233B2 (en) 2015-03-05 2017-10-03 Ricoh Co., Ltd. Broker-based authentication system architecture and design
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9715619B2 (en) 2015-03-14 2017-07-25 Microsoft Technology Licensing, Llc Facilitating aligning a user and camera for user authentication
US10080111B2 (en) 2015-03-19 2018-09-18 Facebook, Inc. Techniques for communication using audio stickers
US9819902B2 (en) 2015-03-19 2017-11-14 Microsoft Technology Licensing, Llc Proximate resource pooling in video/audio telecommunications
CN104702792A (zh) * 2015-03-20 2015-06-10 小米科技有限责任公司 终端屏幕的状态控制方法及装置、电子设备
EP3073703A1 (en) 2015-03-23 2016-09-28 Laboratories Thomson Ltd. Method and system for sharing music and other audio content among mobile devices
US9891880B2 (en) 2015-03-31 2018-02-13 Sonos, Inc. Information display regarding playback queue subscriptions
US9483230B1 (en) 2015-04-09 2016-11-01 Sonos, Inc. Wearable device zone group control
USD765118S1 (en) 2015-04-13 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10776769B2 (en) 2015-04-27 2020-09-15 Hrb Innovations, Inc. Unified payment vehicle
US10097902B2 (en) 2015-05-06 2018-10-09 Blackfire Research Corporation System and method for using multiple audio input devices for synchronized and position-based audio
WO2016176834A1 (en) 2015-05-06 2016-11-10 Eyespage Inc. Lock screen graphical user interface
US11113022B2 (en) 2015-05-12 2021-09-07 D&M Holdings, Inc. Method, system and interface for controlling a subwoofer in a networked audio system
US9407624B1 (en) 2015-05-14 2016-08-02 Delphian Systems, LLC User-selectable security modes for interconnected devices
CN104853136A (zh) 2015-05-29 2015-08-19 小米科技有限责任公司 视频通信方法及装置
KR20160143136A (ko) * 2015-06-04 2016-12-14 엘지전자 주식회사 위치 기반 알림 시스템 및 그것의 제어방법
US20160357354A1 (en) 2015-06-04 2016-12-08 Apple Inc. Condition-based activation of a user interface
USD773510S1 (en) 2015-06-05 2016-12-06 Apple Inc. Display screen or portion thereof with graphical user interface
DK179292B1 (en) 2015-06-07 2018-04-09 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US10271084B2 (en) 2015-06-07 2019-04-23 Apple Inc. Video recording and replay
US9727749B2 (en) 2015-06-08 2017-08-08 Microsoft Technology Licensing, Llc Limited-access functionality accessible at login screen
US20160364600A1 (en) 2015-06-10 2016-12-15 Microsoft Technology Licensing, Llc Biometric Gestures
US20160366481A1 (en) 2015-06-12 2016-12-15 Samsung Electronics Co., Ltd. Method and apparatus for service oriented input and output
JP6520442B2 (ja) 2015-06-16 2019-05-29 ヤマハ株式会社 パラメータ制御装置およびパラメータ制御プログラム
US10588000B2 (en) 2015-06-19 2020-03-10 Lenovo (Singapore) Pte. Ltd. Determination of device at which to present audio of telephonic communication
KR20170006579A (ko) 2015-07-08 2017-01-18 삼성전자주식회사 전자 장치 및 전자 장치에서의 아이콘 변경 방법
KR20170008601A (ko) 2015-07-14 2017-01-24 삼성전자주식회사 어플리케이션 운용 방법 및 이를 이용하는 전자 장치
US9661117B2 (en) 2015-07-16 2017-05-23 Plantronics, Inc. Wearable devices for headset status and control
US9948980B2 (en) 2015-07-20 2018-04-17 Google Llc Synchronizing audio content to audio and video devices
CN105187940B (zh) 2015-07-29 2018-05-29 广东欧珀移动通信有限公司 一种播放系统的播放列表切换控制方法及装置
US10168797B2 (en) 2015-07-29 2019-01-01 Samsung Electronics Co., Ltd. Terminal apparatus, audio system, and method for controlling sound volume of external speaker thereof
AU2016300832A1 (en) 2015-07-30 2018-03-22 Brightgreen Pty Ltd Multiple input touch dimmer lighting control
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
JP6693066B2 (ja) 2015-08-18 2020-05-13 ヤマハ株式会社 制御装置
KR102389038B1 (ko) 2015-09-02 2022-04-21 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR20170027999A (ko) * 2015-09-03 2017-03-13 삼성전자주식회사 사용자 단말 장치, 시스템 및 그 제어 방법
US9628275B2 (en) 2015-09-04 2017-04-18 Blackberry Limited Communication device, method and system for establishing communications using the subscriber identity data of another communication device
US10120531B2 (en) 2015-09-08 2018-11-06 Apple Inc. User interfaces for navigating and playing content
US10257198B2 (en) 2015-09-11 2019-04-09 Arris Enterprises Llc Password input method for devices with limited user interface
US9710639B1 (en) 2015-09-14 2017-07-18 Google Inc. Single input unlock for computing devices
KR102538348B1 (ko) 2015-09-17 2023-05-31 삼성전자 주식회사 전자 장치 및 전자 장치의 동작 제어 방법
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
EP3354015A1 (en) 2015-09-23 2018-08-01 Edoardo Rizzi Communication device and method
US9826083B2 (en) 2015-09-29 2017-11-21 Google Inc. Automatic delegation control for device sharing
WO2017058442A1 (en) 2015-09-30 2017-04-06 Apple Inc. Coordinated control of media playback
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
JP6668661B2 (ja) 2015-09-30 2020-03-18 ヤマハ株式会社 パラメータ制御装置およびパラメータ制御プログラム
US9646471B2 (en) 2015-09-30 2017-05-09 Apple Inc. User interface using tactile output
KR102520402B1 (ko) 2015-10-27 2023-04-12 엘지전자 주식회사 와치 타입 이동 단말기 및 그 동작 방법
US9819674B2 (en) * 2015-10-29 2017-11-14 Ricoh Company, Ltd. System, apparatus and method for secure operation of image forming device
US10863267B2 (en) 2015-11-10 2020-12-08 Savant Systems, Inc. Volume control for audio/video devices
KR20170055295A (ko) 2015-11-11 2017-05-19 엘지전자 주식회사 이동 단말기 및 그 이동 단말기의 제어 방법
KR102459127B1 (ko) 2015-11-11 2022-10-27 삼성전자 주식회사 전자 장치 및 정보 제공방법
CN105549947B (zh) 2015-12-21 2019-03-29 联想(北京)有限公司 一种音频设备的控制方法及电子设备
US10575083B2 (en) 2015-12-22 2020-02-25 Bragi GmbH Near field based earpiece data transfer system and method
KR20170074552A (ko) 2015-12-22 2017-06-30 삼성전자주식회사 터치 디스플레이를 포함하는 스피커 장치
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
KR20170076357A (ko) 2015-12-24 2017-07-04 삼성전자주식회사 사용자 단말 장치, 이의 스피커 장치의 음량을 조절하기 위한 모드 전환 방법 및 음향 시스템
WO2017117264A1 (en) 2015-12-29 2017-07-06 Echostar Technologies L.L.C Remote storage digital video recorder streaming and related methods
US10353754B2 (en) 2015-12-31 2019-07-16 Entefy Inc. Application program interface analyzer for a universal interaction platform
US20170189824A1 (en) 2016-01-04 2017-07-06 Sphero, Inc. Modular sensing device utilized with autonomous self-propelled device
US10284980B1 (en) 2016-01-05 2019-05-07 Sonos, Inc. Intelligent group identification
KR102501759B1 (ko) 2016-01-05 2023-02-20 삼성전자주식회사 오디오 출력 장치 및 오디오 출력 장치의 동작 방법
US10303422B1 (en) 2016-01-05 2019-05-28 Sonos, Inc. Multiple-device setup
US10182138B2 (en) 2016-01-08 2019-01-15 Qualcomm Incorporated Smart way of controlling car audio system
KR102383130B1 (ko) 2016-01-18 2022-04-08 삼성전자주식회사 기능을 제어하는 방법 및 이를 지원하는 전자 장치
US9898250B1 (en) 2016-02-12 2018-02-20 Amazon Technologies, Inc. Controlling distributed audio outputs to enable voice output
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US10743101B2 (en) 2016-02-22 2020-08-11 Sonos, Inc. Content mixing
KR20170100358A (ko) 2016-02-25 2017-09-04 삼성전자주식회사 전자 장치, 음향 출력 시스템 및 음향 출력 시스템을 위한 전자 장치 제어 방법
US20180218201A1 (en) 2016-02-26 2018-08-02 Ring Inc. Sharing Positive Information Captured Using Audio/Video Recording and Communication Devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
KR20170124933A (ko) 2016-05-03 2017-11-13 삼성전자주식회사 디스플레이 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
US20170322713A1 (en) 2016-05-03 2017-11-09 Samsung Electronics Co., Ltd. Display apparatus and method for controlling the same and computer-readable recording medium
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
CN106096349A (zh) 2016-06-07 2016-11-09 惠州Tcl移动通信有限公司 一种基于锁屏快速开启应用的方法及移动终端
US10742648B2 (en) * 2016-06-09 2020-08-11 Logmein, Inc. Mobile device access to a protected machine
US10742645B2 (en) * 2016-06-09 2020-08-11 Logmein, Inc. Proximity detection for mobile device access to protected resources
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10310725B2 (en) 2016-06-12 2019-06-04 Apple Inc. Generating scenes based on accessory state
US11003147B2 (en) 2016-06-12 2021-05-11 Apple Inc. Automatically grouping accessories
DK201670616A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
WO2017218192A1 (en) 2016-06-12 2017-12-21 Apple Inc. User interface for managing controllable external devices
US10545653B2 (en) 2016-06-12 2020-01-28 Apple Inc. Device, method, and graphical user interface for media playback
EP3579093B1 (en) 2016-06-12 2021-10-13 Apple Inc. User interface for managing controllable external devices
US10257474B2 (en) 2016-06-12 2019-04-09 Apple Inc. Network configurations for integrated accessory control
US10511456B2 (en) 2016-06-12 2019-12-17 Apple Inc. Presenting accessory group controls
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
DK179593B1 (en) 2016-06-12 2019-02-25 Apple Inc. USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
US11329942B2 (en) 2016-06-24 2022-05-10 Google Llc Methods, systems, and media for presenting messages related to notifications
EP4235645A3 (en) 2016-07-06 2023-10-04 DRNC Holdings, Inc. System and method for customizing smart home speech interfaces using personalized speech profiles
JP6909990B2 (ja) 2016-07-06 2021-07-28 パナソニックIpマネジメント株式会社 表示制御システム、表示制御方法、及び表示制御プログラム
EP3276905B1 (en) 2016-07-25 2023-01-25 GN Audio A/S System for audio communication using lte
EP3491811A2 (en) 2016-08-01 2019-06-05 Zone V Ltd Smartphone accessory for visually impaired or elderly users
US10762446B2 (en) 2016-08-02 2020-09-01 Ebay Inc. Access control for a digital event
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10832684B2 (en) 2016-08-31 2020-11-10 Microsoft Technology Licensing, Llc Personalization of experiences with digital assistants in communal settings through voice and query processing
US10270071B2 (en) 2016-09-02 2019-04-23 Dell Products L.P. Systems and methods for voltage regulated battery backup management
US10057698B2 (en) 2016-09-02 2018-08-21 Bose Corporation Multiple room communication system and method
US10042595B2 (en) 2016-09-06 2018-08-07 Apple Inc. Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
US10140987B2 (en) 2016-09-16 2018-11-27 International Business Machines Corporation Aerial drone companion device and a method of operating an aerial drone companion device
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US10283138B2 (en) 2016-10-03 2019-05-07 Google Llc Noise mitigation for a voice interface device
US10304463B2 (en) 2016-10-03 2019-05-28 Google Llc Multi-user personalization at a voice interface device
CN106656689B (zh) 2016-10-17 2018-10-30 珠海格力电器股份有限公司 一种基于终端的智能家居的控制方法和终端
US20190056854A1 (en) 2016-10-31 2019-02-21 Hewlett-Packard Development Company, L.P. Developing a non-rectangular user interface
CN106383645A (zh) 2016-10-31 2017-02-08 维沃移动通信有限公司 一种音乐播放的控制方法及移动终端
US11310294B2 (en) 2016-10-31 2022-04-19 Microsoft Technology Licensing, Llc Companion devices for real-time collaboration in communication sessions
US10783883B2 (en) 2016-11-03 2020-09-22 Google Llc Focus session at a voice interface device
SG10201609247YA (en) 2016-11-04 2018-06-28 Huawei Int Pte Ltd System and method for configuring a wireless device for wireless network access
EP3538329A4 (en) 2016-11-10 2020-08-19 Warner Bros. Entertainment Inc. SOCIAL ROBOT WITH ENVIRONMENTAL CONTROL FUNCTION
US10785328B2 (en) 2016-11-15 2020-09-22 International Business Machines Corporation Efficient collaborations in global enterprise environment
US10339769B2 (en) 2016-11-18 2019-07-02 Google Llc Server-provided visual output at a voice interface device
US9820323B1 (en) * 2016-11-22 2017-11-14 Bose Corporation Wireless audio tethering system
US10607148B1 (en) 2016-12-21 2020-03-31 Facebook, Inc. User identification with voiceprints on online social networks
US10916243B2 (en) 2016-12-27 2021-02-09 Amazon Technologies, Inc. Messaging from a shared device
US10679608B2 (en) 2016-12-30 2020-06-09 Google Llc Conversation-aware proactive notifications for a voice interface device
US10115396B2 (en) 2017-01-03 2018-10-30 Logitech Europe, S.A. Content streaming system
KR20180085931A (ko) 2017-01-20 2018-07-30 삼성전자주식회사 음성 입력 처리 방법 및 이를 지원하는 전자 장치
US10523625B1 (en) 2017-03-09 2019-12-31 Snap Inc. Restricted group content collection
KR102291021B1 (ko) 2017-03-17 2021-08-18 삼성전자주식회사 오디오 출력을 제어하기 위한 전자 장치 및 그의 동작 방법
KR102340127B1 (ko) 2017-03-24 2021-12-16 삼성전자주식회사 복수의 외부 장치들로 오디오 데이터를 전송하는 방법 및 전자 장치
EP3602943A1 (en) 2017-03-24 2020-02-05 Intel IP Corporation Techniques to enable physical downlink control channel communications
US10581941B2 (en) 2017-04-04 2020-03-03 Roku, Inc. Time and content restrictions based on user-identification
KR102414122B1 (ko) 2017-04-19 2022-06-29 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 동작 방법
EP3615705B1 (en) 2017-04-27 2023-06-07 Indian Institute Of Technology (IIT Madras) Highly adhesive boron doped graded diamond layer on wc-co cutting tool
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10200969B2 (en) 2017-05-09 2019-02-05 Qualcomm Incorporated Methods and apparatus for selectively providing alerts to paired devices
US10928980B2 (en) 2017-05-12 2021-02-23 Apple Inc. User interfaces for playing and managing audio items
US10380852B2 (en) 2017-05-12 2019-08-13 Google Llc Systems, methods, and devices for activity monitoring via a home assistant
US20180329586A1 (en) 2017-05-15 2018-11-15 Apple Inc. Displaying a set of application views
EP3975576A1 (en) 2017-05-16 2022-03-30 Apple Inc. Credential delegation
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
WO2018144339A2 (en) 2017-05-16 2018-08-09 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
WO2018213415A1 (en) 2017-05-16 2018-11-22 Apple Inc. Far-field extension for digital assistant services
US10395659B2 (en) 2017-05-16 2019-08-27 Apple Inc. Providing an auditory-based interface of a digital assistant
EP4254989A3 (en) * 2017-05-16 2023-10-18 Apple Inc. Methods and interfaces for home media control
CN111694486B (zh) 2017-05-16 2023-08-22 苹果公司 用于在用户界面之间导航的设备、方法和图形用户界面
US20200270871A1 (en) 2019-02-27 2020-08-27 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US20200186378A1 (en) 2017-05-19 2020-06-11 Curtis Wayne Six Smart hub system
US10778463B2 (en) * 2017-05-30 2020-09-15 Harman International Industries, Incorporated Displaying information for a smart-device-enabled environment
CN107219976B (zh) 2017-05-31 2020-07-28 Oppo广东移动通信有限公司 应用显示方法及相关产品
US10089983B1 (en) 2017-06-08 2018-10-02 Amazon Technologies, Inc. Third party account linking for voice user interface
CN115379617A (zh) 2017-06-15 2022-11-22 路创技术有限责任公司 与负载控制系统通信以及控制负载控制系统
US10460671B2 (en) 2017-07-04 2019-10-29 Shenzhen China Star Optoelectronics Semiconductor Display Technology Co., Lltd Scanning driving circuit and display apparatus
US10771270B2 (en) 2017-07-20 2020-09-08 Slack Technologies, Inc. Channeling messaging communications in a selected group-based communication interface
US10325602B2 (en) 2017-08-02 2019-06-18 Google Llc Neural networks for speaker verification
US10438594B2 (en) 2017-09-08 2019-10-08 Amazon Technologies, Inc. Administration of privileges by speech for voice assistant system
US10490195B1 (en) 2017-09-26 2019-11-26 Amazon Technologies, Inc. Using system command utterances to generate a speaker profile
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
JP7063990B2 (ja) 2017-10-21 2022-05-09 アップル インコーポレイテッド 共用デバイス上の仮想アシスタントシステム用の個人ドメイン
US10567515B1 (en) 2017-10-26 2020-02-18 Amazon Technologies, Inc. Speech processing performed with respect to first and second user profiles in a dialog session
JP6766793B2 (ja) 2017-10-26 2020-10-14 京セラドキュメントソリューションズ株式会社 情報処理装置、画像形成装置、情報処理システム、及び情報処理方法
KR102490376B1 (ko) 2017-11-06 2023-01-25 삼성전자 주식회사 전자 장치 및 전자 장치 간 음성으로 기능을 실행하는 방법
US20190138951A1 (en) 2017-11-09 2019-05-09 Facebook, Inc. Systems and methods for generating multi-contributor content posts for events
KR102271308B1 (ko) 2017-11-21 2021-06-30 주식회사 하이퍼커넥트 영상통화 중에 상호작용 가능한 시각적 오브젝트를 제공하기 위한 방법, 및 이를 수행하는 상호작용 가능한 시각적 오브젝트 제공 시스템
US10524300B2 (en) 2017-12-01 2019-12-31 Bose Corporation Wireless low-latency audio content sharing
KR102044242B1 (ko) 2017-12-27 2019-11-13 주식회사 하이퍼커넥트 영상 통화 서비스를 제공하는 단말 및 서버
KR20190102509A (ko) 2018-02-26 2019-09-04 삼성전자주식회사 음성 명령을 수행하는 방법 및 시스템
US10623844B2 (en) 2018-03-29 2020-04-14 Sonos, Inc. Headphone interaction with media playback system
US10698650B2 (en) 2018-04-06 2020-06-30 Sonos, Inc. Temporary configuration of a media playback system within a place of accommodation
CN108683798B (zh) 2018-04-19 2021-04-23 维沃移动通信有限公司 一种声音输出控制方法及移动终端
CN112313924A (zh) 2018-05-07 2021-02-02 谷歌有限责任公司 提供用于控制各种连接设备的复合图形助理界面
US10558546B2 (en) 2018-05-08 2020-02-11 Apple Inc. User interfaces for controlling or presenting device usage on an electronic device
US10299300B1 (en) 2018-05-16 2019-05-21 Bose Corporation Secure systems and methods for establishing wireless audio sharing connection
US11100498B2 (en) 2018-06-03 2021-08-24 Apple Inc. User interfaces for transfer accounts
EP3803649A1 (en) 2018-06-03 2021-04-14 Apple Inc. User interfaces for transfer accounts
US10636425B2 (en) 2018-06-05 2020-04-28 Voicify, LLC Voice application platform
US10714085B2 (en) 2018-06-06 2020-07-14 Amazon Technologies, Inc. Temporary account association with voice-enabled devices
US10412206B1 (en) 2018-06-08 2019-09-10 Amazon Technologies, Inc. Communications for multi-mode device
KR102607666B1 (ko) 2018-08-08 2023-11-29 삼성전자 주식회사 전자 장치에서 사용자 의도 확인을 위한 피드백 제공 방법 및 장치
US11289097B2 (en) 2018-08-28 2022-03-29 Dell Products L.P. Information handling systems and methods for accurately identifying an active speaker in a communication session
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器
CN109347581B (zh) 2018-09-30 2020-11-27 Oppo广东移动通信有限公司 蓝牙耳机连接方法、装置、电子设备及存储介质
US10924446B1 (en) 2018-10-08 2021-02-16 Facebook, Inc. Digital story reply container
EP3782005A1 (en) 2018-10-08 2021-02-24 Google LLC Speaker assembly in a display assistant device
TWI684874B (zh) 2018-10-18 2020-02-11 瑞軒科技股份有限公司 智慧型音箱及其操作方法
US20200135191A1 (en) 2018-10-30 2020-04-30 Bby Solutions, Inc. Digital Voice Butler
US10885912B2 (en) 2018-11-13 2021-01-05 Motorola Solutions, Inc. Methods and systems for providing a corrected voice command
KR20200055983A (ko) 2018-11-14 2020-05-22 삼성전자주식회사 장치로부터 방사되는 전자기 신호를 측정하기 위한 방법 및 그 전자 장치
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
KR20200074445A (ko) 2018-12-17 2020-06-25 삼성전자주식회사 Em 신호를 발생시킨 외부 전자 장치에 따라 오디오 신호의 경로를 변경하는 전자 장치 및 방법
KR102266888B1 (ko) 2018-12-31 2021-06-21 주식회사 하이퍼커넥트 영상 통화 서비스를 제공하는 단말기 및 서버
US11308949B2 (en) 2019-03-12 2022-04-19 International Business Machines Corporation Voice assistant response system based on a tone, keyword, language or etiquette behavioral rule
KR20200111853A (ko) 2019-03-19 2020-10-05 삼성전자주식회사 전자 장치 및 전자 장치의 음성 인식 제어 방법
CN111817943B (zh) 2019-04-12 2022-06-14 腾讯科技(深圳)有限公司 一种基于即时通讯应用的数据处理方法和装置
US20200336909A1 (en) 2019-04-18 2020-10-22 Blackberry Limited Methods and devices for delivering communications privately rather than via audible and/or visual output
CN113841172A (zh) 2019-05-28 2021-12-24 瑞典爱立信有限公司 用于处置消息的网络节点以及在其中执行的方法
KR102631541B1 (ko) 2019-05-30 2024-02-01 삼성전자주식회사 복수의 전자 장치들 사이에서 네트워크 연결을 전환하기 위한 전자 장치 및 방법
KR20240049648A (ko) 2019-05-31 2024-04-16 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US20200379716A1 (en) 2019-05-31 2020-12-03 Apple Inc. Audio media user interface
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US11172298B2 (en) 2019-07-08 2021-11-09 Apple Inc. Systems, methods, and user interfaces for headphone fit adjustment and audio output control
US11928386B2 (en) 2019-07-17 2024-03-12 Hewlett-Packard Development Company, L.P. Audio peripheral device selections
US20210064317A1 (en) 2019-08-30 2021-03-04 Sony Interactive Entertainment Inc. Operational mode-based settings for presenting notifications on a user display
US20210065134A1 (en) 2019-08-30 2021-03-04 Microsoft Technology Licensing, Llc Intelligent notification system
US11172329B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for target device prediction
US11152011B2 (en) 2019-11-27 2021-10-19 Summit Wireless Technologies, Inc. Voice detection with multi-channel interference cancellation
US10963145B1 (en) 2019-12-30 2021-03-30 Snap Inc. Prioritizing display of user icons associated with content
US11745585B2 (en) 2020-04-20 2023-09-05 Thinkware Corporation Vehicle infotainment apparatus using widget and operation method thereof
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US20210349680A1 (en) 2020-05-11 2021-11-11 Apple Inc. User interface for audio message
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US20220116399A1 (en) 2020-10-12 2022-04-14 Apple Inc. Media service configuration
US20220129144A1 (en) 2020-10-26 2022-04-28 Apple Inc. Methods and user interfaces for handling user requests
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
US20220392455A1 (en) 2021-06-06 2022-12-08 Apple Inc. Methods and user interfaces for voice-based user profile management
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US20230098814A1 (en) 2021-09-24 2023-03-30 Apple Inc. Media controls user interface

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160026429A1 (en) 2014-07-23 2016-01-28 Sonos, Inc. Zone Grouping
US20160062606A1 (en) 2014-09-02 2016-03-03 Sonos, Inc. Zone Recognition

Also Published As

Publication number Publication date
AU2022218540C1 (en) 2024-02-22
KR102436985B1 (ko) 2022-08-29
CN114168103A (zh) 2022-03-11
JP2022176955A (ja) 2022-11-30
AU2023266353A1 (en) 2023-12-07
AU2020282362A1 (en) 2021-11-25
JP2022128605A (ja) 2022-09-02
KR20210137221A (ko) 2021-11-17
CN113748408A (zh) 2021-12-03
CN114168103B (zh) 2023-12-01
KR20240049648A (ko) 2024-04-16
KR20230039775A (ko) 2023-03-21
EP4134811A1 (en) 2023-02-15
US20230393809A1 (en) 2023-12-07
EP3948517A1 (en) 2022-02-09
AU2022202458B1 (en) 2022-05-19
WO2020243691A4 (en) 2021-03-04
AU2020282362B2 (en) 2022-01-13
US20200379729A1 (en) 2020-12-03
CN117170620A (zh) 2023-12-05
US20200379730A1 (en) 2020-12-03
JP7075547B2 (ja) 2022-05-25
WO2020243691A1 (en) 2020-12-03
US11620103B2 (en) 2023-04-04
US11853646B2 (en) 2023-12-26
AU2022218540A1 (en) 2022-09-08
EP4231124A1 (en) 2023-08-23
AU2022218540B2 (en) 2023-10-26
JP2022524658A (ja) 2022-05-09
CN115562613A (zh) 2023-01-03
KR20220027295A (ko) 2022-03-07
KR102656129B1 (ko) 2024-04-11

Similar Documents

Publication Publication Date Title
JP7126034B1 (ja) オーディオメディア制御のためのユーザインタフェース
US11785387B2 (en) User interfaces for managing controllable external devices
US20230041125A1 (en) User interface for audio message
US11675608B2 (en) Multi-user configuration
EP3788776B1 (en) User interfaces for updating network connection settings of external devices
US20220116399A1 (en) Media service configuration
US11983551B2 (en) Multi-user configuration
JP2022180346A (ja) 音声メッセージのためのユーザインタフェース

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220621

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220621

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20220621

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220715

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220815

R150 Certificate of patent or registration of utility model

Ref document number: 7126034

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150