CN111857644A - 用于家庭媒体控制的方法和界面 - Google Patents

用于家庭媒体控制的方法和界面 Download PDF

Info

Publication number
CN111857644A
CN111857644A CN202010728844.3A CN202010728844A CN111857644A CN 111857644 A CN111857644 A CN 111857644A CN 202010728844 A CN202010728844 A CN 202010728844A CN 111857644 A CN111857644 A CN 111857644A
Authority
CN
China
Prior art keywords
media
playback
devices
receiving
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010728844.3A
Other languages
English (en)
Inventor
P·L·考夫曼
F·阿尔布奎克
T·G·卡瑞根
M·J·西埃拉克
A·法米利
D·C·格拉哈姆
C·D·伊拉尼
H·沃威吉
M·安德森
T·S·胡博特
D·克尔
P·马里
A·皮埃西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DKPA201770401A external-priority patent/DK179556B1/en
Priority claimed from DKPA201870060A external-priority patent/DK201870060A1/en
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN111857644A publication Critical patent/CN111857644A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4396—Processing of audio elementary streams by muting the audio signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4627—Rights management associated to the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4825—End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113—Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/2849—Audio/video appliances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2203/00—Details of circuits for transducers, loudspeakers or microphones covered by H04R3/00 but not provided for in any of its subgroups
    • H04R2203/12—Beamforming aspects for stereophonic sound reproduction with loudspeaker arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Social Psychology (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请涉及用于家庭媒体控制的方法和界面。本公开整体涉及用于一个或多个设备上的媒体回放的界面和技术。根据一些实施方案，电子设备包括显示器、一个或多个处理器以及存储器。所述电子设备接收用户输入，并且响应于接收到所述用户输入，在所述显示器上显示多设备界面，所述多设备界面包括：与多个可用回放设备相关联的一个或多个指示符以及所述多个可用回放设备的媒体回放状况，所述多个可用回放设备连接到所述设备并且可用于发起来自所述设备的媒体的回放。

Description

用于家庭媒体控制的方法和界面
本申请是申请日为2018年5月16日、申请号为201880001436.9、名称为“用于家庭媒体控制的方法和界面”的发明专利申请的分案申请。
相关申请的交叉引用
本申请要求以下专利申请的优先权：于2017年5月16日提交的标题为“METHODSAND INTERFACES FOR HOME MEDIA CONTROL”的美国临时专利申请62/507,202；于2017年5月16日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的美国临时专利申请62/507,208；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOMEMEDIA CONTROL”的丹麦专利申请No.PA 2017 70392；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70401；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70402；于2017年5月29日提交的标题为“METHODS ANDINTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70403；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70404；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOMEMEDIA CONTROL”的丹麦专利申请No.PA2017 70406；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70408；于2017年5月29日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70409；于2017年5月29日提交的标题为“METHODS ANDINTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2017 70410；于2017年6月4日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的美国临时专利申请62/514,932；于2018年1月25日提交的标题为“METHODS AND INTERFACES FOR HOMEMEDIA CONTROL”的美国临时专利申请62/622,122；以及于2018年1月29日提交的标题为“METHODS AND INTERFACES FOR HOME MEDIA CONTROL”的丹麦专利申请No.PA2018 70060，以上专利申请中的每个专利申请的内容据此全文以引用方式并入。
本申请还涉及于2014年6月9日提交的标题为“MULTI-CHANNEL LOUDSPEAKERMATCHING VARIABLE DIRECTIVITY”的美国专利申请No.14/300,120，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2015年6月6日提交的标题为“MULTI-MICROPHONE SPEECH RECOGNITION SYSTEMS AND RELATED TECHNIQUES”的美国专利申请No.14/732,711，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2015年6月6日提交的标题为“MULTI-MICROPHONE SPEECH RECOGNITIONTECHNIQUES AND RELATED SYSTEMS”的美国专利申请No.14/732,715。本申请还涉及于2015年9月29日提交的标题为“MODAL BASED ARCHITECTURE FOR CONTROLLING THEDIRECTIVITY OF LOUDSPEAKER ARRAYS”的美国专利申请No.14/869,760，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2016年9月15日提交的标题为“INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION”的美国专利申请No.15/266,956。本申请还涉及于2016年9月16日提交的标题为“INTELLIGENT DEVICEARBITRATION AND CONTROL”的美国专利申请No.15/268,338，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2016年9月21日提交的标题为“INTELLIGENT LIST READING”的美国专利申请No.15/272,214。本申请还涉及于2016年9月23日提交的标题为“PRESSURE GRADIENT MICROPHONE FOR MEASURING AN ACOUSTICCHARACTERISTIC OF A LOUDSPEAKER”的美国专利申请No.15/275,077。本申请还涉及于2016年12月20日提交的标题为“INTELLIGENT AUTOMATED ASSISTANT”的美国专利申请No.15/385,606，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2014年8月18日提交的标题为“A ROTATIONALLY SYMMETRIC SPEAKER ARRAY”的美国专利申请No.15/504,312。本申请还涉及于2015年9月25日提交的标题为“METHOD TODETERMINE LOUDSPEAKER CHANGE OF PLACEMENT”的美国专利申请No.15/514,455。本申请还涉及于2017年5月1日提交的标题为“A ROTATIONALLY SYMMETRIC SPEAKER ARRAY”的美国专利申请No.15/583,949。本申请还涉及于2017年5月12日提交的标题为“SPATIAL AUDIORENDERING FOR BEAMFORMING LOUDSPEAKER ARRAY”的美国专利申请No.15/593,887，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2014年5月28日提交的标题为“MULTI-CHANNEL LOUDSPEAKER MATCHING USING VARIABLE DIRECTIVITY”的美国专利申请No.62/004,111。本申请还涉及于2014年9月30日提交的标题为“MODALBASED ARCHITECTURE FOR CONTROLLING THE DIRECTIVITY OF LOUDSPEAKER ARRAYS”的美国专利申请No.62/057,989。本申请还涉及于2014年9月30日提交的标题为“METHOD TODETERMINE LOUDSPEAKER CHANGE OF PLACEMENT”的美国专利申请No.62/057,999。本申请还涉及于2016年6月6日提交的标题为“INTELLIGENT LIST READING”的美国专利申请No.62/346,236。本申请还涉及于2016年6月8日提交的标题为“INTELLIGENT AUTOMATEDASSISTANT FOR MEDIA EXPLORATION”的美国专利申请No.62/347,480。本申请还涉及于2016年6月11日提交的标题为“INTELLIGENT DEVICE ARBITRATION AND CONTROL”的美国专利申请No.62/348,896。本申请还涉及于2016年9月23日提交的标题为“AUDIO DRIVER ANDPOWER SUPPLY UNIT ARCHITECTURE”的美国专利申请No.62/399,165。本申请还涉及于2016年9月23日提交的标题为“MULTI-LOBE MAGNET FOR SUBWOOFER”的美国专利申请No.62/399,229。本申请还涉及于2016年9月23日提交的标题为“INTELLIGENT AUTOMATEDASSISTANT”的美国专利申请No.62/399,232。本申请还涉及于2016年9月23日提交的标题为“FORWARD BACK VOLUME OF AIR FOR AUDIO DRIVER”的美国专利申请No.62/399,262。本申请还涉及于2016年9月23日提交的标题为“UPPER HOUSING COMPONENT ARCHITECTURE”的美国专利申请No.62/399,288。本申请还涉及于2016年9月23日提交的标题为“AUDIO DRIVEREXIT GEOMETRY”的美国专利申请No.62/399,293。本申请还涉及于2016年9月30日提交的标题为“SPATIAL AUDIO RENDERING STRATEGIES FOR BEAMFORMING LOUD SPEAKER ARRAY”的美国专利申请No.62/402,836。本申请还涉及于2017年5月16日提交的标题为“MANAGINGMEDIA COLLECTIONS USING DIRECTED ACYCLIC GRAPHS”的美国专利申请No.62/506,912。本申请还涉及于2017年5月16日提交的标题为“SPEAKER”的美国专利申请No.62/507,007。本申请还涉及于2017年5月16日提交的标题为“TRANSFERRING PLAYBACK QUEUES BETWEENDEVICES”的美国专利申请No.62/507,100。本申请还涉及于2017年5月16日提交的标题为“FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES”的美国专利申请No.62/507,151，该专利申请的内容据此全文以引用方式并入，并被包括在附录中。本申请还涉及于2017年5月16日提交的标题为“PROVIDING AN AUDITORY-BASED INTERFACE OF A DIGITALASSISTANT”的美国专利申请No.62/507,056。本申请还涉及于2017年5月16日提交的标题为“METHODS AND SYSTEMS FOR PHONETIC MATCHING IN DIGITAL ASSISTANT SERVICE”的美国专利申请No.62/506,871。本申请还涉及于2017年5月16日提交的标题为“DETECTING ATRIGGER OF A DIGITAL ASSISTANT”的美国专利申请No.62/507,042。本申请还涉及于2017年5月16日提交的标题为“INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION”的美国专利申请No.62/506,981。本申请还涉及准备提交的标题为“AUDIO BLUR”的美国专利申请(代理人案卷号P34400US1)。本申请还涉及准备提交的标题为“ONLINE PROCESSINGMETHODS FOR MULTI-CHANNEL DEREVERBERATION”的美国专利申请(代理人案卷号P32630US1)。本申请还涉及准备提交的标题为“AUTOMATIC LOUDSPEAKER ORIENTATIONESTIMATION”的美国专利申请(代理人案卷号P34635US1)。本申请还涉及准备提交的标题为“FOURIER TRANSFORM BASED METHOD FOR CREATING SMOOTH DIRECTIVITY TRANSITIONSIN BEAMFORMING LOUDSPEAKERS”的美国专利申请(代理人案卷号P34719US1)。本申请还涉及准备提交的标题为“ACOUSTIC ECHO-CANCELLATION USING AN INTERNAL MICROPHONE”的美国专利申请(代理人案卷号P34811US1)。本申请还涉及准备提交的标题为“TECHNIQUESFOR VERIFYING USER INTENT AND SECURELY CONFIGURING COMPUTER DEVICES”的美国专利申请(代理人案卷号P34845USP1)。本申请还涉及准备提交的标题为“SHARING CONCEPTS”的美国专利申请(代理人案卷号P34762USP1)。以上列出的相关申请中的每个申请的内容据此全文以引用方式并入。
技术领域
本公开整体涉及计算机用户界面，并且更具体地讲涉及用于管理媒体回放设备的技术。
背景技术
用户家中的电子设备且特别是智能设备的数量继续增多。这些设备彼此越来越互连，性能越来越丰富，并且能执行更复杂的任务。正因如此，用户越来越期望这些设备具有精心设计的用户界面。
发明内容
然而，用于使用电子设备来管理媒体回放设备的一些技术通常很麻烦且效率低下。例如，一些现有技术使用复杂且耗时的用户界面，该用户界面可包括多次按键或击键。现有技术需要比所需更多的时间，这导致浪费用户的时间和设备能量。这后一考虑在电池驱动的设备中是特别重要的。
因此，本技术为电子设备提供了更快、更有效的方法和界面，以用于管理媒体回放设备。此类方法和界面任选地补充或替换用于管理媒体回放设备的其他方法。此类方法和界面减少对用户所造成的认知负担，并且产生更有效的人机界面。对于电池驱动的计算设备，此类方法和界面节省功率，并且增大电池充电之间的时间间隔。此类方法和界面可减少不必要的、无关的或重复的用户输入的数量。此外，此类方法和界面可减少电子设备的显示器或扬声器的电量使用。
根据一些实施方案，在具有显示器的设备处执行一种方法。该方法包括：接收用户输入；并且响应于接收到该用户输入，在显示器上显示多设备界面，该多设备界面包括：与多个可用回放设备相关联的一个或多个指示符以及所述多个可用回放设备的媒体回放状况，所述多个可用回放设备连接到该设备并且可用于发起来自该设备的媒体的回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用户输入；并且响应于接收到该用户输入，在显示器上显示多设备界面，该多设备界面包括：与多个可用回放设备相关联的一个或多个指示符以及所述多个可用回放设备的媒体回放状况，所述多个可用回放设备连接到该设备并且可用于发起来自该设备的媒体的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用户输入；并且响应于接收到该用户输入，在显示器上显示多设备界面，该多设备界面包括：与多个可用回放设备相关联的一个或多个指示符以及所述多个可用回放设备的媒体回放状况，所述多个可用回放设备连接到该设备并且可用于发起来自该设备的媒体的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；用于接收用户输入的装置；以及用于响应于接收到该用户输入而在显示器上显示多设备界面的装置，该多设备界面包括：与多个可用回放设备相关联的一个或多个指示符以及所述多个可用回放设备的媒体回放状况，所述多个可用回放设备连接到该设备并且可用于发起来自该设备的媒体的回放。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用户输入；并且响应于接收到该用户输入，在显示器上显示多设备界面，该多设备界面包括：与多个可用回放设备相关联的一个或多个指示符以及所述多个可用回放设备的媒体回放状况，所述多个可用回放设备连接到该设备并且可用于发起来自该设备的媒体的回放。
根据一些实施方案，在具有显示器的设备处执行一种方法。该方法包括：在显示器上显示针对该设备的第一当前媒体界面，其中该第一当前媒体界面包括：该设备上可用于回放的第一媒体项的表示以及回放设备选择示能表示；接收表示对该回放设备选择示能表示的选择的第一用户输入；响应于接收到第一用户输入，在显示器上显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示；接收表示对与所述多个可用回放设备相关联的所述一个或多个示能表示的选择的第二用户输入；以及响应于接收到第二用户输入，将该设备配置为在所述多个可用回放设备上发起回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在显示器上显示针对该设备的第一当前媒体界面，其中该第一当前媒体界面包括：该设备上可用于回放的第一媒体项的表示以及回放设备选择示能表示；接收表示对该回放设备选择示能表示的选择的第一用户输入；响应于接收到第一用户输入，在显示器上显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示；接收表示对与所述多个可用回放设备相关联的所述一个或多个示能表示的选择的第二用户输入；以及响应于接收到第二用户输入，将该设备配置为在所述多个可用回放设备上发起回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在显示器上显示针对该设备的第一当前媒体界面，其中该第一当前媒体界面包括：该设备上可用于回放的第一媒体项的表示以及回放设备选择示能表示；接收表示对该回放设备选择示能表示的选择的第一用户输入；响应于接收到第一用户输入，在显示器上显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示；接收表示对与所述多个可用回放设备相关联的所述一个或多个示能表示的选择的第二用户输入；以及响应于接收到第二用户输入，将该设备配置为在所述多个可用回放设备上发起回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；用于在显示器上显示针对该设备的第一当前媒体界面的装置，其中该第一当前媒体界面包括：该设备上可用于回放的第一媒体项的表示以及回放设备选择示能表示；用于接收表示对该回放设备选择示能表示的选择的第一用户输入的装置；用于响应于接收到第一用户输入而在显示器上显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示的装置；用于接收表示对与所述多个可用回放设备相关联的所述一个或多个示能表示的选择的第二用户输入的装置；以及用于响应于接收到第二用户输入而将该设备配置为在所述多个可用回放设备上发起回放的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在显示器上显示针对该设备的第一当前媒体界面，其中该第一当前媒体界面包括：该设备上可用于回放的第一媒体项的表示以及回放设备选择示能表示；接收表示对该回放设备选择示能表示的选择的第一用户输入；响应于接收到第一用户输入，在显示器上显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示；接收表示对与所述多个可用回放设备相关联的所述一个或多个示能表示的选择的第二用户输入；以及响应于接收到第二用户输入，将该设备配置为在所述多个可用回放设备上发起回放。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：检测第一设备和第二设备之间的物理接近度满足接近度条件的指示，其中第一设备经由通信链路连接到第二设备；根据检测到指示，可听地输出音频音调信号，其中该音频音调信号对于该通信链路是带外的；继输出音频音调信号之后，确定是否已接收到来自第二设备的响应音频音调信号；根据确定已接收到来自第二设备的响应音频音调信号，前进至配置过程中的下一个步骤；并且根据确定未接收到来自第二设备的响应音频音调信号，放弃前进至配置过程中的下一个步骤。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测第一设备和第二设备之间的物理接近度满足接近度条件的指示，其中第一设备经由通信链路连接到第二设备；根据检测到指示，可听地输出音频音调信号，其中该音频音调信号对于该通信链路是带外的；继输出音频音调信号之后，确定是否已接收到来自第二设备的响应音频音调信号；根据确定已接收到来自第二设备的响应音频音调信号，前进至配置过程中的下一个步骤；并且根据确定未接收到来自第二设备的响应音频音调信号，放弃前进至配置过程中的下一个步骤。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测第一设备和第二设备之间的物理接近度满足接近度条件的指示，其中第一设备经由通信链路连接到第二设备；根据检测到指示，可听地输出音频音调信号，其中该音频音调信号对于该通信链路是带外的；继输出音频音调信号之后，确定是否已接收到来自第二设备的响应音频音调信号；根据确定已接收到来自第二设备的响应音频音调信号，前进至配置过程中的下一个步骤；并且根据确定未接收到来自第二设备的响应音频音调信号，放弃前进至配置过程中的下一个步骤。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于检测第一设备和第二设备之间的物理接近度满足接近度条件的指示的装置，其中第一设备经由通信链路连接到第二设备；用于根据检测到指示而可听地输出音频音调信号的装置，其中该音频音调信号对于该通信链路是带外的；用于继输出音频音调信号之后确定是否已接收到来自第二设备的响应音频音调信号的装置；用于根据确定已接收到来自第二设备的响应音频音调信号而前进至配置过程中的下一个步骤的装置；以及用于根据确定未接收到来自第二设备的响应音频音调信号而放弃前进至配置过程中的下一个步骤的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测第一设备和第二设备之间的物理接近度满足接近度条件的指示，其中第一设备经由通信链路连接到第二设备；根据检测到指示，可听地输出音频音调信号，其中该音频音调信号对于该通信链路是带外的；继输出音频音调信号之后，确定是否已接收到来自第二设备的响应音频音调信号；根据确定已接收到来自第二设备的响应音频音调信号，前进至配置过程中的下一个步骤；并且根据确定未接收到来自第二设备的响应音频音调信号，放弃前进至配置过程中的下一个步骤。
根据一些实施方案，在具有显示器的第一设备处执行一种方法。该方法包括：在连接到第二设备时，检测第一设备和第二设备之间的物理接近度满足接近度条件的指示；并且根据检测到该物理接近度满足接近度条件，在显示器上显示媒体信息界面。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：在连接到第二设备时，检测第一设备和第二设备之间的物理接近度满足接近度条件的指示；并且根据检测到该物理接近度满足接近度条件，在显示器上显示媒体信息界面。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在连接到第二设备时，检测电子设备和第二设备之间的物理接近度满足接近度条件的指示；并且根据检测到该物理接近度满足接近度条件，在显示器上显示媒体信息界面。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；用于在连接到第二设备时检测电子设备和第二设备之间的物理接近度满足接近度条件的指示的装置；以及用于根据检测到该物理接近度满足接近度条件而在显示器上显示媒体信息界面的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：在连接到第二设备时，检测第一设备和第二设备之间的物理接近度满足接近度条件的指示；并且根据检测到该物理接近度满足接近度条件，在显示器上显示媒体信息界面。
根据一些实施方案，在具有触敏表面的设备处执行一种方法。该方法包括：检测触敏表面上的触摸。响应于检测到触敏表面上的触摸，确定设备当前是否正在播放媒体；根据确定设备当前正在播放媒体：确定触摸的位置是在触敏表面的第一区域内还是在触敏表面的第二区域内，其中第一区域和第二区域不重叠；根据确定触摸的位置在触敏表面的第一区域内，停止播放媒体；并且根据确定触摸的位置在触敏表面的第二区域内，调节当前正在播放的媒体的音量；并且根据确定设备当前没在播放媒体，发起媒体的回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由具有触敏表面的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测触敏表面上的触摸；响应于检测到触敏表面上的触摸，确定设备当前是否正在播放媒体；根据确定设备当前正在播放媒体：确定触摸的位置是在触敏表面的第一区域内还是在触敏表面的第二区域内，其中第一区域和第二区域不重叠；根据确定触摸的位置在触敏表面的第一区域内，停止播放媒体；并且根据确定触摸的位置在触敏表面的第二区域内，调节当前正在播放的媒体的音量；并且根据确定设备当前没在播放媒体，发起媒体的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：触敏表面；一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测触敏表面上的触摸；响应于检测到触敏表面上的触摸，确定设备当前是否正在播放媒体；根据确定设备当前正在播放媒体：确定触摸的位置是在触敏表面的第一区域内还是在触敏表面的第二区域内，其中第一区域和第二区域不重叠；根据确定触摸的位置在触敏表面的第一区域内，停止播放媒体；并且根据确定触摸的位置在触敏表面的第二区域内，调节当前正在播放的媒体的音量；并且根据确定设备当前没在播放媒体，发起媒体的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：触敏表面；用于检测触敏表面上的触摸的装置；用于响应于检测到触敏表面上的触摸而确定设备当前是否正在播放媒体的装置；用于执行以下操作的装置：根据确定设备当前正在播放媒体：确定触摸的位置是在触敏表面的第一区域内还是在触敏表面的第二区域内，其中第一区域和第二区域不重叠；根据确定触摸的位置在触敏表面的第一区域内，停止播放媒体；并且根据确定触摸的位置在触敏表面的第二区域内，调节当前正在播放的媒体的音量；以及用于根据确定设备当前没在播放媒体而发起媒体的回放的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由具有触敏表面的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测触敏表面上的触摸；响应于检测到触敏表面上的触摸，确定设备当前是否正在播放媒体；根据确定设备当前正在播放媒体：确定触摸的位置是在触敏表面的第一区域内还是在触敏表面的第二区域内，其中第一区域和第二区域不重叠；根据确定触摸的位置在触敏表面的第一区域内，停止播放媒体；并且根据确定触摸的位置在触敏表面的第二区域内，调节当前正在播放的媒体的音量；并且根据确定设备当前没在播放媒体，发起媒体的回放。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括第一设备；将第一媒体项添加到回放队列；接收用于使第二媒体项排队以在该组设备上回放的第二请求；将第二媒体项添加到回放队列；从第一媒体流传输服务访问第一媒体项；在该组设备上发起第一媒体项的回放；从不同于第一媒体流传输服务的第二媒体流传输服务访问第二媒体项；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括第一设备；将第一媒体项添加到回放队列；接收用于使第二媒体项排队以在该组设备上回放的第二请求；将第二媒体项添加到回放队列；从第一媒体流传输服务访问第一媒体项；在该组设备上发起第一媒体项的回放；从不同于第一媒体流传输服务的第二媒体流传输服务访问第二媒体项；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括该电子设备；将第一媒体项添加到回放队列；接收用于使第二媒体项排队以在该组设备上回放的第二请求；将第二媒体项添加到回放队列；从第一媒体流传输服务访问第一媒体项；在该组设备上发起第一媒体项的回放；从不同于第一媒体流传输服务的第二媒体流传输服务访问第二媒体项；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于接收用于使第一媒体项排队以在一组设备上回放的第一请求的装置，其中该组设备包括该电子设备；用于将第一媒体项添加到回放队列的装置；用于接收用于使第二媒体项排队以在该组设备上回放的第二请求的装置；用于将第二媒体项添加到回放队列的装置；用于从第一媒体流传输服务访问第一媒体项的装置；用于在该组设备上发起第一媒体项的回放的装置；用于从不同于第一媒体流传输服务的第二媒体流传输服务访问第二媒体项的装置；以及用于在该组设备上发起第二媒体项的回放的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括第一设备；将第一媒体项添加到回放队列；接收用于使第二媒体项排队以在该组设备上回放的第二请求；将第二媒体项添加到回放队列；从第一媒体流传输服务访问第一媒体项；在该组设备上发起第一媒体项的回放；从不同于第一媒体流传输服务的第二媒体流传输服务访问第二媒体项；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：从与第一用户相关联的第二设备接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括第一设备；将第一媒体项添加到回放队列；从与第二用户相关联的第三设备接收用于使第二媒体项排队以在该组设备上回放的第二请求，其中第二用户不同于第一用户；将第二媒体项添加到回放队列；在该组设备上发起第一媒体项的回放；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：从与第一用户相关联的第二设备接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括第一设备；将第一媒体项添加到回放队列；从与第二用户相关联的第三设备接收用于使第二媒体项排队以在该组设备上回放的第二请求，其中第二用户不同于第一用户；将第二媒体项添加到回放队列；在该组设备上发起第一媒体项的回放；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：从与第一用户相关联的第二设备接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括该电子设备；将第一媒体项添加到回放队列；从与第二用户相关联的第三设备接收用于使第二媒体项排队以在该组设备上回放的第二请求，其中第二用户不同于第一用户；将第二媒体项添加到回放队列；在该组设备上发起第一媒体项的回放；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于从与第一用户相关联的第二设备接收用于使第一媒体项排队以在一组设备上回放的第一请求的装置，其中该组设备包括该电子设备；用于将第一媒体项添加到回放队列的装置；用于从与第二用户相关联的第三设备接收用于使第二媒体项排队以在该组设备上回放的第二请求的装置，其中第二用户不同于第一用户；用于将第二媒体项添加到回放队列的装置；用于在该组设备上发起第一媒体项的回放的装置；以及用于在该组设备上发起第二媒体项的回放的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：从与第一用户相关联的第二设备接收用于使第一媒体项排队以在一组设备上回放的第一请求，其中该组设备包括第一设备；将第一媒体项添加到回放队列；从与第二用户相关联的第三设备接收用于使第二媒体项排队以在该组设备上回放的第二请求，其中第二用户不同于第一用户；将第二媒体项添加到回放队列；在该组设备上发起第一媒体项的回放；并且在该组设备上发起第二媒体项的回放。
根据一些实施方案，在具有显示器的第一设备处执行一种方法。该方法包括：检测指示与第二设备的配对握手的音频音调信号，其中第一设备经由通信链路连接到第二设备，并且其中该音频音调信号对于该通信链路是带外的；根据检测到音频音调信号，在第一设备上发起用于配置第二设备的配置过程；在配置过程期间，在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：检测指示与第二设备的配对握手的音频音调信号，其中第一设备经由通信链路连接到第二设备，并且其中该音频音调信号对于该通信链路是带外的；根据检测到音频音调信号，在第一设备上发起用于配置第二设备的配置过程；在配置过程期间，在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测指示与第二设备的配对握手的音频音调信号，其中该电子设备经由通信链路连接到第二设备，并且其中该音频音调信号对于该通信链路是带外的；根据检测到音频音调信号，在该电子设备上发起用于配置第二设备的配置过程；在配置过程期间，在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；用于检测指示与第二设备的配对握手的音频音调信号的装置，其中该电子设备经由通信链路连接到第二设备，并且其中该音频音调信号对于该通信链路是带外的；用于根据检测到音频音调信号而在该电子设备上发起用于配置第二设备的配置过程的装置；用于在配置过程期间在显示器上显示包括用于选择位置的提示的配置用户界面的装置；用于接收对位置的用户输入选择的装置；以及用于响应于接收到该用户输入而将第二设备配置为与该位置相关联的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：检测指示与第二设备的配对握手的音频音调信号，其中第一设备经由通信链路连接到第二设备，并且其中该音频音调信号对于该通信链路是带外的；根据检测到音频音调信号，在第一设备上发起用于配置第二设备的配置过程；在配置过程期间，在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联。
根据一些实施方案，在一个设备处执行一种方法。该方法包括：在从该设备输出可听信号时，检测来自语音命令源的用户输入语音命令；响应于检测到用户输入语音命令，确定语音命令源相对于该设备的空间位置；并且在继续输出可听信号时，基于语音命令源的空间位置来调节可听信号的输出。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在从该设备输出可听信号时，检测来自语音命令源的用户输入语音命令；响应于检测到用户输入语音命令，确定语音命令源相对于该设备的空间位置；并且在继续输出可听信号时，基于语音命令源的空间位置来调节可听信号的输出。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在从该设备输出可听信号时，检测来自语音命令源的用户输入语音命令；响应于检测到用户输入语音命令，确定语音命令源相对于该设备的空间位置；并且在继续输出可听信号时，基于语音命令源的空间位置来调节可听信号的输出。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于在从该设备输出可听信号时检测来自语音命令源的用户输入语音命令的装置；用于响应于检测到用户输入语音命令而确定语音命令源相对于该设备的空间位置的装置；以及用于在继续输出可听信号时基于语音命令源的空间位置来调节可听信号的输出的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在从该设备输出可听信号时，检测来自语音命令源的用户输入语音命令；响应于检测到用户输入语音命令，确定语音命令源相对于该设备的空间位置；并且在继续输出可听信号时，基于语音命令源的空间位置来调节可听信号的输出。
根据一些实施方案，在与第一用户账户相关联的第一设备处执行一种方法。该方法包括：检测与第二用户账户相关联的第二设备连接到第一设备，其中第一用户账户与第一媒体偏好配置文件相关联；其中第二用户账户与不同于第一媒体偏好配置文件的第二媒体偏好配置文件相关联；并且基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是与第一用户账户相关联的第一设备，其中第一用户账户与第一媒体偏好配置文件相关联，所述一个或多个程序包括用于执行以下操作的指令：检测与第二用户账户相关联的第二设备连接到第一设备，其中第二用户账户与不同于第一媒体偏好配置文件的第二媒体偏好配置文件相关联；并且基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：检测与第二用户账户相关联的第二设备连接到该电子设备，其中该电子设备与第一用户账户相关联，其中第一用户账户与第一媒体偏好配置文件相关联：其中第二用户账户与不同于第一媒体偏好配置文件的第二媒体偏好配置文件相关联；并且基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于检测与第二用户账户相关联的第二设备连接到该电子设备的装置，其中该电子设备与第一用户账户相关联，其中第一用户账户与第一媒体偏好配置文件相关联：其中第二用户账户与不同于第一媒体偏好配置文件的第二媒体偏好配置文件相关联；并且用于基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是与第一用户账户相关联的第一设备，其中第一用户账户与第一媒体偏好配置文件相关联，所述一个或多个程序包括用于执行以下操作的指令：检测与第二用户账户相关联的第二设备连接到第一设备，其中第二用户账户与不同于第一媒体偏好配置文件的第二媒体偏好配置文件相关联；并且基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：从第三设备接收用于在一组设备中的至少一个设备上发起媒体回放的请求，其中该组设备包括第一设备和第二设备，其中第三设备不是该组设备的成员，并且其中第三设备连接到第一设备；响应于接收到该请求：根据确定第三设备具有在该组设备中的所述至少一个设备上发起媒体回放的许可，在该组设备上发起媒体回放；并且根据确定第三设备不具有在该组设备中的所述至少一个设备上发起媒体回放的许可：向第二设备传输对许可的请求；并且响应于从第二设备接收到许可，在该组设备中的所述至少一个设备上发起媒体回放。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：从第三设备接收用于在一组设备中的至少一个设备上发起媒体回放的请求，其中该组设备包括第一设备和第二设备，其中第三设备不是该组设备的成员，并且其中第三设备连接到第一设备；响应于接收到该请求：根据确定第三设备具有在该组设备中的所述至少一个设备上发起媒体回放的许可，在该组设备上发起媒体回放；并且根据确定第三设备不具有在该组设备中的所述至少一个设备上发起媒体回放的许可：向第二设备传输对许可的请求；并且响应于从第二设备接收到许可，在该组设备中的所述至少一个设备上发起媒体回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：从第三设备接收用于在一组设备中的至少一个设备上发起媒体回放的请求，其中该组设备包括该电子设备和第二设备，其中第三设备不是该组设备的成员，并且其中第三设备连接到该电子设备；响应于接收到该请求：根据确定第三设备具有在该组设备中的所述至少一个设备上发起媒体回放的许可，在该组设备上发起媒体回放；并且根据确定第三设备不具有在该组设备中的所述至少一个设备上发起媒体回放的许可：向第二设备传输对许可的请求；并且响应于从第二设备接收到许可，在该组设备中的所述至少一个设备上发起媒体回放。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于从第三设备接收用于在一组设备中的至少一个设备上发起媒体回放的请求的装置，其中该组设备包括该电子设备和第二设备，其中第三设备不是该组设备的成员，并且其中第三设备连接到该电子设备；用于执行以下操作的装置：响应于接收到该请求：根据确定第三设备具有在该组设备中的所述至少一个设备上发起媒体回放的许可，在该组设备上发起媒体回放；并且根据确定第三设备不具有在该组设备中的所述至少一个设备上发起媒体回放的许可：向第二设备传输对许可的请求；并且响应于从第二设备接收到许可，在该组设备中的所述至少一个设备上发起媒体回放。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：从第三设备接收用于在一组设备中的至少一个设备上发起媒体回放的请求，其中该组设备包括第一设备和第二设备，其中第三设备不是该组设备的成员，并且其中第三设备连接到第一设备；响应于接收到该请求：根据确定第三设备具有在该组设备中的所述至少一个设备上发起媒体回放的许可，在该组设备上发起媒体回放；并且根据确定第三设备不具有在该组设备中的所述至少一个设备上发起媒体回放的许可：向第二设备传输对许可的请求；并且响应于从第二设备接收到许可，在该组设备中的所述至少一个设备上发起媒体回放。
根据一些实施方案，在与用户账户相关联的第一设备处执行一种方法。该方法包括：接收表示用于访问来自该用户账户的数据的请求的用户输入；响应于接收到该用户输入，确定第一设备和与该用户账户相关联的第二设备的物理定位是否满足许可条件；根据确定该物理定位满足许可条件，通过第一设备提供来自该用户账户的数据；并且根据确定该物理定位不满足许可条件，放弃通过第一设备提供来自该用户账户的数据。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是与用户账户相关联的第一电子设备，所述一个或多个程序包括用于执行以下操作的指令：接收表示用于访问来自该用户账户的数据的请求的用户输入；响应于接收到该用户输入，确定该电子设备和与该用户账户相关联的第二设备的物理定位是否满足许可条件；根据确定该物理定位满足许可条件，通过该电子设备提供来自该用户账户的数据；并且根据确定该物理定位不满足许可条件，放弃通过该电子设备提供来自该用户账户的数据。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收表示用于访问来自用户账户的数据的请求的用户输入，其中该电子设备与该用户账户相关联；响应于接收到该用户输入，确定该电子设备和与该用户账户相关联的第二设备的物理定位是否满足许可条件；根据确定该物理定位满足许可条件，通过该电子设备提供来自该用户账户的数据；并且根据确定该物理定位不满足许可条件，放弃通过该电子设备提供来自该用户账户的数据。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于接收表示用于访问来自用户账户的数据的请求的用户输入的装置，其中该电子设备与该用户账户相关联；用于响应于接收到该用户输入而确定该电子设备和与该用户账户相关联的第二设备的物理定位是否满足许可条件的装置；用于根据确定该物理定位满足许可条件而通过该电子设备提供来自该用户账户的数据的装置；以及用于根据确定该物理定位不满足许可条件而放弃通过该电子设备提供来自该用户账户的数据的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是与用户账户相关联的第一电子设备，所述一个或多个程序包括用于执行以下操作的指令：接收表示用于访问来自该用户账户的数据的请求的用户输入；响应于接收到该用户输入，确定该电子设备和与该用户账户相关联的第二设备的物理定位是否满足许可条件；根据确定该物理定位满足许可条件，通过该电子设备提供来自该用户账户的数据；并且根据确定该物理定位不满足许可条件，放弃通过该电子设备提供来自该用户账户的数据。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：接收用于在包括第一设备和第二设备的一组设备上发起媒体的回放的命令；响应于接收到该命令，在该组设备上发起媒体的同步回放，其中第二设备被指定为被配置为协调该组设备上媒体的回放的主设备，并且其中第一设备被配置为主设备的指定继承者。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收用于在包括第一设备和第二设备的一组设备上发起媒体的回放的命令；响应于接收到该命令，在该组设备上发起媒体的同步回放，其中第二设备被指定为被配置为协调该组设备上媒体的回放的主设备，并且其中第一设备被配置为主设备的指定继承者。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用于在包括该电子设备和第二设备的一组设备上发起媒体的回放的命令；响应于接收到该命令，在该组设备上发起媒体的同步回放，其中第二设备被指定为被配置为协调该组设备上媒体的回放的主设备，并且其中该电子设备被配置为主设备的指定继承者。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于接收用于在包括该电子设备和第二设备的一组设备上发起媒体的回放的命令的装置；用于响应于接收到该命令而在该组设备上发起媒体的同步回放的装置，其中第二设备被指定为被配置为协调该组设备上媒体的回放的主设备，并且其中该电子设备被配置为主设备的指定继承者。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收用于在包括第一设备和第二设备的一组设备上发起媒体的回放的命令；响应于接收到该命令，在该组设备上发起媒体的同步回放，其中第二设备被指定为被配置为协调该组设备上媒体的回放的主设备，并且其中第一设备被配置为主设备的指定继承者。
根据一些实施方案，在一组设备中与第一用户账户相关联的第一设备处执行一种方法。该方法包括：接收可听输出触发事件；确定与第一用户账户相关联的第一用户位于该组设备中的一个设备的可听输出范围内；根据确定第一用户在第一设备的可听输出范围内并且根据可听输出触发事件的发生，输出可听输出；并且根据确定第一用户在第二设备的可听输出范围内并且根据可听输出触发事件的发生，放弃输出可听输出。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是一组设备中与第一用户账户相关联的第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收可听输出触发事件；确定与第一用户账户相关联的第一用户位于该组设备中的一个设备的可听输出范围内；根据确定第一用户在第一设备的可听输出范围内并且根据可听输出触发事件的发生，输出可听输出；并且根据确定第一用户在第二设备的可听输出范围内并且根据可听输出触发事件的发生，放弃输出可听输出。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收可听输出触发事件；确定与第一用户账户相关联的第一用户位于一组设备中与第一用户账户相关联的设备的可听输出范围内，其中该电子设备是该组设备中的第一设备；根据确定第一用户在第一设备的可听输出范围内并且根据可听输出触发事件的发生，输出可听输出；并且根据确定第一用户在第二设备的可听输出范围内并且根据可听输出触发事件的发生，放弃输出可听输出。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于接收可听输出触发事件的装置；用于确定与第一用户账户相关联的第一用户位于一组设备中与第一用户账户相关联的设备的可听输出范围内的装置，其中该电子设备是该组设备中的第一设备；用于根据确定第一用户在第一设备的可听输出范围内并且根据可听输出触发事件的发生而输出可听输出的装置；以及用于根据确定第一用户在第二设备的可听输出范围内并且根据可听输出触发事件的发生而放弃输出可听输出的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是一组设备中与第一用户账户相关联的第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收可听输出触发事件；确定与第一用户账户相关联的第一用户位于该组设备中的一个设备的可听输出范围内；根据确定第一用户在第一设备的可听输出范围内并且根据可听输出触发事件的发生，输出可听输出；并且根据确定第一用户在第二设备的可听输出范围内并且根据可听输出触发事件的发生，放弃输出可听输出。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：接收表示请求的用户输入语音命令，该请求用于输出表示连接到第一设备的第二设备当前正在回放的媒体的信号；响应于接收到该用户输入，传输对关于第二设备当前正在回放的媒体的信息的请求；接收关于第二设备当前正在回放的媒体的信息；并且根据接收到关于第二设备当前正在回放的媒体的信息并且在第二设备继续媒体的至少一个分量的回放时，发起表示第二设备当前正在回放的媒体的信号的至少一个分量的输出。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收表示请求的用户输入语音命令，该请求用于输出表示连接到第一设备的第二设备当前正在回放的媒体的信号；响应于接收到该用户输入，传输对关于第二设备当前正在回放的媒体的信息的请求；接收关于第二设备当前正在回放的媒体的信息；并且根据接收到关于第二设备当前正在回放的媒体的信息并且在第二设备继续媒体的至少一个分量的回放时，发起表示第二设备当前正在回放的媒体的信号的至少一个分量的输出。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收表示请求的用户输入语音命令，该请求用于输出表示连接到该电子设备的第二设备当前正在回放的媒体的信号；响应于接收到该用户输入，传输对关于第二设备当前正在回放的媒体的信息的请求；接收关于第二设备当前正在回放的媒体的信息；并且根据接收到关于第二设备当前正在回放的媒体的信息并且在第二设备继续媒体的至少一个分量的回放时，发起表示第二设备当前正在回放的媒体的信号的至少一个分量的输出。
根据一些实施方案，描述了一种电子设备。该电子包括：用于接收表示请求的用户输入语音命令的装置，该请求用于输出表示连接到该电子设备的第二设备当前正在回放的媒体的信号；用于响应于接收到该用户输入而传输对关于第二设备当前正在回放的媒体的信息的请求的装置；用于接收关于第二设备当前正在回放的媒体的信息的装置；以及用于执行以下操作的装置：根据接收到关于第二设备当前正在回放的媒体的信息并且在第二设备继续媒体的至少一个分量的回放时，发起表示第二设备当前正在回放的媒体的信号的至少一个分量的输出。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收表示请求的用户输入语音命令，该请求用于输出表示连接到第一设备的第二设备当前正在回放的媒体的信号；响应于接收到该用户输入，传输对关于第二设备当前正在回放的媒体的信息的请求；接收关于第二设备当前正在回放的媒体的信息；并且根据接收到关于第二设备当前正在回放的媒体的信息并且在第二设备继续媒体的至少一个分量的回放时，发起表示第二设备当前正在回放的媒体的信号的至少一个分量的输出。
根据一些实施方案，在第一设备处执行一种方法。该方法包括：接收用于在不包括第一设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在第一设备正在协调媒体回放时，确定该组设备是否包括被配置为协调媒体回放的设备；根据确定该组设备包括被配置为协调媒体回放的设备，将媒体回放协调任务从第一设备传输到被配置为协调媒体回放的该设备；并且根据确定该组设备不包括被配置为协调媒体回放的设备，放弃传输媒体回放协调任务。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收用于在不包括第一设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在第一设备正在协调媒体回放时，确定该组设备是否包括被配置为协调媒体回放的设备；根据确定该组设备包括被配置为协调媒体回放的设备，将媒体回放协调任务从第一设备传输到被配置为协调媒体回放的该设备；并且根据确定该组设备不包括被配置为协调媒体回放的设备，放弃传输媒体回放协调任务。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用于在不包括该电子设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在该电子设备正在协调媒体回放时，确定该组设备是否包括被配置为协调媒体回放的设备；根据确定该组设备包括被配置为协调媒体回放的设备，将媒体回放协调任务从该电子设备传输到被配置为协调媒体回放的该设备；并且根据确定该组设备不包括被配置为协调媒体回放的设备，放弃传输媒体回放协调任务。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于接收用于在不包括该电子设备的一组设备上发起媒体回放的请求的装置；用于响应于接收到该请求并且在该电子设备正在协调媒体回放时来确定该组设备是否包括被配置为协调媒体回放的设备的装置；用于根据确定该组设备包括被配置为协调媒体回放的设备而将媒体回放协调任务从该电子设备传输到被配置为协调媒体回放的该设备的装置；以及用于根据确定该组设备不包括被配置为协调媒体回放的设备而放弃传输媒体回放协调任务的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：接收用于在不包括第一设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在第一设备正在协调媒体回放时，确定该组设备是否包括被配置为协调媒体回放的设备；根据确定该组设备包括被配置为协调媒体回放的设备，将媒体回放协调任务从第一设备传输到被配置为协调媒体回放的该设备；并且根据确定该组设备不包括被配置为协调媒体回放的设备，放弃传输媒体回放协调任务。
根据一些实施方案，在一个设备处执行一种方法。该方法包括：接收用于在连接到该设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在该设备正在协调媒体回放时，针对被配置为协调媒体回放并连接到该组设备的多个设备中的每个设备确定一个或多个设备特征；至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征来从被配置为协调媒体回放的所述多个设备中选择主设备；并且将媒体回放协调任务从该设备传输到被配置为协调媒体回放的主设备。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用于在连接到该设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在该设备正在协调媒体回放时，针对被配置为协调媒体回放并连接到该组设备的多个设备中的每个设备确定一个或多个设备特征；至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征来从被配置为协调媒体回放的所述多个设备中选择主设备；并且将媒体回放协调任务从该设备传输到被配置为协调媒体回放的主设备。
根据一些实施方案，描述了一种电子设备。该电子设备包括：一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用于在连接到该设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在该设备正在协调媒体回放时，针对被配置为协调媒体回放并连接到该组设备的多个设备中的每个设备确定一个或多个设备特征；至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征来从被配置为协调媒体回放的所述多个设备中选择主设备；并且将媒体回放协调任务从该设备传输到被配置为协调媒体回放的主设备。
根据一些实施方案，描述了一种电子设备。该电子设备包括：用于接收用于在连接到该设备的一组设备上发起媒体回放的请求的装置；用于响应于接收到该请求并且在该设备正在协调媒体回放时针对被配置为协调媒体回放并连接到该组设备的多个设备中的每个设备确定一个或多个设备特征的装置；用于至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征来从被配置为协调媒体回放的所述多个设备中选择主设备的装置；以及用于将媒体回放协调任务从该设备传输到被配置为协调媒体回放的主设备的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收用于在连接到该设备的一组设备上发起媒体回放的请求；响应于接收到该请求并且在该设备正在协调媒体回放时，针对被配置为协调媒体回放并连接到该组设备的多个设备中的每个设备确定一个或多个设备特征；至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征来从被配置为协调媒体回放的所述多个设备中选择主设备；并且将媒体回放协调任务从该设备传输到被配置为协调媒体回放的主设备。
根据一些实施方案，在具有显示器的第一设备处执行一种方法。该方法包括：建立与第二设备的通信链路；继建立与第二设备的通信链路之后，发起用于配置第二设备的配置过程；在配置过程期间：在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联；检测指示与第二设备的配对握手的音频音调信号，其中该音频音调信号对于该通信链路是带外的；并且根据检测到音频音调信号，前进至用于配置第二设备的配置过程中的下一个步骤。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，其中该电子设备是第一设备，所述一个或多个程序包括用于执行以下操作的指令：建立与第二设备的通信链路；继建立与第二设备的通信链路之后，发起用于配置第二设备的配置过程；在配置过程期间：在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联；检测指示与第二设备的配对握手的音频音调信号，其中该音频音调信号对于该通信链路是带外的；并且根据检测到音频音调信号，前进至用于配置第二设备的配置过程中的下一个步骤。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；一个或多个处理器；以及存储器，该存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：建立与第二设备的通信链路；继建立与第二设备的通信链路之后，发起用于配置第二设备的配置过程；在配置过程期间：在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联；检测指示与第二设备的配对握手的音频音调信号，其中该音频音调信号对于该通信链路是带外的；并且根据检测到音频音调信号，前进至用于配置第二设备的配置过程中的下一个步骤。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示器；用于建立与第二设备的通信链路的装置；继建立与第二设备的通信链路之后，用于发起用于配置第二设备的配置过程的装置；在配置过程期间：用于在显示器上显示包括用于选择位置的提示的配置用户界面的装置；用于接收对位置的用户输入选择的装置；以及用于响应于接收到该用户输入而将第二设备配置为与该位置相关联的装置；用于检测指示与第二设备的配对握手的音频音调信号的装置，其中该音频音调信号对于该通信链路是带外的；以及根据检测到音频音调信号，用于前进至用于配置第二设备的配置过程中的下一个步骤的装置。
根据一些实施方案，描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：建立与第二设备的通信链路；继建立与第二设备的通信链路之后，发起用于配置第二设备的配置过程；在配置过程期间：在显示器上显示包括用于选择位置的提示的配置用户界面；接收对位置的用户输入选择；并且响应于接收到该用户输入，将第二设备配置为与该位置相关联；检测指示与第二设备的配对握手的音频音调信号，其中该音频音调信号对于该通信链路是带外的；并且根据检测到音频音调信号，前进至用于配置第二设备的配置过程中的下一个步骤。
用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的暂态计算机可读存储介质或其他计算机程序产品中。
因此，为设备提供了更快、更有效的方法和界面，以用于管理媒体回放设备，从而提高了此类设备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于管理媒体回放设备的其他方法。
附图说明
为了更好地理解各种所述实施方案，应结合以下附图参考下面的具体实施方式，其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出了根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的针对便携式多功能设备上应用程序的菜单的示例性用户界面。
图4B示出了根据一些实施方案的针对具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图5A示出了根据一些实施方案的个人电子设备。
图5B是示出了根据一些实施方案的个人电子设备的框图。
图5C-图5D示出了根据一些实施方案具有触敏显示器和强度传感器的个人电子设备的示例性部件。
图5E-图5H示出了根据一些实施方案的个人电子设备的示例性部件和用户界面。
图5I示出了根据一些实施方案的电子设备。
图5J是示出了根据一些实施方案的电子设备的框图。
图6A-图6AR示出了根据一些实施方案的用于回放媒体的示例性技术和用户界面。
图7A-图7D是示出了根据一些实施方案的用于回放媒体的过程的流程图。
图8A-图8P示出了根据一些实施方案的用于回放媒体的示例性技术和用户界面。
图9A-图9C是示出了根据一些实施方案的用于回放媒体的过程的流程图。
图10A-图10O示出了根据一些实施方案的示例性技术和用户界面。
图11A-图11D是示出了根据一些实施方案的用于显示内容的过程的流程图。
图12A-图12AM示出了根据一些实施方案的用于查看媒体信息的示例性技术和用户界面。
图13A-图13F是示出了根据一些实施方案的用于查看媒体信息的过程的流程图。
图14A-图14T示出了根据一些实施方案的用于控制电子设备的示例性技术和用户界面。
图15A-图15C是示出了根据一些实施方案的用于控制电子设备的过程的流程图。
图16A-图16P示出了根据一些实施方案的用于管理回放队列的示例性技术和用户界面。
图17A-图17C是示出了根据一些实施方案的用于管理回放队列的过程的流程图。
图18A-图18C是示出了根据一些实施方案的用于管理回放队列的过程的流程图。
图19A-图19AL示出了根据一些实施方案的用于配置电子设备的示例性技术和用户界面。
图20A-图20C是示出了根据一些实施方案的用于配置电子设备的过程的流程图。
图21A-图21I示出了根据一些实施方案的用于调节电子设备的可听输出的示例性技术和用户界面。
图22A-图22B是示出了根据一些实施方案的用于调节电子设备的可听输出的过程的流程图。
图23A-图23K示出了根据一些实施方案的用于管理回放队列的示例性技术和用户界面。
图24A-图24B是示出了根据一些实施方案的用于管理回放队列的过程的流程图。
图25A-图25I示出了根据一些实施方案的用于回放媒体的示例性技术和用户界面。
图26A-图26B是示出了根据一些实施方案的用于回放媒体的过程的流程图。
图27A-图27E示出了根据一些实施方案的用于提供对电子设备的访问的示例性技术和用户界面。
图28A-图28C是示出了根据一些实施方案的用于提供对电子设备的访问的过程的流程图。
图29A-图29I示出了根据一些实施方案的用于管理媒体回放的示例性技术和用户界面。
图30A-图30C是示出了根据一些实施方案的用于管理媒体回放的过程的流程图。
图31A-图31N示出了根据一些实施方案的用于提供输出的示例性技术和用户界面。
图32A-图32C是示出了根据一些实施方案的用于提供输出的过程的流程图。
图33A-图33G示出了根据一些实施方案的用于控制媒体回放的示例性技术和用户界面。
图34A-图34B是示出了根据一些实施方案的用于控制媒体回放的过程的流程图。
图35A-图35J示出了根据一些实施方案的用于管理媒体回放的示例性技术和用户界面。
图36A-图36C是示出了根据一些实施方案的用于管理媒体回放的过程的流程图。
图37A-图37D示出了根据一些实施方案的用于控制媒体回放的示例性技术和用户界面。
图38A-图38B是示出了根据一些实施方案的用于管理媒体回放的过程的流程图。
图39A-图39C是示出了根据一些实施方案的用于配置电子设备的过程的流程图。
具体实施方式
以下描述阐述了示例性方法、参数等。然而，应当认识到，此类描述并非意在限制本公开的范围，而是作为对示例性实施方案的描述来提供。
电子设备需要提供有效的方法和界面以用于管理媒体回放设备。例如，下文描述了用于在设备之间传输回放的方法和技术。此类技术可减轻访问事件通知的用户的认知负担，从而提高生产率。此外，此类技术可减少以其他方式浪费在冗余用户输入上的处理器功率和电池功率。
下面图1A-图1B、图2、图3、图4A-图4B和图5A-图5H提供了对用于执行管理事件通知的技术的示例性设备的描述。图6A-图6AR示出了根据一些实施方案的用于回放媒体的示例性技术和用户界面。图7A-图7D是示出了根据一些实施方案的用于回放媒体的过程的流程图。图6A-图6AR中的用户界面用于示出下文描述的过程，包括图7A-图7D中的过程。图8A-图8P示出了根据一些实施方案的用于回放媒体的示例性技术和用户界面。图9A-图9C是示出了根据一些实施方案的用于回放媒体的过程的流程图。图8A-图8P中的用户界面用于示出下文描述的过程，包括图9A-图9C中的过程。图10A-图10O示出了根据一些实施方案的示例性技术和用户界面。图11A-图11D是示出了根据一些实施方案的用于显示内容的过程的流程图。图10A-图10O中的用户界面用于示出下文描述的过程，包括图11A-图11D中的过程。图12A-图12AM示出了根据一些实施方案的用于查看媒体信息的示例性技术和用户界面。图13A-图13F是示出了根据一些实施方案的用于查看媒体信息的过程的流程图。图12A-图12AM中的用户界面用于示出下文描述的过程，包括图13A-图13F中的过程。图14A-图14T示出了根据一些实施方案的用于控制电子设备的示例性技术和用户界面。图15A-图15C是示出了根据一些实施方案的用于控制电子设备的过程的流程图。图14A-图14T中的用户界面用于示出下文描述的过程，包括图15A-图15C中的过程。图16A-图16P示出了根据一些实施方案的用于管理回放队列的示例性技术和用户界面。图17A-图17C是示出了根据一些实施方案的用于管理回放队列的过程的流程图。图18A-图18C是示出了根据一些实施方案的用于管理回放队列的过程的流程图。图16A-图16P中的用户界面用于示出下文描述的过程，包括图17A-图17C和图18A-图18C中的过程。图19A-图19AL示出了根据一些实施方案的用于配置电子设备的示例性技术和用户界面。图20A-图20C是示出了根据一些实施方案的用于配置电子设备的过程的流程图。图19A-图19AL中的用户界面用于示出下文描述的过程，包括图20A-图20C中的过程。图21A-图21I示出了根据一些实施方案的用于调节电子设备的可听输出的示例性技术和用户界面。图22A-图22B是示出了根据一些实施方案的用于调节电子设备的可听输出的过程的流程图。图21A-图21I中的用户界面用于示出下文描述的过程，包括图22A-图22B中的过程。图23A-图23K示出了根据一些实施方案的用于管理回放队列的示例性技术和用户界面。图24A-图24B是示出了根据一些实施方案的用于管理回放队列的过程的流程图。图23A-图23K中的用户界面用于示出下文描述的过程，包括图24A-图24B中的过程。图25A-图25I示出了根据一些实施方案的用于回放媒体的示例性技术和用户界面。图26A-图26B是示出了根据一些实施方案的用于回放媒体的过程的流程图。图25A-图25I中的用户界面用于示出下文描述的过程，包括图26A-图26B中的过程。图27A-图27E示出了根据一些实施方案的用于提供对电子设备的访问的示例性技术和用户界面。图28A-图28C是示出了根据一些实施方案的用于提供对电子设备的访问的过程的流程图。图27A-图27E中的用户界面用于示出下文描述的过程，包括图28A-图28C中的过程。图29A-图29I示出了根据一些实施方案的用于管理媒体回放的示例性技术和用户界面。图30A-图30C是示出了根据一些实施方案的用于管理媒体回放的过程的流程图。图29A-图29I中的用户界面用于示出下文描述的过程，包括图30A-图30C中的过程。图31A-图31N示出了根据一些实施方案的用于提供输出的示例性技术和用户界面。图32A-图32C是示出了根据一些实施方案的用于提供输出的过程的流程图。图31A-图31N中的用户界面用于示出下文描述的过程，包括图32A-图32C中的过程。图33A-图33G示出了根据一些实施方案的用于控制媒体回放的示例性技术和用户界面。图34A-图34B是示出了根据一些实施方案的用于控制媒体回放的过程的流程图。图33A-图33G中的用户界面用于示出下文描述的过程，包括图34A-图34B中的过程。图35A-图35J示出了根据一些实施方案的用于管理媒体回放的示例性技术和用户界面。图36A-图36C是示出了根据一些实施方案的用于管理媒体回放的过程的流程图。图35A-图35J中的用户界面用于示出下文描述的过程，包括图36A-图36C中的过程。图37A-图37D示出了根据一些实施方案的用于管理媒体回放的示例性技术和用户界面。图38A-图38B是示出了根据一些实施方案的用于管理媒体回放的过程的流程图。图37A-图37D中的用户界面用于示出下文描述的过程，包括图38A-图38B中的过程。
尽管以下描述使用术语第一、第二等来描述各种元素，但这些元素不应受术语的限制。这些术语只是用于将一个元素与另一个元素区分开。例如，第一触摸可被命名为第二触摸并且类似地第二触摸可被命名为第一触摸，而不脱离各种所述实施方案的范围。第一触摸和第二触摸两者均为触摸，但是它们不是同一触摸。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的，而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样，单数形式“一个”和“该”旨在也包括复数形式，除非上下文另外明确地指示。还应当理解，本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是，术语“包括”(“includes”“including”“comprises”和/或“comprising”)当在本说明书中使用时指定存在所陈述的特征、整数、步骤、操作、元素、和/或部件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元素、部件、和/或其分组。
根据上下文，术语“如果”任选地被解释为意指“当......时”、“在......时”或“响应于确定”或“响应于检测到”。类似地，根据上下文，短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中，该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备，诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc.(Cupertino,California)的
Figure BDA0002602782570000361
设备、iPod
Figure BDA0002602782570000362
设备、和
Figure BDA0002602782570000363
设备。任选地使用其他便携式电子设备，诸如具有触敏表面(例如，触摸屏显示器和/或触摸板)的膝上型电脑或平板电脑。还应当理解的是，在一些实施方案中，该设备并非便携式通信设备，而是具有触敏表面(例如，触摸屏显示器和/或触摸板)的台式计算机。
在下面的讨论中，描述了一种包括显示器和触敏表面的电子设备。然而，应当理解，该电子设备任选地包括一个或多个其他物理用户界面设备，诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用程序，诸如以下中的一者或多者：绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程序、照片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备，诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化，和/或在相应应用程序内被调整和/或变化。这样，设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出了根据一些实施方案的具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器112有时为了方便被叫做“触摸屏”，并且有时被称为或被叫做“触敏显示器系统”。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入控制设备116和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括一个或多个接触强度传感器165，所述一个或多个接触强度传感器用于检测设备100(例如，触敏表面诸如设备100的触敏显示器系统112)上的接触的强度。设备100任选地包括一个或多个触觉输出发生器167，所述一个或多个触觉输出发生器用于在设备100上生成触觉输出(例如，在触敏表面诸如设备100的触敏显示器系统112或设备300的触控板355上生成触觉输出)。这些部件任选地通过一条或多条通信总线或信号线103来进行通信。
如在本说明书和权利要求书中所使用的那样，触敏表面上的接触的术语“强度”是指触敏表面上的接触(例如，手指接触)的力或压力(每单位面积的力)，或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围，该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如，在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中，来自多个力传感器的力测量被合并(例如，加权平均数)，以确定估计的接触力。类似地，触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地，在触敏表面上检测到的接触面积的尺寸和/或其变化、邻近接触的触敏表面的电容和/或其变化、和/或邻近接触的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中，接触力或压力的替代测量直接用于确定是否已超过强度阈值(例如，强度阈值以与替代物测量对应的单位来描述)。在一些具体实施中，接触力或压力的替代测量被转换成估计的力或压力，并且估计的力或压力用于确定是否已超过强度阈值(例如，强度阈值为以压力的单位进行测量的压力阈值)。使用接触的强度作为用户输入的属性，从而允许用户访问用户在尺寸更小的设备上可能本来不能访问的附加设备功能，该尺寸更小的设备具有有限的实地面积以用于(例如，在触敏显示器上)显示示能表示和/或接收用户输入(例如，经由触敏显示器、触敏表面或物理控件/机械控件，诸如旋钮或按钮)。
如本说明书和权利要求书中所使用的，术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如，触敏表面)相对于设备的另一个部件(例如，外壳)的物理位移、或部件相对于设备的质心的位移。例如，在设备或设备的部件与用户对触摸敏感的表面(例如，手指、手掌或用户手部的其他部分)接触的情况下，通过物理位移生成的触觉输出将由用户解释为触感，该触感与设备或设备的部件的物理特征的所感知的变化对应。例如，触敏表面(例如，触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下，用户将感觉到触感，诸如“按下点击”或“松开点击”，即使在通过用户的移动而物理地被按压(例如，被移位)的与触敏表面相关联的物理致动按钮没有移动时。作为另一个示例，即使在触敏表面的光滑度无变化时，触敏表面的移动也会任选地由用户解释为或感测为触敏表面的“粗糙度”。虽然由用户对触摸的此类解释将受到用户的个体化感官知觉的限制，但是有许多触摸的感官知觉为大多数用户共有的。因此，当触觉输出被描述为与用户的特定感官知觉(例如，“松开点击”、“按下点击”、“粗糙度”)对应时，除非另外陈述，否则所生成的触觉输出与设备或其部件的物理位移对应，该物理位移将会生成典型(或普通)用户的所描述的感官知觉。
应当理解，设备100仅是便携式多功能设备的一个示例，并且设备100任选地具有比所示出的更多或更少的部件，任选地组合两个或更多个部件，或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件或硬件与软件两者的组合来实现，包括一个或多个信号处理电路和/或专用集成电路。
存储器102任选地包括高速随机存取存储器，并且还任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。存储器控制器122任选地控制设备100的其他部件访问存储器102。
外围设备接口118可用于将设备的输入外围设备和输出外围设备耦接至CPU 120和存储器102。所述一个或多个处理器120运行或执行存储在存储器102中的各个软件程序和/或指令集，以执行设备100的各种功能以及处理数据。在一些实施方案中，外围设备接口118、CPU 120和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其他实施方案中，它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被叫做电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号，并且经由电磁信号来与通信网络以及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路，包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络以及其他设备进行通信，该网络为诸如互联网(也被称为万维网(WWW))、内联网、和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。RF电路108任选地包括用于诸如通过近程通信无线电部件来检测近场通信(NFC)场的熟知的电路。无线通信任选地使用多种通信标准、协议和技术中的任一者，包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗(BTLE)、无线保真(Wi-Fi)(例如，IEEE 802.11a、IEEE802.11b、IEEE 802.11g、IEEE 802.11n和/或IEEE802.11ac)、互联网协议语音(VoIP)、Wi-MAX、电子邮件协议(例如，互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如，可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS)，或者包括在本文档提交日期时还未开发出的通信协议的任何其他适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户和设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据，将音频数据转换为电信号，并将电信号传输给扬声器111。扬声器111将电信号转换为人类可听见的声波。音频电路110还接收由麦克风113根据声波转换的电信号。音频电路110将电信号转换为音频数据并将音频数据传输给外围设备接口118，以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中，音频电路110还包括耳麦插孔(例如，图2中的212)。该耳麦插孔提供音频电路110与可移除的音频输入/输出外围设备之间的接口，该可移除的音频输入/输出外围设备诸如为仅输出的耳机或者具有输出(例如，单耳耳机或双耳耳机)和输入(例如，麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116耦接至外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。所述一个或多个输入控制器160从其他输入控制设备116接收电信号/将电信号发送到所述其他输入控制设备。其他输入控制设备116任选地包括物理按钮(例如，下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等。在一些另选实施方案中，输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者)：键盘、红外线端口、USB端口以及指针设备诸如鼠标。所述一个或多个按钮(例如，图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的增大/减小按钮。所述一个或多个按钮任选地包括下压按钮(例如，图2中的206)。
快速按压下压按钮任选地解除对触摸屏112的锁定或者任选地开始使用触摸屏上的手势来对设备进行解锁的过程，如于2005年12月23日提交的名称为“Unlocking aDevice by Performing Gestures on an Unlock Image”的美国专利申请11/322,549(即美国专利No.7,657,849)中所述，该专利据此全文以引用方式并入。长按下压按钮(例如206)任选地使设备100开机或关机。一个或多个按钮的功能任选地为用户可定制的。触摸屏112用于实现虚拟按钮或软按钮以及一个或多个软键盘。
触敏显示器112提供设备和用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送至该触摸屏。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中，一些视觉输出或全部的视觉输出任选地与用户界面对象对应。
触摸屏112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断)，并且将所检测到的接触转换为与被显示在触摸屏112上的用户界面对象(例如，一个或多个软键、图标、网页或图像)的交互。在一个示例性实施方案中，触摸屏112和用户之间的接触点与用户的手指对应。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术或LED(发光二极管)技术，但是在其他实施方案中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断，该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一个示例性实施方案中，使用投射式互电容感测技术，诸如在Apple Inc.(Cupertino,California)的
Figure BDA0002602782570000411
和iPod
Figure BDA0002602782570000412
中发现的技术。
触摸屏112的一些实施方案中的触敏显示器任选地类似于以下美国专利中描述的多点触敏触控板：6,323,846(Westerman等人)、6,570,557(Westerman等人)和/或6,677,932(Westerman等人)和/或美国专利公开2002/0015024A1，该每个专利据此全文以引用方式并入。然而，触摸屏112显示来自设备100的视觉输出，而触敏触控板不提供视觉输出。
在一些实施方案中，触摸屏112的触敏显示器在以下申请中有所描述：(1)2006年5月2日提交的名称为“Multipoint Touch Surface Controller”的美国专利申请No.11/381,313；(2)2004年5月6日提交的名称为“Multipoint Touchscreen”的美国专利申请10/840,862；(3)2004年7月30日提交的名称为“Gestures For Touch Sensitive InputDevices”的美国专利申请10/903,964；(4)2005年1月31日提交的名称为“Gestures ForTouch Sensitive Input Devices”的美国专利申请No.11/048,264；(5)2005年1月18日提交的名称为“Mode-Based Graphical User Interfaces For Touch Sensitive InputDevices”的美国专利申请11/038,590；(6)2005年9月16日提交的名称为“Virtual InputDevice Placement On A Touch Screen User Interface”的美国专利申请11/228,758；(7)2005年9月16日提交的名称为“Operation Of A Computer With A Touch ScreenInterface”的美国专利申请11/228,700；(8)2005年9月16日提交的名称为“ActivatingVirtual Keys Of A Touch-Screen Virtual Keyboard”的美国专利申请11/228,737；以及(9)2006年3月3日提交的名称为“Multi-Functional Hand-Held Device”的美国专利申请11/367,749。所有这些专利申请全文以引用方式并入本文。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施方案中，触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等等来与触摸屏112接触。在一些实施方案中，将用户界面设计用来主要与基于手指的接触和手势一起工作，由于手指在触摸屏上的接触面积较大，因此这可能不如基于触笔的输入那样精确。在一些实施方案中，设备将基于手指的粗略输入翻译为精确的指针/光标位置或命令，以用于执行用户所期望的动作。
在一些实施方案中，除了触摸屏之外，设备100任选地包括用于激活或去激活特定功能的触控板(未示出)。在一些实施方案中，该触摸板为设备的触敏区域，该触敏区域与触摸屏不同，其不显示视觉输出。触摸板任选地是与触摸屏112分开的触敏表面，或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如，电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示符(例如，发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光，并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块)，光学传感器164任选地捕获静态图像或视频。在一些实施方案中，光学传感器位于设备100的后部上，与设备前部上的触摸屏显示器112相背对，使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中，光学传感器位于设备的前部上，使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取该用户的图像，以用于视频会议。在一些实施方案中，光学传感器164的位置可由用户改变(例如，通过旋转设备外壳中的透镜和传感器)，使得单个光学传感器164与触摸屏显示器一起使用，以用于视频会议和静态图像和/或视频图像采集两者。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如，用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如，压力信息或压力信息的代用物)。在一些实施方案中，至少一个接触强度传感器与触敏表面(例如，触敏显示器系统112)并置排列或邻近。在一些实施方案中，至少一个接触强度传感器位于设备100的后部上，与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接到外围设备接口118的接近传感器166。另选地，接近传感器166任选地耦接到I/O子系统106中的输入控制器160。接近传感器166任选地如以下美国专利申请中所述的那样执行：11/241,839，名称为“Proximity Detector In Handheld Device”；No.11/240,788，名称为“ProximityDetector In Handheld Device”；No.11/620,702，名称为“Using Ambient Light SensorTo Augment Proximity Sensor Output”；No.11/586,862，名称为“Automated ResponseTo And Sensing Of User Activity In Portable Devices”；以及No.11/638,251，名称为“Methods And Systems For Automatic Configuration Of Peripherals”，这些美国专利申请据此全文以引用方式并入本文。在一些实施方案中，当多功能设备被置于用户的耳朵附近时(例如，当用户正在进行电话呼叫时)，接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子系统106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件，和/或将能量转换为线性运动的机电设备诸如电机、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如，用于将电信号转换为设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令，并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中，至少一个触觉输出发生器与触敏表面(例如，触敏显示器系统112)并置排列或邻近，并且任选地通过竖直地(例如，向设备100的表面内/外)或侧向地(例如，在与设备100的表面相同的平面中向后和向前)移动该触敏表面来生成触觉输出。在一些实施方案中，至少一个触觉输出发生器传感器位于设备100的后部上，与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到外围设备接口118的加速度计168。另选地，加速度计168任选地耦接到I/O子系统106中的输入控制器160。加速度计168任选地如以下美国专利公开中所述的那样执行：美国专利公开20050190059，名称为“Acceleration-based Theft Detection System for Portable ElectronicDevices”和美国专利公开20060017692，名称为“Methods And Apparatuses ForOperating A Portable Device Based On An Accelerometer”，这两个美国专利公开均全文以引用方式并入本文。在一些实施方案中，信息基于对从一个或多个加速度计所接收的数据的分析而在触摸屏显示器上以纵向视图或横向视图被显示。设备100任选地除了加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出)，以用于获取关于设备100的位置和取向(例如，纵向或横向)的信息。
在一些实施方案中，存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外，在一些实施方案中，存储器102(图1A)或370(图3)存储设备/全局内部状态157，如图1A和图3中所示。设备/全局内部状态157包括以下中的一者或多者：活动应用程序状态，其指示哪些应用程序(如果有的话)当前是活动的；显示状态，其指示什么应用程序、视图或其他信息占据触摸屏显示器112的各个区域；传感器状态，包括从设备的各个传感器和输入控制设备116获取的信息；以及关于设备的位置和/或姿态的位置信息。
操作系统126(例如，Darwin、RTXC、LINUX、UNIX、OS X、iOS、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如，存储器管理、存储设备控制、功率管理等)的各种软件部件和/或驱动程序，并且促进各种硬件部件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信，并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件组件。外部端口124(例如，通用串行总线(USB)、火线等)适于直接耦接到其他设备，或间接地通过网络(例如，互联网、无线LAN等)进行耦接。在一些实施方案中，该外部端口为与
Figure BDA0002602782570000451
(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如，30针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如，触控板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与接触的检测相关的各种操作，诸如确定是否已发生接触(例如，检测手指按下事件)、确定接触的强度(例如，接触的力或压力，或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪在触敏表面上的移动(例如，检测一个或多个手指拖动事件)、以及确定接触是否已停止(例如，检测手指抬起事件或接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变)，接触点的移动由一系列接触数据来表示。这些操作任选地被应用于单点接触(例如，单指接触)或者多点同时接触(例如，“多点触摸”/多个手指接触)。在一些实施方案中，接触/运动模块130和显示控制器156检测触摸板上的接触。
在一些实施方案中，接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如，确定用户是否已“点击”图标)。在一些实施方案中，根据软件参数来确定强度阈值的至少一个子集(例如，强度阈值不由特定物理致动器的激活阈值来确定，并且可在不改变设备100的物理硬件的情况下调整)。例如，在不改变触控板或触摸屏显示器硬件的情况下，触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义的阈值的大范围中的任一个阈值。另外，在一些具体实施中，向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如，通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触图案(例如，所检测到的接触的不同运动、定时和/或强度)。因此，任选地通过检测特定的接触模式来检测手势。例如，检测手指轻击手势包括检测手指按下事件，然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如，在图标的位置处)检测手指抬起(抬离)事件。作为另一个示例，在触敏表面上检测手指轻扫手势包括检测手指按下事件，然后检测一个或多个手指拖动事件，并且随后检测手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知的软件部件，包括用于改变所显示的图形的视觉冲击(例如，亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用，术语“图形”包括可被显示给用户的任何对象，其非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中，图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码，在必要的情况下还一起接收坐标数据和其他图形属性数据，并且然后生成屏幕图像数据，以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件组件，该指令由触觉输出发生器167使用，以响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如，联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置，并提供该信息以供在各种应用程序中使用(例如，提供给电话138以供在基于位置的拨号中使用；提供给相机143作为图片/视频元数据；以及提供给提供基于位置的服务的应用，诸如天气桌面小程序、本地黄页桌面小程序和地图/导航桌面小程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集：
·联系人模块137(有时称作通讯录或联系人列表)；
·电话模块138；
·视频会议模块139；
·电子邮件客户端模块140；
·即时消息(IM)模块141；
·健身支持模块142；
·用于静态图像和/或视频图像的相机模块143；
·图像管理模块144；
·视频播放器模块；
·音乐播放器模块；
·浏览器模块147；
·日历模块148；
·桌面小程序模块149，其任选地包括以下各项中的一者或多者：天气桌面小程序149-1、股票桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5和由用户获得的其他桌面小程序，以及用户创建的桌面小程序149-6；
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150；
·搜索模块151；
·视频和音乐播放器模块152，其合并了视频播放器模块和音乐播放器模块；
·记事本模块153；
·地图模块154；和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、和文本输入模块134，联系人模块137任选地用于管理通讯录或联系人列表(例如，存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中)，包括：向通讯录添加一个或多个姓名；从通讯录删除姓名；将电话号码、电子邮件地址、物理地址或其他信息与姓名关联；将图像与姓名进行关联；对姓名进行归类和分类；提供电话号码或电子邮件地址来发起和/或促进通过电话138、视频会议模块139、电子邮件140或即时消息141的通信；等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，电话模块138任选地用于输入与电话号码对应的字符序列、访问联系人模块137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话，以及当会话完成时断开或挂断。如上所述，无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132、文本输入模块134、联系人模块137和电话模块138，视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与者之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，电子邮件客户端模块140包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144，电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，即时消息模块141包括用于以下操作的可执行指令：输入对应于即时消息的字符序列、修改先前输入的字符、传输相应的即时消息(例如，使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息，或者使用XMPP、SIMPLE或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施方案中，所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用，“即时消息”是指基于电话的消息(例如，使用SMS或MMS发送的消息)和基于互联网的消息(例如，使用XMPP、SIMPLE、或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块，健身支持模块142包括创建健身(例如，具有时间、距离和/或卡路里燃烧目标)的可执行指令；与健身传感器(运动设备)进行通信；接收健身传感器数据；校准用于监视健身的传感器；为健身选择和播放音乐；以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132和图像管理模块144，相机模块143包括用于以下操作的可执行指令：捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征或从存储器102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和相机模块143，图像管理模块144包括用于排列、修改(例如，编辑)或以其他方式操控、加标签、删除、演示(例如，在数字幻灯片或相册中)以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，浏览器模块147包括根据用户指令来浏览互联网(包括搜索、链接至、接收和显示网页或其部分，以及链接至网页的附件和其他文件)的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147，日历模块148包括根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如，日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序模块149是任选地由用户下载和使用的微型应用(例如，天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)或由用户创建的微型应用(例如，用户创建的桌面小程序149-6)。在一些实施方案中，桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中，桌面小程序包括XML(可扩展标记语言)文件和、JavaScript文件(例如，Yahoo！桌面小程序)。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序创建器模块150任选地被用户用于创建桌面小程序(例如，将网页的用户指定部分转到桌面小程序中)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，搜索模块151包括根据用户指令来搜索存储器102中的匹配一个或多个搜索条件(例如，一个或多个用户指定的搜索词)的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147，视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令，以及用于显示、呈现或以其他方式回放视频(例如，在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中，设备100任选地包括MP3播放器，诸如iPod(Apple Inc.的商标)的功能。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，记事本模块153包括根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147，地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及与地图相关联的数据(例如，驾驶方向、与特定位置处或附近的商店及其他兴趣点有关的数据，以及其他基于位置的数据)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147，在线视频模块155包括用于进行以下操作的指令：允许用户访问、浏览、接收(例如，通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件，以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中，使用即时消息模块141而不是电子邮件客户端模块140来发送至特定在线视频的链接。在线视频应用的附加描述可在2007年6月20日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interface forPlaying Online Videos”的美国临时专利申请60/936,562，以及2007年12月31日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interface forPlaying Online Videos”的美国专利申请11/968,067中找到，这两个专利申请的内容据此全文以引用方式并入本文。
上述模块和应用中的每个模块和应用对应于用于执行上述一种或多种功能以及在该专利申请中所述的方法(例如，本文所述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(例如，指令集)不必以独立的软件程序、过程或模块实现，并因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。例如，视频播放器模块任选地与音乐播放器模块组合成单个模块(例如，图1A中的视频和音乐播放器模块152)。在一些实施方案中，存储器102任选地存储上述模块和数据结构的子集。此外，存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施方案中，设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备，任选地减少设备100上的物理输入控制设备(例如，下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触控板执行的该组预定义功能任选地包括在用户界面之间进行导航。在一些实施方案中，该触摸板在被用户触摸时将设备100从被显示在设备100上的任何用户界面导航到主菜单、home菜单、或根菜单。在此类实施方案中，使用触摸板来实现“菜单按钮”。在一些其他实施方案中，该菜单按钮为物理下压按钮或者其他物理输入控制设备，而不是触摸板。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中，存储器102(图1A)或存储器370(图3)包括事件分类器170(例如，在操作系统126中)以及相应的应用程序136-1(例如，前述应用程序137至151、155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中，应用程序136-1包括应用程序内部状态192，该应用程序内部状态指示当应用程序为活动的或正在执行时被显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施方案中，设备/全局内部状态157被事件分类器170用于确定哪个(哪些)应用程序当前为活动的，并且应用程序内部状态192被事件分类器170用于确定要将事件信息递送到的应用程序视图191。
在一些实施方案中，应用程序内部状态192包括另外的信息，诸如以下各项中的一者或多者：当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被应用程序136-1显示或准备好用于被该应用程序显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的先前状态或视图的状态队列、以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如，作为多点触摸手势部分的触敏显示器112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施方案中，事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应，外围设备接口118传输事件信息。在其他实施方案中，外围设备接口118仅当存在显著事件(例如，接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中，事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时，命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户可在显示器上看到的控件和其他元件构成。
与应用程序相关联的用户界面的另一方面是一组视图，在本文中有时也被称为应用程序视图或用户界面窗口，在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如，在其中检测到触摸的最低水平视图任选地被称为命中视图，并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定，所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有在分级结构中组织的多个视图时，命中视图确定模块172将命中视图识别为应对子事件进行处理的分级结构中的最低视图。在大多数情况下，命中视图是发起子事件(例如，形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块172识别，命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中，活动事件识别器确定模块173确定仅命中视图才应接收特定子事件序列。在其他实施方案中，活动事件识别器确定模块173确定包括子事件的物理位置的所有视图均为活跃参与的视图，并且因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中，即使触摸子事件完全被局限到与一个特定视图相关联的区域，但在分级结构中较高的视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如，事件识别器180)。在包括活动事件识别器确定模块173的实施方案中，事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中，事件分配器模块174在事件队列中存储事件信息，该事件信息由相应事件接收器182进行检索。
在一些实施方案中，操作系统126包括事件分类器170。另选地，应用程序136-1包括事件分类器170。在另外实施方案中，事件分类器170为独立模块，或者为被存储在存储器102中的另一个模块(诸如接触/运动模块130)的一部分。
在一些实施方案中，应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191，其中每个应用程序视图包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常，相应应用程序视图191包括多个事件识别器180。在其他实施方案中，事件识别器180中的一个或多个事件识别器为独立模块的一部分，该独立模块诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的更高水平的对象。在一些实施方案中，相应事件处理程序190包括以下各项中的一者或多者：数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用内部状态192。另选地，应用视图191中的一个或多个应用视图包括一个或多个相应事件处理程序190。另外，在一些实施方案中，数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如，事件数据179)，并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中，事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。该事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件，事件信息还包括附加信息，诸如子事件的位置。当子事件涉及触摸的运动时，事件信息任选地还包括子事件的速率和方向。在一些实施方案中，事件包括设备从一个取向旋转到另一取向(例如，从纵向取向到横向取向，或反之亦然)的旋转，并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较，并且基于该比较来确定事件或子事件，或者确定或更新事件或子事件的状态。在一些实施方案中，事件比较器184包括事件定义186。事件定义186包含事件的定义(例如，预定义的子事件序列)，例如事件1(187-1)、事件2(187-2)、以及其他事件。在一些实施方案中，事件(187)中的子事件包括例如触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中，事件1(187-1)的定义是被显示对象上的双击。例如，双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬离(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)、以及预先确定时长的第二次抬离(触摸结束)。在另一个示例中，事件2(187-2)的定义是被显示对象上的拖动。例如，拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器112上的移动以及触摸的抬离(触摸结束)。在一些实施方案中，事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中，事件定义187包括用于相应用户界面对象的事件的定义。在一些实施方案中，事件比较器184执行命中Test，以确定哪个用户界面对象与子事件相关联。例如，在触摸显示器112上显示三个用户界面对象的应用视图中，当在触敏显示器112上检测到触摸时，事件比较器184执行命中测试，以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联，则事件比较器使用该命中Test的结果来确定哪个事件处理程序190应当被激活。例如，事件比较器184选择与子事件和触发该命中Test的对象相关联的事件处理程序。
在一些实施方案中，相应事件187的定义还包括延迟动作，该延迟动作延迟事件信息的递送，直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时，该相应事件识别器180进入事件不可能、事件失败或事件结束状态，在此之后忽略基于触摸的手势的后续子事件。在这种情况下，对于命中视图保持活动的其它事件识别器(如果有的话)继续跟踪和处理正在进行的基于触摸的手势的子事件。
在一些实施方案中，相应事件识别器180包括具有指示事件递送系统应该如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中，元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标记和/或列表。在一些实施方案中，元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中，当事件的一个或多个特定子事件被识别时，相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中，相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中，事件识别器180抛出与所识别的事件相关联的标志，并且与该标志相关联的事件处理程序190接获该标志并执行预定义的过程。
在一些实施方案中，事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反，子事件递送指令将事件信息递送到与子事件系列相关联的事件处理程序或递送到活跃参与的视图。与子事件系列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中，数据更新器176创建并更新在应用程序136-1中使用的数据。例如，数据更新器176对联系人模块137中所使用的电话号码进行更新，或者对视频播放器模块中所使用的视频文件进行存储。在一些实施方案中，对象更新器177创建和更新在应用程序136-1中使用的对象。例如，对象更新器177创建新用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如，GUI更新器178准备显示信息并且将显示信息发送到图形模块132，以用于显示在触敏显示器上。
在一些实施方案中，事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178，或具有对该数据更新器、该对象更新器和该GUI更新器的访问权限。在一些实施方案中，数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施方案中，它们被包括在两个或更多个软件模块中。
应当理解，关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入，并不是所有用户输入都是在触摸屏上发起的。例如，任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下；触摸板上的接触移动，诸如轻击、拖动、滚动等；触笔输入；设备的移动；口头指令；检测到的眼睛移动；生物特征输入；和/或它们的任何组合任选地被用作对应于限定要识别的事件的子事件的输入。
图2示出了根据一些实施方案的具有触摸屏112的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施方案中以及在下文描述的其他实施方案中，用户能够通过例如利用一个或多个手指202(在附图中没有按比例绘制)或者利用一支或多支触笔203(在附图中没有按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中，当用户中断与一个或多个图形的接触时，将发生对一个或多个图形的选择。在一些实施方案中，手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下，不经意地与图形接触不会选择图形。例如，当与选择对应的手势为轻击时，在应用程序图标上方扫动的轻扫手势任选地不会选择对应应用程序。
设备100任选地还包括一个或多个物理按钮，诸如“home”或菜单按钮204。如前所述，菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用中的任何应用136。另选地，在一些实施方案中，菜单按钮被实现为显示在触摸屏112上的GUI中的软键。
在一些实施方案中，设备100包括触摸屏112、菜单按钮204、用于使设备开机/关机和用于锁定设备的下压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机；通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备；和/或对设备进行解锁或发起解锁过程。在另选的实施方案中，设备100还通过麦克风113来接受用于激活或去激活一些功能的言语输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165，和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必为便携式的。在一些实施方案中，设备300为膝上型计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统、或控制设备(例如，家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于使这些部件互连的一条或多条通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时被叫做芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330，该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如，类似于以上参考图1A所述的触觉输出发生器167)、传感器359(例如，光学传感器、加速度传感器、接近传感器、触敏传感器和/或接触强度传感器(类似于以上参考图1A所述的接触强度传感器165))。存储器370包括高速随机存取存储器，诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备；并且任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、光盘存储设备、闪存设备、或其它非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施方案中，存储器370存储与便携式多功能设备100(图1A)的存储器102中存储的程序、模块和数据结构类似的程序、模块和数据结构或它们的子集。此外，存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块、和数据结构。例如，设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388和/或电子表格模块390，而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中的上述元素中的每个元素任选地存储于先前提到的存储器设备的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的指令集。上述模块或程序(例如，指令集)不必被实现为单独的软件程序、过程或模块，并且因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中，存储器370任选地存储上述模块和数据结构的子组。此外，存储器370任选地存储上面未描述的另外的模块和数据结构。
现在将注意力转到任选地在例如便携式多功能设备100上实现的用户界面的实施方案。
图4A示出了根据一些实施方案的用于便携式多功能设备100上的应用程序的菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中，用户界面400包括以下元件或者其子集或超集：
·一种或多种无线通信(例如，蜂窝信号和Wi-Fi信号)的一个或多个信号强度指示符402；
·时间404；
·蓝牙指示符405；
·电池状态指示符406；
·具有常用应用程序图标的托盘408，图标诸如：
ο电话模块138的标记“电话”的图标416，该图标416任选地包括未接来电或语音留言的数量的指示符414；
ο电子邮件客户端模块140的标记“邮件”的图标418，该图标418任选地包括未读电子邮件的数量的指示符410；
ο浏览器模块147的标记为“浏览器”的图标420；以及
ο视频和音乐播放器模块152(也称为iPod(Apple Inc.的商标)模块152)的标记为“iPod”的图标422；以及
·其他应用程序的图标，诸如：
οIM模块141的标记为“消息”的图标424；
ο日历模块148的标记为“日历”的图标426；
ο图像管理模块144的标记为“照片”的图标428；
ο相机模块143的标记为“相机”的图标430；
ο在线视频模块155的标记为“在线视频”的图标432；
ο股市桌面小程序149-2的标记为“股市”的图标434；
ο地图模块154的标记为“地图”的图标436；
ο天气桌面小程序149-1的标记为“天气”的图标438；
ο闹钟桌面小程序149-4的标记为“时钟”的图标440；
ο健身支持模块142的标记为“健身支持”的图标442；
ο记事本模块153的标记为“记事本”的图标444；以及
ο设置应用程序或模块的标记为“设置”的图标446，该图标提供对设备100及其各种应用程序136的设置的访问。
需注意，图4A中示出的图标标签仅是示例性的。例如，视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。其他标签任选地用于各种应用程序图标。在一些实施方案中，相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中，特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450(例如，触摸屏显示器112)分开的触敏表面451(例如，图3的平板电脑或触控板355)的设备(例如，图3的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如，传感器359中的一个或多个传感器)和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器357。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出以下示例中的一些示例，但是在一些实施方案中，设备检测与显示器分开的触敏表面上的输入，如图4B中所示。在一些实施方案中，触敏表面(例如，图4B中的451)具有与显示器(例如，450)上的主轴(例如，图4B中的453)对应的主轴(例如，图4B中的452)。根据这些实施方案，设备检测在与显示器上的相应位置对应的位置(例如，在图4B中，460对应于468并且462对应于470)处的与触敏表面451的接触(例如，图4B中的460和462)。这样，在触敏表面(例如，图4B中的451)与多功能设备的显示器(图4B中的450)分开时，由设备在触敏表面上检测到的用户输入(例如，接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解，类似的方法任选地用于本文所述的其他用户界面。
另外，虽然主要是参考手指输入(例如，手指接触、单指轻击手势、手指轻扫手势)来给出下面的示例，但是应当理解，在一些实施方案中，这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如，基于鼠标的输入或触笔输入)替代。例如，轻扫手势任选地由鼠标点击(例如，而不是接触)，之后是光标沿轻扫的路径的移动(例如，而不是接触的移动)来代替。又如，轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如，而不是对接触的检测，以及之后的停止检测接触)来代替。类似地，当同时检测到多个用户输入时，应当理解的是，多个计算机鼠标任选地被同时使用，或鼠标和手指接触任选地被同时使用。
图5A示出了示例性个人电子设备500。设备500包括主体502。在一些实施方案中，设备500可包括相对于设备100和300(例如，图1A-图4B)所述的特征中的一些或全部特征。在一些实施方案中，设备500具有在下文中称为触摸屏504的触敏显示屏504。另选地或作为触摸屏504的补充，设备500还具有显示器和触敏表面。与设备100和300的情况一样，在一些实施方案中，触摸屏504(或触敏表面)任选地包括用于检测所施加的接触(例如，触摸)强度的一个或多个强度传感器。触摸屏504(或触敏表面)的一个或多个强度传感器可提供表示触摸的强度的输出数据。设备500的用户界面可基于其强度来对触摸作出响应，这意味着不同强度的触摸可调用设备500上的不同用户界面操作。
用于检测和处理触摸强度的示例性技术见于例如以下相关专利申请中：2013年5月8日提交的名称为“Device,Method,and Graphical User Interface for DisplayingUser Interface Objects Corresponding to an Application”的国际专利申请序列号PCT/US2013/040061，发布为WIPO专利公开号WO/2013/169849；以及2013年11月11日提交的名称为“Device,Method,and Graphical User Interface for Transitioning BetweenTouch Input to Display Output Relationships”的国际专利申请序列号PCT/US2013/069483，发布为WIPO专利公开号WO/2014/105276，该每个专利申请据此全文以引用方式并入。
在一些实施方案中，设备500具有一个或多个输入机构506和508。输入机构506和输入机构508(如果包括的话)可以是物理形式的。物理输入机构的示例包括下压按钮和可旋转机构。在一些实施方案中，设备500具有一个或多个附接机构。此类附接机构(如果包括的话)可允许将设备500与例如帽子、眼镜、耳环、项链、衬衣、夹克、手镯、表带、手链、裤子、皮带、鞋子、钱包、背包等附接。这些附接机构允许设备500被用户穿戴。
图5B示出了示例性个人电子设备500。在一些实施方案中，设备500可包括相对于图1A、图1B和图3所述的部件中的一些或全部部件。设备500具有将I/O部分514与一个或多个计算机处理器516和存储器518操作性地耦接的总线512。I/O部分514可连接到显示器504，该显示器可具有触敏部件522并且任选地具有强度传感器524(例如，接触强度传感器)。此外，I/O部分514可与通信单元530连接，用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用程序和操作系统数据。设备500可包括输入机构506和/或508。例如，输入机构506任选地是可旋转输入设备或者可按压输入设备以及可旋转输入设备。在一些示例中，输入机构508任选地是按钮。
在一些示例中，输入机构508任选地是麦克风。个人电子设备500任选地包括各种传感器，诸如GPS传感器532、加速度计534、定向传感器540(例如，罗盘)、陀螺仪536、运动传感器538和/或其组合，所有这些设备均可操作性连接到I/O部分514。
个人电子设备500的存储器518可包括用于存储计算机可执行指令的一个或多个非暂态计算机可读存储介质，该可执行指令当由一个或多个计算机处理器516执行时例如可使得计算机处理器执行下述技术，包括过程700(图7)、过程900(图9)、过程1100(图11)、过程1300(图13)、过程1500(图15)、过程1700(图17)、过程1800(图18)、过程2000(图20)、过程2200(图22)、过程2400(图24)、过程2600(图26)、过程2800(图28)、过程3000(图30)、过程3200(图32)、过程3400(图34)、过程3600(图36)和过程3800(图38)。计算机可读存储介质可以是可有形地包含或存储计算机可执行指令以供指令执行系统、装置和设备使用或与其结合的任何介质。在一些示例中，存储介质是暂态计算机可读存储介质。在一些示例中，存储介质是非暂态计算机可读存储介质。非暂态计算机可读存储介质可包括但不限于磁存储装置、光学存储装置、和/或半导体存储装置。此类存储装置的示例包括磁盘、基于CD、DVD或蓝光技术的光盘、以及持久性固态存储器诸如闪存、固态驱动器等。个人电子设备500不限于图5B的部件和配置，而是可包括多种配置的其他部件或附加部件。
如本文所用，术语“示能表示”是指任选地在设备100、300和/或500(图1A、图3和图5A-图5B)的显示屏上显示的用户交互式图形用户界面对象。例如，图像(例如，图标)、按钮和文本(例如，超链接)任选地各自构成示能表示。
如本文所用，术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元素。在包括光标或其他位置标记的一些具体实施中，光标充当“焦点选择器”，使得当光标在特定用户界面元素(例如，按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如，图3中的触摸板355或图4B中的触敏表面451)上检测到输入(例如，按压输入)的情况下，该特定用户界面元素根据所检测到的输入而被调节。在包括能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如，图1A中的触敏显示系统112或图4A中的触摸屏112)的一些具体实施中，触摸屏上所检测到的接触充当“焦点选择器”，使得当在触摸屏显示器上在特定用户界面元素(例如，按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如，由接触进行的按压输入)时，该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中，焦点从用户界面的一个区域移动到用户界面的另一个区域，而无需光标的对应移动或触摸屏显示器上的接触的移动(例如，通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮)；在这些具体实施中，焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式，焦点选择器通常是由用户控制的以便递送与用户界面的用户预期的交互(例如，通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如，在触敏表面(例如，触控板或触摸屏)上检测到按压输入时，焦点选择器(例如，光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备的显示器上示出的其他用户界面元素)。
如说明书和权利要求书中所使用的，接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中，特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如，在检测到接触之后，在检测到接触抬起之前，在检测到接触开始移动之前或之后，在检测到接触结束之前，在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如，0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采样的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者：接触的强度的最大值、接触的强度的均值、接触的强度的平均值、接触的强度的前10％处的值、接触的强度的半最大值、接触的强度的90％最大值等。在一些实施方案中，在确定特征强度时使用接触的持续时间(例如，在特征强度为接触的强度在时间上的平均值时)。在一些实施方案中，将特征强度与一组一个或多个强度阈值进行比较，以确定用户是否已执行操作。例如，该组一个或多个强度阈值任选地包括第一强度阈值和第二强度阈值。在该示例中，特征强度未超过第一阈值的接触导致第一操作，特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作，并且特征强度超过第二阈值的接触导致第三操作。在一些实施方案中，使用特征强度与一个或多个阈值之间的比较来确定是否要执行一个或多个操作(例如，是执行相应操作还是放弃执行相应操作)而不是用于确定执行第一操作还是第二操作。
图5C示出了利用多个强度传感器524A-524D检测触敏显示屏504上的多个接触552A-552E。图5C还包括强度图，其相对于强度单位示出了强度传感器524A-524D的当前强度测量值。在该示例中，强度传感器524A和524D的强度测量值均是9个强度单位，并且强度传感器524B和524C的强度测量值均是7个强度单位。在一些具体实施中，累积强度是多个强度传感器524A-524D的强度测量值之和，在该示例中是32个强度单位。在一些实施方案中，每个接触都被分配了相应强度，即累积强度的一部分。图5D示出了基于其与力554中心的距离而向接触552A-552E分配累积强度。在该示例中，接触552A、552B和552E中的每个接触都被分配以累积强度的8个强度单位的接触的强度，并且接触552C和552D的中每个接触都被分配以累积强度的4个强度单位的接触的强度。更一般地讲，在一些具体实施中，每个接触j都根据预定义的数学函数Ij＝A·(Dj/ΣDi)被分配相应强度Ij，其为累积强度A的一部分，其中Dj是相应接触j距力中心的距离，并且ΣDi是所有相应接触(例如，i＝1到最后)距力中心的距离之和。可以利用类似于或等同于设备100、300或500的电子设备执行参考图5C-图5D所述的操作。在一些实施方案中，接触的特征强度基于接触的一个或多个强度。在一些实施方案中，强度传感器用于确定单个特征强度(例如，单个接触的单个特征强度)。应当指出，强度图不是所显示用户界面的部分，而是包括在图5C-图5D中以帮助读者。
在一些实施方案中，识别手势的一部分以用于确定特征强度。例如，触敏表面任选地接收连续的轻扫接触，该连续的轻扫接触从起始位置过渡并到达结束位置，在该结束位置处，接触强度增加。在该示例中，接触在结束位置处的特征强度任选地仅基于连续轻扫接触的一部分，而不是整个轻扫接触(例如，仅结束位置处的轻扫接触的部分)。在一些实施方案中，在确定接触的特征强度之前任选地向轻扫接触的强度应用平滑化算法。例如，该平滑化算法任选地包括以下各项中的一者或多者：不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法、和/或指数平滑化算法。在一些情况下，这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷，以用于确定特征强度。
任选地相对于一个或多个强度阈值诸如接触检测强度阈值、轻按压强度阈值、深按压强度阈值和/或一个或多个其他强度阈值来表征触敏表面上的接触强度。在一些实施方案中，轻按压强度阈值对应于这样的强度：在该强度下，设备将执行通常与点击物理鼠标或触控板的按钮相关联的操作。在一些实施方案中，深按压强度阈值对应于这样的强度：在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中，当检测到特征强度低于轻按压强度阈值(例如，并且高于标称接触检测强度阈值，比该标称接触检测强度阈值低的接触不再被检测到)的接触时，设备将根据接触在触敏表面上的移动来移动焦点选择器，而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲，除非另有陈述，否则这些强度阈值在不同组的用户界面附图之间为一致的。
接触的特征强度从低于轻按压强度阈值的强度增大到介于轻按压强度阈值与深按压强度阈值之间的强度有时被称为“轻按压”输入。接触特征强度从低于深按压强度阈值的强度增大到高于深按压强度阈值的强度有时被称为“深按压”输入。接触的特征强度从低于接触检测强度阈值的强度增大到介于接触检测强度阈值与轻按压强度阈值之间的强度有时被称为检测到触摸表面上的接触。接触的特征强度从高于接触检测强度阈值的强度减小到低于接触检测强度阈值的强度有时被称为检测到接触从触摸表面抬离。在一些实施方案中，接触检测强度阈值为零。在一些实施方案中，接触检测强度阈值大于零。
在本文中所述的一些实施方案中，响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)执行的相应按压输入来执行一个或多个操作，其中至少部分地基于检测到该接触(或多个接触)的强度增大到高于按压输入强度阈值而检测到相应按压输入。在一些实施方案中，响应于检测到相应接触强度增大到高于按压输入强度阈值(例如，相应按压输入的“向下冲程”)而执行相应操作。在一些实施方案中，按压输入包括相应接触强度增大到高于按压输入强度阈值以及该接触强度随后减小到低于按压输入强度阈值，并且响应于检测到相应接触强度随后减小到低于按压输入阈值(例如，相应按压输入的“向上冲程”)而执行相应操作。
图5E-图5H示出了对手势的检测，手势包括与接触562的强度从低于图5E中的轻按压强度阈值(例如，“ITL”)的强度增大到高于图5H中的深按压强度阈值(例如，“ITD”)的强度对应的按压输入。在所显示的包括预定义区域574中显示的应用图标572A-572D的用户界面570上，在与应用2对应的应用图标572B上方显示光标576的同时，在触敏表面560上检测利用接触562执行的手势。在一些实施方案中，在触敏显示器504上检测手势。强度传感器检测触敏表面560上的接触的强度。该设备确定，接触562的强度在深按压强度阈值(例如，“ITD”)以上达到峰值。在触敏表面560上保持接触562。响应于检测到手势，并且根据在手势期间强度升高到深按压强度阈值(例如，“ITD”)以上的接触562，显示最近为应用2打开的文档的尺度减小的表示578A-578C(例如，缩略图)，如图5F-图5H所示。在一些实施方案中，与一个或多个强度阈值相比，强度是接触的特征强度。应当指出，针对接触562的强度图不是所显示用户界面的部分，而是包括在图5E-图5H中以帮助读者。
在一些实施方案中，表示578A-578C的显示包括动画。例如，表示578A一开始显示于应用图标572B的附近，如图5F所示。随着动画的进行，表示578A向上移动，并在应用图标572B附近显示表示578B，如图5G中所示。然后，表示578A向上移动，578B向着表示578A向上移动，并且在应用图标572B附近显示表示578C，如图5H中所示。表示578A-578C形成图标572B上方的阵列。在一些实施方案中，动画根据接触562的强度进展，如图5F-图5G中所示，其中表示578A-578C出现并随着接触562的强度向深按压强度阈值(例如，“ITD”)增大而向上移动。在一些实施方案中，动画进展所依据的强度是接触的特征强度。可以利用类似于或等同于设备100、300或500的电子设备执行参考图5E-图5H所述的操作。
在一些实施方案中，设备采用强度滞后以避免有时称为“抖动”的意外输入，其中该设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如，滞后强度阈值比按压输入强度阈值小X个强度单位，或滞后强度阈值是按压输入强度阈值的75％、90％或某些合理的比例)。因此，在一些实施方案中，按压输入包括相应接触强度增大到高于按压输入强度阈值以及该接触强度随后减小到低于与按压输入强度阈值对应的滞后强度阈值，并且响应于检测到相应接触强度随后减小到低于滞后强度阈值(例如，相应按压输入的“向上冲程”)而执行相应操作。类似地，在一些实施方案中，仅在设备检测到接触的强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触的强度随后减小到等于或低于滞后强度的强度时才检测到按压输入，并且响应于检测到按压输入(例如，根据环境，接触的强度增大或接触的强度减小)来执行相应操作。
为了容易解释，任选地，响应于检测到以下各种情况中的任一种情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述：接触强度增大到高于按压输入强度阈值、接触强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触强度减小到低于按压输入强度阈值、和/或接触强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外，在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例中，任选地响应于检测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。
图5I示出了示例性电子设备580。设备580包括主体580A。在一些实施方案中，设备580可包括相对于设备100、300和500(例如，图1A-图5B)所述的特征中的一些或全部特征。在一些实施方案中，设备580具有一个或多个扬声器580B(隐藏在主体580A中)、一个或多个麦克风580C、一个或多个触敏表面580D以及一个或多个显示器580E。另选地或作为显示器和触敏表面580D的补充，该设备还具有触敏显示器(也被称为触摸屏)。与设备100、300和500的情况一样，在一些实施方案中，触敏表面580D(或触摸屏)任选地包括用于检测所施加的接触(例如，触摸)的强度的一个或多个强度传感器。触敏表面580D(或触摸屏)的所述一个或多个强度传感器可提供表示触摸的强度的输出数据。设备580的用户界面可基于其强度来对触摸作出响应，这意味着不同强度的触摸可调用设备580上的不同用户界面操作。在一些实施方案中，所述一个或多个显示器580E是一个或多个发光二极管(LED)。例如，显示器可以是单个LED、LED群集(例如，红色、绿色和蓝色的LED)、多个分立LED、多个分立LED群集或一个或多个LED的其他布置。例如，显示器580E可以是以圆形(例如，环形)布置的九个分立LED群集的阵列。在一些示例中，所述一个或多个显示器包含一个或多个另一种类型的发光元件。
图5J描绘了示例性个人电子设备580。在一些实施方案中，设备580可包括相对于图1A、图1B、图3和图5A-图5B所述的部件中的一些或全部部件。设备580具有将I/O部分594与一个或多个计算机处理器596和存储器598操作性地耦接的总线592。I/O部分594可连接到显示器582，该显示器可具有触敏部件584并且任选地具有强度传感器585(例如，接触强度传感器)。在一些实施方案中，触敏部件584是与显示器582分离的部件。此外，I/O部分594可与通信单元590连接，用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用程序和操作系统数据。设备580可包括输入机构588。在一些示例中，输入机构588任选地是按钮。在一些示例中，输入机构588任选地是麦克风。输入机构588任选地是多个麦克风(例如，麦克风阵列)。
电子设备580包括用于输出音频的扬声器586。设备580可包括音频电路(例如，在I/O部分594中)，该音频电路接收音频数据、将音频数据转换为电信号，并且将电信号传输给扬声器586。扬声器586将该电信号转换为人类可听见的声波。该音频电路(例如，在I/O部分594中)还接收由麦克风(例如，输入机构588)从声波转换的电信号。该音频电路(例如，在I/O部分594中)将该电信号转换为音频数据。音频数据任选地由I/O部分594检索自和/或传输至存储器598和/或RF电路(例如，在通信单元590中)。
个人电子设备580的存储器598可包括用于存储计算机可执行指令的一个或多个非暂态计算机可读存储介质，该可执行指令当由一个或多个计算机处理器596执行时例如可使得计算机处理器执行下述技术，包括过程700(图7)、过程900(图9)、过程1100(图11)、过程1300(图13)、过程1500(图15)、过程1700(图17)、过程1800(图18)、过程2000(图20)、过程2200(图22)、过程2400(图24)、过程2600(图26)、过程2800(图28)、过程3000(图30)、过程3200(图32)、过程3400(图34)、过程3600(图36)和过程3800(图38)。计算机可读存储介质可以是可有形地包含或存储计算机可执行指令以供指令执行系统、装置和设备使用或与其结合的任何介质。在一些示例中，存储介质是暂态计算机可读存储介质。在一些示例中，存储介质是非暂态计算机可读存储介质。非暂态计算机可读存储介质可包括但不限于磁存储装置、光学存储装置、和/或半导体存储装置。此类存储装置的示例包括磁盘、基于CD、DVD或蓝光技术的光盘、以及持久性固态存储器诸如闪存、固态驱动器等。个人电子设备580不限于图5J的部件和配置，而是可包括多种配置的其他部件或附加部件。
如本文所用，“已安装的应用程序”是指已下载到电子设备(例如，设备100、300和/或500)上并准备好在设备上启动(例如，变为打开)的软件应用程序。在一些实施方案中，下载的应用程序利用安装程序而变为已安装的应用程序，已安装的应用程序从下载的软件包提取程序部分并将提取的部分与计算机系统的操作系统集成。
如本文所用，术语“打开的应用程序”或“执行中的应用程序”是指具有保持状态信息(例如，作为设备/全局内部状态157和/或应用程序内部状态192的一部分)的软件应用程序。打开的或执行中的应用程序是任选地以下类型的应用程序中的任一者：
·活动应用程序，其当前显示在正使用该应用程序的设备的显示屏上；
·后台应用程序(或后台进程)，其当前未显示但该应用程序的一个或多个进程正由一个或多个处理器处理；以及
·暂停或休眠的应用程序，其没有运行但具有存储在存储器(分别有易失性和非易失性的)中并可用于恢复该应用程序的执行的状态信息。
如本文所用，术语“关闭的应用程序”是指不具有保持状态信息的软件应用程序(例如，关闭的应用程序的状态信息不被存储在设备的存储器中)。因此，关闭应用程序包括停止和/或移除应用程序的应用程序过程以及从设备的存储器移除应用程序的状态信息。一般来讲，当在第一应用程序中时，打开第二应用程序并不关闭第一应用程序。在显示第二应用程序并且第一应用程序停止被显示时，第一应用程序变为后台应用程序。
本文自始至终参考与数字助理(也另被称为“语音助理”或“个人数字助理”)相关的功能、操作和特征。数字助理可指解译语音形式和/或文本形式的自然语言输入以推断用户意图并且基于推断出的用户意图来执行动作的任何信息处理系统。例如，为了遵循所推断的用户意图，系统可执行以下中的一者或多者：标识具有被设计用于实现所推断的用户意图的步骤和参数的任务流，将来自所推断的用户意图的特定要求输入到任务流中；通过调用程序、方法、服务、API等执行任务流；以及以可听(例如，语音)和/或可视形式来生成对用户的输出响应。
具体地，数字助理可能够接受至少部分地为自然语言命令、请求、声明、讲述和/或询问的形式的用户请求。通常，用户请求可寻求数字助理作出信息性回答，或寻求数字助理执行任务。针对用户请求的令人满意的响应可以是提供所请求的信息性回答、执行所请求的任务，或这两者的组合。例如，用户可向数字助理提出问题，诸如“我现在在哪里？”基于用户的当前位置，数字助理可回答“您在中央公园西门附近。”用户还可请求执行任务，例如“请邀请我的朋友下周来参加我女朋友的生日聚会。”作为响应，数字助理可通过讲出“好的，马上”来确认请求，并然后代表用户将合适的日历邀请发送至用户的电子通讯录中列出的用户朋友中的每个朋友。在执行所请求的任务期间，数字助理有时可在很长时间段内在涉及多次信息交换的持续对话中与用户进行交互。存在与数字助理进行交互以请求信息或执行各种任务的许多其他方法。除提供言语响应并采取经编程的动作之外，数字助理还可提供其他视觉形式或音频形式的响应，例如作为文本、警报、音乐、视频、动画等。
在一些示例中，可根据客户端-服务器模型(例如，示例性“数字助理系统”)来实现数字助理。数字助理可包括在用户设备(例如，设备100、300、500或580)上执行的客户端侧部分(下文称为“DA客户端”)和在服务器系统上(例如，远离用户设备)执行的服务器侧部分(下文称为“DA服务器”)。DA客户端可通过一个或多个网络与DA服务器进行通信。DA客户端可提供客户端侧功能，诸如面向用户的输入和输出处理，以及与DA服务器进行通信。DA服务器可为各自位于相应用户设备上的任意数量的DA客户端提供服务器侧功能。
在一些示例中，DA服务器可包括面向客户端的I/O接口、一个或多个处理模块、数据和模型以及至外部服务的I/O接口。面向客户端的I/O接口可有利于DA服务器执行面向客户端的输入和输出处理。所述一个或多个处理模块可利用数据和模型来处理语音输入，并且基于自然语言输入来确定用户的意图。此外，所述一个或多个处理模块基于推断出的用户意图来进行任务执行。在一些示例中，DA服务器可通过一个或多个网络来与外部服务进行通信，以完成任务或采集信息。至外部服务的I/O接口可促进此类通信。
用户设备可以是任何合适的电子设备。例如，用户设备可以是便携式多功能设备(例如，上文参考图1A描述的设备100)、多功能设备(例如，上文参考图3描述的设备300)、个人电子设备(例如，下文参考图5A-图5B描述的设备500)或电子设备(例如，上文参考图5I-图5J描述的设备580)。便携式多功能设备可以是例如还包含其他功能诸如PDA和/或音乐播放器功能的移动电话。便携式多功能设备的特定示例可包括来自Apple Inc.(Cupertino,California)的
Figure BDA0002602782570000711
设备、iPod
Figure BDA0002602782570000712
设备和
Figure BDA0002602782570000713
设备。便携式多功能设备的其他示例可包括但不限于膝上型计算机或平板电脑。此外，在一些示例中，用户设备可以是非便携式多功能设备。具体地讲，用户设备可以是台式计算机、游戏机、电视、智能扬声器或电视机顶盒。在一些示例中，用户设备可包括触敏表面(例如，触摸屏显示器和/或触控板)。此外，用户设备可任选地包括一个或多个其他物理用户接口设备，诸如物理键盘、鼠标和/或操纵杆。下文更详细地描述了电子设备诸如多功能设备的各种示例。
一个或多个通信网络的示例可包括局域网(LAN)和广域网(WAN)，例如互联网。一个或多个通信网络可使用任何已知的网络协议来实现，包括各种有线或无线协议，例如以太网、通用串行总线(USB)、火线、全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、Wi-Fi、互联网协议语音(VoIP)、Wi-MAX或任何其他合适的通信协议。
服务器系统可在计算机的一个或多个独立式数据处理装置或分布式网络上实现。在一些示例中，服务器系统还可采用第三方服务提供方(例如，第三方云服务提供方)的各种虚拟设备和/或服务来提供服务器系统的潜在计算资源和/或基础结构资源。
在一些示例中，用户设备(也被称为第一用户设备)可经由第二用户设备与DA服务器进行通信。第二用户设备可与如上所述的用户设备类似或相同。例如，第二用户设备可类似于上文参考图1A、图3、图5A-图5B和图5I-图5J描述的设备100、300、500或580。第一用户设备可被配置为经由直接通信连接诸如蓝牙、NFC、BTLE等或者经由有线或无线网络诸如局域Wi-Fi网络而被通信地耦接到第二用户设备。在一些示例中，第二用户设备可被配置为充当第一用户设备与DA服务器之间的代理。例如，第一用户设备的DA客户端可被配置为经由第二用户设备向DA服务器传输信息(例如，在第一用户设备处接收的用户请求)。DA服务器可处理该信息，并经由第二用户设备将相关数据(例如，响应于用户请求的数据内容)返回到第一用户设备。
在一些示例中，数字助理系统可在独立式计算机系统上实现。在一些示例中，数字助理系统可跨多个计算机分布。在一些示例中，如上所述，数字助理的模块和功能中的一些模块和功能可被划分成服务器部分和客户端部分，其中客户端部分位于一个或多个用户设备(例如，设备100、300、500、580)上并通过一个或多个网络来与服务器部分进行通信。在一些示例中，数字助理系统可以是服务器系统(和/或DA服务器)的具体实施。
在一些示例中，数字助理系统包括也可存储数字助理模块(或数字助理的服务器部分)的存储器。在一些示例中，数字助理模块可包括以下子模块或者其子集或超集：输入/输出处理模块、语音转文本(STT)处理模块、自然语言处理模块、对话流处理模块、任务流处理模块、服务处理模块和语音合成模块。这些模块中的每个模块均可具有对以下数字助理模块的系统或数据与模型中的一者或多者或者其子集或超集的访问权限：知识本体、词汇索引、用户数据、任务流模型、服务模型和ASR系统。
在一些示例中，使用在数字助理模块中实现的处理模块、数据和模型，数字助理可执行以下中的至少一些：将语音输入转换为文本；识别在从用户接收的自然语言输入中表达的用户的意图；主动引出并获取完全推断出用户的意图所需的信息(例如，通过消除字词、游戏、意图的歧义等)；确定用于满足推断出的意图的任务流；以及执行该任务流以满足推断出的意图。
在一些示例中，I/O处理模块可通过I/O设备与用户进行交互或通过网络通信接口与用户设备(例如，设备100、300、500或580)进行交互，以获取用户输入(例如，语音输入)并提供对用户输入的响应(例如，作为语音输出)。I/O处理模块随同接收到用户输入一起或在接收到用户输入之后不久可任选地获取与来自用户设备的用户输入相关联的上下文信息。上下文信息可包括特定于用户的数据、词汇，和/或与用户输入相关的偏好。在一些示例中，该上下文信息还包括在接收到用户请求时的用户设备的软件状态和硬件状态，和/或在接收到用户请求时与用户的周围环境相关的信息。在一些示例中，I/O处理模块还可将关于用户请求的跟进问题发送至用户，并从用户接收回答。在用户请求被I/O处理模块接收并且用户请求可包括语音输入时，I/O处理模块可将语音输入转发至STT处理模块(或语音识别器)，以用于语音文本转换。
STT处理模块可包括一个或多个ASR系统。所述一个或多个ASR系统可处理通过I/O处理模块接收到的语音输入，以产生识别结果。每个ASR系统可包括前端语音预处理器。前端语音预处理器可从语音输入提取表示性特征部。例如，前端语音预处理器可对语音输入执行傅里叶变换，以提取表征语音输入的光谱特征部作为表示性多维向量的序列。此外，每个ASR系统可包括一个或多个语音识别模型(例如，声音模型和/或语言模型)，并且可实现一个或多个语音识别引擎。语音识别模型的示例可包括隐马尔可夫模型、高斯混合模型、深层神经网络模型、n元语言模型、以及其他统计模型。语音识别引擎的示例可包括基于动态时间规整的引擎和基于加权有限状态换能器(WFST)的引擎。一个或多个语音识别模型和一个或多个语音识别引擎可用于处理前端语音预处理器的所提取的表示性特征部，以产生中间识别结果(例如，音素、音素串和子字)，并且最终产生文本识别结果(例如，字词、字词串或符号的序列)。在一些示例中，语音输入可至少部分地由第三方服务处理或在用户的设备(例如，设备100、300、500或580)上处理，以产生识别结果。一旦STT处理模块产生包含文本串(例如，字词，或字词的序列，或符号的序列)的识别结果，识别结果便可被传递给自然语言处理模块以用于意图推断。
在一些示例中，数字助理的自然语言处理模块(“自然语言处理器”)可获得由STT处理模块生成的字词或符号的序列(“符号序列”)，并尝试将该符号序列与由数字助理所识别的一个或多个“可执行意图”相关联。“可执行意图”可表示可由数字助理执行并且可具有在数字助理系统的任务流模型中实现的相关联的任务流的任务。相关联任务流可以是数字助理为了执行任务而采取的一系列经编程的动作和步骤。数字助理的能力范围可取决于已在任务流模型中实现并存储的任务流的数量和种类，或换句话讲，取决于数字助理所识别的“可执行意图”的数量和种类。然而，数字助理的有效性还可取决于助理从以自然语言表达的用户请求中推断出正确的“一个或多个可执行意图”的能力。
在一些示例中，自然语言处理可基于例如知识本体。知识本体可以是包含许多节点的分级结构，每个节点表示“可执行意图”或与“可执行意图”或其他“属性”中的一者或多者相关的“属性”。如上所述，“可执行意图”可表示数字助理能够执行的任务，即该任务为“可执行的”或可被进行的。“属性”可表示与可执行意图或另一属性的子方面相关联的参数。知识本体中的可执行意图节点与属性节点之间的链接可定义由属性节点表示的参数如何从属于由可执行意图节点表示的任务。
在一些示例中，一旦自然语言处理模块基于用户请求来识别出可执行意图(或域)，自然语言处理模块便可生成结构化查询，以表示所识别的可执行意图。在一些示例中，结构化查询可包括针对可执行意图的域内的一个或多个节点的参数，并且该参数中的至少一些参数填充有在用户请求中指定的特定信息和要求。例如，用户可以说“帮我在寿司店预订晚上7点的座位。”在这种情况下，自然语言处理模块可能够基于用户输入将可执行意图正确地识别为“餐厅预订”。根据知识本体，“餐厅预订”域的结构化查询可包括参数诸如{菜系}、{时间}、{日期}、{同行人数}等。在一些示例中，基于语音输入和使用STT处理模块从语音输入得出的文本，自然语言处理模块可针对餐厅预订域生成部分结构化查询，其中部分结构化查询包括参数{菜系＝“寿司类”}以及{时间＝“晚上7点”}。然而，在该示例中，用户话语包含不足以完成与域相关联的结构化查询的信息。因此，基于当前可用的信息，在结构化查询中可能未指定其他必要的参数，诸如{同行人数}和{日期}。在一些示例中，自然语言处理模块可用所接收的上下文信息来填充结构化查询的一些参数。例如，在一些示例中，如果用户请求“附近的”寿司店，自然语言处理模块可用来自用户设备的GPS坐标来填充结构化查询中的{位置}参数。
在一些示例中，自然语言处理模块可将所生成的结构化查询(包括任何已完成的参数)传递给任务流处理模块(“任务流处理器”)。任务流处理模块可被配置为接收来自自然语言处理模块的结构化查询、(必要时)完成结构化查询，并且执行“完成”用户最终请求所需的动作。在一些示例中，完成这些任务所必需的各种过程可在任务流模型中提供。在一些示例中，任务流模型可包括用于获取来自用户的附加信息的过程，以及用于执行与可执行意图相关联的动作的任务流。
如上所述，为了完成结构化查询，任务流处理模块可能需要发起与用户的附加对话，以便获取附加信息和/或弄清可能有歧义的话语。当有必要进行此类交互时，任务流处理模块可调用对话流处理模块来参与同用户的对话。在一些示例中，对话流处理模块可确定如何(和/或何时)向用户请求附加信息，并且接收和处理用户响应。通过I/O处理模块可将问题提供给用户并且可从用户接收回答。在一些示例中，对话流处理模块可经由音频和/或视觉输出来向用户呈现对话输出，并接收经由口头或物理(例如，点击)响应的来自用户的输入。继续上述示例，当任务流处理模块调用对话流处理模块来确定针对与域“餐厅预订”相关联的结构化查询的“同行人数”和“日期”信息时，对话流处理模块可生成问题诸如“一行几位？”和“预订哪天？”以传递给用户。一旦从用户接收到回答，对话流处理模块便可用缺失信息填充结构化查询，或将信息传递给任务流处理模块以根据结构化查询来完成缺失信息。
一旦任务流处理模块已针对可执行意图完成结构化查询，任务流处理模块便可着手执行与可执行意图相关联的最终任务。因此，任务流处理模块可根据结构化查询中包含的特定参数来执行任务流模型中的步骤和指令。例如，针对可执行意图“餐厅预订”的任务流模型可包括用于联系餐厅并在特定时间实际上请求针对特定同行人数的预订的步骤和指令。例如，使用结构化查询诸如：{餐厅预订、餐厅＝ABC咖啡馆、日期＝3/12/2012、时间＝晚上7点、同行人数＝5}，任务流处理模块可执行以下步骤：(1)登录ABC咖啡馆的服务器或餐厅预订系统诸如
Figure BDA0002602782570000761
(2)以网站上的形式输入日期、时间和同行人数信息、(3)提交表格以及(4)在用户的日历上形成针对预订的日历条目。
如本文自始至终所讨论的，讨论了用于在第一设备处接收用户输入并在第二设备处引发动作或输出的各种技术。例如，第一用户设备(例如，580或3300)接收用户输入(例如，“在我的客厅播放Ramones的歌曲”)。在一些示例中，用户输入包括用户语音，并且第一用户设备使用第一电子设备的麦克风来接收用户输入。在一些示例中，第一电子设备将用户输入转换为音频输入的表示。音频输入的表示可以是模拟表示或数字表示。在一些示例中，该表示是文本表示，并且第一电子设备使用语音文本转换来将用户输入转换为文本表示。可使用任何已知的语音文本转换过程来转换用户语音。
在一些实施方案中，用户输入或其表示由第一电子设备提供(例如，传输)到虚拟助理服务器(例如，DA服务器)以用于处理。
基于用户输入，虚拟助理服务器识别一个或多个任务和参数。例如，虚拟助理服务器解译用户输入的文本表示以导出意图并将该意图操作化成一个或多个任务。在所描绘的示例中，基于用户输入“在我的客厅播放Ramones的歌曲”，虚拟助理服务器识别出将一个或多个媒体项添加到期望的电子设备(例如，580、3304)处的媒体回放队列的任务。可以任意种方式来识别该任务。用于识别任务的技术可见于例如于2014年9月30日提交的标题为“Intelligent Assistant for Home Automation”的美国实用新型申请号14/503,105和于2016年6月9日提交的标题为“Intelligent Automated Assistant in a HomeEnvironment”的美国临时专利申请序列号62/348,015(代理人案卷号770003000100(P30331USP1))，以上申请的全部公开内容以引用方式并入本文。
此外，虚拟助理服务器识别完成任务所需的相关参数。在一些示例中，参数包括要播放的媒体项的指示，诸如歌曲标题和媒体文件名称。在一些示例中，参数包括要播放的媒体项的类型的指示，诸如音频、视频和文本。在一些示例中，参数包括期望的电子设备的位置的指示，诸如与用户相关联的命名位置和配置(“客厅”、“车库”、“楼上”)或GPS坐标。在一些示例中，参数包括期望的电子设备的类型的指示，诸如电视、扬声器底座和智能手表。在该示例中，虚拟助理服务器将参数识别为“Ramones”和“客厅”。
虚拟助理服务器可将用于识别一个或多个用户设备的请求传输到设备识别存储装置(例如，在虚拟助理服务器上)。该请求包括用于识别所述一个或多个用户设备的一个或多个参数。在一些示例中，所述一个或多个参数可指定命名位置(例如，“客厅”)、设备类型(例如，“AppleTV”)和/或媒体项的一个或多个属性，诸如媒体项的类型(例如，“音频”和“视频”)。
设备识别存储装置(例如，在虚拟助理服务器上)可存储针对各种各样属性的数据和/或模型以及与各种电子设备相关联的相关信息。针对电子设备可存储的属性包括但不限于：唯一标识符、状态、类型、位置、支持的媒体类型以及所有权。例如，设备识别存储装置可存储将设备与类型“AppleTV”、命名位置“客厅”以及支持的媒体类型“音频”和“视频”相关联的信息。又如，设备识别存储装置可存储将设备与类型“扬声器”、命名位置“车库”以及支持的媒体类型“音频”相关联的信息。
当用户的输入指定要执行的任务(诸如，“嘿Siri，帮我找一段电视剧集”或“嘿Siri，开车送我去那儿”)时，设备类型与智能设备仲裁特别相关。在一些实施方案中，如果基于所广播的值，该电子设备是可处理音频输入中指定的任务的类型的唯一设备，则该电子设备将响应该音频输入。
在一些示例中，电子设备获取可处理指定任务的可接受设备类型的列表(例如，通过本地分析音频输入和/或通过从一个或多个服务器接收列表)，并且基于所广播的“设备类型”值和可接受设备类型的列表来确定该设备是否将响应该音频输入。在一些示例中，一个或多个服务器接收表示来自电子设备中的一个或多个电子设备的取样音频输入的数据，基于该数据来导出用户意图，并基于该用户意图来识别具有一个或多个参数的任务。在一些示例中，一旦所述一个或多个服务器基于音频输入确定了任务，所述一个或多个服务器便传输任务、参数(如果有的话)以及用于处理任务的可接受设备类型的列表。关于从自然语言输入识别任务的另外细节可见于例如于2016年5月2日提交的标题为“IntelligentDevice Identification”的美国实用新型申请15/144,618，该申请据此全文以引用方式。
设备识别存储装置(例如，在虚拟助理服务器上)可经由硬件、软件或其组合来实现。在一些示例中，设备识别存储装置可位于包括第一用户设备(例如，580、3300)和第二用户设备(例如，5380、3304)的上述电子设备中的一个或多个电子设备上。设备识别存储装置可位于托管媒体识别存储装置和虚拟助理服务器中的任一者的相同电子设备上。
在设备识别存储装置处，基于来自虚拟助理服务器的请求中提供的参数来识别一个或多个用户设备。在一些示例中，设备识别存储装置确定在数据库中具有条目的电子设备中的任一者是否具有匹配参数的属性。关于对电子设备的识别的另外细节可见于例如于2014年9月30日提交的标题为“Intelligent Assistant for Home Automation”的美国实用新型申请号14/503,105，该申请的全部公开内容以引用方式并入本文。
响应于用于识别一个或多个设备的请求，虚拟助理服务器接收对所述一个或多个设备的识别信息。例如，识别信息包括对应于所识别的用户设备的唯一标识符(例如，“uid＝123456”)。
虚拟助理服务器将用于识别一个或多个媒体项的请求传输到媒体识别存储装置。该请求包括考虑到对一个或多个媒体项的识别的一个或多个参数，诸如参数“Ramones”。媒体识别存储装置包括通过一个或多个属性来关联(例如，编目)一组媒体项的数据库，所述一个或多个属性包括标题、艺术家、流派、长度以及与媒体项相关联的任何其他相关信息。仅以举例的方式，基于媒体识别存储装置处的参数“Ramones”来识别一个或多个媒体项。
响应于用于识别一个或多个媒体项的请求，虚拟助理服务器接收从媒体识别存储装置识别的对所述一个或多个媒体项的识别信息。在一些实施方案中，识别信息包括对应于所识别的一个或多个媒体项的唯一标识符，诸如“artist://store/56989”。所述一个或多个媒体项的唯一标识符可用于例如使用支持媒体回放的一个或多个应用程序来识别一个或多个媒体项并随后访问一个或多个所识别的媒体项。媒体识别存储装置可位于任何本地或远程的电子设备(诸如虚拟助理服务器所在的相同电子设备)上。
在一些实施方案中，虚拟助理服务器向第一用户设备(例如，580、3300)提供统一命令。该命令包括对所述一个或多个媒体项的识别信息和对第二用户设备(例如，3403)的识别信息。例如，统一命令包括文本字符串“SetMediaPlayerQueue artist：//store/56989AirplayRouteUid＝12456”。响应于接收到统一命令，用户设备(例如，3300)在所识别的用户设备(例如，第二用户设备3304)处引发所识别的一个或多个媒体项(例如，有关Ramones的媒体)的回放。在一些示例中，第一用户设备(例如，3300)将从统一命令导出的相关信息传输到第二用户设备(例如，3304)。
现在将注意力转到在电子设备(诸如便携式多功能设备100、设备300或设备500)上实现的用户界面(“UI”)以及相关联的过程的实施方案。
图6A-图6AR根据一些实施方案示出了用于访问多个可用回放设备的媒体回放状况的示例性用户界面。这些附图中的用户界面被用于示出包括图7A-图7D中的过程的下文描述的过程。
图6A-图6B示出了用于管理和控制一组设备的示例性用户界面。在一些实施方案中，该组设备包括遍布用户家中以执行各种功能的设备。此类功能可包括控制智能设备(例如，灯泡、恒温器、媒体设备)、配置家庭自动化以及控制家庭娱乐。
图6A描绘了表示用于在设备600上执行的家庭控制应用程序(也被称为“设备管理应用程序”)的示例性界面的家庭汇总屏幕601(在设备600的显示器602上)。在一些实施方案中，设备600包括设备100、300或500的一个或多个特征。家庭控制应用程序的一个示例是“Home”(由Apple Inc.(Cupertino,California,USA)研发)。家庭汇总屏幕601包括已经存储的场景(例如，预先配置的针对一个或多个家庭设备的设置集合)以及用户家中的设备(也被称为“家庭设备”等)的指示)。家庭设备由指示符601A至601C表示。指示符601A对应于房间“客厅”中名为“智能扬声器1”的设备。指示符601B对应于房间“厨房”中名为“智能扬声器2”的设备。指示符601C对应于房间“卧室”中名为“智能灯泡”的设备。用于家庭控制应用程序的示例性界面和技术在于2016年6月12日提交的名称为“User Interface forManaging Controllable External Devices”的美国专利申请62/349,057中有所描述，该专利据此全文以引用方式并入。
图6A还描绘了示例性家庭配置屏幕603，该屏幕示出了用于管理与在家庭汇总屏幕601中表示的家庭设备相关联的配置设置的示例性界面。在一些示例中，响应于在家庭汇总屏幕601处对示能表示601D的用户输入选择，设备600显示家庭配置屏幕603。在家庭配置屏幕603中，用户可编辑家庭的名称(在该示例中为“Home”)、编辑家庭的成员(例如，在该示例中为用户1、2和3)、包括给其他成员的便签以及其他功能。可以看出，该示例中的“Home”包括三个成员：用户1(由指示符603A表示)、用户2(由指示符603B表示)和用户3(由指示符603C表示)。在一些示例中，用户1至用户3表示居住在物理上包括家庭设备的位置(统称为“Home”)处的用户。因此，用户1至用户3是家庭的成员。作为家庭(或其他位置)的成员，在一些示例中，给用户提供控制与家庭相关联的设备的许可。用户可使用与用户中的至少一个用户相关联的一个或多个个人设备来控制家庭设备。在一些示例中，当设备登录到与用户相关联(例如，用户所拥有)的账户时，设备与用户相关联。例如，登录到与上述示例性用户1至用户3相关联的一个或多个用户账户的设备与至少一个用户相关联，并且具体地讲，与Home的至少一个用户(例如，家庭设备)相关联。
图6B描绘了便携式电子设备600的示例性用户界面。在显示器602上显示的设备home屏幕605是设备600的示例性默认home屏幕。设备home屏幕605包括与存储在设备上的应用程序相关联的示能表示。例如，示能表示605A对应于音乐应用程序。在一些示例中，对示能表示605A的选择使得设备显示对应的音乐应用程序的用户界面。图6B还描绘了在显示屏幕603时由设备600接收的示例性用户输入604。在该示例中，用户输入604是设备600的触敏显示器602上的轻扫手势(例如，接着是拖动的触摸输入)。在图6B所描绘的示例中，用户输入604是始于触敏显示器602的边缘的轻扫手势。在一些实施方案中，用户输入604是弧形的轻扫手势。例如，弧形轻扫手势是包括满足弧形标准的水平分量(例如，x方向)和垂直分量(例如，y方向)两者的手势。例如，用户输入604可以是触敏表面上沿循四分之一圆的形式的触摸和拖动。响应于输入604，设备600显示控制中心界面(例如，图6C和图6D)。
图6C示出了示例性控制中心界面。控制中心界面606包括用于控制设备600的各种功能和/或部件的各种示能表示。在所描绘的示例中，控制中心界面606包括以下项的示例性图示：媒体控制界面606A、音量控制界面606C、屏幕亮度控制界面606D、相机示能表示606E、计算器示能表示606F、定时器示能表示606G、手电筒示能表示606H、无线媒体流传输示能表示606I、屏幕旋转锁定示能表示606J、请勿打扰示能表示606K、无线天线控制界面606L。示例性媒体控制界面606A包括媒体回放控制606M(例如，先前曲目、暂停/播放、下一曲目)和设备选择示能表示606B。示例性无线天线控制示能表示606L包括用于来回切换(例如，打开和关闭)设备600的Wi-Fi功能的示能表示606N。
图6D示出了当设备600正通过外部设备回放媒体时的另一示例性控制中心界面606。如图6D所示，设备选择示能表示606B包括当前正在回放的媒体(例如，由艺术家“Jambug”所作的歌曲曲目“Same Thing”)正通过名为“AirPods”的外部设备(或多个设备)回放的指示。因此，媒体控制界面606A指示当前正在播放(另外被称为正在回放、当前回放等)的媒体以及其上正在路由音频输出的设备。在这种情况下，音频输出由无线个人耳塞(Apple Inc.(Cupertino,California,USA)研发的“AirPods”)生成。图6D还示出了包括表示“AirPods”设备的指示符606M的音量控制示能表示606C，指示音量控制示能表示606C可用于调节外部设备“AirPods”的音频输出的音量。
图6E示出了如图6C所示的示例性控制中心界面，但是在设备选择示能表示606B上具有用户输入608A。在一些实施方案中，响应于接收到用户输入608A，设备600显示多设备界面(例如，如图6J所示)。例如，用户输入608A是设备选择示能表示上的触摸(例如，也被称为“轻击”或“按压”)。
图6F示出了如图6C所示的示例性控制中心界面，但是在媒体控制界面606A上的位置处具有用户输入608B。在一些实施方案中，响应于接收到用户输入608B，设备600显示多设备界面(例如，如图6J所示)。在一些示例中，用户输入608B是深按压(例如，具有满足依赖于强度的标准的特征强度的触摸)。在一些示例中，依赖于强度的标准是触摸的特征强度是否超过阈值强度。在一些示例中，用户输入608B是轻击和保持(例如，在设备600的触敏表面上连续检测到达大于阈值时间长度的触摸输入)。在一些示例中，可在媒体控制界面606A上的任何位置(例如，完全或部分地在该媒体控制界面内)处接收用户输入608B(例如，无论是深按压或轻击和保持输入)。例如，响应于在回放控制示能表示(例如，606M)上接收到用户输入606B，设备600执行与用户输入为轻击时其将进行的操作不同的操作(例如，设备600执行第二操作，而不是回放控制操作诸如暂停回放)。
图6G示出了设备的示例性展开媒体控制界面。在一些实施方案中，响应于接收到用户输入608B，设备600显示图6G的展开媒体控制界面609。如图所示，展开媒体控制界面609包括表示当前设备600上正在回放的媒体的指示符609A。在该示例中，设备600名为“iPhone”并且当前正在播放由艺术家“Jambug”所作的媒体曲目“Same Thing”。指示符609A包括在曲目名称左侧的图形，表示与媒体曲目相关联的专辑封面。在一些示例中，包括在指示符609A中的图形可以是与媒体曲目相关联或者可以其他方式提供当前正在播放的媒体的视觉表示的任何图形。例如，其他适当的图形指示符包括但不限于：艺术家照片、专辑封面、电影封面、电影海报、风格化的文本描绘等。示例性展开媒体控制界面609包括媒体进展指示符609B(例如，描绘媒体曲目已播放的时间进展(经过的时间)以及直到当前媒体结束的时间量(剩余时间))。示例性展开媒体控制界面609还包括回放控制示能表示609C(例如，与上述那些类似或相同地起作用)、音量控制示能表示609D(例如，与上述那些类似或相同地起作用)以及设备选择示能表示609E。
图6H-图6N示出了根据一些实施方案的示例性多设备界面。图6H描绘了包括针对当前设备600的示能表示610B至示能表示610D的示例性多设备界面610。在一些实施方案中，响应于接收到用户输入608A，设备600显示多设备界面610。在一些实施方案中，响应于接收到用户输入608B，设备600显示多设备界面610。
如图6H所示，如上文关于展开媒体控制界面609所述，多设备界面610包括表示媒体(当前设备600(名为“iPhone”)上正在回放的媒体)的指示符610A、媒体进展指示符610B(例如，描绘媒体曲目已播放的时间进展(经过的时间)以及直到当前媒体结束的时间量(剩余时间))。示例性多设备界面610还包括回放控制示能表示610C(例如，与上述那些类似或相同地起作用)、音量控制示能表示610D(例如，与上述那些类似或相同地起作用)以及设备选择示能表示610E。与图6G的展开媒体控制界面609相比，多设备界面610给用户提供有关多个设备的媒体回放状况的信息以及影响所述多个设备的媒体回放状况的能力。
如图6H所示，多设备界面610还包括与其他回放设备相关联的指示符。指示符610F对应于名为“客厅”(或在名为“客厅”的一组设备中)的一个或多个设备。在一些实施方案中，一组设备可包括一个或多个设备。可基于其在用户家中的位置来给该组设备分配名称“客厅”。例如，当(例如，使用设备600和家庭控制应用程序)配置名为客厅的组中的一个或多个设备时(例如，在首次使用之前)，名称“客厅”被分配给该组中的所述一个或多个设备。因此，当选择或查看遍布家中的设备的回放状况时，按位置向用户提供该组设备的直观识别。在一些实施方案中，设备或设备组的名称是默认名称。例如，如果用户未将设备配置为具有特定名称，则该设备可(例如，由用户或自动地)简单地被命名为“设备1”或“设备1-客厅”(如果位置相关联)。在一些实施方案中，设备或设备组的名称是用户配置的名称。例如，用户从预定义的一组名称中选择一个名称。在一些示例中，针对设备所显示的名称(例如，在多设备界面中)是设备的位置。例如，设备可被命名为“Tim的扬声器”(例如，在配置设置或家庭控制应用程序中)但基于与设备相关联的位置而表现为“Tim的房间”。在一些实施方案中，一组设备是自定义名称。例如，用户可为设备组分配个性化名称，诸如“Tim的房间”。在一些实施方案中，使用位置名称之外的名称。例如，用户可给一组设备一个任意的名称。
在该示例中，由指示符610F表示的名为客厅的一组设备当前正在回放由艺术家“MKTS”所作的标题为“Heart Wave”的媒体项，艺术家和标题在指示符610F内部有所指示。在一些实施方案中，媒体项是歌曲、视频、播客、音频流、视频流、音频文件、视频文件、电子书(例如，也被称为电子书籍)、文本文档、网页、电话呼叫、视频通话等中的一者或多者。指示符610G对应于名为“卧室”或包括在名为“卧室”的组中的一组设备，该组设备当前正在回放由艺术家“John Appleseed”所作的标题为“Vibes”的歌曲。在一些实施方案中，即使当一组设备当前没在回放媒体时，也(例如，在多设备界面中)显示针对对应的一组设备的指示符(例如，指示符610F和指示符610G)。在一些实施方案中，即使当一组设备中并非全部设备当前都在回放媒体时，也(例如，在多设备界面中)显示针对对应的一组设备的指示符(例如，指示符610F和指示符610G)。例如，如果客厅设备组包括三个设备(例如，三个智能扬声器设备，诸如设备580)，并且这些设备中只有一个当前正在播放媒体项(例如，由“MKTS”所作的“Heart Wave”)，则多设备界面中的对应指示符仍然包括对当前正在回放的媒体的识别(例如，由“MKTS”所作的“HeartWave”显示在针对设备组“客厅”的指示符610F的内部)。
在一些实施方案中，如果该组设备中的单独设备同时都在回放不同的媒体项，则多设备界面显示多个媒体项正在一组设备中的设备上播放的指示。例如，多设备界面可包括针对该组的单个指示符(例如，610F)以及多个媒体项正在这些设备上回放的识别(例如“1部电影，1首歌曲”)。例如，多设备界面可包括针对该组的两个指示符(例如，610F)和正被回放的每个相应媒体项的识别(例如，针对每个媒体项的指示符如610F，两者都被识别为“客厅”，或者被识别为“客厅-设备1”和“客厅-设备2”)。
一组设备也可被称为一组“可用回放设备”。在一些实施方案中，可用回放设备包括当前设备(例如，设备600)可于其上控制或影响回放(例如，使用多设备界面诸如610)的一个或多个(例如，远程、外部)设备。例如，如图6H所示，如果名为客厅的一组设备包括经由通信链路(例如，蓝牙、Wi-Fi等)连接到设备600的三个外部设备(例如，图5I的580)并且可由设备600发布的指令(例如，表示用户输入)来控制，则名为客厅的组中的设备是“可用回放设备”。在一些实施方案中，影响或控制可用回放设备上的回放受制于条件或限制。例如，设备600可看到由指示符610F表示的客厅中的设备，但是修改这些设备的回放状况可能受制于许可(例如，如果正在客厅设备上回放的媒体是由另一设备或用户发起的)。在一些实施方案中，可用回放设备包括当前设备。例如，在客厅包括三个设备的示例中，多个可用设备包括设备600以及这三个客厅设备，总共有至少四个设备。因此，多设备界面610提供了便利的界面，该界面提供当前设备上以及其他设备上正在播放的内容的指示。
在一些实施方案中，一个或多个设备自动检测另一设备。在一些实施方案中，设备然后在它们之间形成网络。例如，两个设备(例如，580)可在第一次启动之后(例如，原装即用，没有由用户配置)检测彼此，在它们之间(例如，并且和设备600之间)建立连接链路，并且出现在多设备界面中(例如，具有名称诸如“扬声器1”和/或位置诸如“无位置”)。在一些实施方案中，设备(例如，580)被配置为用户家庭的一部分(例如，家庭设备)。本领域的技术人员将理解的是，可使用各种各样的技术来在设备(例如，580、600)之间互连和/或传输信息，这些技术都被预想在本公开的范围内，并且因此不在此包括附加细节。
在图6I中，设备600接收表示对设备选择示能表示610E的选择的用户输入612。例如，用户输入612可以是与所显示的设备选择示能表示610E相关联的位置上的轻击或触摸。
图6J根据一些实施方案示出了示例性多设备用户界面。在一些实施方案中，响应于接收到用户输入608B，设备600显示多设备界面610。在一些实施方案中，响应于接收到用户输入612，设备600显示多设备界面610。在一些示例中，响应于在任何媒体应用程序中对设备选择示能表示(例如，图6I的610E)的选择，显示多设备界面。
如图6J所示，多设备界面610包括针对可用回放设备中的每个设备的单独指示符610H至指示符610O。在所描绘的示例中，单独指示符在视觉上与指示符610A(其识别由“Jambug”所作的媒体项“Same Thing”以及当前正回放该媒体的设备(在该情况下只有名为“iPhone”的设备))相关联。指示符610H识别当前设备(名为“iPhone”)并且包括选择指示符610I。在该示例中，选择指示符610I包括复选标记，其指示设备610H当前正在回放指示符610A的媒体。指示符610J识别名为“卧室”的一组设备并且包括不包括复选标记的指示符610K(例如，卧室组设备当前没在回放由“Jambug”所作的媒体曲目“Same Thing”)。指示符610J还包括卧室组设备当前正在回放其他媒体的指示。例如，在图6J中，指示符610J包括曲目“Vibes”的标题。视觉指示向用户传达：卧室设备组当前繁忙。如果用户希望将卧室设备组添加到由“Jambug”所作的“Same Thing”的当前回放(例如，通过选择指示符610K)，则这样做会中断卧室中当前正在播放的媒体。指示符610L识别名为“厨房”的一组设备并且包括不包括复选标记的指示符610M(例如，厨房组设备当前没在回放由“Jambug”所作的媒体曲目“Same Thing”)。指示符610N识别名为“客厅”的一组设备并且包括不包括复选标记的指示符610O(例如，客厅组设备当前没在回放由“Jambug”所作的媒体曲目“Same Thing”)。指示符610N还包括客厅组设备当前正在回放其他媒体的指示。例如，在图6J中，指示符610J包括曲目“Vibes”的标题。
如图6J所示，单独指示符在视觉上与指示符610A相关联。可以看出，单独指示符610H至指示符610O被包括在指示符610A的框式轮廓内。在一些示例中，这提供了多设备界面当前“指向”或“聚焦于”指示符610A所识别的“媒体会话”的视觉指示。在一些实施方案中，媒体会话包括设备和媒体项。在图6J所示的示例中，指示符610A表示包括由“Jambug”所作的媒体项“Same Thing”和设备“iPhone”(例如，设备600)的媒体会话。在一些实施方案中，媒体会话包括多个设备。在一些实施方案中，媒体会话包括多个媒体项。例如，媒体会话可包括播放列表或多个媒体项的其他集合的回放。在视觉上将针对单独设备的指示符与针对媒体会话的指示符相关联在视觉上指示选择单独设备会将设备添加到该媒体会话。该视觉指示是有用的，例如，当用户家中存在多个并发的媒体会话时。例如，指示符610F和指示符610G分别表示其他的媒体会话(例如，表示不同设备上的不同媒体的回放)。
如图6J所示，针对单独设备的指示符已替换了媒体回放控制示能表示(例如，610B至610D)。在一些实施方案中，同时显示针对单独设备的指示符和媒体回放控制示能表示。
在一些实施方案中，与一组设备或单独设备相关联的指示符包括对相应地在该组设备或该单独设备上发起媒体的回放的用户的识别。例如，参考图6J，当卧室中的媒体会话由当前与设备600相关联的用户(例如，Tim)之外的用户(例如，Steve)发起时，指示符610G或指示符610J中的一个或多个可识别发起卧室中的媒体回放的用户—例如，“Steve正在播放由John Appleseed所作的Vibes”。
图6J的多设备界面610可包括示能表示610R。例如，选择示能表示610R可使得停止显示针对单独设备的指示符(并且例如再次显示媒体回放控制示能表示)。在一些示例中，如果设备600接收到对一个或多个单独指示符610K、610M或610O中的选择(例如，使得设备600在指示符内部显示复选标记的用户输入)，则对示能表示610R的选择使得设备600作为响应而在对应的所选择的设备上发起媒体回放。在一些实施方案中，设备600响应于对一个或多个单独指示符610K、610M或610O的选择而发起回放。
图6K示出了设备600接收到对针对可用回放设备中的设备的单独指示符的选择。在与厨房组设备(由610L表示)相关联的指示符610上接收到用户输入614。在一些示例中，用户输入614是与指示符610M相关联的位置上的轻击或触摸。在一些示例中，用户输入614是与指示符610M相关联的位置上的深按压。
图6L示出了在接收到对针对可用回放设备中的设备的单独指示符的选择(例如，用户输入614)之后的示例性多设备界面610。如图6L中可以看出，指示符610A现在包括当前媒体会话包括厨房组设备和名为iPhone的设备(例如，设备600)的指示(“厨房+iPhone”)。此外，指示符610L已被更新以包括单独的音量控制示能表示，并且指示符610M现在包括复选标记。在一些示例中，响应于对其相关联的指示符610M的用户输入选择，将厨房设备组添加到指示符610A的当前媒体会话。在一些示例中，示能表示610R上另外的用户输入(例如，用户输入615)使得厨房设备被添加到指示符610A的当前媒体会话。
图6M-图6N示出了当使用示例性多设备界面时媒体会话之间的切换。在图6M中，示出了多设备界面610，具有与指示符610A相关联的第一媒体会话(例如，设备“iPhone”上的由艺术家“Jambug”所作的“SameThing”的回放)。如图6M所示，设备600接收与指示符610F相关联的用户输入616，该指示符与第二媒体会话(例如，“客厅”组设备上的由艺术家“MKTS”所作的“Heart Wave”的回放)相关联。在一些示例中，用户输入616是与指示符610F相关联的位置处的轻击或触摸。在一些示例中，用户输入616是与指示符610F相关联的位置处的深按压。
在一些实施方案中，响应于用户输入616，设备600将多设备界面的显示更新为“聚焦”(也被称为“指向”)第二媒体会话。例如，图6N将与第一媒体会话相关联的指示符610A描绘为最小化(例如，没有针对单独的可用回放设备或媒体回放控件的在视觉上相关联的指示符)。然而，指示符610F已被展开为包括针对所述多个可用回放设备中的每个设备的单独指示符。另选地或除此之外，针对媒体会话的展开指示符(例如，图6N的指示符610F)可包括媒体回放控制示能表示。如图6N所示，指示符610H、610J、610L和610N现在与针对客厅组设备上的第二媒体会话的指示符610F在视觉上相关联。特别地，指示符610M和指示符610O现在包括复选标记，指示它们是当前选择的媒体会话(例如，与展开指示符610F相关联)的一部分。
媒体会话之间的切换可以被称为“重指向”、“指向”、“重聚焦”、“聚焦”等。因此，对指示符610F的选择可以被称为“聚焦”当前设备600或者使多设备界面610“聚焦”于一组设备或媒体会话上。
如上文相对于图6H-图6N所示，可使用多设备界面来查看多个可用回放设备的媒体回放状况。另外，可使用多设备界面来查看一组可用回放设备中的每个设备当前正在回放的内容。此外，可使用多设备界面来将单独设备添加到媒体会话或者从媒体会话移除单独设备。除了图6H-图6N所示的示例之外，可使用用于调用多设备界面并与之进行交互的其他示例性技术，如下所述。
图6O-图6Y根据一些实施方案示出了用于与多设备用户界面进行交互的示例性技术。图6O-图6R示出了用于直接将回放发起到一个或一个动态选择的外部设备上的示例性技术。图6O示出了示例性浏览界面。浏览界面620描绘了用于浏览媒体项的界面。例如，用户可使用浏览界面来查找和选择一个或多个媒体项以用于回放。示例性浏览界面包括用于浏览音乐库、视频库的界面、可用于流传输的媒体内容等。在该示例中，浏览界面620是音乐浏览界面。指示符620A示出该设备正显示标题为“新音乐”的媒体项列表(例如，播放列表)。媒体项620B(也被称为歌曲620B)是由艺术家“The Fomoers”所作的标题为“Monday Morning”的歌曲。
在图6P中，设备600接收歌曲620B上的用户输入622。在一些示例中，表示对媒体项的选择的用户输入(例如，歌曲上的轻击)使得在当前设备上发起该歌曲的回放。例如，如果设备600当前仅“指向”自身，则媒体项上的轻击使得在设备600上发起回放。再如，如果设备600当前指向自身和设备组“客厅”，则媒体项上的轻击使得在设备600和名为“客厅”的该组设备上发起回放。在一些示例中，媒体项上的深按压用户输入或轻击和保持用户输入使得设备600执行次级操作(例如，立即在所指向的一个或多个设备上发起对应媒体项的回放之外的操作)。在一些示例中，次级操作允许在发起对应媒体的回放之前选择用户想要于其上发起媒体回放的一个或多个设备。这样，用户可直接在期望的一组设备上开始回放，而不需要首先在当前设备(例如，设备600)上发起回放，然后将回放传输到一个或多个外部设备(例如，通过麻烦的界面布置)。首先在当前设备(例如，个人设备)上发起回放然后将回放传输到其他设备(例如，家庭影院系统)的缺点之一在于：在媒体回放在期望的一组设备上发起之前，媒体项已经开始在设备上播放—如果是针对充满收听者的房间进行回放的话，是不期望发生此类情况的。即使响应于将回放传输到期望的一组设备或在此之后(手动或自动)重新开始回放，发起回放的原始设备将由于开始歌曲的回放而浪费设备资源，而此类操作是用户所不期望的。在一些示例中，轻击输入调用初级操作，并且深按压或轻击和保持输入调用次级操作。本领域的技术人员将认识到，可由设备识别为不同类型的用户输入的任何两个用户输入可用于调用相应的初级和次级操作。
图6Q示出了示例性媒体项菜单。例如，响应于用户输入622，显示媒体项菜单624，该用户输入是深按压或轻击和保持输入(例如，调用有关媒体项的次级操作)。菜单624包括针对媒体项620B(由“The Fomoers”所作的标题为“Monday Morning”的歌曲)可选择的可能动作的列表。媒体项菜单624包括转至扬声器播放示能表示624A。在图6R中，设备600接收转至扬声器播放示能表示624A上的用户输入626。例如，用户输入626是轻击。在一些示例中，响应于接收到表示对转至扬声器播放示能表示624A的选择的用户输入626，设备600显示用于选择要在其上发起回放的一个或多个设备的多设备界面(例如，类似于图6J的多设备界面610)。例如，可显示包括针对媒体会话的指示符(例如，610A)的多设备界面，该媒体会话包括由“The Fomoers”所作的媒体项“Monday Morning”并且没有被选中的设备(例如，没有包括复选标记的具有指示符的设备)。在该示例中，在选择所述一个或多个期望的设备(例如，将它们添加到媒体会话)之后，然后在期望的设备上发起回放(例如，设备600在其自身上发起回放并且/或者向该组期望的设备中的其他设备传输指令)。在该示例中，与媒体项相关联的用户输入(例如，622)用于调用多设备界面(例如，610)，使得可在设备600发起媒体的回放之前选择一个或多个外部设备。因此，设备600在所选择的一个或多个外部设备上从开端(例如，从歌曲的开头)发起媒体项(例如，如图6P所示的“Monday Morning”)的回放，而不是首先在设备600上发起回放再随后传输回放(例如，在回放期间)。
图6S-图6Y示出了用于提供设备焦点的指示的示例性技术。图6S示出了示例性当前媒体界面。当前媒体界面630(也被称为“正在播放界面”)识别当前正在回放的媒体项。当前媒体界面630包括专辑封面630A、媒体标识符630B(歌曲标题“Same Thing”)、媒体标识符630C(艺术家“Jambug”)、媒体标识符630D(专辑“Fly Away”)和设备选择示能表示630E。如图6S所示，设备选择示能表示630E不包括针对另一个设备的标识符。因此，在该示例中，当前媒体界面630A中所识别的媒体项当前正在当前设备(设备600)上回放。在一些示例中，当前媒体界面所识别的媒体当前正在其他设备(例如，除了当前设备之外或者排除当前设备的组)上回放。
在图6T中，设备600接收设备选择示能表示630E上的用户输入632。响应于接收到用户输入632，在图6U中，设备显示多设备界面610。如图6U中可以看出，显示器的第一区域611A(例如，为了进行示意性说明，以第一虚线图案为边界示出)包括多设备界面610，并且显示器的第二区域611B(例如，为了进行示意性说明，以第二虚线图案示出)包括在显示多设备界面之前显示的内容的可见指示。在这种情况下，在显示多设备界面之前显示的内容是当前媒体界面630。例如，专辑封面630A通过多设备界面是可见的。在该示例中，第一区域在视觉上覆盖在第二区域上。
在图6V中，设备600接收指示符610F上的用户输入634。在一些示例中，用户输入634是与指示符610F相关联的位置处的轻击或触摸。在一些示例中，用户输入634是与指示符610F相关联的位置处的深按压。
如图6W所示，在一些示例中，响应于用户输入634，设备600显示多设备界面610，其中指示符610F被展开以示出在视觉上与指示符610F相关联的针对该组可用回放设备中的设备的单独指示符。因此，设备600现在聚焦于包括设备组客厅的媒体会话。可以看出，在图6W中，当前媒体界面636(下文描述)是可见的(通过多设备界面610)。特别地，如图6W中所见，响应于输入634，设备600停止显示与当前媒体界面630相关联的视觉指示，并且显示与当前媒体界面636相关联的视觉指示。这是当前媒体界面的替换，指示设备将所指向的媒体会话从与指示符610A相关联的会话改变为与指示符610F相关联的会话(图6U)。
如图6X所示，在一些示例中，响应于用户输入634，设备600停止显示多设备界面610并显示当前媒体界面636。因此，图6X示出了设备600对接收到用户输入634作出的另选响应。类似于界面630，当前媒体界面636包括专辑封面636A、媒体标识符636B(歌曲标题“Heart Wave”)、媒体标识符636C(艺术家“MKTS”)、媒体标识符636D(专辑“MKTS”)和设备选择示能表示636E。然而，这些指示符中的每个指示符都已被更新以反映所选择的媒体会话的媒体项和设备已经改变(例如，因为设备600现在指向包括不同的一组设备的媒体会话)。特别地，设备选择示能表示636E包括识别当前指向设备的标识符636F。如图6X所示，标识符636F包括文本“客厅”，该文本指示当前媒体界面636是针对当前在名为客厅的一组设备上回放的媒体的当前媒体界面。
即使在查看针对其设备上的非媒体相关应用程序的界面时，用户也可能期望在任何时候查看其家中的多个设备的媒体状况。因此，本文描述了用于从在设备上执行的任何应用程序容易且快速地访问多设备界面的技术。图6Y-图6AA根据一些实施方案示出了用于访问多设备界面的示例性技术。图6Y示出了针对应用程序的示例性界面。Web浏览界面640描绘了当前显示的web浏览会话(例如，网站“Apple.com”的主页)。web浏览界面640包括网页内容640A。在图6Z中，设备600接收用户输入642。在一些示例中，用户输入642是始于设备600的触敏表面的边缘的轻扫手势。在一些示例中，响应于用户输入642，设备600显示回放控制界面。例如，响应于用户输入642，设备600显示图6C的回放控制界面606A。在一些实施方案中，响应于在回放控制界面606A处接收到设备选择示能表示606B上的用户输入608A，设备600显示多设备界面(例如，图6AA的610)。
图6AA示出了在视觉上覆盖在应用界面上的示例性多设备界面。如图6AA所示，多设备界面610包括针对可用回放设备的单独指示符。在图6AA所描绘的示例中，在用户家中的可用设备上仅有一个媒体会话是活动的，该媒体会话包括在当前设备600上由“Jambug”所作的“SameThing”的回放。在一些示例中，多设备界面与先前显示的内容同时显示。例如，如图6AA所示，多设备界面610(例如，显示在第一区域中)在视觉上覆盖在web浏览界面640(例如，显示在第二区域中)上。
图6AB-图6AC示出了用于调节可用回放设备的音量的示例性技术。图6AB描绘了具有单个媒体会话的多设备界面610，该媒体会话包括在三个设备：“iPhone”(例如，设备600)、厨房组设备和客厅组设备上的由“Jambug”所作的媒体项“Same Thing”的回放。图6AB描绘了单独的音量控制示能表示610S(对应于设备iPhone)、单独的音量控制示能表示610T(对应于设备组厨房)、单独的音量控制示能表示610U(对应于设备组客厅)。例如，单独的音量控制示能表示是可选择的并且可被操纵(例如，左和右)以便调节各自的相应设备的音量。在一些示例中，不针对未包括在当前媒体会话中的设备显示单独的音量控制示能表示(例如，图6AB中的设备卧室不对应于所显示的单独的音量控制示能表示)。图6AB还描绘了组音量控制示能表示610D，其是可选择的并且可被操纵(例如，左和右)以便调节包括在由指示符610A表示的媒体会话中的多个设备的音量。例如，在图6AB中，设备600接收组音量控制示能表示610D上的用户输入644，其表示沿着向左方向的轻击和滑动手势(例如，表示用于调低音量的请求)。响应于用户输入644，设备调低由滑动示能表示610D的位置表示的组音量，如图6AC所示。图6AC还示出了针对该组中的每个设备的单独的音量控制示能表示都已经对应地被调低。
图6AD-图6AG示出了用于在优选设备上发起回放的示例性界面。在某些情况下，用户可能期望在一个或多个优选设备处自动发起媒体的回放。例如，因为媒体内容可包括视觉方面(例如，如果媒体是视频)，所以期望在具有显示器的设备上或在具有大显示器的设备(例如，大于接收用于发起回放的用户输入请求的设备)上自动发起此类内容的回放。例如，用户可使用他们具有相对较小屏幕的个人设备(例如，设备600)来浏览媒体内容，但期望在他们的大屏电视上开始所选择的媒体项(例如，一部剧情长片)的回放。在其他示例中，用户可经由语音命令向不具有视频回放能力的设备(例如，设备580)请求媒体的回放。在该后一示例中，不具有视频回放能力的设备能够接收用户的请求，但是将视频回放责任交给另一个设备。
转到附图，图6AD示出了示例性浏览界面。如图6AD所示，媒体浏览界面650包括具有视频内容的媒体项。在该示例中，媒体项650A表示名为“Super Heroes”的电视节目的一集。在图6AE中，设备600接收与媒体项650A相关联的用户输入652。在一些示例中，用户输入652是媒体项650A上的轻击或触摸。在一些示例中，用户输入652是媒体项650A上的深按压。
响应于接收到用户输入652，设备600显示图6AF中的消息界面654。消息界面654包括在不是设备600的不同设备上发起或已经发起视频内容的回放的指示(“在Apple TV上开始回放”)。在该示例中，名为“Apple TV”的设备不同于设备600，并且表示用于视频媒体的回放的优选设备。例如，设备Apple TV可连接到用户的大屏电视。在一些实施方案中，响应于用户输入(例如，用户输入652)，设备(例如，600)确定其当前是否连接到家庭网络。根据确定该设备当前连接到家庭网络，设备在优选设备上发起回放(例如，传输指令以在优选设备上发起回放)。例如，如果设备确定用户在家，则其放弃在自身上发起回放，并且在外部优选设备上发起回放。根据确定该设备当前未连接到家庭网络，设备在其自身上发起回放。例如，如果设备确定用户不在家，则其在自身上发起回放。在一些示例中，优选设备是一组优选设备(例如，一个或多个)。在一些示例中，优选设备(或一组设备)是预先确定的。例如，用户可选择优选设备并将其保存到设备或用户帐户设置中。在另一个示例中，自动选择优选设备。例如，如果用户家仅包括一个被识别的能够回放视频的外部设备(例如，Apple TV)，则其可被指定为优选设备。在一些实施方案中，设备提示用户是否在优选设备上发起回放。例如，不管用户是否已经预先配置了优选设备，响应于用户输入652，设备600可提示(例如，可视地或可听地)并询问“您想要在您的Apple TV上发起“Super Heroes”的回放吗？”。
例如，每个设备(例如，一组设备诸如一组优选设备中的每个设备，诸如设备600和设备Apple TV)生成并广播一组一个或多个值(例如，响应于用户输入诸如652)。在该示例中，一个或多个值的每个组包括“设备类型”值。设备(例如，600)根据用户请求(例如，652)中指定的任务来分析所广播的“设备类型”值。设备(例如，600)基于由其他电子设备(例如，Apple TV)广播的设备类型和可接受设备类型的列表来做出确定。在一些示例中，如果设备(例如，600)确定其他电子设备中没有一个具有用于处理该任务的可接受设备类型，则设备向用户输出出错消息或者提示用户进行另外的输入(例如，“您想要在您的iPhone上回放该视频吗？”)。
图6AG示出了针对视频内容的示例性回放控制界面。回放控制界面656包括当前正在播放的媒体内容(“Super Heroes”)的指示656A、回放控制示能表示656B(例如，倒退10秒、暂停和跳过10秒)以及当前回放该媒体内容的设备(“Apple TV”)的指示656C。在一些实施方案中，继消息界面654之后显示界面656。
图6AH-图6AQ示出了示例性多设备界面。如本文所述，可使用多设备界面来查看和控制一组互连设备(例如，用户家中与用户的账户相关联的设备)中的多个可用回放设备的媒体回放状况。因此，可控制多种不同类型的设备，并且每个设备都可具有不同的界面。例如，家中的一组设备可包括由第一制造商制造的第一智能扬声器(例如，580)、由不同于第一制造商的第二制造商制造的第二智能扬声器(例如，580)以及家庭媒体集线器(例如，Apple Inc.(Cupertino,California,USA)研发的Apple TV)。示例性家庭媒体集线器可包括或以其他方式连接到大显示器(例如，大于个人设备600的显示器)，并且因此可具有与上文相对于设备600描述的那些相同、类似或不同的界面。下文详细地描述另外的示例性界面。
图6AH示出了显示在设备660的显示器660A上的示例性当前媒体界面664。在一些实施方案中，设备660包括设备100、300或500的一个或多个特征。设备660其本身是包括在与用户的家相关联的一组设备中的设备(或者以其他方式被配置为充当包括在与用户的家相关联的一组设备中的设备的显示器)。当前媒体界面664包括设备选择示能表示664A(例如，其与图6S的设备选择示能表示630E类似或相同地起作用)。设备选择示能表示664A与文本“客厅Apple TV”相关联，该文本指示设备660当前指向其自身(即设备660)。当前媒体界面664还包括当前正在播放的媒体的指示(例如，指示符664C)，当前正在播放的媒体是由艺术家“MKTS”(例如，指示符664E)所作的标题为“Heart Wave”(例如，指示符664D)的歌曲。在一些示例中，当前正在播放界面664的指示符664C是动画指示符，进一步传达：相关联的媒体项当前正在回放。指示符664F和指示符664G对应于可用于回放的一个或多个其他媒体项。
图6AH还示出了用于控制设备660的示例性遥控器。在一些示例中，遥控器662连接到设备660(例如，配对)并由用户使用以与设备660上显示的界面进行交互。因为遥控器实际上是设备的延伸，用于远程控制该设备，出于本公开的目的，在设备662处接收到的用户输入被认为与在设备660处接收到的用户输入相同，除非本文另有说明。例如，在设备662上接收到的表示用于选择示能表示的请求的轻击输入被认为与在设备660上的表示用于选择相同示能表示的请求的轻击(例如，如果设备660包括触敏表面)相同，除非另有说明。然而，本领域的技术人员将理解的是，用户输入可在任何设备处被接收并且被传达给另一个设备(例如，用于作为响应而处理和执行动作)，并且物理地接收用户输入的特定设备是不重要的，除非特别说明。同样，在设备660是由另一设备(例如，是接收和处理用户输入回放命令的“家庭设备”的Apple TV)使用的外部显示设备(例如，电视)的示例中，因为设备660是实际上是另一设备的延伸，所以在此提及的设备660与所述另一设备是可互换的，除非另有说明。例如，相对于控制媒体而言，对设备660的“焦点”或“指向”的引用指的是另一设备(例如，Apple TV)的焦点或指向，除非另有说明。
在图6AH中，设备662接收设备662上的用户输入668。用户输入668表示对设备选择示能表示664A的选择。在一些示例中，用户输入668是设备662上的按钮按压，而设备选择示能表示664A在界面664处被加亮或以其他方式被选择。在一些示例中，用户输入662是触敏表面上的轻击、轻击和保持或深按压。在一些实施方案中，响应于接收到用户输入668，设备660显示多设备界面(例如，图6AI的670)。
图6AI根据一些实施方案示出了示例性多设备界面。多设备界面670包括对设备660的当前焦点(例如，当前选择的媒体会话)的识别。标头670A指示设备的当前焦点是客厅Apple TV(例如，设备660)。多设备界面670还包括第一指示符670B，该指示符指示当前指向的媒体会话。例如，由指示符670B表示的媒体会话包括来自专辑“MKTS”的由艺术家“MKTS”所作的标题为“Heart Wave”的歌曲的回放。标头670A和指示符670B(其可统称为指示符)一起指示界面670的当前指向的媒体会话(例如，正在回放的媒体以及进行回放的设备)。多设备界面670还包括第二指示符670C，其对应于与当前选择的媒体会话不同的媒体会话。如图6AI所示，指示符670C被显示(例如，部分地被显示)在显示器的边缘上。
如上文相对于多设备界面610所述，多设备界面670包括表示可用回放设备(例如，用户家中的设备)的单独指示符。指示符670D识别当前设备(名为“客厅Apple TV”)并且包括选择指示符670K。在该示例中，选择指示符670K包括复选标记，其指示设备670D当前正在回放指示符670B的媒体(例如，被包括在当前指向的媒体会话中)。指示符670E识别名为“厨房”的一组设备并且包括不包括复选标记的指示符670L(例如，厨房组设备当前没在回放由“MKTS”所作的媒体曲目“Heart Wave”)。指示符670E还包括厨房组设备当前正在回放其他媒体的指示。例如，在图6AI中，指示符670E包括曲目的标题“Same Thing”和艺术家“Jambug”。指示符670F识别名为“卧室”的一组设备并且包括不包括复选标记的指示符670M(例如，卧室组设备当前没在回放由“MKTS”所作的媒体曲目“Heart Wave”)。指示符670F还包括卧室组设备当前正在回放其他媒体的指示。例如，在图6AI中，指示符670F包括曲目的标题“Vibes”和艺术家“John Appleseed”。指示符670G识别名为“庭院”的一组设备并且包括不包括复选标记的指示符670N(例如，庭院组设备当前没在回放由“MKTS”所作的媒体曲目“Heart Wave”)。
在多设备界面670被显示时，设备662接收用户输入672，如图6AI所示。在一些示例中，用户输入672是设备662的触敏表面上的轻扫手势。例如，用户输入672是向左轻扫。
响应于用户输入(例如，轻扫手势)，在一些示例中，设备更新多设备界面670A以聚焦于不同的媒体会话。如图6AJ所示，响应于是向左轻扫的用户输入672，设备660用第二指示符670C的显示替换第一指示符670B的显示，在图6AI中，该第二指示符之前已经紧邻第一指示符670B的右侧显示。因此，可使用多设备界面670来在不同的媒体会话之间切换，在视觉上通过在对应的指示符之间切换来指示。在一些示例中，可使用其他用户输入来在媒体会话之间切换多设备界面。例如，其他用户输入包括上或下方向手势、左或右方向手势、对一个或多个示能表示(例如，左或右箭头)的选择、对设备(例如，设备662)上的按钮的按压或者任何其他适当类型的用户输入。
如图6AJ所示，响应于用户输入672，当前媒体会话现在对应于指示符670C，该指示符包括在识别为“厨房”(例如，如更新的标头670A中所示)的一组设备上对来自专辑“FlyAway”的由艺术家“Jambug”所作的标题为“Same Thing”的媒体项的回放(例如，如指示符670C中所示)。另外，基于与指示符670C相关联的当前显示的媒体会话，已经更新了单独的设备指示符670D至设备指示符670G。因此，对应于指示符670E的名为厨房的设备组是包括复选标记(例如，在对应的指示符670L中)的唯一设备组。此外，图6AJ示出指示符670H(先前未显示)现在显示在显示器上指示符670C在用户输入672之前所显示的区域中。因此，在该示例中，附加的向左轻扫(例如，图6AJ的674)将使得指示符670H替换指示符670C。图6AJ还示出了被(例如，部分地)显示在指示符670C的左侧的指示符670B。因此，在该示例中，向右轻扫将使得指示符670B替换指示符670C的显示(例如，如图6AI所示)。
图6AK示出了具有对应于指示符670I的当前媒体会话的多设备界面670(例如，从由指示符670H表示的媒体会话进行一次向左轻扫，以及从由指示符670C表示的媒体会话进行两次向左轻扫)。在一些实施方案中，媒体会话对应于当前未回放媒体的一组设备。例如，如图6AK所示，当前媒体会话包括名为“庭院”的设备组。指示符670I包括文本“选择音乐”，而不是包括对当前正在播放的媒体项的识别。同样，指示符670G不包括媒体项的指示。
图6AL示出了具有对应于指示符670H的当前媒体会话的多设备界面670(例如，从由指示符670C表示的媒体会话进行一次向左轻扫，以及从由指示符670I表示的媒体会话进行一次向右轻扫)。如图6AL所示，指示符670H当前被加亮。在该示例中，在指示符670H被加亮时，设备662接收用户输入676。在一些示例中，用户输入676是在设备662处接收到的轻击、触摸或按压。响应于接收到用户输入676，设备660显示如图6AM所示的当前媒体界面664。如图6AM所示，响应于用户输入676而显示的当前媒体界面664指示设备660当前指向包括名为“卧室”(例如，如由设备选择示能表示664A指示)的设备的媒体会话，该媒体会话当前正在播放由“John Appleseed”所作的标题为“Vibes”的歌曲(例如，对应于指示符664F，示出该歌曲的专辑封面)。因此，设备660的焦点已经改变(例如，相较于图6AH)，并且选择新媒体以进行回放(例如，使用界面664)将影响当前指向的媒体会话。
图6AN示出了包括当前选择的包括两个设备组的媒体会话的示例性多设备界面。在图6AN中，厨房和客厅组设备两者都被包括在当前媒体会话(例如，对标题为“SameThing”的歌曲的回放)中。如图6AN所示，指示符670E当前被加亮。在指示符670E被加亮时，在设备662处接收用户输入678。
在一些示例中，响应于对应于一个或多个设备的所选指示符上的用户输入678，显示音量控制示能表示。如图6AO所示，在选择指示符670E时，响应于用户输入678，设备660进入针对名为厨房的对应设备组的音量调节模式。例如，显示音量调节示能表示670J(例如，暂时替换指示符670E)。在处于音量调节模式时，设备662接收用户输入679，并且作为响应，相应地调节厨房设备组的音量。在一些示例中，用户输入679是方向性轻扫(例如，左或右、上或下)。
图6AP根据一些实施方案示出了示例性浏览器界面。如图6AP所示，浏览器界面680包括正在播放的媒体的指示符680A，其表示当前指向的媒体会话以及最近添加的媒体项(例如，当被选择时使得在当前选择的媒体会话中的设备上发起回放的媒体项)。在一些示例中，在显示浏览器界面680时，接收用户输入681。在一些示例中，用户输入681是对设备662的按钮682的选择。在一些示例中，用户输入681是在设备662或设备660上的(例如，对按钮的)轻击和保持用户输入、按压和保持、深按压、双击或两次按压或任何其他适当的用户输入。
如图6AQ所示，响应于用户输入681，设备660显示覆盖在浏览器界面680上的多设备界面670。在一些示例中，多设备界面670与设备660的其他界面同时显示。例如，用户输入681提供对多设备界面的快速访问，使得用户即使在执行其他任务或操作(例如，使用其他非媒体相关应用程序)时也能够快速地查看和控制遍布其家中的设备的媒体回放状况。
图6AR示出了各种各样的示例性回放控制界面。根据一些实施方案，回放控制界面690A表示用于控制音频回放的界面。根据一些实施方案，回放控制界面690B表示用于控制视频回放的界面。根据一些实施方案，回放控制界面690C表示用于控制音频的界面。例如，回放控制界面690C适合用作弹出界面(例如，工具栏或web浏览器的弹出界面)。例如，响应于对示能表示的选择，界面690C可从所选择的示能表示(例如，从其一侧上的尖形)突出，暂时覆盖当前显示的内容(例如，直到被解除)。回放控制界面690D是例如690A的替代方案，并且可用作设备操作系统界面中的持久性“桌面小程序”。
在一些实施方案中，设备(例如，设备600)被配置为从另一设备(例如，设备580)接收回放协调责任。例如，被配置为接收或执行回放协调责任的设备(也被称为“主角设备”)是被配置为执行以下任务中的一个或多个任务的设备：向一个或多个外部设备发布命令以同步和/或控制外部设备上媒体的回放；存储媒体项或回放队列以用于回放；访问来自远程位置(例如，互联网位置)的内容流；向一个或多个外部设备提供内容流(例如，媒体的内容流)以用于回放；并且处理针对媒体会话的回放控制指令(例如，接收、处理(例如，对冗余请求进行去重复)指令并将指令转发到适当的设备)。在一些实施方案中，设备600协调一组设备上的回放。在一些实施方案中，该组设备排除设备600。例如，如果该组设备不包括被配置为主角设备的设备，则设备600保留回放协调责任。在一些实施方案中，设备600将回放协调责任传输到被配置为主角设备的设备。例如，如果该组设备包括被配置为主角设备的设备，则设备600将回放协调责任传输到该设备(例如，诸如设备580)。下文更详细地描述回放协调责任。
图7A-图7D是示出了根据一些实施方案的用于使用电子设备来访问多个可用回放设备的媒体回放状况的方法的流程图。在具有显示器的设备(例如，100、300、500、580)处执行方法700。方法700中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法700提供了用于访问多个可用回放设备的媒体回放状况的直观方式。该方法减轻了用户在访问多个可用回放设备的媒体回放状况时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地访问多个可用回放设备的媒体回放状况节省功率并增加电池两次充电之间的间隔。
电子设备(例如，600)接收(702)用户输入。例如，该设备接收对示能表示(例如，图6E的606B)的选择的用户输入(例如，图6E的608A)。在一些示例中，设备接收与回放控制界面(例如，图6C的606A)相关联的用户输入(例如，图6F的608B)。
响应于接收到该用户输入，电子设备(例如，600)在显示器上显示(704)多设备界面(例如，610)，该多设备界面包括：与多个可用回放设备相关联(706)的一个或多个指示符(例如，610A、610F、610G)以及所述多个可用回放设备的媒体回放状况(例如，如由610F和610G指示)(708)，所述多个可用回放设备连接到该设备(例如，600)并且可用于发起来自该设备(例如，600)的媒体的回放。在一些示例中，媒体回放状况包括以下各项中的一个或多个：对所述多个可用回放设备上当前正在播放的内容的指示。在一些示例中，所述多个可用回放设备中的设备与用户、用户账户或与用户相关联的多个设备相关联。例如，设备可以是属于用户或被指定为位于用户家中的设备的集合。在一些实施方案中，所述一个或多个指示符中的指示符可与多于一个的可用回放设备相关联。例如，当前正在播放相同内容的设备可被分组并被显示为单个指示符(例如，图6AB的610A)。
显示包括与连接到该设备并且可用于发起来自该设备的媒体的回放的多个可用回放设备相关联的一个或多个指示符连同所述多个可用回放设备的媒体回放状况的多设备界面给用户提供了关于可用于媒体回放的多个设备的状态的视觉反馈。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
另外，显示此类多设备界面允许用户在一个优化的界面中集中地查看多个可用设备的多个状态。为用户提供优化的界面增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，当可在设备之间交换数据时，一个或多个设备是“连接的”。例如，设备可连接到能够在设备之间启用数据交换的公共局域网(“LAN”)。在一些实施方案中，一个或多个连接设备直接连接。在一些示例中，两个设备之间的直接连接不依赖于两个直接连接的设备之间的中间设备。例如，可在创建直接到第二设备的Wi-Fi连接的设备之间形成直接连接，而不需要中间无线接入点(“WAP”)来促进连接。
在一些实施方案中，一个或多个设备间接连接。在一些示例中，两个设备之间的间接连接包括两个连接设备之间的中间设备(例如，通过中间设备来路由)。例如，可通过中间WAP在连接到公共无线(例如，Wi-Fi)连接的设备之间形成间接连接。
在一些实施方案中，一个或多个设备由于每个都登录到(或以其他方式关联于)同一用户账户而“连接”。例如，用户可能具有都登录到用于基于云端的服务的一个帐户并因此连接的两个个人设备。例如，用户的手机(例如，iPhone)和其平板电脑(例如，iPad)都可登录到用户的iCloud帐户。在该示例中，iPhone和iPad可通过基于云端的服务(例如，云服务器)来交换数据。在一些实施方案中，设备连接到可用回放设备，使得该设备可在可用回放设备中的一个或多个上发起媒体的回放。例如，可用回放设备可开始媒体文件(或流)的回放、将(当前正在设备上播放的)回放传输到该可用设备或者添加该可用设备以同时回放(当前正在设备上播放的)媒体。
在一些实施方案中，用户输入(例如，图6E的608A)是第一用户输入，并且电子设备(例如，600)接收(710)表示对与所述多个可用回放设备相关联的一个或多个指示符的选择的第二用户输入(例如，615或616)。响应于接收到第二用户输入，电子设备传输(712)指令以在所述多个可用回放设备上发起回放。在一些实施方案中，所述多个设备立即开始回放。在一些实施方案中，可用设备在未建立媒体数据的缓冲区的情况下开始回放，然后在回放期间建立缓冲区。因此，例如，减少了用户选择媒体项和听到回放之间的延迟。在一些实施方案中，直到所述多个设备中一定比例的设备准备好开始回放时才开始回放。例如，当75％的设备准备好(例如，已经缓冲了最小量的媒体)时，回放可开始。
在一些实施方案中，用户输入(例如，图6E的608A)是第一用户输入，并且在显示多设备界面(例如，610)时，电子设备(例如，600)在显示器(例如，602)上显示(714)第一指示符(例如，图6H的610E、610F或610G)。电子设备接收(716)表示对第一指示符(例如，610E或610F)的选择的第三用户输入(例如，612或616)。响应于接收到第三用户输入，电子设备在显示器上显示(718)针对所述多个可用回放设备中的每个设备的示能表示(例如，图6J或图6N的610H至610O)。例如，在选择针对一组设备(例如，图6N的“厨房”和“客厅”)的指示符(例如，610)之后，多设备界面包括针对家中的每个设备(例如，图6N的示例中的iPhone、卧室、厨房和客厅)的示能表示(例如，610H、610J、610L和610N)。
在一些实施方案中，在电子设备(例如，600)正在回放第一媒体项(例如，由图6J的610A表示)时，该电子设备接收(720)表示对所述一个或多个指示符中的第二指示符(例如，610F)的选择的第四用户输入(例如，616)，其中第二指示符与不包括该设备的一组回放设备相关联。在一些实施方案中，一组回放设备包括一个或多个回放设备。继接收到表示对第二指示符的选择的第四用户输入之后，电子设备在显示器上显示(722)浏览界面(例如，620)，其中该浏览界面包括与第二媒体项相关联的示能表示(例如，620B)。电子设备(例如，600)接收(724)表示对与第二媒体项相关联的示能表示的选择的第五用户输入(例如，622)。响应于接收到第五用户输入(726)，电子设备(例如，600)：传输指令以在不包括该设备(例如，600)的一组回放设备上发起第二媒体项的回放；并且继续在电子设备(例如，600)上回放第一媒体项(例如，由图6J的610A表示)。例如，响应于对示能表示620B(与由“TheFomoers”所作的媒体项“Monday Morning”相关联)的用户输入选择，设备在名为“厨房”和“客厅”的所选设备(例如，如图6N中所示所选择的设备)上发起相关联的媒体项的回放。此外，在该电子设备(例如，在该示例中名为iPhone)上继续由艺术家“Jambug”所作的标题为“Same Thing”的媒体项(例如，如图6N所示)的回放。
在一些实施方案中，浏览界面(例如，620)包括与第三媒体项(例如，620B)相关联的示能表示，并且电子设备接收关联于与第三媒体项相关联的示能表示的第六用户输入(例如，622)。根据接收到第六用户输入，电子设备在显示器上显示多设备界面。例如，在接收媒体项(例如，歌曲)上的深按压之后，设备显示多设备界面(例如，图6J的610)。
在一些实施方案中，第六用户输入(例如，622)是按压和保持。在一些实施方案中，响应于第六用户输入，电子设备显示具有示能表示(例如，624A)的菜单(例如，624)，选择该示能表示使得多设备界面(例如，610)被显示。
在一些实施方案中，第六用户输入(例如，622)具有特征强度。根据确定第六用户输入的特征强度满足依赖于强度的标准，并且继接收到第六用户输入之后，电子设备(例如，600)在显示器(例如，602)上显示多设备界面(例如，610)。在一些实施方案中，响应于第六用户输入，电子设备显示具有示能表示(例如，624A)的菜单(例如，624)，选择该示能表示使得多设备界面(例如，610)被显示。根据确定第六用户输入的特征强度不满足依赖于强度的标准，并且继接收到第六用户输入之后：电子设备放弃在显示器上显示多设备界面；并且传输指令以在不包括该设备的一组回放设备(例如，客厅+厨房，如图6N所示)上发起第三媒体项(例如，620B)的回放。
在一些实施方案中，为了显示多设备界面(例如，610)，电子设备(例如，600)在显示器(例如，602)上同时显示：包括多设备界面(例如，图6U的610)的第一区域(例如，图6U的611A)；和包括在显示该多设备界面之前所显示的内容(例如，630)的第二区域(例如，图6U的611B)。
在一些实施方案中，第一区域(例如，611A)在视觉上覆盖在第二区域(例如，611B,如图6U所示)上。在一些实施方案中，第二区域在视觉上是模糊的(例如，以指示第一区域是活动窗口)。在一些实施方案中，第二区域看起来是变暗的(例如，以指示第一区域是活动窗口)。
在一些实施方案中，电子设备(例如，600)接收对所述一个或多个指示符中的指示符(例如，图6V的610F)的选择(例如，用户输入634)，其中该指示符包括第四媒体项(例如，如图6V所示的“Heart Wave”)的表示。在一些示例中，第四媒体项的表示是包括专辑封面、艺术家缩略图等的缩略图。响应于接收到对该指示符的选择，并且在继续同时显示第一区域和第二区域时，电子设备(例如，600)更新第二区域(例如，611B)的显示以包括第四媒体项的表示的至少一部分(例如，如图6W所示)。例如，第二区域可被更新以反映设备已经接收到用户对不同于当前正在回放的媒体项的媒体项的选择，紧接着在接收到该选择之前显示的是所述当前正在回放的媒体项的表示。因此，电子设备在视觉上指示其已被重指向到正在回放第四媒体项的设备。在一些示例中，第二区域表示设备上的媒体应用程序。例如，媒体应用程序包括在设备上执行的可用于浏览、选择或以其他方式发起媒体项的回放的任何应用程序。
在一些实施方案中，用户输入(例如，608A或608B)是第一用户输入，并且在接收到该用户输入之前，电子设备(例如，600)接收第七用户输入(例如，604或642)。响应于接收到第七用户输入，电子设备在显示器(例如，602)上显示包括以下各项的回放控制界面(例如，图6C的606A)：一个或多个回放控制示能表示(例如，图6C的606M)；回放设备选择示能表示(例如，图6C的606B)；以及用于控制设备的数据连接的示能表示(例如，606N)。电子设备接收第一用户输入(例如，图6E的608A或图6F的608B)，其中第一用户输入与回放控制界面相关联(例如，对图6E的606B的选择或者对图6F的606A的深按压)。
在一些实施方案中，电子设备接收第一用户输入(例如，608A或608B)，并且第一用户输入具有输入特征。在一些实施方案中，输入特征是输入的特征强度。在一些实施方案中，输入特征是与输入相关联的时间长度。在一些示例中，与输入相关联的时间长度是在触敏表面(例如，设备600的触敏表面)上连续检测到触摸输入的时间长度。
电子设备(例如，600)确定该输入特征是否满足依赖于输入特征的标准。在一些实施方案中，为了确定该输入特征是否满足依赖于输入特征的标准，电子设备确定特征强度是否满足依赖于强度的标准。例如，输入的特征输入是否高于阈值强度。在一些实施方案中，为了确定该输入特征是否满足依赖于输入特征的标准，电子设备确定用户输入是否满足基于时间的标准。例如，是否(例如，在与该电子设备相关联的触敏表面上)检测到触摸达预先确定的时间量。可使用输入特征和基于强度或时间的这些标准以外的依赖于输入特征的标准。根据确定输入特征满足依赖于输入特征的标准，设备在显示器上显示多设备界面。根据确定输入特征强度不满足依赖于输入特征的标准，电子设备放弃在显示器上显示多设备界面。在一些实施方案中，进一步根据确定输入特征强度不满足依赖于输入特征的标准，电子设备确定与第一用户输入相关联的位置。根据确定该位置与回放控制示能表示(例如，图6C的606M)相关联，设备执行对应的回放控制功能。例如，如果第一用户输入不具有超过阈值强度的特征强度，并且在与暂停回放示能表示相关联的位置处被接收，则设备暂停回放。
在一些实施方案中，在显示在该设备上执行的应用程序的用户界面(例如，图6Y的640)时接收第七用户输入(例如，642)。在继续显示该应用程序的用户界面的至少一部分(例如，图6AA的640)时，电子设备(例如，600)在显示器(例如，602)上显示回放控制界面(例如，606A)。继接收到第一用户输入之后，并且在继续显示该应用程序的用户界面的至少一部分时，电子设备(例如，600)在显示器上显示多设备界面(例如，图6AA的610)。在一些实施方案中，在多设备界面部分之外(例如，在图6AA的610之外)的用户输入(例如，触摸或点击)使得电子设备停止显示该多设备界面(例如，并且显示如图6Y所示的640)。例如，多设备界面停止被显示覆盖在该应用程序上，并且该应用程序(例如，由图6Y的640表示)再次成为活动的用户界面。
在一些实施方案中，多设备界面(例如，图6AB的610)包括与所述多个可用回放设备(例如，由610H、610L和610N表示的设备)相关联的音量控制示能表示(例如，图6AB的610D)。电子设备接收与音量控制示能表示相关联的第八用户输入(例如，644)。响应于接收到第八用户输入，设备传输指令以调节所述多个可用回放设备(例如，由610H、610L和610N表示的设备)的回放音量。例如，设备(例如，600)传输指令到该设备当前指向且正在回放相同媒体内容的设备“厨房”和“客厅”。
在一些实施方案中，多设备界面包括多个单独的音量控制示能表示(例如，图6AB的610S、610T和610U)，各自与所述多个可用回放设备(例如，分别由610H、610L和610N表示的设备)中的单个设备相关联。该设备接收与单独的音量控制示能表示(例如，610U)相关联的第九用户输入。例如，在图6AB中，电子设备接收对滑块610U的选择和移动。响应于接收到第九用户输入，设备传输指令以调节相关联的设备(例如，由610N表示的设备)的回放音量，其中该相关联的设备不同于该电子设备(例如，600)。例如，电子设备传输指令以调节与示能表示610U相关联的设备的音量，放弃调节该组中其他设备的音量。
在一些实施方案中，与所述多个可用回放设备相关联的所述一个或多个指示符包括(728)：表示当前正在电子设备(例如，660)上播放的第五媒体项的第一指示符(例如，图6AI的670B)，其中第一指示符被显示在第一区域(例如，图6AI的670A)中；表示各自当前正在回放第六媒体项的一组设备(例如，图6AJ的670E)的第二指示符(例如，图6AI的670C)；以及针对所述多个可用回放设备中的每个设备的单独指示符(例如，图6AI的指示符670D、670E、670F和670G)。在显示多设备界面时，电子设备(例如，600)接收(730)表示用于用第二指示符(例如，670C)的显示替换第一区域(例如，图6AI的670A)中的第一指示符(例如，图6AI的670B)的显示的请求的第十用户输入(例如，672)。响应于第十用户输入，电子设备用(732)第二指示符(例如，图6AJ中所示的670C)的显示替换第一区域(例如，670A)中的第一指示符(例如，670B)的显示(例如，如图6AJ中所示)。在一些实施方案中，在与该电子设备(例如，600或660)相关联的第二设备(例如，662)处接收第十用户输入。
在一些实施方案中，电子设备(例如，660)显示(734)对所述多个可用回放设备中的每个设备当前是否正在回放与显示在第一区域中的指示符相关联的媒体项的指示(例如，670K)。
在一些实施方案中，电子设备(例如，660)接收与针对所述多个可用回放设备中的设备的单独指示符(例如，图6AN的670E)相关联的第十一用户输入(例如，678)。电子设备确定第十一用户输入是否表示超过阈值持续时间的选择。例如，该输入可以是在设备的触敏表面或与设备相关联的触敏表面(例如，662的触敏表面)上的轻击和保持。根据表示超过阈值持续时间的选择的第十一用户输入，电子设备进入针对与该单独指示符相关联的设备的音量调节模式(例如，如图6AO中所示)。在一些示例中，进入音量调节模式可包括显示电子设备处于音量调节模式的视觉指示(例如，图6AO的670J)。因为该视觉指示可指示哪个设备或哪些设备当前处于音量调节模式进行音量调节。例如，响应于第十一用户输入，针对其他设备的指示符可变灰或以其他方式改变外观。在一些示例中，音量指示符(例如，670J)诸如指示音量水平的滑块或旋钮出现、放大出现或者以其他方式在视觉上被改变，以便在视觉上传达：该电子设备当前处于音量调节模式。根据不表示超过阈值持续时间的选择的第十一用户输入(例如，678)，放弃进入针对与该单独指示符相关联的设备的音量调节模式。
在一些实施方案中，电子设备(例如，600、660)接收表示用于在所述多个可用设备上发起媒体回放的请求的第十二用户输入。响应于接收到第十二用户输入：根据确定所述多个可用设备包括被配置为接收回放协调责任的至少一个设备，电子设备将回放协调责任传输到所述多个设备中的所述至少一个设备。根据确定所述多个可用设备不包括被配置为接收回放协调责任的至少一个设备，电子设备(例如，600、660)协调所述多个设备上的媒体回放。
在一些实施方案中，在电子设备(例如，600或660)正在协调所述多个设备上的媒体回放时，电子设备接收表示用于在该设备上发起电话呼叫的请求的第十三用户输入。例如，该设备接收表示用于接听电话呼叫或拨打电话呼叫的请求的用户输入。响应于接收到表示用于发起电话呼叫的请求的第十三用户输入，电子设备：发起电话呼叫；并且在电话呼叫期间继续协调所述多个设备上的媒体回放。
在一些实施方案中，进一步响应于接收到第十二用户输入，电子设备(例如，600、660)向所述多个设备中的每个设备传输表示回放队列的数据。
在一些实施方案中，电子设备(例如，600或660)接收表示用于在所述多个可用设备上发起媒体回放的请求的第十四用户输入，其中第十四用户输入与第一用户相关联。在一些示例中，电子设备基于检测到的语音输入、基于发送请求的设备等来确定用户输入与第一用户相关联。响应于接收到第十四用户输入，根据确定第一用户受制于回放限制，电子设备(例如，600、660)阻止该电子设备(例如，600、660)响应于第十一用户输入而在所述多个可用设备上发起媒体回放。根据确定第一用户不受制于回放限制，电子设备允许该设备响应于第十一用户输入而在所述多个可用设备上发起媒体回放。
在一些实施方案中，电子设备(例如，600或660)接收(736)表示对该设备上的媒体输出的请求的第十五用户输入(例如，图6AE的652)。在一些实施方案中，第十五用户输入表示用于在该设备上发起媒体回放的请求。在一些实施方案中，第十五用户输入表示用于输出具有视觉分量的媒体的请求。例如，具有视觉分量的媒体包括但不限于图像、视频、浏览器应用程序、电子消息(例如，电子邮件、文本消息)等。响应于接收到第十五用户输入(738)：根据确定对媒体输出的请求是用于显示内容(例如，由图6AE的650A表示)的请求，电子设备响应于第十二请求而将指令传输(740)到所述多个可用回放设备中的优选设备(例如，图6AH的660)以发起内容的显示。在一些实施方案中，对媒体输出的请求是用于回放具有视觉分量的内容(例如，视频)的请求。例如，视频内容包括但不限于：电影、节目、视频流等。在一些实施方案中，优选设备是能够输出视频的设备(例如，Apple TV)或连接到大显示器的设备(例如，预定义为优选的设备)。根据确定对媒体输出的请求不是用于显示内容的请求，电子设备(例如，600或660)(742)：放弃响应于第十二请求而将指令传输到所述多个可用回放设备中的优选设备以发起内容的显示；并且响应于第十二用户输入而在设备上发起媒体输出。例如，如果所请求的回放是音频内容的，则电子设备替代地在所请求的设备上回放音频。
需注意，上文相对于方法700所述的过程(例如，图7A-图7D)的详情也可以类似方式适用于下文所述的方法。例如，方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法700所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图8A-图8P根据一些实施方案示出了用于访问多设备界面的示例性用户界面。这些附图中的用户界面被用于示出包括图9A-图9C中的过程的下文描述的过程。
图8A-图8B根据一些实施方案示出了示例性当前媒体界面。在图8A中，设备800在显示器802上显示当前媒体界面804。当前媒体界面804(也被称为“正在播放界面”)识别当前正在回放的媒体项。在一些实施方案中，设备800包括设备100、300或500的一个或多个特征。当前媒体界面804包括专辑封面804A、媒体标识符804B(歌曲标题“SameThing”)、媒体标识符804C(艺术家“Jambug”)、媒体标识符804D(专辑“Fly Away”)和设备选择示能表示804E。如图8A所示，设备选择示能表示804E不包括针对另一个设备的标识符。因此，在该示例中，当前媒体界面804中所识别的媒体项当前正在当前设备(设备800)上回放。在一些示例中，当前媒体界面所识别的媒体当前也正在其他设备(例如，除了当前设备之外或者排除当前设备的组)上回放。如图8B所示，设备800接收表示对设备选择示能表示804E的选择的用户输入806。在一些示例中，用户输入806可以是与所显示的设备选择示能表示804E相关联的位置上的轻击或触摸。
图8C根据一些实施方案示出了示例性多设备界面。在一些实施方案中，响应于用户输入806，设备800显示多设备界面810。如图8C所示，多设备界面810包括指示符810A至指示符810K。多设备界面810类似于上述多设备界面610(例如，相对于图6J)。同样，指示符810A至指示符810K类似于多设备界面610的指示符。因此，上文对多设备界面(例如，610)的描述据此以引用方式并入相对于多设备界面810的描述。
具体地讲，图8C描绘了包括指示符810J的多设备界面810，该指示符表示包括设备组“厨房+客厅”的媒体会话，该设备组包含设备组“厨房”和设备组“客厅”。在该示例中，厨房组表示单个智能扬声器设备(例如，设备580)，并且客厅组表示不同的单个智能扬声器设备(例如，设备580的另一实例)。由指示符810J表示的媒体会话包括在设备组“厨房+客厅”上由艺术家“MKTS”所作的标题为“Heart Wave”的媒体项的回放。
图8D-图8H根据一些实施方案示出了用于重聚焦设备的示例性技术。在图8D中，设备800接收表示对指示符810J的选择的用户输入812。在一些实施方案中，用户输入812是与指示符810J相关联的位置上的轻击或触摸。在一些实施方案中，用户输入812是与指示符810J相关联的位置上的深按压输入或轻击和保持输入。如图8D所示，当前媒体界面804在同时显示多设备界面810的情况下在显示器802上可见。具体地讲，设备800在第一区域828A中显示多设备界面810，该第一区域在视觉上覆盖在第二区域828B上。设备800在第二区域828B中显示当前媒体界面804。如图8D所示，第二区域828B(例如，当前媒体界面804)被第一区域828A部分遮蔽，但仍然可见。因此，设备800提供设备的当前焦点的视觉指示(例如，不同于多设备界面810)。例如，因为与指示符810A一起显示的专辑封面匹配当前媒体界面804的专辑封面，所以设备指示设备的当前焦点或特定应用程序(例如，与当前媒体界面804相关联)的焦点是当前设备“iPhone”，该设备当前正在播放与相匹配的专辑封面相关联的媒体项。
响应于接收到用户输入812，设备800显示指示符810J的展开版本，如图8E所示。图8E的展开指示符810J(以及指示符810A的缩小尺寸)提供了设备的焦点现在在由指示符810J表示的媒体会话上的视觉指示。如图8E所示，响应于改变焦点：指示符810B在指示符810F中不再包括复选标记(例如，因为iPhone不是当前选择的媒体会话的一部分)，指示符810D和指示符810E现在分别在指示符810H和指示符810I中包括复选标记(例如，因为厨房和客厅组设备是当前选择的媒体会话的一部分)。在一些示例中，针对一个或多个设备的指示符指示所述对应的一个或多个设备不可用。例如，不可用设备是如下设备：脱机、当前正在安装软件或固件更新、被配置为不可用(例如，经由设置或按钮)等的设备。在一些示例中，不显示针对不可用设备的对应指示符。另选地，显示针对此类设备的指示符，但是具有该设备不可用于媒体回放的指示。例如，图8E描绘了指示符810C，其包括指示卧室设备组当前不可用于媒体回放(例如，从设备800发起的媒体回放)的文本“正在更新”。图8E还描绘了指示符810C不同于其他设备指示符的文本和图像，进一步在视觉上指示设备组卧室不可用于来自设备800的媒体回放。例如，设备800可以灰色或以将不可用设备与可用设备在视觉上区分开的其他合适方式显示针对不可用设备的指示符。
在图8F中，设备800接收用户输入814。在该示例中，用户输入814表示在所显示的多设备界面810之外的位置上(例如，在不包括多设备界面810的指示符的显示的位置上)的接触(例如，触摸、轻击、深按压或按压和保持)。在一些示例中，响应于接收到用户输入814，设备800停止显示多设备界面810。
图8G和图8H示出了示例性当前媒体界面。在图8F中，设备800显示当前媒体界面816。在一些示例中，响应于图8F的用户输入814，显示当前媒体界面816。在一些示例中，响应于图8D的用户输入812，显示当前媒体界面816。当前媒体界面804和当前媒体界面816是类似的，然而当前媒体界面816是界面804的更新版本，并且反映设备800现在指向不同的媒体会话(例如，一组设备和/或媒体)。具体地讲，当前媒体界面816包括专辑封面816A(例如，不同于专辑封面804A)、媒体标识符816B(歌曲标题“Heart Wave”)、媒体标识符816C(艺术家“MKTS”)、媒体标识符816D(专辑“MKTS”)和设备选择示能表示816E。如图8G所示，设备选择示能表示816E包括针对另一设备组“厨房+客厅”的标识符。因此，在该示例中，当前媒体界面816中所识别的媒体项当前正在设备组“厨房+客厅”(例如，该设备组排除设备800)上回放。在图8H中，设备800接收用户输入818。在该示例中，用户输入818表示在所显示的当前媒体界面816之外的位置上(例如，在不包括当前媒体界面816的指示符的显示的位置上)的接触(例如，触摸、轻击、深按压或按压和保持)。在一些示例中，响应于接收到用户输入818，设备800停止显示当前媒体界面816。在一些示例中，响应于用户输入818，设备800显示浏览器界面820。
图8I和图8J示出了示例性浏览器界面。在图8I中，设备800显示用于查看和选择多个媒体项的浏览器界面820。浏览器界面820描绘了音乐浏览界面，并且具体地讲，描绘了音乐专辑的专辑视图。浏览器界面820包括识别当前选择的专辑的标识符820A，以及多个示能表示(例如，820B和820C)，各自对应于媒体项(例如，音乐专辑的曲目)。当前媒体指示符822将当前正在回放的媒体识别为当前选择的媒体会话的一部分(例如，在设备厨房+客厅上回放的标题为“Heart Wave”的曲目)。在图8J中，设备800接收表示对媒体项示能表示820B的选择的用户输入824。在一些示例中，用户输入是与示能表示820B相关联的位置处的轻击或触摸输入。在一些示例中，用户输入是与示能表示820B相关联的位置处的深按压或触摸和保持输入。
图8K示出了示例性当前媒体界面。在一些示例中，响应于用户输入824，设备800显示当前媒体界面826(例如，如图8K所示)。在一些示例中，响应于继用户输入824之后接收到的一个或多个用户输入，设备800显示当前媒体界面826。如图8K所示，当前媒体界面826示出了：响应于用于对用于回放的媒体项的选择(例如，对示能表示820B的选择)的请求，并且在设备800指向一组设备(例如，如图8H所示的“厨房+客厅”)时，在所指向的一组设备上发起该回放。因此，对与由艺术家“TheFomoers”所作的标题为“The Spiral”的音乐项相关联的示能表示820B的用户输入选择使得显示包括对应的适当指示符826A至指示符826D的当前媒体界面826。设备选择示能表示826E指示设备800的焦点继续是设备组“厨房+客厅”(例如，正如其紧接着在接收到用户输入824之前一样)。
图8L-图8P示出了用于在当前正在回放其他媒体的一个或一个设备上发起媒体的回放的示例性界面。图8L描绘了多设备界面810，如上文相对于图8C所述。如图8L所示，当前选择的媒体会话对应于设备iPhone和媒体曲目“Same Thing”。
在图8M中，设备800已经接收到对设备组厨房(例如，由指示符810D的指示符810H中的复选标记表示)和设备组客厅(例如，由指示符810E的指示符810I中的复选标记表示)的用户输入选择。在一些示例中，对设备的用户输入选择是在与设备指示符(例如，指示符810D，如图8M所示)相关联的位置处的用户输入830。图8M还描绘了表示对示能表示810L的选择的用户输入832。在一些示例中，用户输入832是与示能表示810L相关联的位置处的接触(例如，轻击、触摸、深按压)。在一些示例中，对设备的用户输入选择是用户输入832。图8M还描绘了指示符810J，该指示符针对包括在设备厨房和客厅上的回放的未被选择的媒体会话。因此，设备厨房和客厅当前正忙于(例如，是包括媒体内容的回放的不同媒体会话(例如，不同于被选择的媒体会话)的一部分)回放标题为“HeartWave”的媒体项。此外，图8M描绘了具有标识符810M的指示符810J，该标识符识别媒体会话拥有者。在一些实施方案中，媒体会话拥有者是设备。在一些实施方案中，媒体会话拥有者是用户(例如，用户账户)。在一些实施方案中，媒体会话拥有者是设备和用户。如图8M所示，与指示符810J的媒体会话相关联的媒体会话拥有者包括用户和设备两者—“Bob的iPhone”。因此，在该示例中，媒体会话拥有者包括不同于设备800的设备，并且该不同设备与不与设备800相关联的用户(例如，Bob)相关联(例如，设备800未登录到与Bob相关联的账户)。
图8N示出了用于接管设备的回放的示例性通知提示。在一些实施方案中，响应于接收到用户输入830，设备800显示通知提示834。在一些实施方案中，响应于接收到用户输入832，设备800显示通知提示834。在一些示例中，当设备800尝试(或被配置为)在当前正忙于回放媒体的设备上发起媒体回放时，显示通知提示。在一些示例中，如果由不同的媒体会话拥有者发起媒体，则设备正忙于回放此类媒体。因此，如果设备800与第一用户账户(例如，属于用户Tim)相关联并且所指向的设备当前正在回放由与设备800不相关联的第二用户账户发起的媒体(例如，来自与属于Bob的用户账户相关联的设备)，则可显示通知提示诸如通知提示834。
在一些示例中，响应于用户输入830，显示用于接管回放的通知提示。例如，响应于用户选择图8M中针对厨房设备的指示符，显示通知提示。在一些示例中，响应于用户输入832，显示用于接管回放的通知提示。例如，响应于接收到对图8M中的示能表示810L的选择(例如，在接收到对厨房指示符810D和客厅指示符810E的选择之后)，显示通知提示834。通知提示834包括消息834A，写道：“厨房和客厅扬声器当前正在播放“Heart Wave”。您确定您想要在厨房和客厅播放“Same Thing”吗？”。此外，通知提示834包括确定示能表示834B和取消示能表示834C。在一些示例中，对示能表示834B的选择使得设备800接管所选择的设备的回放。在一些示例中，对示能表示834C的选择使得设备800放弃接管所选择的设备的回放。
图8O示出了在从另一媒体会话拥有者接管回放之后的示例性多设备界面。在图8O中，响应于对确定示能表示834B的选择，设备800显示如图8O所描绘的多设备界面810，对该确定示能表示的选择表示确认设备800应当接管回放并且将厨房和客厅设备添加到当前选择的“Same Thing”媒体会话。特别地，在图8O中，不再显示(如图8L所示的)指示符810J。在一些示例中，继其设备被接管之后，停止显示针对媒体会话的指示符。在该示例中，对应于指示符810J(例如，在设备“厨房+客厅”上的“Heart Wave”的回放)的媒体会话不再存在(例如，因为其每个设备都已经被添加到另一个媒体会话)。因此，指示符810J不被显示在图8O的多设备界面810中。
图8P示出了在少于媒体会话的所有设备被接管之后的示例性多设备界面。图8P类似于图8O，除了设备组“客厅”未被接管(例如，在图8M中未被选择)和添加到针对媒体项“Same Thing”的媒体会话之外。因此，在图8P中，指示符810J继续被显示，但已经被更新以反映厨房设备不再是该媒体会话的一部分。例如图8P中的指示符810J现在将“客厅”识别为包括在其对应媒体会话中的设备组，并且不再识别(例如，如图8M中所示的)“厨房+客厅”。
图9A-图9C是示出了根据一些实施方案的用于使用电子设备来将电子设备配置为在多个可用回放设备上发起回放的方法的流程图。在具有显示器的设备(例如，100、300、500、580)处执行方法900。方法900中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法900提供了用于将电子设备配置为在多个可用回放设备上发起回放的直观方式。该方法减轻了用户在将电子设备配置为在多个可用回放设备上发起回放时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地将电子设备配置为在多个可用回放设备上发起回放节省功率并增加电池两次充电之间的间隔。
电子设备(例如，800)在显示器(例如，802)上显示(902)针对该设备的第一当前媒体界面(例如，图8A的804)，其中第一当前媒体界面包括：(904)可用于在该设备上回放的第一媒体项的表示(例如，图8A的804A、804B、804C和/或804D)，以及(906)回放设备选择示能表示(例如，804E)。在一些示例中，当前媒体界面是用于浏览、查看或控制媒体回放的任何用户界面。例如，当前媒体界面是“正在播放”界面。
在一些实施方案中，电子设备(例如，800)当前正在播放第一媒体项。例如，第一当前媒体界面是“正在播放”界面。在一些实施方案中，可用于在该设备上回放的第一媒体项的表示是可选择的(例如，是示能表示)，并且可被选择以在该电子设备上发起第一媒体项的回放。例如，第一当前媒体界面是允许浏览一个或多个媒体项(例如，第一媒体项)的浏览界面，同时该电子设备上的媒体应用程序(例如，或电子设备自身)指向该电子设备。在一些实施方案中，在音乐应用程序指向设备时对媒体项(例如，第一媒体项)的选择使得作为响应该媒体项的回放在所指向的设备上发起。
在一些实施方案中，对回放设备选择示能表示(例如，804E)的选择允许选择一个或多个可用回放设备。在一些实施方案中，可用回放设备包括该电子设备。对一个或多个可用回放设备的选择可被称为“指向”、“重指向”、“聚焦”、“重聚焦”媒体应用程序或该电子设备，如上所述。例如，媒体应用程序或设备可指向三个分立设备：该电子设备和经由无线连接连接到该设备的两个外部扬声器。在该示例中，在指向该示例中的三个分立设备时，媒体项被选择用于回放，并且在该三个分立设备上发起回放。
电子设备(例如，800)接收(908)表示对回放设备选择示能表示(例如，804E)的选择的第一用户输入(例如，图8B的806)。
响应于接收到第一用户输入(例如，806)，电子设备(例如，800)在显示器(例如，802)上显示(910)与连接到该设备(例如，800)的多个可用回放设备(例如，图8C的设备组iPhone、卧室、厨房和/或客厅)相关联的一个或多个示能表示(例如，示能表示804B至804K)。在一些示例中，可用回放设备是连接到该设备的设备，使得该电子设备可控制或以其他方式使用可用回放设备来发起媒体内容的回放(例如，经由通过通信链路传输的指令)。在一些示例中，可用设备经由无线连接(例如，经由Wi-Fi、Apple Airplay等)被连接(例如，连接到该电子设备)。在一些实施方案中，所述多个可用回放设备包括该电子设备。
显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示给用户提供了关于可用于媒体回放的多个设备的状态的视觉反馈。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
显示与连接到该设备的多个可用回放设备相关联的一个或多个示能表示允许用户在一个优化的界面中集中地查看多个可用设备的多个状态。为用户提供优化的界面增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
电子设备(例如，800)接收(912)表示对与所述多个可用回放设备相关联的一个或多个示能表示(例如，图8D的示能表示810J)的选择的第二用户输入(例如，图8D的812)。在一些示例中，电子设备接收对若干设备的选择(例如，经由对如图8E所示的指示符810H和指示符810I的选择)，或者接收对表示多个设备的单个指示符(例如，图8D的810J)的选择。
响应于接收到第二用户输入(例如，812)，电子设备(例如，800)将(914)该设备配置为在所述多个可用回放设备(例如，组“厨房+客厅”中的设备，由图8D的示能表示810J表示，并且由图8E的示能表示804D和示能表示804E单独地表示)上发起回放。在一些实施方案中，将设备配置为发起回放包括在所述多个可用回放设备上发起回放。在一些实施方案中，不响应于将设备配置为在所述多个可用回放设备上发起回放而发起回放，但是如果设备随后接收到用于发起媒体的回放的命令，则将在所述多个可用回放设备上发起回放。因此，在一些示例中，将设备配置为在一个或多个设备上发起媒体回放在所述一个或多个设备上“重指向”该设备(例如，如上所述)以在多个可用设备上控制和/或输出回放。
将设备配置为在所述多个可用回放设备上发起回放允许用户在一个优化的界面中集中地控制多个可用设备。为用户提供优化的界面增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，将设备配置为在所述多个可用回放设备上发起回放包括向可用回放设备传输(916)指令以发起回放(例如，组“厨房+客厅”中的设备，由图8D的示能表示810J表示，并且由图8E的示能表示804D和示能表示804E单独地表示)。
在一些实施方案中，在电子设备(例如，800)被配置为在所述多个可用回放设备(例如，由图8E的示能表示804D和示能表示804E表示的设备)上发起回放时，并且在停止显示与所述多个可用回放设备(例如，图8C的设备组iPhone、卧室、厨房和/或客厅)相关联的一个或多个示能表示(例如，示能表示804B至示能表示804K)之后，电子设备接收(918)第三用户输入(例如，图8J的824)，表示用于发起第二媒体项(例如，由图8J的820B表示)的回放的请求。例如，在电子设备指向所述多个可用回放设备时，在停止显示多设备界面810之后接收第三用户输入。响应于接收到第三用户输入，电子设备传输(920)用于在所述多个可用回放设备(例如，由图8K的设备选择示能表示824E指示的设备组“厨房+客厅”)上发起第二媒体的回放的请求。在一些实施方案中，在浏览器界面(例如，图8I的820)处接收第三用户输入。在一些示例中，浏览器界面是用于浏览和选择用于回放的媒体项的界面(例如，音乐应用程序、视频应用程序)。可当在多设备界面处将设备配置为在所述多个可用回放设备上发起回放之后并且在停止显示(例如，解除、退出)该多设备界面之后显示浏览器界面。在一些示例中，设备记住将于在多设备界面处选择的多个可用设备(例如，如图8F所示)上发起所选媒体的回放。在一些实施方案中，第三用户输入是对浏览器界面的示能表示的选择。例如，诸如与媒体项相关联的示能表示，诸如歌曲或视频。在一些实施方案中，传输用于发起第二媒体的回放的请求包括传输可用于流传输该媒体的地址(例如，URL)。在一些实施方案中，传输用于发起第二媒体的回放的请求包括将该媒体的流从电子设备传输到所述多个可用设备。
在一些实施方案中，针对该电子设备(例如，800)的第一当前媒体界面(例如，图8A的804)包括当前正在该设备上回放的媒体项的指示(例如，804A、804B、804C和/或804D)，并且进一步响应于接收到第一用户输入(例如，806)，该电子设备(例如，800)在显示器(例如，802)上同时显示：第一区域(例如，图8D的828A)，其包括与所述多个可用回放设备相关联的一个或多个示能表示(例如，804B至804K)；以及第二区域(例如，图8D的828B)，其包括当前正在该电子设备(例如，800)上回放的媒体项(例如，如由图8D的指示符810A指示的由“Jambug”所作的“Same Thing”)的指示(例如，804A、804B、804C和/或804D)。此外，响应于接收到第二用户输入(例如，图8D的812)，电子设备(例如，800)在视觉上更新第二区域(例如，图8D的828B)以显示当前正在所述多个可用回放设备(例如，由图8E的图810J的指示符810J表示的设备组“厨房+客厅”)上回放的媒体项(例如，如由图8E的指示符810J指示的由“MKTS”所作的“Heart Wave”)的指示。
在一些实施方案中，与连接到该设备的所述多个可用回放设备相关联的一个或多个示能表示(例如，图8D的810J)包括识别当前正由所述多个可用回放设备回放的媒体的信息(例如，如由图8D的图810J的指示符810J指示的由“MKTS”所作的“Heart Wave”)。
在一些实施方案中，识别当前正由所述多个可用回放设备回放的媒体的信息包括以下各项中的一个或多个：歌曲标题、艺术家、电影标题、剧集名称和URL(例如，如由图8E的图810J的指示符810J指示的由“MKTS”所作的“Heart Wave”)。
在一些实施方案中，在电子设备(例如，800)被配置为在所述多个可用回放设备(例如，由图8E的指示符810J表示的设备组“厨房+客厅”)上发起回放时，电子设备传输(922)指令以在所述多个可用回放设备(例如，分别对应于图8M的指示符810D和指示符810E的设备组厨房和设备组客厅)上发起第三媒体项(例如，如由图8M的活动媒体会话指示符810A指示的由“Jambug”所作的“Same Thing”)的媒体回放，其中所述多个可用回放设备当前正在播放由不同于该电子设备(例如，800)的另一设备(例如，由图8M的指示符810J识别的名为“Bob的iPhone”的设备)发起的第四媒体项(例如，如由图8M的活动媒体会话指示符810J指示的由“MKTS”所作的“Heart Wave”)。继传输指令以发起第三媒体项的回放之后，电子设备(例如，800)接收(924)所述多个设备当前正在回放第三媒体项(例如，如由图8O的活动媒体会话指示符810A指示的由“Jambug”所作的“Same Thing”)的指示(例如，如图8O的指示符810A、指示符810H和指示符810I中的复选标记所示)。
在一些实施方案中，电子设备(例如，800)确定(926)所述多个可用回放设备(例如，分别对应于图8M的指示符810D和指示符810E的设备组厨房和设备组客厅)当前正在播放由另一设备(例如，如由图8M的指示符810J指示的“Bob的iPhone”)发起的内容(例如，由“MKTS”所作的“Heart Wave”，如由图8M的指示符810J指示)。根据确定所述多个可用回放设备当前正在播放由另一设备发起的内容，电子设备请求(928)(例如，显示图8N的提示834)对用于在所述多个可用回放设备上发起第三媒体项的媒体回放的指令的用户输入确认(例如，对图8N的示能表示834B或示能表示834C的选择)。电子设备(例如，800)接收(930)对该对用户输入确认的请求的用户输入响应(例如，对图8N的示能表示834B或示能表示834C的选择)。根据用户输入响应是肯定确认(例如，对图8N的示能表示834B的选择)，电子设备传输(932)指令以在所述多个可用回放设备上发起第三媒体项的媒体回放。根据用户输入响应是否定确认(例如，对图8N的示能表示834C的选择)，电子设备放弃(934)传输指令以在所述多个可用回放设备上发起第三媒体项的媒体回放。
在一些实施方案中，进一步响应于接收到第二用户输入(936)(例如，图8D的812)，电子设备(例如，800)停止显示(例如，用图8G的当前媒体界面816来替换显示)与所述多个可用回放设备相关联的一个或多个示能表示(例如，包括在图8D的810中的示能表示)。
在一些实施方案中，媒体项包括(938)音频数据、视频数据或两者中的一个或多个。
需注意，上文相对于方法900所述的过程(例如，图9A-图9C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法900所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图10A-图10O根据一些实施方案示出了用于配置电子设备的示例性用户界面。这些附图中的用户界面被用于示出包括图11A-图11D中的过程的下文描述的过程。
图10A示出了示例性智能扬声器设备。设备1000是智能扬声器设备，并且可包括如上所述的设备580的一个或多个特征。在一些实施方案中，设备1000包括设备100、300或500的一个或多个特征。如图10A所示，设备1000可包括一个或多个LED指示器，其被示出显示图10A中的旋转漩涡图案1004。在一些示例中，当设备1000第一次通电时(例如，在设备启动期间)，LED指示器显示图案(例如，也被称为“启动图案”)。图案1004可由一个或多个LED指示器或其他显示元件(例如，显示面板)创建，在此提及的这两者是可互换的，除非另有说明。在一些示例中，LED指示器定位在设备1000的触敏表面下方。图10B示出了三个同心环1006A、1006B和1006C，其表示包括形成图案1004的LED指示器的分立LED指示器的同心环。环1006A至环1006C可用于创建启动图案(例如，图案1004)。在一些示例中，使用照明元件的其他布置。在一些示例中，当设备1000完成启动或者以其他方式准备好配对(例如，与另一设备)和/或被配置时，图案1004可改变。例如，该图案可转变为脉冲图案(例如，渐进式地点亮每个同心环1006A至同心环1006C，然后以相反的次序关闭它们)。
如图10A所示，设备1000具有有限的显示能力，并且因此通过使用具有更稳健的显示能力的第二设备可使设备1000的配置更容易。在一些示例中，设备1000是用户放置在其家中(例如，在一个位置处或在许多位置之间移动)的智能家庭设备(例如，网络连接的扬声器)。在这种情况下，当配置该设备时用户具有对其的物理访问权限，并且因此物理接近度的使用可用作用于配置设备1000的直观且易于使用的界面的一部分。因此，并非使用户导航尝试建立或访问个人设备(例如，设备1010)和设备1000之间的通信的各种菜单，用户可将其个人设备放置在设备1000附近，例如作为配置过程的一部分。
图10C-图10G示出了第一设备和第二设备的示例性物理布置。图10C示出了第一场景，包括安置于桌子上的第一设备(例如，设备1000)和在远离第一设备的长距离处手持第二设备(例如，个人设备1010)的用户。在一些实施方案中，设备1010包括设备100、300或500的一个或多个特征。图10D示出了第一场景的示例性俯视图。如图10D所示，设备1000和设备1010相距甚远。图10D包括接近度条件范围指示符1008。接近度条件范围指示符在本文中也被称为“接近度区域指示符”或简称为“接近度区域”。设备1010不在接近度条件范围指示符1008内部。接近度条件范围指示符1008作为视觉辅助被包括，并且旨在表示将满足接近度条件的物理接近度。例如，范围指示符1008可表示设备1000的近场通信检测电路的范围。在一些实施方案中，可使用任何适当的技术来检测设备之间的接近度。例如，在一些示例中，使用宽带无线连接。宽带无线连接例如用于确定以下各项中的一个或多个：一个或多个设备的方向性、距离和取向。因此，可检测设备(例如，部分地或完全地)在接近度条件范围指示符1008内的存在将满足接近度条件，但是如果可检测设备位于范围指示符1008之外则不会。技术人员将理解的是，物理接近度的检测范围可能是不均匀的、可受到多种变量(例如，无线干扰、空气湿度等)影响，并且可包括三维空间中的点，所有这些都被预想在本公开的范围内。因此，接近度条件范围指示符1008的图形表示不旨在限制确定是否满足接近度条件的范围。
图10E示出了第二场景，包括安置于桌子上的第一设备(设备1000)和在远离第一设备的短距离处手持第二设备(个人设备1010)的用户。图10F示出了第二场景的示例性俯视图。如图10F所示，设备1000和设备1010靠近在一起，并且现在设备1010至少部分地在接近度条件范围指示符1008内。因为接近度条件范围指示符1008表示满足接近度条件的物理接近度，所以第一设备1000检测到第一设备和第二设备1010之间的物理接近度满足接近度条件的指示。在一些示例中，根据检测到满足接近度条件，设备1000发起配置过程。例如，设备1000可进入用于从第二设备接收配置数据(例如，设置、账户信息等)的配置模式。在一些示例中，根据检测到满足接近度条件，设备1000前进至配置过程中的下一个步骤。例如，如果设备1000已经处于配置模式，则满足接近度条件可使得设备1000前进至下一个步骤。例如，可能需要满足接近度条件，以便验证第二设备的身份或验证第二设备的用户具有对设备1000的物理访问权限(例如，不是家庭之外尝试远程访问和配置设备1000的用户)。
图10G-图10J示出了当配置设备时用于使用音频音调信号的示例性技术。图10G描绘了类似于图10F的俯视图，但是另外描绘了设备1000正在输出音频音调信号1014(例如，被描绘为声波的图形表示)。在该示例中，扬声器1000播放可听音调。在一些示例中，该音调是在配置过程开始时的接近握手音调(例如，以发起过程)或者之后在配置过程中(例如，期间)的音调的一部分。在一些实施方案中，音频音调信号对于第一设备和第二设备之间的通信链路是带外的。例如，第一设备和第二设备连接并通过蓝牙无线连接(例如，通信链路)交换数据通信。在该示例中，在设备继续经由蓝牙连接连接(例如，设备检测彼此的蓝牙并执行握手)时，音频音调信号(例如，包括或表示设备之间的通信的可听音调)与该蓝牙通信链路是带外的。在一些实施方案中，对于通信链路是带外的意味着不使用相同的数据交换技术来发送信号(例如，音频音调信号)。在一些示例中，使用不同的数据交换技术可包括使用不同的以下各项中的一个或多个：传输协议(例如，蓝牙、Wi-Fi)、数据载体技术(例如，声音(机械)波而不是光(电磁)波)、硬件(例如，无线天线而不是有线连接器)等。在一些实施方案中，音频音调信号是通过传输介质(例如，可由另一设备检测到)传播的声音。例如，音频音调信号可包括人类可听频率范围(例如，约20赫兹至20,000赫兹)之内的频率，并且/或者包括人类可听频率范围之外的频率。
图10H示出了图10G的俯视图的示例性透视图。可以看出，用户正将第二设备1010保持在远离正在输出音频音调信号1014的设备1000的短距离处。
图10I示出了其中第二设备1010正在输出第二音频音调信号1016(例如，其可被称为响应音频音调信号)的示例性透视图。在一些实施方案中，响应于第二设备检测到设备1000输出的音频音调信号，由第二设备输出响应音频音调信号1016(也被称为“第二音频音调信号”)。例如，设备1010可响应于检测到音调信号1014而立即播放响应音调，以便向设备1000传达：已接收到第一音频音调信号。在一些实施方案中，响应音调信号是在配置过程中的稍后步骤由第二设备输出的音调信号。例如，第一音调信号(例如，1014)可表示配置过程已被发起(例如，并且前进至过程的第一步骤)的可听指示，并且继发起针对第二设备的配置过程之后(例如，使用第一设备)，第二设备可在配置过程的第四步骤输出第二音频音调信号(例如，1016)。在一些实施方案中，响应音调信号包括编码数据。例如，作为针对第二设备的配置过程的一部分，第二设备(例如，已经与用户的账户相关联的个人设备1010)可经由音频音调信号中的编码数据将账户登录信息传递给第一设备(例如，使得设备1000可访问或更新与用户的账户相关联的数据)。例如当通过其他手段来传输此类数据可能不安全(例如，可能被拦截)时，可使用该技术。在一些示例中，如本领域的技术人员将理解的，通过任何适当的技术将数据编码到音频音调信号中。例如，音频音调信号可包括特定频率下表示数据签名的音调。在一些示例中，音频音调信号包括携带数据信息的调制载体声波。
在一些实施方案中，第一设备重复音频音调信号，直到其接收到第二设备检测到该音频音调信号的确认。例如，设备1000可重复音频音调信号1014的输出，直到接收到设备1010检测到信号1014的确认。例如，该确认可以是响应音调(例如，第二音频音调信号1016；“带外”)或两个设备之间通过通信链路(例如，蓝牙、Wi-Fi等；“带内”)的通信。
在一些实施方案中，第一设备重复音频音调信号达预定次数。在一些实施方案中，第一设备重复音频音调信号达预定次数或者直到接收到第二设备检测到该音频音调信号的确认，以先发生者为准。例如，如果未接收到确认(例如，响应音调信号1016)，则设备1000可在其停止重复音调之前重复音频音调信号1014达三次。
在一些实施方案中，第一设备输出口述音频密码。如图10J所示，设备1000输出包括口述文本“密码是061917”的音频音调信号1018。在该示例中，用户可将密码“061917”输入到设备1010中，例如以发起或前进至用于配置第一设备1000的配置过程中的下一个步骤。因此，如果音频音调信号未被第二设备检测到(例如，设备1000未接收到确认)，则设备1000可输出密码的口述，该口令可例如用于前进至配置过程中的下一个步骤或授权两个设备之间的数据交换。例如，用户可将口述的密码输入到设备1010中，或者向设备1000复述该密码(例如，使用语音输入)。因此，如果音频音调信号被用作确认第一设备或第二设备的身份的过程的一部分，但是第二设备不能检测到该音频音调信号，则用户可使用口述的音频密码来实现相同的效果。例如，由于用户听见并输入口述的音频密码，使用该密码确认了设备1010在相对靠近的物理接近度内。
在一些实施方案中，设备1000在视觉上输出编码数据。例如，可使用LED指示器(例如，1006A至1006B)来输出可由另一设备(例如，1010)检测到并且包括或以其他方式表示数据信息的光发射图案或序列。其他设备可例如捕捉或记录光图案并解码数据，或者将捕捉到的数据传输回设备以验证另一设备观察到了光图案。
在一些实施方案中，在配置过程期间，配置数据被设备1000接收并存储。配置数据的示例包括但不限于以下各项中的一个或多个：设备(例如，1000或1010)是否是一组设备(例如，家庭设备，或立体声对)的成员、设备的名称或标识符、与设备相关联的用户、设备的位置(例如，房间名称)、用户账户凭证(例如，用于基于网络或基于云端的服务诸如iCloud、iTunes、Apple Music、Spotify等)。也可在家庭控制应用程序(例如，如图6A所示)中添加或编辑针对设备1000的配置数据。
在一些实施方案中，第一设备被配置为包括在一组设备中。图10K示出了两个设备—第一设备1000和第三设备1020—其组成示例性设备组。如图10K所示，第一设备和第三设备两者都是智能扬声器设备(例如，诸如设备580)。在一些实施方案中，该组设备中的每个设备都被配置为输出音频信道。图10K示出了放置在电视各一侧的第一设备和第三设备。在该示例中，设备1000被配置为输出左音频信道(例如，立体声音频信号的左音频信道)，并且设备1020被配置为输出右音频信道(例如，立体声音频信号的右音频信道)。因此，图10K中的设备可被称为“立体声对”、“立体声组”等。在一些实施方案中，组中的设备被配置为输出相同的信道。例如，重新参考图10K，设备1000和设备1020两者都可被配置为输出相同的音频信号(例如，单信道音频)。在一些示例中，一组设备包括多于两个的设备。例如，图10L示出了包含设备1000、设备1020、设备1022和设备1024的一组设备。如参考图10K所述，该组中的每个设备都可被配置为输出不同的音频信道信号(例如，设备1022上的“左后”信号、设备1024上的“右后”信号、设备1000上的“左前”信号以及设备1020上的“右前”信号)。
在一些实施方案中，一组设备(例如，如图10K和图10L所示)在用于选择用于回放的设备的用户界面处被视为一个设备。例如，图10K的设备1000和设备1020的组可被配置为名为“客厅”的设备组。在一些示例中，多设备界面(例如，图6J的多设备界面610，如上所述)将显示对应于设备1000和设备1020的立体声对的一个单独指示符(例如，图6J的指示符610N)。在一些示例中，单独指示符包括其表示一组设备的指示(例如，图6J的指示符610N可包括两个图形扬声器图标)。
在一些实施方案中，一组设备(例如，如图10K和图10L所示)在用于选择用于回放的设备的用户界面处分开显示。在一些示例中，多设备界面(例如，图6J的多设备界面610，如上所述)包括针对一组设备中的每个设备的单独指示符。例如，重新参考图10K中的组，可使设备1000输出第一媒体项而同时设备1020输出第二媒体项(例如，使用多设备界面诸如图6J的610)。
图10M根据一些实施方案描绘了设备组的示例性简化网络图。在一些实施方案中，第一设备和第三设备在其间建立通信链路并直接与彼此进行通信。例如，图10M描绘了接入点1030，其可表示创建连接到设备1000和设备1020两者的位置区域网络的无线路由器、网络交换机等。在该示例中，设备1000连接到接入点1030(例如，如通信链路1034所示)。在该示例中，设备1020也连接到接入点1030(例如，如通信链路1036所示)。在该示例中，接入点1030是无线路由器，并且设备1000和设备1020连接到由接入点1030生成的同一无线(例如，Wi-Fi)网络。接入点1030还连接到第二设备1010(例如，由通信链路1038示出)以及广域网(例如，互联网)。因此，设备1000和设备1020通过接入点1030连接。在一些示例中，设备1000和设备1020可直接进行通信，免除了经由接入点1030来交换通信的需要。例如，设备1000和设备1020可其间创建Wi-Fi网络(例如，其中一个设备充当另一设备的接入点)。彼此直接进行通信而不是通过组中的每个设备连接到的接入点可提供有用的益处。例如，如果设备1000和设备1020两者与接入点1030的连接都很差，则由于增加的延迟，该组设备上的同时音频回放的同步可能会降级。如果设备1000和设备1020直接在其间具有强大的连接，则延迟问题会减少。此外，在设备1000和设备1020之间直接路由通信通过减少由接入点1030(例如，用户的主家庭Wi-Fi网络)创建的网络上的通信来减少该接入点的带宽的使用。如前所述，在一些示例中，设备1000和设备1020不必被分组以直接进行通信。例如，在一些示例中，设备1000和设备1020可直接原装即用地进行通信，而不由用户配置以形成设备组。
图10M还描绘了设备1010和设备1000之间的通信链路1039。在一些示例中，链路1039是蓝牙连接、Wi-Fi连接等。
在一些实施方案中，设备1000接收许可级别的配置设置，其设置另一设备(例如，1010)必须满足以便控制第一设备的许可条件。例如，该条件可以是另一设备必须连接到同一网络(例如，Wi-Fi网络)。再如，该条件可以是另一设备位于非常接近。在一些示例中，该条件由这些示例条件中的任一者满足。在一些实施方案中，用户可改变许可级别的配置设置。在一些实施方案中，用户可移除许可级别的配置设置(例如，通信范围内的任何设备都可控制设备1000)。
图10N-图10O示出了用于指示配置过程中的进展的示例性技术。在一些示例中，第一设备和第二设备输出同步的音频音调信号。同步音频音调信号例如可用于指示通过配置过程的进展。在一些示例中，在配置过程的每个步骤完成时输出同步音调。例如，图10N示出了设备1000正在输出音频音调信号1042，并且设备1010正在输出音频音调信号1044。音频音调信号1042和音频音调信号1044由其相应的设备在时间上同步输出(例如，输出使得每个音调的至少一部分在重叠时间段期间被播放)。
在一些实施方案中，同步音频音调信号是谐波。因此，在一些示例中，同步音频音调信号是相同的音频频率。例如，音频音调信号1042具有2000赫兹的频率，同时音频音调信号1044具有2000赫兹的频率。在一些示例中，同步音频音调信号中的一个的音频频率是另一频率的音频频率的整数倍。例如，音频音调信号1042具有1000赫兹的频率，同时音频音调信号1044具有2000赫兹的频率。
在一些实施方案中，同步音频音调信号各自是音乐和弦或音阶的不同频率。因此，例如，(例如，对于用户而言)同步音调听起来像它们协调一致。
在一些实施方案中，随后的同步音频音调信号具有不同的音频频率。例如，为了指示配置过程正在进行，同步音频音调信号的频率可在配置过程中的每个后续步骤中增加(例如，渐增)。在图10N所示的示例中，同步音频音调信号1042和同步音频音调信号1044在配置过程中的第一步骤完成时由其相应的设备输出。
现在转向图10O，设备1000输出同步音频音调信号1046，设备1010输出同步音频音调信号1048。在该示例中，信号1046和信号1048继信号1042和信号1044之后被输出，并且在配置过程中的第二步骤完成时被输出。此外，信号1046和信号1048可以是谐波(例如，相同音频频率或相同频率的整数倍)或兼容音调(例如，同一音乐和弦或音阶中的频率)。为了说明同步音频音调信号的频率随着配置过程进展而改变的概念，图10O的绘图1040是有帮助的。绘图1040描绘了频率为2000赫兹的第一点1040A和频率为8000赫兹的第二点1040B。第一点1040A表示在配置过程中的第一步骤之后输出的音频音调信号1042和音频音调信号1044的频率。第二点1040B表示在配置过程中随后的第二步骤之后输出的音频音调信号1046和音频音调信号1048的频率。在一些示例中，随着配置过程期间的进展前进，同步音频音调信号的频率降低。因此，使用同步音频音调信号，第一设备和第二设备可以可听地向用户指示配置过程的进展。例如，音频音调信号可以给人接近声音渐增或最终完成频率的印象。如技术人员将理解的，可使用同步音频音调信号来指示涉及两个或更多个设备的其他过程的进展。此外，应当显而易见的是，可配置多于两个的设备来输出同步音频音调信号。
图11A-图11D是示出了根据一些实施方案的用于使用第二设备来配置电子设备的方法的流程图。在设备(例如，100、300、500、580)处执行方法1100。方法1100中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1100提供了用于使用第二设备来配置第一设备的直观方式。该方法减轻了用户在使用第二设备来配置第一设备时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地使用第二设备来配置第一设备节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1000)检测(1102)电子设备(例如，图10F的1000)和第二设备(例如，图10F的1010)之间的物理接近度满足接近度条件(例如，设备1010在接近度区域1008内，如图10F所示)的指示，其中该电子设备(例如，1000)经由通信链路(例如，1039)连接到第二设备(例如，1010)。在一些示例中，电子设备和第二设备经由无线数据传输协议(例如，蓝牙、Wi-Fi等)连接。在一些实施方案中，使用近场通信技术来检测指示。
根据检测到指示，电子设备可听地输出(1104)音频音调信号(例如，1014)，其中该音频音调信号对于该通信链路(例如，1039)是带外的。例如，该设备是播放音调的扬声器。在一些示例中，该音调是配置过程开始时的接近握手音调。在一些示例中，在配置过程期间(例如，在其开始之后)由扬声器播放该音调。在一些实施方案中，对于通信链路是带外的意味着不使用相同的数据交换技术来发送信号(例如，音频音调信号)。
使用对物理接近度的检测允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
继输出音频音调信号(例如，1014)之后，电子设备(例如，1000)确定(1106)是否已接收到来自第二设备(例如，1010)的响应音频音调信号(例如，1016)。
根据确定已接收到来自第二设备(例如，1010)的响应音频音调信号(例如，1016)，电子设备(例如，1000)前进(1108)至配置过程中的下一个步骤。在一些实施方案中，配置过程包括接收针对电子设备的一个或多个配置设置。在一些示例中，配置设置包括以下各项中的一个或多个：电子设备的位置(例如，房间名称)、设备标识符(例如，名称)、电子设备是否是一组设备的成员(例如，扬声器的立体声对的左信道或右信道)、用户账户凭证(例如，允许电子设备登录到基于云端的服务)、音频输出偏好(例如，语言、音量)、内容限制(例如，父母控制)等。
根据确定已接收到响应音频音调信号而前进至配置过程中的下一个步骤允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
根据确定未接收到来自第二设备的响应音频音调信号，电子设备(例如，1000)放弃(1110)前进至配置过程中的下一个步骤。例如，如果设备在输出音频音调信号之后的阈值时间量内没有检测到响应音频音调信号(例如，1016)，则设备可暂停(例如，停止收听响应音频音调信号)、可重复音调或大声口述音频密码。
在一些实施方案中，响应音频音调信号(例如，1016)表示(1112)音频音调信号(例如，1014)被第二设备(例如，1010)检测到的指示。
在一些实施方案中，音频音调信号(例如，1014)和响应音频音调信号(例如，1016)中的至少一个包括(1114)编码数据。在一些实施方案中，编码数据包括输出设备的身份的指示。例如，编码数据可包括从一个设备发送到另一设备的数据的可听表示。可听地输出来自一个设备的数据使得另一设备可检测到该数据(例如，使用麦克风)可提供第二设备和电子设备在彼此相对靠近的物理接近度内的充分指示。在一些实施方案中，编码数据包括用户账户凭证。例如，编码数据可包括表示用于基于云端的服务(例如，iCloud登录信息)、媒体流传输服务(例如，Apple Music)的用户账户信息的数据，或用于确认应当给电子设备(例如，1000)提供对用户的账户或个人数据的访问权限的数据。
在一些实施方案中，响应音频音调信号(例如，1016)包括编码数据，并且进一步根据确定已接收到(1116)来自第二设备(例如，1010)的响应音频音调信号，电子设备(例如，1000)将响应音频音调信号的编码数据转换(1118)为解码数据。在一些实施方案中，电子设备(例如，1000)使用(1120)解码数据的至少一部分来登录到基于云端的服务的用户账户。例如，如果编码数据包括用于基于云端的服务(例如，iCloud)的登录凭证，则电子设备将编码数据解码为账户用户名称和/或密码，并登录到基于云端的服务。
在一些实施方案中，响应音频音调信号(例如，1016)包括确认第二设备(例如，1010)的身份的数据。例如，编码的数据可以是被传输到第二设备作为音调回放的数据，或者可以是与第二设备相关联的唯一标识符。
在一些实施方案中，电子设备(例如，1000)包括存储器，并且电子设备从第二设备(例如，1010)接收(1122)一个或多个配置设置。响应于接收到所述一个或多个配置设置，电子设备将该配置设置存储(1124)在电子设备的存储器中。在一些示例中，配置设置包括如上所述的设置中的一个或多个设置。
在一些实施方案中，所述一个或多个配置设置包括表示电子设备(例如，1000)的物理位置的位置标识符。例如，位置标识符可包括房间标识符诸如“客厅”、“卧室”、“卧室2”、“厨房”、“Tim的房间”等。在一些实施方案中，位置标识符与电子设备(例如，1000)相关联并被发送到其他设备(例如，1010)。例如，该标识符可用于多设备界面(例如，图6J的610)中或设备管理应用程序(例如，如图6A所示)中以提供对设备直观和/或描述性的识别。
在一些实施方案中，所述一个或多个配置设置包括(1126)电子设备(例如，1000)被包括在设备组(例如，包含图10K的设备1000和设备1020的组)中的指示，其中该设备组包括该电子设备(例如，图10K的1000)和第三设备(例如，图10K的1020)。例如，设备组包括被配置为协调(例如，同步)媒体(例如，音频)的输出的两个或更多个设备(例如，智能扬声器)。在一些实施方案中，设备组中的设备(例如，扬声器对，诸如分别为图10K的左信道1000和右信道1020)被视为一个单元。例如，设备组中的设备可通过单个设备组标识符(例如，“客厅”)而不是作为单独设备被识别(例如，在多设备用户界面处)。因此，用于“在客厅播放音频”的命令会使得组“客厅”中的所有设备播放音频。
在一些实施方案中，第一设备(例如，1000)和第二设备(例如，1010)经由接入点(例如，1030)连接(1128)到局域网。在一些实施方案中，电子设备(例如，1000)建立到第三设备(例如，图10M的1020)的通信链路(例如，1032)，其中到第三设备的通信链路不包括接入点(例如，1030)。在一些实施方案中，通信链路利用无线通信协议。在一些实施方案中，通信链路是电子设备和第三设备之间的有线连接。在一些示例中，接入点是网络路由器、网络交换机或用于通信耦接多个设备的其他硬件。在一些实施方案中，电子设备(例如，1000)使用到第三设备(例如，1010)的通信链路(例如，1032)来与第三设备同步(1130)媒体回放。
在一些实施方案中，为了可听地输出音频音调信号(1132)，电子设备(例如，1000)可听地输出(1134)音频音调信号(例如，1014)并且确定(1136)第二设备(例如，1010)是否检测到该音频音调信号。在一些实施方案中，确定第二设备是否检测到该音频音调信号包括确定是否通过通信链路(例如，1038)接收到表示第二设备(例如，1010)检测到该音频音调信号(例如，1014)的确认的数据。在一些实施方案中，电子设备接收到(例如，检测到)来自第二设备(例如，1010)的表示第二设备检测到音频音调信号(例如，1014)的确认的响应音频音调信号(例如，1016)。根据确定第二设备(例如，1010)未检测到音频音调信号(例如，1014)，电子设备(例如，1000)重复(1138)可听地输出音频音调信号(例如，1014)。例如，电子设备再次(或n次)播放音调(例如，1014)。根据确定第二设备检测到音频音调信号，电子设备放弃(1140)重复可听地输出音频音调信号。
在一些实施方案中，进一步根据确定第二设备(例如，1010)未检测到音频音调信号(例如，1014)，电子设备(例如，1000)确定(1142)该音频音调信号是否已被可听地输出达阈值次数。根据确定该音频音调信号已被可听地输出达阈值次数，电子设备(例如，1000)可听地输出(1144)口述密码(例如，图10J的1018)。例如，阈值次数可以是三次。因此，如果电子设备播放一次音调(例如，1014)并且此后重复该音调两次而没有接收到第二设备检测到该音频音调信号的确认(例如，1016)，则电子设备可(例如，在第四次发生时)输出口述密码而不是重放该音调。在一些实施方案中，密码包括一个或多个字母数字字符。在一些实施方案中，可听地输出口述密码包括读出密码的单独字符。例如，使用文本转语音算法来可听地输出密码(例如，作为短语、作为单独字符)。在一些实施方案中，可听地输出口述密码包括读出短语(例如，由多个字母数字字符形成)。根据确定该音频音调信号未被可听地输出达阈值次数，电子设备放弃(1146)可听地输出口述密码。在一些实施方案中，电子设备重复输出音频音调信号直到达到阈值次数。
在一些实施方案中，音频音调信号(例如，1014)是第一音频音调信号，并且响应于从配置过程中的第一步骤进展到配置过程中的第二步骤，电子设备(例如，1000)输出第二音频音调信号(例如，图10N的1042)，其中第二音频音调信号与由第二设备(例如，1010)输出的第三音频音调信号(例如，图10N的1044)的输出同时输出，并且其中第二音频音调信号和第三音频音调信号是谐波。例如，第二音频音调信号和第三音频音调信号是相同频率或者是相同频率的整数倍。在一些示例中，电子设备和第二设备的谐波频率的同时输出可向用户提供通过配置过程的进展的可听反馈。例如，较高音(例如，较高频率)的音调可指示配置过程接近完成。因此，可以直观的方式提供通过配置过程的相对或绝对进展。
在一些实施方案中，响应于从配置过程中的第二步骤进展到配置过程中的第三步骤，电子设备(例如，1000)输出第四音频音调信号(例如，图10O的1046)，其中第四音频音调信号与由第二设备(例如，1010)输出的第五音频音调信号(例如，图10O的1048)的输出同时输出，其中第四音频音调信号和第五音频音调信号是谐波，并且其中第四音频音调信号是比第二音频音调信号更高的频率音调(例如，如1040所示)。在一些示例中，随着通过配置过程的进展增加，同时播放的音调的频率逐步升高。
在一些实施方案中，继前进至配置过程中的下一个步骤之后，电子设备(例如，1000或1906)通过语音助理输出可听语音提示，提示用户提供调用语音助理的一个或多个功能的用户语音输入(例如，如图19AL所示，其中设备1906输出可听语音提示“现在您试试说‘嘿，放点儿音乐。’”)。电子设备(例如，1000或1906)接收调用语音助理的第一功能(例如，音乐功能，也被称为音乐特征)的用户语音输入(例如，“嘿，放点儿音乐”)。响应于接收调用语音助理的第一功能的用户语音输入，电子设备(例如，1000或1906)执行第一功能(例如，开始播放音乐)。例如，在配置过程完成之后，设备1000调用个人数字助理，其提示用户提供关于设备1000能够执行的一个或多个特征的语音命令。
由语音助理输出提示用户提供调用语音助理的一个或多个功能的用户语音输入的可听语音提示给用户提供了关于设备的能力和状态的信息。为用户提供此类信息增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，可听语音提示是用于提供用于执行语音助理的第一功能(例如，音乐功能)的命令的提示，并且用户语音输入是用于执行语音助理的第一功能的命令(例如，“嘿，放点儿音乐”)。例如，该提示和与所接收的命令相同的功能关联。
在一些实施方案中，可听语音提示是用于提供用于执行语音助理的第二功能(例如，天气功能)的命令的提示，并且用户语音输入是用于执行语音助理不同于第二功能的第一功能(例如，音乐功能)的命令。例如，该提示和与所接收的命令不同的功能关联，但不管怎样，设备1000执行相应的动作。因此，设备1000可输出语音提示“现在您试试说‘嘿，来点儿新闻’”，但是如果用户用语音命令“嘿，放点儿音乐”来响应的话，则执行音乐功能。
在一些实施方案中，根据执行第一功能，电子设备(例如，1000或1906)将与第一功能相关的数据传输到第二设备(例如，设备1010或设备1900)。
在一些实施方案中，电子设备(例如，1000或1906)从第二设备接收许可级别的配置设置，其设置另一设备必须满足以便控制第一设备的许可条件。在一些实施方案中，许可条件是另一设备和第一设备必须连接到同一局域网。在一些实施方案中，许可条件是另一设备和第一设备在阈值物理接近度内。
在一些实施方案中，在建立连接第一设备(例如，1000或1906)和第二设备(例如，1010或1900)的通信链路之前，电子设备(例如，1000或1906)检测第一设备和第二设备之间的物理接近度满足接近度条件的指示。响应于检测到第一设备和第二设备之间的物理接近度满足接近度条件的指示，电子设备(例如，1000或1906)输出音频音调信号。在一些实施方案中，第一设备和第二设备(例如，1000和1010)两者都响应于满足接近度条件而播放音调。
使用第一设备和第二设备之间的物理接近度满足接近度条件的指示以便输出音频音调信号给用户提供了关于第一设备的状态的听觉反馈。例如，当附近存在其他可配置的潜在设备时，音频音调信号可指示将配置哪个设备。为用户提供改进的反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
需注意，上文相对于方法1100所述的过程(例如，图11A-图11D)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法1100所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图12A-图12AM根据一些实施方案示出了用于控制媒体回放的示例性用户界面。这些附图中的用户界面被用于示出包括图13A-图13F中的过程的下文描述的过程。
如上所述(例如，相对于图10A-图10F)，设备可使用对接近度条件的满足来执行一个或多个功能。一个设备到另一设备的接近度的使用可用作用户(例如，手持其中一个设备)想要在设备中的一者或两者上执行某个动作(例如，调用界面)的明确指示符。例如，这可通过避免为了执行功能的过度用户输入(例如，为了在设备显示器上导航一个或多个菜单)来阻止浪费设备资源。此外，这也可以节省用户时间，例如，通过减少执行功能(例如，在显示器上调用界面)所需的用户输入的数量。
在一些示例中，对两个设备之间的接近度条件的满足可用作用户(例如，设备中的一个、移动设备的用户)想要将媒体回放传输到/从一个设备(例如，移动设备)传输到另一设备(例如，固定的智能扬声器)的指示。下文描述示例性技术。
图12A-图12F示出了示例性场景，其中第一设备和第二设备当被放置成处于非常接近时没在回放媒体内容。
图12A示出了示例性场景，其中用户正在处于非常接近设备1202(例如，智能扬声器，诸如设备580)的地方手持设备1200(例如，个人设备，诸如设备100、300、500)。在一些实施方案中，设备1200包括设备100、300或500的一个或多个特征。因此，图12A类似于图10E，对后者的描述据此以引用方式并入。在图12A所描绘的示例中，设备1200和设备1202两者当前都没在输出音频(例如，没在回放媒体)。在图12A所描绘的示例中，设备1200和设备1202之间的物理距离满足接近度条件。在一些示例中，设备1200检测满足接近度条件的指示(例如，并且作为响应，发起与设备1202的通信，例如以发送满足条件的指示)。在一些示例中，设备1202检测满足接近度条件的指示(例如，并且作为响应，发起与设备1200的通信，例如以发送满足条件的指示)。
应当注意的是，图12A和接着的附图未必按照比例绘制，并且仅被包括为视觉辅助。因此，除非另有说明，否则它们不旨在作为对为了处于非常接近或者为了满足接近度条件所需的距离的限制。
图12B示出了示例性媒体信息界面。图12B还描绘了图12A的场景的俯视图。可以看出，设备1200在接近度区域1204(也被称为接近度条件范围指示符1204)内(例如，该设备的至少一部分在该接近度区域内部)。设备1200在接近度条件范围指示符1204内部，因此满足接近度条件。如本文所用的短语“非常接近”或“处于非常接近”指的是其中两个设备之间的物理距离满足接近度条件的场景(例如，如图12B和图10F所示)。接近度条件范围指示符1204作为视觉辅助被包括，并且旨在表示将满足接近度条件的物理接近度。例如，范围指示符1204可表示设备1202的近场通信检测电路的范围。因此，可检测设备(例如，部分地或完全地)在接近度条件范围指示符1204内的存在将满足接近度条件，但是如果可检测设备位于范围指示符1204之外则不会。技术人员将理解的是，物理接近度的检测范围可能是不均匀的、可受到多种变量(例如，无线干扰、空气湿度、设备取向等等)影响，并且可包括三维空间中的点，所有这些都被预想在本公开的范围内。因此，接近度条件范围指示符1204不旨在作为对确定是否满足接近度条件的范围的限制。
图12B示出了显示在设备1200的显示器1206上的媒体信息界面1208。在一些实施方案中，设备1200包括设备100、300或500的一个或多个特征。在一些示例中，响应于设备1200被(例如，短暂地或持续地)放置成与设备1202处于非常接近，显示媒体信息界面1208。因此，因为媒体信息界面1208响应于设备被放置成处于非常接近而显示，所以它可被称为一种类型的“感应卡”或者特别地称为“媒体感应卡”。
在图12B所示的示例中，设备1202是与位置(或名称)“厨房”相关联的设备，并且是扬声器(例如，智能扬声器)。因此，感应卡1208包括标题1208B“厨房扬声器”，在视觉上指示用户将设备1200放置成与其处于非常接近的扬声器的名称。感应卡1208还包括表示媒体内容的专辑示能表示1208A以及描述媒体内容的状况的标识符1208C。在该示例中，感应卡1208中显示的媒体内容是最近在第二设备即设备1202(例如，厨房扬声器)上播放的内容。因此，在该示例中，当设备1200或设备1202当前都没在回放媒体内容时，将设备放置成处于非常接近使得设备1200显示用于查看最近播放的媒体的界面。在一些示例中，最近播放的媒体最近由第一设备(例如，设备1200)播放。在一些示例中，最近播放的媒体是最近在设备1200和设备1202两者上播放的媒体。在一些实施方案中，当设备1200和设备1202中的一个或多个当前正在回放媒体时，显示感应卡1208。
在图12C中，设备1200接收专辑示能表示1208A上的用户输入1210。在一些示例中，用户输入1210是在设备1200处接收到的轻击、触摸、深按压或按压和保持输入。在一些示例中，在第一设备(例如，设备1200)不再处于非常接近第二设备(例如，设备1202)之后，第一设备继续显示感应卡。
在图12D中，响应于接收到用户输入1210，设备1200显示当前媒体界面1212。当前媒体界面1212(也被称为“正在播放屏幕”1212)描绘了当前正在回放(例如，在设备1202上)的一个或多个媒体项。界面1212包括媒体项(例如，来自专辑“Fly Away”的由艺术家“Jambug”所作的标题为“Same Thing”的歌曲)的标识符1212A、专辑封面1212B和设备选择示能表示1212C。如上所述，设备选择示能表示可指示设备的当前焦点。在该示例中，图12D描绘了当前媒体界面1212指向厨房扬声器。因此，响应于对示能表示1208A(例如，表示媒体项)的用户输入选择，设备1200传输指令到设备1202以发起对应媒体项的回放，并且更新设备1200的显示器以包括回放控件和设备1202的媒体状况。因此，给用户提供了用于使用第一设备(例如，个人设备1200)快速地在第二设备(例如，厨房扬声器)上开始和控制媒体回放的便捷技术。
在一些示例中，当前媒体界面被显示在设备1200的锁定屏幕上。例如，可在设备1200被锁定时显示感应卡1208，并且在保持锁定时，设备接收使得设备发起媒体的回放并更新锁定屏幕(例如，以显示界面1212)的用户输入。
图12E-图12F根据一些实施方案示出了用于在媒体信息界面内浏览媒体的示例性技术。在图12E中，设备1200接收示能表示1208A上的用户输入1214，其中示能表示1208B可见。图12F示出了向左移位的用户输入1214。在该示例中，用户输入1214是感应卡1208的最近播放媒体示能表示上的向左轻扫。在一些实施方案中，用户输入1214沿着任何方向(例如，上、下、左、右等)的方向性轻扫。如图12F所示，表示媒体项的示能表示已根据用户输入1214移位。示能表示1208B现在在感应卡内居中，并且示能表示1208C(例如，表示第三媒体)现在可见。
图12G-图12N示出了示例性场景，其中第一设备和第二设备当被放置成处于非常接近时两者都在回放媒体内容。
图12G示出了示例性场景，其中用户正在处于非常接近设备1202(例如，智能扬声器)的地方手持设备1200(例如，个人设备)。因此，图12G类似于图12A，对后者的描述据此以引用方式并入。在图12G所描绘的示例中，设备1200和设备1202两者当前都在输出音频，如由声波1216(来自设备1200)和声波1218(来自设备1202)所表示的。
图12H示出了设备1200和设备1202在其被放置成处于非常接近之前的状态。可以看出，设备1200当前正在回放第一媒体项，如当前媒体界面1220所呈现的。媒体指示符1220A识别当前在设备1200上播放的标题为“Monday Morning”的歌曲、专辑封面1220B、设备选择示能表示1220C(指示设备1200指向其自身—名为“iPhone”的设备)以及回放控制示能表示1220D。设备1202当前也正在回放媒体项—由艺术家“Jambug”所作的标题为“SameThing”的歌曲，如由媒体状态1222所表示的。
图12I示出了示例性媒体信息界面。图12I还描绘了图12G的场景的俯视图。可以看出，设备1200在接近度区域1204(也被称为接近度条件范围指示符1204)内(例如，该设备的至少一部分在该接近度区域内部)。设备1200在接近度条件范围指示符1204内部，因此处于非常接近(例如，满足接近度条件)。
图12I示出了显示在设备1200的显示器1206上的媒体信息界面1224。在一些示例中，响应于设备1200被(例如，短暂地或持续地)放置成与设备1202处于非常接近，显示媒体信息界面1224。因此，因为媒体信息界面1224响应于设备被放置成处于非常接近而显示，所以它也可被称为“感应卡”或者特别地称为“媒体感应卡”。
在图12I所示的示例中，设备1202是与位置(或名称)“厨房”相关联的设备，并且是扬声器(例如，智能扬声器)。因此，感应卡1224包括标题1224B“厨房扬声器”，在视觉上指示用户将设备1200放置成与其处于非常接近的扬声器的名称。感应卡1224还包括表示媒体内容(例如，媒体项)的专辑示能表示1224A和专辑示能表示1224D。感应卡1224还包括用于控制厨房扬声器的音量的音量控制示能表示1224C。在该示例中，在感应卡1224中显示的媒体内容是当前在设备1200上播放的内容(例如，示能表示1224A)以及其他媒体项(例如，示能表示1224D)，例如最近在第一设备1200上播放的媒体。感应卡1224包括在示能表示1224A下方的标识符1224B，其指示哪个设备(例如，如果有的话)当前正在回放对应于示能表示1224A的媒体项。在该示例中，标识符1224B包括图形(例如，其可以动画形式显示以传达该音乐当前正在播放)和文本“来自iPhone”，在该示例中，该文本指的是设备1200。感应卡1224提供允许用户将设备“厨房扬声器”添加到当前回放会话(例如，设备1200上“MondayMorning”的回放会话)中的界面。
如图12I所示，感应卡1224还包括设备选择示能表示1224E。在一些示例中，设备选择示能表示1224E可用于改变感应卡的焦点。例如，如果用户期望将iPhone(例如，设备1200)添加到厨房扬声器的媒体会话(例如，如图12H所示的歌曲“Same Thing”的回放)，则他们可选择示能表示1224E并将所指向的设备(例如，感应卡1224所指向的设备)改变为iPhone，然后选择与媒体项“Same Thing”相关联的指示符。例如，在接收到1224E上的用户输入以及对设备“iPhone”的选择(例如，经由下拉菜单等)之后，设备1200更新示能表示1224A的显示以示出歌曲“SameThing”的专辑封面，并且更新标识符1224B以包括文本“来自厨房扬声器”。
在一些实施方案中，感应卡与当前媒体界面同时显示。在一些实施方案中，感应卡的显示替换当前媒体界面的一部分的显示。例如，图12I示出了感应卡1224已替换(图12H的)当前媒体界面1220的专辑封面1220B。在一些实施方案中，感应卡不与当前媒体界面同时显示。例如图12E的感应卡1208当前不与当前媒体界面(例如，图12H的1220)一起显示。
在图12J中，设备1200接收表示对示能表示1224A的选择的用户输入1226。响应于用户输入1226，设备1200显示当前媒体界面1228，如图12K所示。当前媒体界面1228表示界面12H的更新版本。可以看出，设备选择指示符1228D已被更新以指示厨房扬声器已被添加到针对歌曲“SameThing”的媒体会话—随附文本现在写着“iPhone+厨房”。媒体指示符1228A识别当前在设备1200和设备1202上播放的标题为“MondayMorning”的歌曲、回放控制示能表示1228B、专辑封面1228C、设备选择示能表示1228D(指示设备1200指向其自身—名为“iPhone”的设备，并且也指向厨房设备组)。
图12L-图12N示出了用于控制第二设备上的媒体回放的示例性界面。在一些示例中，图12I的示能表示1224E可用于改变感应卡的功能。例如，用户可能期望控制包括第二设备(例如，设备1202)的现有媒体会话的回放，而不是将第二设备添加到第一设备(例如，设备1200)的媒体会话。例如，重新参考图12H，用户可能想要保持当前正在两个设备上回放的两个独立的媒体会话，但是想要控制第二设备1202上的回放。在一些示例中，设备接收对图12I的示能表示1224E的选择，并且根据该选择(例如，在没有另外用户输入的情况下)，随后将所显示的感应卡改变为当前媒体界面感应卡1230，如图12L所示。在该示例中，图12L的感应卡1230替换图12I的感应卡1224的显示。感应卡1230是一种类型的当前媒体界面，但在其在视觉上被呈现为感应卡(例如，具有被显示的边界，并且占据小于显示器1206的全部)，以在视觉上指示其表示针对被放置成与设备1200处于非常接近的设备的当前媒体界面。在一些实施方案中，根据对1224E的选择，设备1200显示当前媒体界面，诸如图12H中示出的当前媒体界面(例如，全尺寸)。
感应卡1230包括指示感应卡的当前焦点(例如，厨房扬声器)的标识符1230A、识别当前正由所指向的设备回放的媒体项(例如，由“Jambug”所作的歌曲“Same Thing”)的媒体标识符1230B以及用于控制当前媒体会话的回放的回放控制示能表示1230C。
在图12M中，设备1200接收与回放控制示能表示1230C相关联的用户输入1232。在该示例中，用户输入是选择“下一曲目”示能表示。用户输入1232可以是轻击、触摸、深按压、轻击和保持输入等。
在图12N中，响应于用户输入1232，设备1200更新媒体标识符1230B的显示以识别下一曲目(例如，由“The Fomoers”所作的歌曲“Tuesday Morning”)。
图12O-图12W示出了示例性场景，其中当被放置成与第二设备处于非常接近时仅第一设备在回放媒体内容。
图12O示出了示例性场景，其中用户正在处于非常接近设备1202(例如，智能扬声器)的地方手持设备1200(例如，个人设备)。因此，图12O类似于图12A，对后者的描述据此以引用方式并入。在图12O所描绘的示例中，设备1200当前正在输出音频，如由声波1234(来自设备1200)所表示的，并且设备1202当前没在输出音频(例如，没有媒体回放)。
图12P描绘了设备1200紧接着在被放置成与设备1202处于非常接近之前的状态。可以看出，设备1200当前正在回放第一媒体项，如由(例如，上文相对于图12H描述的)当前媒体界面1220所指示的。媒体指示符1220A识别当前在设备1200上播放的标题为“MondayMorning”的歌曲。
图12Q示出了示例性媒体信息界面。图12Q示出了显示在设备1200的显示器1206上的媒体信息界面1236。在一些示例中，根据检测到设备1200与设备1202处于非常接近，设备1200显示媒体信息界面1236。例如，响应于检测到设备1200(例如，设备的至少一部分)在设备1202的接近度区域1204(也被称为接近度条件范围指示符1204)内，显示媒体信息界面1236。因此，满足接近度条件。
在一些示例中，响应于设备1200被(例如，短暂地或持续地)放置成与设备1202处于非常接近，显示媒体信息界面1236。因此，因为媒体信息界面1236响应于设备被放置成处于非常接近而显示，所以它也可被称为“感应卡”或者特别地称为“媒体感应卡”。
在图12Q所示的示例中，设备1202是与位置(或名称)“厨房”相关联的设备，并且是扬声器(例如，智能扬声器)。因此，感应卡1236包括标题1236A“厨房扬声器”，在视觉上指示用户将设备1200放置成与其处于非常接近的设备(例如，也被称为感应卡的“焦点”或“指向”)的名称。感应卡1236还包括动作指示符1236B(例如，箭头)，指示感应卡上的用户输入手势(例如，沿着箭头的方向)将使得设备执行动作。同样，动作指示符1236D(文本“推送以播放”)向用户指示感应卡1236上的用户输入将使得设备采取动作。另外，感应卡1236包括表示媒体内容(例如，一个或多个媒体项)的媒体示能表示1236C。在该示例中，媒体示能表示1236C包括由艺术家“The Fomoers”所作的标题为“MondayMorning”的曲目的专辑封面(例如，如图12P所示)。在一些示例中，媒体示能表示1236C包括一个或多个媒体项的其他类型的视觉指示(例如，文本、图像或其他适当的视觉表示)。在该示例中，由感应卡1236表示的媒体内容(例如，由示能表示1236C表示)是当前在设备1202(例如，厨房扬声器)上播放的内容。感应卡1236提供允许用户将设备“厨房扬声器”添加到当前媒体会话(例如，设备1200上“Monday Morning”的回放会话)的界面。
图12R-图12U示出了与媒体控制界面的示例性推送交互。在图12R中，设备1200接收感应卡1236上的用户输入1238。在图12S中，用户输入1238已经移动划过显示器(例如，沿着动作指示符1236B的方向)。在该示例中，用户输入1238是方向性轻扫手势。图12R还示出了感应卡1236已根据方向性轻扫手势用户输入1238移动了在显示器1206上的位置，该位置将被称为“推送位置”。
在一些示例中，设备1200要求在作为响应而执行动作之前将感应卡1236保持在推送位置达阈值时间量。在一些示例中，设备1200提供朝满足阈值时间量的进展的视觉指示。例如，图12T示出了推送进展指示符1236E，其是部分完成的环。在一些示例中，可使用其他类型的指示符。因此，在图12T的示例中，感应卡1236被保持在推送位置所经过的时间约为必要阈值时间的四分之一。在一些实施方案中，如果用户输入(例如，1238)满足附加标准，则可免除(例如，覆写)满足在推送位置中达阈值时间量的要求。例如，如果用户输入是深按压或者经过显示器边缘的轻扫(例如，通过推送位置并且滑离显示器1206的顶边缘)，则作为响应设备可立即执行推送功能。
响应于用户输入1238，作为响应，设备1200执行动作。在一些实施方案中，设备1200将媒体回放“推送”到设备1202上。在一些示例中，设备1200在设备1202上发起由感应卡1236表示的媒体项的回放(例如，响应于用户输入1238而向设备1202传输指令)。在一些示例中，响应于用户输入1238，设备1200上的回放停止。图12U示出了推送动作完成(例如，用户输入1238将感应卡1236保持在推送位置达长于阈值持续时间的时间)时的感应卡1236。如图所示，感应卡1236现在包括确认1236F(“在厨房扬声器上播放”)并且推送进展指示符1236E现在包括复选标记。因此，在该示例中，当设备1200的显示器1206如图12U所示出现时，设备1202当前正在回放媒体项“Monday Morning”。
图12V示出了示例性当前媒体界面1220。继设备1200接收到将回放推送到厨房扬声器的用户输入1238之后，显示当前媒体界面1220。因此，设备1200更新设备选择指示符1220C以指示设备(例如，当前媒体会话中的设备)的当前焦点是厨房扬声器。因此，在该示例中，设备iPhone(例如，设备1200)上的回放停止并且音频回放被切换到厨房扬声器。在一些实施方案中，推送回放包括在目标设备上发起回放(例如，切换回放)和停止当前设备(例如，1200)上的回放。在一些实施方案中，推送播放包括在目标设备上发起回放(例如，切换回放)和继续当前设备(例如，1200)上的回放。
图12W根据一些实施方案示出了用于将媒体推送到第二设备的另选技术。图12W描绘了当前媒体界面1220，如相对于图12P所述。特别地，设备1200当前指向其自身(“iPhone”)。设备1200接收设备选择示能表示1220C上的用户输入1239。在一些示例中，响应于用户输入1239，显示多设备界面。如上所述，多设备界面可用于将第二设备(例如，1202)添加到当前媒体会话(例如，有效地向其推送回放)。
根据一些实施方案，如果设备处于非常接近达大于阈值时间长度的时间长度，则媒体内容自动从第一设备传输到第二设备。例如，如果设备1200被放置成与设备1202处于非常接近达长于阈值时间长度(例如，5秒)的时间，则设备1200可自动(例如，在没有进一步用户输入的情况下)将媒体的回放传输到设备1202。这可被称为“自动推送”或“自推送”。根据一些实施方案，如果设备处于非常接近达大于阈值时间长度的时间长度，则媒体内容自动从第二设备传输到第一设备。例如，如果设备1200被放置成与设备1202处于非常接近达长于阈值时间长度(例如，5秒)的时间，则设备1202可自动(例如，在没有进一步用户输入的情况下)将媒体的回放传输到设备1200。这可被称为“自动拉取”或“自拉取”。当用户将设备放置成与另一设备处于非常接近达延长的时间段时，这可能是用户希望在设备之间传输回放的强烈指示。例如，用户可在进入他们的家之后将其智能电话放置在其智能扬声器(例如，580)旁边，并且让他们正在耳机中听的内容开始在其家庭音响系统上播放，无需在任何设备处的进一步输入。因此，通过自动从个人电子设备推送或拉取内容，减少了用于传输媒体回放的用户输入的数量。
图12X-图12AG示出了示例性场景，其中当被放置成与第一设备处于非常接近时仅第二设备在回放媒体内容。
图12X示出了示例性场景，其中用户正在处于非常接近设备1202(例如，智能扬声器)的地方手持设备1200(例如，个人设备)。因此，图12X类似于图12A，对后者的描述据此以引用方式并入。在图12X所描绘的示例中，设备1200当前没在输出音频，并且设备1202当前正在输出音频(例如，媒体回放)，如由声波1240(来自设备1202)所表示的。
图12Y示出了示例性媒体信息界面。在一些示例中，根据检测到设备1200与设备1202处于非常接近，设备1200显示媒体信息界面1242。例如，响应于检测到设备1200在设备1202的接近度区域1204(也被称为接近度条件范围指示符1204)内(例如，设备的至少一部分在该接近度区域内部)，显示媒体信息界面1242。因此，满足接近度条件。
图12Y示出了显示在设备1200的显示器1206上的媒体信息界面1242。在一些示例中，响应于设备1200被(例如，短暂地或持续地)放置成与设备1202处于非常接近，显示媒体信息界面1242。因此，因为媒体信息界面1242响应于设备被放置成处于非常接近而显示，所以它也可被称为“感应卡”或者特别地称为“媒体感应卡”。
在图12Y所示的示例中，感应卡1242包括标题1242A“iPhone”，在视觉上指示是感应卡动作的目标(例如，将响应于感应卡上适当的用户输入而接收媒体回放)的设备(例如，设备1200)的名称。感应卡1242还包括动作指示符1242C(例如，箭头)，指示感应卡上的用户输入手势(例如，沿着箭头的方向)将使得设备执行动作。同样，动作指示符1242D(文本“下拉以在iPhone上播放”)向用户指示感应卡1242上的用户输入将使得设备采取动作。另外，感应卡1242包括表示媒体内容(例如，一个或多个媒体项)的媒体示能表示1242B。在该示例中，媒体示能表示1242B包括由艺术家“Jambug”所作的标题为“Same Thing”的曲目(例如，其当前在设备1202上播放)的专辑封面。在一些示例中，媒体示能表示1242B包括一个或多个媒体项的其他类型的视觉指示(例如，文本、图像或其他适当的视觉表示)。在该示例中，由感应卡1242表示的媒体内容(例如，由示能表示1242B表示)是当前在设备1202(例如，厨房扬声器)上播放的内容。感应卡1242提供允许用户将设备“iPhone”(例如，1200)添加到处于非常接近的另一设备(例如，设备1202)的当前媒体会话(例如，设备1202上“Same Thing”的回放会话)的界面。
图12Z-图12AC示出了与媒体控制界面的示例性拉取交互。在图12Z中，设备1200接收感应卡1242上的用户输入1244。在图12AA中，用户输入1244已经移动划过显示器(例如，沿着动作指示符1242C的方向)。在该示例中，显示器1206是触敏显示器。在该示例中，用户输入1244是方向性轻扫手势。图12AA还示出了感应卡1242已根据方向性轻扫手势用户输入1244移动了在显示器1206上的位置，该位置将被称为“拉取位置”。
在一些示例中，设备1200要求在作为响应而执行动作之前将感应卡1242保持在拉取位置达阈值时间量。在一些示例中，设备1200提供朝满足阈值时间量的进展的视觉指示。例如，在图12AB中示出了拉取进展指示符1242E，其是部分完成的环。在一些示例中，可使用其他类型的指示符。因此，在图12AB的示例中，感应卡1242被保持在推送位置所经过的时间约为必要阈值时间的四分之一。在一些实施方案中，如果用户输入(例如，1244)满足附加标准，则可免除(例如，覆写)满足在推送位置中达阈值时间量的要求。例如，如果用户输入是深按压或者经过显示器边缘的轻扫(例如，通过推送位置并且滑离显示器1206的顶边缘)，则作为响应设备可立即执行拉取功能。
响应于用户输入1242，作为响应，设备1200执行动作。在一些实施方案中，设备1200将媒体回放“拉取”到设备1200上。在一些实施方案中，拉取回放包括在当前设备(例如，1200)上发起回放和停止外部设备(例如，1202)上的回放。在一些实施方案中，拉取回放包括在当前设备(例如，1200)上发起回放和继续外部设备(例如，1202)上的回放。
在一些示例中，设备1200发起由感应卡1242表示的媒体项的回放。在一些示例中，响应于用户输入1242或响应于设备1200发起回放，设备1202上的回放停止。图12AC示出了拉取动作完成时的感应卡1242。如图所示，感应卡1242现在包括确认1242F(“在iPhone上播放”)并且拉取进展指示符1242E现在包括复选标记。因此，在该示例中，当设备1200的显示器1206如图12AC所示出现时，设备1200当前正在回放标题为“Same Thing”的媒体项。
图12AD示出了示例性当前媒体界面1246。继设备1200接收到用户输入1244并将回放拉取到iPhone之后，显示当前媒体界面1246。当前媒体界面1246包括媒体标识符1246A(例如，示出由“Jambug”所作的标题为“Same Thing”的曲目)、设备选择示能表示1246B(例如，示出焦点在iPhone上)、媒体回放指示符1246C(示出当前媒体项的回放的时间进展)以及回放控制示能表示1246D。如图12AD所示，设备1200更新设备选择指示符1246B以指示设备(例如，当前媒体会话中的设备)的当前焦点是iPhone(例如，设备1200)。因此，在该示例中，设备厨房扬声器(例如，设备1202)上的回放停止并且音频回放被切换到iPhone(例如，设备1200)。
在一些示例中，如果设备1200与个人听音设备(例如，耳机)相关联，则设备1200自动从设备1202拉取媒体回放并且在个人听音设备上发起回放。例如，如图12AE的当前媒体界面1246所示，当前正在名为“AirPods”的耳机(例如，由设备选择指示符1246B指示)上回放所拉取的媒体项“Same Thing”的回放。例如，如果用户即将离开他们的家并且想要随身播放音乐(例如，要去跑步)，则设备1200将音乐路由到相关联的一组耳机(例如，当被用户打开和/或由用户佩戴时)，而无需首先响应于用户输入1244而在设备1200的扬声器上开始回放。
图12AF-图12AG根据一些实施方案示出了用于与感应卡进行交互的示例性另选技术。图12AF描绘了在媒体示能表示1242B上具有用户输入1248的感应卡1242。在一些示例中，用户输入1248是轻击、触摸、深按压或按压和保持输入等。在图12AG中，响应于用户输入1248，设备1200显示指向厨房扬声器的当前媒体界面1250。当前媒体界面1250包括设备选择示能表示1250A(例如，指示界面1250的焦点)和回放控制示能表示1250B。因此，如果用户希望控制厨房扬声器上的回放而不是将媒体拉取到iPhone上，则可使用感应卡上的轻击来显示出指向厨房扬声器的媒体会话的当前媒体界面。
图12AH-图12AJ示出了用于在设备之间传输视频内容的回放的示例性界面。在上述示例中，参考了传输媒体(特别是音频)的回放。在一些实施方案中，媒体内容包括视频内容。例如，媒体项可以是视频文件或视频流。因此，上述技术也适用于视频内容。
例如，图12AH示出了设备1200上示例性视频内容1252的回放。图12AI示出了用于将视频内容从设备1200传输到另一设备的示例性感应卡1254。感应卡1254类似于图12Q的感应卡1236，对后者的描述据此以引用方式并入。类似于感应卡1236，感应卡1254包括标题1254A“AppleTV”，在视觉上指示用户将设备1200放置成与其处于非常接近的设备的名称。标题1254A还在视觉上指示感应卡的焦点(例如，作为响应将接收媒体内容的设备)，在这种情况下是名为“Apple TV”的设备。感应卡1254还包括动作指示符1254D(例如，箭头)，指示感应卡上的用户输入手势(例如，沿着箭头的方向)将使得设备执行动作。同样，动作指示符1254C(文本“推送以播放”)向用户指示感应卡1254上的用户输入将使得设备采取动作。另外，感应卡1254包括表示媒体内容(例如，一个或多个媒体项)的媒体示能表示1254B。在该示例中，媒体示能表示1254B包括当前在设备1200上播放的视频(例如，图12AH的1252)的视频屏幕截图(例如，描绘一只狗)。在一些示例中，媒体示能表示1254B包括一个或多个媒体项的其他类型的视觉指示(例如，视频屏幕截图、视频封面图、文本、图像或其他适当的视觉表示)。感应卡1254提供允许用户将设备“Apple TV”添加到当前媒体会话(例如，视频媒体1252的回放会话)的界面。
图12AJ示出了将图12AI中描绘的视频内容从第一设备1200传输到第二设备1260的示例性结果。在一些示例中，设备1260可以是上文相对于图6的设备660所述的设备。在该示例中，设备1260是连接到设备1258(例如，电视)的显示器1256的媒体设备(例如，由AppleInc.(Cupertino,California,USA)制造的Apple TV)。在该示例中，用户将设备1200放置成与设备1260非常接近，使得设备1200显示感应卡1254。响应于表示感应卡1254上的向上轻扫的用户输入，将视频内容的回放传输到设备1260。例如，设备1260当前正在回放来自图12AH的视频内容1252。在该示例中，设备1260被配置为经由电视设备1256的显示器来输出视频内容。在一些实施方案中，设备1260包括用于回放传输的媒体内容的显示器。
此外，在图12AJ所描绘的示例中，设备1202当前正在回放在设备1260上回放的视频内容的音频部分。在一些示例中，设备1260起媒体集线器的作用，并且可将视频和/或音频数据(例如，用于回放和输出)路由到与其连接(例如，经由无线或有线连接)的其他设备。例如，如图12AJ所示，设备1260将视频回放输出到电视1256并且将音频回放(例如，来自同一媒体)输出到智能扬声器1202。在一些实施方案中，设备对媒体内容的分量信号(例如，视频或音频)的路由是预先配置的。例如，用户可将设备1260配置为总是在设备1202上输出音频并且总是在设备1256上输出视频(例如，当在任一设备处或者经由多设备界面在某个其他外部设备处接收到对回放的请求时)。在一些实施方案中，设备1260动态确定对媒体内容的分量信号(例如，视频或音频)的路由。例如，用户可将设备1260配置为总是在设备1202上输出音频并且总是在设备1256上输出视频—然而，如果设备1202正忙于回放其他内容，则设备1260可替代地路由该音频信号以由电视1256的扬声器输出。在一些实施方案中，设备1260自动检测适当的设备(例如，优选设备)并自动将内容路由到该设备。例如，设备1260自动检测扬声器1202并自动路由(例如，切换)媒体的音频部分的音频回放。同样，在一些示例中，设备1202自动将视频路由到视频回放设备，诸如设备1260(例如，Apple TV)。
本领域的技术人员将理解的是，设备(例如，两个或更多个)的多种可能的组合可用于创建如本文所述(例如，相对于图12A-图12AM)的集成媒体回放体验。例如，上述功能(例如，相对于检测接近度、显示用于在设备之间传输媒体的界面、显示视觉内容和/或输出可听内容)不限于被单个设备执行。在一些实施方案中，使用任何数量的设备来执行功能(例如，以及实现期望的最终结果)。本领域的技术人员将理解的是，可使用任何数量的设备来执行上述功能，并且因此以实现相同的期望的最终结果，并且可能的设备的各种组合都被预想在本公开的范围内。在一些示例中，减少对单个设备或有限数量的设备的依赖来执行期望的媒体功能给用户提供了可使用各种设备访问的无缝且集成的媒体体验。
图12AK-图12AL示出了用于在设备之间传输电话呼叫的示例性界面。在上述示例中，参考了传输媒体(特别是音频和视频)的回放。然而，例如，回放的传输不限于传输媒体诸如歌曲和电影。在一些实施方案中，媒体内容包括电话呼叫。例如，媒体内容可以是电话呼叫、互联网协议语音技术“VOIP”呼叫、视频通话等。
例如，图12AK示出了显示在设备1200上的示例性呼叫界面1262。呼叫界面1262指示设备1200当前处于活动的电话呼叫(例如，VOIP呼叫)中。
图12AL示出了用于将电话呼叫传输到另一设备(例如，1202)的示例性感应卡1264。感应卡1264类似于图12Q的感应卡1236，对后者的描述据此并入。类似于感应卡1236，感应卡1264包括标题1264A“厨房扬声器”，在视觉上指示用户将设备1200放置成与其处于非常接近的设备的名称。标题1264A还在视觉上指示感应卡的焦点(例如，作为响应将接收媒体内容的设备)，在这种情况下是名为“厨房扬声器”的设备。感应卡1264还包括动作指示符1264C(例如，箭头)，指示感应卡上的用户输入手势(例如，沿着箭头的方向)将使得设备执行动作。同样，动作指示符1264D(文本“推送呼叫”)向用户指示感应卡1264上的用户输入将使得设备采取动作。另外，感应卡1264包括表示媒体内容(例如，电话呼叫)的媒体示能表示1264B。在该示例中，媒体示能表示1264B包括联系人的图像、联系人名称以及当前电话呼叫的呼叫时间。在一些示例中，媒体示能表示1264B包括一个或多个媒体项的任何适当的视觉指示(例如，视频屏幕截图、视频封面图、文本、图像或其他适当的视觉表示)。感应卡1264提供允许用户将设备“厨房扬声器”添加到当前媒体会话(例如，输出电话呼叫的音频的媒体会话)的界面。
如本领域的技术人员将理解的是，电话呼叫涉及音频输出和音频输入(例如，使用麦克风)两者。在一些实施方案中，将媒体项(例如，电话呼叫或视频通话)从一个设备传输到另一设备包括传输媒体输出(例如，音频或视频输出)，但不传输媒体输入功能(例如，音频或视频输入)。例如，在图12AL所描绘的示例中，设备1200可切换音频输出(例如，使得电话呼叫音频输出由智能扬声器1202可听地输出)，但是放弃切换媒体输入功能并继续使用其麦克风来接收电话呼叫音频(例如，或者其相机，在视频通话的情况下)。在一些实施方案中，将媒体项(例如，电话呼叫或视频通话)从一个设备传输到另一设备包括传输媒体输出(例如，音频或视频输出)，并且传输媒体输入功能。例如，在图12AL所描绘的示例中，设备1200可切换音频输出(例如，使得电话呼叫音频输出由智能扬声器1202可听地输出)，并且切换媒体输入功能(例如，使得智能扬声器1202使用其麦克风来接收电话呼叫音频)。在一些实施方案中，将媒体项(例如，电话呼叫或视频通话)从一个设备传输到另一设备包括传输媒体输入功能，但不传输媒体输出(例如，音频或视频输出)。在一些实施方案中，设备传输少于全部媒体输出功能和/或媒体输入功能。例如，如果视频通话被推送到不具有音频输出能力的显示设备，则设备(例如，1200)可将视觉输出功能传输到该显示设备，并保留音频输出功能和音频输入功能两者。
对于本领域的技术人员应当显而易见的是，本文所述(例如，相对于图12A-图12AM)用于在设备之间控制和/或传输媒体内容的各种界面和技术适用于许多类型的媒体。具有音频分量和视觉分量中的一个或多个并且被格式化以在电子设备之间被发送的任何媒体都被预想在本公开的范围内。例如，可根据本文所述的技术来控制或传输的媒体的其他具体示例包括但不限于：电子书籍(例如，通常也被称为“电子书”)、网页、文本内容(例如，文档、电子表格)、屏幕共享(例如，在第二设备处镜像第一设备的屏幕)以及图像(例如，相片、动画)。
在某些情况下，设备的拥有者可能不期望允许任何具有对设备的物理访问权限的用户能够控制该设备。例如，允许访客(例如，经由访客的设备)控制拥有者的家庭设备上的回放可能是不理想的。图12AM示出了示例性媒体信息界面。媒体信息界面1266(也被称为感应卡1266)描绘了在一些示例中当访客设备被放置成与家庭拥有者的设备非常接近时所显示的界面。在一些示例中，访客设备是不与是被授权的一组用户(例如，一个或多个)中的成员的用户账户相关联的设备。例如，被授权的一组用户(例如，用户账户)是已被添加到设备管理应用程序中的组的用户(例如，如上文相对于图6A所述的一组用户602A至用户602C)。因此，在一些示例中，如果设备1200没有登录到与被授权的该组用户相关联的用户账户，则设备1200不呈现用于控制回放的感应卡(例如，推送感应卡、拉取感应卡或最近播放媒体感应卡)。相反，在一些示例中，响应于被放置成与关联于被授权的一组用户相关联的设备非常接近，设备1200显示感应卡1266。
感应卡1266包括标题1266A“厨房扬声器”，在视觉上指示是感应卡的目标(例如，其媒体回放信息被呈现在该卡上)的设备(例如，设备1202)的名称。另外，感应卡1266包括表示媒体内容(例如，一个或多个媒体项)的媒体示能表示1266B。在该示例中，媒体示能表示1266B包括由艺术家“Jambug”所作的标题为“How Many Times”的曲目(例如，其当前在设备1202上播放)的专辑封面。在一些示例中，媒体示能表示1266B包括一个或多个媒体项的其他类型的视觉指示(例如，文本、图像或其他适当的视觉表示)。在该示例中，由感应卡1266表示的媒体内容(例如，由示能表示1266B表示)是当前在设备1202(例如，厨房扬声器)上播放的内容。感应卡1266还包括当前正在播放的媒体的文本识别1266C。因此，感应卡1266提供了信息界面，该界面允许访客查看关于处于非常接近的设备上的媒体回放的信息而不能够影响回放。例如，感应卡1266上的轻扫不会将媒体回放推送或拉取到设备1200。
图13A-图13F是示出了根据一些实施方案的用于使用电子设备来显示媒体信息界面的方法的流程图。在具有显示器的设备(例如，100、300、500)处执行方法1300。方法1300中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1300提供了用于显示媒体信息界面的直观方式。该方法减轻了用户在显示媒体信息界面时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地显示媒体信息界面节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1200)在连接到第二设备(例如，1202)时检测(1302)第一设备和第二设备之间的物理接近度满足接近度条件的指示。例如，当第二设备处于第一设备的蓝牙范围内或者连接到第一设备连接的同一Wi-Fi网络时，设备相连接。在一些示例中，当电子设备(例如，1200)的物理接近度在第二设备的接近度区域(例如，诸如图12B的接近度区域1204)内时，满足接近度条件。在一些实施方案中，电子设备(例如，设备1200或设备1202)使用近场通信技术来检测是否满足接近度条件。在一些实施方案中，确定是否满足接近度条件的电子设备(例如，1200)将该确定发送给另一设备(例如，1202)。
根据检测到物理接近度满足接近度条件(例如，电子设备在图12B的接近度区域1204内)，电子设备(例如，1200)在显示器(例如，1206)上显示(1304)媒体信息界面(例如，图12B的1208)。
使用对用于显示媒体信息界面的物理接近度的检测允许用户以较少的所需用户输入有效地调用特定于设备的用户界面。在一组条件已经被满足而不需要进一步的用户输入时执行操作增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，在第一设备(例如，1200)没在播放媒体内容时并且在第二设备(例如，1202)没在播放媒体内容时检测到该指示。在一些实施方案中，显示媒体信息界面(例如，1208)包括在显示器(例如，1206)上显示(1306)表示最近在第二设备上播放的第一媒体项的第一示能表示(例如，1208A)。在一些实施方案中，电子设备(例如，1200)接收(1308)表示对第一示能表示的选择的第一用户输入(例如，1210)。响应于接收到第一用户输入(例如，1210)，电子设备(例如，1200)向第二设备(例如，1202)传输(1310)指令以发起第一媒体项的回放。
在一些实施方案中，电子设备(例如，1200)接收(1312)表示第一示能表示(例如，1208A)上的方向性轻扫手势的第二用户输入(例如，图12E和图12F的1214)。响应于接收到第二用户输入(例如，1214)，并且在继续显示第一示能表示(例如，图12F的1208A)时，电子设备在显示器(例如，1206)上显示(1314)表示最近在第二设备上播放的第二媒体项的第二示能表示(例如，图12F的1208C)，其中在接收到第二用户输入(例如，图12F的1214)之前未显示第二示能表示。
在一些实施方案中，在第一设备(例如，1200)正在播放第三媒体项(例如，图12H的1220A)时并且在第二设备(例如，1202)正在播放不同于第三媒体项的第四媒体项(例如，图12H的1222)时检测到该指示。在一些实施方案中，显示媒体信息界面(例如，图12I的1224)包括在显示器(例如，1206)上显示(1316)与当前正在第一设备(例如，1200)上播放的第三媒体项(例如，1220A)相关联的第三示能表示(例如，图12I的1224A)。在一些实施方案中，电子设备(例如，1200)接收(1318)表示对第三示能表示(例如，1224A)的选择的第三用户输入(例如，图12J的1226)。响应于接收到第三用户输入(例如，1226)，电子设备(例如，1200)向第二设备(例如，1202)传输(1320)指令以发起第三媒体项(例如，1220A)的回放。
在一些实施方案中，进一步响应于接收到第三用户输入(例如，1226)，电子设备(例如，1200)在第一设备(例如，1200)上停止播放(1322)第三媒体项(例如，1220A)。
在一些实施方案中，进一步响应于接收到第三用户输入(例如，1226)，电子设备(例如，1200)在显示器上显示(1324)控制第二设备(例如，1202)上的第三媒体项(例如，图12K的1228A或图12L的1230C)的回放的回放控制示能表示(例如，图12K的1228B)。
在一些实施方案中，在第一设备(例如，1200)正在播放第五媒体项(例如，图12P的1220A)并且在第二设备(例如，1202)没在播放媒体内容时检测到该指示。在一些实施方案中，显示媒体信息界面(例如，图12Q的1236)包括在显示器上显示(1326)表示第五媒体项(例如，由图12Q的1236C表示)的第四示能表示(例如，图12Q的1236C)。在一些实施方案中，电子设备(例如，1200)接收(1328)第四用户输入(例如，图12R和图12S的1238)。在一些实施方案中，电子设备(例如，1200)确定(1330)第四用户输入(例如，1238)是否表示第四示能表示(例如，1236C)上的方向性轻扫手势。在一些实施方案中，轻扫手势是向上轻扫。在一些实施方案中，轻扫手势是沿着朝第二设备(例如，1202)的方向的轻扫。例如，轻扫手势将取决于第一设备(例如，1200)相对于第二设备(例如，1202)的取向。响应于接收到第四用户输入(例如，1238)，并且根据确定第四用户输入表示第四示能表示(例如，1236C)上的方向性轻扫手势(1332)：电子设备(例如，1200)向第二设备(例如，1202)传输(1334)指令以发起第五媒体项(例如，由图12Q的示能表示1236C或由图12C的1220A表示)的回放。在一些实施方案中，进一步响应于第四用户输入(例如，1236C)，并且根据确定第四用户输入表示第四示能表示(例如，1236C)上的方向性轻扫手势，电子设备(例如，1200)停止(1336)第一设备(例如，1200)上的第五媒体项的回放。在一些实施方案中，响应于接收到第四用户输入(例如，1236C)，并且根据确定第四用户输入不表示第四示能表示(例如，1236C)上的方向性轻扫手势(1338)：电子设备(例如，1200)放弃(1340)向第二设备(例如，1202)传输指令以发起第五媒体项的回放。在一些实施方案中，进一步响应于接收到第四用户输入(例如，1236C)，并且根据确定第四用户输入不表示第四示能表示(例如，1236C)上的方向性轻扫手势，电子设备(例如，1200)继续(1342)第一设备(例如，1200)上的第五媒体项(例如，由图12Q的示能表示1236C或由图12C的1220A表示)的回放。
在一些实施方案中，第一设备(例如，1200)在第五媒体项(例如，由图12Q的示能表示1236C或由图12C的1220A表示)的某一回放时间(例如，如图12D的1220D所示)处停止第五媒体项的回放。在一些实施方案中，向第二设备(例如，1202)传输指令以发起第五媒体项的回放包括向第二设备传输(1344)指令以在约第五媒体项的该回放时间处开始回放。例如，使得回放被收听者感知为连续的。例如，第一设备指示第二设备在第一设备停止第五媒体项的回放的同时、在第一设备停止回放的时间之后的一定量时间处或者在基于第一设备停止回放的时间的时间范围内开始回放。
在一些实施方案中，显示媒体信息界面包括在显示器(例如，1206)上显示第五示能表示(例如，图12W的1220C)。在一些实施方案中，电子设备(例如，1200)确定第四用户输入(例如，1239)是否表示对第五示能表示(例如，图12W的1220C)的选择。在一些实施方案中，响应于接收到第四用户输入，并且根据确定第四用户输入表示对第五示能表示的选择，在显示器(例如，1206)上显示多设备界面(例如，图6J的610)。在一些实施方案中，进一步响应于接收到第四用户输入，并且根据确定第四用户输入不表示对第五示能表示的选择，电子设备(例如，1200)放弃显示多设备界面。
在一些实施方案中，在第一设备(例如，1200)没在播放媒体内容时并且在第二设备(例如，1202)正在播放第六媒体项(例如，由图12Y的1242B表示)时检测到该指示。在一些实施方案中，显示媒体信息界面(例如，图12Y的1242)包括在显示器(例如，1206)上显示(1346)表示第六媒体项的第六示能表示(例如，图12Y的1242B)。在一些实施方案中，电子设备(例如，1200)接收(1348)第五用户输入(例如，图12Z和图12AA的1244)。在一些实施方案中，电子设备(例如，1200)确定第五用户输入是否表示第五示能表示(例如，1242B)上的方向性轻扫手势。在一些实施方案中，轻扫手势是向下轻扫。在一些实施方案中，轻扫手势是沿着远离第二设备(例如，1202)的方向的轻扫。例如，该方向性轻扫将取决于第一设备相对于第二设备的取向。在一些实施方案中，响应于接收到第五用户输入(例如，1244)，并且根据确定第五用户输入表示第六示能表示上的方向性轻扫手势(1350)：电子设备(例如，1200)向第二设备(例如，1202)传输(1352)指令以停止第六媒体项的回放。在一些实施方案中，进一步响应于接收到第五用户输入(例如，1244)，并且根据确定第五用户输入表示第六示能表示上的方向性轻扫手势，电子设备(例如，1200)在第一设备(例如，1200)上发起(1354)第六媒体项(例如，由图12AA的1242B表示)的回放。例如，不停地划拉所显示的感应卡使得媒体的回放从第二设备传输到第一设备。在一些实施方案中，响应于接收到第五用户输入，并且根据确定第五用户输入不表示第六示能表示上的方向性轻扫手势(1356)：电子设备(例如，1200)放弃向第二设备(例如，1202)传输(1358)指令以停止第六媒体项的回放。在一些实施方案中，进一步响应于接收到第五用户输入，并且根据确定第五用户输入不表示第六示能表示上的方向性轻扫手势：电子设备(例如，1200)放弃在第一设备(例如，1200)上发起(1360)第六媒体项的回放。
在一些实施方案中，电子设备(例如，1200)确定(1362)第五用户输入(例如，图12AF的1248)是否表示对第六示能表示(例如，图12AF的1242B)的选择(例如，轻击、触摸、按压、深按压或轻击和保持输入)。在一些实施方案中，进一步响应于接收到第五用户输入，并且根据确定第五用户输入(例如，1248)表示对第六示能表示的选择，电子设备(例如，1200)在显示器(例如，1206)上显示(1364)用于控制第二设备(例如，1202，由图12AG的1250A表示)上的第六媒体项(例如，由图12AF的1242B表示)的回放的回放控制示能表示(例如，图12AG的1250B)。在一些实施方案中，根据确定第五用户输入不表示对第六示能表示的选择，电子设备(例如，1200)放弃在显示器(例如，1206)上显示(1366)用于控制第二设备(例如，1202)上的第六媒体项的回放的回放控制示能表示(例如，图12AG的1250B)。
在一些实施方案中，第二设备(例如，1202)在第六媒体项的某一回放时间(例如，图12AD的1246C)处停止第六媒体项(例如，由图12AD的1246A表示)的回放。在一些实施方案中，在第一设备(例如，1200)上发起第六媒体项的回放包括在约第六媒体项的该回放时间(例如，图12AD的1246C)处开始回放。在一些示例中，回放从第二设备传输到第一设备被收听者感知为连续的。例如，第一设备可在第二设备停止回放的同时、在第二设备停止回放的时间之后的一定量时间处或者在基于第二设备停止回放的时间的时间范围内开始回放。
在一些实施方案中，在第一设备(例如，1200)上发起第六媒体项(例如，由图12AD的1246A表示)的回放包括在显示器(例如，1206)上显示：对第六媒体项(例如，图12AD的1246A)的识别以及用于控制第一设备(例如，1200)上的第六媒体项的回放的回放控制示能表示(例如，图12AD的1246D)。
在一些实施方案中，第一设备(例如，1200)连接到多个设备，其中所述多个设备包括第二设备(例如，1202)，并且其中所显示的媒体信息界面(例如，1208、1224、1236或1242)对应于第二设备(例如，1202)。
在一些实施方案中，第一设备(例如，1200)经由无线通信链路连接到第二设备(例如，1202)。
在一些实施方案中，媒体信息界面(例如，1236或1242)包括第一设备(例如，1200)或第二设备(例如，1202)上回放的媒体内容可被传输到未回放该媒体内容的另一设备的指示(例如，1236B、1236D、1242C和/或1242D)。例如，感应卡可包括媒体内容可以被“推送”到第二设备(例如，上箭头)或从第二设备“拉取”(例如，下箭头)的指示(例如，文本、箭头)。
在一些实施方案中，媒体项选自由音频文件、音频流、视频文件、视频流、电话呼叫和视频通话组成的组。
在一些实施方案中，第一设备(例如，1200)与第一用户账户(例如，图6A的用户602A)相关联，并且第二设备(例如，1202)与一组用户账户相关联。在一些实施方案中，该组用户账户包括一个或多个用户账户。在一些实施方案中，进一步根据检测到物理接近度满足接近度条件：根据确定第一用户账户是该组用户账户的成员，电子设备(例如，1200)显示(1368)可在第一设备(例如，1200)和第二设备(例如，1202)之间传输媒体回放的指示(例如，1236B、1236D、1242C和/或1242D)。例如，该指示提供媒体回放可从第一设备被推送到第二设备或者从第二设备被拉取到第一设备的视觉指示。在一些实施方案中，该设备还显示回放控制示能表示(例如，图12H的1220D)。在一些实施方案中，根据确定第一用户账户不是该组用户账户的成员，电子设备(例如，1200)放弃显示(1370)可在第一设备和第二设备之间传输媒体回放的指示(例如，1236B、1236D、1242C和/或1242D)。例如，电子设备可替代地显示如图12AM所示的界面1266。在一些示例中，界面1266包括对现在正在第二设备上播放的内容的指示，但既不包括可被轻扫以传输回放的示能表示，也不包括提示轻扫手势的箭头。在一些实施方案中，设备还放弃显示回放控件(例如，如图1266所示)。
在一些实施方案中，根据(例如，通过设备1200或设备1202)确定第一设备(例如，1200)和第二设备(例如，1202)之间的物理接近度已经连续满足接近度条件达阈值时间量，第一设备自动在第一设备和第二设备之间传输(1372)媒体项的回放。在一些实施方案中，自动传输包括在无需进一步的用户输入和/或无需满足另外的条件的情况下进行传输。在一些实施方案中，根据确定第一设备和第二设备之间的物理接近度尚未连续满足接近度条件达阈值时间量，第一设备(例如，1200)放弃自动在第一设备和第二设备之间传输(1374)媒体项的回放。
需注意，上文相对于方法1300所述的过程(例如，图13A-图13F)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法1300所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图14A-图14M根据一些实施方案示出了用于控制设备的示例性技术。这些附图中的用户界面被用于示出包括图15A-图15C中的过程的下文描述的过程。
图14A根据一些实施方案示出了示例性设备1400。在一些实施方案中，设备1400包括设备100、300、500或580的一个或多个特征。在一些实施方案中，如图14A所示，设备1400包括触敏表面1402。在该示例中，触敏表面被布置在设备的顶部，该设备是安置于表面上的智能扬声器设备。在一些实施方案中，设备1400包括触敏显示器。
图14B示出了示例性设备1400的俯视图。可以看到触敏表面1402。LED指示器1404、1406A和1406B也可见。在一些示例中，设备1400上的LED指示器中的一个或多个用于在视觉上指示设备的状况。例如，触敏表面1402可基于设备1400的状态(例如，在不同的时间)来不同地响应相同的用户输入(例如，在同一位置处的轻击)。因此，设备1400可使用LED指示器来在视觉上传达设备的当前状况(例如，并且转而指示用户输入(例如，在触敏表面1402上)将在设备上产生的效果)。在一些示例中，设备1400控制一个或多个LED指示器的以下属性中的一个或多个以传达设备的状态：照明(例如，开或关)、亮度、颜色、直径和形状。在一些示例中，可控制(例如，调节)LED指示器的其他视觉属性以便指示设备状态(例如，媒体回放状况、触敏表面或触敏显示器的状态)。在一些实施方案中，LED指示器是显示屏(例如，图1B的112、图5A的504)。例如，代替使用LED指示器，设备1400可包括显示屏，诸如有机发光二极管(OLED)面板、LED面板、LCD面板等。在一些实施方案中，LED指示器是可由电子设备(例如，1400)控制以输出视觉指示的任何部件。
图14C-图14L描绘了设备1400的各种示例性状态以及该设备响应于根据状态的用户输入而执行的动作。
图14C示出了图14B所示的俯视图，但是其中设备1400在触敏表面1402上的位置处接收用户输入1408。在该示例中，在LED指示器1406A上方的位置处接收到用户输入1408。在该示例中，在接收到用户输入1408的同时，设备1400没在回放媒体内容。例如，设备1400处于媒体回放会话期间的暂停状态，或者当前不是媒体回放会话的一部分。
在图14D中，响应于接收到用户输入1408，设备1400发起媒体的回放。例如，设备现在正在输出媒体(例如，经由扬声器)，如由图14D中的声波1410所图示的。在该示例中，设备1400已经恢复播放被暂停的媒体回放。在一些示例中，如果当前没有媒体回放被暂停，则设备1400仍然响应于用户输入1408而发起媒体回放。例如，设备1400可发起最近播放的媒体、默认媒体(例如，由用户配置或自动选择)、与用户账户相关联的最喜欢媒体、预先配置的媒体(例如，被配置为在预先确定的时间、日子回放)等的回放。在一些示例中，设备1400更新LED指示器以在视觉上指示设备当前正在回放媒体内容。在该示例中，指示器1406A现在包括“+”图标，并且指示器1406B现在包括“-”图标。在一些示例中，图14D的指示器1406A和指示器1406B在视觉上传达：该设备当前正在回放媒体(例如，输出音频信号)。技术人员将理解的是，可使用其他视觉指示(例如，图标)和/或指示器(例如，指示器1406)来在视觉上传达：该设备当前正在回放媒体。此外，在一些示例中，图14D的指示器1406A和指示器1406B可在视觉上传达：他们可被触摸以便调节音量。技术人员将理解的是，可使用其他指示(例如，图标)和/或指示器(例如，指示器1406)来在视觉上传达集成触敏显示器或触敏显示器的状态(例如，响应于用户输入而起作用)。
在一些实施方案中，响应于设备1400执行语音助理功能，停止显示“+”指示器1406A和“-”指示器1406B。例如，响应于检测到语音用户输入(例如，“嘿Siri”)，设备可停止显示指示器1406A和指示器1406B内的图标中的一个或多个。在一些示例中，指示器1404、1406A和1406B中的一个或多个的照明在语音助理功能期间改变。例如，响应于正在设备1400上执行语音助理功能，指示符1404、1406A和1406B可关闭、被照亮、改变颜色等。
图14E示出了图14D所示的俯视图，但是其中设备1400在触敏表面1402上的位置处接收用户输入1410。在该示例中，在LED指示器1406A上方的位置处接收到用户输入1410，该位置是与用户输入1408相同的位置。在该示例中，在接收到用户输入1410的同时，设备1400(如图14D所示)当前正在回放媒体内容。例如，设备1400被包括在媒体回放会话中(例如，并且正在播放音乐音频或视频回放的音频分量)。
响应于接收到用户输入1410，设备1400调节设备1400的音量。例如，如图14F中的音量水平仪1412所示，响应于用户输入1410，设备1400将音量从第一水平1412A(例如，紧接着在用户输入1410之前的音量)调节(例如，增加)到第二水平1412B(例如，紧接着继用户输入1410之后的音量)。
图14G-图14J根据一些实施方案示出了用于扩大触敏表面上的响应区域的尺寸的示例性技术。
图14G示出了设备1400在其当前正在回放媒体内容时(例如，如图14F所述)的俯视图。另外，图14G描绘了分别在指示器1406A和指示器1406B上方的触敏区域1414A和触敏区域1414B的边界。在一些示例中，触敏区域边界不在电子设备(例如，1400)上显示或可见。例如，在该示例中，区域1414A和区域1414B仅出于参考被包括，并且不被设备1400显示。在一些示例中，电子设备显示一个或多个触敏区域(例如，1414A或1414B)的边界。
在图14H中，设备(如图14G所示)在指示器1406A上方接收用户输入1416。在该示例中，用户输入1416是触敏表面1402上的触摸。可以看出，用户输入1416的至少一部分被包括在触敏区域1414A内。响应于用户输入1416，设备1400增加音量(例如，如图14F所示)。
在一些实施方案中，进一步响应于在指示器1406A上接收到用户输入1416，设备1400暂时扩大触敏区域1414A以形成扩大的触敏区域(也被称为“扩大区域”)。图14I中示出了示例性扩大区域1418。如图14I中可以看出，扩大区域1418覆盖触敏表面1402的比区域1414覆盖的区域(例如，如图14G所示)更大的区域。在一些示例中，扩大区域替换一个区域。例如，在该示例中，扩大区域1418(例如，其将响应于其内的触摸而执行和区域1414A相同的功能)覆盖区域1414A占据的区域(以及更多区域)，从而替换它。
在一些实施方案中，设备在预先确定的时间量之后停止保持扩大的触敏区域。在一些实施方案中，设备在从扩大的触敏区域内的最后用户输入开始的预先确定的时间量之后停止保持该扩大区域。例如，扩大区域内随后的用户输入(例如，轻击)会使得对从最后的用户输入开始的时间量的测量(例如，定时器)在每次检测到触摸输入之后被重置。在该示例中，在扩大区域内的最终用户输入之后的时间量达到预先确定的时间量之后，扩大区域返回到其正常尺寸(例如，1414A)。
在图14J中，设备1400接收在扩大区域1418内但在区域1414A之外的第二用户输入1420。在一些示例中，根据确定在检测到第一用户输入(例如，1416)之后的预先确定的时间量期间接收到第二用户输入(例如，1420)，设备1400调节(例如，增加)当前正在播放的媒体的音量。例如，如图14K中的音量水平仪1422所示，响应于用户输入1420，设备1400将音量从第一水平1422A(例如，紧接着在用户输入1420之前的音量)调节到第二水平1422B(例如，紧接着继用户输入1420之后的音量)。
在一些示例中，根据确定不是在检测到第一触摸之后的预先确定的时间量期间接收到第二用户输入(例如，1420)，设备1400停止播放媒体。例如，如果在使得区域1414A扩大的触摸(或扩大区域1418内随后的触摸)之后的预先确定的时间量之后接收到用户输入1420并且该用户输入不在区域1414A内，则不增加音量，因为该临时扩大(例如，触敏表面上的响应区域的增加)在接收到用户输入1420之前结束。在一些示例中，当在预先确定的时间量之后接收到用户输入1420并且该用户输入在第二区域之外时，设备1400响应于该用户输入而停止回放。例如，在图14J所示的示例中，用户输入1420在被配置为使得设备1400暂停媒体回放(或恢复被暂停的回放)的区域1414C内。因此，当在预先确定的时间量之后接收到用户输入1420并且该用户输入在第二区域之外时，响应于该用户输入，设备1400暂停回放。
图14L示出了用于调节设备的音量的示例性技术。虽然以上描述提及了响应于触敏表面上的用户输入来增加设备1400的音量，图19L示出了用于降低设备1400的音量的示例性技术。响应于接收到用户输入1410，设备1400调节设备1400的音量。例如，如图14L中的音量水平仪1426所示，响应于用户输入1424，设备1400将音量从第一水平1426A(例如，紧接着在用户输入1424之前的音量)调节到第二水平1426B(例如，紧接着继用户输入1424之后的音量，比水平1426A低)。
在一些实施方案中，设备1400包括多个音量水平。例如，设备1400可针对媒体回放功能保持(例如，存储在存储器中)一个音量水平，并且针对语音助理功能保持一个音量水平。在一些示例中，所述多个音量水平各自不同。例如，设备1400可将第一音量水平(例如，媒体回放的音量水平)调节为最大值的0％(例如，静音，设备1400的扬声器不产生声音)，而第二音量水平被设置为具有最大值(例如，扬声器的最大输出水平或音量水平仪的最大水平)的50％的非零值。
例如，图14M示出了两个音量水平仪，表示由设备1400存储的两个音量水平。媒体音量水平仪1430包括最大水平和最小水平。语音助理音量水平仪1432包括最大水平和最小水平。
在一些实施方案中，第二音量水平是第一音量水平的推导数。例如，语音助理的音量水平(例如，由音量仪1432表示)可在数学上从媒体回放音量的音量水平导出。例如，音量(语音助理)＝(音量(媒体)÷1.5)。因此，第二音量水平(例如，语音助理的音量水平)从第一音量水平(例如，媒体回放的音量水平)导出，并且第一音量的调节导致第二音量的调节。
在一些实施方案中，当第一音量水平为零时，第二音量水平为非零的。例如，如图14M所示，虚拟助理音量仪1432具有非零的最小值。因此，在一些示例中，当媒体音量水平被设置为零时，语音助理音量为非零的，并且因此用户可继续听见语音助理并与之进行交互。例如，可如下导出语音助理音量：(音量(语音助理)＝((音量(媒体)÷1.5)+x)，其中“x”是表示加回到音量(媒体)÷1.5的结果中的音量的量的常数。本领域的技术人员将理解的是，可使用各种各样的单位或数量来表示音量水平，在此不作更详细的讨论。电子设备(例如，设备1400)可用来控制声音输出的音量的音量水平的任何适当的表示都被预想在本公开的范围内。
在一些实施方案中，触敏表面1402上的用户输入使得设备1400改变当前正在播放的媒体的回放。例如，触敏表面1402上的用户输入可使得设备1400跳到(例如，播放列表上的)下一个媒体项、返回到(例如，播放列表上的)前一个媒体项、暂停回放等。在一些实施方案中，设备1400同时回放多个媒体项。在一些实施方案中，响应于触敏表面1402上的用户输入，设备1400调节所述多个同时播放的媒体项中的每一个的输出。在一些实施方案中，所述多个媒体项中的每一个被不同地调节。例如，如果设备1400同时回放表示新闻节目(例如，音频流)的第一媒体和表示音乐(例如，音频流)的第二媒体，则表面1402上的用户输入(例如，轻扫手势、旋转性轻扫、多触点轻扫等)使得设备1400调节第一媒体和第二媒体的输出水平。在一些实施方案中，调节是相对的。例如，第一媒体的输出水平被调高，而第二媒体的输出水平被调低。例如，第一媒体的输出水平被调低，而第二媒体的输出水平被调高。例如，如果用户期望增加新闻节目的音量并降低音乐音量，则表面1402上的逆时针旋转性轻扫手势使得设备1400相应地调节每个媒体项的音量。相反地，在该示例中，表面1402上的顺时针旋转性轻扫手势使得设备1400增加音乐的音量并降低新闻节目的音量。因此，设备1400接收用户输入以控制多个当前正在播放的媒体信号之间的淡入淡出。
在一些实施方案中，设备1400包括一个或多个麦克风。在一些示例中，设备1400利用所述一个或多个麦克风检测来自语音命令源的语音命令用户输入。在一些实施方案中，语音命令源正在移动。例如，语音命令源是正与设备说话的用户，并且用户可相对于设备(例如，固定在房间内)移动(例如，在房间内走动)。在一些实施方案中，在继续检测语音命令用户输入时：设备1400确定移动的语音命令源的多个空间位置，并且基于移动的语音命令源的所述多个空间位置来照亮发光元件(例如，指示器1404)。因此，例如，设备1400可基于语音命令源(例如，与设备1400说话以使用设备1400调用语音助理功能的用户)的方向来使用(例如，选择性地照亮)指示器1404。例如，当用户站在相对于设备1400的第一位置处(例如，并且向设备说出命令)时，指示符1404包括在视觉上看起来与第一位置的方向对准或指示(例如，“指向”)第一位置的方向的一个或多个被照亮的LED。同样，当用户站在相对于设备1400不同于第一位置的第二位置处(例如，并且向设备说出命令)时，指示符1404包括在视觉上看起来与第二位置的方向对准或指示(例如，“指向”)第二位置的方向的一个或多个被照亮的LED。
在一些实施方案中，设备1400检测多个语音源。在一些实施方案中，设备确定所述多个语音源中的一个语音源表示语音命令用户输入。在一些实施方案中，设备1400基于所述多个语音源中的所述一个语音源来照亮发光元件(例如，指示器1404)。例如，如果设备1400被放置在具有多个讲话用户的房间中并且一个用户(或多于一个)发出语音命令，则设备1400使用指示器1404来在视觉上指示其语音当前被用于生成和/或处理语音命令的用户的方向。
图14N-图14Q示出了通过基于语音命令源(例如，1440)的空间位置照亮发光元件(例如，指示器1404)来创建的示例性图案。在图14N中，用户1440发出用户输入语音命令1442“嘿Siri”以在设备1400上调用个人助理语音功能。图14O示出了在用户发出语音命令1442之前的图14N的俯视图(未按比例绘制)。如图所示，指示器灯1404未被照亮。
在图14P中，示出了响应于设备1400检测到语音命令1442而显示的“输入重力”型的照明图案。指示器1404被照亮的发光元件形成与指示器1404的边缘接界的半圆形照明图案。最接近边缘和并且在语音命令源方向上的元件看起来不同于周围元件。例如，半圆的中心指示设备1400正在收听的语音源(例如，用户1440)的方向，并且可以看起来比周围元件更亮或者是不同颜色。
在图14Q中，示出了响应于设备1400检测到语音命令1442而显示的“线性”型的照明(图14P的“输入重力”型的照明图案的替代方案)。指示器1404被照亮的发光元件在指示器1404内形成基本线性的图案。与语音命令源的方向(例如，相对于设备1400)对准的元件看起来不同于周围元件。例如，这些元件与设备1400正在收听的语音源的方向对准并且可以看起来比周围元件更亮或者是不同颜色。
在一些示例中，可使用其他适当类型的视觉图案来指示语音命令源的方向，并且以上示例并不旨在限制本公开的范围。
图14R-图14T根据一些实施方案示出了发光指示器的示例性布置和状态。例如，图14R-图14T示出了指示器1404的示例性照明图案，用于传达设备1400的各种状态。在一些实施方案中，设备1400包括在指示器1404上方的盖。例如，放置在指示器1404上方的部分不透明盖可使得发光元件的输出扩散并形成图案，为了易于参考，这些图案也示出在图14R-图14T中。
图14R示出了指示器1404在指示符上方具有和不具有扩散盖两种情况下的四个照明状态。图案1454A示出了大图案(所有LED被照亮)、图案1454B示出了中图案(中间两个环被照亮)、图案1454C示出了小图案(例如，最内的环被照亮)并且图案1454D示出了回旋图案(各个LED被照亮成一种形状)。在一些示例中，1404的照明元件形成1454D和另选的照明的形状以给出形状正在移动(例如，涡旋圆形图案)的外观。被覆盖的图案1452A至图案1452D分别对应于图案1454A至图案1454D，并且描绘了这些图案在指示器1404上方具有扩散盖的情况下看起来的样子。
图14S根据一些实施方案示出了响应于语音用户输入(例如，调用语音助理)而由指示器1404呈现的四个照明图案。如图14S所示，图案1454E在语音输入之前被显示。响应于语音输入，图案1454F至图案1454I按顺序显示，给出了小图案过渡到大图案并且然后停在中等尺寸的图案的外观。被覆盖的图案1452E至图案1452I分别对应于图案1454E至图案1454I，并且描绘了这些图案在指示器1404上方具有扩散盖的情况下看起来的样子。在一些实施方案中，图案1454E至图案1454I形成一系列(例如，以所示的次序或以任何次序按顺序显示)。
图14T根据一些实施方案示出了由指示器1404呈现的三个照明图案。例如，在设备1400执行语音助理功能时，可显示图案1454J至图案1454L(和对应的1452J至1452L)。在一些实施方案中，图案1454J至图案1454L形成一系列(例如，以所示的次序或以任何次序按顺序显示)。例如，执行语音助理功能可包括以下各项中的一个或多个：收听语音输入(例如，在检测到语音输入之后)、侦听语音输入(例如，在检测到语音输入之前)、输出语音助理输出(例如，提供对语音输入的文本转语音可听响应)、处理用户输入(例如，解析语音输入或响应于语音输入执行任务)等。在图14T所描绘的示例中，每个图案包括形状(例如，圆)，并且每个形状包括数字(例如，1454J中的图案包括数字1、2和3)，其中每个数字表示颜色。因此，图案145J的三个圆各自是不同的颜色。在图案1452J和图案1454J中，指示器1404中的元件被照亮，使得颜色看起来不混合。在图案1452K和图案1454K中，指示器1404中的元件被照亮，使得颜色看起来混合。例如，基于颜色1、2和3的重叠，颜色被混合并形成新的颜色4、5、6和7。在图案1452L和图案1454L中，指示器1404中的元件被照亮，使得颜色确实看起来混合，并且图案内的形状不那么清楚地被限定(例如，不再是完美的圆、以动画方式涡旋)。可以看出，从图案1454K到图案1454L，颜色1和颜色3已经改变了相对位置。在一些示例中，使用各种图案1452J至图案1452L(例如，作为动画的顺序或部分)来指示语音助理功能的状态。
在一些示例中，如上文相对于图案1454J至图案1454L所述，指示器1404中的颜色元件被用于提供设备1400正在执行与第二功能(例如，媒体回放)相比的第一功能(例如，语音助理功能)的视觉指示。例如，当设备1400仅在回放媒体(例如，歌曲)时，可由指示器1404输出单色光，但是当设备(例如，甚至在继续媒体回放时)开始执行语音助理相关的功能(例如，检测到具有令牌短语的语音输入，诸如“嘿Siri”)时，转变为颜色。
图15A-图15C是示出了根据一些实施方案的用于使用电子设备来控制媒体回放的方法的流程图。在具有触敏表面的设备(例如，100、300、500)处执行方法1500。方法1500中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1500提供了用于控制媒体回放的直观方式。该方法减轻了用户在控制媒体回放时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地控制媒体回放节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1400)检测(1502)触敏表面(例如，1402)上的触摸(例如，1408或1410)。响应于检测到触敏表面上的触摸，电子设备(例如，1400)确定(1504)电子设备(例如，1400)当前是否正在播放媒体(例如，由图14D的1410表示)。
根据确定设备(例如，1400)当前正在播放媒体(1506)：电子设备(例如，1400)确定(1508)触摸(例如，1408或1410)的位置是在第一区域(例如，触敏表面(例如，1402)的1414C)内还是在触敏表面的第二区域(例如，1414A)内，其中第一区域和第二区域不重叠。
根据确定触摸的位置在触敏表面的第一区域(例如，1414C)内，电子设备(例如，1400)停止播放媒体(1510)。
根据确定触摸的位置在触敏表面的第二区域(例如，1414A)内，电子设备(例如，1400)调节(1512)当前正在播放的媒体的音量(例如，调高或调低)。
根据确定设备当前没在播放媒体，电子设备(例如，1400)发起媒体的回放(1514)。
使用设备状态以及触敏表面上的触摸区域的位置来确定设备如何响应触摸用户输入给用户提供了提供上下文相关控件的简化界面。提供对设备的附加控制而不由于附加显示的控件使UI杂乱增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，第二区域包含触敏表面(例如，图14G的1402)的多个非连续区域和非重叠区域(例如，图14G的1414A和1414B)。
在一些实施方案中，第二区域包含第一子区域(例如，1414A)和第二子区域(例如，1414B)，并且其中调节当前正在播放的媒体的音量包括：如果触摸的位置在第一子区域(例如，1414A)内，则降低当前正在播放的媒体的音量；并且如果触摸的位置在第二子区域(例如，1414B)内，则提高当前正在播放的媒体的音量。
在一些实施方案中，触摸是第一触摸(例如，1416)，并且继根据确定触摸(例如，1416)的位置在第二区域(例如，1414A)内来调节当前正在播放的媒体的音量之后：在检测到触敏表面(例如，1402)上的第一触摸(例如，1416)之后，电子设备(例如，1400)暂时扩大(1516)第二区域以创建扩大的第二区域(例如，图14I的1418)达预先确定的时间量。在一些实施方案中，电子设备(例如，1400)在触敏表面上接收(1518)第二触摸(例如，1420)。在一些实施方案中，第二触摸(例如，1420)位于扩大的第二区域(例如，1418)内。在一些实施方案中，第二触摸(例如，1420)不位于第二区域(例如，1414A)内。在一些实施方案中，电子设备(例如，1400)确定(1520)是否在检测到第一触摸(例如，1416)之后的预先确定的时间量期间接收到第二触摸(例如，1420)。根据确定在检测到第一触摸之后的预先确定的时间量期间接收到第二触摸，电子设备(例如，1400)调节(1522)当前正在播放的媒体的音量(例如，如图14K的1422所示)。根据确定不是在检测到第一触摸之后的预先确定的时间量期间接收到第二触摸，电子设备(例如，1400)停止播放(1524)媒体。在一些实施方案中，停止播放媒体包括暂停当前正在播放的媒体的回放。
在一些实施方案中，触敏表面包括显示器(例如，1404A和1404B)。在一些实施方案中，显示器是LED阵列(例如，1406)。在一些实施方案中，进一步根据确定设备当前正在播放媒体，电子设备(例如，1400)在显示器上显示(1526)在第二区域(例如，1414A)内的指示器(例如，图14D的1406A中的+图标)。在一些实施方案中，进一步根据确定设备当前没在播放媒体，电子设备(例如，1400)放弃显示(1528)在第二区域内的指示器。
在一些实施方案中，调节当前正在播放的媒体的音量包括(1530)：电子设备(例如，1400)调节(1532)媒体回放音量(例如，图14M的1430)；并且电子设备(例如，1400)调节(1534)虚拟助理音量(例如，图14M的1432)。在一些实施方案中，虚拟助理音量与媒体回放音量成比例。
在一些实施方案中，当媒体回放音量为零时，虚拟助理音量为非零的。
在一些实施方案中，虚拟助理音量(例如，1432)的最大值低于媒体回放音量(例如，1430)的最大值。
需注意，上文相对于方法1500所述的过程(例如，图15A-图15C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法1500所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图16A-图16P根据一些实施方案示出了用于将媒体添加到回放队列的示例性用户技术和界面。这些附图中的用户界面被用于示出包括图17至-图18中的过程的下文描述的过程。
图16A示出了示例性场景，其中多个设备相连接。具体地讲，设备1600是连接到设备1602和设备1604(例如，个人设备)两者的智能扬声器。在一些实施方案中，设备1600包括设备100、300、500或580的一个或多个特征。在一些实施方案中，设备1602和设备1604包括设备100、300、500或580的一个或多个特征。在一些示例中，设备1602和设备1604的相应用户可能期望将媒体添加到由设备1600维护和/或存储在该设备中的共享回放队列。图16B-图16P示出了用于这样做的示例性技术。
在图16B中，设备1602在显示器1603上显示示例性播放列表选择界面1606。在界面标题1606A下，设备1602显示表示标题为“Tim的生日”的播放列表的播放列表示能表示1606B。如图16B所示，播放列表“Tim的生日”被识别为“共享播放列表”。在一些实施方案中，共享队列(例如，共享播放列表)是一个或多个用户和/或一个或多个设备可访问和/或管理(例如，添加媒体项、移除媒体项、开始回放等)的队列。在图16C中，设备1602接收表示对示能表示1606B的选择的用户输入1608。在一些实施方案中，响应于接收到用户输入1608，设备1602显示图16D的界面1610。
图16D示出了表示回放队列(也另被称为“媒体回放队列”或简称为“队列”)的示例性界面。图16D的播放列表界面1610包括在播放列表标识符1610A下列出的单个媒体项1610B。如图16D所示，媒体项1610B表示由艺术家“Jambug”所作的歌曲“Same Thing”。在一些实施方案中，表示回放队列的界面包括与媒体项相关联的附加信息。例如，媒体项1610B还包括对将该媒体项添加到该播放列表的用户(例如，名为Tim的用户)和媒体项的源(例如，名为Apple Music的媒体流传输服务)的识别。
在该示例中，播放列表界面1610被显示在设备1602上。然而，因为由播放列表界面1610表示的回放队列是共享队列，所以它可被多个用户和/或多个设备访问。在一些实施方案中，设备1604显示播放列表界面1610。在一些实施方案中，设备1602和设备1604显示(例如，同时)播放列表界面1610。重新参考图16A中的场景，设备1602和设备1604与不同的用户相关联。
虽然在该示例中参考了歌曲的播放列表，但是示例性回放队列不限于歌曲。在一些实施方案中，回放队列是表示一个或多个媒体项和可用于访问该媒体项(例如，用于回放)的信息的任何数据。在一些实施方案中，回放队列包括与所述一个或多个媒体项相关联的数据。例如，回放可包括关于以下各项中的一个或多个的信息：将媒体添加到队列的时间、媒体从队列结束的时间、媒体的源(例如，文件位置、URL、对流传输服务的识别、源设备(例如，存储该媒体项的设备))、用于访问媒体的凭证(例如，登录凭证或准予对媒体流传输服务的访问的令牌)、将媒体添加到队列的用户的标识符、将媒体添加到队列的设备的标识符等。在一些实施方案中，回放队列包括但不限于以下类型的媒体项中的一个或多个：音频文件、视频文件、音频流、视频流等。
回到附图，图16E-图16P根据一些实施方案示出了用于将媒体项添加到播放列表界面1610中所描绘的播放列表的示例性界面。
在图16E中，设备1602显示浏览界面1612，该浏览界面被浏览界面标头1612A识别为新音乐的列表。在一些实施方案中，设备1602继显示播放列表界面1610之后显示浏览界面1612。在一些实施方案中，浏览界面是用于浏览和选择媒体项的任何界面(例如，媒体应用程序的界面)。浏览界面1612包括表示第一媒体项(例如，由艺术家“The Fomoers”所作的歌曲“Monday Morning”)的示能表示1612B和表示第二媒体项(例如，由艺术家“MKTS”所作的歌曲“Paradise”)的示能表示1612C。在图16F中，设备接收与示能表示1612B相关联的用户输入1614。在一些示例中，用户输入1614是深按压或按压和保持用户输入。
在图16G中，响应于用户输入1614，设备1602显示媒体菜单1616。媒体菜单1616包括用于执行与示能表示1612B的媒体项相关联的动作的各种项目。媒体菜单1616包括示能表示1616A(例如，“添加到播放列表”示能表示)。在图16H中，设备1602接收表示对示能表示1616A的选择的用户输入1618。在一些示例中，用户输入1618是轻击用户输入。
响应于用户输入1618，设备1602显示已被更新以包括媒体项1610C的播放列表界面1610(图16I)。媒体项1610C表示与图16G的媒体菜单1616相关联的媒体项(例如，由艺术家“The Fomoers”所作的歌曲“Monday Morning”)。因此，设备1602的用户已将媒体项添加到标题为“Tim的生日”的共享播放列表。如上所述，其他用户和设备(例如，设备1604)可查看媒体并将其添加到共享队列中，如下所示。
在图16J中，设备1604在显示器1605上显示媒体菜单1619。在一些实施方案中，响应于与浏览器界面1612(例如，如图16E所示)的示能表示1612C(表示第二媒体项(例如，由艺术家“MKTS”所作的歌曲“Paradise”))相关联的用户输入(未示出)，设备1604显示媒体菜单1619。媒体菜单1619包括示能表示1619A(例如，“添加到播放列表”示能表示)。如图16J所示，设备1604接收与示能表示1619A相关联的用户输入1620。在一些示例中，用户输入1620是轻击用户输入。
响应于输入1620，设备1604显示已被更新以包括媒体项1610D的播放列表界面1610(图16K)。媒体项1610D表示与图16J的媒体菜单1619相关联的媒体项(例如，由艺术家“MKTS”所作的歌曲“Paradise”)。因此，设备1604的用户已将媒体项添加到标题为“Tim的生日”的共享播放列表。因此，在该示例中，与两个不同用户相关联的两个设备访问媒体并将媒体添加到共享队列(例如，媒体队列“Tim’s Playlist”，如由1610所表示的)。
图16K还根据一些实施方案描绘了关于由播放列表界面1610表示的回放队列中的媒体项中的一个或多个媒体项的附加信息。如图所示，每个示能表示都包括关于将对应媒体项添加到队列的用户(例如，用户账户)的信息。另外，每个示能表示都包括关于到队列的对应媒体项的源(例如，媒体应用程序)的信息。如图所示，媒体项1610B被用户“Tim”从源“Apple Music”(例如，音乐应用程序，用于播放本地文件或媒体流)添加。媒体项1610C被用户“Jessica”(标识符1610G)从源“MusicStreamer”(例如，音乐流传输应用程序)(标识符1610E)添加。媒体项1610D被用户“Jim”(标识符1610H)从源“Music Website”(例如，音乐流传输网站)(标识符1610F)添加。
在一些实施方案中，用户可从共享队列移除媒体项。图16L-图16O描绘了用于从共享队列移除媒体项的示例性界面。在图16L中，设备1604接收与播放列表界面1610的示能表示1610C相关联的用户输入1621。在一些示例中，用户输入1621是深按压或按压和保持用户输入。
响应于输入1621，设备1604显示媒体菜单1622，该媒体菜单包括用于从播放列表删除媒体项的示能表示1622A(例如，其包括文本“从Tim的生日删除”)(图16M)。在图16M中，设备1604接收表示对示能表示1622A的选择的用户输入1623。在一些示例中，用户输入1623是轻击用户输入。
在图16N中，响应于输入1623，设备1604显示已被更新以移除与示能表示1610C相关联的媒体项的播放列表界面1610。因此，在图16N所示的示例中，设备1604的用户已删除了由设备1602的用户添加的媒体项。在一些实施方案中，任何用户都可从共享队列删除媒体项。在一些实施方案中，用户只能删除由他们添加的媒体项。在一些实施方案中，用户不能从队列删除任何媒体项(例如，即使由他们添加)。在一些实施方案中，用户从队列删除媒体项的能力受制于许可。例如，用户可能缺少从共享队列删除媒体项的能力(例如，许可)，但是随后在被授予许可(例如，由家庭的成员)之后获得这种能力。在一些实施方案中，用户通过成为一组用户的成员(例如，包括设备1600或维护或存储队列的另一设备的家庭中的成员)而具有从队列移除媒体项的能力(例如，许可)。
图16O示出了通知用户他们不具有从共享队列删除项目的许可的示例性消息。消息框1624包括消息“您不具有从Tim的生日播放列表删除曲目的许可”。在一些实施方案中，响应于用户输入1623，设备1604显示消息框1624。因此，作为图16N所示结果的替代方案，在一些示例中，如果设备1604的用户不具有移除由设备1602的用户添加的媒体项的许可，设备1604显示如图16O所示的消息框1624。
在一些实施方案中，用户或设备需要将媒体项添加到回放队列的许可。例如，如果用户缺少将媒体项添加到共享队列的许可，则可显示类似于1624的消息框，其写道“您不具有将曲目添加到Tim的生日播放列表的许可”。在一些实施方案中，添加媒体项的许可受制于与上文相对于移除媒体项的许可所述相同的条件或批准状态和级别，因此不再重复。
图16P根据一些实施方案示出了示例性队列移除条件。队列移除条件1632指示媒体项1610C将在23小时后“结束”(例如，自动从队列移除)。在一些实施方案中，回放队列中的媒体项受制于在满足(例如，或不满足)条件(也被称为“队列移除条件”)之后被从队列移除。在一些实施方案中，根据确定满足与媒体项相关联的队列移除条件，设备(例如，维护或存储队列的设备)从回放队列移除该媒体项。在一些实施方案中，如果添加媒体项(例如，1610C)的请求者(例如，1602)不再连接到包括维护或存储回放队列的设备(例如，1600)的局域网，则满足队列移除条件。在一些实施方案中，如果在将第一媒体项添加到队列之后经过了预先确定的时间量，则满足队列移除条件。在一些实施方案中，预先确定的时间量是24小时。在一些实施方案中，如果请求者(例如，将媒体项添加到队列的用户和/或设备)不再连接到该局域网并且维护或存储队列的设备(例如，1600)未登录到媒体流传输服务(例如，其是该媒体项的源)，则满足队列移除条件。
特别地，第四设备1630显示图16P的回放界面1610。在一些实施方案中，第四设备与不同于与设备1600、1602和1604相关联的用户的用户(例如，用户账户)相关联。因此，如上所述，图16P进一步示出了可由任何数量的设备和任何数量的用户查看共享回放队列。在一些实施方案中，当(例如，直接)连接到维护或存储队列的设备(例如，图10M中设备1010和设备1000之间的通信链路1039)时，设备可访问共享队列。在一些实施方案中，当连接到公共网络如维护或存储队列的设备(例如，经由图10M中设备1010和设备1000之间的接入点1030)时，设备可访问共享队列。
在一些实施方案中，设备与媒体偏好配置文件(也被称为“品味偏好配置文件”)相关联。例如，设备1600可关联于(例如，登录到)与第三用户(例如，不是设备1602和设备1604的用户)相关联的用户账户。在一些示例中，第三用户可能不希望被添加到他们设备(例如，1600)上的共享回放队列的媒体影响他们的媒体偏好配置文件。例如，媒体偏好配置文件可包括表示以下各项中的一个或多个的数据：与第三用户的账户相关联的特定媒体项、媒体项回放历史、基于历史或品味偏好的媒体推荐等。因此，在一些实施方案中，添加到第一设备(例如，1600)上的回放队列的媒体不影响与第一设备(例如，1600)相关联的用户账户的媒体偏好配置文件。在一些示例中，如果设备1602的用户与第三用户(例如，其账户与设备1600相关联)相同，则设备1600基于设备1602添加的媒体但不基于设备1604(例如，与和第三用户不同的用户相关联)添加的媒体来更新第三用户的媒体偏好配置文件。因此，设备的拥有者可允许其他人将音乐添加到与该拥有者的用户账户相关联的设备上的回放队列，而不影响该设备拥有者的品味偏好配置文件。
图17A-图17C是示出了根据一些实施方案的用于使用电子设备来回放来自多个媒体流传输服务的媒体的方法的流程图。在设备(例如，100、300、500、580、1600)处执行方法1700。方法1700中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1700提供了用于回放来自多个媒体流传输服务的媒体的直观方式。该方法减轻了用户在回放来自多个媒体流传输服务的媒体时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地回放来自多个媒体流传输服务的媒体节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1600)接收(1702)用于使第一媒体项(例如，1612B)排队以在一组设备(例如，1600)上回放的第一请求(例如，由图16H的用户输入1618表示)。在一些实施方案中，该组设备包括第一设备(例如，1600)。在一些实施方案中，该组设备包括一个或多个设备。在一些实施方案中，该组设备排除第一设备(例如，1600)。
电子设备(例如，1600)将第一媒体项(例如，如图16K所示的1610C)添加(1704)到回放队列(例如，1610A)。
电子设备(例如，1600)接收(1706)用于使第二媒体项(例如，1612C)排队以在该组设备(例如，1600)上回放的第二请求(例如，由图16J的用户输入1620表示)。
电子设备(例如，1600)将第二媒体项(例如，图16L所示的1610D)添加(1708)到该回放队列(例如，1610A)。
电子设备(例如，1600)从第一媒体流传输服务(例如，由图16K的1610E表示)访问(1710)第一媒体项(例如，1610C)。
电子设备(例如，1600)在该组设备(例如，1600)上发起(1712)第一媒体项(例如，1610C)的回放；
电子设备(例如，1600)从不同于第一媒体流传输服务(例如，1610E)的第二媒体流传输服务(例如，由图16K的1610F表示)访问(1714)第二媒体项(例如，1610D)。
电子设备(例如，1600)在该组设备(例如，1600)上发起(1716)第二媒体项(例如，1610D)的回放。
允许来自第一媒体流传输服务的第一媒体项和来自不同于第一媒体流传输服务的第二媒体流传输服务的第二媒体项被添加到公共回放队列、被访问和被回放允许用户有效地使用单个界面使来自不同源的媒体排队并管理媒体的回放，因此需要更少的用户输入来实现该目的。减少执行操作所需的输入的数量增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，第一请求接收自第一请求者(例如，1602)。在一些实施方案中，请求者是设备(例如，1602)。在一些实施方案中，请求者是用户账户(例如，与图16K的标识符1610G相关联的用户账户)。在一些实施方案中，请求者是与设备相关联的用户账户。在一些实施方案中，第一请求包括对第一请求者(例如，由图16K的1610G表示)的识别。
在一些实施方案中，第二请求接收自不同于第一请求者(例如，1602)的第二请求者(例如，1604)。在一些实施方案中，第二请求包括对第二请求者(例如，由图16L的1610H表示)的识别。
在一些实施方案中，第一请求者是与第一用户账户(例如，与标识符1610G相关联的用户账户)相关联的第二设备(例如，1602)。在一些实施方案中，第二请求者是与第二用户账户(例如，与标识符1610H相关联的用户账户)相关联的第三设备(例如，1604)。
在一些实施方案中，进一步响应于接收到第一请求，电子设备(例如，1600)确定第一请求者(例如，1602)是否具有将媒体项(例如，1610C)添加到回放队列(例如，1610)的许可。根据确定第一请求者具有将媒体项添加到回放队列(例如，1610)的许可，电子设备(例如，1600)将第一媒体项添加到回放队列(例如，如图16I所示的1610)。根据确定第一请求者不具有将媒体项添加到回放队列的许可，电子设备(例如，1600)放弃将第一媒体项添加到回放队列(例如，1610保持如图16D所示)。
在一些实施方案中，为了确定第一请求者是否具有将媒体项添加到回放队列的许可，电子设备(例如，1600)确定与第一请求者(例如，1602)相关联的用户账户(例如，与标识符1610G相关联的用户账户)是否具有将媒体项(例如，1610C)添加到回放队列(例如，1610)的许可。根据确定与第一请求者相关联的用户账户具有将媒体项添加到回放队列的许可，电子设备(例如，1600)将第一媒体项(例如，1610C)添加到回放队列(例如，如图16I所示的1610)。根据确定与第一请求者相关联的用户账户不具有将媒体项添加到回放队列的许可，电子设备(例如，1600)放弃将第一媒体项添加到回放队列(例如，1610保持如图16D所示)。
在一些实施方案中，电子设备(例如，1600)从第二请求者(例如，1604)接收用于从回放队列(例如，1610)移除第一媒体项(例如，1610C)的第三请求(例如，1623)。电子设备(例如，1600)确定第二请求者是否具有从回放队列移除第一媒体项的许可。根据确定第二请求者具有从回放队列移除第一媒体项的许可，电子设备(例如，1600)从回放队列(例如，如图16N所示的1610)移除第一媒体项。根据确定第二请求者不具有从回放队列移除第一媒体项的许可，电子设备(例如，1600)放弃从回放队列移除第一媒体项(例如，1610保持如图16K所示)。
在一些实施方案中，为了确定第二请求者(例如，1604)是否具有从回放队列移除第一媒体项的许可，电子设备(例如，1600)确定第二请求者(例如，1604)是否是与第一设备相关联的预定义的一组请求者(例如，由图6A的603A至603C表示的一组用户)的成员。根据确定第二请求者是与第一设备(例如，1600)相关联的预定义的一组请求者的成员，电子设备(例如，1600)从回放队列移除第一媒体项(例如，1610C)(例如，如图16N的1610所示)。根据确定第二请求者是与第一设备相关联的预定义的一组请求者的成员，电子设备(例如，1600)放弃从回放队列移除第一媒体项(例如，1610保持如图16K所示)。
在一些实施方案中，电子设备(例如，1600)向第四设备(例如，图16P的1630)传输(1718)回放队列(例如，图16P的播放列表1610)的内容的指示以用于在第四设备上显示。在一些实施方案中，回放队列的内容的指示包括：与回放队列(例如，图16P的1610)中的第一媒体项(例如，1610C)相关联的第一请求者的指示(例如，1610G)(1720)、能够从其访问第一媒体的第一媒体流传输服务的指示(1722)、与回放队列中的第二媒体项(例如，1610D)相关联的第二请求者的指示(例如，1610H)(1724)，以及能够从其访问第二媒体项的第二媒体流传输服务的指示(1726)。
在一些实施方案中，继将第一媒体项添加到回放队列之后：电子设备(例如，1600)确定(1728)是否满足针对第一媒体项(例如，1610C)的队列移除条件(例如，由图16P的1632示出)。在一些实施方案中，如果添加媒体项(例如，1610C)的请求者(例如，1602)不再连接到包括第一设备(例如，1600)的局域网，则满足队列移除条件。在一些实施方案中，如果在将第一媒体项添加到队列之后经过了预先确定的时间量，则满足队列移除条件。在一些实施方案中，预先确定的时间量是24小时。在一些实施方案中，如果请求者不再连接到局域网并且第一设备(例如，1600)未登录到第一媒体流传输服务，则满足队列移除条件。在一些实施方案中，根据确定满足针对第一媒体项的队列移除条件，电子设备(例如，1600)从回放队列移除(1730)第一媒体项(例如，如图16O所示地移除媒体项)。在一些实施方案中，根据确定不满足针对第一媒体项的队列移除条件，电子设备(例如，1600)放弃从回放队列移除(1732)第一媒体项。
在一些实施方案中，第一设备(例如，1600)不被包括(1734)在该组设备中。
需注意，上文相对于方法1700所述的过程(例如，图17A-图17C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法1700所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图18A-图18C是示出了根据一些实施方案的用于使用电子设备来回放多个设备所请求的媒体的方法的流程图。在设备(例如，100、300、500、580、1600)处执行方法1800。方法1800中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1800提供了用于回放多个设备所请求的媒体的直观方式。该方法减轻了用户在回放多个设备所请求的媒体时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地回放多个设备所请求的媒体节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1600)从与第一用户(例如，第一用户账户)相关联的第二设备(例如，1602)接收(1802)用于使第一媒体项(例如，图16E的1612B)排队以在一组设备(例如，1600)上回放的第一请求(例如，由图16H的用户输入1618表示)。在一些实施方案中，该组设备包括第一设备(例如，1600)。在一些实施方案中，该组设备包括一个或多个设备。在一些实施方案中，该组设备排除第一设备(例如，1600)。
电子设备(例如，1600)将第一媒体项(例如，图16K的1610C)添加(1804)到回放队列(例如，图16K的1610)；
电子设备(例如，1600)从与第二用户(例如，第二用户账户)相关联的第三设备(例如，1604)接收(1806)用于使第二媒体项(例如，图16E的1612C)排队以在该组设备(例如，1600)上回放的第二请求(例如，由图16J的用户输入1620表示)。在一些实施方案中，第二用户不同于第一用户。
电子设备(例如，1600)将第二媒体项(例如，图16K的1610D)添加(1808)到回放队列(例如，图16L的1610)。
电子设备(例如，1600)在该组设备(例如，1600)上发起(1810)第一媒体项(例如，图16K的1610C)的回放。
电子设备(例如，1600)在该组设备(例如，1600)上发起(1812)第二媒体项(例如，图16L的1610D)的回放。
允许来自与第一用户相关联的第一设备的第一媒体项和来自与不同于第一用户的第二用户相关联的第二设备的第二媒体项被添加到用于在公共的一组设备上回放的队列允许多个用户有效地从多个设备中的任一个来共享和管理公共回放队列，因此需要更少的用户输入来实现该目的。减少执行操作所需的输入的数量增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，第一请求包括(1814)第一用户和第二设备中的至少一个的第一标识符(例如，图16K的1610G)。
在一些实施方案中，第二请求包括(1814)第二用户和第三设备中的至少一个的第二标识符(例如，图16K的1610H)。
在一些实施方案中，第二设备(例如，1602)关联于与第一用户相关联的第一用户账户。在一些实施方案中，第一用户账户是媒体流传输服务上的用户账户。例如，示例性媒体流传输服务包括Apple Music、Spotify等。在一些实施方案中，第一用户账户是基于云端的服务的用户账户。例如，示例性媒体流传输服务包括Apple iCloud等。
在一些实施方案中，第三设备(例如，1604)关联于与第二用户相关联的第二用户账户。
在一些实施方案中，电子设备向第四设备(例如，图16P的1630)传输用于在第四设备上显示的回放队列的内容的指示(例如，图16P的播放列表1610)，其中回放队列的内容的指示包括：与回放队列中的第一媒体项(例如，图16P的1610C)相关联的第一标识符(例如，图16P的1610G或1610E)以及与回放队列中的第二媒体项(例如，图16P的1610D)相关联的第二标识符(例如，图16P的1610H或1610F)。
在一些实施方案中，进一步响应于接收到第二请求，并且根据确定第三设备(例如，1604)具有将媒体项添加到回放队列的许可，电子设备(例如，1600)将第二媒体项(例如，图16K的1610D)添加到回放队列。在一些实施方案中，根据确定第三设备不具有将媒体项添加到回放队列的许可，电子设备(例如，1600)放弃将第二媒体项添加到回放队列(例如，1610保持如图16I所示)。
在一些实施方案中，进一步响应于接收到第二请求(1818)：根据确定与第三设备(例如，1604)相关联的第二用户(例如，图16K的1610H)具有将媒体项(例如，图16K的1610D)添加到回放队列的许可，电子设备(例如，1600)将第二媒体项添加(1820)到回放队列(例如，如图16K所示)。在一些实施方案中，根据确定与第三设备相关联的第二用户不具有将媒体项添加到回放队列的许可，电子设备(例如，1600)放弃将第二媒体项添加(1822)到回放队列(例如，该回放队列保持如图16I所示，其不包括媒体项1610D)。
在一些实施方案中，电子设备(例如，1600)从第三设备(例如，1604)接收(1824)用于从回放队列移除第一媒体项(例如，1610C)的第三请求(例如，图16M的1623)。在一些实施方案中，响应于接收到第三请求(1826)，并且根据确定第三设备具有从回放队列移除第一媒体项的许可，电子设备(例如，1600)从回放队列(例如，如图16N所示的1610)移除(1828)第一媒体项。在一些实施方案中，根据确定第三设备不具有从回放队列移除第一媒体项的许可，电子设备(例如，1600)放弃从回放队列移除(1830)第一媒体项(例如，并且显示图16O的消息1624)。
在一些实施方案中，响应于接收到第三请求(例如，图16M的1623)，并且根据确定第二用户是与第一设备(例如，1600)相关联的预定义的一组用户(例如，由图6A的603A至603C表示的一组用户)的成员，电子设备(例如，1600)从回放队列(例如，如图16N所示的1610)移除第一媒体项(例如，1610C)。在一些实施方案中，根据确定第二用户不是与第一设备相关联的预定义的一组用户的成员，电子设备(例如，1600)放弃从回放队列移除第一媒体项。
在一些实施方案中，继将第一媒体项添加到回放队列之后，并且根据确定满足针对第一媒体项(例如，1610C)的队列移除条件(例如，由图16P的1632示出)，电子设备(例如，1600)从回放队列(例如，如图16N所示的1610)移除第一媒体项。在一些实施方案中，如果添加媒体项(例如，1610C)的请求者(例如，1602)不再连接到包括第一设备(例如，1600)的局域网，则满足队列移除条件。在一些实施方案中，如果在将第一媒体项添加到队列之后经过了预先确定的时间量，则满足队列移除条件。在一些实施方案中，预先确定的时间量是24小时。在一些实施方案中，如果请求者不再连接到局域网并且第一设备(例如，1600)未登录到媒体流传输服务(例如，其是该媒体项的源)，则满足队列移除条件。在一些实施方案中，根据确定不满足针对第一媒体项的队列移除条件，电子设备(例如，1600)放弃从回放队列移除第一媒体项。
在一些实施方案中，第一设备(例如，1600)不被包括(1816)在该组设备中。
在一些实施方案中，第一设备(例如，1600)与媒体偏好配置文件相关联，其中媒体偏好配置文件与第一用户相关联。在一些实施方案中，进一步响应于从与第一用户相关联的第二设备(例如，1602)接收到用于使第一媒体项(例如，1610C)排队以用于回放的请求(例如，1618)，电子设备(例如，1600)基于第一媒体项来更新(1832)媒体偏好配置文件。在一些实施方案中，进一步响应于从与第二用户相关联的第三设备接收到用于使第二媒体项排队以用于回放的请求，电子设备(例如，1600)放弃基于第二媒体项来更新(1834)媒体偏好配置文件。例如，如果从不与设备1600的拥有者(例如，家庭成员)相关联的设备或用户接收到用于使第一媒体项排队的请求，则用于使媒体项排队的请求不会影响拥有者的品味偏好(例如，其可基于在设备1000或其他家庭设备上回放的媒体的历史)。
需注意，上文相对于方法1800所述的过程(例如，图18A-图18C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法1800所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图19A-图19AL根据一些实施方案示出了用于使用第一设备来配置第二设备的示例性用户界面。这些附图中的用户界面被用于示出包括图20A-图20C中的过程的下文描述的过程。
图19A示出了其中用户将设备1900拿到与设备1906处于非常接近的场景(例如，类似于图10E所示的场景)。在该示例中，设备1900被用于配置设备1906(例如，在第一次给设备1906通电之后的初始配置)。如图所示，设备1906正在输出音频音调信号1904(例如，表示声波)。在一些实施方案中，响应于设备1900与设备1906处于非常接近的指示，设备1906输出音频音调信号(例如，1904)。在一些实施方案中，响应于设备1900与设备1906处于非常接近的指示，设备1900输出音频音调信号(未示出)。在一些实施方案中，来自设备1900和设备1906的音频音调信号被同步(例如，被同时输出)。在一些实施方案中，音频音调信号中的一个在时间上交错(例如，设备1900首先播放音调，接着是设备1906)。在一些实施方案中，音频音调信号是谐波相关的或者兼容的(例如，如上文相对于图10O-图10N所述)。为了简洁起见，上文关于设备处于非常接近时的放置和检测的描述(例如，相对于图10A-图10O)据此以引用方式并入，因此不再重复。
在一些实施方案中，音频音调信号仅由设备1900之外的与设备1900处于非常接近的一个设备(例如，待配置的设备，诸如设备1906)输出。例如，在一些情况下，设备1900被放置成与可使用设备1900来配置的多个其他设备处于非常接近。例如，用户可能已经购买了两个扬声器(例如，诸如设备1906)并且希望配置它们中的一个。在这种情况下，用户意识到哪个扬声器设备1900已连接并且将例如根据下文描述的技术来配置是有用的。因此，即使设备1900被拿到与两个可配置设备处于非常接近，只有在配置过程期间将被配置的可配置设备(例如，设备1906)将响应于设备1900处于非常接近的指示而输出音频音调。
图19B描绘了设备1900紧接着在被放置成与设备1906处于非常接近之前的示例性状态。如图所示，设备1900在显示器1902上显示home屏幕(例如，如图6B所示的home屏幕605)。在图19C中，设备1900被放置成与设备1906处于非常接近(例如，在接近度区域1908内)。在一些实施方案中，以类似于相对于图10C-图10G讨论的方式的方式来检测接近度。在一些实施方案中，响应于检测到设备1900进入到与设备1906处于非常接近的指示，设备1900显示感应卡1910，如图19D所示。
图19D-图19AJ根据一些实施方案示出了配置过程的示例性界面。在该示例中，配置过程是用于使用第一设备来配置第二设备的过程。因此，如图所示，界面被显示在第一设备(例如，设备1900)上，并且配置过程的步骤与例如向第二设备传输数据、选择或输入配置设置等有关。在一些实施方案中，可以任何次序(例如，本文示出或描述的次序之外的次序)显示图19D-图19AJ所示的步骤。在一些实施方案中，图19D-图19AJ所示的步骤中的一个或多个步骤可从配置过程省略。在一些实施方案中，图19D-图19AJ所示的那些之外的一个或多个步骤被添加到配置过程。在一些实施方案中，第一设备和第二设备是包括设备100、300、500或580的一个或多个特征的设备。
图19D示出了示例性设置卡。在一些实施方案中，响应于被放置成与设备1906处于非常接近，设备1900显示设置卡1910。因此，设置卡在本文中也被称为如上所述的“感应卡”，对后者的描述据此以引用方式并入。在一些实施方案中，在从与另一设备处于非常接近移开之后，设备继续显示感应卡。
设置卡1910包括对待配置的设备的识别，该设备是设备1900被放置成与其处于非常接近的设备(例如，1906)。如图所示，设置卡1910包括标题“扬声器”(例如，设备1906是智能扬声器)以及描绘该设备的图像(例如，以如图19A所示的设备1906的形状)。设置卡1910还包括示能表示1910A。在一些实施方案中，响应于接收到对示能表示1910A的选择，设备1900发起配置过程(或以其他方式前进至配置过程中的下一个步骤)。
在图19E中，设备1900显示设置卡1912。在一些实施方案中，响应于对图19D中的示能表示1910A的用户输入选择(未示出)，设备1900显示设置卡。设置卡1912描绘了示例性位置选择界面。设置卡1912包括位置选择示能表示1912A(例如，其可以是可滚动列表或可移动列表项选择器)。设置卡还包括示能表示1912B，例如用于前进至配置过程中的下一个步骤。在该示例中，使用示能表示1912A来选择位置“John的房间”，并且设备1900接收示能表示1912B上的用户输入1913。在一些实施方案中，响应于与设置卡相关联的用户输入(例如，1913)，设备1900传输配置数据。在一些示例中，响应于在选择了位置“John的房间”时前进至下一个步骤(例如，响应于用户输入1913)，设备1900向设备1906传输针对“John的房间”的位置标识符。在一些示例中，设备1906接收位置标识符并将其保存到存储器中(例如，利用一个或多个其他配置设置来存储它)。在一些实施方案中，设备1900将配置数据传输到第三设备(例如，不是设备1900或设备1906)。例如，设备1900可将配置数据传输到用户家中的另一设备(例如，家庭控制集线器设备，诸如由Apple Inc.(Cupertino,California,USA)研发的Apple TV)。在一些实施方案中，响应于用户输入1913，设备1900显示图19F的设置卡1914。
在图19F中，设备1900显示设置卡1914。设置卡1914包括给用户以与设备1906共享设置的提示(“共享您的设置”)。在一些实施方案中，设置卡1914包括对要与设备1906共享的设置的识别。例如，如图19F所示，设置卡识别要传输到设备1906的用户账户(例如，登录凭证)和家庭无线网络(例如，连接凭证)。在一些实施方案中，设备1900已经连接到或登录到(或以其他方式能够登录到(例如，凭证存储在存储器中))由设置卡1914识别的账户或网络。因此，设置卡1914提供了用于识别某些设置和允许与设备1906共享这些设置的简易界面。在一些实施方案中，设置卡1914允许选择这些设置中的一个或多个设置以与设备1906共享。例如，设置卡1914可包括允许选择少于其中列出的所有帐户的选择示能表示，因此允许用户与设备1906共享一些(但不是全部)设置。如图19F所示，在该示例中要共享的设置是：用于用户账户(例如，与“Apple ID”“JAppleseed@icloud.com”相关联)的凭证和用于无线网络(例如，用于名为“Appleseed Home”的Wi-Fi网络)的凭证。在一些实施方案中，响应于对示能表示1914B的用户输入选择，设备1900将设置信息传输到设备1900。
在图19G中，设备1900显示设置卡1916。在一些实施方案中，响应于对示能表示1914B的用户输入选择，设备1900显示设置卡1916。在一些示例中，在设备1900与设备1906交换数据(例如，设备1900传输如上所述的设置数据)时显示设置卡1916。例如，设置卡1916包括示出设备正在连接(或以其他方式交换数据)的状况1916A。
在图19H中，设备1900显示设置卡1918。在一些实施方案中，继设置卡1916之后，设备1900显示设置卡1918。例如，在将设置数据传输到设备1906之后，设备1900显示设置卡1916。设置卡1918包括消息1918A。在一些实施方案中，该消息传达配置过程的当前状态。例如，如图19H所示，消息1918A写道“正在播放音调”。因此，在所描绘的示例中，设备1906当前正在播放音调(例如，音频音调信号)。在一些实施方案中，在显示消息1916A时，设备1900正在侦听设备1906播放的音调。为了简洁起见，上文(例如，相对于图10A-图10O)对音频音调信号的描述据此以引用方式并入。
在一些实施方案中，设备1900显示指示设备1900未检测到音调的消息(未示出)。例如，设备1900可更新消息1916A以写道“您的设备正在侦听但是无法检测到音调，请将您的电话移近点”。
在一些实施方案中，设置卡1918包括用于输入密码的一个或多个字段(未示出)。在一些实施方案中，设备1900显示设置卡1972(图19AJ)，其包括用于输入密码的键盘和字段。例如，如上所述(例如，相对于图10A-图10O)，设备1906可输出口述密码(例如，如果在阈值次数的尝试之后设备1900无法检测到音调)。因此，使用设置卡1918或设置卡1972的一个或多个字段，用户可输入由设备1906口述的密码，例如以便进展到配置过程中的下一个步骤(例如，完成设置过程)。
在图19I中，设备1900显示设置卡1920，其描绘了完成设置卡。在一些实施方案中，在将设置数据传输到设备1906之后，设备1900显示设置卡1920。在一些实施方案中，在检测到由设备1906输出的音频音调之后，设备1900显示设置卡1920。在一些示例中，对完成示能表示1920A的选择解除设置卡1920。
如先前所述，设备(例如，设备1906)可被配置为设备组(例如，立体声对)的一部分。图19J-图19L根据一些实施方案示出了用于将设备配置为设备组的一部分的示例性界面。
在图19J中，设备1900显示设置卡1922。在一些实施方案中，响应于用户输入1913(例如，表示对图19E的示能表示1912B的选择，设置设备1906的位置)，设备1900显示设置卡1922。在图19J所示的示例中，位置“John的房间”已经包括现有设备(例如，另一个智能扬声器，如设备1906)，并且向用户呈现了用于创建包括现有设备和设备1906的设备组的选项。用户可选择示能表示1922A(“用作立体声对”)或示能表示1922B(“现在不用”)中的任一者。在一些示例中，对示能表示1922B的选择继续如上所述的配置过程(例如，显示设置卡1914)。如图19J所示，设备1900接收表示对示能表示1922A的选择的用户输入1923。在一些实施方案中，响应于接收到用户输入1923，设备1900显示设置卡1924。
图19K示出了示例性设备组配置界面。设置卡1924包括用于为正被配置的设备(例如，设备1906)选择音频信道的示能表示1924A和示能表示1924B。在该示例中，正在创建的设备组是立体声对(例如，将用于分别输出左信道和右信道立体声音频的两个设备)。在一些实施方案中，对示能表示1924C的选择取消创建设备组，并且继续如上所述的配置过程(例如，显示设置卡1914)。在图19K中，设备1900接收表示对左信道(表示为“L”)的选择的用户输入1925。因此，设备1906将被配置为为名为“John的房间扬声器”的设备组输出立体声音频信号的左信道。
在一些实施方案中，响应于接收到用户输入1925，设备1900显示图19L的设置卡1926。图19L指示立体声对创建成功并且包括示能表示1926A。在一些实施方案中，对示能表示1926A的选择继续如上所述的配置过程(例如，显示设置卡1914)。
图19M-图19N示出了用于创建新位置的示例性界面。在一些示例中，配置过程允许用户创建新的位置标识符以与设备1906相关联。图19M的设置卡1928示出了图19E的位置选择设置卡1912的另选版本。设置卡1928包括由示能表示1928A选择以创建新位置的选项(例如，如文本“创建新房间”所示)。图19N示出了用于输入位置标识符的示例性界面1930。在一些实施方案中，界面1930被显示为感应卡。界面1930包括用于例如使用所显示的键盘1930B来输入新位置(例如，房间)的名称的字段1930A。如图所示，设备1900的用户已将名称“Tim的房间”输入字段1930A中。设备1900接收表示对完成示能表示的选择的用户输入1931。在一些实施方案中，响应于对完成示能表示的选择，设备1900创建名为“Tim的房间”的位置并且将设备1906与其相关联(例如，将标识符传输到设备1900)。因此，在一些示例中，用户不需要退出或以其他方式终止配置过程以便找出用于为其家庭设备组创建新的位置标识符的界面(例如，家庭控制应用程序的界面，如上文相对图6A所述)，那样导致返回并从开始重新启动配置过程，浪费了时间和设备资源。在一些实施方案中，响应于接收到用户输入1931，设备显示设置卡1914。在一些实施方案中，响应于接收到用户输入1931，设备1900前进至配置过程中的下一个步骤。
在一些实施方案中，位置标识符是与设备相关联的名称。例如，在一些示例中，位置标识符不包括对任何特定位置的标引(例如，“扬声器1”)。因此，位置标识符可简单地用作识别配置的设备所用的名称(例如，在如上所述的多设备界面处)。
在一些示例中，配置过程需要设备1900登录到用户账户以便继续配置过程。图19O-图19P根据一些实施方案示出了用于在配置过程期间登录到用户账户的示例性界面。设置卡1932包括消息“请登录您的iCloud帐户以继续”，并且包括示能表示1932A，该示能表示包括选项“现在登陆”。在一些实施方案中，在设置卡1914之前显示设置卡1932。例如，如果设备1900确定其没有登录到所需的用户账户，则作为响应其显示设置卡1932。在一些实施方案中，在接收到登录凭证之后，设备1900显示设置卡1914。在一些实施方案中，响应于对示能表示1914B(“共享设置”)的选择，设备1900显示设置卡1932。
在图19P中，设备1900显示具有用于在配置过程期间接收登录凭证的字段1934A和字段1934B的设置卡1934。因此，在一些示例中，用户不需要退出或以其他方式终止配置过程以便找出登录页面，那样导致返回并从开始重新启动配置过程，浪费了时间和设备资源。在一些实施方案中，当在字段1934A和字段1934B中接收到登录凭证之后(例如，并且在验证它们或使用它们成功登录用户账户之后)，设备显示设置卡1914。在一些实施方案中，在接收到有效凭证之后(例如，经由设置卡1934)，设备1900前进至配置过程中的下一个步骤。
图19Q-图19R示出了可在配置过程期间被显示的另外的示例性界面。图19Q示出了用于启用语音助理功能的示例性界面。在一些示例中，配置过程允许用户启用允许设备(例如，设备1906)提供(例如，经由音频输出，诸如口述)与用户账户相关联的个人数据的语音助理功能。例如，这个特征可被称为“个人请求”。在一些示例中，设备1906由若干用户(与相应的用户账户相关联)使用，并且因此可从一个用户(例如，设备1900的用户)请求用于启用个人请求特征的明确许可。个人请求设置卡1936包括当被选择时启用个人请求特征的示能表示(标记为“启用”)，以及当被选择时不启用个人请求特征(例如，并且解除该卡并前进至配置过程中的下一个步骤)的示能表示(标记为“现在不用”)。在一些实施方案中，可在配置过程之后(例如，经由设置菜单等)启用或禁用个人请求特征。在一些实施方案中，卡1936是可选的。在一些实施方案中，卡1936在配置过程期间以任何次序显示。
图19R示出了用于启用音乐服务订阅的示例性界面。在一些实施方案中，在配置过程期间，设备(例如，设备1900)确定它不包括对音乐服务的有效订阅(例如，服务未启用、用户帐户未订阅或者用于访问音乐服务的一个或多个凭证不能被该设备访问)。设置卡1938包括当被选择时使得用户能够设置音乐服务订阅的示能表示(标记为“获取3个月免费使用权”)，以及当被选择时不前进至设置音乐订阅服务(例如，并且解除该卡并前进至配置过程中的下一个步骤)的示能表示(标记为“现在不用”)。在一些实施方案中，可在配置过程之后(例如，经由设置菜单等)启用或禁用音乐服务订阅。在一些实施方案中，设置卡1938是可选的。在一些实施方案中，卡1938在配置过程期间以任何次序显示。
图19S示出了用于共享设置的示例性界面。设置卡1940包括给用户以与设备1906共享设置的提示(“共享设置”)。设置卡1940类似于设置卡1914，并且可代替设置卡1914或作为其补充被显示。设置卡1940包括表示将在设备1906和设备1900之间共享的数据(例如，音乐数据、日历数据、家庭数据等)的图形描绘。在一些实施方案中，设置卡1940允许选择这些设置中的一个或多个设置以与设备1906共享。例如，设置卡1940可包括允许选择少于其中描绘的所有数据(例如，音乐、日历)的选择示能表示，因此允许用户与设备1906共享一些(但不是全部)数据。在一些实施方案中，响应于对卡1940的示能表示(标记为“共享设置”)的用户输入选择，设备1900将设置信息传输到设备1900。在一些实施方案中，响应于对卡1940的“共享设置”示能表示的用户输入选择，设备1900显示设置卡1916(图19G)。
图19T-图19Y示出了在成功配置之后的示例性界面。图19T描绘了设置卡1942，其包括对设备1906和复选标记图标的描绘，指示成功的数据传输(例如，设置被成功地共享)或配置(例如，配置完成)。在一些实施方案中，响应于用于共享设置的用户输入选择，设备1900显示设置卡1942。在一些实施方案中，设备1900在设置卡1916(图19G)或设置卡1918(图19H)之后显示设置卡1942。
图19U描绘了设置卡1944，其包括对用户名称的指示。在该示例中，用户(“Emily”)被以名称致意(“Hi，Emily！”)，指示设备1906成功接收到用户的账户数据和/或其他设置数据。设备1900任选地在设置卡1942之后显示设置卡1944。
图19V描绘了设置卡1946，其包括给用户以调用语音助理的功能的提示。例如，在成功配置设备1906之后，设备1900显示设置卡1946，鼓励用户尝试最近配置的设备1900的一个或多个特征。设置卡1946包括文本“试试我”并提示用户“说‘嘿，你能做什么？'”在一些实施方案中，设备1900在设置卡1916(图19G)、设置卡1918(图19H)、设置卡1920(图19I)、设置卡1940(图19S)、设置卡1942(图19T)或设置卡1944(图19U)之后显示设置卡1942。在一些实施方案中，设备1906输出与由设备1900显示的卡相匹配的语音提示，如图19AK所示，其显示设备1906正在输出语音提示“试试我，说：‘嘿，你能做什么？’”
图19W描绘了设置卡1948，其包括用于调用设备1906的语音助理操作的特征的各种示例语音命令。在一些实施方案中，响应于在设置卡1946被显示时接收到用户提供了语音命令的指示，设备1900显示设置卡1948。例如，设备1900确定(例如，使用麦克风进行检测或者接收到由另一设备进行的检测的指示)在卡1946被显示时用户发出语音命令“嘿，你能做什么？”，并且作为响应显示设置卡1948。在一些实施方案中，设置卡1948包括与设备1906上的(例如，使用该设备能够访问的)语音助理的一个或多个特征相关的一个或多个提示。在所描绘的示例中，设置卡1948包括文本“试着问我问题：”并且在其下面列出了用于调用语音助理的功能的各种提示。例如，设置卡1948包括与家庭应用程序控制特征(例如，应用程序)相关的提示“嘿，把灯关掉”、与新闻特征(例如，应用程序)相关的提示“嘿，来点最新的本地新闻？”、与天气特征(例如，应用程序)相关的提示“嘿，今天天气如何？”以及与音乐特征(例如，应用程序)相关的“嘿，放点儿音乐”。设置卡还可包括当被选择时使得设置卡1948被解除(例如，停止被显示)的完成示能表示1948A。在一些实施方案中，设置卡1948保持被显示直到示能表示1948A被选择。例如，如果用户通过说“嘿，天气怎么样”来调用天气特征，则设置卡1948保持被显示，这使用户有机会尝试调用另一个示例特征，诸如音乐特征或新闻特征。在一些实施方案中，响应于确定用户发出了语音命令(例如，使用麦克风进行检测或者接收到由另一设备进行的检测的指示)，设备1900停止显示设置卡1948。
在一些实施方案中，设备1906输出可听语音提示，提示用户提供图19W的设置卡1948所示的语音命令中的一个或多个。例如，响应在图19V中接收到的语音命令“嘿，你能做什么？”，设备1906可输出语音提示：“我可以做很多事情，比如打开灯、给您新闻更新以及告诉您天气情况。现在您试试说，‘嘿，放点儿音乐。’”图19AL示出了设备1906正在输出语音提示“现在您试试说：‘嘿，放点儿音乐。’”图19AL所示的设备1906的输出可在设备1900显示图19W的设置卡1948时发生。在该示例中，语音助理提示用户提供与音乐特征相关的命令(“嘿，放点儿音乐。”)。
虽然图19W的设置卡1948所示的示例示出了一些功能，但是用户的语音命令可调用设备1906的任何特征，因为它在配置成功时是完全可操作的。例如，语音助理(例如，在设备1906上)可正确响应请求语音助理提供与日历特征有关的信息的用户语音命令(例如，“嘿，今天我的日历上有什么会议？”)，即使日历特征不是设置卡1948中所示的示例特征/提示中的一个。另外，语音助理(例如，在设备1906上)可正确响应与语音提示中提示的相同特征相关的用户输入语音命令，或者可响应与和语音提示中提示的不同的特征相关的用户输入语音命令。例如，如上所述，设备1906可输出语音提示：“我可以做很多事情，比如打开灯、给您新闻更新以及告诉您天气情况。现在您试试说，‘嘿，放点儿音乐。’”接着该语音提示，如果用户提供与相同特征(音乐)相关的语音命令(例如，用户说“嘿，放点儿音乐”)，则设备1906可适当地响应(例如，播放一些音乐)。如果用户替代地提供与不同特征(例如，新闻)相关的语音命令，则设备1906仍然适当地响应(例如，通过输出新闻)。因此，如在上文与图19W相关的描述中可以看出，所显示的提示(例如，在卡1948中)或输出的语音提示(例如，通过设备1906)提供对最近配置的设备1906的一个或多个特征的指导，该最近配置的设备是可操作的(例如，受制于在配置过程期间建立的配置设置)。
在图19X中，设备1900显示识别当前正在回放的媒体项(例如，由设备1906回放)的当前媒体界面1950(也被称为“正在播放界面”)。在一些实施方案中，根据设备1906正在播放音乐，设备1900显示当前媒体界面1950。例如，响应于在设备1900显示设置卡1948时的用户输入语音命令“嘿，放点儿音乐”，设备1906开始播放音乐。在一些实施方案中，当前媒体界面1950与设置卡1948同时显示。例如，在图19X中，设置卡1948叠加在当前媒体界面1950的顶部。在一些示例中，当前媒体界面1950叠加在设置卡1948的顶部。
另外，图19X描绘了设置卡1948滑离(例如，沿着向下的方向)设备1900的显示器。在该示例中，继显示当前媒体界面1950之后，设备接收对示能表示1948A(图19W)的用户输入选择，并且作为响应，停止显示设置卡1948。在一些实施方案中，停止显示设置卡1948包括显示从显示器逐渐滑离的设置卡1948。在图19Y中，设备在停止显示设置卡1948之后显示当前媒体界面1950。
图19Z-图19AJ示出了可在配置过程期间被显示的各种界面。在一些实施方案中，图19Z-图19AJ所描绘的界面中的一个或多个是可选的。在一些实施方案中，设备(例如，设备1900)在用于配置另一设备(例如，设备1906)的配置过程期间以任何次序显示图19Z-图19AJ所描绘的界面中的一个或多个。例如，图19Z-图19AJ所描绘的界面中的一个或多个可作为补充或代替图19D-图19P所描绘的界面中的一个或多个被显示。
图19Z描绘了设置卡1952，其提示用户使用设备1900利用用户ID登入以便继续配置过程。在一些实施方案中，利用用户ID(例如，iCloud账户、Apple ID或可用于识别一个或多个用户的其他用户账户)登入被要求为配置过程(例如，用于配置设备1906)的一部分。在该示例中，标记为“转到设置”的示能表示被包括在设置卡1952中，并且不存在用于在不利用用户ID登入的情况下继续的选项。设置卡1952可作为补充或代替卡1932(图19O)或卡1934(图19P)被显示。
图19AA描绘了设置卡1954，其提示用户下载家庭控制应用程序(例如，称为“home应用程序”)到设备1900。特别地，在图19AA中，设备1900不包括(如图19Z所示的)标记为“Home”的应用程序图标。设置卡1954包括当被选择时使得设备1900执行与下载家庭控制应用程序相关的动作(例如，显示应用程序下载界面或直接下载该应用程序)的示能表示(标记为“转到应用程序商店”)，以及当被选择时不执行与下载该应用程序相关的动作(例如，并且解除该卡并前进至配置过程中的下一个步骤)的示能表示(标记为“现在不用”)。
图19AB描绘了设置卡1956，其提示用户在设备1900上启用位置服务。设置卡1956包括当被选择时使得设备1900执行与在设备1900上启用位置服务相关的动作(例如，显示设置界面或直接启用位置服务)的示能表示(标记为“启用位置服务”)，以及当被选择时不执行与启用位置服务相关的动作(例如，并且解除该卡并前进至配置过程中的下一个步骤)的示能表示(标记为“现在不用”)。
配置过程可要求在正被配置的设备(例如，设备1906)上启用某些特征，即使此类特征在执行配置的设备(例如，设备1900)上被禁用。图19AC描绘了设置卡1958，其通知用户将在扬声器(例如，设备1906)上启用语音助理。设置卡1958不包括用于禁用该特征(例如，语音助理)的选项，但是通知用户将在正被配置的设备上启用此类特征。在一些实施方案中，如果特征(例如，语音助理)在设备1900上被禁用，则设备1900显示设置卡1958。在一些实施方案中，如果特征(例如，语音助理)在设备1900上被启用，则设备1900不显示设置卡1958。在这种情况下，配置过程可在不通知用户的情况下启用语音助理，因为用户已经指示期望使用语音助理功能。在一些实施方案中，设置卡1958通知用户该特征(例如，语音助理)将在设备1900上保持被禁用(例如，即使它将在设备1906上被启用)。
图19AD描绘了用于选择语言的设置卡1960。例如，设备1906上的语音助理可以所选择的语言(例如，或者利用所选择的方言或口音)说话。在设置卡1960中，呈现了用于选择的三个语言选项(例如，英语(澳大利亚)、英语(英国)和英语(美国))。在一些实施方案中，设备1900接收对其中一种语言的用户输入选择，这将使得利用所选择的语言来配置设备1900。
在一些实施方案中，在设备1906的配置设置中自动采用与设备1906兼容的设备1900的设置。例如，如果设备1900在设备1900上将英语(美国)设置为它们的默认语言，并且设备1906仅与英语(美国)、英语(英国)和英语(澳大利亚)兼容，则设备1900在配置过程期间将不显示设置卡1960。相反，设备1906的配置设置将自动包括英语(美国)作为语言(例如，用于语音助理特征)。
在一些实施方案中，与设备1906不兼容的设备1900的设置使得设备1900显示用于选择兼容设置的界面。例如，如果设备1900在设备1900上将拉丁语设置为它们的默认语言，并且设备1906仅与英语(美国)、英语(英国)和英语(澳大利亚)兼容，则设备1900在配置过程期间将显示设置卡1960，提示用户选择兼容的语言设置。
图19AE描绘了设置卡1962，其提示用户使用设备1900登入音乐服务账户以便继续配置过程。在一些示例中，如果用户具有音乐服务账户但需要登录，则可显示设置卡1962。在该示例中，设置卡1962包括当被选择时使得设备1900执行与登入音乐服务相关的动作(例如，显示音乐设置界面)的示能表示(标记为“转到音乐设置”)，以及当被选择时不执行与登入音乐服务相关的动作(例如，并且解除该卡并前进至配置过程中的下一个步骤)的示能表示(标记为“现在不用”)。
图19AF描绘了设置卡1964，其提示用户为扬声器(例如，设备1906)选择“家庭”位置。在一些实施方案中，用户账户与多于一个家庭位置(例如，主要住处和度假住处)相关联。在这种情况下，设备1900显示设置卡1964，其允许用户选择设备1906将(例如，在物理上)位于的家庭位置。在一些实施方案中，设备1900接收对其中一个家庭位置的用户输入选择，这将使得利用所选择的位置来配置设备1900。在一些实施方案中，如果用户账户与一个家庭位置相关联，则由配置过程自动选择该家庭位置(例如，不显示设置卡1964)。在一些实施方案中，设置卡1964包括用于创建新的家庭位置的选项。例如，用于创建新的家庭位置的界面可类似于相对于图19M-图19N所述用于创建新的位置标识符(例如，房间)的界面操作。在一些实施方案中，如果与设备1900相关联的用户账户不是创建家庭位置的用户，则设备1900显示错误。
图19AG描绘了设置卡1966，其提示用户设置额外的账户安全措施(例如，双重因素认证)。在一些实施方案中，额外的账户安全措施被要求为配置过程(例如，用于配置设备1906)的一部分。在该示例中，标记为“转到设置”的示能表示被包括在设置卡1966中，并且不存在用于在不设置双重因素认证的情况下继续的选项。
图19AH-图19AI描绘了用于在配置过程期间连接到网络的示例性界面。图19AH描绘了设置卡1968，其提示用户选择用于执行与连接到无线网络相关的动作的示能表示(例如，标记为“打开Wi-Fi设置”)，以便继续配置设备1900。图19AI描绘了设置卡1970，其提示用户连接到无线网络(例如，Wi-Fi)以便继续配置设备1900。对图19AI中标记为“继续”的示能表示的选择可使得Wi-Fi直接被启用，并自动建立到已知网络的连接，使得配置可继续进行。
图20A-图20C是示出了根据一些实施方案的用于使用电子设备来配置第二设备的方法的流程图。在具有显示器的设备(例如，100、300、500、580、1900)处执行方法2000。方法2000中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法2000提供了用于配置第二设备的直观方式。该方法减轻了用户在配置第二设备时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地配置第二设备节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1900)(也被称为“第一设备”)检测(2002)指示与第二设备(例如，1906)的配对握手的音频音调信号(例如，1904)。在一些实施方案中，该音频音调信号是初始音调。例如，响应于设备被放置成处于非常接近而播放该音调。在一些实施方案中，在配置过程期间播放该音频音调信号。在一些实施方案中，该音频音调信号表示对由电子设备播放的另一音频音调信号的响应。
在一些实施方案中，第一设备(例如，1900)经由通信链路(例如，图10M的1039)连接(2004)到第二设备。在一些实施方案中，通信链路是无线通信链路。例如，通信可以是蓝牙或Wi-Fi连接等。
在一些实施方案中，该音频音调信号(例如，1904)对于该通信链路是带外的(2006)。例如，该音频音调信号不使用该通信链路来传输。例如，第一设备和第二设备连接并通过蓝牙无线连接(例如，通信链路)交换数据通信。在该示例中，在设备继续经由蓝牙连接连接时(例如，在设备配对时)，音频音调信号(例如，包括或表示设备之间的通信的可听音调)与该蓝牙通信链路是带外的。在一些实施方案中，对于通信链路是带外的意味着不使用相同的数据交换技术来发送信号(例如，音频音调信号)。
使用对于两个设备之间的通信链路是带外的音频音调信号允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程，同时确保设备处于相对非常接近并且用户可具有对两个设备的物理访问权限。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
根据检测到音频音调信号，第一设备(例如，1900)在第一设备(例如，1900)上发起(2008)用于配置第二设备(例如，1906)的配置过程。
使用对音频音调信号的检测允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在配置过程期间，第一设备(例如，1900)在显示器(例如，1902)上显示(2010)配置用户界面(例如，1912)，该配置用户界面包括用于选择位置的提示(例如，如图19E所示的“这个扬声器在哪儿？”)。
第一设备(例如，1900)接收(2012)对位置(例如，图8J的1912A所示的位置“John的房间”)的用户输入选择(例如，1913)。
响应于接收到该用户输入，第一设备(例如，1900)将第二设备(例如，1906)配置为(2014)与该位置相关联。在一些实施方案中，将第二设备配置为与该位置相关联包括传输包括该位置的配置数据。在一些实施方案中，该数据被传输到第二设备(例如，智能扬声器)。在一些实施方案中，该数据被传输到第三设备(例如，Apple TV)。
在一些实施方案中，音频音调信号(例如，1904)由第二设备(例如，如图19A所示的1906)生成。
在一些实施方案中，音频音调信号包括音频密码。在一些实施方案中，音频密码被口述(例如，如图10J所示)。在一些实施方案中，音频密码被编码在音频音调信号中。
在一些实施方案中，在第一设备(例如，1900)在物理上位于相对第二设备的阈值物理接近度(例如，图19C的1908)内时，接收音频音调信号(例如，1904)(例如，如图19C所示)。
在一些实施方案中，音频音调信号是第一音频音调信号，并且在配置过程期间(例如，在显示图19H的设置卡1918时)(2016)：第一设备(例如，1900)检测(2018)包括编码数据的第二音频音调信号。例如，第二音频音调信号包括以下各项中的一个或多个：用户账户登录信息、针对第二设备的标识符或用于确认第二设备应该被提供对用户的账户或个人数据的访问权限的其他数据。响应于检测到第二音频音调信号(2020)：第一设备(例如，1900)向第二设备(例如，1906)传输(2022)确认；并且第一设备(例如，1900)前进(2024)至配置过程中的下一个步骤(例如，显示图19I的设置卡1920)。
在一些实施方案中，进一步响应于接收到对位置(例如，如图19J所示的“John的房间”)的用户输入选择(例如，1913)(2026)：根据确定第三设备(例如，图10K的设备1020，其中第二设备是图10K的设备1000)当前与该位置(例如，“John的房间”)相关联，第一设备(例如，1900)在显示器(例如，1902)上显示(2028)配置用户界面(例如，图19J的设置卡1922)，该配置用户界面包括用于选择是否创建包括第二设备和第三设备的设备组(例如，立体声对)的提示(例如，图19J中的示能表示1922A，其包括文本“用作立体声对”)。在一些实施方案中，设备组包括两个多更多个设备。根据确定第三设备当前不与该位置相关联，第一设备(例如，1900)放弃在显示器上显示(2030)包括用于选择是否创建设备组的提示的配置用户界面(例如，显示图19F的设置卡1914而不是设置卡1922)。
在一些实施方案中，第一设备(例如，1900)接收表示创建设备组的肯定请求的用户输入(例如，1923)。在一些实施方案中，响应于表示创建设备组的肯定请求的用户输入，第一设备(例如，1900)在显示器上显示包括用于选择音频输出信道(例如，左或右，如图19K所示)以与第二设备相关联的提示(例如，如图19K所示的“这个扬声器是左还是右？”)的配置用户界面(例如，图19K的1924)。在一些实施方案中，第一设备(例如，1900)接收表示对音频输出信道的选择(例如，左，如图19K所示)的用户输入(例如，1925)。响应于接收到表示对所选择的音频输出信道的选择的用户输入，第一设备(例如，1900)将第二设备与所选择的音频信道相关联(例如，向其传输配置数据)。
在一些实施方案中，用于选择位置的提示包括多个预先确定的位置标识符(例如，厨房、卧室、庭院、餐厅，如图19E所示)。
在一些实施方案中，所述多个预先确定的位置标识符包括用户限定的位置标识符(例如，John的房间，如图19E所示)。
在一些实施方案中，用于选择位置的提示包括用于创建新的位置标识符的字段(例如，如图19M所示的“创建新房间”选项)。在一些实施方案中，第一设备(例如，1900)接收与用于创建新的位置标识符的字段(例如，输入到图19N的字段1930A中的文本)相关联的用户输入(例如，1931)，其中该用户输入包括位置标识符(例如，如图19N所示的“Tim的房间”)。第一设备(例如，1900)基于所接收的与用于创建新的位置标识符的字段相关联的用户输入来创建新的位置标识符，并且将第二设备与该新的位置标识符相关联(例如，向第二设备传输包括该新的位置标识符的配置数据)。
在一些实施方案中，在配置过程期间(2032)：第一设备(例如，1900)在显示器(例如，1902)上显示(2034)配置用户界面(例如，图19F的设置卡1914)，该配置用户界面包括请求将用户账户信息(例如，登录凭证)传输到第二设备(例如，1906)的许可的提示(例如，如图19F所示的“共享您的设置”示能表示1914B)。第一设备(例如，1900)接收(2036)提供将用户账户信息传输到第二设备的许可的用户输入(例如，对示能表示1914B的选择)。响应于接收到提供许可的用户输入，第一设备(例如，1900)将用户账户信息传输(2038)到第二设备(例如，1906)。
在一些实施方案中，在将用户账户信息传输到第二设备之前，并且根据确定第一设备(例如，1900)当前没有登录到与该用户账户信息相关联的用户账户(例如，当前没有登录到iCloud账户)，第一设备(例如，1900)在显示器(例如，1902)上显示用于登录到该用户账户的提示(例如，如图19O所示的设置卡1932，其包括文本“请登录到您的iCloud账户以继续”)，并且放弃将该用户账户信息传输到第二设备。根据确定第一设备当前登录到与该用户账户信息相关联的用户账户，第一设备(例如，1900)将该用户账户信息传输到第二设备(例如，1906)。
在一些实施方案中，响应于从配置过程中的第一步骤(例如，设置卡1912)进展到配置过程中的第二步骤(例如，设置卡1914)，第一设备(例如，1900)输出第三音频音调信号(例如，图10N的1044)。在一些实施方案中，第三音频音调信号与由第二设备(例如，1906)输出的第四音频音调信号(例如，图10N的1042)的输出同时输出。在一些实施方案中，第三音频音调信号和第四音频音调信号是谐波。
在一些实施方案中，响应于从配置过程中的第二步骤(例如，设置卡1914)进展到配置过程中的第三步骤(例如，设置卡1916)，第一设备(例如，1900)输出第五音频音调信号(例如，图10O的1048)。在一些实施方案中，第五音频音调信号与由第二设备(例如，1906)输出的第六音频音调信号(例如，图10O的1046)的输出同时输出。在一些实施方案中，第五音频音调信号和第六音频音调信号是谐波。在一些实施方案中，第五音频音调信号是比第三音频音调信号更高的频率音调(例如，如图10O的绘图1040所示)。
在一些实施方案中，继发起配置过程之后，第一设备(例如，1900)接收关于正在被第二设备(例如，1906)执行的操作的输出的数据。例如，输出可以是设备1906进行的媒体(例如，音乐)、天气信息、新闻、日历约会等的音频输出(例如，语音助理的口述)。响应于接收到关于正在被第二设备(例如，1906)执行的操作的输出的数据，第一设备(例如，1900)显示用户界面(例如，图19X-图19Y的界面1950)，该用户界面包括正在被第二设备(例如，1906)执行的操作的输出的表示(例如，界面1950包括识别当前正由设备1906播放的歌曲的信息)。在一些实施方案中，当设备1900被锁定或解锁时，可显示该输出的表示。例如，当设备1906开始播放音乐时，设备1900显示正在播放界面(例如，界面1950)。在一些实施方案中，每当音乐(例如，由包括其他设备的任何设备发起的音乐)在设备1906上播放时，设备1900显示正在播放界面。在一些实施方案中，该操作是天气信息的输出，并且该输出的表示包括当前温度信息、预测信息等。在一些实施方案中，该操作是新闻信息的输出，并且该输出的表示包括当前新闻等。
显示包括正在被第二设备执行的操作的输出的表示的用户界面给用户提供了关于第二设备的状态的视觉反馈。为用户提供改进的视觉反馈增强了第二设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，正在被第二设备(例如，1906)执行的操作包括可听地输出信息(例如，播放界面1950中识别的歌曲)。在一些实施方案中，接收关于正在被执行的操作的输出的数据包括接收表示该信息的数据(例如，歌曲标题、经过的播放时间、天气预测数据、新闻报道)。在一些实施方案中，显示包括正在被第二设备执行的操作的输出的表示的用户界面(例如，包括关于正在播放的歌曲的信息的界面1950)包括显示表示该信息的数据的至少一部分(例如，显示少于所有数据，诸如显示歌曲标题而不显示专辑名称，或者显示一个新闻报道，其中由设备1900接收的数据中存在三个当前新闻报道)。
除了由第二设备直接提供的音频反馈之外，显示表示对应于正由第二设备可听地输出的信息的信息的数据给用户提供了关于第二设备的状态的视觉反馈。为用户提供改进的(例如，补充的或附加的)视觉反馈增强了第二设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，该信息包括媒体项(例如，歌曲)，并且正在被第二设备(例如，1906)执行的操作包括可听地输出该媒体项。在一些实施方案中，显示表示该信息的数据包括显示以下各项中的一个或多个：艺术家、媒体项名称、专辑名称、专辑封面和媒体回放进展指示符(例如，如图19Y的界面1950所示)。
显示对应于正由第二设备可听地输出的媒体项的附加数据(例如，以下各项中的一个或多个：艺术家、媒体项名称、专辑名称、专辑封面和媒体回放进展指示符)给用户提供了关于第二设备的状态的视觉反馈。为用户提供改进的(例如，补充的或附加的)视觉反馈增强了第二设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，显示包括正在被第二设备执行的操作的输出的表示的用户界面包括显示新闻信息或天气信息中的一个或多个。
在一些实施方案中，在配置过程期间：根据第一设备的第一配置设置与第二设备(例如，1906)兼容，第一设备(例如，1900)将第二设备(例如，1906)配置为包括第一配置设置。例如，配置设置可以是用于语音助理的语言设置，并且第一配置设置可以是“英语(美国)”。在该示例中，英语(美国)与设备1906上的语音助理兼容(例如，被其支持)。在一些实施方案中，如果设置是兼容的，则配置自动完成，而不需要用户输入或确认。根据第一设备的第一配置设置与第二设备(例如，1906)不兼容，第一设备(例如，1900)显示第一配置设置与第二设备不兼容的指示(例如，显示消息)。在一些实施方案中，第一设置与第二设备不兼容的指示是用于选择不同/兼容设置的设置卡(例如，用于选择兼容语言的图19AD的设置卡1960)的显示。
使用与第二设备兼容的第一设备的第一配置设置允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程，提供了优化的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，进一步根据第一设备的第一配置设置与第二设备(例如，1906)兼容，第一设备(例如，1900)显示包括请求为第二设备接受第一配置设置的提示的配置用户界面。响应于接收到为第二设备(例如，1906)接受第一配置设置的用户输入，第一设备(例如，1900)将第二设备配置为包括第一配置设置。
显示包括请求为第二设备接受第一配置设置的提示的配置用户界面给用户提供了关于第二设备(例如，其与第一配置设置兼容)的状态的视觉反馈。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，第一配置设置是禁用设备特征(例如，语音助理)的设置，并且其中第二配置设置是启用设备特征(例如，语音助理)的设置。根据确定配置过程需要在第二设备(例如，1906)上启用设备特征：第一设备(例如，1900)显示将在第二设备上启用该设备特征的指示(例如，图19AC的设置卡1958)；并且第一设备(例如，1900)将第二设备(例如，1906)配置为包括第二配置设置(例如，在第二设备上启用语音助理)。
显示将在第二设备上启用设备特征(例如，即使其在第一设备上被禁用时)的指示给用户提供了关于第二设备的状态的视觉反馈(例如，该特征在第二设备上被需要)。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，显示将在第二设备(例如，1906)上启用设备特征的指示包括显示该设备特征将在第一设备上保持被禁用的指示。
显示该特征将在第一设备上保持被禁用的指示给用户提供了关于操作的性质和第一设备的状态的视觉反馈(例如，在第二设备上启用该特征不会改变第一设备关于该特征的状态)。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，进一步根据第一设备的第一配置设置与第二设备(例如，1906)不兼容，第一设备(例如，1900)显示包括请求对与第二设备兼容的第三配置设置的选择的提示的配置用户界面(例如，图19AD的1960)。例如，如果设备1900具有设置为不是与设备1906的语音助理特征兼容的语言的拉丁语的默认语言(例如，第一配置设置)，则设备1900提示选择兼容语言(例如，在设置卡1960中列出的那些)。响应于接收到对第三配置设置(例如，“英语(英国)”)的用户输入选择，第一设备(例如，1900)将第二设备(例如，1906)配置为包括第三配置设置。在一些实施方案中，配置第二设备包括准备稍后(例如，在配置过程期间)用于传输到第二设备的配置设置。例如，所有配置设置都可立即传输到第二设备。
显示包括请求对与第二设备兼容的第三配置设置的选择的提示的配置用户界面通过向用户在表面上呈现兼容选项减少了配置第二设备所需的输入的数量并且提供了优化的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，在建立连接第一设备和第二设备(例如，1906)的通信链路之前，第一设备(例如，1900)检测第一设备和第二设备之间的物理接近度满足接近度条件的指示(例如，如图19A所示)。响应于检测到第一设备和第二设备之间的物理接近度满足接近度条件的指示，第一设备(例如，1900)输出音频音调信号(例如，如图10I所示，其中设备1010正在输出音频音调信号1016)。
使用第一设备和第二设备之间的物理接近度满足接近度条件的指示以便输出音频音调信号给用户提供了关于第一设备的状态的听觉反馈。例如，当附近存在其他可配置的潜在设备时，音频音调信号可指示将配置哪个设备。为用户提供改进的反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，继将用户账户信息传输到第二设备(例如，1906)之后，第一设备(例如，1900)显示与语音助理相关联的配置用户界面(例如，图19W的1948)，其中与语音助理相关联的配置用户界面包括用于提供调用语音助理的一个或多个功能的用户语音输入的提示。在一些实施方案中，语音助理的所述一个或多个功能包括可听地输出以下各项中的一个或多个：媒体(例如，音乐)、天气信息、新闻、日历信息、消息等。
显示包括用于提供调用语音助理的一个或多个功能的用户语音输入的提示的与语音助理相关联的配置用户界面给用户提供了关于设备的能力和状态的信息。为用户提供此类信息增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，根据确定调用语音助理的一个或多个特征的用户语音输入已被第一设备或第二设备(例如，1906)接收到，第一设备(例如，1900)保持与语音助理相关联的配置用户界面(例如，1948)的显示。响应于接收到对包括在与语音助理相关联的配置用户界面中的示能表示(例如，设置卡1948中标记为“完成”的示能表示)的用户输入选择，第一设备(例如，1900)停止与语音助理相关联的配置用户界面的显示(例如，设置卡1948滑离显示器，如图19X-图19Y所示)。
需注意，上文相对于方法2000所述的过程(例如，图20A-图20C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法2000所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图21A-图21I根据一些实施方案示出了用于调节可听信号的设备输出的示例性用户界面。这些附图中的用户界面被用于示出包括图22A-图22B中的过程的下文描述的过程。
图21A示出了示例性场景，其中多个设备相连接。具体地讲，设备2100(也被称为第一设备)是连接到设备2110(例如，另一个智能扬声器，也被称为第二设备)的智能扬声器。设备2100任选地连接到由用户2106手持的设备(例如，个人设备)。在一些实施方案中，设备2100、2107和2110包括设备100、300、500或580的一个或多个特征。在一些示例中，设备2100和/或设备2110包括一个或多个音频信号检测部件(例如，麦克风)并且可检测语音用户输入。如图21A所示，用户2106大声发出由设备2100检测到的语音输入命令2108“嘿Siri”。此外，语音输入命令2108在设备2100当前正在输出可听信号2104(例如，媒体回放、语音助理文本转语音输出)时并且在设备2110当前正在输出可听信号2112(例如，媒体播放、语音助理语音输出)时发出。在一些实施方案中，设备2100和设备2110同时输出同步的可听信号(例如，是立体声对组，并且正在输出同一媒体项的同步回放)。
图21B描绘了图21A的场景的俯视图，并且示出了设备2100、设备2110和用户2106相对于彼此的相对空间定位。
在一些实施方案中，响应于检测到用户输入语音命令(例如，用户2106发出的2108)，设备2100调节可听信号(例如，2104)的输出。在一些实施方案中，设备2100在继续输出可听信号(例如，2104)时基于语音命令源的空间位置(例如，用户2106的位置)来调节可听信号的输出。例如，设备2100应用空间域音频处理来将声音投射远离用户2106，以用低通和/或带通和/或高通滤波器来过滤声音，或者以降低其扬声器中的一个或多个(例如，在设备2100包括多个扬声器的阵列的情况下)的音量(例如，降至零)。例如，设备2100可降低正在输出可听信号并且最靠近用户2106的空间位置的扬声器(例如，设备2100的扬声器阵列中的扬声器)的音量。
在一些实施方案中，响应于检测到用户输入语音命令(例如，2108)，设备2100确定语音命令源(例如，用户2106)的空间位置。图21C示出了设备(例如，2100)用来确定语音命令源(例如，2106)的空间位置的示例性值。如图所示，用户2106站在为距离参考标记2120上的参考点的外侧角2122(例如，θ(theta)度)的位置处。出于例示性目的，包括参考标记2120。用户2106站在远离设备2100(例如，其被描绘为参考标记2120的中心)的距离2124(例如，d个长度单位)处。在一些实施方案中，设备2100使用角度和距离中的一个或多个来确定语音命令源的空间位置。在一些实施方案中，角是外侧角(例如，如图21C所示)。在一些实施方案中，角是垂直角。例如，使用垂直角(未示出)，设备2100可确定语音命令源相对于设备2100的高度(例如，在z方向上，第三维度)。在一些实施方案中，语音命令源的空间位置是相对于设备2100的位置(例如，相对于设备2100的坐标系，如2120所示)。
更一般地，可使用各种方法来生成给定话语(例如，语音命令)的不同版本。例如，每个版本都可简单地是从一个麦克风或一组特定的麦克风获得的录音或由其形成。另选地，利用麦克风阵列，话语的每个版本都可对应于使用波束形成技术(例如，“波束”可由麦克风阵列所产生的信号的特定线性组合形成)导出的给定波束。波束形成可在期望的空间方向上提供采集灵敏度、可拒绝不想要的信号，并且通常在频域中提供信号和/或不想要的信号的一定程度的彩色化。
记录的话语可反映任何数量的信号特征的唯一组合和被选程度。这种信号特征可以包括并且信号特征的每个唯一组合可反映频率响应、固有混响、背景噪声、信噪比、信号与回波比、残留回波和/或应用的信号处理的被选程度。信号处理可应用于记录的话语，尝试调节用于语音识别引擎的信号。这种调节可包括抑制和/或消除混响、回波和/或噪声。还可使用其他可用的信号处理技术来操纵和影响这种特征，所述信号处理技术包括声学波束形成、噪声抑制、去混响、回波消除、回波抑制和空间噪声抑制技术以及其他信号处理技术。
因此，一个或多个采集处理器(例如，设备580的模块)可产生一个或多个采集音频流。采集音频的每个流转而可包括由每个采集处理器产生的给定话语的一个或多个表示。例如，采集处理器可接收来自若干麦克风的信号，并且采集处理器可例如使用波束形成技术来处理信号以跨不同的观察方向生成若干音频流(例如，以确定哪个观察方向包括收听者的空间位置)。因此，来自特定采集处理器的给定输出流可产生表示给定话语的不同版本的若干音频流。
在一些实施方案中，使用多个设备(例如，2100和2110)来确定语音命令源(例如，用户2106)的空间位置。例如，如图21C所示，设备2100和设备2110两者都可确定到用户2106的距离并与另一设备共享结果。在一些示例中，设备2100使用两个距离测量来确定用户2106的空间位置。再如，可使用三个设备来对语音命令源(例如，用户2106)的位置进行三角测量。在一些示例中，利用来自多个设备的多个近似值或测量引起对语音命令源的空间位置相比将以其他方式用单个设备所实现的更准确的确定。
因此，一些系统包括与单个设备(例如，580)相关联的若干空间分布的麦克风。其他系统可包括若干空间分布的设备(例如，彼此通信的设备580的多个实例)，各自具有一个或多个麦克风。分布的设备中的每一个都可具有与中央处理“集线器”(例如，设备580)的通信连接。在任一类型的系统中，用户的话语(例如，语音命令)可由每个麦克风接收，尽管通常由于用户和相应麦克风之间的不同距离、不同混响路径等而呈现与其他麦克风中的每一个相关的异相。因此，若干麦克风产生用户的话语的不同版本。如果麦克风在同一设备上，麦克风的不同线性组合例如经由波束形成也可创建不同的版本。可处理话语的这些不同版本以确定用户的空间位置。
在一些实施方案中，设备2100基于语音命令源(例如，用户2106)的空间位置来调节可听信号的输出。图21D示出了图21C和图21D的俯视图，然而，可听信号2104的输出已经在用户2106的方向上被调节(例如，被减少)，如由从设备2100发出的声波在用户2106的方向上的缺少所示。如图21D中所见，设备2100继续在不直接面对用户的方向上输出可听信号2104。
在一些实施方案中，设备2100基于第二设备(例如，2110)来调节可听信号的输出。图21E示出了设备2100已经在用户2106的方向和第二设备2110的方向上调节(例如，停止)可听信号2104的输出(类似于图21D)。这可例如当设备2110也在收听语音命令输入时完成。在一些示例中，设备2100和设备2110两者都可检测语音用户输入2108。在这种示例中，设备2110可更好地适合于(例如，距离用户较近、具有更灵敏的麦克风、具有更快的语音处理硬件)检测语音用户输入(例如，2108)。因此，例如，设备2100可减少可听信号的输出，以减少对设备2110的影响(例如，因此减少了对设备2110的音频检测功能的干扰)。在一些实施方案中，第一设备(例如，设备2100)使用对第二设备(例如，设备2110)的已知影响(例如，其音频输出对第二设备的影响)来调节输出。在一些实施方案中，第一设备(例如，设备2100)基于从第二设备(例如，设备2110)接收的数据来确定已知影响。例如，设备2100可接收(例如，从设备2110)表示来自设备2100的音频输出对设备2110的检测电路(例如，麦克风阵列)的影响的数据。在一些实施方案中，在回放期间确定已知影响(例如，设备2100在输出可听信号2104时确定已知影响)。例如，在一些示例中，设备2100和设备2110正在输出相同的输出信号，并且设备2100因此使用已知的输出信号来减少对来自用户2106的任何输入信号(例如，语音输入)的干扰(例如，设备2100在信号输出之前减去来自另一设备的一个信号)。在一些实施方案中，已知影响是从存储器取回的预先确定的数据(例如，先前确定并且随后从设备2100的存储器取回)。在一些实施方案中，已知影响(例如，对第二设备的影响)包括关于第一设备进行的音频输出的以下特征中的一个或多个特征的影响的数据：频率、音量和方向。
例如，设备(例如，2100)可通过使用不同的波束方向图型由扬声器阵列中的一个或多个发射一组测试声音来确定对另一设备(例如，2110)的影响。例如，可用单独的测试信号和用多种不同的波束方向图型来驱动扬声器2102A、2102B和2102C。例如，可使用一组测试信号以全向、心形、二阶和四阶波束方向图按顺序驱动扬声器2102A、2102B和2102C。可由听音设备(例如，在设备2110上)感测来自扬声器阵列中的每一个和针对波束方向图中的每一个的声音。听音设备可以是能够检测由设备2100的扬声器阵列产生的声音的任何设备。例如，听音设备可以是移动设备(例如，蜂窝电话)、膝上型计算机、台式计算机、平板电脑、个人数字助理或能够感测声音的任何其他类似的设备。听音设备可包括用于检测声音的一个或多个麦克风、处理器和存储器。在一些实施方案中，听音设备可包括独立操作或者作为一个或多个麦克风阵列来检测来自(例如，设备2100的)所述一个或多个扬声器阵列中的每一个的声音的多个麦克风。
图21F和图21G示出了对设备2100的输出的示例性调节。如图所示，设备2100包括具有三个扬声器(例如，2102A至2102C)的扬声器阵列(例如，一个或多个扬声器)，每个扬声器指向不同的方向(例如，间隔120度的方向)。在一些实施方案中，扬声器阵列包括任何数量的两个或更多扬声器。在调节之前(例如，在检测到语音用户输入2108之前)，扬声器2102A至扬声器2102C的输出水平示出在图21F中。如图21G所示，响应于检测到语音用户输入2108，设备2100将扬声器2102B(例如，其面向用户2106)的输出减少到零(例如，零音量)，并且稍微减少扬声器2102A和扬声器2102C的输出。
在一些实施方案中，第一设备执行音频处理技术。例如，设备2100可执行音频处理技术以投射音频输出，使得其被用户感知为在远离用户的方向上。例如，设备2100对表示音频输出的一个或多个信号执行空间音频处理技术。在一些示例中，空间音频处理技术被用于转换表示音频输出的所述一个或多个信号，当被设备输出时，被收听者感知为从所选择的空间位置发出。本领域的技术人员将认识到，可使用各种适当的技术来执行这种音频处理，所有这些都被预想在本公开的范围内。
图21H示出了设备2100和设备2110以及用户2106的俯视图，并且包括两个点—在远离用户2106的方向上(例如，相对于设备2100)的第一点2132(例如，表示空间位置)，以及在朝向用户的方向上(例如，相对于设备2100)的第二点2130(例如，表示空间位置)。
在一些实施方案中，设备2100调节音频输出，使得其将被语音命令源(例如，用户2106)感知为在远离他们的方向上(例如，相对于设备2100)发出。例如，响应于检测到语音用户输入2108，设备可调节2104的输出(例如，如图21I所示的音乐的回放)，使得用户2106将声音感知为从2132发出，而不是从设备2100的位置。因此，在用户正在讲话时，例如，当他们感知到音频输出的音量被降低时(例如，相较于在调节之前的可听输出，如图21B中所见)，他们被提供设备2100当前正在收听(例如，即使其继续回放媒体)的指示。此外，在该示例中，媒体回放未被用户语音命令中断(例如，暂停、停止、静音)。
在一些实施方案中，设备2100调节音频输出，使得其将被语音命令源(例如，用户2106)感知为在朝向他们的方向上(例如，相对于设备2100)发出。例如，如图21I所示，响应于检测到语音用户输入2108(例如，针对设备2100上的语音助理功能的命令)，设备2100在朝向用户2106(例如，朝向图21H的点2130)的方向上输出响应2140(例如，文本转语音输出“好的，我将设置时长为30分钟的定时器”)。在该示例中，语音用户输入2108包括命令“嘿Siri，设置时长为30分钟的定时器”。因此，用户2106将响应声音(例如，2140)感知为从点2130发出。因此，设备2100利用语音命令源的已知空间位置来在源的方向上定向可听响应。因此，向用户提供了更可能被用户听到的响应。例如，如果用户处于嘈杂环境中，则将音频输出定向到用户的位置可增加用户听到设备2100的输出的可能性。此外，在该示例中，在提供响应声音2140时，媒体回放未被中断(例如，至少在背离语音命令源的方向上被暂停、停止、静音)，因为响应声音2140指向用户并因此是可容易地感知的，即使在媒体回放继续时。此外，如果房间中存在多个用户，则设备2100的空间定向输出可通过定向响应使得其他非目标用户不太可能听到来提供增加的隐私性。
自始至终参考关于朝向一个或多个特定方向或空间位置(例如，相对于输出音频的电子设备)输出音频。现在讨论用于这样做的示例性非限制性技术。电子设备(例如，580、2100、2110)(也被称为“音频接收器”)可包括主系统处理器和存储器单元。在此统一使用的处理器和存储器单元指的是可编程数据处理部件和数据存储装置的任意适当组合，其执行实施音频接收器的各种功能和操作所需的操作。处理器可以是专用处理器诸如专用集成电路(ASIC)、通用微处理器、现场可编程门阵列(FPGA)、数字信号控制器或一组硬件逻辑结构(例如，滤波器、算术逻辑单元和专用状态机)，而存储器单元可指的是微电子非易失性随机存取存储器。操作系统可与特定于音频接收器的各种功能的应用程序一起存储在音频接收器的存储器单元中，它们将由音频接收器的处理器运行或执行以执行音频接收器的各种功能。例如，音频接收器可包括指向性方向图生成器。尽管被描述为存储在存储器单元中并由音频接收器的处理器执行的软件组件，但是在一些实施方案中，可由执行本文所述的操作和功能的硬件逻辑结构和/或滤波器(例如，有限脉冲响应(FIR)滤波器)来实施/表示指向性方向图生成器。
在一些实施方案中，音频接收器包括一个或多个换能器(例如，2102A、2102B、2102C)。在一些实施方案中，换能器被布置在一个或多个扬声器阵列中。在一些实施方案中，每个换能器都可逐个并单独地被驱动，以响应于单独且离散的音频信号来产生声音。通过允许根据不同的参数和设置(包括延迟、相和能级/增益等)逐个并单独地驱动扬声器阵列中的每一个中的换能器，扬声器阵列可产生许多指向性声音图案/波束声音图案，以模拟或更好地表示在收听区域中由音频系统(例如，设备580)播放的声音节目内容的相应信道/流。
在一些实施方案中，音频接收器(例如，580)可包括指向性方向图生成器。指向性方向图生成器的每个元件在下文中将以举例的方式来描述。在其他实施方案中，指向性方向图生成器可包括本文所述的附加部件。指向性方向图生成器的每个元件可以由一个或多个处理器、滤波器、可编程门或其他结构来实施。
在接着的描述中，将使用单个扬声器阵列来描述指向性方向图生成器的功能。然而，在其他实施方案中，指向性方向图生成器可用于以类似的方式同时驱动多个扬声器阵列。
在一些实施方案中，指向性方向图生成器可接收/检索用于通过扬声器阵列回放的一段声音节目内容。可从音频接收器的另一个部件(例如，本地存储器单元)或者从外部音频源(例如，电视、MP3播放器或流传输音乐服务)接收/检索该段声音节目内容。例如，音频接收器的音频界面可包括用于接收电子、光学(例如，光纤)或无线电(例如，WiFi或蓝牙)数字音频信号的一个或多个数字输入。数字音频信号可包括表示用于该段声音节目内容的独立信道(例如，用于文件原声带的左、右和中央信道)的多个编码音频流。例如，音频接收器中的解码器可将所接收的数字音频信号解码成六个音频流(例如，5.1信号)。解码器可能够解码使用任何编解码器或技术(包括高级音频编码(AAC)、MPEG音频层II、MPEG音频层III以及自由无损音频编解码(FLAC))进行编码的音频信号。
在一些实施方案中，音频接收器的音频界面可包括用于从外部音频源接收模拟信号的一个或多个模拟输入。由模拟输入接收的每个模拟信号可表示单个音频流/信道，并且可使用模数转换器来转换为数字信号。
在一些实施方案中，指向性方向图生成器可包括音频采样器，用于以指定的采样周期对所接收的一段声音节目内容的每个音频流进行采样(即，将连续音频流简化为对应的离散时间信号)。例如，每个样本可以是音频流的1.0毫秒部分。可使用各种速率(例如，44.1kHz、48kHz、96kHz和192kHz)和位深度(例如，8、16和20位深度)来执行采样。
由音频采样器产生的来自每个音频流的音频样本可以矩阵或类似的数据结构来表示。例如，来自K个音频流的样本可由音频样本矩阵X表示：
XK＝[x1...xK]
在示例音频样本矩阵X中，每个值x表示音频流的离散时分。在一个实施方案中，音频样本矩阵X可由音频接收器的波束方向图混合单元处理。波束方向图混合单元可调节每个音频流的波束方向图的形状和方向。波束方向图表征声音如何从扬声器阵列中的换能器(例如，2102A、2102B、2102C)辐射和进入收听区域。例如，一般来讲，高度指向的心形波束方向图(具有“高”指向性指数，“DI”)可直接在收听者2106或另一指定区域发出高度的声音，同时向收听区域的其他区域发出相对较低量的声音(即，低水平的漫射声音)。相反，较低指向的波束方向图(例如，“低”DI，诸如全向波束方向图)可在整个收听区域发出更均匀量的声音，而无需特别关注收听者2106或任何指定区域。在一些实施方案中，波束方向图可沿着或位于与扬声器阵列的直立姿态(或扬声器阵列的竖直中心轴)垂直的水平面中形成。因此，由扬声器阵列使用波束方向图混合单元产生的波束方向图可在不影响竖直指向性的情况下集中在水平方向上的声音控制。
针对以圆形、柱形、球形或另外弯曲方式布置的具有换能器(例如，2102A、2102B、2102C)的扬声器(例如，2100)阵列，声音的辐射可由一组频率不变的声音/波束方向图模式表示。例如，波束方向图混合单元可根据一组预定义的声音/波束方向图模式来表示或限定一组期望的波束方向图。例如，预定义的图案模式可包括全向图案、竖直偶极图案和水平偶极图案。针对全向模式，相对于输出扬声器阵列，声音在所有方向上均等辐射。针对竖直偶极图案，声音沿着竖直轴在相反的方向上辐射并关于水平轴对称。针对水平偶极图案，声音沿着水平轴在相反的方向上辐射并关于竖直轴对称。尽管被描述为包括全向、竖直偶极和水平偶极方向图，但是在其他实施方案中，预定义的声音/波束方向图模式可包括另外的方向图，包括更高阶的波束方向图。如本文将使用的，指向性方向图生成器可利用各自正交于彼此的N种图案模式。在一些实施方案中，N可等于七，使得指向性方向图生成器可使用七种声音/波束方向图模式。
波束方向图混合单元可为每个流或每个流样本和每个预定义的方向图模式限定一组加权值。加权值限定应用于每个方向图模式的每个流的量，使得可由扬声器阵列(例如，设备2100)生成针对该流的对应的期望指向性/波束方向图。例如，通过设置对应的加权值，可将全向方向图模式与水平偶极方向图模式混合以产生指向右(方向)的心形波束方向图。在另一个示例中，通过设置对应的加权值，可将全向模型方向图与竖直偶极模型方向图混合以产生指向下的心形方向图。如所描述的，预定义的模型方向图的组合或混合可产生具有针对独立流的不同形状和方向的波束方向图。因此，波束方向图混合单元可为第一音频流限定第一组加权值，使得扬声器阵列可被驱动以产生第一波束方向图，同时波束方向图混合单元还可为第二流限定第二组加权值，使得扬声器阵列可被驱动以产生第二波束方向图。
在一些实施方案中，预定义的方向图模式的组合可以是非成比例的，使得相较于另一个方向图模式，可使用多于一个方向图模式来产生针对音频流的期望的波束方向图。在一些实施方案中，由波束方向图混合单元限定的加权值可由任何实数表示。例如，加权值T可分别被应用于水平偶极方向图模式和竖直偶极方向图模式，而加权值一被应用于全向方向图模式。这三种可变加权方向图模式的混合可产生指向下和指向右(即，以45°角)的心形方向图。应用各个方向图模式的不同比例/加权允许生成远远超过预定义的方向图模式的直接组合的数量的许多可能的波束方向图。
如上所述，可使用不同的加权值来应用每个预定义的方向图模式的不同水平以为对应的音频流生成期望的波束方向图。在一个实施方案中，波束方向图混合单元可使用波束方向图矩阵Z，该波束方向图矩阵Z根据应用于预定义的N个方向图模式的加权值来为每个音频流限定波束方向图。例如，波束方向图矩阵Z中的每个条目可对应于用于预定义的方向图模式和对应的音频流的实数加权值。针对一组N个模型方向图和K个音频流，波束方向图矩阵ZN,K可被表示为：
Figure BDA0002602782570002111
如前所述，加权值z中的每一个表示预定义的方向图模式将被应用于对应的音频流的水平或程度。在上文的示例矩阵ZN,K中，每一行表示N个预定义的方向图模式中的每一个将被应用于K个所接收/所检索的音频流中的对应音频流的水平或程度。加权值z中的每一个可由用户、音频工程师或音频接收器或扬声器阵列的制造商预设。在一些实施方案中，加权值z可以是可变的并且是相对于由音频接收器播放的声音节目内容或收听区域的特征的。例如，更具反射性的收听区域可能需要避免收听区域中的反射表面的更多指向的波束方向图。在这种情况下，波束方向图矩阵Z中的加权值可被设置为有利于更多指向的方向图模式或避免产生漫射波束方向图的方向图模式。在另一个示例中，第一组音频流可主要由对话组成，而第二组音频流可主要由音乐组成。在该示例中，波束方向图混合单元可被设置为为第一组音频流产生更多指向的波束方向图(即，更高的指向性索引)，而为第二组音频流应用更少指向的波束方向图(即，更低的指向性索引)。针对波束方向图的这种偏好由波束方向图矩阵Z中的对应加权值z反映。
图22A-图22B是示出了根据一些实施方案的用于使用电子设备调节可听输出的方法的流程图。在设备(例如，100、300、500、580)处执行方法2200。方法2200中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法2200提供了用于调节可听输出的直观方式。该方法减轻了用户在调节可听输出时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地调节可听输出节省功率并增加电池两次充电之间的间隔。
在从电子设备(例如，2100)输出可听信号(例如，2104)时，电子设备(例如，2100)检测(2202)来自语音命令源(例如，2106)的用户输入语音命令(例如，2108)。
响应于检测到用户输入语音命令，电子设备(例如，2100)确定(2204)语音命令源(例如，2106)相对于电子设备(例如，2100)的空间位置(例如，图21C的角2122和/或距离2124)。在一些实施方案中，确定空间位置包括确定到语音命令源(例如，说话的用户)的距离(例如，图21C的2124)和角(例如，图21C的2122)中的一个或多个。例如，角可以是相对于电子设备的坐标系的外侧角或竖直角。
在继续输出可听信号(例如，2104)时，电子设备(例如，2100)基于语音命令源的空间位置来调节(2206)可听信号的输出(例如，音量、频率和/或方向)(例如，如图21D所示)。在一些实施方案中，电子设备(例如，2100)将空间域音频处理应用于可听信号。在一些实施方案中，电子设备(例如，2100)在朝向语音命令源(例如，2106)的方向之外的一个或多个方向上投射可听信号(例如，声音)的输出。在一些实施方案中，电子设备(例如，2100)在远离语音命令源的方向上投射输出。在一些实施方案中，电子设备(例如，2100)包括扬声器阵列(例如，两个或更多个)。在一些实施方案中，电子设备(例如，2100)调节扬声器阵列中的每个扬声器的输出。例如，电子设备(例如，2100)调节阵列中的一个或多个扬声器的相对输出，以在朝向语音命令源之外的方向上空间定向可听信号的输出。在一些示例中，电子设备(例如，2100)降低正在输出可听信号并且最靠近空间位置的扬声器(例如，扬声器阵列中的扬声器)的输出音量(例如，降至零)。
在继续输出可听信号时基于响应于用户输入语音命令确定的空间位置来调节其输出给用户提供了其语音命令正被检测的反馈。为用户提供改进的可听反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，该设备是第一设备，并且可听信号是第一可听信号。在一些实施方案中，电子设备(例如，2100)确定(2208)第二设备(例如，2110)当前正在输出第二可听信号(例如，2112)。例如，第一设备和第二设备当前正在播放相同的内容(例如，是设备组)，或者第一设备检测(例如，经由一个或多个麦克风)第二设备正在输出音频(例如，其可以是不同的音频信号)。
在一些实施方案中，由第一设备(例如，2100)调节第一可听信号的输出还基于(2210)第一设备进行的音频输出对第二设备(例如，2110)的已知影响。例如，第二设备可能更靠近语音命令源(例如，2106)，并且因此可以是收听用户输入语音命令(例如，2108)最适当的设备。在一些实施方案中，调节第一设备的音频输出以便减少对第二设备检测和/或处理用户输入语音命令的能力的干扰。例如，第二设备包括用于检测语音输入的麦克风，并且第一设备调节其输出以便减少对第二设备使用其麦克风来检测语音用户输入的干扰。在一些实施方案中，(例如，由设备2100)基于第二设备的空间位置(例如，相对于第一设备的位置)来确定已知影响。在一些实施方案中，已知影响基于从第二设备接收的数据(例如，第二设备传输关于第一设备进行的可听信号的输出如何影响第二设备的音频检测电路(例如，麦克风)的定量数据)。
在一些实施方案中，第一设备(例如，2100)基于第二设备(例如，2110)的空间位置来调节可听信号的输出(例如，音量、频率和/或方向)(例如，如图21E所示)。
在一些实施方案中，设备(例如，2100)包括扬声器阵列(例如，两个或更多个扬声器，诸如图21F的扬声器2102A至扬声器2102C)，其中扬声器阵列(例如，2102A至2102C)中的每个扬声器接收相应输出信号(2212)。在一些实施方案中，调节基于可听信号的输出包括(2212)：使用至少：扬声器阵列中的每个扬声器的相应输出信号(例如，如图21F所示)和语音命令源的空间位置(例如，如图21C所示)来执行(2214)音频处理技术。在一些实施方案中，调节基于可听信号的输出包括(2212)：调节(2216)对应于扬声器阵列中的扬声器的相应输出信号中的至少一个(例如，如图21G所示，其中扬声器2102B的输出音量水平已被减少)。
在一些实施方案中，音频处理技术包括将音频输出转换为空间域并应用一个或多个滤波器(例如，头部相关传递函数(HRTF))。例如，滤波器可在侧面定位于语音命令源的相反的方向上的位置(例如，如图21H所示的点2132)处创建三维的音频效果。因此，如果用户位于在相对于设备的某个外侧角位置处的位置(例如，相对于扬声器的角位置，该角位置将被称为0度以作参考)处，则扬声器可应用3D音频效果来调节可听信号的输出，使得用户将音频感知为从相对于扬声器为180度的角位置(例如，图21H所示的点2132)发出。在一些实施方案中，音频处理包括串扰消除(CTC)过程。在一些实施方案中，音频处理技术包括波束形成过程(例如，使用声波的相长干涉和/或相消干涉来实现音频输出的空间选择性)。用于创建人类收听者能够感知的空间音频效果的任何技术都被预想在本公开的范围内。
在一些实施方案中，空间位置是第一空间位置(例如，图21H的2130)，并且其中调节可听信号的输出还包括输出可听信号(例如，2104)，使得其将被在第一空间位置(例如，图21H的2130)处的收听者(例如，用户2106)感知为从在相对于设备(例如，2100)远离语音命令源的第一空间位置的方向上的第二空间位置(例如，图21H的2132)发出。例如，设备2100应用3D音频效果，使得位于用户的位置处的人类收听者将感知输出(例如，2104)为正从在相对于设备远离用户的方向上的空间位置发出。
在一些实施方案中，继调节可听信号的输出之后：电子设备(例如，2100)检测到来自语音命令源(例如，2106)的用户输入语音命令(例如，2108)已经结束。响应于检测到来自语音命令源的用户输入语音命令已经结束，电子设备(例如，2100)停止调节可听信号的输出。例如，调节后的音频输出(如图12G所示)返回到其先前未被调节的状态(例如，如图21F所示)。
在一些实施方案中，确定语音命令源相对于设备的空间位置包括：确定语音命令源(例如，2106)相对于电子设备(例如，2100)的距离(例如，2124)，以及确定语音命令源相对于该设备的角位置(例如，外侧角或竖直角)(例如，2122)。
在一些实施方案中，可听信号(例如，2104)是第一可听信号，并且在调节可听信号(例如，如图21D所示的2104)的输出时：电子设备(例如，2100)基于语音命令源的空间位置来输出(2218)第二音频信号(例如，2140)。
在一些实施方案中，空间位置(例如，图21I中的用户2106的位置)是第一空间位置，并且输出第二可听信号(例如，如图21I所示的2140)包括输出第二可听信号，使得其将被在第一空间位置处的收听者感知为从在相对于该设备朝向语音命令源的第一空间位置的方向上的第三空间位置(例如，点2130)发出。
在一些实施方案中，第一可听信号表示媒体项(例如，歌曲、视频音频)的回放，并且其中第二可听信号表示虚拟助理输出(例如，语音助理输出2140，如图21I所示)。
在一些实施方案中，电子设备(例如，2100)包括多个麦克风(例如，麦克风阵列)。
需注意，上文相对于方法2200所述的过程(例如，图22A-图22B)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法2200所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图23A-图23K根据一些实施方案示出了针对融合的品味配置文件回放队列的示例性用户界面。这些附图中的用户界面被用于示出包括图24A-图24B中的过程的下文描述的过程。
图23A示出了示例性场景，其中多个设备相连接。具体地讲，设备2300是连接到设备2302和设备2310(例如，个人设备)两者的智能扬声器。在一些实施方案中，设备2300包括设备100、300、500或580的一个或多个特征。在一些实施方案中，设备2302和设备2304包括设备100、300、500或580的一个或多个特征。在一些示例中，设备2302和设备2310的相应用户可能期望基于他们的品味配置文件两者来回放媒体。在一些示例中，设备2300、2302和/或2310被用于基于多个品味配置文件来创建、维护和/或存储回放队列。图23B-图23K示出了用于这样做的示例性界面。
图23B示出了示例性回放队列界面。在该示例中，播放列表界面2312表示名为“附近用户”的播放列表并且包括媒体项2314A至媒体项2314C。在一些实施方案中，设备(例如，2300)基于连接的设备的品味配置文件自动生成(例如，创建或用媒体项填充)媒体回放队列。例如，设备2300基于与连接到设备2300的设备(例如，或与这些设备相关联的用户)相关联的品味配置文件创建(或以其他方式用媒体项填充)播放列表“附近用户”。因此，如图23B所示，响应于检测到单个设备(例如，设备2310)被连接到设备2300(例如，在同一Wi-Fi网络上、经由蓝牙等)，自动创建播放列表2312(由设备2310显示)并且将媒体项2314A至媒体项2314C添加到该播放列表。在一些实施方案中，响应于检测到设备(例如，2300)连接到一个或多个其他设备(例如，2302或2310)，该设备(例如，2300)自动生成媒体回放队列(例如，图23B中描绘的名为“附近用户”的播放列表(由设备2310显示))。
图23C-图23D示出了对两个用户的示例性品味配置文件以及两个示例性组合品味配置文件的描绘。在一些实施方案中，设备(例如，2300)基于一个或多个品味配置文件来生成回放队列。在一些实施方案中，设备(例如，2300)基于组合品味配置文件来生成回放队列。
图23C示出了(第一用户的)品味配置文件2316A和(第二用户的)品味配置文件2316B。品味配置文件2316A包括媒体偏好：音乐流派1、音乐流派2和音乐流派3。品味配置文件2316B包括媒体偏好：音乐流派2、音乐流派3和音乐流派4。因此，品味配置文件2316A和品味配置文件2316B在媒体偏好方面具有一些重叠。在一些实施方案中，设备(例如，2300)基于媒体偏好的重叠来生成组合品味配置文件。例如，设备2300生成组合品味配置文件2316C，其包括品味配置文件2316A和品味配置文件2316B两者共同的媒体偏好，即媒体偏好：音乐流派2和音乐流派3。因此，使用组合品味配置文件2316C生成回放队列将得到包括与品味配置文件2316A和品味配置文件2316B相关联的用户都可能喜欢的媒体项的回放队列。
图23D示出了(第一用户的)品味配置文件2318A和(第二用户的)品味配置文件2318B。品味配置文件2318A包括媒体偏好：音乐流派1和音乐流派2。品味配置文件2318B包括媒体偏好：音乐流派3和音乐流派4。因此，品味配置文件2318A和品味配置文件2318B在媒体偏好方面不具有重叠。在一些实施方案中，设备(例如，2300)基于与检测到的设备相关联的每个品味配置文件的一个或多个媒体偏好来生成组合品味配置文件。例如，设备2300生成组合品味配置文件2318C，其包括来自品味配置文件2318A和品味配置文件2318B中的每一个的至少一个媒体偏好，即媒体偏好：音乐流派1、音乐流派2、音乐流派3和音乐流派4。因此，使用组合品味配置文件2318C生成回放队列将得到包括与品味配置文件2318A和品味配置文件2318B相关联的至少一个用户可能喜欢的媒体项的回放队列。
在一些实施方案中，响应于检测到与品味配置文件相关联的设备，设备(例如，2300)填充(例如，将媒体项添加到)现有媒体回放队列。因此，在一些示例中，随着检测到更多用户，设备2300动态更新基于用户品味配置文件的队列。图23E示出了播放列表2312(由设备2310显示)，但是其已被更新以包括媒体项2314D和媒体项2314E。例如，响应于检测到连接到设备2302，设备2300添加媒体项2314D和媒体项2314E。在该示例中，设备2300基于与设备2302相关联的品味配置文件来更新组合品味配置文件(例如，用于填充播放列表2312)。
在一些实施方案中，响应于不再检测到与品味配置文件相关联的设备，设备(例如，2300)从回放队列移除媒体项。例如，设备2300更新队列以迎合保持连接的用户。例如，响应于设备2302不再被设备2300检测到，设备2300可从播放列表2312移除媒体项2314D和媒体项2314E。因此，即使随着用户来来去去，可针对保持存在于一个位置(例如，连接到设备2300)的用户定制媒体回放，而不需要过多的用户输入来实现该目的。
在一些实施方案中，响应于用户输入，设备(例如，2300)基于多个品味配置文件来创建回放队列。图23F-图23K示出了用于这样做的示例性界面。
图23F示出了示例性播放列表选择界面2320，其包括播放列表创建示能表示2320A。在图23G中，设备2310接收表示对示能表示2320A的选择的用户输入2322。
响应于用户输入2320A，设备2310显示播放列表创建界面2324(图23H)。播放列表创建界面2324包括标题2324A(“晚宴”)、用于使该播放列表公开(例如，使其成为可被其他用户查看、可被其他用户编辑等的共享播放列表)的示能表示2324B以及用于将音乐添加到该播放列表的示能表示2324C。在图23I中，设备2310接收表示对示能表示2324C的选择的用户输入2326。
在一些实施方案中，响应于接收到用户输入(例如，2326)，设备(例如，2310)基于检测到的设备的多个品味配置文件来显示用于创建队列的提示。如图23J所示，响应于接收到用户输入2326，设备2310显示消息2328，该消息写道：“在您家中已检测到以下用户：Tim、Jessica、Sophia和Zachary。您想要基于每个用户的品味来创建播放列表吗？”响应于对示能表示2328A的选择，设备2310基于与检测到的设备(例如，对应于名为Tim、Jessica、Sophia和Zachary的用户)相关联的多个品味配置文件来生成回放队列(例如，诸如图23E所示)。因此，如图23H-图23J中的示例所示，设备2310确定用户正在尝试制作播放列表并显示用于基于检测到的用户的品味配置文件来创建队列的提示。
如上所述，设备可基于多个品味配置文件来自动生成回放队列。在一些实施方案中，响应于激活(例如，打开)媒体应用程序的用户输入，设备(例如，2300、2310)基于多个品味配置文件来生成队列。例如，图23K示出了播放列表选择界面2320(类似于图23F)，但是其已被更新以包括表示基于检测到的用户(例如Tim、Jessica和2个其他人)的品味配置文件来自动生成的播放列表的示能表示2320B。因此，当用户打开音乐应用程序以浏览播放列表时，基于检测到的用户的组合品味配置文件的播放列表可已经存在(例如，并且被显示)，减少了创建和/或访问这种队列所需的输入的数量。
图24A-图24B是示出了根据一些实施方案的用于使用电子设备来维护基于多个用户品味配置文件的队列的方法的流程图。在设备(例如，100、300、500、580)处执行方法2400。方法2400中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法2400提供了用于维护基于多个用户品味配置文件的队列的直观方式。该方法减轻了用户在维护基于多个用户品味配置文件的队列时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地维护基于多个用户品味配置文件的队列节省功率并增加电池两次充电之间的间隔。
为第一设备的电子设备(例如，2300或2302)检测(2402)与第二用户账户(例如，iCloud账户)相关联的第二设备(例如，2310)连接到第一设备(例如，2300或2302)。例如，第二设备连接到同一Wi-Fi网络、在第一设备的蓝牙范围内等。第一设备与第一用户账户(例如，iCloud账户)相关联(2404)。第一用户账户与第一媒体偏好配置文件(例如，2316A或2318A)相关联(2406)。在一些实施方案中，媒体偏好配置文件包括表示媒体项的数据或者用于识别表示第一用户账户的拥有者的偏好的媒体项的信息。在一些实施方案中，偏好配置文件包括一个或多个媒体项。例如，配置文件包括针对第一用户账户已经保存、喜欢、收听(例如，多次)的媒体(例如，歌曲、视频)或以其他方式指示第一用户账户的拥有者喜欢媒体项的标识符。在一些实施方案中，偏好配置文件包括用于识别媒体项的一般化信息。例如，一般化信息可包括流派(例如，音乐的类型)、艺术家、专辑(例如，包含多个媒体项)。这种一般化信息可用于通过将例如与媒体项相关联的元数据匹配该一般化信息来识别媒体项。第二用户账户与不同于第一媒体偏好配置文件的第二媒体偏好配置文件(例如，2316B或2318B)相关联(2408)。
第一设备(例如，2300或2302)基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起(2410)媒体的回放。
基于与连接的第一设备和第二设备相关联的第一媒体配置文件和第二媒体配置文件来发起媒体的回放给用户提供了用于根据其设备连接的多个用户的品味来创建回放队列同时减少每个设备处的冗余用户输入的改进的媒体回放特征。为用户提供改进的媒体回放特征增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，第一设备(例如，2300或2302)基于第一媒体偏好配置文件(例如，2316A或2318A)和第二媒体偏好配置文件(例如，2316B或2318B)来确定(2412)组合偏好配置文件(例如，2316C或2318C)。
在一些实施方案中，基于第一媒体偏好配置文件和第二媒体偏好配置文件来确定组合偏好配置文件包括：确定(2414)与第一媒体偏好配置文件和第二媒体偏好配置文件两者相关的媒体偏好。在一些实施方案中，媒体偏好包括以下各项中的一个或多个：媒体(例如，音乐)的流派、艺术家、媒体项(例如，歌曲)等。在一些实施方案中，与两者相关的媒体偏好是两个配置文件共同的媒体偏好(例如，2316C)。在一些实施方案中，与两者相关的媒体偏好是为两个配置文件的子集或超集的媒体偏好。例如，摇滚音乐是1987年的摇滚音乐的超集。
在一些实施方案中，在继续检测到第二设备(例如，2310)连接到第一设备时(2416)：第一设备(例如，2300或2302)基于第一媒体偏好配置文件(例如，2316A或2318A)和第二媒体偏好配置文件(例如，2316B或2318B)来将多个媒体项(例如，图23E的2314D和2314E)添加(2418)到回放队列(例如，图23E所示的播放列表“附近用户”)。在一些实施方案中，第一设备(例如，2300或2302)发起(2420)所述多个媒体项的回放。
在一些实施方案中，第一设备(例如，2300或2302)接收用于在第一设备上发起回放的请求(例如，对示能表示2314F的选择)，并且响应于接收到该请求，基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放。
在一些实施方案中，该请求(例如，对2314F的选择)接收自第二设备(例如，2310)。例如，访客设备(例如，不与该设备或家庭设备组相关联)发起包括有关融合的品味配置文件的媒体项的回放队列的回放。
在一些实施方案中，第一设备包括显示器(例如，2302)，并且其中该方法还包括：在显示器上显示示能表示(例如，“现在播放”示能表示(例如，2314F)、播放列表中的媒体项(例如，2314D)、“随机播放”示能表示等)，并且其中接收用于在第一设备上发起回放的请求包括接收对示能表示(例如，2314F)的用户输入选择。响应于接收到对示能表示的用户输入选择，第一设备(例如，2300或2302)基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放。
在一些实施方案中，基于第一媒体偏好配置文件和第二媒体偏好配置文件来发起媒体的回放包括：向第三设备(例如，2300)传输指令以发起回放。
在一些实施方案中，第一设备(例如，2300或2302)接收(2422)媒体项(例如，媒体项的标识符、至媒体项的链接或媒体项的副本)。响应于接收到媒体项(2424)：根据确定该媒体项接收自第一设备，第一设备(例如，2300或2302)基于该媒体项来更新(2426)第一媒体偏好配置文件(例如，2316A或2318A)；并且根据确定该媒体项接收自第二设备(例如，2310)，第一设备(例如，2300或2302)放弃基于该媒体项来更新(2428)第一媒体偏好配置文件。例如，如果该媒体项被不与管理或存储队列的设备(例如，拥有者的设备)的用户账户相关联的设备添加到融合的品味配置文件队列，则不基于将该媒体项添加到队列来更新拥有者的品味配置文件。
需注意，上文相对于方法2400所述的过程(例如，图24A-图24B)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法2400所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图25A-图25I根据一些实施方案示出了用于允许在一组设备上的访客回放的示例性用户界面。这些附图中的用户界面被用于示出包括图26A-图26B中的过程的下文描述的过程。
图25A示出了示例性场景，其中多个设备相连接。具体地讲，设备2500是连接到设备2502和设备2504(例如，个人设备)两者的智能扬声器。在一些实施方案中，设备2500包括设备100、300、500或580的一个或多个特征。在一些实施方案中，设备2502和设备2504包括设备100、300、500或580的一个或多个特征。在该示例中，设备2504的用户(也被称为第一用户)关联于与设备2500相关联的用户账户(例如，设备2504和设备2500两者都是家庭设备组的成员，如上文相对于图6A所述)。此外，在该示例中，设备2502的用户不与设备2500相关联(例如，是包括家庭设备组的家庭的访客(例如，不是其成员))。设备2502的用户(也被称为第二用户)可能期望对设备2500的访问权限例如以从其发起回放。图25B-图25I根据一些实施方案示出了用于请求和授予访问权限的示例性界面。
图25B示出了示例性当前媒体界面。如图所示，设备2502(例如，访客设备)在显示器2503上显示当前媒体界面2506。如图所示，设备2502当前正在其自身(例如，如由设备选择示能表示2506A所指示的，该示能表示识别名为“iPhone”的设备2502)上回放媒体项(“SameThing”)。在图25C中，设备2502接收表示对设备选择示能表示2506A的选择的用户输入2508。
响应于用户输入2508，设备2502显示示例性多设备界面2510(图25D)。在一些实施方案中，多设备界面2510是多设备界面诸如上文讨论的图6H-图6N的多设备界面610和图8C-图8P的多设备界面810。在该示例中，在界面2510中列出的设备(除了表示设备2502的2510A，“iPhone”)是为家庭设备组的成员的与第一用户(例如，与设备2504和设备2500相关联)相关联的设备。在图25D中，设备2502接收表示对指示符2510C的选择的用户输入2512，该指示符与表示名为“客厅”的设备(例如，设备2500)的指示符2510B相关联。在一些实施方案中，设备2502传输用于在所选择的一组设备上发起回放的请求(例如，向2500传输请求)。
响应于接收到对名为“Tim的客厅”的设备的选择(例如，用户输入2512)，设备2502显示消息2514(图25E)，其提示用户“请稍等”。在一些示例中，在(例如，在另一设备处)正在请求针对设备2502的许可时显示消息2514。例如，继向设备2500传输用于发起回放的请求之后(例如，并且在设备2502正在等待回放已被发起或者许可尚未被授予的确认时)，设备2502显示消息2514。在一些实施方案中，设备2502在不与其相关联(例如，设备2502不与同一用户账户相关联，或者不是与设备2500共同的一组设备(例如，家庭组设备)的成员)的设备上发起回放的能力受制于来自与设备2500相关联的另一个设备的许可。在一些实施方案中，请求设备(例如，2502)向与设备2500相关联(例如，包括该设备)的一组设备的设备(例如，设备2500或设备2504)传输对许可的请求。例如，响应于用于在家庭设备组的设备上发起回放的用户输入请求，设备2502向该家庭设备组中的一个或多个设备(例如，设备2500或该组设备中的另一设备)传输对许可的请求。在一些实施方案中，该请求由请求设备(例如，2500)传输到该组设备的(例如，具有显示器的)另一设备(例如，设备2504)。例如，设备2500接收来自设备2502的回放请求，并且作为响应，向设备2504传输对许可的请求(例如，针对设备2502)。
图25F-图25G示出了示例性许可请求界面。在一些实施方案中，响应于由不被包括在该组设备中的设备(例如，2502)进行的用于在该组设备的设备(例如，2500)上发起回放的请求，(例如，由设备2504)在该组设备(例如，2500和2504)的设备上显示许可请求界面(例如，2516或2518)。
在图25F中，设备2504(例如，其被包括在家庭设备组中)显示许可请求界面2516，该许可请求界面包括用于授予许可的示能表示(2516A)和拒绝许可的示能表示(2516B)。例如，与2516A相关联的用户输入将授予设备2502在设备2500上发起“Same Thing”的媒体回放的许可，并且与2516B相关联的用户输入将拒绝授予设备2502这种许可。在一些实施方案中，许可请求界面包括关于用于在该组设备上发起回放的请求的信息。在一些实施方案中，该信息包括但不限于对以下各项的识别中的一个或多个：请求发起回放的设备(例如，2502)、与该请求相关联的用户(例如，用户账户)(例如，2502的用户)以及请求在其上发起回放的设备(例如，名为客厅的设备2500)。如图25F所示，界面2516包括以下信息：“您想要允许Bob在客厅中播放音乐吗？”，该信息识别请求发起回放的用户(例如，名为Bob)和他们请求在其上发起回放的设备(例如，名为客厅或位于客厅中)。
在一些实施方案中，许可界面允许对多个不同的许可级别的选择。在一些实施方案中，许可级别授予条件许可。例如，许可请求界面2518(图25G)包括可由设备2504的用户授予的多个许可级别(与示能表示2518A至示能表示2518D相关联)：“始终允许”(例如，始终允许用户Bob发起回放)、“此次允许”(例如，允许当前请求，但不允许来自Bob的未来请求)、“现在不行”(例如，拒绝当前请求，但询问对来自Bob的未来请求的许可)以及“从不允许”(例如，拒绝来自Bob的当前请求和所有未来请求)。
图25H示出了显示在设备2502上的更新的当前媒体界面2506。在一些实施方案中，响应于设备2502正被授予许可(例如，与设备2504处的示能表示2516A相关联的用户输入)，显示更新的当前媒体界面2506。如图所示，设备选择示能表示2506A指示回放正在设备2500和设备2502(例如，在图25D处选择的设备)上发生。在一些实施方案中，当前媒体界面包括对与该组设备的设备相关联的用户的指示。例如，如图25H所示，设备选择示能表示2506A将客厅设备识别为“Tim的客厅”(例如，其中“Tim”是与设备2500相关联的用户)。
在一些实施方案中，由访客(例如，通过设备2502)在家庭设备组的设备上进行的媒体的回放不会影响与该组设备相关联的用户的偏好配置文件和/或回放历史。例如，图25I示出了用于浏览由用户Tim(例如，设备2504的用户)最近播放的媒体项的示例性界面2520。在一些实施方案中，继向不是该组设备的成员的设备(例如，向设备2502)授予许可的用户输入之后，设备2504显示界面2520。如图所示，最近播放的媒体项2520A至媒体项2520C不包括响应于由设备2502进行的请求而回放的媒体项“Same Thing”。
图26A-图26B是示出了根据一些实施方案的用于使用电子设备来允许访客设备发起回放的方法的流程图。在设备(例如，100、300、500、580)处执行方法2600。方法2600中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法2600提供了用于允许访客设备发起回放的直观方式。该方法减轻了用户在允许访客设备发起回放时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地允许访客设备发起回放节省功率并增加电池两次充电之间的间隔。
为第一设备的电子设备(例如，2500)接收来自第三设备(例如，2502)的用于在一组设备(例如，包括设备2500和设备2504的组)中的至少一个设备上发起媒体回放的请求(2602)。
在一些实施方案中，该组设备包括(2604)第一设备(例如，2500)和第二设备(例如，2504)。在一些实施方案中，该组设备是(例如，使用相对于图6A所述的家庭控制应用程序来配置的)家庭设备组。例如，该组设备包括与家庭的一个或多个成员相关联的一个或多个设备。在一些实施方案中，家庭的成员由设备(例如，请求起源于该设备)和/或由与一个或多个设备相关联的一个或多个用户账户(例如，用户的设备各自登录到用户的iCloud帐户)识别。因此，家庭可被定义为与一组用户账户相关联的设备。在一些实施方案中，该组用户账户包括单个用户账户。在一些实施方案中，该组用户账户包括多于一个用户账户。
在一些实施方案中，第三设备不是(2606)该组设备的成员。例如，第三设备属于对于包括该组设备的家庭的访客或游客。例如，第三设备可与不是包括组成家庭的一组用户的一组用户账户的成员的用户账户相关联，并且
在一些实施方案中，第三设备(例如，2502)连接到(2608)第一设备(例如，2500)。在一些示例中，设备经由Wi-Fi、蓝牙等连接。
在一些实施方案中，响应于接收到请求(2610)：根据确定第三设备(例如，2502)具有在该组设备中的所述至少一个设备(例如，2500)上发起媒体回放的许可(例如，先前由家庭的成员授予)，电子设备(例如，2500)在该组设备(例如，2500)上发起(2612)媒体回放。在一些实施方案中，一组设备包括一个或多个设备。
根据确定(2614)第三设备不具有在该组设备中的所述至少一个设备上发起媒体回放的许可：电子设备(例如，2500)向第二设备(例如，2504)传输(2616)对许可的请求(例如，由图25F的2516表示)。例如，第二设备显示提示(例如，如图25F的2516所示)。
由第一设备从第二设备请求响应于来自第三设备的请求而基于该请求来发起回放的许可给用户提供了快速且动态地请求对媒体回放的许可的能力，同时减少了导航许可菜单或在被授予许可之后重新发送用于发起回放的请求所需的用户输入的数量。为用户提供改进的媒体回放许可特征增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
响应于从第二设备接收到许可，电子设备(例如，2500)在该组设备中的所述至少一个设备(例如，2500)上发起(2618)媒体回放。在一些实施方案中，发起回放包括传输指令(例如，到该组设备中的另一设备)以发起回放。
在一些实施方案中，根据确定与第三设备相关联的第一用户账户具有在该组设备上发起媒体回放的许可，电子设备(例如，2500)确定(2620)第三设备(例如，2502)具有许可(例如，设备2502通过与具有许可的用户(例如，用户账户)相关联而具有许可)，其中第一用户账户不与该组设备中的任何设备相关联(例如，是不与家中的家庭设备组中的任何设备相关联的访客用户的账户(例如，iCloud))。根据确定与第三设备相关联的第一用户账户不具有在该组设备上发起媒体回放的许可，电子设备(例如，2500)放弃确定(2622)第三设备具有许可。例如，如果与第三设备相关联的用户账户不具有许可，则回放不响应于来自第三设备的请求而发起。
在一些实施方案中，进一步根据确定第三设备不具有许可，电子设备(例如，2500)向包括第二设备(例如，2504)的多个设备(例如，2504和另一设备(例如，具有显示器的个人设备)，两者都与家庭拥有者相关联)传输(2624)对许可的请求。例如，所述多个设备是与第一设备相关联的设备。在一些实施方案中，第一设备和所述多个设备各自与不与第三设备相关联的一个或多个用户账户相关联。例如，所述多个设备可以是与第一设备的拥有者(例如，他们的用户账户)相关联的其他设备(例如，登录到属于该拥有者的通用账户，或者登录到与预定义的用户组诸如拥有者的家人相关联的账户)，但是第三设备与对于该拥有者的家庭的访客(例如，与访客的用户账户)相关联。因此，第三设备不被包括在拥有者的家庭中的用户组中。
在一些实施方案中，在该组设备中的所述至少一个设备上发起媒体回放包括：在第一设备(例如，2500)上发起回放；并且放弃在第二设备(例如，2504)上发起回放。因此，在一些示例中，发起回放的设备不是授予许可的设备。
在一些实施方案中，继接收到来自第二设备(例如，2504)的许可之后：电子设备(例如，2500)从第三设备(例如，2502)接收用于在第四设备(例如，不是设备2500的另一个智能扬声器设备)上发起回放的请求，其中该组设备包括第四设备，并且其中第四设备不被包括在该组设备中的所述至少一个设备中(例如，(由设备2502进行的)用于在设备2500上发起回放的原始请求不包括用于在第四设备上发起回放的请求)。响应于接收到用于在第四设备上发起回放的请求，(由设备2502)在第四设备上发起回放。在一些实施方案中，发起回放包括传输指令(例如，到另一设备)以发起回放。例如，如果访客用户随后在家庭拥有者的家中(例如，在多设备界面处)选择了附加设备(例如，在被授予在第一设备2500上发起回放的许可之后)，则该许可延伸至与家庭设备组相关联的其他设备(例如，所有设备)。
在一些实施方案中，继从第二设备接收到许可之后：从第三设备接收用于从该组设备中的所述至少一个设备(例如，2500)上的回放队列移除媒体项(例如，如图16M-图16O所示)的请求。响应于接收到该请求：根据确定该媒体项由第三设备添加(例如，由访客添加)到回放队列，电子设备(例如，2500)从该回放队列移除该媒体项。根据确定该媒体项不由第三设备添加(例如，不由访客添加)到回放队列，放弃从该回放队列移除该媒体项。
在一些实施方案中，第一设备与媒体偏好配置文件(例如，如图23C所示的2316A)相关联，并且进一步响应于接收到来自不是该组设备的成员的第三设备的请求，电子设备(例如，2500)放弃基于该请求来更新媒体偏好配置文件。例如，设备2500(例如，其与家庭拥有者相关联)不响应于对另一用户(例如，与访客用户账户相关联的用户)的请求而基于回放的媒体项来更新与拥有者的用户账户相关联的品味配置文件。
需注意，上文相对于方法2600所述的过程(例如，图26A-图26B)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2800、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法2400所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图27A-图27E根据一些实施方案示出了用于提供基于物理位置的数据的示例性用户界面。这些附图中的用户界面被用于示出包括图28A-图28C中的过程的下文描述的过程。
图27A示出了示例性场景，其中两个设备(2700和2702)相连接。在一些实施方案中，设备2700包括设备100、300、500和580的一个或多个特征。在一些实施方案中，设备2702包括设备100、300、500和580的一个或多个特征。在一些示例中，用户可能希望使用设备2700(例如，智能扬声器)作为设备2702(例如，个人设备)的延伸，其中设备2702与用户的账户(例如，因此与他们的账户数据)相关联。例如，利用智能扬声器作为设备的延伸(例如，以输出音频、电话呼叫、口述消息等；并且/或者以检测用户语音输入)给予了用户对他们的个人设备的功能的改进的免提访问。再如，这种功能还可延伸用户可距他们的个人设备的距离，同时保持从他们的个人设备访问数据的能力。然而，向公共设备(例如，可能由家庭中的多于一个用户使用)提供对来自个人设备的数据的无条件访问对于个人设备的拥有者来说可能是不期望的。因此，对来自个人设备的数据的访问可受制于对一个或多个条件诸如物理位置条件的满足。图27B-图27E提供了用于基于物理定位来促进从一个设备到另一设备的数据共享的示例性界面。
图27B示出了示例性场景，其中设备(例如，2702)的物理定位满足许可条件(例如，被放置成与设备2700处于非常接近)。在图27B的示例中，设备2700接收用户输入请求(例如，语音输入)，请求通过设备2700输出来自个人设备2702的数据。例如，该请求是用于口述存储在设备2702上(或以其他方式与该设备相关联)的用户的消息的用户输入语音请求。响应于该请求，设备2700确定设备2702的物理定位满足基于物理位置的许可条件。例如，设备2700确定设备2702处于许可物理位置(例如，处于非常接近，诸如在接近度区域2704内)。响应于确定设备2702的物理定位满足许可条件，设备2700输出数据(例如，口述输出2706)。口述输出2706包括响应“您今天有3个约会。”在该示例中，响应于用户输入语音请求“我今天有任何约会吗？”而输出口述输出2706。
图27C示出了示例性场景，其中设备(例如，2702)的物理定位不满足许可条件。如图所示，例如，设备2702不在设备2700的接近度区域2704内，这是该示例中的许可条件。因此，响应于接收到语音输入“我今天有任何约会吗？”，设备2700不输出图27B所示的口述。在一些实施方案中，设备(例如，2700)输出对如何满足许可条件的指示。如图所示，设备2700输出口述2708“请将您的电话移近点”。
如上所示，许可条件可以基于设备接近度。在一些实施方案中，许可条件基于(或进一步基于)设备(例如，2702)的取向。图27D示出了示例性场景，其中设备2702与设备2700处于非常接近但不满足许可条件。在图27D所示的示例中，当设备2702处于许可物理取向时，满足许可条件。在一些实施方案中，当设备(例如，2702)正面朝上时，设备的取向满足许可条件。例如，在图27D中，设备2702的主显示器2703(例如，设备的“脸部”或“前部”)向下取向(例如，设备正面朝下)。在一些实施方案中，当设备(例如，2702)指向(例如，从设备的顶部)朝向第二设备(例如，2700)的方向时，设备的取向满足许可条件。在一些实施方案中，当物理接近度和物理取向条件两者都被满足时，满足许可条件。
图27E示出了示例性场景，其中设备2702的物理定位满足许可条件。图27E示出了设备2700可用于输出来自设备2702的数据的口述。如图所示，设备2700输出对文本消息的口述，该口述是：“来自Bob的文本消息，‘我们下午6点见'”。
图28A-图28C是示出了根据一些实施方案的用于使用电子设备来提供基于物理位置的数据的方法的流程图。在设备(例如，100、300、500、580)处执行方法2800。方法2800中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法2800提供了用于提供基于物理位置的数据的直观方式。该方法减轻了用户在提供基于物理位置的数据时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地提供基于物理位置的数据节省功率并增加电池两次充电之间的间隔。
在与用户账户相关联(例如，登录到用户的iCloud)的第一设备处的电子设备(例如，2700)接收(2802)表示用于访问来自用户账户的数据的请求的用户输入(例如，用户输入语音命令)。在一些实施方案中，来自用户账户的数据可包括以下各项中的一个或多个：日历数据(例如，会议、事件等)、消息(例如，文本消息、iMessage、电子邮件、语音消息等)、笔记、提醒(例如，音频或文本提醒)等。
响应于接收到(2804)该用户输入(例如，用户输入语音命令)，第一设备(例如，2700)确定(2806)第一设备(例如，2700)和与用户账户相关联的第二设备(例如，2702)的物理定位是否满足许可条件。在一些实施方案中，当第二设备与第一设备处于非常接近时(例如，如图27B所示)，满足许可条件。在一些实施方案中，当第二设备的设备取向是许可取向时(例如，正面朝上地躺在表面上)(例如，如图27B所示)，满足许可条件。
根据确定物理定位满足许可条件，第一设备(例如，2700)通过第一设备提供(2808)来自用户账户的数据(例如，口述数据，如图27B所示)。
根据确定物理定位不满足许可条件，第一设备(例如，2700)放弃(2810)通过第一设备提供来自用户账户的数据(例如，请求将第二设备放置成处于非常接近，如图27C所示；请求解锁第二设备，如图27D所示)。
使用对设备的物理定位是否满足许可条件的确定给用户提供了一种用于在无需外来用户输入的情况下授予许可的简易技术。在一组条件已经被满足而不需要进一步的用户输入时执行操作增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，通过第一设备提供来自用户账户的数据包括：输出(2812)表示来自用户账户的数据的音频信号(例如，2706或2712)。
在一些实施方案中，输出表示来自用户账户的数据的音频信号包括：使用文本转语音算法来引起对表示来自用户账户的数据的口述(例如，2706或2712)的可听输出(2814)。在一些实施方案中，口述是以自然语言(例如，口头语言诸如英语、西班牙语、法语等)。例如，口述包括通过第一设备的扬声器被大声读出(例如，使用文本转语音算法)的数据。
在一些实施方案中，来自用户账户的数据包括来自以下各项中的一个或多个的数据：日历条目(例如，会议、约会)、通知(例如，传入文本消息的通知)、电子邮件、文本消息、存储的文本文档(例如，笔记)、存储的联系人信息、电话呼叫音频、视频通话音频或视频(例如，FaceTime、Skype)、语音消息、地址(例如，用户的家)和媒体项(例如，音乐、视频)。
在一些实施方案中，确定第一设备和第二设备的物理定位是否满足许可条件包括：确定(2816)第一设备和第二设备之间的物理接近度是否满足接近度条件(例如，第一设备和第二设备彼此非常接近)。
在一些实施方案中，确定第一设备和第二设备的物理定位是否满足许可条件包括：确定(2818)第一设备的物理取向是否满足取向条件。在一些实施方案中，可经由第二设备上的传感器诸如加速计、环境光线传感器、相机等中的一个或多个来检测物理取向(例如，并将其发送给第一设备)。在一些实施方案中，当第二设备被定位为使得主显示器不被覆盖时，满足取向条件。例如，正面朝上静置的设备(例如，使其显示器可见，与正面朝下相反)满足取向条件。
在一些实施方案中，进一步根据确定物理定位不满足许可条件，第一设备(例如，2700)输出(2820)不满足许可条件的指示(例如，2708或2710)(例如，设备不处于非常接近)。
在一些实施方案中，输出不满足许可条件的指示包括：输出(2822)满足许可条件所需的用户动作的可听指示(例如，2708或2710)(例如，“请解锁您的设备”或“请将您的电话拿近点”等的口述输出)。
在一些实施方案中，表示用于访问来自用户账户的数据的请求的用户输入是第一用户输入，该方法还包括，继通过第一设备提供来自用户账户的数据之后(例如，如图27B所示)：第一设备(例如，2700)接收(2824)表示用于访问来自用户账户的附加数据的请求的第二用户输入(例如，用户输入语音命令)。响应于接收到第二用户输入，第一设备(例如，2700)确定(2826)第一设备(例如，2700)和与用户账户相关联的第二设备(例如，2702)的物理定位是否满足许可条件。根据确定该物理定位满足许可条件，第一设备通过第一设备提供(2828)来自该用户账户的附加数据(例如，如图27E所示)。根据确定该物理定位不满足许可条件，第一设备放弃(2830)通过第一设备提供来自用户账户的附加数据(例如，如图27C所示)。
需注意，上文相对于方法2800所述的过程(例如，图28A-图28C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法3000、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法2800所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图29A-图29I根据一些实施方案示出了用于在多个设备上管理媒体的回放的示例性用户界面和技术。这些附图中的用户界面被用于示出包括图30A-图30C中的过程的下文描述的过程。
图29A示出了显示在设备2900的显示器2902上的包括设备1至设备4的示例性多设备界面(例如，诸如上文相对于图6和图8所述的多设备界面610或多设备界面810)。在该示例中，用户使用设备2900来传输用于在包括设备1至设备4的一组设备上发起媒体回放的请求。在一些实施方案中，设备2900包括设备100、300、500和580的一个或多个特征。
图29B示出了包括在已经(例如，由设备2900)请求在其上发起回放的一组设备中的设备1至设备4(例如，分别是设备2910、2912、2914和2916)的示例性布置。在一些实施方案中，设备2910、2912、2914和2916是包括设备100、300、500和580的一个或多个特征的智能扬声器。
在图29C中，响应于来自设备2900的请求，该组设备已经发起媒体的回放(例如，正在输出音频)。
在一些实施方案中，同时回放媒体的一组设备(例如，作为同一媒体会话的一部分)同步媒体的回放。在一些实施方案中，一个设备协调回放同步(例如，也被称为“主设备”或“主角设备”)。协调回放同步可包括以下各项中的一个或多个：处理回放控制命令(例如，暂停、下一曲目)、将媒体流传输到该组设备中的其他设备、存储和/或维护回放队列、检测其他设备是否正在彼此同步地输出媒体(例如，通过使用时钟信号)等。
在一些实施方案中，一组设备(例如，用于媒体会话)包括继承者设备(也被称为“指定继承者”或“后援主设备”)。在一些实施方案中，指定继承者被配置为响应于主设备不再能够回放媒体(例如，用于媒体会话)和/或协调回放同步而接管主设备的责任。在一些实施方案中，指定了几代“继承者”(例如，指定继承者、指定继承者的指定继承者等等)。
图29D描绘了示例性场景，其中设备2910是设备2912(主设备)的指定继承者。如图所示，设备2912(主)连接到该组中的每个设备，并且例如同步来自每个设备的回放。
图29E描绘了示例性场景，其中设备2910已经成为主设备(例如，因为设备2912不再可用)并且设备2914现在是设备2910(主设备)的指定继承者。例如，图29E中的场景遵循(例如，在图29D中的场景期间)其中设备2912(例如，先前的主设备)在该组设备上的媒体会话期间不再可用于回放的事件。如图所示，设备2910(主)连接到该组中的剩余设备中的每一个(例如，2914和1216)，并且例如与这些设备中的每一个协调回放。
图29F描绘了示例性场景，其中设备2914已经成为主设备(例如，因为设备2910不再可用)并且设备2916现在是设备2914(主设备)的指定继承者。例如，图29F中的场景遵循(例如，在图29E中的场景期间)其中设备2910(例如，先前的主设备)在该组设备上的媒体会话期间不再可用于回放的事件。如图所示，设备2914(主)连接到该组中的剩余设备中的每一个(例如，2916)，并且例如与这些设备中的每一个协调回放。
图29G描绘了类似于图29D所示的场景的示例性场景，但是其中设备2916不是由用户(例如，使用设备2900)选择的用于媒体回放会话的原始的一组设备的一部分。在一些实施方案中，不是该组设备的一部分(例如，所请求的媒体会话的一部分)的设备执行为该媒体回放会话指定主设备和/或指定继承者的功能。例如，如图29G所示，即使不在该组设备中，设备2916也将设备2910指定为继承者并且将设备2912指定为主设备。在一些实施方案中，指定主设备的设备是家庭媒体控制设备(例如，AppleTV)。
在一些实施方案中，主设备责任(例如，回放协调)包括处理回放控制命令。例如，因为一组设备中的设备彼此互连(并且可能与其他设备连接)，所以可由该组设备中的任何设备(或由其他设备)接收回放控制命令。在一些实施方案中，如果其不是针对媒体会话的主设备的设备，则将回放控制命令转发给主设备。在一些实施方案中，主设备处理回放控制命令，并且然后向该组设备中的设备(例如，剩余设备)传输指令(例如，用于颁布回放控制命令)。
例如，图29H示出了示例性场景，其中在非主设备(例如，指定继承者，在该示例中的设备2910)处接收到回放控制命令2920。因此，如图所示，设备2910将回放控制命令转发给主设备。相反，在图29I中，设备2910是主设备并且接收回放控制命令2920。因此，在图29I所描绘的示例中，设备2910处理回放控制命令并且向该组中的剩余设备(例如，包括在媒体会话中的设备)传输回放指令(例如，跳到下一曲目、暂停回放等)。
图30A-图30C是示出了根据一些实施方案的用于使用电子设备来管理回放协调的方法的流程图。在设备(例如，100、300、500、580)处执行方法3000。方法3000中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法3000提供了用于管理回放协调的直观方式。该方法减轻了用户在管理回放协调时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地管理回放协调节省功率并增加电池两次充电之间的间隔。
为第一设备的电子设备(例如，2910)接收(3002)用于在包括第一设备(例如，2910)和第二设备(例如，2912)的一组设备上发起媒体的回放的命令。在一些实施方案中，第一设备和第二设备两者都被配置为能够接收针对该组设备的回放协调责任。
响应于接收到该命令，第一设备(例如，2910)在该组设备(例如，2910和2912)上发起(3004)媒体的同步回放，其中第二设备被指定(3006)为被配置为协调该组设备上媒体的回放的主设备(例如，如图29D所示)，并且其中第一设备被配置(3008)为主设备的指定继承者(例如，如图29D所示)。在一些实施方案中，协调该组设备上的回放包括以下各项中的一个或多个：存储媒体回放队列、同步媒体回放开始时间以及接收并路由回放命令。在一些实施方案中，主设备的指定继承者是在当前主设备变得不可用时将接管作为主设备的职责的设备。
发起同步回放并自动管理媒体回放的协调而不需要进一步的用户输入减轻了用户当在多个设备上回放媒体时的负担。在一组条件已经被满足而不需要进一步的用户输入时执行操作增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，该组设备还包括第三设备(例如，如图29D所示的2914)，并且在该组设备上的回放期间，第一设备(例如，2910)检测(3010)第二设备(例如，2912)不再可用于媒体的回放(例如，如图29E所示)。例如，如果设备被请求播放其他内容或停止回放、设备断开连接等，则设备不再可用于回放。响应于检测到第二设备不再可用于回放媒体(3012)：第一设备(例如，2910)确定(3014)第一设备被指定为被配置为协调该组设备上媒体的回放的主设备(例如，如图29E所示)，在第一设备上继续(3016)媒体的回放(例如，如图29E所示)，并且协调(3018)第三设备(例如，2914，如图29E和图29I所示)上媒体的回放。在一些实施方案中，第一设备确定其是主设备。在一些实施方案中，第一设备从另一设备接收第一设备已被指定为主设备的通知。例如，第一设备承担主设备的角色，并且开始该组设备中的剩余设备上的协调回放。在该示例中，第三设备是剩余设备。
在一些实施方案中，协调第三设备上媒体的回放包括以下各项中的一个或多个(3020)：提供至媒体的链接(例如，URL)；提供媒体的流(例如，表示媒体的数据的实时流或缓冲流)；以及提供媒体(例如，媒体文件)的副本。
在一些实施方案中，第一设备(例如，2910)接收(3022)用于停止第一设备上媒体的回放的命令。响应于接收到用于停止第一设备上媒体的回放的命令(3024)：第一设备(例如，2910)停止第一设备上媒体的回放(3026)(例如，如图29F所示)，并且指定(3028)第三设备为被配置为协调该组设备上媒体的回放的主设备(例如，如图29F所示)。
在一些实施方案中，该组设备还包括第三设备(例如，2914)，并且在该组设备(例如，2910、2912和2914)上的回放期间，第一设备(例如，2910)检测第二设备(例如，2912)不再可用于媒体的回放(例如，如图29E所示)。响应于检测到第二设备不再可用于回放媒体：第一设备(例如，2910)确定第三设备(例如，2914)(例如，尽管第一设备是指定继承者)被指定为被配置为协调该组设备上媒体的回放的主设备，并且第一设备(例如，2910)在第一设备上继续媒体的回放，并且第一设备(例如，2910)从第三设备(例如，新的主设备)接收用于协调第一设备上媒体的回放的指令。例如，第一设备不承担主设备的角色，并且因此开始从新的主设备(第三设备)接收针对回放的协调指令。
在一些实施方案中，第一设备(例如，2910)从第四设备(例如，2916)接收用于发起该组设备上媒体的回放的命令。第一设备(例如，2910)从第四设备接收第一设备是指定继承者的指定。例如，传输用于发起回放的命令并指定指定继承者的设备是不同于指定继承者和指定主设备的设备。
在一些实施方案中，第四设备不是该组设备的成员。例如，第四设备是家庭设备组中初始协调设备上的回放的设备，而不管回放是否包括第四设备。在一些实施方案中，初始协调回放包括为该组设备上的回放会话指定指定继承者和/或主设备。
在一些实施方案中，在该组设备上发起媒体的同步回放包括将回放队列的副本传输到该组设备中的每个设备。
在一些实施方案中，在同步回放期间，第一设备(例如，2910)在第一设备处接收回放控制命令(例如，2920，诸如暂停、下一曲目、搜索等)。响应于接收到回放控制命令：根据第一设备被指定为主设备，第一设备(例如，2910)基于该回放控制命令向该组设备中的每个设备传输指令(例如，如图29I所示)。根据第一设备没有被指定为主设备，第一设备(例如，2910)将回放控制命令传输到指定主设备(例如，如图29H所示)。例如，第一设备将命令转发给主设备以进行处理，并且不采取进一步的动作直到接收到来自主设备的指令。
需注意，上文相对于方法3000所述的过程(例如，图30A-图30C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3200、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法3000所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图31A-图31N根据一些实施方案示出了用于输出基于用户位置的可听输出的示例性用户界面。这些附图中的用户界面被用于示出包括图32A-图32C中的过程的下文描述的过程。
图31A示出了包括示例性家庭设备组(例如，设备3100、3102和3104的组)的示例性家庭。如图所示，设备3100和设备3102位于名为“客厅”(例如，名为“客厅”或以其他方式与标识符“客厅”相关联)的房间中，并且设备3104位于房间“卧室”中。在该示例中，设备3100、3102和3104表示用户已经围绕他们的家定位并且彼此连接(例如，经由Wi-Fi)的智能扬声器设备。在一些实施方案中，设备3100、3102和3104包括设备100、300、500和580的一个或多个特征。图31A还描绘了设备3106(表示汽车)，其任选地是连接到用户的家庭设备组(例如，设备3100、3102和3104)的设备。在一些实施方案中，设备3108包括设备100、300、500和580的一个或多个特征。
如上所述，根据一些实施方案，设备诸如设备3100、3102和3104(例如，智能扬声器设备)可确定用户的空间位置以将音频内容指向到语音命令源和/或充当另一设备(例如，个人设备)的延伸(例如，用于通知输出)。类似地，设备(或一组设备)(例如，诸如设备3100、3102和3104)可被配置为基于用户是否在设备的范围内(例如，在物理上存在于设备附近)而自动且选择性地输出可听输出。图31B-图31N示出了用于这样做的示例性技术。
图31B描绘了图31A的场景，然而用户3108存在于客厅中在设备3100附近。在一些实施方案中，一组设备(例如，3100、3102和3104)中的设备(例如，3100)接收可听输出触发事件。例如，在图31B中，用户3108发出用户输入语音命令3112“嘿Siri，设置时长为10分钟的定时器”。在一些实施方案中，可听输出触发事件是被配置为使得设备响应于触发事件而输出可听输出的任何数据。例如，在一些示例中，可听输出触发事件包括以下各项中的一个或多个：通知设置(例如，识别设备应该针对其发布可听通知诸如电话呼叫、文本消息、提醒、日历事件等的事件)、用于设置闹钟/提醒/定时器的用户输入请求等。在一些实施方案中，经由用户输入(例如，语音命令)或数据传输(例如，来自用户的个人设备，或来自他们的用户账户(例如，iCloud))来接收可听输出触发事件。继用户输入语音命令3112之后，在图31C所示的示例中，用户仍处于最靠近设备3100的同一位置处，所以设备3100在触发事件发生(例如，10分钟定时器结束)时输出可听警示3110。
在一些实施方案中，设备(例如，3100)具有可听输出范围(例如，指定、预先确定或动态的范围)。在一些实施方案中，如果设备(例如，3100)确定用户位于设备的可听输出范围之外，则当触发事件发生时，其放弃输出可听输出。例如，如图31D所示，当触发事件发生(例如，10分钟定时器结束)时，用户3108最靠近设备3102，因此设备3102输出可听警示3110。类似地，在图31E中，当触发事件发生(例如，10分钟定时器结束)时，用户3108最靠近设备3104，因此设备3104输出可听警示3110。
在一些实施方案中，确定用户是否位于可听输出范围内基于以下各项中的一个或多个：检测到的设备(例如，3100)到用户(例如，3108)的物理接近度、检测到的用户(例如，3108)在与设备(例如，3100)相同的房间中的存在以及设备(例如，3100)的输出特征(例如，音频输出功率)。在一些实施方案中，确定用户是否位于可听输出范围内基于对与用户相关联的设备的检测。
可以各种方式来确定可听输出范围。在一些实施方案中，(例如，每个设备的)可听输出范围是固定的。例如，图31F描绘了设备3100的可听输出范围3100A(例如，是由虚线表示的接近度范围)、设备3102的可听输出范围3102A以及设备3104的可听输出范围3104A，其表示固定范围。在一些实施方案中，可听输出范围针对每个设备是独立的(或者不受该设备组中是否存在其他设备或附近是否存在其他设备的影响)。例如，设备可具有固定的接近度范围(例如，3100A、3102A或3104A)，使得用户在一组设备(例如，3100、3102和3104)中的每个设备的范围外(例如，在图31F中的车库中)是可能的。
在一些实施方案中，用户可在多个设备的可听输出范围内。例如，如图31G所示，用户3108在设备3100和设备3102两者的输出范围内，并且因此两个设备都在输出可听警示3110。在一些实施方案中，如果用户在所述多个设备的范围内，则仅所述多个设备中的一个设备输出可听输出。
在一些实施方案中，设备的可听输出范围是设备位于的房间。例如，如图31H所示，在触发事件发生时，用户在物理上位于在卧室中，并且因此设备3104输出可听警示。特别地，在图31H中，即使用户3106在物理上位于更接近设备3100，设备3104也输出警示。因此，在该示例中，影响设备是否响应于触发事件而输出的是用户所在的房间，而不一定是物理接近度。
在一些实施方案中，一组设备(例如，3100、3102和3104)中的每个设备都接收可听输出触发事件。如图31H所示，即使在设备3100处接收到用户的语音输入(例如，以设置定时器)，但是设备3104通过可听地输出警示3110来响应触发事件。在一些实施方案中，设备(例如，3104)从另一设备(例如，一组设备诸如家庭设备组中的另一设备(例如，3100)；或连接到该设备的另一设备)接收可听输出触发事件)。在一些实施方案中，设备(例如，3104)从用户账户接收可听输出触发事件(例如，从iCloud账户下载)。
例如，如图31H所示，在区域(例如，房屋)中包括设置于其中的多个设备(例如，3100和3104)。例如，如上所述，用户3108可向设备3100提供包括预先确定的内容的语音输入。在一些示例中，设备3104可能设置在区域的另一部分(例如，另一房间、卧室)中，并且因此可能不接收语音输入。因此，设备3104可能不被激活。在一些实施方案中，多个设备接收语音输入(例如，设备3100和设备3104)。在一些示例中，在设备(例如，3100)上操作的数字助理可与另一设备(例如，3104)协调以确定哪个设备应该被激活。例如，在设备3100和设备3104上操作的数字助理两者都可以检测并记录与语音输入相关联的音量或声压。基于对在设备3100处检测到的声压和在设备3104处检测到的声压的比较，可确定用户相对于这两个设备的位置。例如，可确定用户在物理上相比设备3100更靠近设备3104。因此，设备3104可被激活，而设备3104可不被激活。应当理解，确定要激活哪个设备可以基于用户的语音输入(例如，用户提供“唤醒客厅中的扬声器”)和/或任何上下文信息诸如用户的偏好、用户的相对位置、设备的能力和属性(例如，一个设备比另一设备更适合执行某些任务)等。
在一些实施方案中，设备(例如，3100)的可听输出范围是相对于一个或多个其他设备(例如，3102)的，或者以其他方式受到一组设备中或附近的其他设备的影响。例如，图31I示出了其中设备3100在物理上最靠近用户3106(或者是用户3106被检测到最靠近的最后一个设备)的场景。因此，在图31I中，即使用户在隔壁房间中，设备3100也输出可听警示3110。这样例如可确保至少一个设备输出可听输出。在一些实施方案中，设备基于用户的定位(例如，如果用户被检测为远离该设备定位)来调节其输出(例如，以高声音量输出)。
在一些实施方案中，该组设备(例如，3100、3102和3104)中的设备(例如，3100)检测用户语音以确定用户是否位于设备的可听输出范围内。例如，在图31J中，用户3108与客厅中的用户3116说话，如由用户语音3114(“你好吗？”)所表示的。在一些示例中，设备3100检测用户3106的语音，并确定该用户在客厅中(例如，并且在设备3100的可听输出范围内)。因此，在该示例中，设备3100将在发生触发(例如，如果用户3106继续被检测到或者在触发事件先前的阈值时间量内(例如，在触发之前的最后5分钟内)被检测到)时输出可听警示3110。
在一些实施方案中，不是该组设备(例如，3100、3102和3104)中的一个的设备(例如，3106)连接到该组设备。在该示例中，当用户3106进入汽车时，设备3106是连接到该用户的个人设备的汽车。在一些实施方案中，该组设备中的设备响应于确定用户处于不是该组设备中的一个的设备(例如，3106)的可听输出范围内(例如，在汽车通电时)而放弃输出可听输出。例如，如图31K所示，当用户进入汽车3106时，该组设备3100、3102和3104不响应于触发事件而输出音频输出(例如，因为用户可能准备离开他们的家)。
在一些示例中，一组设备中的设备被用作智能的端到端通信工具。在一些实施方案中，一组设备(例如，3100、3102和3104)中的第一设备(例如，3100)接收用户输入请求(例如，3118)以将消息(例如，3120)递送到在该组设备中的至少一个设备的可听输出范围内的用户(例如，3116)。在一些实施方案中，第一设备(例如，3100)将消息传输到该组设备(例如，3100、3102和3104)中的第二设备(例如，3104)(例如，用户3116在该设备的可听输出范围内)。例如，如图31L所示，用户3108位于客厅中，并且用户3116位于卧室中。在图31M中，用户3108发出由设备3100检测到的用户输入语音命令3118“发送消息给Tim，晚餐准备好了”。如上所述，该组设备(例如，3100、3102和3104)中的设备可确定用户的物理位置，以便酌情地递送可听通知的输出。因此，如图31N所示，消息3120(“晚餐准备好了”)由该组中的第二设备(例如，3104)可听地输出。在该示例中，用户3116(语音输入命令的目标Tim)位于设备3104的可听输出范围内，因此设备3104输出消息3120。在一些实施方案中，第一设备向第二设备传输询问用户(例如，3116)是否在设备可听输出范围内的请求(例如，并且如果接收到确认，则向第二设备传输消息3120)。
在一些实施方案中，设备(例如，3100)的可听输出范围基于以下各项中的一个或多个：用户存在或位置的其他可检测标记，包括脚步(例如，确定并检测与用户相关联的脚步模式、当他们四处走动时追踪一组脚步的位置(其被推测为该用户)、确定并检测用户的呼吸模式、使用视觉检测机构(例如，运动传感器，相机))等。
图32A-图32C是示出了根据一些实施方案的用于使用电子设备来输出基于用户位置的可听输出的方法的流程图。在设备(例如，100、300、500)处执行方法3200。方法3200中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法3200提供了用于输出基于用户位置的可听输出的直观方式。该方法减轻了用户在输出基于用户位置的可听输出时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地输出基于用户位置的可听输出节省功率并增加电池两次充电之间的间隔。
为一组设备(例如，3100、3102和3104)中与第一用户账户相关联的第一设备的电子设备(例如，3100)：接收(3202)可听输出触发事件。在一些实施方案中，可听输出触发事件是被配置为使得设备响应于触发事件而输出可听输出的任何数据。在一些实施方案中，可听输出触发事件是以下各项中的一个或多个：针对特定时间(例如，下午5点)或未来的某个时间长度(例如，30分钟后)的通知(例如，警示/定时器/提醒)。在一些实施方案中，可听输出触发事件是设备通知设置。
第一设备(例如，3100)确定(3204)与第一用户账户相关联的第一用户(例如，3108)位于该组设备中的设备的可听输出范围(例如，3100A、3102A和/或3104A)内。在一些实施方案中，可听输出范围针对每个设备是独立的(或者不受该设备组中是否存在其他设备的影响)。例如，每个设备具有“固定的”接近度范围，所以用户(例如，3108)可能在一组设备中的每个设备的范围外。在一些实施方案中，设备的可听输出范围是相对的或者以其他方式受到该组设备中的其他设备的影响。例如，用户可始终在该组中最靠近的(最接近的)设备的可听输出范围内(例如，最靠近的设备响应，即使其在隔壁房间中或在100米开外；如图31I所示)。在一些实施方案中，可听输出范围是设备位于的房间(例如，针对位于房间中在设备设置中被正确识别为在“卧室”中的设备，则用户在存在于(在物理上位于)卧室中的卧室设备(例如，3104)的可听输出范围内，如图31H所示。)；
根据确定第一用户(例如，3108)在第一设备(例如，3100)的可听输出范围内并且根据可听输出触发事件的发生，第一设备(例如，3100)输出(3206)可听输出(例如，如图31C所示的3110)。例如，第一设备输出针对定时器结束的可听音调，或输出所接收的电话呼叫。
使用对用户的物理位置是否在设备的可听输出范围内的确定给用户提供了一种用于在无需外来用户输入的情况下接收来自适当定位的设备的输出的简易技术。在一组条件已经被满足而不需要进一步的用户输入时执行操作增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
根据确定第一用户在第二设备(例如，如图31D所示的3102)的可听输出范围内并且根据可听输出触发事件的发生，第一设备(例如，3100)放弃输出(3208)可听输出(例如，3100不输出针对定时器结束的可听音调；如图31D所示)。
在一些实施方案中，该组设备中的设备(例如，3102)是第二设备，并且其中输出可听输出包括向第二设备(例如，3102)传输(3210)指令以输出可听输出(例如，如图31D所示的3110)。
在一些实施方案中，输出可听输出包括播放(3212)可听音调(例如，声音或语音口述)。在一些实施方案中，设备还输出视觉输出(例如，使用LED或显示器。)。
在一些实施方案中，接收可听输出触发事件包括接收(3214)表示对可听输出触发事件的配置(例如，设置定时器、闹钟或提醒；或设置通知或电话呼叫输出设置)的用户输入。
在一些实施方案中，接收可听输出触发事件包括接收(3216)表示与第一用户账户相关联的可听输出设置(例如，是否推送以下各项中的一个或多个：电话呼叫、文本消息通知、电子邮件通知等到第一设备(例如，用于可听输出))的数据。
在一些实施方案中，第一设备的可听输出范围基于以下各项中的一个或多个(3218)：检测到的第一设备到第一用户的物理接近度(例如，距离)；检测到的第一用户在与第一设备相同的房间中的存在；以及第一设备的输出特征(例如，扬声器输出功率)。
在一些实施方案中，确定第一用户位于该组设备中的设备的可听输出范围内包括以下各项中的一个或多个(3220)：在设备(例如，3100)处检测(3222)与第一用户相关联的语音(例如，3112或3114)(例如，在通知触发事件之前的阈值时间内，间接地(例如，无意中听到用户)或直接地(例如，用户利用语音命令与设备进行交互))；在设备处检测(3224)与用户相关联的第三设备(例如，个人设备)，其中第三设备不是该组设备的成员(例如，该设备是用户的个人电话，并且不是一组固定设备(例如，设备3100、3102和3104)的一部分)；以及从外部传感器(例如，在外部设备上的传感器，或在该设备上的传感器)接收表示第一用户在物理上在该设备(例如，运动传感器、相机)附近的信号(3226)。
在一些实施方案中，继输出可听输出之后(3228)：根据确定第一用户(例如，3108)在不是该组设备(例如，3100、3102和3104)的成员的第四设备(例如，3106)的可听输出范围内，并且根据可听输出触发事件的发生，第一设备(例如，3100)放弃输出(3228)可听输出。例如，用户已经进入他们在车库中的汽车(例如，其连接到该组设备)，并且该组设备放弃输出可听输出，即使用户仍然在该组设备中的设备的范围内。
在一些实施方案中，第一设备(例如，3100)回放媒体内容。进一步根据确定第一用户在不是该组设备的成员的第四设备(例如，3106)的可听输出范围内，停止媒体内容的回放。
需注意，上文相对于方法3200所述的过程(例如，图32A-图32C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3400、方法3600、方法3800和方法3900任选地包括上文参考方法3200所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图33A-图33G根据一些实施方案示出了用于控制媒体回放的示例性用户界面。这些附图中的用户界面被用于示出包括图34A-图34B中的过程的下文描述的过程。
图33A-图33B示出了包括多个连接设备的示例性场景，所述多个包括当前没在回放媒体的第一设备(例如，3300)以及当前正在回放媒体的第二设备(例如，3304)。图33A描绘了名为“客厅”的家庭房间，其包括：设备3302(例如，电视)、设备3304(例如，家庭媒体集线器，诸如Apple TV)以及设备3306和设备3308(例如，智能扬声器)。图33A还描绘了包括设备3300(例如，智能扬声器)的名为“厨房”的家庭房间。在一些实施方案中，设备3300、3302、3304、3306和3308每个都包括设备100、300、500或580的一个或多个特征。如图所示，设备3302正在显示表示当前正在设备3304上回放的媒体的媒体信号(例如，视频)的视觉分量(例如，图像3310)。此外，设备3306和设备3308正在输出表示当前正在设备3302上回放的媒体的媒体信号(例如，音频)的音频分量(例如，由声波3312表示)。在该示例中，设备3306和设备3308被配置为扬声器的立体声对，如上所述。因此，在图33A的场景中，(例如，经由媒体集线器设备3304)互连的客厅设备正在回放视频媒体内容(例如，电影或电视节目)、使用设备3302来输出媒体的视频信号并使用设备3306和设备3308来输出媒体的音频信号。设备3300当前不是设备3304的媒体回放会话的一部分，并且当前没在输出音频。
图33B示出了图33A的场景的俯视图，其描绘了客厅中的以下设备：设备3302、设备3304、设备3306(当前输出音频)和设备3308(当前输出音频)。在厨房中示出了设备3300。
如上文相对于图6AH所述，在一些示例中，显示设备(例如，设备3302)自身正在回放媒体内容(例如，是“智能”设备)，并且在一些示例中，其被另一设备(例如，设备3304)用作显示器—这两种情况都被预想在本公开的范围内。因此，在该示例中，当参考设备3302或设备3304回放媒体时，这些情况中的任一种都被预想在这种公开的范围内，除非另有说明。同样，在一些示例中，设备3306和设备3308访问和/或流传输对应于媒体会话的音频内容(例如，是智能设备)，并且在一些示例中，被设备3302或设备3304用作常规扬声器—这两种情况都被预想在本公开的范围内。
图33C示出了设备的示例性展开媒体控制界面。如图所示，展开媒体界面3320以图形方式表示上文相对于图33A和图33B所述的场景—展开媒体界面3320指示“Apple TV”(例如，设备3304)当前正在回放媒体(例如，名为“Super Heroes”的电影)。在一些实施方案中，展开媒体界面包括图6G的展开媒体控制界面609的一个或多个特征。
用户可能期望在厨房中的设备(例如，3300)上收听当前正由客厅设备回放的媒体内容。在一些实施方案中，在连接到回放媒体内容(例如，电影“Super Heroes”)的一组设备(例如，3302、3304、3306和3308)的设备(例如，3300)处接收用户输入(例如，语音输入3314)。在一些实施方案中，响应于该用户输入，当前不是该媒体会话的一部分的新设备(例如，3300)发起表示该媒体的信号的输出。例如，可使用在连接到客厅设备(或者是客厅设备组的一部分)的任何设备处接收到的用户输入来将厨房设备3300添加到包括客厅设备的“Super Heroes”媒体会话。在一些示例中，用户输入是语音用户输入。例如，图33A和图33B描绘了用户发出语音命令“嘿Siri，让我在厨房中收听这部电影”。在该示例中，设备3300接收语音命令。
图33D-图33G示出了用于响应于用户的话语而将新设备添加到媒体会话的示例性技术和界面。图33D和图33E描绘了继设备3300接收到语音用户输入3314之后的图33A和图33B的场景。如图33D和图33E所示，响应于用户输入3314，设备3300现在正在输出表示正由设备3304回放的媒体的音频(例如，由声波3312表示)。在一些实施方案中，设备(例如，设备3300)确定目标媒体会话(例如，在客厅中播放的电影)和要添加到该目标媒体会话的目标设备组(例如，一个或多个设备，诸如设备3300)。例如，如果用户输入是语音用户输入，则可解析该输入以确定这种信息。在该示例中，响应于语音输入“嘿Siri，让我在厨房中收听这部电影”，设备3300确定电影“Super Heroes”(例如，当前在用户家中连接的设备上回放的唯一电影)是目标媒体，并且设备3300(例如，厨房中的唯一设备)是目标设备组(例如，其中一组设备是一个或多个设备)。因此，厨房扬声器设备3300发起媒体会话的音频部分的回放。在一些实施方案中，提示用户进行进一步输入。例如，如果两个不同的媒体会话正在用户家中的不同的连接设备上同时回放，则设备3300可(例如，使用文本转语音输出)用提示“您想要在厨房中收听哪部电影？”来响应。
图33F示出了展开媒体界面3320，其已被更新以反映厨房设备3300已被添加到客厅媒体会话。展开媒体界面3320现在指示“Apple TV+厨房”设备(例如，设备3304和设备3300)当前正在回放媒体(例如，名为“Super Heroes”的电影)。另选地，在一些示例中，展开媒体界面使用房间名称(例如，“客厅+厨房”)来识别媒体会话中的所有设备。
在一些实施方案中，表示媒体的信号包括视频分量和/或音频分量。在一些实施方案中，设备发起视频分量和音频分量中的一个或多个的输出。例如，如上所述，响应于用户请求，媒体会话的音频部分被转发到新设备(例如，3300)。在一些示例中，响应于用户请求(例如，“嘿Siri，让我在厨房的显示器上观看这部电影”)，媒体的视频部分可被转发到设备。同样，在一些示例中，音频部分和视频部分两者都可被转发到设备(例如，“嘿Siri，让我在家庭影院房间观看这部电影。”)
在一些实施方案中，响应于用户输入(例如，3314)，不是当前回放媒体的该组设备(例如，3302、3304、3306和3308)的成员的设备(例如，3300)发起媒体的分量的输出，并且该组设备停止输出该部分。例如，图33G示出了图33D中所描绘的场景的另选场景，其中响应于用户输入3314，厨房设备3300成为针对该媒体会话的仅有音频输出。因此，如果用户移动到厨房并且没有其他用户将在客厅中收听，则厨房可成为针对该媒体会话的独一音频输出源，但是视频将继续(例如，如果厨房设备不包括显示器)。在一些实施方案中，设备通过确定任何用户是否留在包括该组设备的房间中来确定是否停止该组设备上的部分的输出。在一些实施方案中，基于预先配置的设置(例如，当用户要求在另一房间中收听时总是停止音频的输出，或者当用户要求在另一房间中收听时不停止音频的输出)来预先确定该行为。在一些实施方案中，继在第一设备(例如，3300)处发起分量之后，设备提示用户是否停止由第二设备(例如，3306和/或3308)进行的分量的输出。
图34A-图34B是示出了根据一些实施方案的用于使用电子设备来控制媒体回放的方法的流程图。在设备(例如，100、300、500、580)处执行方法3400。方法3400中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法3400提供了用于控制媒体回放的直观方式。该方法减轻了用户在控制媒体回放时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地控制媒体回放节省功率并增加电池两次充电之间的间隔。
电子设备(例如，3300)(也被称为“第一设备”)接收(3402)表示用于输出表示当前正由连接到第一设备(例如，3300)的第二设备(例如，图33A的设备3302或设备3304)回放的媒体的信号(例如，图33D的音频输出3312)的请求的用户输入语音命令(例如，由语音输入3314表示)。在一些实施方案中，媒体包括至少音频和/或视频信号部分。在一些实施方案中，当前在第二设备上回放的媒体包括第二设备正通过在一个或多个外部设备上(例如，在外部扬声器设备3306和外部扬声器设备3308上，和/或在外部显示器3302上，如图33A所示)引发回放而播放的媒体。在一些实施方案中，第一设备和第二设备经由有线或无线连接(例如，经由Wi-Fi、蓝牙等)连接。
响应于接收到该用户输入，第一设备(例如，3300)传输(3404)对关于第二设备(例如，3302或3304)当前正在回放的媒体的信息的请求。在一些实施方案中，该请求被传输到第二设备。在一些实施方案中，该请求被传输到不同于第二设备的设备。例如，在一些示例中，第一设备将该请求传输到针对当前在第二设备上回放的媒体会话的主设备。在一些实施方案中，该请求是对以下各项中的一个或多个的请求：媒体的媒体流、第一设备可从其中流传输媒体的位置(例如，URL、可用于访问媒体的媒体服务、用于媒体服务的登录凭证等)或者第一设备可用来定位媒体的源的识别(例如，媒体的识别信息，诸如标题、唯一编号等)。
第一设备(例如，3300)接收(3406)关于第二设备当前正在回放的媒体的信息。例如，第二设备(例如，或针对包括第二设备的媒体会话的主设备)接收到该请求，并且作为响应，向第一设备传输关于该媒体的信息。
根据接收到关于第二设备当前正在回放的媒体的信息并且在第二设备继续媒体的至少一个分量的回放时，第一设备(例如，3300)发起(3408)表示第二设备当前正在回放的媒体的信号的至少一个分量(例如，音频分量和/或视频分量)的输出(例如，如图33D和图33E所示)。在一些实施方案中，媒体具有音频分量和视频分量。在一些实施方案中，继续回放包括第二设备继续输出一个分量(例如，视频)但是停止输出另一分量(例如，音频)。例如，第一设备成为针对该媒体会话的唯一音频输出(例如，如图33G所示)。在一些实施方案中，继续回放包括第二设备继续输出音频分量和视频分量两者。例如，第一设备成为针对该媒体会话的补充音频输出源，并且第二设备继续输出音频(例如，如图33D和图33E所示)。
使用语音命令来使得设备发起表示当前在另一设备上回放的媒体的分量的回放(其中该另一设备继续回放表示该媒体的分量)给用户提供了需要更少用户输入的用于管理包括在媒体回放会话中的设备的有效用户界面。减少执行操作所需的输入的数量增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，表示第二设备当前正在回放的媒体的信号包括(3410)音频信号、视频信号或两者中的一个或多个。
在一些实施方案中，第二设备(例如，3302或3304)当前正在回放的媒体包括视频分量和音频分量，并且发起表示第二设备当前正在回放的媒体的信号的所述至少一个分量的输出包括发起音频分量的输出(3412)而不发起视频分量的输出(例如，如图33D所示)。在一些实施方案中，第一设备(例如，3300)发起视频分量的输出而不发起音频分量的输出。在一些实施方案中，第一设备发起音频分量和视频分量两者的输出。
在一些实施方案中，继第一设备发起信号的所述至少一个分量的输出之后，第二设备(例如，3302或3304)继续视频分量和音频分量两者的回放(例如，如图33D所示)。
在一些实施方案中，继第一设备发起信号的所述至少一个分量的输出之后，第二设备(例如，3302或3304)继续视频分量的回放并停止音频分量的回放(例如，如图33G所示)。
在一些实施方案中，发起表示第二设备当前正在回放的媒体的信号的至少一个分量的输出包括由第一设备(例如，3300)回放(3414)表示第二设备(例如，3302或3304)当前正在回放的媒体的信号的所述至少一个分量。例如，第一设备3300接收用户输入语音命令3314，并且作为响应，开始媒体会话的音频分量的输出。
在一些实施方案中，发起表示第二设备当前正在回放的媒体的信号的所述至少一个分量的输出包括向第三设备(例如，连接到第一设备)传输指令(3416)以发起表示第二设备当前正在回放的媒体的信号的所述至少一个分量的输出。例如，第一设备3300接收用户输入语音命令3314，并且作为响应，使得第三设备开始输出媒体会话的音频分量。例如，第三设备可以是一个或多个个人听音设备，诸如耳机。在一些示例中，第三设备不包括处理用户输入的能力(例如，第三设备不包括麦克风)，但用户请求在第三设备上开始输出—因此，第一设备接收用户输入，但是在第三设备上引发输出(例如，向其提供媒体流)。在一些实施方案中，第一设备和第三设备经由有线或无线连接(例如，蓝牙等)连接。
在一些实施方案中，以第一自然语言(例如，英语)回放第二设备当前正在回放的媒体，并且向第三设备传输指令以发起表示第二设备当前正在回放的媒体的信号的所述至少一个分量的输出包括传输指令来以不同于第一自然语言的第二自然语言(例如，西班牙语)发起第二设备正在回放的信号的所述至少一个分量的输出。例如，第一设备使得第三设备(例如，耳机)以不同的语言输出音频(例如，电影对白)。因此，例如，当一个或多个用户正在以第一语言观看电影时，另一用户可同时观看相同的电影并且同时使用耳机以另一种语言收听音频。
在一些实施方案中，用户输入语音命令(例如，3314)是第一用户输入，并且第一设备(例如，3300)接收表示回放控制命令的第二用户输入。例如，如上所述，回放控制命令是用于控制媒体回放诸如暂停、下一曲目、搜索等的命令。响应于接收到第二用户输入，第一设备(例如，3300)向第二设备(例如，3304)传输回放控制命令。例如，如果第一设备不是针对该媒体会话的主设备并且第二设备(例如，3302或3304)是主设备，则第一设备将回放控制命令转发给主设备以进行处理。在一些实施方案中，第一设备放弃执行回放控制命令。在一些实施方案中，第一设备随后从第二设备接收指令以执行回放命令。例如，第二设备处理回放控制命令，并向第一设备传输指令以根据该命令来改变回放。在一些示例中，当第一设备独立地流传输内容时，依赖主设备来处理命令有助于保持该媒体会话中的设备之间的同步(例如，同步是否执行响应动作、响应动作的定时等)。也就是说，当第二设备不向第一设备提供媒体流时，第一设备和第二设备必须响应于回放控制命令而协调其动作—否则，每个设备上的媒体回放可能变得不同步，这对于用户而言是不期望的。
在一些实施方案中，接收关于第二设备当前正在回放的媒体的信息包括接收以下各项中的一个或多个：媒体的标识符(例如，所以第一设备可确定其是否具有对该媒体的访问权限)、其中能够访问表示该媒体的信号的位置(例如，位置或媒体流传输服务、URL等)，以及表示该媒体的信号的媒体流(例如，第二设备向第一设备提供媒体流)。在一些实施方案中，第一设备从第二设备接收信息(例如，音频流)。在一些实施方案中，第一设备从不同于第二设备的第四设备接收信息。
在一些实施方案中，接收关于第二设备当前正在回放的媒体的信息包括第一设备(例如，3300)从第四设备(例如，3308)接收表示第二设备当前正在回放的媒体的信号的所述至少一个分量的媒体流。例如，第四设备(例如，第二设备的主设备，或者接近为媒体会话的一部分的第一设备的设备)可向第一设备提供当前正在第二设备上回放的媒体的音频流。在一些实施方案中，第一设备从第四设备接收关于该媒体的信息。
需注意，上文相对于方法3400所述的过程(例如，图34A-图34B)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3600、方法3800和方法3900任选地包括上文参考方法3400所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图35A-图35J根据一些实施方案示出了用于在一组设备上管理媒体的回放的示例性用户界面。这些附图中的用户界面被用于示出包括图36A-图36C中的过程的下文描述的过程。
图35A示出了示例性多设备界面。如图所示，设备3500在显示器3501上显示多设备界面3510。在一些实施方案中，设备3500包括设备100、300、500或580的一个或多个特征。在一些实施方案中，多设备界面3510包括例如如上文相对图6J所述的多设备界面610的一个或多个特征。如图所示，选择了针对在以下房间中的设备的指示符：“卧室”(例如，指示符3510B)、“厨房”(指示符3510C)和“客厅”(指示符3510D)(例如，其对应于两个设备—立体声对)。未选择针对iPhone(例如，设备3500)的指示符(3510A)。在选择了指示符3510B至指示符3510D时，设备3500接收用户输入3512，表示对完成示能表示3510E的选择。因此，用户希望开始媒体会话，该媒体会话包括在卧室、厨房和客厅中的一组设备上的名为“SameThing”的媒体项的回放。
图35B示出了继设备3500接收用户输入3512之后用户家的示例性俯视图。如图所示，响应于该用户输入，所选择的设备当前正在回放媒体(由从设备：设备3502(在厨房中)、设备3504和设备3506(在客厅中)以及设备3508(在卧室中)发出的声波表示)。在一些实施方案中，设备3502、3504、3506和3508每个都包括设备100、300、500或580的一个或多个特征。
在一些实施方案中，设备(例如，3500)接收请求在不包括该设备的一组设备(例如，3502、3504、3506和3508)上的回放的用户输入(例如，3512)。如图35A所示，设备3500接收表示用于在设备3502、3504、3506和3508上发起回放的请求的用户输入3512。因此，在该示例中，接收该请求的设备不是将要回放所请求的媒体的设备。在一些实施方案中，接收该请求但不被包括在该组设备(例如，媒体会话的该组设备)中的设备(例如，3500)确定其是否可将媒体协调责任切换给另一设备。图35C-图35J示出了用于这样做的示例性技术。
图35C示出了对图35B的场景的简化描绘，在设备3500接收用户输入3512之前(例如，因此，该组设备被描绘为当前没在回放媒体)。在一些实施方案中，响应于接收到请求在一组设备(例如，3502、3504、3506和3508)上的媒体回放的用户输入(例如，3512)，设备(例如，3500)确定该组设备是否包括被配置为协调媒体回放(例如，被配置为充当针对该媒体会话的主设备)的设备。
图35D示出了示例性场景，其中一组设备包括被配置为协调媒体回放的设备。如图所示，设备3504被选择为针对在该组设备(例如，3502、3504、3506和3508)上的媒体会话(例如，媒体项“Same Thing”的回放)的主设备。因此，例如，设备3504向该组中的其他设备中的每一个提供媒体流(例如，如虚线所描绘的)。在一些实施方案中，设备(例如，3500)选择主设备(例如，3504)。在一些实施方案中，设备(例如，3500)选择主设备(例如，3504)的指定继承者(例如，3502)。如图所示，设备3502被选择为设备3504的指定继承者(例如，并且如果设备3504变得不可用，则将接管作为主设备)。因此，在图35D的示例中，该组设备包括能够充当主设备的设备3504，所以第一设备3500将媒体回放协调责任(例如，一个或多个任务)移交给该设备。在一些实施方案中，设备(例如，3500)选择主设备(例如，3504)，该主设备转而选择指定继承者(例如，3502)。在一些实施方案中，独立的设备(例如，服务器)选择主设备(例如，3504)和/或指定继承者(例如，3502)。
图35E示出了示例性场景，其中一组设备不包括被配置为协调媒体回放的设备。在图35E的示例中，该组设备不包括被配置为协调该组设备上的媒体回放的设备。例如，该组设备不包括能够(例如，受限于硬件或软件)充当主设备的设备。如图所示，设备3500是针对该组设备(例如，3502、3504、3506和3508)上的媒体会话(例如，媒体项“Same Thing”的回放)的主设备。因此，例如，响应于用户输入3512，设备3500保留作为针对该组设备上的媒体会话的主设备的责任，并且向该组中的其他设备中的每一个提供媒体流(例如，如虚线所描绘的)。
图35F示出了示例性场景，其中不被包括在该组设备中且不是接收用于发起媒体回放的请求的设备的另一设备(例如，3514)被选择为针对一组设备上的媒体会话的主设备。在一些实施方案中，设备(例如，3500)将媒体回放协调任务传输到不在该组设备(例如，3502、3504、3506和3508)中的另一设备(例如，3514)。如图所示，设备3514(例如，家庭媒体集线器，诸如Apple TV)是针对该组设备(例如，3502、3504、3506和3508)上的媒体会话(例如，媒体项“Same Thing”的回放)的主设备。因此，例如，设备3514向该组中的设备中的每一个提供媒体流(例如，如虚线所描绘的)。即使该组设备包括被配置为协调媒体回放的设备，第一设备之外且不被包括在该组设备中的设备也可充当主设备。例如，在图35F的示例中，该组设备包括被配置为协调该组设备上的媒体回放的设备3502。然而，设备3502是指定主设备。在一些实施方案中，不被包括在该组中的设备(例如，设备3514)更好地适合于执行媒体回放协调任务，并因此成为优于该组中的设备(例如，设备3502)的主设备。在一些示例中，该组设备不包括能够充当主设备(例如，受限于硬件或软件)的设备，并因此另一设备诸如设备3514成为主设备(类似于图35F中的示例，但设备3502不会是指定继承者)。
在一些实施方案中，设备(例如，3500)在同时向一组设备(例如，3502、3504、3506和3508)提供媒体流时执行语音助理功能。在一些实施方案中，设备(例如，3500)在同时向一组设备(例如，3502、3504、3506和3508)提供媒体流时执行电话呼叫功能。图35G示出了在向一组设备提供媒体流时执行电话呼叫功能的示例性设备(例如，3500)。如图所示，设备3500显示电话呼叫界面，指示该设备当前正在执行电话呼叫功能。在执行电话呼叫功能时，设备3500还同时充当针对该组设备(例如，其继续回放媒体，如由从每个设备输出的声波所指示的)的主设备并且提供媒体流(例如，如虚线所描绘的)。因此，在一些示例中，执行主设备责任的设备可在充当主设备(例如，并向其他设备提供媒体流)时继续执行其他功能。
在一些实施方案中，设备(例如，3500)同时提供多个不同的媒体流。图35H示出了示例性场景，其中设备(例如，3500)同时提供多个不同的媒体流。如图所示，设备3500正充当针对两个不同组的设备的主设备。设备组1包括设备3502和设备3506，并且设备3500给设备组1中的设备提供第一媒体(例如，第一歌曲)的第一媒体流(“媒体流1”)。设备组2包括设备3504和设备3508，并且设备3500给设备组2中的设备提供第二媒体(例如，第二歌曲，不同于第一歌曲)的第二媒体流(“媒体流2”)。因此，在一些示例中，设备(例如，3500)为不同的并发媒体会话执行主设备责任(例如，并且向每个会话中的设备提供媒体流)。
在一些实施方案中，另一设备(例如，3516)将新设备(例如，3518)添加到该组设备(例如，3502、3504、3506和3508)。图35I-图35J示出了示例性场景，其中新设备被添加到该组设备。图35I描绘了连接到设备3518的设备3516，(尽管未图示)其连接到该组设备(3502、3504、3506和3508)和设备3500。在一些实施方案中，设备3516和设备3518每个都包括设备100、300、500或580的一个或多个特征。在该示例中，设备3516接收用于将设备3518添加到媒体会话的一组设备的请求(例如，在显示在设备3516上的多设备界面处的用户输入)。在一些实施方案中，第一设备(例如，3500)接收新设备已被添加到该组设备的指示。在一些实施方案中，响应于接收到新设备(例如，3518)已被添加到该组设备的指示，设备(例如，3500)向新设备提供媒体流。图35J示出了为针对该媒体会话的主设备并向该组设备提供媒体流的设备3500响应于(例如，从设备3516或设备3518)接收到新设备被添加到该媒体会话的该组设备的指示而现在正在向新设备3518提供媒体流(例如，由虚线指示)。
图36A-图36C是示出了根据一些实施方案的用于使用电子设备来管理一组设备上媒体的回放的方法的流程图。在设备(例如，100、300、500、580)处执行方法3600。方法3600中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法3600提供了用于管理一组设备上媒体的回放的直观方式。该方法减轻了用户在管理一组设备上媒体的回放时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地管理一组设备上媒体的回放节省功率并增加电池两次充电之间的间隔。
电子设备(例如，3500)(也被称为“第一设备”)接收(3602)用于在不包括第一设备的一组设备(例如，3502、3504、3506和3508)上发起媒体回放的请求(例如，用户输入3512)。在一些实施方案中，该组设备包括一个或多个设备。例如，设备3500在多设备界面3510处接收用户输入以在连接到第一设备的“卧室”、“厨房”和“客厅”设备(例如，3502、3504、3506和3508)上发起媒体的回放。
响应于接收到该请求并且在第一设备正在协调媒体回放时，第一设备(例如，3500)确定(3604)该组设备是否包括被配置为协调媒体回放的设备。例如，设备3500确定该组设备3502、3504、3506和3508中的任何设备是否包括能够成为针对用户所请求的媒体会话的主设备的设备(例如，如上文相对于图29A-图29I所述)(例如，是“智能”设备)。在一些示例中，如果设备包括能够成为主设备的设备，则其被称为“智能组”。在一些实施方案中，第一设备或该组设备之外的设备(例如，3514)确定该组设备是否包括被配置为协调媒体回放的设备。
根据确定该组设备包括被配置为协调媒体回放的设备(例如，是智能组)，第一设备(例如，3500)将媒体回放协调任务从第一设备传输(3606)到被配置为协调媒体回放的该设备(例如，图35D所示的3504)。例如，设备3500将主设备责任切换给为该组设备的成员的智能设备(例如，如图35D所示的设备3504)。
继第一设备接收到用户输入之后，将用于不包括第一设备的媒体回放的媒体回放协调任务从第一设备传输到被配置为协调媒体回放的另一设备允许第一设备释放设备资源并且对进一步的用户输入请求提供了改进的响应，而不需要进一步的用户输入来实现该目的。在一组条件已经被满足而不需要进一步的用户输入时执行操作增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
根据确定该组设备不包括被配置为协调媒体回放的设备，第一设备(例如，3500)放弃(3608)传输媒体回放协调任务(例如，如图35E所示)。例如，如果该组设备不包括智能设备，则设备3500不切换主设备责任(例如，如图35E所示)。在一些实施方案中，第一设备将媒体回放协调任务传输到不在该组设备中的设备(例如，图35F的3514)。例如，家庭媒体集线器设备(例如，诸如设备3514，Apple TV)可充当该组设备的主设备。
在一些实施方案中，媒体回放协调任务选自由以下组成的组：存储媒体回放队列、在媒体回放期间向该组设备中的一个或多个设备提供媒体流、传输指示该媒体流可用的数据(例如，向其他设备通告其是主设备)、同步该组设备中的设备之间的回放及其组合。在一些实施方案中，媒体回放协调任务包括其他回放协调任务。回放协调任务的另外示例在上文有所描述(例如，相对于图6A-图6AR和图29A-图29I)。
在一些实施方案中，进一步根据确定该组设备不包括被配置为协调媒体回放的设备(3610)，第一设备(例如，3500)检测(3612)连接到第一设备和该组设备并且不被包括在该组设备中的被配置为协调媒体回放的第二设备(例如，3514)。根据检测到第二设备，第一设备(例如，3500)将媒体回放协调任务从第一设备传输(3614)到第二设备。例如，设备3500将主设备责任切换给连接到该组设备的家庭媒体集线器设备(例如，诸如图35F的设备3514)。
在一些实施方案中，进一步根据确定该组设备不包括被配置为协调媒体回放的设备，第一设备(例如，3500)执行(3616)媒体回放协调任务。例如，设备3500保留主设备责任(例如，如图35E所示)，并因此作为其作为针对该组设备上的媒体会话的主设备的角色的一部分而执行媒体回放协调任务。
在一些实施方案中，执行媒体回放协调任务包括在媒体回放期间向该组设备中的一个或多个设备提供媒体流，并且当在媒体回放期间向该组设备中的一个或多个设备提供媒体流时，第一设备(例如，3500)接收(3618)用于执行语音助理功能或电话呼叫功能的请求。响应于用于执行语音助理功能或电话呼叫功能的请求(3620)，第一设备(例如，3500)：执行(3622)语音助理功能或电话呼叫功能，并且在执行语音助理功能或电话呼叫功能时在媒体回放期间继续(3624)向该组设备中的一个或多个设备提供媒体流。在一些实施方案中，用于执行语音助理功能的请求是用户输入。例如，设备3500接收语音用户输入，诸如调用个人数字助理的“嘿Siri”。在一些实施方案中，用于执行电话呼叫功能的请求是用户输入。例如，设备3500可接收表示用于开始电话呼叫的请求(例如，用于接听传入呼叫的请求或用于拨打呼出呼叫的请求)的用户输入。在一些实施方案中，电话呼叫包括电话呼叫、互联网协议语音技术(“VoIP”)呼叫、视频通话(例如，视频聊天、FaceTime、Skype等)、基于互联网的呼叫(例如，“Wi-Fi呼叫”呼叫)等中的一个或多个。因此，根据一些实施方案，第一设备可在不中断媒体流的情况下执行其他功能，诸如打电话或使用语音助理。
在一些实施方案中，执行媒体回放协调任务包括在媒体回放期间向该组设备中的一个或多个设备提供媒体流，其中该媒体流是第一媒体流，并且其中该组设备是第一组设备。在提供第一媒体流时，第一设备(例如，3500)同时向不同于第一组设备的第二组设备提供(3626)不同于第一媒体流的第二媒体流(例如，如图35H所示)。例如，第一设备可同时提供多个不同的媒体流。例如，第一媒体流是歌曲，第二媒体流是电影。因此，一个设备(例如，设备3500)可充当多个媒体会话(例如，在多个设备上)的主设备。
在一些实施方案中，执行媒体回放协调任务包括在媒体回放期间向该组设备中的一个或多个设备提供媒体流，并且当在媒体回放期间向该组设备中的一个或多个设备提供媒体流时，第一设备(例如，3500)接收(3628)第三设备(例如，3516)将新设备(例如，如图35I所示的3518)添加到该组设备的指示。响应于接收到第三设备将新设备添加到该组设备的指示，第一设备(例如，3500)向新设备提供(3630)媒体流(例如，如图35J所示)。
在一些实施方案中，进一步根据确定该组设备不包括被配置为协调媒体回放的设备，第一设备(例如，3500)接收回放控制命令。响应于接收到回放控制命令，第一设备(例如，3500)根据回放控制命令向该组设备传输指令。例如，在一些示例中，第一设备具有针对该组设备的媒体回放协调责任(例如，是主设备)，并且因此处理回放控制命令并向该组设备中的一个或多个设备发布指令以执行适当的对应动作。
在一些实施方案中，接收回放控制命令包括在第一设备处接收表示回放控制命令的用户输入。例如，第一设备经由用户输入接收回放控制命令。
在一些实施方案中，接收回放控制命令包括从第一设备之外的设备接收表示回放控制命令的数据。例如，第一设备从在用于控制媒体回放的感应卡或其他界面上接收到输入的另一设备接收回放控制命令。
在一些实施方案中，进一步根据确定该组设备包括被配置为协调媒体回放的设备，第一设备(例如，3500)接收回放控制命令，并且响应于接收到回放控制命令，第一设备(例如，3500)将回放控制命令转发给被配置为协调媒体回放的该设备(例如，图35D的3504)。例如，如果第一设备不是针对该组设备的主设备(例如，第一设备切换主设备责任，如图35D所示)，则第一设备将回放控制命令转发到主设备上以进行处理。
在一些实施方案中，进一步根据确定该组设备包括被配置为协调媒体回放的设备，第一设备(例如，3500)将回放队列传输到被配置为协调媒体回放的设备。例如，如果在第一设备处接收到的用于发起回放的请求是用于播放播放列表(例如，多首歌曲)的请求，则播放列表被转发给该组设备的主设备。
在一些实施方案中，用于发起媒体回放的请求是用于发起第一媒体(例如，歌曲、播放列表、电影等)的回放的请求。进一步根据确定该组设备包括被配置为协调媒体回放的设备(3632)并且根据确定被配置为协调媒体回放的该设备具有对第一媒体的访问权限，第一设备(例如，3500)将媒体回放协调任务从第一设备传输(3634)到被配置为协调媒体回放的该设备(例如，图35D的3504)。根据确定被配置为协调媒体回放的该设备不具有对第一媒体的访问权限，第一设备(例如，3500)放弃传输(3636)媒体回放协调任务。例如，如果该设备具有对所请求的第一媒体的访问权限，则第一设备将媒体回放协调任务传输到该组设备中的设备。例如，如果通过该组设备中的设备未被配置为访问的媒体流传输服务来访问所请求的第一媒体，则第一设备放弃将媒体回放协调任务传输到该设备。在一些示例中，第一设备(例如，其具有对第一媒体的访问权限)保留作为媒体会话的主设备的责任，并向该组设备提供媒体流。
在一些实施方案中，该组设备包括被配置为协调媒体回放的多个设备并且进一步根据确定该组设备包括被配置为协调媒体回放的设备，第一设备(例如，3500)从被配置为协调媒体回放的所述多个设备选择主设备，并且将媒体回放协调任务从第一设备传输到所选择的主设备。例如，当该组设备包括多个可能的主设备(例如，其被配置为协调媒体回放)时，第一设备选择其中一个设备来充当针对该媒体会话的主设备。
在一些实施方案中，第一设备(例如，3500)从被配置为协调媒体回放的所述多个设备选择主设备的指定继承者(例如，图35D的3502)。例如，当该组设备包括多个可能的主设备(例如，其被配置为协调媒体回放)时，第一设备选择其中一个设备来充当针对该媒体会话的主设备，并且选择该主设备的指定继承者(例如，以在所选择的主设备变得不可用时接管作为主设备)。
在一些实施方案中，该组设备包括被配置为协调媒体回放的多个设备并且进一步根据确定该组设备包括被配置为协调媒体回放的设备，第一设备(例如，3500)从第四设备(例如，3514)接收从被配置为协调媒体回放的所述多个设备对主设备的选择，并且第一设备(例如，3500)将媒体回放协调任务从第一设备传输到该主设备(例如，图35D的3504)。例如，第一设备之外的设备选择针对该媒体会话的主设备。
在一些实施方案中，第一设备(例如，3500)向该组设备传输指令以发起媒体回放。例如，第一设备向该组设备传输指令以发起所请求的媒体的回放。
在一些实施方案中，第一设备(例如，3500)向该组设备中的至少两个设备传输媒体回放队列的副本。例如，第一设备向该组设备中的非主设备传输回放队列。在一些示例中，在包括该组设备的媒体会话期间，媒体回放队列的副本被存储在该组设备中的多个设备上。
需注意，上文相对于方法3600所述的过程(例如，图36A-图36C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3800和方法3900任选地包括上文参考方法3600所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图37A-图37D根据一些实施方案示出了用于在多个设备上管理媒体的回放的示例性用户界面。这些附图中的用户界面被用于示出包括图38A-图38B中的过程的下文描述的过程。
图37A示出了示例性多设备界面。如图所示，设备3700在显示器3701上显示多设备界面3710。在一些实施方案中，设备3700包括设备100、300、500或580的一个或多个特征。在一些实施方案中，多设备界面3710包括例如如上文相对图6J所述的多设备界面610的一个或多个特征。如图所示，选择了针对在以下房间中的设备的指示符：“卧室”(例如，指示符3710B)、“厨房”(指示符3710C)和“客厅”(指示符3710D)(例如，其对应于两个设备—立体声对)。未选择针对iPhone(例如，设备3700)的指示符(3710A)。在选择了指示符3710B至指示符3710D时，设备3700接收用户输入3712，表示对完成示能表示3710E的选择。因此，用户希望开始媒体会话，该媒体会话包括在卧室、厨房和客厅中的一组设备上的名为“SameThing”的媒体项的回放。
在一些实施方案中，设备(例如，3700)接收请求在不包括该设备的一组设备上的回放的用户输入(例如，3712)。如图所示，设备3700接收用户输入3712，其是用于在设备3702、3704、3706和3708(示出在图37C中)上发起回放的请求。在一些实施方案中，设备3702、3704、3706和3708每个都包括设备100、300、500或580的一个或多个特征。因此，在该示例中，接收该请求的设备不是将要回放所请求的媒体的设备。在一些实施方案中，接收该请求但不被包括在该组设备(例如，媒体会话的该组设备)中的设备(例如，3700)确定其是否可将媒体协调责任切换给另一设备。然而，在一些示例中，设备(例如，3700)连接到被配置为协调媒体回放的多个设备。因此，设备可从被配置为协调媒体回放的所述多个设备选择主设备。在一些实施方案中，设备基于所述多个设备中的每个设备的一个或多个特征来从所述多个设备选择主设备。图37B-图37D示出了用于这样做的示例性技术。
图37B示出了对被配置为协调一组设备的媒体回放的多个设备中的每一个的设备特征的示例性描绘。如图所示，图37B描绘了四组设备特征3714A、3714B、3714C和3714D。在该示例中，如下文更详细描述的，每组设备特征包括与相应设备是否在电池电源上操作相关的特征、相应设备的网络性能特征以及相应设备与媒体会话的一组设备中的每个设备的连接的质量。在一些示例中，设备(例如，3700)基于一个或多个设备特征(例如，诸如图37B所示的那些)来选择主设备。在一些实施方案中，设备基于(例如，图37B所示的那些之外的)其他设备特征来选择主设备。
在该示例中，每组特征都包括“电源”特征，其识别设备的电源—例如，相应设备是在电池电源上操作还是插入插头来连接电源(例如，正使用墙壁电源操作或者正以其他方式充电)。例如，相应设备的电源可以是当选择用于执行回放协调任务的主设备时所考虑的特征，这可能需要设备的功率消耗增加(例如，由于由向该组设备提供媒体流造成的增加的数据传输活动)。
在该示例中，每组特征还包括“网络性能”特征，其可包括对相应设备到网络的连接(例如，连接该组设备中的每个设备的局域网，到广域网的连接等)的质量的一个或多个指示。例如，设备的网络性能可以是当选择用于执行回放协调任务的主设备时所考虑的特征，这可能需要对设备的网络活动的需求增加(例如，由于由向该组设备提供媒体流造成的增加的数据传输活动)。
在该示例中，每组特征还包括对相应设备和所请求的媒体会话中包括的该组设备中的每个设备之间的连接的质量的指示。这些被不同地识别为“到厨房设备的连接”(例如，设备3702)、“到客厅设备1的连接”(例如，设备3704)、“到客厅设备2的连接”(例如，设备3706)以及“到卧室设备的连接”(例如，设备3708)。例如，相应设备和该组设备中的每个设备之间的连接的质量可以是当选择用于执行回放协调任务的主设备时所考虑的特征，这可能需要所选择的主设备向该组设备中的每个设备传输数据(例如，提供媒体流)。
图37C描绘了继设备(例如，3700)选择主设备(例如，3704)之后的示例性场景。在图37C的示例中，设备3700选择设备3704为针对在该组设备3702、3704、3706和3708上的媒体回放的主设备。在该示例中，设备3700确定存在被配置为协调媒体回放的三个设备：厨房设备3702(对应于该组特征3714A)、客厅1设备3704(对应于该组特征3714B)以及客厅2设备3706(对应于该组特征3714C)。在该示例中，卧室设备3708不是被配置为协调媒体回放的设备。在该示例中，如相对于图35B所示和所述地布置该组设备(例如，在用户家中)。
在一些实施方案中，设备(例如，3700)至少部分地基于被配置为协调媒体回放的所述多个设备(例如，3702、3704和3706)中的每个设备的所述一个或多个特征来从被配置为协调一组设备(例如，3702、3704、3706和3708)上的媒体回放的所述多个设备中选择主设备。如图37C所示，设备3700选择设备3704(对应于该组特征3714B)为主设备，其使用非电池电源操作、具有高网络性能特征并且具有到该组中除了卧室设备(设备3708)之外的每个其他设备的高质量连接(其具有到卧室设备的中等质量连接)。在一些示例中，该组特征3714B比在电池电源上操作并且具有更低的连接性能和质量相关特征的组3714A和组3714C更有利。在一些实施方案中，部分地基于一个或多个特征来选择主设备包括为被配置为协调媒体回放的所述多个设备中的每个设备创建比较度量。例如，比较度量可以是通过权衡与相应设备相关联的一组特征中的每个特征来创建的值(与所述每个特征相关联的值)，用于定量地将所述多个设备中的每个相应设备彼此比较。例如，相对于使用电池电源并且具有低网络性能的其他设备，使用非电池电源并且具有高网络性能的特征可得到更有利的(例如，更高的)比较度量。
在一些实施方案中，所述多个设备(例如，3702、3704、3706和3716)包括不被包括在该组设备(例如，3702、3704、3706和3708)中的一个或多个设备(例如，3716)。图37D示出了图37C所示的场景的另选示例性场景。在图37D的示例中，被配置为协调该组设备(例如，3702、3704、3706和3708)上的媒体回放的所述多个设备包括不在该组设备中的设备，即设备3716(例如，家庭媒体集线器，诸如Apple TV)。在该示例中，设备3700选择设备3716为主设备。设备3716对应于图37B所示的该组特征3714D—如图所示，设备3716使用非电池电源操作、具有高网络性能特征并且具有与该组设备中的每个设备的高连接质量。在该示例中，设备3716具有比设备3704的特征(例如，特征3714B)更有利的特征(例如，得到了更有利的比较度量)，并且因此设备3700选择设备3716为主设备。
图38A-图38B是示出了根据一些实施方案的用于使用电子设备来管理一组设备上媒体的回放的方法的流程图。在设备(例如，100、300、500、580)处执行方法3800。方法3800中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法3800提供了用于管理一组设备上媒体的回放的直观方式。该方法减轻了用户在管理一组设备上媒体的回放时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地管理一组设备上媒体的回放节省功率并增加电池两次充电之间的间隔。
电子设备(例如，3700)接收(3802)用于在连接到该设备的一组设备(例如，图37C的3702、3704、3706和3708)上发起媒体回放的请求(例如，用户输入3712)。在一些实施方案中，该组设备包括一个或多个设备。在一些实施方案中，该设备和该组设备经由有线或无线连接(例如，Wi-Fi、蓝牙等)连接。在一些实施方案中，经由在该设备处的用户输入(例如，3712)接收到所接收的请求。
响应于接收到该请求，并且在设备正在协调媒体回放时，电子设备(例如，3700)为被配置为协调媒体回放且连接到该组设备(例如，3702、3704、3706和3708)的多个设备(例如，3702、3704和3706)中的每个设备确定(3804)一个或多个设备特征。例如，该组设备包括能够成为主设备的多个设备(例如，多个智能设备)。在一些实施方案中，所述多个设备包括该设备(例如，3700)。在一些实施方案中，所述多个设备包括不是该设备并且不被包括在该组设备中的一个或多个设备(例如，图37D的3716)。例如，所述多个设备表示能够充当(将回放媒体的)该组设备的主设备的设备，并且不一定和该组设备相同。
电子设备(例如，3700)至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征(例如，如图37B所示)来从被配置为协调媒体回放的所述多个设备(例如，3702、3704和3706)中选择(3806)主设备(例如，图37C的3704)。
电子设备(例如，3700)将媒体回放协调任务从该设备传输(3808)到被配置为协调媒体回放的主设备(例如，图37C的3704)。例如，该设备将主设备责任切换给被选择为针对包括该组设备的媒体会话的主设备的设备。
继设备接收到用户输入之后，将媒体回放协调任务从该设备传输到基于一个或多个设备特征被配置为协调媒体回放的另一设备允许该设备释放设备资源并提供对媒体回放协调任务的优化委托，而不需要进一步的用户输入来实现该目的。在一组条件已经被满足而不需要进一步的用户输入时执行操作增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，所选择的主设备(例如，3716，如图37D所示)不是(3810)该组设备(例如，3702、3704、3706和3708)的成员。
在一些实施方案中，所选择的主设备(例如，图37C的3704)是(3812)该组设备(例如，3702、3704、3706和3708)的成员。
在一些实施方案中，所述一个或多个特征选自由以下组成的组(3814)：相应设备是否在电池电源上操作、相应设备的网络性能特征(例如，信号强度、带宽、吞吐量、网络连接的错误率)、相应设备与该组设备中的每个设备的连接的质量及其组合。在一些实施方案中，相应设备的连接的质量基于对到该组设备中的设备的接近度的测量。在一些示例中，使用其他特征来选择主设备。
在一些实施方案中，电子设备(例如，3700)从被配置为协调媒体回放的所述多个设备选择(3816)主设备的指定继承者。
在一些实施方案中，电子设备(例如，3700)向该组设备传输指令以发起媒体回放。
在一些实施方案中，电子设备(例如，3700)向所选择的主设备传输(3818)媒体回放队列的副本。在一些实施方案中，电子设备(例如，3700)向该组设备中的两个或更多个设备(例如，包括至少一个非主设备)传输媒体回放队列的副本。
在一些实施方案中，用于发起媒体回放的请求是用于发起第一媒体(例如，歌曲、播放列表、电影等)的回放的请求，并且其中将媒体回放协调任务从设备传输到所选择的主设备进一步根据确定所选择的主设备具有对第一媒体的访问权限(3820)。例如，如果所选择的主设备不具有对第一媒体的访问权限，则该设备放弃将主设备责任切换到这种设备。
在一些实施方案中，电子设备(例如，3700)接收回放控制命令，并且响应于接收到回放控制命令，将回放控制命令转发给所选择的主设备。例如，不是主设备的设备将回放控制命令转发给主设备以进行处理。在一些实施方案中，经由在设备处的用户输入接收到回放控制命令。在一些实施方案中，从另一设备接收回放控制命令。
在一些实施方案中，媒体回放协调任务选自由以下组成的组(3822)：存储媒体回放队列、在媒体回放期间向该组设备中的一个或多个设备提供媒体流、传输指示该媒体流可用的数据(例如，向(例如，在该组设备中的)其他设备通告其是主设备)、同步该组设备中的设备之间的回放及其组合。在一些实施方案中，设备传输将以其他方式由主设备执行的回放协调任务的全部或少于全部。
需注意，上文相对于方法3800所述的过程(例如，图38A-图38B)的详情也可以类似方式适用于上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600和方法3900任选地包括上文参考方法3800所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
图39A-图39C是示出了根据一些实施方案的用于使用电子设备来配置第二设备的方法的流程图。在具有显示器的设备(例如，100、300、500、580、1010、1900)处执行方法3900。方法3900中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法3900提供了用于配置第二设备的直观方式。该方法减轻了用户在配置第二设备时的认知负担，从而创建了一种更有效的人机界面。针对电池驱动的计算设备，使得用户能够更快速且更有效地配置第二设备节省功率并增加电池两次充电之间的间隔。
电子设备(例如，1900)(也被称为“第一设备”)建立(3902)与第二设备(例如，1906)的通信链路。继建立与第二设备的通信链路之后，第一设备(例如，1900)发起(3904)用于配置第二设备的配置过程(例如，如图19D-图19AJ所示)。
在一些实施方案中，在配置过程期间(3906)：第一设备(例如，1900)在显示器上显示(3908)配置用户界面，该配置用户界面包括用于选择位置的提示(例如，如图19E所示的“这个扬声器在哪儿？”)。第一设备(例如，1900)接收(3910)对位置的用户输入选择。响应于接收到该用户输入，第一设备(例如，1900)将第二设备配置为(3912)与该位置相关联。
在一些实施方案中，在配置过程期间(3906)：第一设备(例如，1900)检测(3914)指示与第二设备的配对握手的音频音调信号(例如，图10H的1014)，其中该音频信号对于该通信链路是带外的。根据检测到音频音调信号，第一设备(例如，1900)前进(3915)至用于配置第二设备的配置过程中的下一个步骤(例如，从图19H的设置卡1918前进至图19I的设置卡1920)。
在一些实施方案中，第一设备(例如，1900)检测第一设备和第二设备(例如，1906)之间的物理接近度满足接近度条件的指示；并且响应于检测到第一设备和第二设备之间的物理接近度满足接近度条件的指示，建立与第二设备的通信链路。
使用音频音调来建立两个设备之间的通信链路允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程，同时确保设备处于相对非常接近并且用户可具有对两个设备的物理访问权限。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。在一些实施方案中，音频音调信号是第一音频音调信号，该方法还包括：进一步响应于检测到第一设备和第二设备之间的物理接近度满足接近度条件的指示，输出第二音频音调信号。
在一些实施方案中，前进至配置过程的下一个步骤包括完成配置过程(例如，前进至显示图19T的设置卡1942)。
在一些实施方案中，音频音调信号(例如，1904)由第二设备(例如，如图19A所示的1906)生成。
在一些实施方案中，音频音调信号包括音频密码。在一些实施方案中，音频密码被口述(例如，如图10J所示)。在一些实施方案中，音频密码被编码在音频音调信号中。
在一些实施方案中，在第一设备(例如，1900)在物理上位于相对第二设备的阈值物理接近度(例如，图19C的1908)内时，接收音频音调信号(例如，1904)(例如，如图19C所示)。
在一些实施方案中，音频音调信号是第一音频音调信号，并且在配置过程期间(例如，在显示图19H的设置卡1918时)(3916)：第一设备(例如，1900)检测(3918)包括编码数据的第三音频音调信号。例如，第三音频音调信号包括以下各项中的一个或多个：用户账户登录信息、针对第二设备的标识符或用于确认第二设备应该被提供对用户的账户或个人数据的访问权限的其他数据。响应于检测到第三音频音调信号(3920)：第一设备(例如，1900)向第二设备(例如，1906)传输(3922)确认；并且第一设备(例如，1900)前进(3924)至配置过程中的下一个步骤(例如，显示图19I的设置卡1920)。
在一些实施方案中，进一步响应于接收到对位置(例如，如图19J所示的“John的房间”)的用户输入选择(例如，1913)(3926)：根据确定第三设备(例如，图10K的设备1020，其中第二设备是图10K的设备1000)当前与该位置(例如，“John的房间”)相关联，第一设备(例如，1900)在显示器(例如，1902)上显示(3928)配置用户界面(例如，图19J的设置卡1922)，该配置用户界面包括用于选择是否创建包括第二设备和第三设备的设备组(例如，立体声对)的提示(例如，图19J中的示能表示1922A，其包括文本“用作立体声对”)。在一些实施方案中，设备组包括两个多更多个设备。根据确定第三设备当前不与该位置相关联，第一设备(例如，1900)放弃在显示器上显示(3930)包括用于选择是否创建设备组的提示的配置用户界面(例如，显示图19F的设置卡1914而不是设置卡1922)。
在一些实施方案中，第一设备(例如，1900)接收表示创建设备组的肯定请求的用户输入(例如，1923)。在一些实施方案中，响应于表示创建设备组的肯定请求的用户输入，第一设备(例如，1900)在显示器上显示包括用于选择音频输出信道(例如，左或右，如图19K所示)以与第二设备相关联的提示(例如，如图19K所示的“这个扬声器是左还是右？”)的配置用户界面(例如，图19K的1924)。在一些实施方案中，第一设备(例如，1900)接收表示对音频输出信道的选择(例如，左，如图19K所示)的用户输入(例如，1925)。响应于接收到表示对所选择的音频输出信道的选择的用户输入，第一设备(例如，1900)将第二设备与所选择的音频信道相关联(例如，向其传输配置数据)。
在一些实施方案中，用于选择位置的提示包括多个预先确定的位置标识符(例如，厨房、卧室、庭院、餐厅，如图19E所示)。
在一些实施方案中，所述多个预先确定的位置标识符包括用户限定的位置标识符(例如，John的房间，如图19E所示)。
在一些实施方案中，用于选择位置的提示包括用于创建新的位置标识符的字段(例如，如图19M所示的“创建新房间”选项)。在一些实施方案中，第一设备(例如，1900)接收与用于创建新的位置标识符的字段(例如，输入到图19N的字段1930A中的文本)相关联的用户输入(例如，1931)，其中该用户输入包括位置标识符(例如，如图19N所示的“Tim的房间”)。第一设备(例如，1900)基于所接收的与用于创建新的位置标识符的字段相关联的用户输入来创建新的位置标识符，并且将第二设备与该新的位置标识符相关联(例如，向第二设备传输包括该新的位置标识符的配置数据)。
在一些实施方案中，在配置过程期间(3932)：第一设备(例如，1900)在显示器(例如，1902)上显示(3934)配置用户界面(例如，图19F的设置卡1914)，该配置用户界面包括请求将用户账户信息(例如，登录凭证)传输到第二设备(例如，1906)的许可的提示(例如，如图19F所示的“共享您的设置”示能表示1914B)。第一设备(例如，1900)接收(3936)提供将用户账户信息传输到第二设备的许可的用户输入(例如，对示能表示1914B的选择)。响应于接收到提供许可的用户输入，第一设备(例如，1900)将用户账户信息传输(3938)到第二设备(例如，1906)。
在一些实施方案中，在将用户账户信息传输到第二设备之前，并且根据确定第一设备(例如，1900)当前没有登录到与该用户账户信息相关联的用户账户(例如，当前没有登录到iCloud账户)，第一设备(例如，1900)在显示器(例如，1902)上显示用于登录到该用户账户的提示(例如，如图19O所示的设置卡1932，其包括文本“请登录到您的iCloud账户以继续”)，并且放弃将该用户账户信息传输到第二设备。根据确定第一设备当前登录到与该用户账户信息相关联的用户账户，第一设备(例如，1900)将该用户账户信息传输到第二设备(例如，1906)。
在一些实施方案中，响应于从配置过程中的第一步骤(例如，设置卡1912)进展到配置过程中的第二步骤(例如，设置卡1914)，第一设备(例如，1900)输出第四音频音调信号(例如，图10N的1044)。在一些实施方案中，第四音频音调信号与由第二设备(例如，1906)输出的第五音频音调信号(例如，图10N的1042)的输出同时输出。在一些实施方案中，第四音频音调信号和第五音频音调信号是谐波。
在一些实施方案中，响应于从配置过程中的第二步骤(例如，设置卡1914)进展到配置过程中的第三步骤(例如，设置卡1916)，第一设备(例如，1900)输出第六音频音调信号(例如，图10O的1048)。在一些实施方案中，第六音频音调信号与由第二设备(例如，1906)输出的第七音频音调信号(例如，图10O的1046)的输出同时输出。在一些实施方案中，第六音频音调信号和第七音频音调信号是谐波。在一些实施方案中，第六音频音调信号是比第四音频音调信号更高的频率音调(例如，如图10O的绘图1040所示)。
在一些实施方案中，继发起配置过程之后，第一设备(例如，1900)接收关于正在被第二设备(例如，1906)执行的操作的输出的数据。例如，输出可以是设备1906进行的媒体(例如，音乐)、天气信息、新闻、日历约会等的音频输出(例如，语音助理的口述)。响应于接收到关于正在被第二设备(例如，1906)执行的操作的输出的数据，第一设备(例如，1900)显示用户界面(例如，图19X-图19Y的界面1950)，该用户界面包括正在被第二设备(例如，1906)执行的操作的输出的表示(例如，界面1950包括识别当前正由设备1906播放的歌曲的信息)。在一些实施方案中，当设备1900被锁定、解锁或任选其一时，可显示该输出的表示。例如，当设备1906开始播放音乐时，设备1900显示正在播放界面(例如，界面1950)。在一些实施方案中，每当音乐(例如，由包括其他设备的任何设备发起的音乐)在设备1906上播放时，设备1900显示正在播放界面。在一些实施方案中，该操作是天气信息的输出，并且该输出的表示包括当前温度信息、预测信息等。在一些实施方案中，该操作是新闻信息的输出，并且该输出的表示包括当前新闻等。
显示包括正在被第二设备执行的操作的输出的表示的用户界面给用户提供了关于第二设备的状态的视觉反馈。为用户提供改进的视觉反馈增强了第二设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，正在被第二设备(例如，1906)执行的操作包括可听地输出信息(例如，播放界面1950中识别的歌曲)，其中接收关于正在被执行的操作的输出的数据包括接收表示该信息的数据(例如，歌曲标题、经过的播放时间、天气预测数据、新闻报道)，并且其中显示包括正在被第二设备执行的操作的输出的表示的用户界面包括显示(例如，界面1950)表示该信息的数据的至少一部分。
除了由第二设备直接提供的音频反馈之外，显示表示对应于正由第二设备可听地输出的信息的信息的数据给用户提供了关于第二设备的状态的视觉反馈。为用户提供改进的(例如，补充的或附加的)视觉反馈增强了第二设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，该信息包括媒体项(例如，歌曲)，并且正在被第二设备(例如，1906)执行的操作包括可听地输出该媒体项。在一些实施方案中，显示表示该信息的数据包括显示以下各项中的一个或多个：艺术家、媒体项名称、专辑名称、专辑封面和媒体回放进展指示符(例如，如图19Y的界面1950所示)。
显示对应于正由第二设备可听地输出的媒体项的附加数据(例如，以下各项中的一个或多个：艺术家、媒体项名称、专辑名称、专辑封面和媒体回放进展指示符)给用户提供了关于第二设备的状态的视觉反馈。为用户提供改进的(例如，补充的或附加的)视觉反馈增强了第二设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，显示包括正在被第二设备执行的操作的输出的表示的用户界面包括显示新闻信息或天气信息中的一个或多个。
在一些实施方案中，在配置过程期间：根据第一设备的第一配置设置与第二设备(例如，1906)兼容，第一设备(例如，1900)将第二设备(例如，1906)配置为包括第一配置设置。例如，配置设置可以是用于语音助理的语言设置，并且第一配置设置可以是“英语(美国)”。在该示例中，英语(美国)与设备1906上的语音助理兼容(例如，被其支持)。在一些实施方案中，配置自动完成，而不需要用户输入或确认。根据第一设备的第一配置设置与第二设备(例如，1906)不兼容，第一设备(例如，1900)显示第一配置设置与第二设备不兼容的指示(例如，显示消息)。在一些实施方案中，第一设置与第二设备不兼容的指示是用于选择不同/兼容设置的设置卡(例如，用于选择兼容语言的图19AD的设置卡1960)的显示。
使用与第二设备兼容的第一设备的第一配置设置允许用户以较少的所需用户输入有效地行进通过针对设备的配置过程，提供了优化的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，进一步根据第一设备的第一配置设置与第二设备(例如，1906)兼容，第一设备(例如，1900)显示包括请求为第二设备接受第一配置设置的提示的配置用户界面。响应于接收到为第二设备(例如，1906)接受第一配置设置的用户输入，第一设备(例如，1900)将第二设备配置为包括第一配置设置。
显示包括请求为第二设备接受第一配置设置的提示的配置用户界面给用户提供了关于第二设备(例如，其与第一配置设置兼容)的状态的视觉反馈。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，第一配置设置是禁用设备特征(例如，语音助理)的设置，并且其中第二配置设置是启用设备特征(例如，语音助理)的设置。根据确定配置过程需要在第二设备(例如，1906)上启用设备特征：第一设备(例如，1900)显示将在第二设备上启用该设备特征的指示(例如，图19AC的设置卡1958)；并且第一设备(例如，1900)将第二设备(例如，1906)配置为包括第二配置设置(例如，在第二设备上启用语音助理)。
显示将在第二设备上启用设备特征(例如，即使其在第一设备上被禁用时)的指示给用户提供了关于第二设备的状态的视觉反馈(例如，该特征在第二设备上被需要)。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，显示将在第二设备(例如，1906)上启用设备特征的指示包括显示该设备特征将在第一设备上保持被禁用的指示。
显示该特征将在第一设备上保持被禁用的指示给用户提供了关于操作的性质和第一设备的状态的视觉反馈(例如，在第二设备上启用该特征不会改变第一设备关于该特征的状态)。为用户提供改进的视觉反馈就增强了设备的可操作性，并且使用户-设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，进一步根据第一设备的第一配置设置与第二设备(例如，1906)不兼容，第一设备(例如，1900)显示包括请求对与第二设备兼容的第三配置设置的选择的提示的配置用户界面(例如，图19AD的1960)。例如，如果设备1900具有设置为不是与设备1906的语音助理特征兼容的语言的拉丁语的默认语言(例如，第一配置设置)，则设备1900提示选择兼容语言(例如，在设置卡1960中列出的那些)。响应于接收到对第三配置设置(例如，“英语(英国)”)的用户输入选择，第一设备(例如，1900)将第二设备(例如，1906)配置为包括第三配置设置。在一些实施方案中，配置第二设备包括准备稍后(例如，在配置过程期间)用于传输到第二设备的配置设置。例如，所有配置设置都可立即传输到第二设备。
显示包括请求对与第二设备兼容的第三配置设置的选择的提示的配置用户界面通过向用户在表面上呈现兼容选项减少了配置第二设备所需的输入的数量并且提供了优化的配置过程。为用户提供优化的配置过程增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，在建立连接第一设备和第二设备(例如，1906)的通信链路之前，第一设备(例如，1900)检测第一设备和第二设备之间的物理接近度满足接近度条件的指示(例如，如图19A所示)。响应于检测到第一设备和第二设备之间的物理接近度满足接近度条件的指示，第一设备(例如，1900)输出音频音调信号(例如，如图10I所示，其中设备1010正在输出音频音调信号1016)。
使用第一设备和第二设备之间的物理接近度满足接近度条件的指示以便输出音频音调信号给用户提供了关于第一设备的状态的听觉反馈。例如，当附近存在其他可配置的潜在设备时，音频音调信号可指示将配置哪个设备。为用户提供改进的反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，继将用户账户信息传输到第二设备(例如，1906)之后，第一设备(例如，1900)显示与语音助理相关联的配置用户界面(例如，图19W的1948)，其中与语音助理相关联的配置用户界面包括用于提供调用语音助理的一个或多个功能的用户语音输入的提示。在一些实施方案中，语音助理的所述一个或多个功能包括可听地输出以下各项中的一个或多个：媒体(例如，音乐)、天气信息、新闻、日历信息、消息等。
显示包括用于提供调用语音助理的一个或多个功能的用户语音输入的提示的与语音助理相关联的配置用户界面给用户提供了关于设备的能力和状态的信息。为用户提供此类信息增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，根据确定调用语音助理的一个或多个特征的用户语音输入已被第一设备或第二设备(例如，1906)接收到，第一设备(例如，1900)保持与语音助理相关联的配置用户界面(例如，1948)的显示。响应于接收到对包括在与语音助理相关联的配置用户界面中的示能表示(例如，设置卡1948中标记为“完成”的示能表示)的用户输入选择，第一设备(例如，1900)停止与语音助理相关联的配置用户界面的显示(例如，设置卡1948滑离显示器，如图19X-图19Y所示)。
需注意，上文相对于方法3900所述的过程(例如，图39A-图39C)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法700、方法900、方法1100、方法1300、方法1500、方法1700、方法1800、方法2000、方法2200、方法2400、方法2600、方法2800、方法3000、方法3200、方法3400、方法3600和方法3800任选地包括上文参考方法3900所述的各种方法的特征中的一个或多个特征。为了简明起见，这些详情在下文中不再重复。
处于解释的目的，已经参考具体实施方案对上述描述进行了描述。然而，上面的示例性讨论并非旨在为穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容，很多修改形式和变型形式均为可能的。选择并描述这些实施方案是为了最好地解释这些技术的原理及其实际应用。本领域的其他技术人员由此能够最好地利用这些技术以及具有适合于所设想的特定用途的各种修改的各种实施方案。
虽然参照附图对本公开以及示例进行了全面的描述，但应当注意，各种变化和修改对于本领域内的技术人员而言将变得显而易见。应当理解，此类变化和修改被认为被包括在由权利要求书所限定的本公开和示例的范围内。
如上所述，本发明技术的一个方面在于采集和使用得自各种来源的数据，以改进向用户递送其可能感兴趣的启发内容或任何其他内容。本公开设想，在一些实例中，该所采集的数据可包括唯一地识别或可用于联系或定位特定人员的个人信息数据。此类个人信息数据可包括人口数据、基于位置的数据、电话号码、电子邮件地址、家庭地址或任何其他识别信息。
本公开认识到在本发明技术中使用此类个人信息数据可用于使用户受益。例如，该个人信息数据可用于递送用户较感兴趣的目标内容。因此，使用此类个人信息数据使得能够对所递送的内容进行有计划的控制。此外，本公开还设想个人信息数据有益于用户的其它用途。
本公开还预期负责此类个人信息数据的收集、分析、公开、传输、存储或其它用途的实体将遵守已确立的隐私政策和/或隐私实践。具体地，此类实体应实施并坚持使用被公认为满足或超出对维护个人信息数据的隐私性和安全性的行业或政府要求的隐私政策和实践。例如，来自用户的个人信息应被收集用于实体的合法且合理的用途，并且不在这些合法使用之外共享或出售。另外，此类收集应仅在用户知情同意之后进行。此外，此类实体应采取任何所需的步骤，以保障和保护对此类个人信息数据的访问，并且确保有权访问个人信息数据的其它人遵守他们的隐私政策和程序。另外，此类实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。
不管前述情况如何，本公开还设想用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开设想可提供硬件元件和/或软件元件，以防止或阻止对此类个人信息数据的访问。例如，就广告递送服务而言，本发明的技术可被配置为在注册服务期间允许用户选择“加入”或“退出”参与对个人信息数据的收集。又如，用户可选择不为目标内容递送服务提供位置信息。再如，用户可选择不提供精确的位置信息，但准许传输位置区域信息。
因此，虽然本公开广泛地覆盖了使用个人信息数据来实现一个或多个各种所公开的实施方案，但本公开还设想各种实施方案也可在无需访问此类个人信息数据的情况下被实现。即，本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。例如，可通过基于非个人信息数据或绝对最小量的个人信息诸如与用户相关联的设备所请求的内容、对内容递送服务可用的其他非个人信息或公开可用信息来推断偏好，从而选择内容并递送至用户。

Claims (106)

1.一种计算机实现的方法，包括：
在与第一用户账户相关联的第一设备处，其中所述第一用户账户与第一媒体偏好配置文件相关联：
检测与第二用户账户相关联的第二设备连接到所述第一设备，
其中所述第二用户账户与不同于所述第一媒体偏好配置文件的第二媒体偏好配置文件相关联；以及
基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来发起媒体的回放。
2.根据权利要求1所述的方法，还包括：
基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来确定组合偏好配置文件。
3.根据权利要求2所述的方法，其中基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来确定组合偏好配置文件包括：
确定与所述第一媒体偏好配置文件和所述第二媒体偏好配置文件两者相关的媒体偏好。
4.根据权利要求1-3中任一项所述的方法，还包括，在继续检测到所述第二设备连接到所述第一设备时：
基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来将多个媒体项目添加到回放队列；以及
发起所述多个媒体项目的回放。
5.根据权利要求1-3中任一项所述的方法，还包括：
接收对于在所述第一设备上发起回放的请求；以及
响应于接收到所述请求，基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来发起媒体的所述回放。
6.根据权利要求5所述的方法，其中所述请求接收自所述第二设备。
7.根据权利要求5所述的方法，其中所述第一设备包括显示器，并且其中所述方法还包括：
在所述显示器上显示示能表示；并且
其中接收对于在所述第一设备上发起回放的所述请求包括接收对所述示能表示的用户输入选择；以及
响应于接收到对所述示能表示的用户输入选择，基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来发起媒体的所述回放。
8.根据权利要求1-3中任一项所述的方法，其中基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件来发起媒体的回放包括：
向第三设备传输指令以发起回放。
9.根据权利要求1-3中任一项所述的方法，还包括：
接收媒体项目；
响应于接收到所述媒体项目：
根据确定所述媒体项目接收自所述第一设备，基于所述媒体项目来更新所述第一媒体偏好配置文件；以及
根据确定所述媒体项目接收自所述第二设备，放弃基于所述媒体项目来更新所述第一媒体偏好配置文件，
基于所述第一媒体偏好配置文件和所述第二媒体偏好配置文件的媒体。
10.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求1-3中任一项所述的方法的指令。
11.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求1-3中任一项所述的方法的指令。
12.一种第一设备，包括：
用于执行根据权利要求1-3中任一项所述的方法的装置。
13.一种计算机实现的方法，包括：
在第一设备处：
接收来自第三设备的用于在一组设备中的至少一个设备上发起媒体回放的请求，
其中所述一组设备包括所述第一设备和第二设备，
其中所述第三设备不是所述一组设备的成员，并且
其中所述第三设备连接到所述第一设备；
响应于接收到所述请求：
根据确定所述第三设备具有在所述一组设备中的所述至少一个设备上发起媒体回放的许可，在所述一组设备上发起媒体回放；以及
根据确定所述第三设备不具有在所述一组设备中的所述至少一个设备上发起媒体回放的许可：
向所述第二设备传输针对许可的请求；以及
响应于从所述第二设备接收到许可，在所述一组设备中的所述至少一个设备上发起媒体回放。
14.根据权利要求13所述的方法，还包括：
根据确定与所述第三设备相关联的第一用户账户具有在所述一组设备上发起媒体回放的许可，确定所述第三设备具有许可，其中所述第一用户账户不与所述一组设备中的任何设备相关联；以及
根据确定与所述第三设备相关联的所述第一用户账户不具有用于在所述一组设备上发起媒体回放的许可，放弃确定所述第三设备具有许可。
15.根据权利要求13-14中任一项所述的方法，还包括：
进一步根据确定所述第三设备不具有许可，向包括所述第二设备的多个设备传输针对许可的所述请求。
16.根据权利要求13-14中任一项所述的方法，其中在所述一组设备中的所述至少一个设备上发起媒体回放包括：
在所述第一设备上发起回放；以及
放弃在所述第二设备上发起回放。
17.根据权利要求13-14中任一项所述的方法，还包括，在从所述第二设备接收到许可之后：
从所述第三设备接收对于在第四设备上发起回放的请求，
其中所述一组设备包括所述第四设备，并且
其中所述第四设备不被包括在所述一组设备中的所述至少一个设备中；以及
响应于接收到对于在所述第四设备上发起回放的所述请求，在所述第四设备上发起回放。
18.根据权利要求13-14中任一项所述的方法，还包括，在从所述第二设备接收到许可之后：
从所述第三设备接收对于从所述一组设备中的所述至少一个设备上的回放队列移除媒体项目的请求；
响应于接收到所述请求：
根据确定所述媒体项目是由所述第三设备添加到所述回放队列的，从所述回放队列移除所述媒体项目；以及
根据确定所述媒体项目不是由所述第三设备添加到所述回放队列的，放弃从所述回放队列移除所述媒体项目。
19.根据权利要求13-14中任一项所述的方法，其中所述第一设备与媒体偏好配置文件相关联，所述方法还包括：
进一步响应于接收到来自不是所述一组设备的成员的所述第三设备的所述请求，放弃基于所述请求来更新所述媒体偏好配置文件。
20.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求13-14中任一项所述的方法的指令。
21.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求13-14中任一项所述的方法的指令。
22.一种第一设备，包括：
用于执行根据权利要求13-14中任一项所述的方法的装置。
23.一种计算机实现的方法，包括：
在与用户账户相关联的第一设备处：
接收表示对于访问来自所述用户账户的数据的请求的用户输入；
响应于接收到所述用户输入，确定所述第一设备和与所述用户账户相关联的第二设备的物理定位是否满足许可条件；
根据确定所述物理定位满足所述许可条件，通过所述第一设备提供来自所述用户账户的所述数据；以及
根据确定所述物理定位不满足所述许可条件，放弃通过所述第一设备提供来自所述用户账户的所述数据。
24.根据权利要求23所述的方法，其中通过所述第一设备提供来自所述用户账户的所述数据包括：
输出表示来自所述用户账户的所述数据的音频信号。
25.根据权利要求24所述的方法，其中输出表示来自所述用户账户的所述数据的音频信号包括：
使用文本转语音算法来引起对表示来自所述用户账户的所述数据的口述的可听输出。
26.根据权利要求25所述的方法，其中来自所述用户账户的所述数据包括来自以下各项中的一个或多个的数据：日历条目、通知、电子邮件、文本消息、存储的文本文档、存储的联系人信息、电话呼叫音频、视频通话音频或视频、语音消息、地址和媒体项目。
27.根据权利要求23-26中任一项所述的方法，其中确定所述第一设备和第二设备的所述物理定位是否满足所述许可条件包括：
确定所述第一设备与所述第二设备之间的物理接近度是否满足接近度条件。
28.根据权利要求23-26中任一项所述的方法，其中确定所述第一设备和第二设备的所述物理定位是否满足所述许可条件包括：
确定所述第一设备的物理取向是否满足取向条件。
29.根据权利要求23-26中任一项所述的方法，还包括：
进一步根据确定所述物理定位不满足所述许可条件，输出不满足所述许可条件的指示。
30.根据权利要求29所述的方法，其中输出不满足所述许可条件的所述指示包括：
输出满足所述许可条件所需的用户动作的可听指示。
31.根据权利要求23-26中任一项所述的方法，其中表示对于访问来自所述用户账户的数据的请求的所述用户输入是第一用户输入，所述方法还包括：在通过所述第一设备提供来自所述用户账户的所述数据之后：
接收表示对于访问来自所述用户账户的附加数据的请求的第二用户输入；
响应于接收到所述第二用户输入，确定所述第一设备和与所述用户账户相关联的第二设备的所述物理定位是否满足所述许可条件；
根据确定所述物理定位满足所述许可条件，通过所述第一设备提供来自所述用户账户的所述附加数据；
根据确定所述物理定位不满足所述许可条件，放弃通过所述第一设备提供来自所述用户账户的所述附加数据。
32.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求23-26中任一项所述的方法的指令。
33.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求23-26中任一项所述的方法的指令。
34.一种第一设备，包括：
用于执行根据权利要求23-26中任一项所述的方法的装置。
35.一种计算机实现的方法，包括：
在第一设备处：
接收用于在包括所述第一设备和第二设备的一组设备上发起媒体的回放的命令；
响应于接收到所述命令，在所述一组设备上发起所述媒体的同步回放，
其中所述第二设备被指定为被配置为协调所述一组设备上的所述媒体的所述回放的主设备，并且
其中所述第一设备被配置为所述主设备的指定继承者。
36.根据权利要求35所述的方法，其中所述一组设备还包括第三设备，所述方法还包括：
在所述一组设备上的回放期间，检测所述第二设备不再可用于所述媒体的回放；以及
响应于检测到所述第二设备不再可用于回放所述媒体：
确定所述第一设备被指定为被配置为协调所述一组设备上的所述媒体的所述回放的所述主设备；
在所述第一设备上继续所述媒体的回放；以及
协调所述第三设备上的所述媒体的所述回放。
37.根据权利要求35-36中任一项所述的方法，其中协调所述第三设备上的所述媒体的所述回放包括以下各项中的一个或多个：
提供至所述媒体的链接；
提供所述媒体的流；以及
提供所述媒体的副本。
38.根据权利要求35-36中任一项所述的方法，还包括：
接收用于停止所述第一设备上的媒体的回放的命令；
响应于接收到用于停止所述第一设备上的媒体的回放的所述命令：
停止所述第一设备上的媒体的回放；以及
指定所述第三设备为被配置为协调所述一组设备上的所述媒体的所述回放的所述主设备。
39.根据权利要求35所述的方法，其中所述一组设备还包括第三设备，所述方法还包括：
在所述一组设备上的回放期间，检测所述第二设备不再可用于所述媒体的回放；以及
响应于检测到所述第二设备不再可用于回放所述媒体：
确定所述第三设备被指定为被配置为协调所述一组设备上的所述媒体的所述回放的所述主设备；以及
在所述第一设备上继续所述媒体的回放；以及
从所述第三设备接收用于协调所述第一设备上所述媒体的回放的指令。
40.根据权利要求35-36中任一项所述的方法，还包括：
从第四设备接收用于发起所述一组设备上的媒体的回放的所述命令；以及
从所述第四设备接收所述第一设备是所述指定继承者的指定。
41.根据权利要求40所述的方法，其中所述第四设备不是所述一组设备的成员。
42.根据权利要求35-36中任一项所述的方法，其中在所述一组设备上发起所述媒体的同步回放包括将回放队列的副本传输到所述一组设备中的每个设备。
43.根据权利要求35-36中任一项所述的方法，还包括：
在同步回放期间，在所述第一设备处接收回放控制命令；
响应所述回放控制命令：
根据所述第一设备被指定为所述主设备，基于所述回放控制命令向所述一组设备中的每个设备传输指令；以及
根据所述第一设备没有被指定为所述主设备，将所述回放控制命令传输到指定主设备。
44.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求35-36中任一项所述的方法的指令。
45.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求35-36中任一项所述的方法的指令。
46.一种第一设备，包括：
用于执行根据权利要求35-36中任一项所述的方法的装置。
47.一种计算机实现的方法，包括：
在一组设备中与第一用户账户相关联的第一设备处：
接收可听输出触发事件；
确定与所述第一用户账户相关联的第一用户位于所述一组设备中的一个设备的可听输出范围内；
根据确定所述第一用户在所述第一设备的所述可听输出范围内并且根据所述可听输出触发事件的发生，输出可听输出；以及
根据确定所述第一用户在第二设备的所述可听输出范围内并且根据所述可听输出触发事件的发生，放弃输出所述可听输出。
48.根据权利要求47所述的方法，其中所述一组设备中的所述设备是第二设备，并且其中输出所述可听输出包括向所述第二设备传输指令以输出所述可听输出。
49.根据权利要求47-48中任一项所述的方法，其中输出所述可听输出包括播放可听音调。
50.根据权利要求47-48中任一项所述的方法，其中接收所述可听输出触发事件包括接收表示对所述可听输出触发事件的配置的用户输入。
51.根据权利要求47-48中任一项所述的方法，其中接收所述可听输出触发事件包括接收表示与所述第一用户账户相关联的可听输出设置的数据。
52.根据权利要求47-48中任一项所述的方法，其中所述第一设备的所述可听输出范围基于以下各项中的一个或多个：
检测到的所述第一设备到所述第一用户的物理接近度；
检测到的所述第一用户与所述第一设备在相同房间中的存在；和
所述第一设备的输出特征。
53.根据权利要求47-48中任一项所述的方法，其中确定所述第一用户位于所述一组设备中的所述设备的所述可听输出范围内包括以下各项中的一个或多个：
在所述设备处检测到与所述第一用户相关联的语音；
在所述设备处检测到与所述用户相关联的第三设备，其中所述第三设备不是所述一组设备的成员；以及
从外部传感器接收表示所述第一用户在物理上在所述设备附近的信号。
54.根据权利要求47-48中任一项所述的方法，还包括，在输出所述可听输出之后：
根据确定所述第一用户在不是所述一组设备的成员的第四设备的可听输出范围内并且根据所述可听输出触发事件的发生，放弃输出所述可听输出。
55.根据权利要求54所述的方法，还包括：
回放媒体内容；以及
进一步根据确定所述第一用户在不是所述一组设备的成员的所述第四设备的所述可听输出范围内，停止所述媒体内容的回放。
56.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求47-48中任一项所述的方法的指令。
57.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求47-48中任一项所述的方法的指令。
58.一种第一设备，包括：
用于执行根据权利要求47-48中任一项所述的方法的装置。
59.一种计算机实现的方法，包括：
在第一设备处：
接收表示对于输出信号的请求的用户输入语音命令，所述信号表示由连接到所述第一设备的第二设备当前正在回放的媒体；
响应于接收到所述用户输入，传输针对关于由所述第二设备当前正在回放的所述媒体的信息的请求；
接收关于由所述第二设备当前正在回放的所述媒体的所述信息；以及
根据接收到关于由所述第二设备当前正在回放的所述媒体的所述信息并且在所述第二设备继续所述媒体的至少一个分量的回放时，发起表示由所述第二设备当前正在回放的所述媒体的所述信号的至少一个分量的输出。
60.根据权利要求59所述的方法，其中表示由所述第二设备当前正在回放的所述媒体的所述信号包括音频信号、视频信号或音频信号和视频信号两者中的一个或多个。
61.根据权利要求60所述的方法，其中由所述第二设备当前正在回放的所述媒体包括视频分量和音频分量，并且
其中发起表示由所述第二设备当前正在回放的所述媒体的所述信号的所述至少一个分量的输出包括发起所述音频分量的输出而不发起所述视频分量的输出。
62.根据权利要求61所述的方法，其中在所述第一设备发起所述信号的所述至少一个分量的输出之后，所述第二设备继续所述视频分量和所述音频分量两者的回放。
63.根据权利要求61所述的方法，其中在所述第一设备发起所述信号的所述至少一个分量的输出之后，所述第二设备继续所述视频分量的回放并且停止所述音频分量的回放。
64.根据权利要求59-63中任一项所述的方法，其中发起表示由所述第二设备当前正在回放的所述媒体的所述信号的至少一个分量的输出包括：
由所述第一设备回放表示由所述第二设备当前正在回放的所述媒体的所述信号的所述至少一个分量。
65.根据权利要求59-63中任一项所述的方法，其中发起表示由所述第二设备当前正在回放的所述媒体的所述信号的所述至少一个分量的输出包括：
向第三设备传输指令以发起表示由所述第二设备当前正在回放的所述媒体的所述信号的所述至少一个分量的输出。
66.根据权利要求65所述的方法，其中以第一自然语言回放由所述第二设备当前正在回放的所述媒体；以及
其中向所述第三设备传输所述指令以发起表示由所述第二设备当前正在回放的所述媒体的所述信号的所述至少一个分量的输出包括传输指令来以不同于所述第一自然语言的第二自然语言发起由所述第二设备正在回放的所述信号的所述至少一个分量的输出。
67.根据权利要求59-63中任一项所述的方法，其中所述用户输入语音命令是第一用户输入，所述方法还包括：
在所述第一设备处接收表示回放控制命令的第二用户输入；以及
响应于接收到所述第二用户输入，向所述第二设备传输所述回放控制命令。
68.根据权利要求59-63中任一项所述的方法，其中接收关于由所述第二设备当前正在回放的所述媒体的所述信息包括：
接收以下各项中的一个或多个：所述媒体的标识符、能够访问表示所述媒体的所述信号的位置以及表示所述媒体的所述信号的媒体流。
69.根据权利要求68所述的方法，其中接收关于由所述第二设备当前正在回放的所述媒体的所述信息包括：
从第四设备接收表示由所述第二设备当前正在回放的所述媒体所述媒体的所述信号的所述至少一个分量的媒体流。
70.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求59-63中任一项所述的方法的指令。
71.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求59-63中任一项所述的方法的指令。
72.一种第一设备，包括：
用于执行根据权利要求59-63中任一项所述的方法的装置。
73.一种计算机实现的方法，包括：
在第一设备处：
接收对于在不包括所述第一设备的一组设备上发起媒体回放的请求；
响应于接收到所述请求并且在所述第一设备正在协调媒体回放时，确定所述一组设备是否包括被配置为协调媒体回放的设备；
根据确定所述一组设备包括被配置为协调媒体回放的设备，将媒体回放协调任务从所述第一设备转移到被配置为协调媒体回放的所述设备；以及
根据确定所述一组设备不包括被配置为协调媒体回放的设备，放弃转移所述媒体回放协调任务。
74.根据权利要求73所述的方法，其中所述媒体回放协调任务选自由以下各项组成的组：存储媒体回放队列、在媒体回放期间向所述一组设备中的一个或多个设备提供媒体流、传输指示所述媒体流可用的数据、同步所述一组设备中的设备之间的回放及其组合。
75.根据权利要求73-74中任一项所述的方法，还包括：
进一步根据确定所述一组设备不包括被配置为协调媒体回放的设备：
检测连接到所述第一设备和所述一组设备并且不被包括在所述一组设备中的被配置为协调媒体回放的第二设备；以及
根据检测到所述第二设备，将所述媒体回放协调任务从所述第一设备转移到所述第二设备。
76.根据权利要求73-74中任一项所述的方法，还包括：
进一步根据确定所述一组设备不包括被配置为协调媒体回放的设备，执行所述媒体回放协调任务。
77.根据权利要求76所述的方法，其中执行所述媒体回放协调任务包括在媒体回放期间向所述一组设备中的一个或多个设备提供媒体流，所述方法还包括：
当在媒体回放期间向所述一组设备中的一个或多个设备提供所述媒体流时，接收对于执行语音助理功能或电话呼叫功能的请求；以及
响应于对于执行语音助理功能或电话呼叫功能的所述请求：
执行所述语音助理功能或所述电话呼叫功能；以及
在执行所述语音助理功能或所述电话呼叫功能时，在媒体回放期间继续向所述一组设备中的一个或多个设备提供所述媒体流。
78.根据权利要求76所述的方法，其中执行所述媒体回放协调任务包括在媒体回放期间向所述一组设备中的一个或多个设备提供媒体流，其中所述媒体流是第一媒体流，并且其中所述一组设备是第一组设备，所述方法还包括：
在提供所述第一媒体流时，同时向不同于所述第一组设备的第二组设备提供不同于所述第一媒体流的第二媒体流。
79.根据权利要求76所述的方法，其中执行所述媒体回放协调任务包括在媒体回放期间向所述一组设备中的一个或多个设备提供媒体流，所述方法还包括：
当在媒体回放期间向所述一组设备中的一个或多个设备提供所述媒体流时，接收第三设备将新设备添加到所述一组设备的指示；以及
响应于接收到所述第三设备将所述新设备添加到所述一组设备的所述指示，向所述新设备提供所述媒体流。
80.根据权利要求73-74中任一项所述的方法，还包括，进一步根据确定所述一组设备不包括被配置为协调媒体回放的设备：
接收回放控制命令；以及
响应于接收到所述回放控制命令，根据所述回放控制命令向所述一组设备传输指令。
81.根据权利要求80所述的方法，其中接收所述回放控制命令包括在所述第一设备处接收表示所述回放控制命令的用户输入。
82.根据权利要求80所述的方法，其中接收所述回放控制命令包括从所述第一设备之外的设备接收表示所述回放控制命令的数据。
83.根据权利要求73-74中任一项所述的方法，还包括，进一步根据确定所述一组设备包括被配置为协调媒体回放的设备：
接收回放控制命令；以及
响应于接收到所述回放控制命令，将所述回放控制命令转发给被配置为协调媒体回放的所述设备。
84.根据权利要求73-74中任一项所述的方法，还包括，进一步根据确定所述一组设备包括被配置为协调媒体回放的设备：
将回放队列传输到被配置为协调媒体回放的所述设备。
85.根据权利要求73-74中任一项所述的方法，其中对于所述发起媒体回放的所述请求是对于发起第一媒体的回放的请求，所述方法还包括：
进一步根据确定所述一组设备包括被配置为协调媒体回放的设备：
根据确定被配置为协调媒体回放的所述设备具有对所述第一媒体的访问权限，将所述媒体回放协调任务从所述第一设备转移到被配置为协调媒体回放的所述设备；以及
根据确定被配置为协调媒体回放的所述设备不具有对所述第一媒体的访问权限，放弃转移所述媒体回放协调任务。
86.根据权利要求73-74中任一项所述的方法，其中所述一组设备包括被配置为协调媒体回放的多个设备，所述方法还包括：
进一步根据确定所述一组设备包括被配置为协调媒体回放的设备：
从被配置为协调媒体回放的所述多个设备中选择主设备；以及
将所述媒体回放协调任务从所述第一设备传递到所选择的主设备。
87.根据权利要求86所述的方法，还包括从被配置为协调媒体回放的所述多个设备中选择所述主设备的指定继承者。
88.根据权利要求73-74中任一项所述的方法，其中所述一组设备包括被配置为协调媒体回放的多个设备，所述方法还包括：
进一步根据确定所述一组设备包括被配置为协调媒体回放的设备：
从第四设备接收从被配置为协调媒体回放的所述多个设备中对主设备的选择；以及
将所述媒体回放协调任务从所述第一设备传递到所述主设备。
89.根据权利要求73-74中任一项所述的方法，还包括向所述一组设备传输指令以发起媒体回放。
90.根据权利要求73-74中任一项所述的方法，还包括向所述一组设备中的至少两个设备传输媒体回放队列的副本。
91.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求73-74中任一项所述的方法的指令。
92.一种第一设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求73-74中任一项所述的方法的指令。
93.一种第一设备，包括：
用于执行根据权利要求73-74中任一项所述的方法的装置。
94.一种计算机实现的方法，包括：
在设备处：
接收对于在连接到所述设备的一组设备上发起媒体回放的请求；
响应于接收到所述请求并且在所述设备正在协调媒体回放时，针对被配置为协调媒体回放并连接到所述一组设备的多个设备中的每个设备确定一个或多个设备特征；
至少部分地基于被配置为协调媒体回放的所述多个设备中的每个设备的所述一个或多个特征来从被配置为协调媒体回放的所述多个设备中选择主设备；以及
将媒体回放协调任务从所述设备转移到被配置为协调媒体回放的所述主设备。
95.根据权利要求94所述的方法，其中所选择的主设备不是所述一组设备的成员。
96.根据权利要求94所述的方法，其中所选择的主设备是所述一组设备的成员。
97.根据权利要求94-96中任一项所述的方法，其中所述一个或多个特征选自由以下各项组成的组：相应设备是否依靠电池电源操作、相应设备的网络性能特征、相应设备与所述一组设备中的所述每个设备的连接的质量及其组合。
98.根据权利要求94-96中任一项所述的方法，还包括从被配置为协调媒体回放的所述多个设备中选择所述主设备的指定继承者。
99.根据权利要求94-96中任一项所述的方法，还包括向所述一组设备传输指令以发起媒体回放。
100.根据权利要求94-96中任一项所述的方法，还包括向所选择的主设备传输媒体回放队列的副本。
101.根据权利要求94-96中任一项所述的方法，其中对于发起媒体回放的所述请求是对于发起第一媒体的回放的请求，并且其中将所述媒体回放协调任务从所述设备转移到所选择的主设备进一步根据确定所选择的主设备具有对所述第一媒体的访问权限。
102.根据权利要求94-96中任一项所述的方法，还包括：
接收回放控制命令；以及
响应于接收到所述回放控制命令，将所述回放控制命令转发给所选择的主设备。
103.根据权利要求94-96中任一项所述的方法，其中所述媒体回放协调任务选自由以下各项组成的组：存储媒体回放队列、在媒体回放期间向所述一组设备中的一个或多个设备提供媒体流、传输指示所述媒体流可用的数据、同步所述一组设备中的设备之间的回放及其组合，
从所述设备到被配置为协调媒体回放的所述主设备。
104.一种计算机可读存储介质，所述计算机可读存储介质存储被配置为由第一设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求94-96中任一项所述的方法的指令。
105.一种电子设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求94-96中任一项所述的方法的指令。
106.一种电子设备，包括：
用于执行根据权利要求94-96中任一项所述的方法的装置。
CN202010728844.3A 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面 Pending CN111857644A (zh)

Applications Claiming Priority (29)

Application Number Priority Date Filing Date Title
US201762507208P 2017-05-16 2017-05-16
US201762507202P 2017-05-16 2017-05-16
US62/507,208 2017-05-16
US62/507,202 2017-05-16
DKPA201770402 2017-05-29
DKPA201770401A DK179556B1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770403A DK179597B1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770408 2017-05-29
DKPA201770406 2017-05-29
DKPA201770408A DK179706B1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770410A DK201770410A1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770406A DK180128B1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770409 2017-05-29
DKPA201770409 2017-05-29
DKPA201770392 2017-05-29
DKPA201770402 2017-05-29
DKPA201770392A DK179557B1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770404A DK180011B1 (en) 2017-05-16 2017-05-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201770401 2017-05-29
DKPA201770404 2017-05-29
DKPA201770410 2017-05-29
DKPA201770403 2017-05-29
US201762514932P 2017-06-04 2017-06-04
US62/514,932 2017-06-04
US201862622122P 2018-01-25 2018-01-25
US62/622,122 2018-01-25
DKPA201870060A DK201870060A1 (en) 2017-05-16 2018-01-29 METHODS AND INTERFACES FOR HOME MEDIA CONTROL
DKPA201870060 2018-01-29
CN201880001436.9A CN109287140B (zh) 2017-05-16 2018-05-16 计算机实现的方法、计算机可读存储介质和电子设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880001436.9A Division CN109287140B (zh) 2017-05-16 2018-05-16 计算机实现的方法、计算机可读存储介质和电子设备

Publications (1)

Publication Number Publication Date
CN111857644A true CN111857644A (zh) 2020-10-30

Family

ID=62387033

Family Applications (6)

Application Number Title Priority Date Filing Date
CN201811539260.0A Active CN109688442B (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面
CN202010728711.6A Pending CN111857643A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面
CN202010728844.3A Pending CN111857644A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面
CN201811539259.8A Pending CN109688441A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面
CN201880001436.9A Active CN109287140B (zh) 2017-05-16 2018-05-16 计算机实现的方法、计算机可读存储介质和电子设备
CN201911128105.4A Pending CN110874204A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201811539260.0A Active CN109688442B (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面
CN202010728711.6A Pending CN111857643A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN201811539259.8A Pending CN109688441A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面
CN201880001436.9A Active CN109287140B (zh) 2017-05-16 2018-05-16 计算机实现的方法、计算机可读存储介质和电子设备
CN201911128105.4A Pending CN110874204A (zh) 2017-05-16 2018-05-16 用于家庭媒体控制的方法和界面

Country Status (3)

Country Link
EP (4) EP4254989A3 (zh)
CN (6) CN109688442B (zh)
WO (1) WO2018213401A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112804319A (zh) * 2021-01-04 2021-05-14 珠海格力电器股份有限公司 智能设备控制方法、装置、电子设备和计算机可读介质

Families Citing this family (107)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
CN103582873B (zh) 2011-06-05 2017-07-14 苹果公司 用于显示从多个应用接收到的通知的系统和方法
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
CN104969289B (zh) 2013-02-07 2021-05-28 苹果公司 数字助理的语音触发器
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
JP6328797B2 (ja) 2014-05-30 2018-05-23 アップル インコーポレイテッド １つのデバイスの使用から別のデバイスの使用への移行
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10552009B2 (en) 2014-09-02 2020-02-04 Apple Inc. Stopwatch and timer user interfaces
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US20200270871A1 (en) 2019-02-27 2020-08-27 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
EP3776880A4 (en) * 2018-01-08 2022-06-22 Polk Audio, LLC SYNCHRONIZED VOICE CONTROL MODULE, SPEAKER SYSTEM AND METHOD OF INCORPORATING VC FUNCTIONALITY INTO A SEPARATE SPEAKER SYSTEM
DK201870599A1 (en) 2018-03-12 2019-10-16 Apple Inc. USER INTERFACES FOR HEALTH MONITORING
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK180130B1 (da) 2018-05-07 2020-06-02 Apple Inc. Multi-participant live communication user interface
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
WO2020142681A1 (en) * 2019-01-04 2020-07-09 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
CN111756604B (zh) * 2019-03-29 2022-04-12 华为技术有限公司 一种设备配合方法、装置及系统
CN111833584B (zh) * 2019-04-17 2022-03-01 百度在线网络技术（北京）有限公司 设备的控制方法、控制设备、控制系统及存储介质
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
CN110244838A (zh) * 2019-05-09 2019-09-17 瑞声科技(新加坡)有限公司 一种马达驱动信号的生成方法、电子设备及存储介质
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US10904029B2 (en) * 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
KR20240049648A (ko) * 2019-05-31 2024-04-16 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
CN113966503A (zh) * 2019-06-01 2022-01-21 苹果公司 用于管理音频暴露的用户界面
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
CN117499725A (zh) * 2019-06-17 2024-02-02 谷歌有限责任公司 用于提供动态媒体会话的方法、系统和介质
CN111050217B (zh) * 2019-12-18 2021-03-16 珠海格力电器股份有限公司 一种视频播放方法及装置
CN110933487B (zh) * 2019-12-18 2022-05-03 北京百度网讯科技有限公司 卡点视频的生成方法、装置、设备及存储介质
CN113472614A (zh) * 2020-04-28 2021-10-01 海信集团有限公司 一种语音交互设备及语音交互方法
AU2020239711C1 (en) * 2020-05-11 2022-03-31 Apple Inc. User interface for audio message
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11043220B1 (en) 2020-05-11 2021-06-22 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
DK181037B1 (en) 2020-06-02 2022-10-10 Apple Inc User interfaces for health applications
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11698710B2 (en) 2020-08-31 2023-07-11 Apple Inc. User interfaces for logging user activities
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US20220129144A1 (en) * 2020-10-26 2022-04-28 Apple Inc. Methods and user interfaces for handling user requests
US11258858B1 (en) * 2020-11-24 2022-02-22 International Business Machines Corporation Multi-device connection management
US11431891B2 (en) 2021-01-31 2022-08-30 Apple Inc. User interfaces for wide angle video conference
CN114915916B (zh) * 2021-02-08 2023-08-22 华为技术有限公司 定向控制电子设备的方法及电子设备、可读介质
CN112860214B (zh) * 2021-03-10 2023-08-01 北京车和家信息技术有限公司 基于语音会话的动画展示方法、装置、存储介质及设备
US11449188B1 (en) 2021-05-15 2022-09-20 Apple Inc. Shared-content session user interfaces
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
CN113867008A (zh) * 2021-09-15 2021-12-31 北京讯通安添通讯科技有限公司 一种智能家居眼镜装置
US11812135B2 (en) 2021-09-24 2023-11-07 Apple Inc. Wide angle video conference
CN114245267B (zh) * 2022-02-27 2022-07-08 北京荣耀终端有限公司 多设备协同工作的方法、系统及电子设备
CN114584538B (zh) * 2022-03-01 2024-03-22 北京智慧星光信息技术股份有限公司 移动流媒体数据传输方法、装置及存储介质
EP4270986A1 (en) * 2022-04-29 2023-11-01 GN Audio A/S Speakerphone with sound quality indication
CN116700659B (zh) * 2022-09-02 2024-03-08 荣耀终端有限公司 一种界面交互方法及电子设备
CN117499850A (zh) * 2023-12-26 2024-02-02 荣耀终端有限公司 一种音频数据播放方法及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100299639A1 (en) * 2008-01-07 2010-11-25 Max Gordon Ramsay User interface for managing the operation of networked media playback devices
US20150253960A1 (en) * 2014-03-05 2015-09-10 Sonos, Inc. Webpage Media Playback
US20150312299A1 (en) * 2014-04-28 2015-10-29 Sonos, Inc. Receiving Media Content Based on Media Preferences of Multiple Users
CN105940678A (zh) * 2013-12-30 2016-09-14 汤姆逊许可公司 依赖接近度的媒体回放
CN106030700A (zh) * 2014-02-19 2016-10-12 诺基亚技术有限公司 至少部分地基于空间音频属性来确定操作指令
CN106134209A (zh) * 2014-03-28 2016-11-16 搜诺思公司 知晓帐户情况下的媒体偏好

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4711955A (en) 1981-04-17 1987-12-08 Yale University Modified nucleotides and methods of preparing and using same
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
KR100595917B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US8234395B2 (en) * 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US8290603B1 (en) * 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US20060161621A1 (en) * 2005-01-15 2006-07-20 Outland Research, Llc System, method and computer program product for collaboration and synchronization of media content on a plurality of media players
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7983614B2 (en) * 2006-09-29 2011-07-19 Sony Ericsson Mobile Communications Ab Handover for audio and video playback devices
US20100106647A1 (en) * 2007-02-28 2010-04-29 Raja Raman Method and system for close range communication using audio tones
DE602007007581D1 (de) * 2007-04-17 2010-08-19 Harman Becker Automotive Sys Akustische Lokalisierung eines Sprechers
US8724600B2 (en) * 2008-01-07 2014-05-13 Tymphany Hong Kong Limited Systems and methods for providing a media playback in a networked environment
US20090304205A1 (en) * 2008-06-10 2009-12-10 Sony Corporation Of Japan Techniques for personalizing audio levels
US8363866B2 (en) * 2009-01-30 2013-01-29 Panasonic Automotive Systems Company Of America Audio menu navigation method
US20120210226A1 (en) * 2011-02-11 2012-08-16 Sony Network Entertainment International Llc Method to playback a recently-played asset via a second display
TW201314979A (zh) 2011-09-19 2013-04-01 Chief Land Electronic Co Ltd 換能器與能量轉換模組
US9052810B2 (en) * 2011-09-28 2015-06-09 Sonos, Inc. Methods and apparatus to manage zones of a multi-zone media playback system
US9431980B2 (en) * 2012-01-30 2016-08-30 Echostar Ukraine Llc Apparatus, systems and methods for adjusting output audio volume based on user location
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
US8930005B2 (en) * 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
KR101971911B1 (ko) * 2012-08-16 2019-04-24 삼성전자주식회사 이미지를 디스플레이하기 위한 방법 및 그 전자 장치
JP6051681B2 (ja) * 2012-08-24 2016-12-27 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US20150243163A1 (en) * 2012-12-14 2015-08-27 Biscotti Inc. Audio Based Remote Control Functionality
EP3435220B1 (en) 2012-12-29 2020-09-16 Apple Inc. Device, method and graphical user interface for transitioning between touch input to display output relationships
KR20140104215A (ko) * 2013-02-20 2014-08-28 삼성전자주식회사 자동 페어링 기능을 갖는 무선 네트워크 오디오 시스템 및 이를 이용한 자동 페어링 방법
CN103260079A (zh) * 2013-04-12 2013-08-21 深圳市龙视传媒有限公司 一种多屏互动的控制方法及控制装置
EP3005649B1 (en) * 2013-06-06 2019-03-13 Google LLC Systems, methods, and media for presenting media content
US9933920B2 (en) * 2013-09-27 2018-04-03 Sonos, Inc. Multi-household support
US10469624B2 (en) * 2013-10-07 2019-11-05 Bose Corporation User interface control in a networked audio system
WO2015065125A1 (ko) * 2013-10-31 2015-05-07 엘지전자(주) 전자 기기 및 전자 기기의 제어 방법
AU2014353473C1 (en) * 2013-11-22 2018-04-05 Apple Inc. Handsfree beam pattern configuration
US9450812B2 (en) * 2014-03-14 2016-09-20 Dechnia, LLC Remote system configuration via modulated audio
US10275138B2 (en) * 2014-09-02 2019-04-30 Sonos, Inc. Zone recognition
CN106063376B (zh) * 2014-11-25 2018-05-22 飞利浦灯具控股公司 基于邻近度的照明控制
EP3602943A1 (en) 2017-03-24 2020-02-05 Intel IP Corporation Techniques to enable physical downlink control channel communications
JP6821099B2 (ja) 2018-07-31 2021-01-27 三菱電機株式会社 光伝送装置及び光伝送システム
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器
JP2021508027A (ja) 2018-11-16 2021-02-25 ベイジン ディディ インフィニティ テクノロジー アンド ディベロップメント カンパニー リミティッド 不十分な照明条件下で車両を測位するシステムおよび方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100299639A1 (en) * 2008-01-07 2010-11-25 Max Gordon Ramsay User interface for managing the operation of networked media playback devices
CN105940678A (zh) * 2013-12-30 2016-09-14 汤姆逊许可公司 依赖接近度的媒体回放
CN106030700A (zh) * 2014-02-19 2016-10-12 诺基亚技术有限公司 至少部分地基于空间音频属性来确定操作指令
US20150253960A1 (en) * 2014-03-05 2015-09-10 Sonos, Inc. Webpage Media Playback
CN106134209A (zh) * 2014-03-28 2016-11-16 搜诺思公司 知晓帐户情况下的媒体偏好
US20150312299A1 (en) * 2014-04-28 2015-10-29 Sonos, Inc. Receiving Media Content Based on Media Preferences of Multiple Users

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112804319A (zh) * 2021-01-04 2021-05-14 珠海格力电器股份有限公司 智能设备控制方法、装置、电子设备和计算机可读介质

Also Published As

Publication number Publication date
WO2018213401A4 (en) 2018-12-27
EP4254989A3 (en) 2023-10-18
EP3675508A2 (en) 2020-07-01
CN109688441A (zh) 2019-04-26
EP3675508B1 (en) 2023-01-11
EP3675508A3 (en) 2020-09-09
CN109688442B (zh) 2021-06-04
EP3427484A1 (en) 2019-01-16
CN109688442A (zh) 2019-04-26
CN109287140B (zh) 2020-07-28
CN111857643A (zh) 2020-10-30
WO2018213401A1 (en) 2018-11-22
CN110874204A (zh) 2020-03-10
EP4254989A2 (en) 2023-10-04
EP3445058A1 (en) 2019-02-20
EP3445058B1 (en) 2021-07-07
CN109287140A (zh) 2019-01-29
EP3427484B1 (en) 2023-09-27

Similar Documents

Publication Publication Date Title
CN109688442B (zh) 用于家庭媒体控制的方法和界面
CN111343060B (zh) 用于家庭媒体控制的方法和界面
US11412081B2 (en) Methods and interfaces for configuring an electronic device to initiate playback of media
AU2021204454B2 (en) Methods and interfaces for home media control
US11316966B2 (en) Methods and interfaces for detecting a proximity between devices and initiating playback of media
US20220303383A1 (en) Methods and interfaces for home media control
DK181308B1 (en) Methods and interfaces for home media control
DK201870060A1 (en) METHODS AND INTERFACES FOR HOME MEDIA CONTROL

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination