CN112506346B - 用于管理可控外部设备的用户界面 - Google Patents

用于管理可控外部设备的用户界面 Download PDF

Info

Publication number
CN112506346B
CN112506346B CN202011450203.2A CN202011450203A CN112506346B CN 112506346 B CN112506346 B CN 112506346B CN 202011450203 A CN202011450203 A CN 202011450203A CN 112506346 B CN112506346 B CN 112506346B
Authority
CN
China
Prior art keywords
controllable external
audio
external device
affordance
detecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011450203.2A
Other languages
English (en)
Other versions
CN112506346A (zh
Inventor
T·G·卡瑞根
P·L·考夫曼
C·P·福斯
T·S·乔恩
A·S·金
L·K·特罗蒂尔
E·C·克兰菲尔
D·C·格拉哈姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN112506346A publication Critical patent/CN112506346A/zh
Application granted granted Critical
Publication of CN112506346B publication Critical patent/CN112506346B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4411—Configuring for operating with peripheral devices; Loading of device drivers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/453—Help systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809—Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2812—Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2814—Exchanging control software or macros for controlling appliance services in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开涉及用于管理可控外部设备的用户界面。一种具有显示设备、通信设备、一个或多个处理器和存储器的电子设备显示第一可控外部设备的第一表示，其中所述第一可控外部设备位于某个位置处。设备检测与对所述第一可控外部设备的所述第一表示的选择相对应的第一输入。响应于检测到所述第一输入，所述设备在所述第一可控外部设备是第一类型的情况下使用所述通信设备向所述第一可控外部设备传输指令以执行功能或者所述设备使用所述显示设备显示用于控制所述第一可控外部设备的特征的用户界面。

Description

用于管理可控外部设备的用户界面
本申请是申请日为2020年3月24日、申请号为202080002596.2、发明名称为“用于管理可控外部设备的用户界面”的发明专利申请的分案申请。
相关申请的交叉引用
本申请要求以下专利申请的优先权：于2019年5月31日提交的标题为“USERINTERFACES FOR MANAGING CONTROLLABLE EXTERNAL DEVICES”的美国临时专利申请62/855,895；于2019年9月26日提交的标题为“USER INTERFACES FOR MANAGING CONTROLLABLEEXTERNAL DEVICES”的美国专利申请16/584,743；以及于2019年9月27 日提交的标题为“USER INTERFACES FOR MANAGING CONTROLLABLE EXTERNAL DEVICES”的美国专利申请16/586,002，这些专利申请中的每一者据此全文以引用方式并入以用于所有目的。
技术领域
本公开整体涉及计算机用户界面，并且更具体地讲涉及用于管理可控外部设备的技术。
背景技术
可控(例如，远程可控)电子设备(包括可接入Wi-Fi的灯、电源插座、恒温器和家用电器)为用户提供功能和便利性的组合。可使用计算机界面来管理可控电子设备。
发明内容
然而，用于使用电子设备来管理可控电子设备的一些技术通常很麻烦且效率低下。例如，一些现有技术使用复杂且耗时的用户界面，该用户界面可包括多次按键、击键和/或触摸输入。又如，一些现有技术不能适应广泛的功能或关于各式各样的可控设备的状态和功能的充分反馈。因此，现有技术需要比所需时间更多的时间来管理可控外部设备，这浪费了用户时间和设备能量。这后一考虑在电池驱动的设备中是特别重要的。
因此，本技术为电子设备提供了更快、更有效的方法和界面，以用于管理可控外部设备。此类方法和界面任选地补充或替换用于管理可控外部设备的其他方法。此类方法和界面减少对用户所造成的认知负担，并且产生更有效的人机界面。对于电池驱动的计算设备，此类方法和界面节省功率，并且增大电池充电之间的时间间隔。在一些实施方案中，具有用于管理多个可控外部设备的用户界面而不是具有用于管理每个可控外部设备的不同应用程序简化了用户体验，并且因此减少了管理可控外部设备所需的不必要/无关/重复的接收输入。
根据一些实施方案，描述了一种方法。所述方法包括：在具有显示设备和通信设备的电子设备处：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入：根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；以及根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：第一控件示能表示，所述第一控件示能表示在被选择时向所述第一可控外部设备传输执行所述第一功能的命令；以及第二控件示能表示，所述第二控件示能表示在被选择时向所述第一可控外部设备传输执行不同于所述第一功能的第二功能的命令。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备和通信设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入：根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；以及根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：第一控件示能表示，所述第一控件示能表示在被选择时向所述第一可控外部设备传输执行所述第一功能的命令；以及第二控件示能表示，所述第二控件示能表示在被选择时向所述第一可控外部设备传输执行不同于所述第一功能的第二功能的命令。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备和通信设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入：根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；以及根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：第一控件示能表示，所述第一控件示能表示在被选择时向所述第一可控外部设备传输执行所述第一功能的命令；以及第二控件示能表示，所述第二控件示能表示在被选择时向所述第一可控外部设备传输执行不同于所述第一功能的第二功能的命令。
根据一些实施方案，描述了一种电子设备。所述电子设备包括：显示设备和通信设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：显示视频媒体用户界面，包括：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入：根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；以及根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：第一控件示能表示，所述第一控件示能表示在被选择时向所述第一可控外部设备传输执行所述第一功能的命令；以及第二控件示能表示，所述第二控件示能表示在被选择时向所述第一可控外部设备传输执行不同于所述第一功能的第二功能的命令。
根据一些实施方案，描述了一种电子设备。所述电子设备包括：显示设备和通信设备；用于在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面的装置；用于检测对应于对所述第一附件示能表示的选择的第一输入的装置；响应于检测到所述第一输入，用于执行以下操作的装置：根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；以及根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：第一控件示能表示，所述第一控件示能表示在被选择时向所述第一可控外部设备传输执行所述第一功能的命令；以及第二控件示能表示，所述第二控件示能表示在被选择时向所述第一可控外部设备传输执行不同于所述第一功能的第二功能的命令。
根据一些实施方案，描述了一种方法。所述方法包括：在具有显示设备的电子设备处：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入，在所述显示设备上显示所述第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入使得所述第二区域的显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；以及根据确定所述第二输入未使得所述第二区域的显示的部分超过所述阈值量，基于所述第二输入来将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入，在所述显示设备上显示所述第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入使得所述第二区域的显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；以及根据确定所述第二输入未使得所述第二区域的显示的部分超过所述阈值量，基于所述第二输入来将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入，在所述显示设备上显示所述第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入使得所述第二区域的显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；以及根据确定所述第二输入未使得所述第二区域的显示的部分超过所述阈值量，基于所述第二输入来将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：显示视频媒体用户界面，包括：在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；检测对应于对所述第一附件示能表示的选择的第一输入；响应于检测到所述第一输入，在所述显示设备上显示所述第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入使得所述第二区域的显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；以及根据确定所述第二输入未使得所述第二区域的显示的部分超过所述阈值量，基于所述第二输入来将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；用于在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面的装置；用于检测对应于对所述第一附件示能表示的选择的第一输入的装置；响应于检测到所述第一输入，用于执行以下操作的装置：在所述显示设备上显示所述第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；用于在所述显示设备上显示所述第一附件界面的所述第一区域时的装置，用于检测第二输入的装置；以及响应于检测到所述第二输入，用于以下操作的装置：根据确定所述第二输入使得所述第二区域的显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；以及根据确定所述第二输入未使得所述第二区域的显示的部分超过所述阈值量，基于所述第二输入来将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
根据一些实施方案，描述了一种方法。所述方法包括：在具有显示设备的电子设备处：在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：接收对应于所述第一可控外部设备的信息；根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；以及根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：接收对应于所述第一可控外部设备的信息；根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；以及根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：接收对应于所述第一可控外部设备的信息；根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；以及根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：显示视频媒体用户界面，包括：在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：接收对应于所述第一可控外部设备的信息；根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及响应于检测到所述第二输入：根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；以及根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；用于在所述电子设备未被配置为控制第一可控外部设备时检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入的装置；响应于检测到所述第一组一个或多个输入，用于执行以下操作的装置：发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：接收对应于所述第一可控外部设备的信息；根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；用于在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时检测第二输入的装置；以及响应于检测到所述第二输入，用于执行以下操作的装置：根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；以及根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
根据一些实施方案，描述了一种方法。所述方法包括：在具有显示设备的电子设备处：在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；响应于所述第一组一个或多个输入：选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；以及将所述温度范围与第一温度模式相关联；在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及响应于检测到所述第二组一个或多个输入：选择用于激活第一计划操作的第一标准；以及将所述第一温度模式与所述第一计划操作相关联。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；响应于所述第一组一个或多个输入：选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；以及将所述温度范围与第一温度模式相关联；在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及响应于检测到所述第二组一个或多个输入：选择用于激活第一计划操作的第一标准；以及将所述第一温度模式与所述第一计划操作相关联。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；响应于所述第一组一个或多个输入：选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；以及将所述温度范围与第一温度模式相关联；在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及响应于检测到所述第二组一个或多个输入：选择用于激活第一计划操作的第一标准；以及将所述第一温度模式与所述第一计划操作相关联。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：显示视频媒体用户界面，包括：在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；响应于所述第一组一个或多个输入：选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；以及将所述温度范围与第一温度模式相关联；在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及响应于检测到所述第二组一个或多个输入：选择用于激活第一计划操作的第一标准；以及将所述第一温度模式与所述第一计划操作相关联。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；用于在所述显示设备上显示温度模式创建用户界面的装置，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；用于在所述显示设备上显示所述温度模式创建用户界面时检测第一组一个或多个输入的装置；响应于所述第一组一个或多个输入，用于执行以下操作的装置：选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；以及将所述温度范围与第一温度模式相关联；用于执行以下操作的装置：在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；用于在所述显示设备上显示所述温度计划用户界面时检测第二组一个或多个输入的装置；以及响应于检测到所述第二组一个或多个输入，用于执行以下操作的装置：选择用于激活第一计划操作的第一标准；以及将所述第一温度模式与所述第一计划操作相关联。
根据一些实施方案，描述了一种方法。所述方法包括：在具有显示设备的电子设备处：经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：更新所述第一组可控外部设备以包括所述第一可控外部设备；根据确定所述第一可控外部设备是第一类型，同时显示：对应于所述第一可控外部设备的第二附件示能表示以及配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：更新所述第一组可控外部设备以包括所述第一可控外部设备；根据确定所述第一可控外部设备是第一类型，同时显示：对应于所述第一可控外部设备的第二附件示能表示以及配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：更新所述第一组可控外部设备以包括所述第一可控外部设备；根据确定所述第一可控外部设备是第一类型，同时显示：对应于所述第一可控外部设备的第二附件示能表示以及配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：更新所述第一组可控外部设备以包括所述第一可控外部设备；根据确定所述第一可控外部设备是第一类型，同时显示：对应于所述第一可控外部设备的第二附件示能表示以及配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；用于经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示的装置；用于检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入的装置；响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入，用于执行以下操作的装置：更新所述第一组可控外部设备以包括所述第一可控外部设备；根据确定所述第一可控外部设备是第一类型，同时显示：对应于所述第一可控外部设备的第二附件示能表示以及配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
根据一些实施方案，描述了一种方法。所述方法包括：在具有显示设备的电子设备处：经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；检测用户输入；以及响应于检测到所述用户输入：根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；以及根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的所述同时显示。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；检测用户输入；以及响应于检测到所述用户输入：根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；以及根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的所述同时显示。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；检测用户输入；以及响应于检测到所述用户输入：根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；以及根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的所述同时显示。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；检测用户输入；以及响应于检测到所述用户输入：根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；以及根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的所述同时显示。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；用于经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示的装置；用于检测用户输入的装置；以及响应于检测到所述用户输入，用于执行以下操作的装置：根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；以及根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的所述同时显示。
根据一些实施方案，描述了一种方法。在具有显示器的电子设备处执行的所述方法包括：接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及响应于接收到播放所述第一类型的音频媒体项的所述请求：播放所述第一类型的音频媒体项中的第一音频媒体项；以及显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
根据一些实施方案，描述了一种非暂态计算机可读存储介质。所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及响应于接收到播放所述第一类型的音频媒体项的所述请求：播放所述第一类型的音频媒体项中的第一音频媒体项；以及显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
根据一些实施方案，描述了一种暂态计算机可读存储介质。所述暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及响应于接收到播放所述第一类型的音频媒体项的所述请求：播放所述第一类型的音频媒体项中的第一音频媒体项；以及显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；一个或多个处理器；以及存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及响应于接收到播放所述第一类型的音频媒体项的所述请求：播放所述第一类型的音频媒体项中的第一音频媒体项；以及显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。该方面的其他实施方案包括记录在一个或多个计算机存储设备上的对应计算机系统、装置和计算机程序，均被配置为执行所述方法的动作。
根据一些实施方案，描述了一种电子设备。该电子设备包括：显示设备；用于接收播放第一类型的音频媒体项的请求的装置，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及响应于接收到播放所述第一类型的音频媒体项的所述请求，用于执行以下操作的装置：播放所述第一类型的音频媒体项中的第一音频媒体项；以及显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
用于执行这些功能的可执行指令可选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。用于执行这些功能的可执行指令可选地被包括在被配置用于由一个或多个处理器执行的暂态计算机可读存储介质或其他计算机程序产品中。
因此，为设备提供了更快、更有效的方法和界面，以用于从电子设备管理和控制外部设备，从而提高了此类设备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于从电子设备管理和控制外部设备的其他方法。
附图说明
为了更好地理解各种所述实施方案，应结合以下附图参考下面的具体实施方式，其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出了根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。
图1C是示出了根据一些实施方案的用于实现数字助理的系统和环境的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的针对便携式多功能设备上应用程序的菜单的示例性用户界面。
图4B示出了根据一些实施方案的针对具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图5A示出了根据一些实施方案的个人电子设备。
图5B是示出了根据一些实施方案的个人电子设备的框图。
图5C至图5D示出了根据一些实施方案的具有触敏显示器和强度传感器的个人电子设备的示例性部件。
图5E至图5H示出了根据一些实施方案的个人电子设备的示例性部件和用户界面。
图5I示出了根据一些实施方案的电子设备。
图5J是示出了根据一些实施方案的电子设备的框图。
图6A至图6R示出了根据一些实施方案的用于管理可控外部设备的示例性用户界面。
图7A至7B是示出了根据一些实施方案的用于管理可控外部设备的方法的流程图。
图8A至图8J示出了根据一些实施方案的用于管理可控外部设备的示例性用户界面。
图9A至图9B是示出了根据一些实施方案的用于管理可控外部设备的方法的流程图。
图10A至图10AC示出了根据一些实施方案的用于管理成组可控外部设备的示例性用户界面。
图11A至图11B是示出了根据一些实施方案的用于管理成组可控外部设备的方法的流程图。
图12A至图12Q示出了根据一些实施方案的用于管理恒温器的示例性用户界面。
图13A至图13B是示出了根据一些实施方案的用于管理恒温器的方法的流程图。
图14A至图14T示出了根据一些实施方案的用于管理包括扬声器的一组可控外部设备的示例性用户界面。
图15是示出了根据一些实施方案的用于管理包括扬声器的一组可控外部设备的方法的流程图。
图16A至图16G示出了根据一些实施方案的用于管理扬声器的示例性用户界面。
图17是示出了根据一些实施方案的用于管理扬声器的方法的流程图。
图18A至图18G示出了根据一些实施方案的用于请求播放特定类型的声音的示例性用户界面。
图19是示出了根据一些实施方案的使用电子设备来播放特定类型的声音的方法的流程图。
具体实施方式
以下描述阐述了示例性方法、参数等。然而，应当认识到，此类描述并非意在限制本公开的范围，而是作为对示例性实施方案的描述来提供。
电子设备需要提供有效的方法和界面以用于管理可控外部设备。在一些实施方案中，电子设备提供对主屏幕上的指定(例如，收藏)可控设备的访问，以用于管理可控设备的系统。在一些实施方案中，用户可通过使用具有一种类型的特征(例如，轻击)的输入在两种状态(例如，打开/关闭)之间切换状态来粗略地控制设备，并且使用具有不同特征(例如，长按)的输入来获得对该设备的更详细控制。在一些实施方案中，响应于用户定义的条件来控制用户定义的设备集合(例如，场景)。还描述了各种其他技术。此类技术可减轻管理可控外部设备的用户的认知负担，从而提高生产率。此外，此类技术可减少以其他方式浪费在冗余用户输入上的处理器功率和电池功率。
下面图1A至图1C、图2、图3、图4A至图4B和图5A至图5I提供了对用于执行管理可控外部设备的技术的示例性设备的描述。
图6A至图6R和图8A至图8J示出了用于管理可控外部设备的示例性用户界面。图7A至图7B和图9A至图9B是示出了根据一些实施方案的用于管理可控外部设备的方法的流程图。图6A至图6R中的用户界面用于示出下文所述的过程，包括图7A至图7B中的过程。图8A至图8J中的用户界面用于示出下文所述的过程，包括图9A至图9B中的过程。
图10A至图10AC示出了用于管理成组可控外部设备的示例性用户界面。图11A至图11B是示出了根据一些实施方案的用于管理成组可控外部设备的方法的流程图。图8A至图8D中的用户界面用于示出下文所述的过程，包括图11A至图11B中的过程。
图12A至图12Q示出了用于管理恒温器的示例性用户界面。图13A至图13B是示出了根据一些实施方案的用于管理恒温器的方法的流程图。图 12A至图12Q中的用户界面用于示出下文所述的过程，包括图13A至图13B 中的过程。
图14A至图14T示出了用于管理一组可控外部设备和扬声器的示例性用户界面。图15是示出了根据一些实施方案的用于管理一组可控外部设备和扬声器的用户界面的方法的流程图。图14A至图14T中的用户界面用于示出下文所述的过程，包括图15中的过程。
图16A至图16G示出了用于管理扬声器的示例性用户界面。图17是示出了根据一些实施方案的用于管理扬声器的方法的流程图。图16A至图16G 中的用户界面用于示出下文所述的过程，包括图17中的过程。
图18A至图18G示出了根据一些实施方案的用于请求播放特定类型的声音的示例性用户界面。图19是示出了根据一些实施方案的请求播放特定类型的声音的方法的流程图。图18A至图18G中的用户界面用于示出下文所述的过程，包括图19中的过程。
尽管以下描述使用术语“第一”、“第二”等来描述各种元件，但这些元件不应受术语的限制。这些术语只是用于将一个元件与另一元件区分开。例如，第一触摸可被命名为第二触摸并且类似地第二触摸可被命名为第一触摸，而不脱离各种所述实施方案的范围。第一触摸和第二触摸两者均为触摸，但是它们不是同一触摸。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的，而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样，单数形式“一个”和“该”旨在也包括复数形式，除非上下文另外明确地指示。还将理解的是，本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是，术语“包括” (“includes”、“including”、“comprises”和/或“comprising”)在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
根据上下文，术语“如果”任选地被解释为意指“当......时”、“在......时”或“响应于确定”或“响应于检测到”。类似地，根据上下文，短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中，该设备为还包含其他功能诸如PDA和/ 或音乐播放器功能的便携式通信设备，诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc.(Cupertino,California)的
Figure BDA0002826515600000221
设备、iPod
Figure BDA0002826515600000222
设备、和
Figure BDA0002826515600000223
设备。任选地使用其他便携式电子设备，诸如具有触敏表面(例如，触摸屏显示器和/或触控板)的膝上型电脑或平板电脑。还应当理解的是，在一些实施方案中，该设备并非便携式通信设备，而是具有触敏表面(例如，触摸屏显示器和/或触控板)的台式计算机。
在下面的讨论中，描述了一种包括显示器和触敏表面的电子设备。然而，应当理解，该电子设备任选地包括一个或多个其他物理用户界面设备，诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用程序，诸如以下中的一者或多者：绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程序、照片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备，诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化，和/或在相应应用程序内被调整和/或变化。这样，设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出了根据一些实施方案的具有触敏显示器系统112的便携式多功能设备 100的框图。触敏显示器112有时为了方便被叫做“触摸屏”，并且有时被称为或被叫做“触敏显示器系统”。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器 111、麦克风113、输入/输出(I/O)子系统106、其他输入控制设备116和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如，触敏表面，诸如设备100的触敏显示器系统112)上的接触的强度的一个或多个接触强度传感器165。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167 (例如，在触敏表面诸如设备100的触敏显示器系统112或设备300的触控板355上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如在本说明书和权利要求书中所使用的，术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如，手指接触)的力或压力(每单位面积的力)，或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围，该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如，至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如，在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中，来自多个力传感器的力测量值被组合 (例如，加权平均)以确定所估计的接触力。类似地，触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地，在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及 /或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中，接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如，强度阈值以对应于替代物测量的单位来描述)。在一些具体实施中，接触力或压力的替代物测量被转换成估计的力或压力，并且估计的力或压力用于确定是否已超过强度阈值(例如，强度阈值是以压力的单位进行测量的压力阈值)。使用接触的强度作为用户输入的属性，从而允许用户访问用户在实地面积有限的尺寸更小的设备上本来不可访问的附加设备功能，该尺寸更小的设备用于(例如，在触敏显示器上)显示示能表示和/或接收用户输入(例如，经由触敏显示器、触敏表面或物理控件/机械控件，诸如旋钮或按钮)。
如本说明书和权利要求书中所使用的，术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如，触敏表面)相对于设备的另一个部件(例如，外壳)的物理位移、或部件相对于设备的质心的位移。例如，在设备或设备的部件与用户对触摸敏感的表面(例如，手指、手掌或用户手部的其他部分)接触的情况下，通过物理位移生成的触觉输出将由用户解释为触感，该触感对应于设备或设备的部件的物理特征的所感知的变化。例如，触敏表面(例如，触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下，用户将感觉到触感，诸如“按下点击”或“松开点击”，即使在通过用户的移动而物理地被按压 (例如，被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如，即使在触敏表面的光滑度无变化时，触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制，但是对触摸的许多感官知觉是大多数用户共有的。因此，当触觉输出被描述为对应于用户的特定感官知觉(例如，“按下点击”、“松开点击”、“粗糙度”)时，除非另外陈述，否则所生成的触觉输出对应于设备或其部件的物理位移，该物理位移将会生成典型(或普通)用户的所述感官知觉。
应当理解，设备100仅是便携式多功能设备的一个示例，并且设备100 任选地具有比所示出的更多或更少的部件，任选地组合两个或更多个部件，或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或硬件与软件两者的组合来实现，包括一个或多个信号处理和/ 或专用集成电路。
存储器102任选地包括高速随机存取存储器，并且还任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。存储器控制器122任选地控制设备100的其他部件访问存储器102。
外围设备接口118可用于将设备的输入外围设备和输出外围设备耦接到CPU 120和存储器102。一个或多个处理器120运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。在一些实施方案中，外围设备接口118、CPU120和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其他实施方案中，它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称作电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号，并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路，包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信，这些网络为诸如互联网(也被称为万维网 (WWW))、内联网和/或无线网络(诸如，蜂窝电话网络、无线局域网 (LAN)和/或城域网(MAN))。RF电路108任选地包括用于检测近场通信 (NFC)场的熟知的电路，诸如通过近程通信无线电部件来进行检测。无线通信任选地使用多种通信标准、协议和技术中的任一者，包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、 HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信 (NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗(BTLE)、无线保真(Wi-Fi)(例如，IEEE 802.11a、IEEE 802.11b、IEEE 802.11g、IEEE802.11n和/或IEEE 802.11ac)、互联网协议语音(VoIP)、Wi-MAX、电子邮件协议(例如，互联网消息访问协议(IMAP) 和/或邮局协议(POP))、即时消息(例如，可扩展消息处理和存在协议 (XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS)，或者包括在本文档提交日期时还未开发出的通信协议的任何其他适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据，将音频数据转换为电信号，并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据，并且将音频数据传输到外围设备接口 118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中，音频电路110还包括耳麦插孔(例如，图2中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口，该可移除的音频输入/输出外围设备诸如仅输出的耳机或者具有输出(例如，单耳耳机或双耳耳机)和输入(例如，麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116耦接到外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、深度相机控制器169、强度传感器控制器159、触觉反馈控制器161，以及用于其他输入或控制设备的一个或多个输入控制器160。一个或多个输入控制器160从其他输入控制设备 116接收电信号/将电信号发送到其他输入控制设备116。其他输入控制设备 116任选地包括物理按钮(例如，下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击式转盘等。在一些另选实施方案中，输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者)：键盘、红外线端口、USB端口以及指向设备诸如鼠标。一个或多个按钮(例如，图2中的208)任选地包括用于扬声器111和/或麦克风113音量控制的增大/减小按钮。一个或多个按钮任选地包括下压按钮(例如，图2中的 206)。
快速按下下压按钮任选地脱离触摸屏112的锁定或者任选地开始使用触摸屏上的手势来对设备进行解锁的过程，如在2005年12月23日提交的名称为“Unlocking a Deviceby Performing Gestures on an Unlock Image”的美国专利申请11/322,549(即，美国专利No.7,657,849)中所述的，该美国专利申请据此全文以引用方式并入本文。长按下压按钮(例如206)任选地使设备100开机或关机。一个或多个按钮的功能任选地为用户可定制的。触摸屏112用于实现虚拟按钮或软按钮以及一个或多个软键盘。
触敏显示器112提供设备和用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送至该触摸屏。触摸屏 112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中，一些视觉输出或全部的视觉输出任选地与用户界面对象对应。
触摸屏112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断)，并且将所检测到的接触转换为与被显示在触摸屏 112上的用户界面对象(例如，一个或多个软键、图标、网页或图像)的交互。在示例性实施方案中，触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术或LED(发光二极管)技术，但是在其他实施方案中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断，该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在示例性实施方案中，使用投射式互电容感测技术，诸如在来自Apple Inc.(Cupertino,California)的
Figure BDA0002826515600000271
和iPod
Figure BDA0002826515600000272
中使用的技术。
触摸屏112的一些实施方案中的触敏显示器任选地类似于以下美国专利中描述的多点触敏触控板：6,323,846(Westerman等人)、6,570,557 (Westerman等人)和/或6,677,932(Westerman等人)和/或美国专利公开 2002/0015024A1，该每个专利据此全文以引用方式并入。然而，触摸屏112 显示来自设备100的视觉输出，而触敏触控板不提供视觉输出。
在一些实施方案中，触摸屏112的触敏显示器如以下专利申请所述：(1) 提交于2006年5月2日的名称为“Multipoint Touch Surface Controller”的美国专利申请No.11/381,313；(2)2004年5月6日提交的名称为“Multipoint Touchscreen”的美国专利申请No.10/840,862；(3)2004年7月30日提交的名称为“Gestures For Touch Sensitive InputDevices”的美国专利申请No. 10/903,964；(4)2005年1月31日提交的名称为“GesturesFor Touch Sensitive Input Devices”的美国专利申请No.11/048,264；(5)2005年1月18日提交的名称为“Mode-Based Graphical User Interfaces For Touch Sensitive InputDevices”的美国专利申请No.11/038,590；(6)2005年9月16日提交的名称为“VirtualInput Device Placement On A Touch Screen User Interface”的美国专利申请No.11/228,758；(7)2005年9月16日提交的名称为“Operation Of A Computer With A TouchScreen Interface”的美国专利申请No.11/228,700； (8)2005年9月16日提交的名称为“Activating Virtual Keys Of A Touch- Screen Virtual Keyboard”的美国专利申请No.11/228,737；以及(9)2006年3 月3日提交的名称为“Multi-Functional Hand-HeldDevice”的美国专利申请 No.11/367,749。所有这些申请全文以引用方式并入本文。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施方案中，触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等等来与触摸屏112接触。在一些实施方案中，将用户界面设计为主要通过基于手指的接触和手势来工作，由于手指在触摸屏上的接触区域较大，因此这可能不如基于触笔的输入精确。在一些实施方案中，设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施方案中，除了触摸屏之外，设备100任选地包括用于激活或去激活特定功能的触控板。在一些实施方案中，触控板是设备的触敏区域，与触摸屏不同，该触敏区域不显示视觉输出。触控板任选地是与触摸屏112分开的触敏表面，或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如，电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示符 (例如，发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器 164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光，并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块)，光学传感器164任选地捕获静态图像或视频。在一些实施方案中，光学传感器位于设备100的后部上，与设备前部上的触摸屏显示器112相背对，使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中，光学传感器位于设备的前部上，使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取该用户的图像以用于视频会议。在一些实施方案中，光学传感器164的位置可由用户改变(例如，通过旋转设备外壳中的透镜和传感器)，使得单个光学传感器164与触摸屏显示器一起使用，以用于视频会议和静态图像和/或视频图像采集两者。
设备100任选地还包括一个或多个深度相机传感器175。图1A示出了耦接到I/O子系统106中的深度相机控制器169的深度相机传感器。深度相机传感器175从环境接收数据以从视点(例如，深度相机传感器)创建场景内的对象(例如，面部)的三维模型。在一些实施方案中，与成像模块143 (也称为相机模块)一起，深度相机传感器175任选地用于确定由成像模块 143捕获的图像的不同部分的深度图。在一些实施方案中，深度相机传感器位于设备100的前部，使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取具有深度信息的用户图像以用于视频会议，并且捕捉具有深度图数据的自拍。在一些实施方案中，深度相机传感器175位于设备的后部，或者设备100的后部和前部。在一些实施方案中，深度相机传感器 175的位置可由用户改变(例如，通过旋转设备外壳中的透镜和传感器)，使得深度相机传感器175与触摸屏显示器一起使用以用于视频会议和静态图像和/或视频图像采集两者。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气力传感器、压电力传感器、光学力传感器、电容式触敏表面、或其他强度传感器(例如，用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如，压力信息或压力信息的代用物)。在一些实施方案中，至少一个接触强度传感器与触敏表面 (例如，触敏显示器系统112)并置排列或邻近。在一些实施方案中，至少一个接触强度传感器位于设备100的后部上，与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接到外围设备接口118的接近传感器166。另选地，接近传感器166任选地耦接到I/O子系统106中的输入控制器160。接近传感器166任选地如以下美国专利申请中所述的那样执行：No.11/241,839，名称为“Proximity Detector In Handheld Device”；No.11/240,788，名称为“ProximityDetector In Handheld Device”；No.11/620,702，名称为“Using Ambient Light SensorTo Augment Proximity Sensor Output”；No.11/586,862，名称为“Automated ResponseTo And Sensing Of User Activity In Portable Devices”；以及No. 11/638,251，名称为“Methods And Systems For Automatic Configuration Of Peripherals”，这些美国专利申请据此全文以引用方式并入本文。在一些实施方案中，当多功能设备被置于用户的耳朵附近时(例如，当用户正在进行电话呼叫时)，接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子系统106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备，诸如扬声器或其他音频部件；和/或将能量转换成线性运动的机电设备，诸如马达、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如，将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块 133接收触觉反馈生成指令，并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中，至少一个触觉输出发生器与触敏表面(例如，触敏显示器系统112)并置排列或邻近，并且任选地通过竖直地(例如，向设备100的表面内/外)或侧向地(例如，在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中，至少一个触觉输出发生器传感器位于设备100的后部上，与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到外围设备接口118的加速度计168。另选地，加速度计168任选地耦接到I/O 子系统106中的输入控制器160。加速度计168任选地如以下美国专利公开中所述的那样执行：美国专利公开No.20050190059，名称为“Acceleration- based Theft Detection System for PortableElectronic Devices”和美国专利公开 No.20060017692，名称为“Methods AndApparatuses For Operating A Portable Device Based On An Accelerometer”，这两个美国专利公开均全文以引用方式并入本文。在一些实施方案中，基于对从一个或多个加速度计接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图显示信息。设备100任选地除了加速度计168之外还包括磁力仪和GPS(或GLONASS 或其他全球导航系统)接收器，以用于获取关于设备100的位置和取向(例如，纵向或横向)的信息。
在一些实施方案中，存储于存储器102中的软件组件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块 (或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS) 模块(或指令集)135以及应用程序(或指令集)136。此外，在一些实施方案中，存储器102(图1A)或370(图3)存储设备/全局内部状态157，如图1A和图3中所示。设备/全局内部状态157包括以下中的一者或多者：活动应用程序状态，其指示哪些应用程序(如果有的话)当前是活动的；显示状态，其指示什么应用程序、视图或其他信息占据触摸屏显示器112的各个区域；传感器状态，包括从设备的各个传感器和输入控制设备116获取的信息；以及关于设备的位置和/或姿态的位置信息。
操作系统126(例如，Darwin、RTXC、LINUX、UNIX、OS X、iOS、 WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如，存储器管理、存储设备控制、功率管理等)的各种软件部件和/或驱动程序，并且促进各种硬件部件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信，并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件组件。外部端口124(例如，通用串行总线(USB)、火线等)适于直接耦接到其他设备，或间接地通过网络(例如，互联网、无线LAN等) 进行耦接。在一些实施方案中，外部端口是与
Figure BDA0002826515600000311
(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如，30 针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如，触控板或物理点击式转盘)的接触。接触/运动模块 130包括各种软件部件以用于执行与接触检测相关的各种操作，诸如确定是否已经发生了接触(例如，检测手指按下事件)、确定接触强度(例如，接触的力或压力，或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪在触敏表面上的移动(例如，检测一个或多个手指拖动事件)，以及确定接触是否已经停止(例如，检测手指抬起事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/ 或方向的改变)，所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如，单指接触)或者多点同时接触(例如，“多点触摸”/多个手指接触)。在一些实施方案中，接触/运动模块130和显示控制器156检测触控板上的接触。
在一些实施方案中，接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如，确定用户是否已“点击”图标)。在一些实施方案中，根据软件参数来确定强度阈值的至少一个子集(例如，强度阈值不是由特定物理致动器的激活阈值来确定的，并且可在不改变设备100的物理硬件的情况下被调节)。例如，在不改变触控板或触摸屏显示器硬件的情况下，触控板或触摸屏的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个阈值。另外，在一些具体实施中，向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如，通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如，所检测到的接触的不同运动、计时和/或强度)。因此，任选地通过检测特定接触模式来检测手势。例如，检测手指轻击手势包括检测手指按下事件，然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如，在图标的位置处)检测手指抬起(抬离)事件。作为另一个示例，在触敏表面上检测手指轻扫手势包括检测手指按下事件，然后检测一个或多个手指拖动事件，并且随后检测手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知的软件部件，包括用于改变所显示的图形的视觉冲击(例如，亮度、透明度、饱和度、对比度或其他视觉特征)的部件。如本文所用，术语“图形”包括可被显示给用户的任何对象，其非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中，图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码，在必要的情况下还一起接收坐标数据和其他图形属性数据，并且然后生成屏幕图像数据，以输出至显示控制器 156。
触觉反馈模块133包括用于生成指令的各种软件部件，该指令由触觉输出发生器167使用，以便响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如，联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置，并提供该信息以供在各种应用程序中使用(例如提供给电话138以供在基于位置的拨号中使用；提供给相机143 作为图片/视频元数据；以及提供给提供基于位置的服务的应用，诸如天气桌面小程序、本地黄页桌面小程序和地图/导航桌面小程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集：
·联系人模块137(有时称为通讯录或联系人列表)；
·电话模块138；
·视频会议模块139；
·电子邮件客户端模块140；
·即时消息(IM)模块141；
·健身支持模块142；
·用于静态图像和/或视频图像的相机模块143；
·图像管理模块144；
·视频播放器模块；
·音乐播放器模块；
·浏览器模块147；
·日历模块148；
·桌面小程序模块149，其任选地包括以下各项中的一者或多者：天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5、和由用户获取的其他桌面小程序、以及用户创建的桌面小程序149-6；
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150；
·搜索模块151；
·视频和音乐播放器模块152，其合并视频播放器模块和音乐播放器模块；
·记事本模块153；
·地图模块154；以及/或者
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、和文本输入模块134，联系人模块137任选地用于管理通讯录或联系人列表 (例如，存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中)，包括：向通讯录添加一个或多个姓名；从通讯录删除姓名；将电话号码、电子邮件地址、物理地址或其他信息与姓名相关联；将图像与姓名相关联；对姓名进行归类和分类；提供电话号码或电子邮件地址来发起和/或促进通过电话138、视频会议模块139、电子邮件140或IM 141进行的通信；等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏 112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块 134，电话模块138任选地用于输入与电话号码对应的字符序列、访问联系人模块137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话，以及当会话完成时断开或挂断。如上所述，无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132、文本输入模块134、联系人模块137和电话模块 138，视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，电子邮件客户端模块140包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144，电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，即时消息模块141包括用于以下操作的可执行指令：输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如，使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施方案中，所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用，“即时消息”是指基于电话的消息(例如，使用SMS或 MMS发送的消息)和基于互联网的消息(例如，使用XMPP、SIMPLE或 IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块，健身支持模块142包括用于创建健身(例如，具有时间、距离和 /或卡路里燃烧目标)的可执行指令；与健身传感器(运动设备)进行通信；接收健身传感器数据；校准用于监视健身的传感器；为健身选择和播放音乐；以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132和图像管理模块144，相机模块 143包括用于以下操作的可执行指令：捕获静态图像或视频(包括视频流) 并且将它们存储到存储器102中、修改静态图像或视频的特征，或从存储器 102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、和相机模块143，图像管理模块144包括用于排列、修改(例如，编辑)、或以其他方式操控、加标签、删除、呈现(例如，在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134，浏览器模块147包括用于根据用户指令来浏览互联网，包括搜索、链接至、接收和显示网页或其部分，以及链接至网页的附件和其他文件的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块 147，日历模块148包括根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如，日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序模块149 是任选地由用户下载和使用的微型应用程序(例如，天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)或由用户创建的微型应用程序(例如，用户创建的桌面小程序149-6)。在一些实施方案中，桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中，桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件 (例如，Yahoo！桌面小程序)。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序创建器模块150任选地被用户用于创建桌面小程序(例如，将网页的用户指定部分转变为桌面小程序)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132 和文本输入模块134，搜索模块151包括用于根据用户指令来搜索存储器 102中与一个或多个搜索条件(例如，一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147，视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式诸如MP3 或AAC文件存储的所记录的音乐和其他声音文件的可执行指令，以及用于显示、呈现或以其他方式回放视频(例如，在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中，设备100 任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132 和文本输入模块134，记事本模块153包括根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147，地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及与地图相关联的数据(例如，驾驶方向、与特定位置处或附近的商店及其他兴趣点有关的数据，以及其他基于位置的数据)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147，在线视频模块155包括用于执行以下操作的指令：允许用户访问、浏览、接收(例如，通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件，以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中，使用即时消息模块 141而不是电子邮件客户端模块140来发送特定在线视频的链接。在线视频应用程序的其他描述可见于2007年6月20日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interfacefor Playing Online Videos”的美国临时专利申请No.60/936,562和2007年12月31日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interfacefor Playing Online Videos”的美国专利申请No.11/968,067，这两个专利申请的内容据此全文以引用方式并入本文。
上述每个模块和应用程序对应于用于执行上述一种或多种功能以及在本专利申请中所述的方法(例如，本文所述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(例如，指令集)不必以独立的软件程序、过程或模块实现，因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。例如，视频播放器模块任选地与音乐播放器模块组合成单个模块(例如，图1A中的视频和音乐播放器模块152)。在一些实施方案中，存储器102任选地存储上述模块和数据结构的子集。此外，存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施方案中，设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触控板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备，任选地减少设备100上的物理输入控制设备(例如，下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触控板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中，触控板在被用户触摸时将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中，使用触控板来实现“菜单按钮”。在一些其他实施方案中，菜单按钮是物理下压按钮或者其他物理输入控制设备，而不是触控板。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中，存储器102(图1A)或存储器370(图3)包括事件分类器170(例如，在操作系统126中)以及相应的应用程序136-1(例如，前述应用程序137至151、155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序 136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中，应用程序136-1包括应用程序内部状态192，该应用程序内部状态指示当应用程序是活动的或正在执行时被显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施方案中，设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的，并且应用程序内部状态192被事件分类器170 用来确定要将事件信息递送到的应用程序视图191。
在一些实施方案中，应用程序内部状态192包括附加信息，诸如以下各项中的一者或多者：当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被显示或准备好用于被应用程序136-1显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列，以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如，触敏显示器112上的用户触摸，作为多点触摸手势的一部分) 的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施方案中，事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应，外围设备接口118传输事件信息。在其他实施方案中，外围设备接口118仅当存在显著事件(例如，接收到高于预先确定的噪声阈值和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中，事件分类器170还包括命中视图确定模块172和/ 或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时，命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图，本文中有时也称为应用程序视图或用户界面窗口，在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如，在其中检测到触摸的最低水平视图任选地被称为命中视图，并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定，所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时，命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下，命中视图是发起子事件(例如，形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块172识别，命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中，活动事件识别器确定模块173 确定仅命中视图应接收特定子事件序列。在其他实施方案中，活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图，并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中，即使触摸子事件完全被局限到与一个特定视图相关联的区域，分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如，事件识别器180)。在包括活动事件识别器确定模块173的实施方案中，事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中，事件分配器模块174在事件队列中存储事件信息，该事件信息由相应事件接收器182进行检索。
在一些实施方案中，操作系统126包括事件分类器170。另选地，应用程序136-1包括事件分类器170。在又一个实施方案中，事件分类器170是独立模块，或者是存储在存储器102中的另一个模块(诸如，接触/运动模块130)的一部分。
在一些实施方案中，应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191，其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常，相应应用程序视图191包括多个事件识别器180。在其他实施方案中，事件识别器180中的一个或多个事件识别器是独立模块的一部分，该独立模块为诸如用户界面工具包或应用程序136-1从中继承方法和其他属性的更高级别的对象。在一些实施方案中，相应事件处理程序190包括以下各项中的一者或多者：数据更新器 176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地，应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序 190。另外，在一些实施方案中，数据更新器176、对象更新器177和GUI 更新器178中的一者或多者包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如，事件数据179)，并且从事件信息识别事件。事件识别器180包括事件接收器182 和事件比较器184。在一些实施方案中，事件识别器180还包括元数据183 和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件，事件信息还包括附加信息，诸如子事件的位置。当子事件涉及触摸的运动时，事件信息任选地还包括子事件的速率和方向。在一些实施方案中，事件包括设备从一个取向旋转到另一取向(例如，从纵向取向旋转到横向取向，或反之亦然)，并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较，并且基于该比较来确定事件或子事件，或者确定或更新事件或子事件的状态。在一些实施方案中，事件比较器184包括事件定义186。事件定义186 包含事件的定义(例如，预定义的子事件序列)，例如事件1(187-1)、事件2(187-2)以及其他。在一些实施方案中，事件(187)中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中，事件1(187-1)的定义是被显示对象上的双击。例如，双击包括被显示对象上的预先确定时长的第一触摸(触摸开始)、预先确定时长的第一抬离 (触摸结束)、被显示对象上的预先确定时长的第二触摸(触摸开始)以及预先确定时长的第二抬离(触摸结束)。在另一个示例中，事件2(187-2) 的定义是被显示对象上的拖动。例如，拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器112上的移动、以及触摸的抬离 (触摸结束)。在一些实施方案中，事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中，事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施方案中，事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如，在触敏显示器112上显示三个用户界面对象的应用程序视图中，当在触敏显示器112上检测到触摸时，事件比较器 184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联，则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如，事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中，相应事件(187)的定义还包括延迟动作，所述延迟动作延迟事件信息的递送，直到已确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时，该相应事件识别器180进入事件不可能、事件失败或事件结束状态，在此之后忽略基于触摸的手势的后续子事件。在这种情况下，对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中，相应事件识别器180包括具有指示事件递送系统应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中，元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中，元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中，当事件的一个或多个特定子事件被识别时，相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中，相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中，事件识别器180抛出与所识别的事件相关联的标记，并且与该标记相关联的事件处理程序190获得该标记并执行预定义过程。
在一些实施方案中，事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反，子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中，数据更新器176创建并更新在应用程序136-1中使用的数据。例如，数据更新器176对联系人模块137中所使用的电话号码进行更新，或者对视频播放器模块中所使用的视频文件进行存储。在一些实施方案中，对象更新器177创建和更新在应用程序136-1中使用的对象。例如，对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如，GUI更新器178准备显示信息，并且将显示信息发送至图形模块132以用以显示在触敏显示器上。
在一些实施方案中，事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对它们的访问权限。在一些实施方案中，数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序 136-1或应用程序视图191的单个模块中。在其他实施方案中，它们被包括在两个或更多个软件模块中。
应当理解，关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入，并不是所有用户输入都是在触摸屏上发起的。例如，任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下；触控板上的接触移动，诸如轻击、拖动、滚动等；触笔输入；设备的移动；口头指令；检测到的眼睛移动；生物特征输入；和/或它们的任何组合任选地被用作对应于限定要识别的事件的子事件的输入。
图1C示出了根据各种示例的系统2100的框图。在一些示例中，系统 2100实现数字助理。术语“数字助理”、“虚拟助理”、“智能自动化助理”或“自动数字助理”是指解译口头形式和/或文本形式的自然语言输入来推断用户意图并且基于推断出的用户意图来执行动作的任何信息处理系统。例如，为了作用于推断出的用户意图，系统执行下述步骤中的一个或多个：识别具有设计用于实现推断出的用户意图的步骤和参数的任务流，根据推断出的用户意图将特定要求输入到任务流中；通过调用程序、方法、服务、API等执行任务流；以及以可听(例如，语音)和/或可视形式来生成对用户的输出响应。
具体地，数字助理能够接受至少部分地为自然语言命令、请求、声明、讲述和/或询问的形式的用户请求。通常，用户请求寻求数字助理作出信息性回答或执行任务。对用户请求的令人满意的响应包括提供所请求的信息性回答、执行所请求的任务或这两者的组合。例如，用户向数字助理提出问题，诸如“我现在在哪里？”。基于用户的当前位置，数字助理回答“你在中央公园西门附近。”用户还请求执行任务，例如“请邀请我的朋友们下周来参加我女朋友的生日聚会。”作为响应，数字助理可通过讲出“好的，马上”来确认请求，然后代表用户将合适的日历邀请发送到用户电子通讯录中列出的用户朋友中的每位朋友。在执行所请求的任务期间，数字助理有时在很长时间段内在涉及多次信息交换的持续对话中与用户进行交互。存在与数字助理进行交互以请求信息或执行各种任务的许多其他方法。除提供言语响应并采取经编程的动作之外，数字助理还提供其他视频或音频形式的响应，例如作为文本、警报、音乐、视频、动画等。
如图1C所示，在一些示例中，数字助理根据客户端-服务器模型来实现。数字助理包括在用户设备104上执行的客户端侧部分2102(下文称为“DA客户端2102”)以及在服务器系统2108上执行的服务器侧部分2106 (下文称为“DA服务器2106”)。DA客户端2102通过一个或多个网络 2110与DA服务器2106通信。DA客户端2102提供客户端侧功能，诸如面向用户的输入和输出处理，以及与DA服务器2106通信。DA服务器2106 为各自位于相应用户设备2104上的任意数量的DA客户端2102提供服务器侧功能。
在一些示例中，DA服务器2106包括面向客户端的I/O接口2112、一个或多个处理模块2114、数据和模型2116以及到外部服务的I/O接口2118。面向客户端的I/O接口2112有利于DA服务器2106的面向客户端的输入和输出处理。一个或多个处理模块2114利用数据和模型2116来处理语音输入并基于自然语言输入来确定用户的意图。此外，一个或多个处理模块2114 基于推断出的用户意图来进行任务执行。在一些示例中，DA服务器2106通过网络2110与外部服务120通信以完成任务或采集信息。到外部服务的I/O 接口2118有利于此类通信。
用户设备2104可以是任何合适的电子设备。在一些示例中，用户设备 2104是便携式多功能设备(例如，上文参考图1A所述的设备100)、多功能设备或另一电子设备(例如，设备600、800、1000)。便携式多功能设备为例如还包含其他功能诸如PDA和/或音乐播放器功能的移动电话。便携式多功能设备的特定示例包括来自Apple Inc.(Cupertino,California)的Apple
Figure BDA0002826515600000441
iPod
Figure BDA0002826515600000442
和
Figure BDA0002826515600000443
设备。便携式多功能设备的其他示例包括但不限于耳塞式耳机/头戴式耳机、扬声器以及膝上型电脑或平板电脑。此外，在一些示例中，用户设备2104是非便携式多功能设备。具体地，用户设备2104是台式计算机、游戏机、扬声器、电视或电视机顶盒。在一些示例中，用户设备2104包括触敏表面(例如，触摸屏显示器和/或触控板)。此外，用户设备2104任选地包括一个或多个其他物理用户接口设备，诸如物理键盘、鼠标和/或操纵杆。下文更详细地描述了电子设备诸如多功能设备的各种示例。
通信网络2110的示例包括局域网(LAN)和广域网(WAN)，例如互联网。通信网络2110使用任何已知的网络协议来实现，包括各种有线或无线协议，诸如以太网、通用串行总线(USB)、FIREWIRE、全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、Wi-Fi、互联网协议语音(VoIP)、Wi-MAX 或任何其他合适的通信协议。
服务器系统2108在一个或多个独立式数据处理装置或分布式计算机网络上实现。在一些示例中，服务器系统2108还采用第三方服务提供方(例如，第三方云服务提供方)的各种虚拟设备和/或服务来提供服务器系统 2108的潜在计算资源和/或基础结构资源。
在一些示例中，用户设备2104经由第二用户设备2122与DA服务器 2106通信。第二用户设备2122与用户设备2104类似或相同。用户设备2104 被配置为经由直接通信连接(诸如蓝牙、NFC、BTLE等)或者经由有线或无线网络(诸如局域Wi-Fi网络)而通信地耦接到第二用户设备2122。在一些示例中，第二用户设备2122被配置为充当用户设备2104与DA服务器2106之间的代理。例如，用户设备2104的DA客户端2102被配置为经由第二用户设备2122向DA服务器2106传输信息(例如，在用户设备2104处接收的用户请求)。DA服务器2106处理该信息并经由第二用户设备2122 将相关数据(例如，响应于用户请求的数据内容)返回到用户设备2104。
在一些示例中，用户设备2104被配置为将针对数据的缩略请求发送到第二用户设备2122，以减少从用户设备2104传输的信息量。第二用户设备 2122被配置为确定添加到该缩略请求的补充信息，以生成完整的请求来传输到DA服务器2106。该系统架构可有利地通过使用具有较强通信能力和/ 或电池电力的第二用户设备2122(例如，移动电话、膝上型计算机、平板电脑等)作为到DA服务器2106的代理，允许具有有限通信能力和/或有限电池电力的用户设备2104(例如，手表或类似的紧凑型电子设备)访问DA 服务器2106提供的服务。虽然图1C中仅示出两个用户设备2104和2122，但应当理解，在一些示例中，系统2100包括在此代理配置中被配置为与DA 服务器系统2106通信的任意数量和类型的用户设备。
尽管图1C中所示的数字助理包括客户端侧部分(例如，DA客户端 2102)和服务器侧部分(例如，DA服务器2106)两者，但在一些示例中，数字助理的功能被实现为安装在用户设备上的独立式应用程序。此外，数字助理的客户端部分与服务器部分之间的功能划分在不同的具体实施中可变化。例如，在一些示例中，DA客户端为仅提供面向用户的输入和输出处理功能并将数字助理的所有其他功能委派给后端服务器的瘦客户端。
图2示出了根据一些实施方案的具有触摸屏112的便携式多功能设备 100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施方案以及下文所述的其他实施方案中，用户能够通过例如利用一根或多根手指202(在图中未按比例绘制)或一支或多支触笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中，当用户中断与一个或多个图形的接触时，将发生对一个或多个图形的选择。在一些实施方案中，手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下，不经意地与图形接触不会选择图形。例如，当与选择对应的手势是轻击时，在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100任选地还包括一个或多个物理按钮，诸如“home”或菜单按钮204。如前所述，菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。另选地，在一些实施方案中，菜单按钮被实现为被显示在触摸屏112上的GUI中的软键。
在一些实施方案中，设备100包括触摸屏112、菜单按钮204、用于使设备开机/关机和用于锁定设备的下压按钮206、一个或多个音量调节按钮 208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机；通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备；和/或对设备进行解锁或发起解锁过程。在另选的实施方案中，设备100还通过麦克风113接受用于激活或去激活某些功能的语音输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165，和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施方案中，设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如，家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于使这些部件互连的一个或多个通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时称作芯片组)。设备300包括具有显示器340 的输入/输出(I/O)接口330，该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如，类似于以上参考图1A 所述的一个或多个触觉输出发生器167)、传感器359(例如，光学传感器、加速度传感器、接近传感器、触敏传感器和/或接触强度传感器(类似于以上参考图1A所述的一个或多个接触强度传感器165))。存储器370包括高速随机存取存储器，诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备；并且任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU310定位的一个或多个存储设备。在一些实施方案中，存储器370存储与便携式多功能设备100(图1A)的存储器 102中存储的程序、模块和数据结构类似的程序、模块和数据结构或其子集。此外，存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块和数据结构。例如，设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390，而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中的上述元素中的每个元素任选地存储于先前提到的存储器设备的一个或多个存储器设备中。上述模块中的每个模块对应于用于执行上述功能的指令集。上述模块或程序(例如，指令集)不必被实现为单独的软件程序、过程或模块，并且因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中，存储器370任选地存储上述模块和数据结构的子集。此外，存储器370任选地存储上文未描述的附加模块和数据结构。
现在将注意力转到任选地在例如便携式多功能设备100上实现的用户界面的实施方案。
图4A示出了根据一些实施方案的便携式多功能设备100上的应用程序菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中，用户界面400包括以下元件或者其子集或超集：
·一个或多个无线通信诸如蜂窝信号和Wi-Fi信号的一个或多个信号强度指示器402；
·时间404；
·蓝牙指示器405；
·电池状态指示器406；
·具有针对常用应用程序的图标的托盘408，该图标诸如：
ο电话模块138的被标记为“电话”的图标416，该图标416任选地包括未接来电或语音留言的数量的指示符414；
ο电子邮件客户端模块140的被标记为“邮件”的图标418，该图标418任选地包括未读电子邮件的数量的指示符410；
ο浏览器模块147的标记为“浏览器”的图标420；以及
ο视频和音乐播放器模块152(也称为iPod(Apple Inc.的商标) 模块152)的被标记为“iPod”的图标422；以及
·其他应用的图标，诸如：
οIM模块141的被标记为“消息”的图标424；
ο日历模块148的被标记为“日历”的图标426；
ο图像管理模块144的被标记为“照片”的图标428；
ο相机模块143的被标记为“相机”的图标430；
ο在线视频模块155的被标记为“在线视频”的图标432；
ο股市桌面小程序149-2的被标记为“股市”的图标434；
ο地图模块154的被标记为“地图”的图标436；
ο天气桌面小程序149-1的被标记为“天气”的图标438；
ο闹钟桌面小程序149-4的被标记为“时钟”的图标440；
ο健身支持模块142的被标记为“健身支持”的图标442；
ο记事本模块153的标记为“记事本”的图标444；以及
ο设置应用程序或模块的被标记为“设置”的图标446，该图标提供对设备100及其各种应用程序136的设置的访问。
应当指出的是，图4A中示出的图标标签仅是示例性的。例如，视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。对于各种应用程序图标任选地使用其他标签。在一些实施方案中，相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中，特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450(例如，触摸屏显示器112)分开的触敏表面451(例如，图3的平板或触控板355)的设备(例如，图3的设备 300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451 上的接触的强度的一个或多个接触强度传感器(例如，传感器359中的一个或多个传感器)和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器357。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出以下示例中的一些示例，但是在一些实施方案中，设备检测与显示器分开的触敏表面上的输入，如图4B中所示。在一些实施方案中，触敏表面(例如，图4B中的451)具有与显示器(例如，450)上的主轴(例如，图4B中的453)对应的主轴(例如，图4B中的452)。根据这些实施方案，设备检测在与显示器上的相应位置对应的位置(例如，在图4B中，460对应于468并且462对应于470)处与触敏表面451的接触(例如，图4B中的460和462)。这样，在触敏表面(例如，图4B中的451)与多功能设备的显示器(图4B中的450)分开时，由设备在触敏表面上检测到的用户输入(例如，接触460和462以及它们的移动)被该设备用于操控显示器上的用户界面。应当理解，类似的方法任选地用于本文所述的其他用户界面。
另外，虽然主要是参考手指输入(例如，手指接触、单指轻击手势、手指轻扫手势)来给出下面的示例，但是应当理解的是，在一些实施方案中，这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如，基于鼠标的输入或触笔输入)替代。例如，轻扫手势任选地由鼠标点击(例如，而不是接触)，之后是光标沿着轻扫的路径的移动(例如，而不是接触的移动)替代。又如，轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如，代替对接触的检测，之后是停止检测接触)替代。类似地，当同时检测到多个用户输入时，应当理解的是，多个计算机鼠标任选地被同时使用，或鼠标和手指接触任选地被同时使用。
图5A示出了示例性个人电子设备500。设备500包括主体502。在一些实施方案中，设备500可包括相对于设备100和300(例如，图1A至图 4B)所述的特征中的一些或全部特征。在一些实施方案中，设备500具有在下文中称为触摸屏504的触敏显示屏504。作为触摸屏504的替代或补充，设备500具有显示器和触敏表面。与设备100和300的情况一样，在一些实施方案中，触摸屏504(或触敏表面)任选地包括用于检测所施加的接触 (例如，触摸)强度的一个或多个强度传感器。触摸屏504(或触敏表面) 的一个或多个强度传感器可提供表示触摸的强度的输出数据。设备500的用户界面可基于触摸的强度来对触摸作出响应，这意味着不同强度的触摸可调用设备500上的不同用户界面操作。
用于检测和处理触摸强度的示例性技术见于例如以下相关专利申请中： 2013年5月8日提交的名称为“Device,Method,and Graphical User Interface for DisplayingUser Interface Objects Corresponding to an Application”的国际专利申请序列No.PCT/US2013/040061，发布为WIPO专利公开No. WO/2013/169849；以及2013年11月11日提交的名称为“Device,Method, and Graphical User Interface for TransitioningBetween Touch Input to Display Output Relationships”的国际专利申请序列No.PCT/US2013/069483，发布为WIPO专利公开No.WO/2014/105276，该每个专利申请据此全文以引用方式并入。
在一些实施方案中，设备500具有一个或多个输入机构506和508。输入机构506和508(如果包括的话)可以是物理形式的。物理输入机构的示例包括下压按钮和可旋转机构。在一些实施方案中，设备500具有一个或多个附接机构。此类附接机构(如果包括的话)可允许将设备500与例如帽子、眼镜、耳环、项链、衬衣、夹克、手镯、表带、手链、裤子、皮带、鞋子、钱包、背包等附接。这些附接机构允许用户穿戴设备500。
图5B示出了示例性个人电子设备500。在一些实施方案中，设备500 可包括参考图1A、图1B和图3所述的部件中的一些或全部部件。设备500 具有总线512，该总线将I/O部分514与一个或多个计算机处理器516和存储器518操作性地耦接。I/O部分514可连接到显示器504，该显示器可具有触敏部件522并且任选地具有强度传感器524(例如，接触强度传感器)。此外，I/O部分514可与通信单元530连接，用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用程序和操作系统数据。设备500可包括输入机构506和/或508。例如，输入机构506任选地是可旋转输入设备或者可按压输入设备以及可旋转输入设备。在一些示例中，输入机构508任选地是按钮。
在一些示例中，输入机构508任选地是麦克风。个人电子设备500任选地包括各种传感器，诸如GPS传感器532、加速度计534、定向传感器540 (例如，罗盘)、陀螺仪536、运动传感器538和/或其组合，所有这些设备均可操作地连接到I/O部分514。
个人电子设备500的存储器518可包括用于存储计算机可执行指令的一个或多个非暂态计算机可读存储介质，这些计算机可执行指令在由一个或多个计算机处理器516执行时例如可使计算机处理器执行下文所述的技术。计算机可读存储介质可以是可有形地包含或存储计算机可执行指令以供指令执行系统、装置和设备使用或与其结合的任何介质。在一些示例中，存储介质是暂态计算机可读存储介质。在一些示例中，存储介质是非暂态计算机可读存储介质。非暂态计算机可读存储介质可包括但不限于磁存储装置、光学存储装置、和/或半导体存储装置。此类存储装置的示例包括磁盘、基于CD、DVD或蓝光技术的光盘，以及持久性固态存储器诸如闪存、固态驱动器等。个人电子设备500不限于图5B的部件和配置，而是可包括多种配置中的其他部件或附加部件。
如本文所用，术语“示能表示”是指任选地在设备100、300、500和/ 或600(图1A、图3和图5A至图5B)的显示屏上显示的用户交互式图形用户界面对象。例如，图像(例如，图标)、按钮和文本(例如，超链接) 任选地各自构成示能表示。
如本文所用，术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施中，光标充当“焦点选择器”，使得当光标在特定用户界面元素 (例如，按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如，图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如，按压输入)的情况下，该特定用户界面元素根据所检测到的输入而被调节。在包括能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如，图1A中的触敏显示器系统112或图4A中的触摸屏112)的一些具体实施中，在触摸屏上所检测到的接触充当“焦点选择器”，使得当在触摸屏显示器上在特定用户界面元素(例如，按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如，由接触进行的按压输入)时，该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中，焦点从用户界面的一个区域移动到用户界面的另一个区域，而无需光标的对应移动或触摸屏显示器上的接触的移动(例如，通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮)；在这些具体实施中，焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式，焦点选择器通常是由用户控制的以便递送与用户界面的用户预期的交互(例如，通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如，在触敏表面(例如，触控板或触摸屏)上检测到按压输入时，焦点选择器(例如，光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如说明书和权利要求中所使用的，接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中，特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如，在检测到接触之后，在检测到接触抬离之前，在检测到接触开始移动之前或之后，在检测到接触结束之前，在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如，0.05 秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者：接触的强度的最大值、接触的强度的均值、接触的强度的平均值、接触的强度的前10％处的值、接触的强度的半最大值、接触的强度的90％最大值等。在一些实施方案中，在确定特征强度时使用接触的持续时间(例如，在特征强度是接触的强度在时间上的平均值时)。在一些实施方案中，将特征强度与一组一个或多个强度阈值进行比较，以确定用户是否已执行操作。例如，该组一个或多个强度阈值任选地包括第一强度阈值和第二强度阈值。在该示例中，特征强度未超过第一阈值的接触导致第一操作，特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作，而特征强度超过第二阈值的接触导致第三操作。在一些实施方案中，使用特征强度与一个或多个阈值之间的比较来确定是否要执行一个或多个操作(例如，是执行相应操作还是放弃执行相应操作)而不是用于确定执行第一操作还是第二操作。
图5C示出了利用多个强度传感器524A-524D检测触敏显示屏504上的多个接触552A-552E。图5C还包括强度图，其相对于强度单位示出了强度传感器524A-524D的当前强度测量值。在该实施例中，强度传感器524A和 524D的强度测量值均是9个强度单位，并且强度传感器524B和524C的强度测量值均是7个强度单位。在一些具体实施中，累积强度是多个强度传感器524A-524D的强度测量值之和，在该实施例中是32个强度单位。在一些实施方案中，每个接触都被分配了相应强度，即累积强度的一部分。图5D 示出了基于其与力554中心的距离而向接触552A-552E分配累积强度。在该实施例中，接触552A、552B和552E中的每个接触都被分配以累积强度的 8个强度单位的接触的强度，并且接触552C和552D的中每个接触都被分配以累积强度的4个强度单位的接触的强度。更一般地，在一些具体实施中，每个接触j都根据预定义的数学函数Ij＝A·(Dj/ΣDi)被分配相应强度Ij，其为累积强度A的一部分，其中Dj是相应接触j距力中心的距离，并且ΣDi 是所有相应接触(例如，i＝1到最后)距力中心的距离之和。可利用类似于或等同于设备100、300、500或600的电子设备来执行参考图5C至图5D 所述的操作。在一些实施方案中，接触的特征强度基于接触的一个或多个强度。在一些实施方案中，强度传感器用于确定单个特征强度(例如，单个接触的单个特征强度)。应当指出，强度图不是所显示用户界面的部分，而是包括在图5C-图5D中以辅助读者。
在一些实施方案中，识别手势的一部分以用于确定特征强度。例如，触敏表面任选地接收连续的轻扫接触，该连续的轻扫接触从起始位置过渡并到达结束位置，在该结束位置处，接触强度增加。在该示例中，接触在结束位置处的特征强度任选地仅基于连续轻扫接触的一部分，而不是整个轻扫接触(例如，仅结束位置处的轻扫接触的部分)。在一些实施方案中，在确定接触的特征强度之前任选地向轻扫接触的强度应用平滑算法。例如，平滑化算法任选地包括以下各项中的一种或多种：不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法和/或指数平滑化算法。在一些情况下，这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷，以实现确定特征强度的目的。
任选地相对于一个或多个强度阈值诸如接触检测强度阈值、轻按压强度阈值、深按压强度阈值和/或一个或多个其他强度阈值来表征触敏表面上的接触强度。在一些实施方案中，轻按压强度阈值对应于这样的强度：在该强度下设备将执行通常与点击物理鼠标或触控板的按钮相关联的操作。在一些实施方案中，深按压强度阈值对应于这样的强度：在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中，当检测到特征强度低于轻按压强度阈值(例如，并且高于标称接触检测强度阈值，比标称接触检测强度阈值低的接触不再被检测到)的接触时，设备将根据接触在触敏表面上的移动来移动焦点选择器，而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲，除非另有陈述，否则这些强度阈值在不同组的用户界面附图之间是一致的。
接触特征强度从低于轻按压强度阈值的强度增大到介于轻按压强度阈值与深按压强度阈值之间的强度有时被称为“轻按压”输入。接触特征强度从低于深按压强度阈值的强度增大到高于深按压强度阈值的强度有时被称为“深按压”输入。接触特征强度从低于接触检测强度阈值的强度增大到介于接触检测强度阈值与轻按压强度阈值之间的强度有时被称为检测到触摸表面上的接触。接触特征强度从高于接触检测强度阈值的强度减小到低于接触检测强度阈值的强度有时被称为检测到接触从触摸表面抬离。在一些实施方案中，接触检测强度阈值为零。在一些实施方案中，接触检测强度阈值大于零。
在本文中所述的一些实施方案中，响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)执行的相应按压输入来执行一个或多个操作，其中至少部分地基于检测到该接触(或多个接触) 的强度增大到高于按压输入强度阈值而检测到相应按压输入。在一些实施方案中，响应于检测到相应接触的强度增大到高于按压输入强度阈值(例如，相应按压输入的“向下冲程”)来执行相应操作。在一些实施方案中，按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于按压输入强度阈值，并且响应于检测到相应接触的强度随后减小到低于按压输入阈值(例如，相应按压输入的“向上冲程”) 来执行相应操作。
图5E-图5H示出了对手势的检测，手势包括与接触562的强度从低于图5E中的轻按压强度阈值(例如，“ITL”)的强度增大到高于图5H中的深按压强度阈值(例如，“ITD”)的强度对应的按压输入。在所显示的包括预定义区域574中显示的应用图标572A-572D的用户界面570上，在与应用2对应的应用图标572B上方显示光标576时，在触敏表面560上检测利用接触562执行的手势。在一些实施方案中，在触敏显示器504上检测到手势。强度传感器检测触敏表面560上的接触的强度。该设备确定接触562 的强度在深按压强度阈值(例如，“ITD”)以上达到峰值。在触敏表面 560上保持接触562。响应于检测到手势，并且根据在手势期间强度升高到深按压强度阈值(例如，“ITD”)以上的接触562，显示最近为应用2打开的文档的缩比表示578A-578C(例如，缩略图)，如图5F-图5H所示。在一些实施方案中，与一个或多个强度阈值相比，强度是接触的特征强度。应当指出，针对接触562的强度图不是所显示用户界面的部分，而是包括在图5E-图5H中以辅助读者。
在一些实施方案中，表示578A-578C的显示包括动画。例如，表示 578A一开始显示于应用图标572B的附近，如图5F所示。随着动画的进行，表示578A向上移动，并在应用图标572B附近显示表示578B，如图5G中所示。然后，表示578A向上移动，578B朝表示578A向上移动，并且在应用图标572B附近显示表示578C，如图5H中所示。表示578A-578C在图标 572B上方形成阵列。在一些实施方案中，动画根据接触562的强度进展，如图5F-图5G中所示，其中表示578A-578C出现并随着接触562的强度向深按压强度阈值(例如，“ITD”)增大而向上移动。在一些实施方案中，动画进展所依据的强度是接触的特征强度。可利用类似于或等同于设备100、 300、500或600的电子设备来执行参考图5E至图5H所述的操作。
在一些实施方案中，设备采用强度滞后以避免有时被称为“抖动”的意外输入，其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如，滞后强度阈值比按压输入强度阈值低X个强度单位，或滞后强度阈值是按压输入强度阈值的75％、90％或某个合理比例)。因此，在一些实施方案中，按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值，并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值(例如，相应按压输入的“向上冲程”)来执行相应操作。类似地，在一些实施方案中，仅在设备检测到接触强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触强度随后减小到等于或低于滞后强度的强度时才检测到按压输入，并且响应于检测到按压输入(例如，根据环境，接触强度增大或接触强度减小)来执行相应操作。
为了容易解释，任选地，响应于检测到以下各种情况中的任一种情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述：接触强度增大到高于按压输入强度阈值、接触强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触强度减小到低于按压输入强度阈值、和/或接触强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外，在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例中，任选地响应于检测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。
图5I示出了示例性电子设备580。设备580包括主体580A。在一些实施方案中，设备580可包括相对于设备100、300和500(例如，图1A至图 5B)所述的特征中的一些或全部特征。在一些实施方案中，设备580具有一个或多个扬声器580B(隐藏在主体580A中)、一个或多个麦克风580C、一个或多个触敏表面580D以及一个或多个显示器580E。另选地或作为显示器和触敏表面580D的补充，该设备还具有触敏显示器(也被称为触摸屏)。与设备100、300和500的情况一样，在一些实施方案中，触敏表面580D (或触摸屏)任选地包括用于检测所施加的接触(例如，触摸)的强度的一个或多个强度传感器。触敏表面580D(或触摸屏)的所述一个或多个强度传感器可提供表示触摸的强度的输出数据。设备580的用户界面可基于触摸的强度来对这些触摸作出响应，这意味着不同强度的触摸可调用设备580 上的不同用户界面操作。在一些实施方案中，所述一个或多个显示器580E 是一个或多个发光二极管(LED)。例如，显示器可以是单个LED、LED群集 (例如，红色、绿色和蓝色的LED)、多个分立LED、多个分立LED群集或一个或多个LED的其他布置。例如，显示器580E可以是以圆形(例如，环形)布置的九个分立LED群集的阵列。在一些示例中，所述一个或多个显示器包含一个或多个另一种类型的发光元件。
图5J描绘了示例性个人电子设备580。在一些实施方案中，设备580 可包括相对于图1A、图1B、图3和图5A至图5B所述的部件中的一些或全部部件。设备580具有将I/O部分594与一个或多个计算机处理器596和存储器598操作性地耦接的总线592。I/O部分594可连接到显示器582，该显示器可具有触敏部件584并且任选地具有强度传感器585(例如，接触强度传感器)。在一些实施方案中，触敏部件584是与显示器582分离的部件。此外，I/O部分594可与通信单元590连接，以用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用程序和操作系统数据。设备580可包括输入机构588。在一些示例中，输入机构588任选地是按钮。在一些示例中，输入机构588任选地是麦克风。输入机构588任选地是多个麦克风(例如，麦克风阵列)。
电子设备580包括用于输出音频的扬声器586。设备580可包括音频电路(例如，在I/O部分594中)，该音频电路接收音频数据、将音频数据转换为电信号，并且将电信号传输给扬声器586。扬声器586将电信号转换为人类可听到的声波。该音频电路(例如，在I/O部分594中)还接收由麦克风(例如，输入机构588)从声波转换的电信号。该音频电路(例如，在I/O部分594中)将该电信号转换为音频数据。音频数据任选地由I/O部分 594检索自和/或传输至存储器598和/或RF电路(例如，在通信单元590 中)。
个人电子设备580的存储器598可包括用于存储计算机可执行指令的一个或多个非暂态计算机可读存储介质，这些计算机可执行指令在由一个或多个计算机处理器596执行时例如可使得计算机处理器执行下文所述的技术，包括过程1500、1700和1900(图15、图17和图19)。计算机可读存储介质可以是可有形地包含或存储计算机可执行指令以供指令执行系统、装置和设备使用或与其结合的任何介质。在一些示例中，存储介质是暂态计算机可读存储介质。在一些示例中，存储介质是非暂态计算机可读存储介质。非暂态计算机可读存储介质可包括但不限于磁存储装置、光学存储装置、和/或半导体存储装置。此类存储装置的示例包括磁盘、基于CD、DVD或蓝光技术的光盘，以及持久性固态存储器诸如闪存、固态驱动器等。个人电子设备580不限于图5J的部件和配置，而是可包括多种配置的其他部件或附加部件。
现在将注意力转到在电子设备(诸如便携式多功能设备100、设备300、设备500或设备600)上实现的用户界面(“UI”)以及相关联的过程的实施方案。
图6A至图6R示出了根据一些实施方案的用于从电子设备控制附件 (例如，灯、电源板、恒温器)的示例性用户界面。这些附图中的用户界面用于示出下文所述的过程，包括图7A至图7B中的过程。
图6A示出了电子设备600上的主界面602，其包括已能够被设备600 控制的附件(例如，可控外部设备，诸如风扇灯、枝形吊灯、恒温器、扬声器、电源板和插座)的示能表示。主界面602包括用于添加新附件或场景 (例如，与用于执行任务的条件相关联的一组任务)的示能表示640、描述所选择的附件的当前状态的状态部分、包括对应于自动化任务组的示能表示的场景部分以及收藏夹部分604，该收藏夹部分包括对应于已添加到设备 600(例如，添加到设备600的应用程序)的相应附件(例如，带灯风扇、枝形吊灯、恒温器、扬声器、电源板和插座)的附件示能表示或图块(例如，604A至604F)。收藏夹部分604包括针对附件的附件示能表示，这些附件在设置过程期间已与设备600配对以使设备600能够传输配置该附件的命令。如果在设置期间设备600接收到将附件包括在收藏夹中的指示，则设备600在收藏夹部分604中显示附件示能表示(例如，604A至604F)。相对于图10A至图10B进一步讨论附件设置过程。
在设置期间，设备600基于从附件接收的信息来确定该附件是第一类型还是第二类型。基于该附件类型，设备600创建对应于该附件的图块，如果该附件是第一类型，则该图块将在被轻击时使得某一功能得以执行，或者如果附件是第二类型，则该图块将使得某一用户界面得以显示。如果附件具有单个功能(例如，枝形吊灯可打开或关闭)或者如果在附件支持多个功能(例如，带风扇吊灯具有风扇功能和灯功能)的情况下该附件具有主要功能(例如，风扇灯具有指定的作为附件的主要功能的风扇功能)，则该附件是第一类型。在一些实施方案中，如果附件的主要功能支持二元操作状态，则该附件(例如，枝形吊灯)是第一类型的附件，其中该功能使得该附件在两种可能状态(例如，开状态或关状态)中的一种状态下操作。如果附件具有多个功能(例如，具有加热功能、冷却功能和风扇功能的恒温器)但不与主要功能相关联，则该附件是第二类型。在一些实施方案中，如果与附件相关联的主要功能具有两个以上的操作状态(例如，恒温器具有设置温度这一主要功能，但是恒温器具有加热、冷却和风扇功能)，则该附件是第二类型。基于对附件类型的确定，设备600创建对应于附件的附件示能表示(例如，604A至604F)以用于在主界面602中显示。当设备600检测到对用于第一类型的附件的附件示能表示的选择时，设备 600传输执行与该附件相关联的单个功能或主要功能的命令。例如，在枝形吊灯图块上轻击使得枝形吊灯在打开或关闭之间切换。如果设备600确定附件具有主要功能，则对附件示能表示的选择使得设备600向该附件传输执行主要功能而不执行该附件的其他功能的命令。当设备600检测到用于第二类型的附件的附件示能表示的选择时，设备600显示附件界面，该附件界面包括用于配置该附件以执行与该附件相关联的多个功能中的一个或多个功能的控件示能表示(例如，图6F的608A至608C)。例如，在恒温器或扬声器图块上轻击使得显示配置界面而不是执行特定功能。
图6A至图6B示出了当选择枝形吊灯附件示能表示604B时打开枝形吊灯。枝形吊灯附件示能表示604B还被更新以示出该枝形吊灯的更新状态。在图6A中，设备600显示对应于枝形吊灯的枝形吊灯附件示能表示604B，该枝形吊灯是具有打开/关闭枝形吊灯的单个功能的第一类型的附件。枝形吊灯附件示能表示604B包括枝形吊灯的图形表示604B1和文本当前状态 604B2，该图形表示指示该枝形吊灯当前关闭，该文本当前状态指示该枝形吊灯处于关闭状态。设备600检测与对主界面602中的枝形吊灯附件示能表示604B的选择相对应的输入(例如，轻击)650A。响应于检测到输入 650A，设备600向枝形吊灯传输将该枝形吊灯从先前关闭状态转变为打开状态的命令。
如图6B所示，响应于检测到输入650A，设备600显示更新的枝形吊灯附件示能表示604B，该示能表示包括示出枝形吊灯具有打开的灯泡的更新的图形表示604B1和指示枝形吊灯处于打开状态的更新的当前状态604B2。在一些实施方案中，图形表示604B1包括示出附件状态的动画。在一些实施方案中，响应于设备600检测到枝形吊灯附件示能表示604B上的长按 (或深按)，设备600显示枝形吊灯界面，该枝形吊灯界面包括用于切换灯的打开/关闭的控件示能表示，如图8B中进一步所示。
图6C至图6F示出了当选择风扇-灯图块604A时显示打开风扇-灯附件界面610A以用于控制带灯吊扇的动画。在图6C中，设备600显示对应于带灯吊扇的风扇-灯附件示能表示604A，该带灯吊扇是具有对应于风扇部件和灯部件的多种功能(例如，打开/关闭风扇以及打开/关闭灯)的第二类型的附件。风扇-灯附件示能表示604A是对应于风扇和灯两者的成组附件示能表示。因此，风扇和灯两者均可通过风扇-灯附件界面610A来配置，该风扇 -灯附件界面在风扇-灯附件示能表示604A被选择时被显示在设备600上。风扇-灯附件示能表示604A包括示出风扇部件和灯部件的图形表示604A1 以及指示风扇和灯的当前状态的文本604A2，该风扇和灯均处于关闭状态。图形表示604A1包括与附件相关联的每个部件的表示。在一些实施方案中，图形表示604A1包括具有与主要功能不同的功能的每个部件的表示。在一些示例中，当该主要功能是打开/关闭吊扇时，吊扇和灯两者均在图形表示 604A1中显示，因为灯具有与打开/关闭风扇这一主要功能不同的功能(例如，打开/关闭灯)。在一些实施方案中，当主要功能对于部件中的所有部件(诸如具有插座的电源板)相同时，图形表示604A1仅显示电源板而不显示各个插座。类似地，当前状态604A2包括与附件相关联的具有不同功能的每个部件的状态。在一些实施方案中，当前状态包括在图形表示 604A1中显示的对应部件的状态。如果在图形表示604A1中未显示单个部件，则也不显示该单个部件的当前状态604A2。
在图6C中，设备600检测与对主界面602中的风扇-灯附件示能表示 604A的选择相对应的输入(例如，轻击)650B。在图6C中，吊扇灯为第二类型的附件，其中该附件不具有与其相关联的主要功能。因此，当选择风扇-灯附件示能表示610A时，显示风扇-灯附件界面610A。响应于检测到输入650B，设备600通过显示将风扇-灯附件示能表示604A转换为风扇-灯附件界面610A的动画来显示风扇-灯附件界面610A。
图6D至图6F示出了风扇-灯附件示能表示604A转换为风扇-灯附件界面610A的动画。图6D示出了当风扇-灯附件示能表示604A的尺寸增大时，对应的图形表示604A1和当前状态604A2的尺寸也成比例地扩展。风扇-灯附件示能表示604A从风扇-灯附件示能表示604A的当前位置扩展。当风扇 -灯附件示能表示604A扩展时，如果风扇-灯附件界面610A保持在当前位置中扩展，则设备600确定是否将在屏幕外显示风扇-灯附件界面610A的一部分。如图6E所示，根据确定将在屏幕外显示风扇-灯附件界面610A的一部分，设备600将风扇-灯附件界面610A与显示器603的左边界对齐或将其快速移动到该显示器的左边界处，使得风扇-灯附件界面610A的任何部分都不显示在屏幕外。在一些实施方案中，根据确定风扇-灯附件界面610的一部分将不显示在屏幕外，设备600在当前位置中显示风扇-灯附件界面610A，而不将风扇-灯附件示能表示604A与显示器603的左边界或右边界对齐。
图6F示出了具有用于改变吊扇和灯的附加特征诸如灯光颜色的控件的风扇-灯附件示能表示610A。图6F示出了完全扩展的风扇-灯附件示能表示 610A，其包括风扇和灯的成比例增大的图形表示610A1以及成比例增大的指示风扇和灯的当前状态的文本610A2。风扇-灯附件610A的图形表示 610A1与风扇-灯附件示能表示604A的图形表示604A1匹配。类似地，风扇-灯附件界面610A中的当前状态610A1与风扇-灯附件示能表示604A中的状态文本604A2匹配。风扇-灯附件界面610A包括用于调节风扇速度的控件示能表示608A和用于调节灯的亮度的控件示能表示608B。风扇-灯附件界面610A还包括改变灯光颜色的颜色选择控件608C。如下文相对于8A 至图8J进一步所述的，控件示能表示608A至608C显示在风扇-灯附件界面 610A的第一区域中，而设置部分620显示在风扇-灯附件界面610A的第二区域中。风扇-灯附件界面610A还包括设置快捷方式示能表示612。设置快捷方式示能表示612显示在风扇-灯附件界面610的第一区域的显示部分或可见部分的右下角。响应于设备600检测到对设置快捷方式示能表示612的选择，设备600将显示快速移动到显示器603的顶部部分处的设置部分620 并且滚动通过第一区域中的剩余控件。在一些实施方案中，设置快捷方式示能表示612显示在风扇-灯附件界面610A的第一区域中的控件中的所有控件的底部。
图6F显示了附件界面610A上的控件的示例性布局。设备600基于附件包括的控件和传感器示能表示的数量以及控件的分级结构(例如，608A 至608C)来确定附件界面上的控件的布局。当打开附件界面610A时，显示与主要功能相对应的主要控件(例如，608A至608B)。与主要功能不相关联的辅助控件(例如，608C)显示在主要控件下方。如果辅助控件定位在附件界面610A的溢出区域中，则最初可能不显示辅助控件。如下所述， 8B至图8C进一步示出了控件在附件界面(例如，810B)的第一区域中的定位。
设备600基于要显示的控件示能表示和传感器示能表示的数量来确定风扇-灯附件界面610A中的控件示能表示608A至608C的布局。设备600 确定附件的功能包括对应于风扇部件和灯部件的两个功能。当设备600检测到吊扇和灯附件具有对应于该附件的每个附件的主要功能(例如，打开/关闭风扇和打开/关闭灯)的两个或更少的控件示能表示时，设备600在风扇- 灯附件界面610A中以并排布置的方式显示对应于风扇功能的控件608A和对应于灯功能的控件608B，如图6F所示。当附件存在多于两个控件示能表示时，设备600以图8B中的枝形吊灯附件界面810B所示的顶部和底部布置来显示控件示能表示808A至808C。在一些实施方案中，风扇-灯附件界面包括附加控件示能表示，这些附加控件示能表示可在溢出部分中显示，该溢出部分在附件界面向下滚动时显示，如相对于图8B至图8D进一步讨论和示出的。
在一些实施方案中，吊扇和灯附件具有由该吊扇和灯附件所支持的多种功能中的打开/关闭风扇的主要风扇功能。由于吊扇和灯附件具有主要功能，因此设备600确定吊扇和灯附件是第一类型的附件。因此，响应于设备600接收到对应于对风扇-灯附件604A的选择的输入(例如，轻击)，设备 600传输执行主要风扇功能(例如，打开风扇)的命令，而不是显示风扇灯附件界面610A。设备600不传输执行吊扇和灯附件的任何其他辅助功能的命令(例如，灯未被打开)。在一些实施方案中，不能将主要功能设置为辅助功能(例如，不能将主要功能改变为打开/关闭灯)。在一些实施方案中，用户可将主要功能重新分配给不同的功能(例如，辅助功能)，诸如选择风扇-灯附件示能表示使得设备600传输打开灯的命令。由于吊扇和灯附件是第一类型的附件，因此设备600响应于对附件示能表示610A上的长按(或深按)而显示风扇-灯界面610A。
图6F还示出了通过风扇-灯界面610A中的控件来改变风扇速度和灯光设置。在图6F中，设备600检测对应于对控件示能表示608A的选择的输入650C，该控件示能表示对应于将风扇设置为最大速度的50％的速度。在图6G中，响应于检测到输入650C，设备600更新图形表示610A1以指示风扇打开，并且更新当前状态610A2以反映风扇被设置为50％的速度同时灯保持关闭。在一些实施方案中，响应于检测到输入650C，设备600更新风扇-灯附件界面610A中的图形表示610A1以包括旋转风扇的动画以指示风扇处于打开状态。
在图6G中，设备600检测对应于对控件608B的选择的输入650D1(例如，轻扫)，该控件对应于将灯打开到最大亮度的75％的亮度。在图6H中，响应于检测到输入650D1，设备600更新图形表示610A1以指示灯打开，并且更新当前状态610A2，指示灯已被打开到75％的亮度同时指示风扇被设置为50％的速度。同样在图6G中，设备600检测对应于对改变灯泡颜色的第三颜色的选择的输入650D2(例如，轻击)。响应于检测到输入650D1 并且如图6H所示，设备600更新图形表示610A1以包括与处于打开状态的灯的所选择的颜色匹配的彩色灯泡的图像，如相对于图8C至图8D进一步讨论的。
图6H示出了用户如何能够通过轻击设置快捷方式示能表示612来访问设置部分620而不是滚动到屏幕底部来访问设置部分620。在图6H中，设备600检测对应于对设置快捷方式示能表示612的选择的输入(例如，轻击)650E。在图6I中，响应于检测到输入650E，设备600在风扇-灯附件界面610中显示与吊灯和风扇的设置相对应的设置部分620。在一些实施方案中，如相对于8A至图8J进一步所述和示出的，设备600响应于设备600检测到使得风扇-灯附件界面610A滚动到第二区域(例如，溢出区域)的输入而显示设置部分620，其中该第二区域在显示控件608A至608D的第一区域下方。设置部分620包括示出吊扇和灯附件的当前状态的图形表示610A1 和当前状态610A2。设置部分620包括成组部分，该成组部分包括“与其他附件成组”示能表示614A和附件示能表示614B。“与其他附件成组”示能表示614A对应于将卧室中的吊扇与相同类型的另一附件(例如，客厅中的另一风扇)成组。
图6I至图6K示出了将风扇-灯附件组分成具有单独附件示能表示(例如，614G和614H)和单独附件界面(例如，610G和610H)的两个单独附件。如图6J所示，通过从来自风扇-灯附件界面610A的附件设置中选择显示为单独图块示能表示616来将风扇-灯附件组分离。风扇和灯各自在附件组被分离成两个单独的附件示能表示之后保持其对应的设置。在图6I中，设备600检测对应于对附件示能表示614B的选择的输入(例如，轻击) 650F。在图6J中，响应于检测到输入650F，设备600显示附件界面622，该附件界面包括对应于该组中的每个相应部件(例如，风扇和灯)的示能表示618A至618B以及用于将灯与风扇分离的分离示能表示616。
在图6J中，设备600检测对应于对分离示能表示616的选择的输入 (例如，轻击)650G。在图6K中，响应于检测到输入650G，设备600在主界面602中显示包括单独的附件示能表示、风扇附件示能表示604G和灯附件示能表示604H的主界面602，同时由于成组附件已被拆分而停止显示风扇-灯附件示能表示604A。风扇附件示能表示604G包括风扇的图形表示604G1，该图形表示包括旋转风扇的动画和指示风扇在打开状态下以50％操作的当前状态604G2。类似地，灯附件示能表示604H包括灯的图形表示 604H1，该图形表示包括处于打开状态的灯泡和指示灯在打开状态下以75％操作的当前状态604H2。灯附件示能表示604H仅对应于吊扇和灯附件的灯部件。灯附件是具有打开/关闭灯这一单个功能的第一类型的附件，其在二元状态下操作。因此，当设备600接收到对应于对灯附件示能表示604H的选择的输入(例如，轻击)时，设备600传输打开/关闭灯的命令。
图6L至图6R示出了在附件组被拆分之后，来自该附件组的部件中的每个部件可通过对应的附件示能表示单独配置。例如，来自带灯吊扇的灯可通过灯附件示能表示604H配置。在被选择时，灯附件示能表示604H转换为灯附件界面610H，其中显示灯的控件。类似地，当灯附件界面610H 关闭时，灯附件界面610H转换回灯附件示能表示604H。
在图6L中，设备600检测对应于灯附件示能表示604H上的长按(或深按)的输入650H。在图6M至图6O中，响应于检测到输入650H，设备 600显示灯附件示能表示604H转换为灯附件界面610H的动画。图6M示出了当灯附件示能表示604H的尺寸增大时，对应的图形表示604H1和对应于当前状态的文本604H2的尺寸也成比例地扩展。设备600基于灯附件示能表示604H的当前位置显示展开灯附件示能表示604H的动画，该灯附件示能表示定位在主界面602中心。如图6N所示，根据确定如果在当前位置中显示时灯附件界面610H的一部分将不显示在屏幕外，设备600在当前位置中显示灯附件界面610，而不将灯附件示能表示与屏幕的左边界或右边界对齐。
图6O示出了在显示设备603的中心的完全扩展的灯附件界面610H，其包括灯的成比例增大的图形表示610H1和成比例增大的指示灯当前状态的文本610H2，在该显示设备的中心灯附件示能表示604H被定位。灯附件界面610H包括用于调节灯的亮度的控件示能表示608A和对应于灯光的颜色的颜色控件示能表示608C。设备600在灯附件界面610H的溢出区域中的颜色控件示能表示608C下方显示与灯相关联的附加控件示能表示，如相对于图8C进一步讨论的。
在图6O中，设备600检测对应于对控件示能表示608A的选择的输入 650I(例如，轻扫)以将亮度调节为90％。在图6O中，响应于检测到输入 650I，设备600更新图形表示610H1以指示灯打开，并且更新当前状态 610H2，指示灯已被设置为90％亮度。在一些实施方案中，响应于检测到输入650I，设备600更新灯附件界面610H中的图形表示610A1以包括动画。
在图6O中，设备600检测对应于对“X”示能表示630的选择的输入 (例如，轻击)650J以关闭风扇附件界面610H。如图6P至图6R所示，响应于检测到输入650J，设备600显示灯附件界面610H转变回主界面602中的灯附件示能表示604H的动画。图6P至图6Q示出了当灯附件界面610H 的尺寸减小时，对应的图形表示60GA1和对应于当前状态的文本604H2的尺寸也成比例地减小。当灯附件界面610H的尺寸减小时，设备600停止在灯附件界面610H中显示控件示能表示608A和传感器示能表示608C至608D。在图6R中，设备600在主界面602中显示具有更新的图形表示604H1和灯被设置为90％亮度的更新的当前状态604H2的灯附件示能表示604H。在一些实施方案中，图形表示604H1和当前状态604H2保持与如图6L所示的灯的亮度改变之前相同。
图7A至图7B是示出根据一些实施方案的用于使用电子设备来控制外部设备的方法700的流程图。方法700在具有显示设备(例如，603)的设备(例如，100、300、500、600)处执行。方法700中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法700提供了用于从主界面(例如，602)管理可控外部设备的直观方式，该主界面提供对与这些可控外部设备相对应的示能表示 (例如，604A至604H)的访问。允许用户从主界面管理可控外部设备减轻了用户的认知负担，因为所有可控外部设备均可从主界面访问。因此，用户不需要打开单独的应用程序来管理每个可控外部设备的配置，从而创建更有效的人机界面。对于电池驱动的计算设备，从统一主界面管理可控外部设备减少了管理每个可控外部设备所需的输入的数量，从而允许用户有效地节省设备电力并增加电池两次充电之间的时间间隔。
在框702处，具有显示设备(例如，603)(例如，触敏显示设备)和通信设备(例如，无线天线)的设备(例如，600)(例如，智能电话；智能家居控制设备)在该显示设备上显示用户界面(例如，602)(例如，示出用于每个附件的图块的主页)，该用户界面包括与第一可控外部设备 (例如，具有至少一个可控功能的设备(例如，智能灯泡、智能恒温器、智能扬声器))相关联的第一附件示能表示(例如，604A至604G)(例如，可选择的图形图块)。
在一些实施方案中，第一附件示能表示(例如，604A)包括第一图形元素(例如，604A1)(例如，表示第一可控外部设备的图标(例如，灯泡的图像))和第一文本元素(例如，604A2)(例如，表示第一可控外部设备的名称(例如，“灯泡”)，包括当前状态(例如，灯泡打开))。在一些实施方案中，根据确定第一可控外部设备与第二可控部件(例如，带灯吊扇的风扇)相关联，与第一功能(例如，打开风扇)相关联的第二可控部件包括该第二可控部件的图形指示(例如，604A、604G)(例如，包括风扇的图标的图块)。在一些实施方案中，根据确定第一可控外部设备与第三可控部件(例如，带灯吊扇的灯)相关联，与第二功能(例如，打开灯)相关联的第三可控部件包括该第三可控部件的图形指示(例如， 604A、604H)。在一些实施方案中，根据确定第一可控设备与第二可控部件和第三可控部件相关联，包括该第二可控部件的图形指示和该第三可控部件的图形指示(例如，图块包括附件中的子部件中的每个部件的图标或图像，诸如风扇和灯，或具有若干插座的电源板)(例如，604A、604E)。在第一附件示能表示(例如，604A)中显示部件(例如，风扇和灯)的图形指示(例如，604A1)和文本状态(例如，604A2)向用户提供关于哪些可控外部设备和部件是附件组(如果有多个部件)的一部分以及附件的当前状态的视觉信息。允许用户查看哪些可控外部设备由该附件示能表示控制减轻了认知负担。因此，用户不需要提供附加输入(例如，长按)来管理每个可控外部设备及其对应部件的配置，从而创建更有效的人机界面。对于电池驱动的计算设备，减少管理每个可控外部设备所需的输入数量允许用户有效地节省设备电力并增加电池两次充电之间的时间间隔。此外，用户获得已执行所选择的功能或已配置设置的视觉确认。
在一些实施方案中，根据确定第一可控外部设备与第二可控部件和第三可控部件相关联，第一附件示能表示包括第二可控部件的图形指示和第三可控部件的图形指示(例如，604A)。
在一些实施方案中，在框704处，第一可控外部设备(例如，带灯风扇)与第一功能(例如，主要功能或主功能，诸如打开风扇)和第二功能 (例如，辅助功能，诸如打开灯)相关联。
在框706处，设备(例如，600)检测对应于对第一附件示能表示(例如，604A)的选择的第一输入(例如，轻击输入)(例如，650A、650B)。在一些实施方案中，在框708处，该第一附件示能表示在检测到第一输入之前具有第一外观。
在框710处，响应于检测到该第一输入(例如，650A)：在框714处，根据确定符合一组命令传输标准(例如，附件具有单个主要功能)，设备 (例如，600)经由通信设备向第一可控外部设备传输执行第一功能(例如，如果设备的灯当前关闭，则将其打开；如果当前打开，则将其关闭)的命令。在一些实施方案中，在框712处，响应于检测到该第一输入并且结合(例如，同时)向第一可控外部设备传输执行第一功能的命令，将第一附件示能表示(例如，604B)更新为基于该第一功能的第二外观(例如，图 6B中的604B1)(例如，第一功能是改变作为第一可控外部设备的一部分的灯的状态，而第二外观包括处于与灯的改变后状态匹配的状态的灯的图像)。将第一附件示能表示更新为反映附件的更新状态的第二外观为用户提供了已执行命令的视觉反馈。允许用户查看哪些可控外部设备已由附件示能表示更新减轻了认知负担。因此，用户不需要提供附加输入(例如，长按)来管理每个可控外部设备及其对应部件的配置，从而创建更有效的人机界面。对于电池驱动的计算设备，减少管理每个可控外部设备所需的输入数量允许用户有效地节省设备电力并增加电池两次充电之间的时间间隔。此外，用户获得已执行所选择的功能或已配置设置的视觉确认。
在一些实施方案中，在框716处，该组命令传输标准包括当与第一可控外部设备相关联的第一功能(例如，主要功能，诸如打开风扇)是该第一可控外部设备(具有多个功能诸如带灯吊扇的附件)的主要功能(例如，如果该附件支持多种功能，则为指定的主要功能；与该设备相关联的唯一功能)时满足的第一标准。在一些实施方案中，该组命令传输标准包括当与第一可控外部设备相关联的第一功能(例如，附件仅具有带有二元状态 (打开或关闭)的单个功能)与该外部设备的具有二元操作状态(例如，关闭或打开；不是三个或更多个状态)的第一可控部件(例如，带灯吊扇的风扇)相关联时满足的第二标准。在一些实施方案中，第一功能是从第一可控外部设备的第一可控部件的当前操作状态转变为该第一可控外部设备的该第一可控部件的另一个操作状态(例如，当部件打开时，该功能是将其关闭，反之亦然)。在一些实施方案中，轻击附件图块使得带灯吊扇的风扇打开或关闭。
在一些实施方案中，在框718处，根据确定符合该组命令传输标准 (例如，确定附件是否与主要功能相关联)(例如，附件具有单个主要功能)，经由通信设备向第一可控外部设备传输执行第一功能的命令，而不经由该通信设备向该第一可控外部设备传输执行第二功能的命令。响应于检测到该第一输入(例如，650A)并且结合(例如，同时)向第一可控外部设备传输执行第一功能的命令，将第一附件示能表示(例如，604B)更新为基于该第一功能的第二外观(例如，604B1)(例如，第一功能是改变作为第一可控外部设备的一部分的灯的状态，而第二外观包括处于与灯的改变后状态匹配的状态的灯的图像)。在一些实施方案中，第二外观包括基于第一功能(例如，风扇打开，因此图块的动画示出旋转风扇)的动画(例如，重复/循环动画)。当符合传输标准时设备向第一可控外部设备传输执行第一功能的命令而不必显示附加的附件界面提供了更有效的用户界面。因为第一可控外部设备被映射到主要功能，所以在无需附加的用户交互的情况下该主要功能被执行。这减轻了用户的认知负担并且保存电池电力，因为单个输入将使得第一可控外部设备执行主要功能。
在框720处，根据确定不符合该组命令传输标准(例如，附件具有多于单个主要功能，诸如恒温器，可改变其温度并将其切换到打开和关闭)，在显示设备上显示第一附件界面(例如，图6F中的610A、图12B中的 1210C)(例如，不向该可控外部设备传输命令)。该第一附件界面包括：在框722处，第一控件示能表示(例如，图6F中的608A至608C、图12B 中的1208)(例如，用于灯的调光器、用于恒温器的温度盘)，该第一控件示能表示在被选择时向可控外部设备传输执行第一功能的命令；以及第二控件示能表示(例如，改变灯光的颜色、改变恒温器的模式，即AC、加热器和风扇)，该第二控件示能表示在被选择时向外部附件设备传输执行不同于该第一功能的第二功能的命令。显示附件界面以允许用户在设备未被映射到主要功能时管理第一可控外部设备的设置为用户提供了更有效的用户界面。因为可控外部设备未被映射到主要功能，所以显示附件界面提供了更有效的用户界面，因为用户可管理该可控外部设备的控件。这保存了电池电力，因为并非每次选择对应的附件示能表示时都显示附件界面。
在一些实施方案中，第一附件界面(例如，610A)包括第一控件示能表示(例如，608A)和第二控件示能表示(608B、608C)。在一些实施方案中，显示第一附件界面包括：根据第一功能和第二功能符合第一组布局标准(例如，该第一组布局标准包括当该第一功能和该第二功能在功能分级结构中以相同级别分类时满足的标准)，以并排布置(例如，以水平布置)显示该第一控件示能表示(例如，608A)和该第二控件示能表示(例如，608B)。在一些实施方案中，根据第一功能和第二功能符合第二组布局标准(例如，第一组布局标准包括当该第一功能和该第二功能在功能分级结构中以不同级别分类时满足的标准)，以顶部和底部布置(例如，以竖直布置)在该第二控件示能表示(例如，608C)上方显示该第一控件示能表示(例如，608A)。
在一些实施方案中，第一附件界面(例如，610A1)包括对应于(例如，匹配)第一图形元素(例如，604A1)的第二图形元素(610A1)和对应于第一文本元素(例如，604A2)的第二文本元素(例如，610B2)。在一些实施方案中，显示第一附件界面还包括：显示第一图形元素在视觉上转变为第二图形元素的动画(例如，第一图形元素扩展以变成第二图形元素的动画)以及显示第一文本元素在视觉上转变为第二文本元素的动画。
在一些实施方案中，根据确定第一附件界面(例如，图6E中的610A) 的一部分将显示在超过显示设备的边界(例如，附件的用户界面的一部分) (例如，与附件相关联的卡片将显示在设备的屏幕的边界之外)的位置中，在第一位置(例如，图6E中的610A)处显示第一附件界面，在该第一位置该第一附件界面与边界对齐(例如，快速移动附件的用户界面以与边界或屏幕的边缘对齐)。在一些实施方案中，根据确定第一附件界面的一部分 (例如，图6N中的610A)将不显示在超过显示设备的边界的位置(例如，用户界面将在屏幕的边界内)中，在基于第一附件示能表示(例如，604H) 的位置的第二位置(例如，图6N中的610A)处显示该第一附件界面(例如，在图块所在的位置处显示用户界面)。使设备基于由可控外部设备支持的控件和传感器的数量来确定每个附件界面的适当布局带来更直观的用户界面，这减轻了用户的认知负担。这些控件和传感器的布局有助于减少配置该可控外部设备所需的输入的数量，从而节省电池电力。
在一些实施方案中，在显示第一附件界面(例如，图6O中的610H) 时(在一些实施方案中，并且在不显示第一附件示能表示时)，检测对应于停止显示该第一附件界面的请求的第二输入(例如，650J)。响应于检测到该第二输入，停止显示该第一附件界面(在一些实施方案中，并且重新显示该第一附件示能表示)，包括：显示第二图形元素(例如，610H1) 在视觉上转变为第一图形元素(例如，604H1)(例如，第二图形元素收缩以变成第一图形元素的动画)并且显示第二文本元素(例如，610H2)在视觉上转变为第一文本元素(例如，604H2)的动画。
在一些实施方案中，其中第一可控外部设备与第二可控部件(例如，带灯吊扇的风扇)和第三可控部件(例如，带灯吊扇的灯)相关联，在显示第一附件界面(例如，610A)(例如，显示带灯吊扇的卡片)时，检测第一组一个或多个输入(例如，图6I至图6J中的650F至650G和图10K至图10L中的1050J至1050I)(例如，选择附件示能表示并点击“显示为单独图块”示能表示)(例如，其还包括重新显示用户界面的请求)，该第一组一个或多个输入包括对应于控件重新配置示能表示(例如，图6J中的616、图10L中的1020和1022)(例如，用于将子部件从该组中解散)(例如，将风扇和灯解散成两个单独的图块)的输入。响应于检测到该第一组一个或多个输入，显示用户界面的第二实例(例如，图6K中的602)，该第二实例包括：第二附件示能表示(例如，604G)(例如，在被选择时执行与第二可控部件相关联的功能的示能表示)(例如，对应于风扇的图块)，该第二附件示能表示与第一可控外部设备的第二可控部件相关联并且不与该第一可控外部设备的第三可控部件相关联；和第三附件示能表示(例如，604H)(例如，在被选择时执行与第三可控部件相关联的功能的示能表示)(例如，对应于灯的图块)，该第三附件示能表示与该第一可控外部设备的第二可控部件相关联并且不与该第一可控外部设备的第三可控部件相关联。在一些实施方案中，用户界面的第二实例不包括第一附件示能表示(例如，604A)。在一些实施方案中，不再显示成组的带灯吊扇图块，而是显示两个单独的图块(例如，风扇图块和灯图块)。基于附件是成组在一起的还是分离的来更新主界面中的附件示能表示为用户提供了用于管理可控外部设备的更直观的用户界面。成组附件由单个附件示能表示来表示，以减轻用户的认知负担。因此，选择单个附件示能表示允许用户在一个地方管理附件的所有控件，而不必单独访问组中的每个部件或可控外部设备的控件。这还节省了电力，因为减少了配置成组附件所需的输入的数量。类似地，分离的成组附件被示出为独立的附件示能表示，以向用户提供更直观的用户界面。因为用户已选择分离可控外部设备的部件，所以提供用于配置每个部件的单独用户界面使得清楚用户正在与哪个部件进行交互，这减轻了用户的认知负担。
需注意，上文相对于方法700(例如，图7A至图7B)所述过程的详情也以类似方式适用于下文所述的方法。例如，方法700任选地包括上文参考方法900、1100和1300所述的各种方法的特征中的一个或多个特征。例如，方法900中所述的可控外部设备可为方法700中的可控外部设备，该可控外部设备可使用方法700中所述的界面来配置和访问。为了简明起见，这些详情在下文中不再重复。
图8A至图8J示出了根据一些实施方案的用于配置附件(例如，灯、电源板、恒温器)的示例性用户界面。这些附图中的用户界面用于示出下文所述的过程，包括图9A至图9B中的过程。
图8A至图8B示出了通过长按枝形吊灯附件示能表示604A来访问枝形吊灯的控件。在图8A中，设备600显示对应于枝形吊灯的枝形吊灯附件示能表示604A。枝形吊灯附件示能表示604A包括指示枝形吊灯当前处于开启状态的枝形吊灯的图形表示604A1和指示枝形吊灯处于开启状态的当前状态的文本604A2。设备600检测对应于主界面602中的枝形吊灯附件示能表示604A上的长按(或深按)的输入850A。在图10B中，响应于检测到对应于枝形吊灯附件示能表示604B上的长按的输入650A，设备600显示枝形吊灯附件界面810B。在一些实施方案中，当附件是不具有主要功能的第二类型的附件时，设备600响应于设备600检测到对应于对该附件示能表示的选择的输入(例如，轻击)而显示附件界面(例如，枝形吊灯附件界面810B)。
图8B至图8D示出了枝形吊灯附件界面810B中控件的布局，该枝形吊灯附件界面由在该枝形吊灯附件界面810B最初显示时所显示的第一区域 812A构成。第二区域812B(溢出区域)包括附件设置。如果用户滚动经过第一区域812A，则显示设置部分822。用户可通过使用轻扫手势在区域之间滚动。在8B至图8D中，设备600显示枝形吊灯附件界面810B，包括所显示的第一区域812A和未显示的第二区域812B。当设备600响应于检测到的输入850A而显示枝形吊灯附件界面810B时，在显示器603上显示第一区域812A的第一部分。第一区域812A包括图形表示810B1、当前状态 810B2和控件示能表示808A至808C。第一区域812A包括最初未显示的溢出区域。第一区域812A的溢出区域包括最初未在第一区域中显示的附加控件示能表示和传感器，诸如示能表示808C。响应于检测到对应于在第一区域812A中向下滚动的输入，设备600显示第一区域812A的溢出区域。
控件示能表示808A对应于改变枝形吊灯亮度的控件。在图8B中，枝形吊灯被设置为90％亮度。控件示能表示808B对应于枝形吊灯可被设置为的不同颜色。在图8B中，六种不同的颜色最初显示在枝形吊灯附件界面 810B的第一区域812A的第一部分中。附加颜色显示在第一区域812A的溢出区域中，直到滚动枝形吊灯附件界面810B才显示该溢出区域。在图8B 中，枝形吊灯被设置为颜色808B1。图形表示810B1反映由控件808B指示的所选择的灯光颜色。
在图8B中，设备600检测对应于在枝形吊灯附件界面810B中向下滚动的轻扫手势的输入850B。在图8C中，响应于检测到输入850B，设备600 显示第一区域812A的溢出区域，同时仍然保持控件示能表示808A和808B 的显示。第一区域812A的溢出区域包括控件808B的用于枝形吊灯的第三行颜色和定时器控件示能表示808C，该定时器控件示能表示指定一个时间段，在此之后应当自动关闭枝形吊灯。设备600在显示第一区域812A的溢出区域时保持图形表示810B1和当前状态810B2的显示。当滚动第一区域 812A以显示控件示能表示808C时，部分地显示控件示能表示808A。当用户滚动通过枝形吊灯附件界面810B，在第一区域812中滚动时设置快捷方式示能表示816显示在屏幕的底部，以向用户提供对设置部分822的快速访问。因此，当设备600滚动通过枝形吊灯附件示能表示810B的第一区域 812A时，设备600在枝形吊灯附件示能表示810B的第一区域的底角处保持设置快捷方式示能表示816的显示。设置快捷方式示能表示816不显示在枝形吊灯附件示能表示810B的第二区域中。设置快捷方式示能表示816提供对枝形吊灯附件界面810B的第二区域812B中的设置部分822的快速访问，使得用户不必滚动通过第一区域812A来到达设置部分。
图8C至图8D示出了图形表示810B1和状态文本810B2在枝形吊灯附件界面810B中随着设置的改变而更新。在图8C中，设备600检测对应于对第二颜色808B2的选择的输入(例如，轻击)850C。在图8D中，响应于检测到输入850C，设备600更新控件示能表示808A和图形表示810B1的显示以反映所选择的灯光颜色。设备600确定显示枝形吊灯附件界面810B 的第一区域816的底部。响应于该确定，设备600显示设置快捷方式示能表示816。响应于检测到对该设置快捷方式示能表示的选择，设备600显示枝形吊灯附件界面810B的第二区域。在一些实施方案中，设置快捷方式示能表示816显示在第一区域812A的底部。在一些实施方案中，设置快捷方式示能表示816显示在显示器603的底部，而不管显示的是第一区域812A的哪个部分。
图8D至图8F示出了通过在枝形吊灯附件界面810B中使用轻扫手势来访问第二区域812B。在图8D中，设备600检测对应于轻扫手势的输入 850D以在枝形吊灯附件界面810B中进一步向下滚动。在图8E中，响应于检测到输入850D，当用户的手指仍然与显示器603接触时，设备600显示枝形吊灯附件界面810B的第二区域812B的一部分。设备600确定第二区域812B的显示部分是否超过阈值量824。图8E示出了根据确定第二区域 812B的显示部分不超过阈值量824，当用户从轻扫手势释放手指时，设备 600显示反弹动画(例如，橡皮筋效果)。作为该反弹动画的结果，图8D 示出了设备600快速移动返回到枝形吊灯附件界面810B的第一区域812A 的先前显示的部分，而不显示第二区域812B。图8F至图8G示出了根据确定第二区域812B的显示部分超过阈值量824(作为快速轻扫手势的结果)，设备600快速移动到枝形吊灯附件界面810B的第二区域812B以在显示器 603的顶部部分处显示第二区域812B。
图8G示出了枝形吊灯附件界面810B的第二区域812B(设置部分 822)。第二区域812B包括与第一区域812A中显示的相同的图形表示 810B1和当前状态810B2。第二区域812B包括用于配置枝形吊灯的设置的设置部分822。响应于设备600快速移动以显示枝形吊灯附件界面810B的第二区域812B，设备600输出指示从第一区域812A的显示转变为第二区域 812B的显示的触觉和音频输出820。在一些实施方案中，设备600输出触觉输出，而不输出音频输出。在一些实施方案中，设备600输出音频输出，而不输出触觉输出。
在图8G中，设备500检测对应于对“X”示能表示830的选择的输入 (例如，轻击)850E以关闭枝形吊灯附件界面810B。在图8H中，响应于检测到输入850E，设备600显示更新的枝形吊灯附件示能表示604A，该示能表示包括指示灯光颜色已变为颜色808B2的图形表示604A1和指示灯在打开状态下处于90％亮度的当前状态604A2。在一些实施方案中，响应于检测到输入850E，当枝形吊灯附件界面810B关闭时，设备600输出触觉输出和音频输出。在一些实施方案中，设备600输出触觉输出，而不输出音频输出。在一些实施方案中，设备600输出音频输出，而不输出触觉输出。
图8H至图8J示出了针对风扇界面810I中的控件的若干布局。如上文相对于图6F所讨论的，设备600根据与附件相关联的控件和传感器的数量来确定布局。在图8H中，设备600检测对应于客厅风扇附件示能表示604I 上的长按(或深按)的输入850F。响应于检测到输入850F，设备600显示客厅风扇附件界面610I。图8I至图8J示出了针对客厅风扇附件界面610I的两个布局。设备600基于要显示的控件示能表示和传感器示能表示的数量来确定风扇附件界面610I中的控件示能表示和传感器示能表示的布局，如大体关于图6F所讨论的。在图8I中，设备600确定客厅风扇是否具有两个或更少的传感器示能表示(例如，816A至816B)。根据确定该风扇具有两个传感器示能表示808A至816B，设备600在风扇附件界面610I中显示布局，其中传感器示能表示816A至816B显示在控件818上方。在图8J中，设备600确定客厅风扇具有三个传感器示能表示816A至816C。根据确定该风扇具有多于两个传感器示能表示，设备600在风扇附件界面610I中显示布局，其中传感器示能表示816A至816C显示在控件818下方。
图9A至图9B是示出根据一些实施方案的用于使用电子设备来控制外部设备的方法900的流程图。方法900在具有显示设备(例如，603)的设备(例如，100、300、500、600)处执行。方法900中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法900提供了用于从主界面(例如，602)管理可控外部设备的直观方式，该主界面提供对与这些可控外部设备相对应的示能表示的访问。允许用户从主界面管理家中的可控外部设备减轻了用户的认知负担，因为所有可控外部设备均可从主界面访问。因此，用户不需要打开单独的应用程序来管理每个可控外部设备的配置，从而创建更有效的人机界面。对于电池驱动的计算设备，使用户能够从主界面管理可控外部设备减少了打开多个应用程序所需的输入的数量，从而允许用户有效地节省设备电力并增加电池两次充电之间的时间间隔。
在框902处，设备(例如，600)在显示设备上显示包括与第一可控外部设备(例如，具有至少一个可控功能的设备(例如，智能灯泡、智能恒温器、智能扬声器))相关联的第一附件示能表示(例如，604B)(可选择的图形图块)的用户界面。
在一些实施方案中，在框904处，第一附件界面(例如，810B)包括第一总数量的控件示能表示(例如，808A至808C)，其中该第一总数量的控件示能表示中的所有控件示能表示包括在第一区域(例如，812A)中 (例如，用于附件的所有控件显示在第一区域中)，并且该第一总数量的控件示能表示中没有控件使能表示不包括在第二区域(例如，812B)中 (例如，没有控件显示在第二区域中显示的设置部分中)。在一些实施方案中，第一附件界面的第一区域包括在该第一区域中的第三位置处(例如，与第一区域的显示部分相邻)的第二区域示能表示(例如，816)(例如，设置快捷方式)。
在框906处，设备(例如，600)检测对应于对第一附件示能表示的选择的第一输入(例如，850A)(例如，示能表示上的轻击)。
在框908处，响应于检测到该第一输入(例如，850A)(例如，轻击)，设备(例如，600)在显示设备(例如，603)上显示第一附件界面 (例如，810B)(例如，显示附件的所有控件的用户界面，例如与该附件相关联的卡片)的第一区域(例如，812A)，而不显示该第一附件界面的第二区域(例如，812B)(例如，设置部分)，该第一区域包括第一控件示能表示(例如，808A)，该第一控件示能表示在被选择时控制(例如，传输控制信号)第一可控外部设备的第一功能(例如，用于灯的调光器，改变灯光颜色)。在一些实施方案中，第一区域包括附件的所有控件，并且第二区域包括该附件的设置部分(例如，816)。
在一些实施方案中，在框910处，根据确定第一可控外部设备与少于预先确定数量(例如，3个传感器)的传感器(例如，温度、湿度和/或环境光线传感器)相关联(例如，包括少于预先确定数量的传感器)，第一附件界面(例如，810I)的第一区域(812A)在该第一区域中的第一位置 (例如，在第一控件示能表示上方)处包括对应于该第一可控设备的传感器的一组控件示能表示(例如，816A至816C)。
在一些实施方案中，在框912处，根据确定第一可控外部设备与预先确定数量的或更多的传感器相关联(例如，包括预先确定数量的或更多的传感器)，第一附件界面(例如，810I)的第一区域(812A)在该第一区域(例如，812A)中不同于第一位置的第二位置(例如，在第一控件示能表示(例如，818)下方)处包括对应于该第一可控设备的传感器的一组控件示能表示(例如，816A至816C)。
在框914处，当在显示设备(例如，603)上显示第一附件界面(例如， 810B)的第一区域(例如，812A)时，设备检测第二输入(例如，850B、 850D)(例如，轻扫)。在一些实施方案中，第二输入包括使得显示滚动以在当前未显示的卡片上进一步向下显示附加控件的轻扫(例如，850B)。在一些实施方案中，轻扫(例如，850D)使得显示快速移动到使得显示快速移动到设置部分(例如，822)的部分设置，使得控件不再显示。
在框916和框918处，响应于检测到该第二输入(例如，850D)：根据确定该第二输入(例如，850D)使得第二区域(例如，812B)的显示的部分(例如，在屏幕上显示设置部分的四分之一)超过阈值量(例如，该第二区域的内容或面积的阈值量)，在框920处，设备(例如，600)更新第一附件界面(例如，810B)的显示以在该第一附件界面(例如，810B) 的顶部部分处显示该第二区域(例如，快速移动到附件的设置部分)，同时停止显示第一区域(例如，812A)(例如，不再显示第一区域中的控件)，其中该第二区域包括第一可控外部设备的一个或多个设置(例如，这些设置是附件的主设置页面，其允许用户管理该附件的设置(例如，共享数据、加入收藏夹、接收通知、将人员添加到附件的访问列表)。在一些实施方案中，在框922处，设备输出触觉和音频反馈(例如，820)。在同一附件界面中显示控件和设置提供了用于访问可控外部设备的控件的更有效的用户界面。允许用户从一个界面访问可控外部设备的控件和设置减轻了用户的认知负担。因此，用户不需要打开单独的应用程序来管理每个可控外部设备的配置。此外，由于可控外部设备的设置不如其他控件常用，因此这些设置被隐藏，除非用户有意地尝试访问它们。因此，通过使用阈值来确定何时显示设置提供了更有效的用户界面，因为其仅在用户有意想要访问设置部分时才被显示。此外，浮动的设置快捷方式示能表示允许用户导航到设置部分，而不必滚动到附件界面的底部。
在框924处，响应于检测到该第二输入：根据确定该第二输入未使得第二区域(例如，812B)的显示的部分(例如，显示小于设置部分的四分之一)超过阈值量，设备(例如，600)基于该第二输入(例如，850D) (例如，对应于轻扫的速度，递增地滚动通过第一区域(例如，812A)以在页面上显示先前未显示的第二控件(例如，808C)，而不是快速移动到设置部分)来将该第一附件界面(例如，810B)的显示更新为该第一附件界面的第一区域(例如，第二控件先前未显示)中的第二控件示能表示 (例如，808B、808C)(例如，改变灯光颜色；第二控件先前在第二输入之前未显示)。在一些实施方案中，向下滚动页面以显示第二控件使得第一控件不被显示，而不显示第一附件界面(例如，810B)的第二区域(例如，812B)。当不超过阈值时不显示设置部分提供了更有效的用户界面。相反，焦点指向可控外部设备的控件，这减轻了用户的认知负担。
在一些实施方案中，设备(例如，600)检测对应于第二区域示能表示 (例如，816)的第四输入(例如，图6H中的650E)。响应于检测到对应于第二区域示能表示的第四输入，设备更新第一附件界面(例如，610A) 的显示(例如，以及滚动通过第一区域的溢出区域中的其他控件)以在该第一附件界面的顶部部分处显示第二区域(例如，图6H中的620)(例如，快速移动到附件的设置部分)，同时停止显示该第一区域。
在一些实施方案中，当在显示设备(例如，603)上显示第一附件界面 (例如，810B)时，设备检测第三输入(例如，830)(例如，该第三输入解除或关闭第一附件界面)。响应于检测到该第三输入，设备停止显示第一附件界面并且输出指示不再显示该第一附件界面的触觉和音频反馈(例如，820)(例如，指示卡片关闭的解除反馈)。
需注意，上文相对于方法900所述的过程(例如，图9A至图9B)的详情也可以类似方式适用于下文/上文所述的方法。例如，方法900任选地包括上文参考方法700、1100和1300所述的各种方法的特征中的一个或多个特征。例如，方法900的附件界面用于配置方法700中的可控外部设备。为了简明起见，这些详情在下文中不再重复。
图10A至图10AC示出了根据一些实施方案的用于成组附件(例如，电源板)的示例性界面。这些附图中的用户界面用于示出下文所述的过程，包括图11A至图11B中的过程。
在图10A至图10C中，将电源板和插座添加到主界面602。用户可扫描代码或输入代码以添加附件。一旦添加附件，附件示能表示(例如， 604E和604F)便添加到主界面602。用户可通过轻击对应于附件(例如，电源板)的附件示能表示(例如，604E)来管理该附件的配置。在图10A 中，设备600显示包括用于添加新附件或新场景的示能表示640的主界面 602。设备600检测对应于对示能表示640的选择以及选择添加新附件的一组输入1050A(例如，轻击)。在图10B中，响应于检测到输入1050A，设备600显示“添加附件”界面1002以用于添加可由设备600控制的新附件。添加附件界面1002包括用于使用设备600来扫描与新附件相关联的代码 (例如，条形码、二维码或一串数字)的取景器1004A和指令。添加附件界面1002还包括用于手动输入代码以添加新附件的示能表示1004B。
在图10C中，继(例如，响应于)成功添加新附件之后，设备600显示包括对应于所添加的附件的附件示能表示的主界面602。图10C示出了在主界面602中分别对应于电源板附件和插座附件的新添加的电源板附件示能表示604F和过道插座附件示能表示604F。设备600确定附件是否将具有对应的附件示能表示，该对应的附件示能表示在轻击时执行功能或打开附件界面以允许用户基于所接收的关于该附件可执行的功能的信息来管理该附件。例如，当轻击插座附件示能表示604F时，插座附件示能表示604F将该插座切换到打开和关闭。相比之下，当轻击恒温器附件示能表示604C时，恒温器附件示能表示604C使得设备600打开图12B的恒温器界面1210C。在设置期间，设备600基于从插座接收的信息来确定插座附件是第一类型的附件，因为该插座具有在两种状态即二元状态下操作的单个功能：打开或关闭插座。在设置期间，设备600基于从电源板接收的信息来确定该电源板是成组附件，该成组附件也是第一类型的附件，因为该电源板具有在两种状态即二元状态下操作的单个功能：打开或关闭电源板。相比之下，如相对于图12A至图12B所述，恒温器是第二类型的附件，因为恒温器不具有主要功能。
在图10C中，设备600检测对应于在主界面602中的插座附件示能表示604F上的长按(或深按)的输入1050B。在图10D中，响应于检测到输入1050B，设备600显示插座附件界面1010F。插座附件界面1010F包括图形表示1010F1和指示插座当前关闭的当前状态1010F2。插座附件界面 1010F包括对应于将插座切换到打开或关闭状态的控件示能表示1008。
在图10D中，设备600检测对应于在插座附件界面1010F中向下滚动的轻扫手势的输入1050C以访问插座设置部分1018。插座设置部分1018不包括用于重新配置插座的示能表示，因为该插座不是某一附件组的一部分。在图10E中，响应于检测到输入1050C，设备600将插座附件界面1010F的显示快速移动到插座设置部分1018。插座设置部分1018不包括用于重新配置附件的部件的附件重新配置示能表示，因为该插座是单个附件部件。例如，插座设置部分1018不包括如图10K所示的示能表示1014B，该示能表示与从成组附件中添加或移除部件相关联，或者不包括如图10R所示的示能表示1014C，该示能表示与将部件与该部件物理上是其一部分的附件重新结合成组相关联(例如，插座是电源板的部件)。
图10F示出了在主界面602中的新添加的电源板附件示能表示604E，该示能表示对应于包括六个独立的插座部件(例如，子部件)的电源板附件。电源板示能表示604E表示包括六个插座的附件组。电源板具有打开/关闭这一主要功能。电源板的六个独立的插座部件也具有相同的打开和关闭这一主要功能。因此，设备600为包括电源板和六个独立的插座部件的附件组创建单个电源板附件示能表示604E。可一起打开或关闭附件组，或者可单独控制各个部件。因此，响应于设备600检测到对应于对电源板附件示能表示604E的选择的输入(例如，轻击)，设备600向电源板传输打开/关闭整个附件组的命令。可通过电源板附件界面1010E中与每个插座部件相关联的控件示能表示来将电源板和各个插座独立地切换到打开或关闭状态。
在图10F中，设备600检测对应于在电源板附件示能表示604E上的长按(或深按)的输入1050D以访问对应于每个插座的单独控件。在图10G 中，响应于检测到输入1050D，设备600显示电源板附件界面1010E。电源板附件界面1010E包括用于管理每个插座和整个电源板的状态的控件1020A 至1020G。电源板附件界面1010E包括示出了关闭的电源板的图形表示 1010E1和指示电源板中的所有插座当前均关闭的当前状态1010E2。插座附件界面1010E包括控件示能表示1020A至1020G。控件示能表示1020A在电源板当前处于关闭状态时将该电源板(包括该电源板的所有六个插座部件)设置为打开状态，并且在电源板当前处于打开状态时将该电源板设置为关闭状态。当控件示能表示1020A被激活以打开电源板时已经处于打开状态的任何插座均保持处于打开状态。类似地，当控件示能表示1020A被选择以关闭电源板时已经处于关闭状态的任何插座均保持处于关闭状态。控件示能表示1020B至1020G对应于与组中的每个相应插座相对应的控件示能表示，该每个相应插座可设置为打开或关闭状态而不影响组中的其他插座的状态。电源板附件界面1010E还包括设置快捷方式示能表示1012。
图10G至图10J示出了打开电源板或电源板附件组中的独立插座。无论何时更新电源板的状态，都更新主界面602中的电源板附件示能表示 604E。
在图10G中，设备600检测对应于对控件示能表示1020A的选择的输入(例如，轻击)1050E以打开电源板。响应于检测到输入1050E，设备 600向电源板附件传输打开六个插座部件中的每个插座部件的命令或指令。在图10H中，继检测到输入1050E之后，设备600更新主界面602中的电源板附件示能表示604E的显示。电源板附件示能表示604E的图形表示604E1被更新以示出电源板如点亮符号所指示的被打开。电源板附件示能表示604E的当前状态604E2被更新以指示电源板处于打开状态。
在图10H中，设备600检测对应于电源板附件示能表示604E上的长按 (或深按)的输入1050F。在图10I中，响应于检测到输入1050F，设备600 显示电源板附件界面610E。电源板附件界面610E包括图形表示610E1，其与图10H中的更新的图形表示604E1匹配，指示电源板处于打开状态。当前状态1010E2被更新以示出电源板处于打开状态，其中六个插座中的每个插座均处于打开状态。响应于设备600确定电源板当前处于打开状态，设备 600更新用于关闭电源板的控件示能表示1020A。控件示能表示1020B至 020G指示相应插座中的每个插座均处于打开状态，并且轻击控件示能表示 1020B至1020G中的任一者将关闭对应的插座。
在图10I中，设备600检测与对对应于插座1的控件示能表示1020B的选择相对应的输入(例如，轻击)1050G。在图10J中，继检测到输入 1050G之后(并且作为响应)，设备600向电源板附件传输关闭插座1的命令。设备600更新控件示能表示1020B的显示以示出该插座现在处于关闭状态。设备600可检测控件示能表示1020B上的后续轻击以打开插座1。控件示能表示1020C至020G指示相应插座中的每个插座均保持打开状态，并且轻击对应的控件示能表示将关闭对应的插座。
可通过设置部分1018E重新配置电源板附件组以移除插座、添加插座或拆分该组。图10K至图10O示出了从电源板附件组移除插座的过程。在图10J中，设备600检测对应于对设置快捷方式示能表示1012的选择的输入(例如，轻击)1050H。在图10K中，响应于检测到输入1050H，设备 600显示电源板设置部分1018E。电源板设置部分1018E包括对应于如插座附件界面1010E中所指示的插座附件的状态的图形表示1010E1和状态 1010E2。插座设置部分1018包括用于将插座与相同类型的其他附件成组的“与其他附件成组”示能表示1014A和用于(例如，通过从电源板移除或添加部件)重新配置电源板附件的附件示能表示1014B。附件示能表示 1014B指示组中当前有六个插座部件。
在图10K中，设备600检测对应于对附件示能表示1014B的选择的输入(例如，轻击)1050I。在图10L中，响应于检测到输入1050I，设备600 显示附件界面1060。附件界面1060包括对应于电源板附件组中的插座部件中每个插座部件的一组六个附件示能表示1018A至1018F。附件界面1060 包括“添加或移除”示能表示1020和解散成组示能表示1022，该“添加或移除”示能表示用于添加已从电源板移除的插座或从该电源板移除插座，该解散成组示能表示用于通过为组中的部件中的每个部件创建单独的附件示能表示(例如，六个插座中的每个插座的插座附件示能表示)来解除组。
在图10L中，设备600检测对应于对“添加或移除”示能表示1020的选择的输入1050J。在图10M中，响应于检测到输入1050J，设备600更新添加或移除界面1060的显示以启用对每个插座附件示能表示1018A至 1018F的选择或取消选择。设备600检测对应于对插座附件示能表示1018C 的选择的输入(例如，轻击)1050K以从电源板组移除插座3。在图10N中，响应于检测到输入1050K，设备600在所选择的插座附件示能表示1018C旁边显示复选标记。在图10N中，设备600检测对应于对完成按钮1032的选择的输入(例如，轻击)1050L。继检测到输入1050L之后，设备600从电源板附件组移除插座3。
在图10O中，响应于检测到输入1050L，设备600显示具有对应于插座1020B、1020C、1020E、1020F和1020G的仅五个控件示能表示的电源板附件界面1010E。由于对应的插座3已被移除，因此不显示控件示能表示 1020D。从电源板附件组添加或移除插座不改变仍然在组中的插座(例如，插座1至2和4至6)或从该组中移除的插座(例如，插座3)的状态。因此，插座1保持在关闭状态并且插座3保持在打开状态，如图10J所指示，这与在从电源板附件组移除插座3之前对应的插座所处的状态相同。图形表示1010E1保持不变，而当前状态1010E2被更新以指示电源板附件组中有4 个插座打开。在图10O中，设备600检测对应于对X按钮1030的选择的输入1050M。
一旦插座3从电源板组移除，设备600就显示具有其自身的对应插座3 附件示能表示1004J的插座3。在图10P中，响应于检测到输入1050M，设备600显示添加到主界面602的新插座3附件示能表示1004J。插座3附件示能表示1004J包括指示插座处于如由点亮符号指示的打开状态的图形表示1004J1和指示插座处于打开状态的当前状态1004J2。电源板附件示能表示 604E在主界面602中保持不变。
在图10P中，设备600检测对应于插座3附件示能表示1004J上的长按 (或深按)的输入1050N。由于设备600确定插座3是具有单个功能的第一类型的附件，因此所检测到的示能表示1004J上的轻击将使得设备600传输打开/关闭插座3的命令，而不是使得设备600显示插座3附件界面1010J。在图10Q中，响应于检测到输入1050N，设备600显示插座3附件界面1010J。插座3附件界面1010J包括图形表示1010J1和指示插座3处于打开状态的当前状态1010J2。插座3附件界面1010J包括用于打开/关闭插座3的单个控件示能表示1008。
在图10Q中，设备600检测对应于对设置快捷方式示能表示1012的选择的输入(例如，轻击)1050O。在图10R中，响应于检测到输入1050O，设备600在插座3附件示能表示1010J中显示插座3设置部分1018J。设置部分1010J包括用于将原来一起成组的电源板附件和插座3重新成组的重新成组示能表示1014C。设置部分1010J还包括用于从主界面602删除附件并由此与设备600解除关联的移除附件示能表示1016。
图10R至图10T示出了当附件的部件诸如电源板的插座被移除时，通知1062提示用户确认继续进行。如果用户继续移除部件，则附件也与主界面602中的附件示能表示一起被移除。在图10R中，设备600检测对应于对移除附件示能表示1016的选择的输入(例如，轻击)1050P。在图10S中，响应于检测到输入1050P，设备600显示指示移除插座3将使得电源板和其他五个插座部件与设备600解除关联的通知。因为插座3物理上是电源板的部分，所以移除插座3将使得移除插座3是其一部分的整个电源板附件。在图10S中，设备600检测对应于移除插座3的输入1050Q。
在图10T中，继移除插座3之后(并且响应于移除该插座)，设备600 更新主界面602的显示。插座3附件示能表示1004J和电源板附件示能表示 604E从主界面602移除，因为电源板和插座附件不再与设备600相关联。
在10U至图10X中，示出了通过从插座3附件界面1010J的插座3设置部分1018J中选择的重新成组示能表示1014C来将插座3和电源板重新成组。在图10U中，设备600在插座3附件示能表示1004J被移除之前显示包括电源板附件示能表示602E和插座3附件示能表示1004J的主界面602。设备600检测对应于插座3附件示能表示1004J上的长按(或深按)的输入 1050R。在图10V中，响应于检测到输入1050R，设备600显示插座3附件界面1010J，如上文关于图10Q所讨论的。设备600检测对应于对设置快捷方式示能表示1012的选择的输入(例如，轻击)1050S。
在图10W中，响应于检测到输入1050S，设备600显示插座3设置部分1018J，如上文关于图10R所讨论的。设备600检测对应于对重新成组示能表示1014C的选择的输入(例如，轻击)1050T以将插座3与原来和插座 3成组的电源板附件重新结合。
在图10X中，继检测到输入1050T之后(例如，响应于检测到该输入)，设备600显示指示插座3已被重新添加到电源附件组的电源板附件界面1010E2。电源板附件界面1010E2显示对应于六个插座中的每个插座(包括刚刚重新添加到电源板附件组的插座3)的六个控件示能表示。六个控件示能表示中的每个控件示能表示指示对应的插座保持与插座3被重新添加到组之前的状态相同的状态。例如，插座1先前处于关闭状态，并且保持在关闭状态。类似地，插座3在从组中移除之前处于打开状态，并且在重新添加到组之后保持在打开状态。在图10X中，设备600检测对应于对设置快捷方式示能表示1012的选择的输入(例如，轻击)1040U。在一些实施方案中，一旦插座3与电源板重新结合，插座3附件示能表示1004J就不再显示在主界面602中。
图10Y至图10AC示出了将插座3与来自客厅电源板的插座结合。因此，在主界面602中创建插座组附件示能表示1004L，并且不再显示插座3 附件示能表示1004J和客厅电源板附件示能表示1004K。在图10Y中，在插座3与电源板重新结合之前，设备600显示插座3附件界面1010J。设备600 检测对应于对“与其他附件成组”示能表示1014A的选择的输入(例如，轻击)1050U，以将插座3添加到包括其他插座和电源板附件的自定义附件组。
在图10Z中，响应于检测到输入1050U，设备600显示新的组界面1064。设备600显示对应于家中的插座和电源板附件的插座和电源板示能表示 1034A至1034D，这些插座和电源板示能表示可被选择以在新的组界面1064 中形成新的组。例如，卧室插座3和电源板附件示能表示1034A至1034B 显示在卧室下方。过道插座附件示能表示1034C显示在过道下方。客厅电源板附件示能表示1034D显示在客厅下方。在图10Z中，设备600检测对应于对插座3附件示能表示1034C和客厅电源板附件示能表示1034D的选择的输入(例如，轻击)1050V至1050W以识别要成组在一起的附件。在图10AA中，响应于检测到输入1050V至1050W，设备600在所选择的附件插座3附件示能表示1034C和电源板附件示能表示1034D旁边显示复选标记。设备600检测对应于对完成按钮1032的选择的输入(例如，轻击) 1050X。在一些实施方案中，用户可将不同类型的各种附件(例如，恒温器、灯和电源板)成组在一起以创建对要由事件或语音命令触发(例如，当有人在家时，打开组中的附件)的组的快捷方式访问(例如，要由语音命令触发的一组任务的快捷方式)。
在图10AB中，响应于检测到输入1050X，设备600显示包括现在在新插座附件组中的客厅电源板插座和插座3的控件示能表示1040A至1040D 的新插座组附件界面1010L。插座组附件界面1010L包括指示该组包括插座附件的图形表示1010L1和指示在附件组中1个插座处于打开状态的当前状态1010L2。控件示能表示1040A打开该组中的所有插座附件。控件示能表示1040B和1040C对应于用于切换与客厅电源板相关联的插座1和2的打开/关闭状态的控件。控件示能表示1040D对应于用于切换插座3的打开/关闭状态的控件。设备600检测对应于对“X”按钮1030的选择的输入(例如，轻击)1050Y。
在图10AC中，响应于检测到输入1050Z，设备600显示对应于新插座附件组的新插座组附件示能表示1004L。设备600移除插座3附件示能表示 1004J和客厅电源板附件示能表示1004K，并且用新的插座组附件示能表示 1004L替换它们。
图11A至图11B是示出根据一些实施方案的用于使用电子设备来控制一组外部设备的方法1100的流程图。在具有显示设备的设备(例如，100、 300、500、600)处执行方法1100。方法1100中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1100提供了用于管理具有多个部件的可控外部设备的直观方式。该方法减轻了用户管理具有多个部件的可控外部设备的认知负担，从而创建了更有效的人机界面。允许用户从同一设备界面管理具有多个部件的可控外部设备减轻了用户的认知负担，因为可从一个地方管理用于该组的控件。因此，用户不需要打开单独的应用程序来管理每个可控外部设备和子部件的配置，从而创建更有效的人机界面。对于电池驱动的计算设备，使用户能够从同一设备界面管理可控外部设备和部件减少了配置可控外部设备的部件所需的输入的数量，从而允许用户有效地节省设备电力并增加电池两次充电之间的时间间隔。
在框1102处，在具有显示设备(例如，触敏显示设备)的设备(例如， 600)(例如，智能电话；智能家居控制设备)未被配置为控制第一可控外部设备时，该设备检测对应于将该电子设备配置为控制该第一可控外部设备的请求的第一组一个或多个输入(例如，1050A)。
在框1104处，响应于检测到该第一组一个或多个输入(例如， 1050A)，设备发起将电子设备配置为控制第一可控外部设备的过程，其中该过程包括：在框1106处，(例如，从附件设备、从存储设备特征的服务器)接收对应于该第一可控外部设备的信息。
在框1108处，根据基于所接收的信息确定第一可控外部设备与多个可控功能相关联(例如，打开/关闭电源板的多个插座、打开/关闭灯、打开/ 关闭风扇)，所述多个可控功能与该第一可控外部设备的多个子部件(例如，电源板的插座、吊扇的灯)相关联，(例如，附件与子部件相关联，例如具有多个插座的电源板、具有吊灯的风扇)，设备(例如，600)在显示设备(例如，603)上显示对应于包括该第一可控外部设备和多个子部件的组的第一附件示能表示(例如，604E)(例如，表示组的图块)。
在框1110处，根据基于所接收的信息确定第一可控外部设备不与多个子部件相关联(例如，与任何多个子部件，确定附件不包括子部件或仅包括一个子部件)时，设备在显示设备上显示对应于该第一可控外部设备的第二附件示能表示(例如，1004J)(例如，仅表示附件的图块)。显示可控外部设备及其部件的成组附件示能表示而不是组中每个部件的独立的附件示能表示提供了更有效的用户界面并减轻了用户的认知负担。选择成组附件示能表示提供了单个入口点以访问附件组的所有控件。这减少了配置可控外部设备及其部件所需的输入的数量，从而节省了电池电力。
在框1112处，在显示设备(例如，603)上显示第一附件示能表示或第二附件示能表示时，设备(例如，600)检测第二输入(例如，1050B、 1050D)(例如，保持超过预先确定的时间段的接触)。
在框1114处，响应于检测到该第二输入(例如，1050D)：在框1116 处，根据确定该第二输入对应于对第一附件示能表示(例如，604E)(例如，成组附件图块)的选择，设备(例如，600)在显示设备(例如，603) 上显示第一附件界面(例如，1010E)(例如，用于附件的配置页面(例如，卡片))，该第一附件界面包括对应于第一可控外部设备和多个子部件的多个控件示能表示(例如，1020A至1020G)(例如，用于打开/关闭附件、改变灯光颜色、改变温度的控件)以及控件重新配置示能表示(例如， 1020)(例如，用于从该组中解散子部件)，该控件重新配置示能表示在被选择时发起从该第一附件界面移除多个控件示能表示中的至少第一控件示能表示(例如，1020D)的过程。
在一些实施方案中，第一附件界面包括组控件示能表示(例如， 1020A)，该组控件示能表示在被选择时向第一可控外部设备传输影响多个子部件中的子部件的状态(例如，影响/改变多个子部件(例如，第一可控外部设备的所有子部件)中的每个子部件的状态)的命令。在一些实施方案中，第一附件界面(例如，100E)包括移除附件示能表示(例如，1016)。在一些实施方案中，第一附件界面的多个控件示能表示包括与多个子部件中的第一子部件(例如，多插座电源板的第一插座)相关联的第一控件示能表示(1020B)和与多个子部件中的第二子部件(例如，1020D) (例如，多插座电源板的第二插座)相关联的第二控件示能表示。在一些实施方案中，所述多个控件示能表示(例如，1020A至1020G)包括对应于第一类型的子部件(例如，灯子部件；插座子部件；风扇子部件)的一个或多个控件示能表示以及对应于第二类型的子部件的一个或多个控件示能表示。
在框1118处，根据确定第二输入(例如，1050B)对应于对第二附件示能表示(例如，604F)的选择，设备(例如，600)在显示设备(例如， 603)上显示包括用于第一可控外部设备的控件(例如，1008)的第二附件界面(例如，1010F)(例如，用于附件的配置页面(例如，卡片))，而不显示控件重新配置示能表示(例如，1020)。
在一些实施方案中，设备(例如，600)检测对应于对第一控件示能表示(例如，1020A)的选择的第三输入(例如，轻击手势)。响应于检测到该第三输入，向第一可控外部设备传输影响多个子部件中的子部件的状态的命令(例如，打开/关闭电源板的所有插座)。用单个控件示能表示(例如，1020A)控制附件组(例如，电源板和插座)提供了减轻用户认知负担的更有效的用户界面。例如，电源板包括六个插座。用户可轻击单个控件示能表示以切换组中的所有插座，而不是将每个插座切换到打开/关闭。这不仅简化了对电源板的控制，而且减少了输入的数量，这有助于保存电子设备的电池电力。
在一些实施方案中，在显示第一附件界面(例如，1010E)时，设备 (例如，600)检测对应于第一控件示能表示(例如，1020B)的第四输入 (例如，1050G)(例如，轻击手势)。响应于检测到该第四输入，设备向第一可控外部设备传输影响第一子部件的状态的命令(例如，将第一插座的状态切换为关闭和打开)，而不向该第一可控外部设备传输影响第二子部件的状态的命令(例如，电源板的第二插座不受影响)。显示用户可管理成组附件的每个部件的配置的聚合附件界面(例如，1010E)提供了减轻用户认知负担的更有效的用户界面。用户可在不影响组中另一部件的状态的情况下控制特定部件。因此，这简化了对附件组的管理，因为可从一个用户界面访问用于该组的控件。这不仅简化了对附件组中的部件的管理，而且减少了输入的数量，这有助于保存电子设备的电池电力。
在一些实施方案中，设备检测对应于移除附件示能表示(例如，1016) 的第五输入(例如，1050P)(例如，移除附件使得其不再由该电子设备控制)。响应于检测到对应于移除附件示能表示的该第五输入，设备(例如， 600)发起将电子设备(例如，600)配置为不再控制第一可控外部设备的过程，包括：根据确定符合一组提示标准，显示完成将电子设备配置为不再控制第一可控外部设备的过程还会将该电子设备配置为不再控制至少一个其他子部件设备(例如，移除插座将移除该电子设备对整个电源板的控制)的指示(例如，1062)，该组提示标准包括当第一可控外部设备是复合外部设备的子部件设备时符合的标准，该复合外部设备包括该电子设备当前被配置为控制的至少一个其他子部件设备(例如，只有在被移除的附件是作为可控附件的一部分的子部件(例如，移除作为电源板的一部分的插座)的情况下才显示通知))。根据确定不符合该组提示标准(例如，被移除的附件是独立附件，诸如灯或恒温器)，设备放弃显示完成将该电子设备配置为不再控制第一可控外部设备的过程还会将该电子设备配置为不再控制至少一个其他子部件设备的指示(例如，在不显示通知的情况下移除附件)。显示警示用户移除附件组中的部件将移除整个附件(例如，移除插座将移除电源板)的通知提供了减轻用户认知负担的更有效的用户体验。通常，用户未认识到通过移除组的部件还将移除整个附件。因此，请求用户在继续移除部件之前进行确认的通知节省了用户不得不重新添加无意移除的附件的时间。
在一些实施方案中，在显示第一附件界面(例如，图6J中的610A、图 10I中的1010E)(例如，包括与子部件相关联的多个控件示能表示的附件用户界面或卡片)时，设备(例如，600)检测第二组一个或多个输入(例如，图6J中的650G、图10K至图10N中的1050I至1050L)(例如，在一些示例中，对重新配置示能表示(例如，图6J中的616、图10L中的1020 和1022)的选择，选择要解散成组的特定子部件(例如，1018C)，点击“完成”按钮(例如，1032))，该第二组一个或多个输入包括对应于控件重新配置示能表示(例如，成组附件示能表示以及添加或移除示能表示) 的输入(例如，图6J中的650G、图10L中的1050J)。响应于检测到该第二组一个或多个输入：设备停止显示第一附件界面(例如，610A)并且停止显示第一附件示能表示(例如，604A)(例如，使组分裂)。在一些实施方案中，仅所选择的子部件(例如，插座)(例如，1018C)从组(例如，电源板)中移除并且具有其自身的图块(例如，1050N)，而具有子部件的剩余附件在成组图块(例如，604E)中保持成组(例如，该电源板中的剩余插座)。
设备显示第三附件示能表示(例如，604G、1004J)，该第三附件示能表示在被选择时显示包括对应于第一类型的子部件(例如，风扇、插座) 的一个或多个控件示能表示(例如，1008)的第三附件界面(例如，图 10V至图10Y中的1010J；810I)。在一些实施方案中，新成组图块(例如， 1004L)示出了相同类型的所有子部件，包括从先前组中分解出来的子部件，例如，包括来自带灯吊扇附件的灯的新的灯组。在一些实施方案中，第三附件界面包括重新成组示能表示(例如，1014C)。
设备显示第四附件示能表示(例如，604H)，该第四附件示能表示在被选择时显示包括对应于第二类型的子部件(例如，灯)的一个或多个控件示能表示(例如，608B至608C)的第四附件界面(例如，610H)。在一些实施方案中，选择控件重新配置示能表示(例如，616)提供了选项来将已经在第一附件界面(例如，610A)中成组在一起的控件示能表示中的所有控件示能表示(例如，608A至608C)解除关联并且创建新的控件示能表示组(例如，新的灯组614A以及图10Y至图10Z中的新的插座组1014A和 1064)。在一些实施方案中，新成组图块示出了所有风扇部件，包括先前是带灯吊扇附件的一部分的风扇。更新新成组附件示能表示和不再相关的附件示能表示(例如，因为它们被移除或与另一组结合)的显示为用户提供了更直观的不太杂乱的主界面。保持具有更新的附件示能表示的主界面提供了更有效的用户界面，这允许用户容易地找到感兴趣的特定附件示能表示。这减少了用户的认知负担，并且允许用户以更少的输入来管理附件，从而保存了电子设备的电池电力。
在一些实施方案中，在显示第三附件界面(例如，图6K中的604G、图10V至图10Y中的1010J、810I)时，设备检测第三组一个或多个输入 (例如，1014T)，该第三组一个或多个输入包括对应于对重新成组示能表示(例如，1014C)(例如，拆分插座的卡片具有用于与电源板重新结合成组的示能表示)的选择的输入(例如，1014T)。响应于检测到该第三组一个或多个输入：设备停止显示第三附件示能表示(例如，604G、1004J)和第四附件示能表示(例如，604H，从电源板拆分的另一个插座)并重新显示第一附件示能表示(例如，604A、604E)，该第一福建示能表示在被选择时显示包括多个控件示能表示(例如，图6G中的608A至608C、图10X 中的1020A至1020G)的第一附件界面(例如，610A、1010E)。在一些实施方案中，选择重新成组示能表示(例如，1014A)提供了选项来重新集合经由控件重新配置示能表示(例如，616)解散成组的一组控件示能表示 (例如，图6G中的608A至608C、图10X中的1020A至1020G)。提供界面选项来拆分成组附件并形成新的附件组给予用户以对用户更直观的方式管理附件的灵活性。例如，用户可能想要将公共空间中的所有灯组成一组，但保持卧室灯分开。因此，重新配置示能表示允许用户更有效地管理附件。此外，通过更直观地将附件成组，这减少了管理附件所需的输入的数量，这进一步保存了电子设备的电池电力。
需注意，上文相对于方法1100所述的过程(例如，图11A至图11B) 的详情也可以类似方式适用于下文/上文所述的方法。例如，方法900任选地包括上文参考方法700、900和1300所述的各种方法的特征中的一个或多个特征。例如，方法1100中所述的具有多个部件的可控外部设备可为方法 700中的可控外部设备，该可控外部设备可使用方法700中所述的界面来配置和访问。为了简明起见，这些详情在下文中不再重复。
图12A至图12Q示出了根据一些实施方案的用于恒温器附件的示例性用户界面。这些附图中的用户界面用于示出下文所述的过程，包括图13A 至图13B中的过程。
在图12A中，设备600在主界面602中显示对应于恒温器的恒温器附件示能表示604C。恒温器附件示能表示604C包括该恒温器的图形表示 604C1和指示该恒温器处于加热模式的当前状态的文本604C2。设备600检测对应于对主界面602中的恒温器附件示能表示604C的选择的输入1250A (例如，轻击)。响应于检测到对应于对恒温器附件示能表示604C的选择的输入1250A，设备600显示恒温器附件界面1210C，如图12B所示。在一些实施方案中，在恒温器附件示能表示604C上检测到的长按还使得恒温器附件界面1210C显示在设备600上。
图12B示出了该恒温器的控件。图12B示出了恒温器附件界面1210C，其包括恒温器的图形表示610C1和指示恒温器的当前状态的文本1210C2。恒温器附件界面1210C中的图形表示1210C1与恒温器附件示能表示604C 中的图形表示604C1匹配。图形表示604C1和1210C1包括恒温器图标，该恒温器图标的颜色与温度控件示能表示1208中显示的温度的颜色匹配。类似地，恒温器附件界面1210C中的当前状态1210C2与恒温器附件示能表示 604C中的当前状态604C2匹配。在图12B中，设备600检测对应于对冷却模式1220A的选择和对目标温度68度的选择的输入1250B。响应于检测到输入1250B，设备600更新图形表示1210C1以将恒温器图标的颜色改变为紫色，并且更新状态1210C2以指示恒温器“冷却到68度”。因此，当恒温器附件界面1210C关闭时，恒温器附件示能表示604C的图形表示604C1 和恒温器附件示能表示604的当前状态604C2被更新。
恒温器附件界面1210C包括附加温度数据，诸如部分1204中的室外当前温度和当前室温。恒温器附件界面1210C还包括设置快捷方式示能表示 1216，其对应于用于配置恒温器的恒温器设置部分1218。
恒温器附件界面1210C包括用于将房间设置为指定温度或某一温度范围内的温度的温度控件示能表示1208。温度控件示能表示1208由对应于某一温度范围的盘组成，该温度范围包括最低温度和最高温度，其中可选择温度。温度控件示能表示1208被分成对应于该温度范围的多个部分。温度控件示能表示1208的每个部分以从最低温度范围处的蓝色到最高温度范围处的红色的不同颜色梯度显示。例如，在图12B中，温度控件示能表示 1208包括对应于50度至60度之间的温度的蓝色梯度的第一部分。温度控件示能表示1208的第二部分以对应于60度至70度之间的温度的蓝色到红色梯度显示。温度控件示能表示1208的第三部分以对应于70度至80度之间的温度的红色梯度显示。温度控件示能表示1208包括用于根据如模式示能表示1220中所指示的所选择的操作模式来选择温度或温度范围的一个或多个滑动条(例如，1214A至1214C)。在一些实施方案中，当恒温器处于冷却模式或加热模式时，显示用于选择目标室温的单个滑动条1214A。在一些实施方案中，当恒温器处于自动模式、居家模式、离开模式或自定义模式时，温度控件示能表示1208包括用于选择目标温度范围内的最低温度和最高温度的多个滑动条，在这些温度之外将触发冷却或加热。温度控制附件1208包括指示当前状态和目标温度的文本1212。
恒温器附件界面1210C包括模式示能表示1220，其包括恒温器的操作模式列表。模式示能表示1220包括关闭模式、加热模式、冷却模式、自动模式、居家模式和离开模式。还可如关于图12C至图12G所讨论的那样创建自定义模式并添加到模式示能表示1220。当恒温器被设置为关闭模式时，该恒温器关闭。当恒温器被设置为加热模式时，该恒温器立即打开加热器，直到达到目标温度。类似地，当恒温器被设置为冷却模式时，该恒温器立即打开空调，直到达到目标温度。当恒温器被设置为自动模式时，该恒温器在其检测到当前室温在目标温度范围之外时打开加热器或空调。当恒温器被设置为居家模式、离开模式或自定义模式时，恒温器在指定时间段期间(例如，在有人在家的时间期间、在没人在家的时间期间或自定义时间段)将房间冷却或加热到目标温度或目标温度范围内的温度。
在图12B中，设备600在68度的目标温度下显示恒温器被设置为冷却模式1220A。设备600在温度控件示能表示1208中检测对应于将滑动条 1214A移动到68度的目标温度的输入1250B。继检测到输入1250B之后(并且响应于检测到该输入)，设备600向恒温器传输打开空调的命令，直到当前温度达到68度的目标温度。继检测到输入1250B之后(并且响应于检测到该输入)，设备600更新图形表示1210C1的颜色以匹配温度控件示能表示1208中所选择的温度的颜色。在一些实施方案中，设备600在设备处于冷却模式时将图形表示1210C1更新为蓝色，并且在设备处于加热模式时将图形表示更新为红色。设备600基于对应于温度控件示能表示1208中的60度至70度部分的蓝色至红色梯度中的温度的位置来将恒温器状态1212 中所显示的目标温度(例如，68度)的颜色更新为紫色。设备600更新恒温器状态1212的操作模式以指示该恒温器“正冷却至68度”。
图12C至图12G示出了在恒温器附件界面1210C中创建自定义温度模式。在图12C中，响应于检测到输入1250B，设备600显示恒温器设置部分 1218。在一些实施方案中，设备600使用上文相对于图8A至图8F所讨论的技术来检测向下滚动到恒温器附件界面1210C的轻扫手势以显示恒温器设置部分1218。恒温器设置部分1218包括用于配置恒温器的设置。恒温器设置部分1218包括用于创建自定义模式的模式示能表示1240和用于计划何时应激活或启用某一模式的计划示能表示1260。
在图12C中，设备600检测对应于对模式示能表示1240的选择的输入 1250C。在图12D中，响应于检测到输入1250C，设备600显示模式界面 1242，该模式界面包括已经创建的多个自定义模式(例如，居家模式 1242A和离开模式1242B)和用于添加新的自定义模式的自定义模式示能表示1242C。
在图12D中，设备600检测对应于对自定义模式示能表示1242C的选择的输入1250E。在图12E中，响应于检测到输入1250E，设备600显示用于创建新的自定义模式的新模式界面1244。新模式界面1244包括指示自定义模式的名称(例如，睡眠)的示能表示1208和用于设置目标温度范围的温度控件示能表示1208。温度控件示能表示1208包括用于选择目标温度范围的最高温度和最低温度的两个滑动条1214B至1214C。在一些实施方案中，温度控件示能表示1208显示52度至72度的默认范围。设备600基于温度控件示能表示1208中的颜色梯度中的温度的位置来显示恒温器状态 1212，该恒温器状态包括处于蓝色的52度和处于红色的72度的目标温度范围。
在图12E至图12F中，设备600检测滑动条1214C从72度移动到68度的输入1250F1。响应于检测到输入1250F，设备600以紫色来更新指示68 度的最高温度的恒温器状态1212的目标温度范围的显示。在图12E至图12F 中，设备600检测滑动条1214B从52度移动到62度的输入1250F2。响应于检测到输入1250F，设备600以浅蓝色来更新指示62度的最低温度的恒温器状态1212的目标温度范围的显示。因此，睡眠模式将目标温度范围设置为62度至68度。当当前室温在62度至68度的目标温度范围之外时，恒温器将打开加热器或空调。设备600检测对应于对完成按钮的选择的输入 1250G。在图12G中，响应于检测到输入1250G，设备600将对应于自定义睡眠模式的睡眠模式示能表示1242添加到模式界面1242中的模式列表。
图12H至图12Q示出了设置计划表，针对该计划表设置自定义温度模式。用户选择时间范围和自定义温度模式，这将在所选择的时间范围内生效。在图12G中，设备600检测对应于对返回按钮1236的选择的输入1250H。在图12H中，响应于检测到输入1250H，设备600显示恒温器设置部分1218。设备600检测对应于对计划示能表示1260的选择的输入1250I。在图12I中，响应于检测到输入1250I，设备600显示用于计划在其中应当在恒温器上激活或启用所选择的温度模式的场景或指定时间的计划界面1262。计划界面 1262包括用于选择一周中应当应用计划表的天数的自定义示能表示1270和将该计划表应用于一周中的每一天的每天示能表示。计划界面1262包括计划部分1264，其包括对应于示能表示1264A至1264B的计划场景的列表。计划部分1264包括指定上午9:00至下午4:00时间范围内恒温器被设置为离开模式的场景示能表示1264A和指定下午4:00至下午11:00时间范围内恒温器被设置为居家模式的场景示能表示1264B。离开模式和居家模式对应于目标温度范围。例如，离开模式可包括较大的目标温度范围(例如，50度至80度)，以防止恒温器在上午9:00至下午4:00期间没人在家时打开加热器或空调，从而节省能量。居家模式可包括较小的目标温度范围(例如， 60度至70度)，以触发恒温器在下午4:00至下午11:00期间有人在家时打开加热器或空调，从而保持更舒适的室温。可通过选择对应的示能表示来编辑场景。计划部分1264包括用于向计划表添加附加场景的示能表示 1264C。
在图12I中，设备600检测对应于对自定义示能表示1270的选择的输入1250J。在图12J中，响应于检测到输入1250J，设备600更新计划界面 1262中的计划部分1264的显示，以显示对应于一周中每一天的示能表示 1266A至1266G以及指示该计划表是否针对相应一天被启用的状态。场景 1264A至1264B未显示。在图12J中，设备600显示仅在星期日、星期五和星期六启用计划表。未针对星期一至星期四启用计划表。
在图12J中，设备600检测与对对应于星期日的示能表示1266A的选择相对应的输入1250K。在图12K中，响应于检测到输入1250K，设备600 显示星期日的界面，该界面包括针对星期日启用的场景1264A至1264B的计划表以及将新场景添加到星期日计划表的示能表示1264C。
在图12K中，设备600检测对应于对示能表示1264C的选择的输入 1250L以添加新场景。在图12L中，响应于检测到输入1250L，设备600显示用于创建新场景的“添加时间”界面1284。“添加时间”界面1284包括用于指定新场景的开始时间和结束时间的示能表示1286A至1286B、用于选择操作模式的模式示能表示1288以及用于指定温度范围的温度控件示能表示1208。在一些实施方案中，默认情况下，在模式示能表示1288中选择的操作模式是自动模式。在一些实施方案中，温度控件示能表示包括滑动条1214B至1214C以使得能够选择目标温度范围。
图12L至图12O示出了选择其中操作模式被设置为启用的时间。在图 12L中，设备600检测对应于对示能表示1286A的选择的输入1250M。在图 12M中，响应于检测到输入1250M，设备显示下拉菜单以使得能够选择要启用该场景的时间。在图12M至图12N中，设备600检测输入1250N，该输入对应于在下拉菜单中向下滚动以选择下午11:00作为场景的开始时间。类似地，设备600检测示能表示1286B中将场景结束时间设置为上午6:00 的输入。
在图12N中，设备600检测对应于对模式示能表示1288的选择的输入 1250O。根据输入1250O，设备600显示下拉菜单，该下拉菜单列出恒温器的可用操作模式。在图12N至图12O中，设备600检测对应于向下滚动以选择睡眠模式的输入1250P。
在图12P中，响应于检测到输入1250P，设备600更新温度控件示能表示1208以显示该睡眠模式中指定的62度至68度的目标温度范围。温度控件示能表示1208不包括滑动条1214B至1214C，因为温度范围由睡眠模式设置并且不能被调节。设备600以对应的颜色更新恒温器状态1212的目标温度范围是62度至68度的显示。在一些实施方案中，选择自动模式来指定不同的目标温度范围。设备600检测对完成按钮1232的选择以将场景添加到星期日计划表。如图12Q所示，设备600在计划部分1264中显示计划表中针对星期日启用的场景。设备600在计划部分1264中显示对应于针对星期日启用的场景的示能表示1264A至1264C，所述启用的场景包括对应于示能表示1264C的新添加的场景。在一些实施方案中，可针对计划表或温度模式创建快捷方式，使得可使用事件(例如，天气)来触发该快捷方式。例如，可创建快捷方式(例如，场景)使得当气温超过75度时恒温器打开到冷却模式。
图13A至图13B是示出根据一些实施方案的用于使用电子设备来控制恒温器的方法1300的流程图。方法1300在具有显示设备(例如，603)的设备(例如，100、300、500、600)处执行。方法1300中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1300提供了用于从电子设备(例如，600)管理用于恒温器设备的温度设置的直观方式。该方法减少了用户管理恒温器设置和计划表的认知负担，从而创建更有效的人机界面。对于电池驱动的计算设备，使得用户能够快速选择自定义恒温器模式允许用户更快且更有效地设置恒温器设备，这节省了功率并且增加了电子设备的电池两次充电之间的时间间隔。
在框1302处，设备(例如，600)在显示设备(例如，603)上显示包括第一组控件(例如，1208)(例如，一个或多个控件，例如，用于改变温度的拨盘)的温度模式创建用户界面(例如，1234)，以用于为可由电子设备控制的外部恒温器设备创建温度模式(例如，1246)(例如，自定义温度设置)。
在框1304处，当在显示设备(例如，603)上显示温度模式创建用户界面(例如，1234)时，设备(例如，600)检测第一组一个或多个输入 (例如，1250F1和1250F2)(例如，使用拨盘轻击和选择温度范围)。
在框1306处，响应于第一组一个或多个输入(例如，1250F1和 1250F2)：在框1308处，设备(例如，600)选择包括最低温度(最低环境温度(例如，在检测到温度时，使得外部恒温器设备接合加热元件))和最高温度(例如，最高环境温度(例如，在检测到温度时，使得外部恒温器设备接合冷却元件))的温度范围(例如，选择温度拨盘中的温度范围) (例如，1212)，该温度范围不同于最低温度范围。
任选地，在框1310处，设备在温度模式创建用户界面(例如，1208) 中显示所选择的温度范围(例如，温度拨盘)的图形指示(例如，1212)，该温度指示包括：任选地，在框1312处，根据所选择的温度范围的第一部分在第一预先确定的温度范围内，设备以对应于第一预先确定的温度范围的第一颜色显示图形指示的第一部分(例如，介于70度和75度之间的图形指示的一部分以橙色显示)。在一些实施方案中，在框1314处，根据所选择的温度范围的第一部分在第二预先确定的温度范围内，设备以对应于第二预先确定的温度范围的不同于第一颜色的第二颜色显示图形指示的第一部分，(例如，介于65度和69度之间的图形指示的一部分以黄色显示)。
在一些实施方案中，设备显示最低温度的数字指示(例如，1212)。根据最低温度在第一预先确定的温度范围内，设备以第一颜色显示最低温度的数字指示(例如，以对应于较低温度范围的颜色的颜色显示温度范围内的最低温度)。根据最低温度在第二预先确定的温度范围内，设备以第二颜色显示最低温度的数字指示(例如，如果温度移动到具有与其相关联的不同颜色的第二区域，则用更新的颜色更新最低温度文本的颜色)。在一些实施方案中，设备显示最高温度的数字指示(例如，1212)。根据最高温度在第一预先确定的温度范围内，设备以第一颜色显示最高温度的数字指示(例如，以对应于较高温度范围的颜色的颜色显示温度范围内的最高温度)。根据最高温度在第二预先确定的温度范围内，设备以第二颜色显示最高温度的数字指示(例如，如果温度移动到具有与其相关联的不同颜色的第二区域，则用更新的颜色更新最高温度文本的颜色)。以与温度控制附件中的温度范围匹配的颜色显示温度为用户提供了恒温器中的温度设置的视觉反馈。这有助于通过允许用户快速识别出红色数字对应于较高温度并且蓝色数字对应于较低温度来提供更有效的用户界面并减少用户的认知负担。
在框1316处，设备将温度范围与第一温度模式(例如，1242D)(例如，自定义温度设置、场景)相关联。在框1318处，在将温度范围与第一温度模式相关联之后，设备(例如，600)在显示设备上显示包括用于创建外部恒温器设备的计划操作的第二组控件(例如，1286A至1286B、1288) 的温度计划用户界面(例如，1262)。允许用户通过保存温度范围设置来创建自定义温度模式或操作模式提供了更有效的用户界面。具体地讲，因为某些温度设置在日常生活中是相关的(例如，当无人在家时设置温度范围与当有人在家时设置不同的温度范围)，所以能够选择保存的温度设置可以节省时间。这还有助于减少用户记忆某些设置的认知负担，并通过减少设定温度设置所需的输入数量来保持电子设备上的电池电力。
在框1320处，当在显示设备(例如，603)上显示温度计划用户界面 (例如，1262)时，设备(例如，600)检测第二组一个或多个输入(例如， 1250M至1250Q)。在框1322处，响应于检测到第二组一个或多个输入：任选地，在框1324处，第二组一个或多个输入包括对应于从多个可用温度模式(例如，1288)(例如，显示的存储的温度模式列表)选择第一温度模式(例如，1250Q)的输入，在框1326处，设备选择用于激活第一计划操作的第一标准(例如，时间范围)(例如，1286A至1286B)。在框1328 处，设备将第一温度模式与第一计划操作(例如，1264C)相关联(例如，选择与第一温度模式相关联的示能表示)。
需注意，上文相对于方法1300所述的过程(例如，图13A至图13B) 的详情也可以类似方式适用于下文/上文所述的方法。例如，方法1300任选地包括上文参考方法700、900和1100所述的各种方法的特征中的一个或多个特征。例如，方法1300的恒温器是使用方法900的方法的第一可控外部设备。为了简明起见，这些详情在下文中不再重复。
图14A至图14T示出了根据一些实施方案的针对用于管理附件设备的应用程序的示例性用户界面。这些附图中的用户界面用于示出下文所述的过程，包括图15中的过程。
图14A示出了电子设备600，该电子设备是具有显示器603的智能电话。显示器603包括触敏表面，电子设备600可在该触敏表面上检测用户手势(例如，轻击、轻扫、拖动)。在一些实施方案中，电子设备600包括电子设备100、300、500或600的一个或多个特征。
在图14A中，电子设备600显示用于配置附件设备的主用户界面602。主用户界面602在上文中相对于图6A进一步讨论。在一些实施方案中，附件设备也可被称为可控外部设备。主用户界面602包括表示相应场景配置文件的场景对象1402A至1402C。在一些实施方案中，场景配置文件包括关于位置处的一个或多个附件设备的指定状态的数据。在一些实施方案中，场景配置文件也可被称为“场景”。另外，主用户界面602包括附件示能表示604A至604F，其中附件示能表示是表示附件设备的图形图块。例如，附件示能表示604D表示卧室扬声器，该卧室扬声器能够经由其扬声器进行音频输出。
在图14A处，用户执行轻击手势以发起用于添加要由电子设备600配置的附件或场景配置文件的过程。因此，电子设备600在示能表示640(例如，可选择用户界面对象)处检测轻击手势1400。
在图14B处，在检测到轻击手势1400时，电子设备600任选地模糊主用户界面602，并且显示覆盖在主用户界面602顶部上的附件按钮1404和场景按钮1406。用户执行轻击手势以发起用于添加场景配置文件的过程。因此，电子设备600在场景按钮1406处检测轻击手势1408。在一些实施方案中，在附件按钮1404处检测轻击手势使得发起用于将附件设备添加到主用户界面602的过程。
在图14C处，在检测到轻击手势1408时，电子设备600显示用于添加新场景配置文件的新场景用户界面1410。新场景用户界面1410包括用于命名场景配置文件(例如，“场景”)的文本字段。用户执行轻击手势以将附件设备添加到要被配置用于场景配置文件的一组附件设备。因此，在显示新场景用户界面1410时，电子设备600在附件按钮1414处检测轻击手势 1412。
在图14D处，在检测到轻击手势1412时，电子设备600用附件选择用户界面1416的显示替换新场景用户界面1410的显示。附件选择用户界面 1416包括表示可用于为场景配置文件配置的附件设备的附件示能表示(例如，604A至604F)。附件示能表示已被修改为包括其选择状态(例如，被选择或尚未被选择)的视觉指示。用户选择要添加到场景配置文件的卧室风扇灯和过道恒温器。因此，电子设备600在附件示能表示604A处检测轻击手势1418并且在附件示能表示604C处检测轻击手势1420。在图14D处，在检测到轻击手势1418之前，附件示能表示604A和604C与未选择附件示能表示的视觉指示一起显示。
在图14E处，在检测到轻击手势1418和1420时，电子设备600显示具有附件示能表示已被选择的视觉指示的附件示能表示(例如，604A、 604C)。在期望的附件设备已被选择的情况下，用户执行轻击手势以确认对附件设备的选择，并且将所选择的附件设备添加到用于场景配置文件的一组附件设备。因此，电子设备600在完成按钮1426处检测轻击手势1424。
在图14F处，在检测到将所选择的附件设备添加到该组附件设备的输入(例如，1424)时，电子设备600将卧室风扇灯和过道恒温器添加到用于场景配置文件的该组附件设备。具体地讲，如图14F所示，电子设备600返回到显示新场景用户界面1410，包括由于在图14D处已被选择而显示附件示能表示604A和604C。附件示能表示604A和604C已被修改为包括动作状态(例如，“关闭”)，该动作状态表示在触发(例如，激活)场景配置文件时针对相应附件设备发生的动作。
在一些实施方案中，在检测到将所选择的附件设备添加到该组附件设备的输入(例如，1424)时，电子设备600确定所选择的附件设备(例如， 604A、604C)中的一者是否是特定类型。在一些实施方案中，如果附件设备能够输出声音(例如，经由扬声器)，则附件设备是特定类型的。在一些实施方案中，电子设备600执行该确定，以便确定是否提供与特定类型的附件设备相关联的特定配置选项(例如，图14H的1436)。
在图14F处，在确定所选择的附件设备中没有一个是特定类型的时，电子设备600不提供特定配置选项(例如，图14H的1436)。如下文相对于图14G至图14H所示，如果用户已经选择了特定类型的附件设备(例如，卧室扬声器)，则在检测到将所选择的附件设备添加到该组附件设备的输入(例如，1424)时，电子设备600将已经在图14F处提供了特定配置选项。
用户继续执行一个或多个输入以将特定类型的附件设备添加到用于场景配置文件的一组附件设备，从而得到图14H中提供的特定配置选项。返回图14F，用户执行轻击手势以编辑用于场景配置文件的该组附件设备。在显示图14F的新场景用户界面1410时，电子设备600在附件按钮1430处检测轻击手势1428。
在图14G处，在检测到轻击手势1428时，电子设备600返回到显示附件选择用户界面1416。在显示附件选择用户界面1416时，电子设备600在附件示能表示640D处检测轻击手势1432。在检测到轻击手势1432时，显示具有附件示能表示已被选择的视觉指示的附件示能表示640D。在期望的附件设备已被选择的情况下，用户执行轻击手势以确认对附件设备的选择，并且将所选择的附件设备添加到用于场景配置文件的一组附件设备。因此，电子设备600在完成按钮1426处检测轻击手势1434。
在图14H处，在检测到将所选择的附件设备添加到该组附件设备的输入(例如，1434)时，电子设备600将卧室扬声器添加到用于场景配置文件的该组附件设备。具体地讲，如图14H所示，电子设备600返回到显示新场景用户界面1410，包括显示附件示能表示604A、604C和604D。附件示能表示604D已被修改为包括动作状态(“打开”)，该动作状态表示在触发(例如，激活)场景配置文件时针对相应附件设备发生的动作。
如上所述，在一些实施方案中，在检测到将所选择的附件设备添加到该组附件设备的输入(例如，1424、1434)时，电子设备600确定所选择的附件设备(例如，604A、604C、604D)中的一者是否是特定类型(例如，能够输出声音的附件设备)的。在图14H处，在确定所选择的附件设备 (例如，604D)中的一者是特定类型的时，电子设备600显示音频选项按钮1436并提供具有音频选项按钮1436的某些配置选项，该音频选项按钮在被选择时发起用于配置与特定类型的附件设备的能力相关联的选项的过程。
在图14H处，用户执行轻击手势以发起用于为卧室扬声器配置音频选项的过程。因此，电子设备600在音频选项按钮1436处检测轻击手势1438。如下所述，图14I至图14N示出了与特定类型的附件设备相关联的各种配置选项。
在图14I处，在检测到轻击手势1438时，电子设备600显示音频用户界面1440。音频用户界面1440包括播放选项1442A至1442D。播放选项 1442A是默认选项，如图14H的音频选项按钮1436中的视觉指示(例如，“播放音频”)所示。不同的播放选项确定特定类型的附件设备(例如，卧室扬声器)的音频播放的状态。例如，选择播放选项1442A为用户提供了选择将在特定类型的附件设备上播放的音频项(例如，歌曲、有声读物、播客、音景)的能力。具体地讲，选择用于场景配置文件的播放选项 1442A使得将特定类型的附件设备(例如，卧室扬声器)配置为在场景配置文件被触发(例如，激活)时播放所选择的音频项。下文参考图14P至图14R进一步讨论其他播放选项。
为了选择要在特定类型的附件设备上播放的音频项，用户在音频选择按钮1444处执行轻击手势。因此，在显示音频用户界面1440时，电子设备 600在音频选择按钮1444处检测轻击手势1446。
在图14J处，在检测到轻击手势1446时，电子设备600显示音频源用户界面1448。音频源用户界面1448包括源选项1450A至1450D，这些源选项提供要由用户选择的不同类别的音频项。具体地讲，检测到对源选项 (例如，1450A至1450D)的选择触发发起用于选择属于所选择的源选项的类别的音频项的过程。例如，检测到对源选项1450B的选择使得显示音乐用户界面(例如，1451)，用户可从该音乐用户界面导航以选择音乐音频文件。又如，检测到对源选项1450D的选择使得音景用户界面(例如，图 16F的1630)，用户可从该用户界面选择音景音频文件。下文参考图18A 至图18G进一步描述音景。在一些实施方案中，在检测到轻击手势1446时，电子设备600不显示音频源用户界面1448，而是立即前进至显示音乐用户界面(例如，1451)。
用户执行轻击手势以选择源选项1450B。因此，在图14J处显示音频源用户界面1448时，电子设备600在源选项1450B处检测轻击手势1452。
在图14K处，在检测到轻击手势1452时，电子设备600用音乐用户界面1451的显示替换音频源用户界面1448的显示。音乐用户界面1451包括用于导航到音频项(例如，歌曲、专辑、播放列表)以供选择的选项。在图14K处，用户执行轻击手势以选择专辑项1455。因此，电子设备600在专辑项1455处检测轻击手势1453。
在图14L处，在检测到轻击手势1453时，电子设备600用音频用户界面1440替换音乐用户界面1451的显示。与图14I相比，图14L的音频用户界面1440包括表示1460，其表示用户所选择的音频项(例如，DJ Appleseed的专辑1)。此外，在确定音频项已被选择时，电子设备600显示所选择的音频项的重复选项1462A和随机播放选项1462B。如图14I所示，在确定音频项尚未被选择时，电子设备600放弃显示重复选项1462A和随机播放选项1462B。为了查看其他可用音频选项，用户执行滚动手势。因此，电子设备600检测具有向上方向上的移动的滚动手势1464。
在图14M处，在检测到滚动手势1464时，电子设备600将音量选项 1466A至1466B滚动到显示器603上。为场景配置文件选择音量选项1466A 使得将特定类型的附件设备(例如，卧室扬声器)配置为在场景配置文件在触发(例如，激活)时以播放附件设备当前被设置的音量播放所选择的音频项。相比之下，为场景配置文件选择音量选项1466B使得将附件设备配置为在场景配置文件被触发(例如，激活)时以用户所选择的自定义音量播放所选择的音频项。用户执行轻击手势以选择音量选项1466B。因此，电子设备600检测音量选项1466B处的轻击手势1468。
在图14N处，在检测到轻击手势1468时，电子设备600选择音量选项 1466B并显示音量选项1466B已被选择的视觉指示。此外，在检测到轻击手势1468时，电子设备600在音量选项1466B下方显示音量控件1470A。音量控件1470A使得用户能够选择所选择的音频项将以其播放的自定义音量。
在完成配置场景配置文件之后，用户执行轻击手势以完成场景配置文件并将对应的场景对象添加到主用户界面602。因此，电子设备600在完成按钮1474处检测轻击手势1472。
在图14O中，在检测到轻击手势1472时，电子设备600完成场景配置文件并将场景对象1402D添加到主用户界面602。因此，在对应于场景对象 1402D的场景配置文件被激活(例如，通过选择场景对象1402D)时，电子设备600根据场景配置文件的配置向一个或多个附件设备传输指令。例如，基于在图14C至图14N中配置的场景配置文件，激活对应于场景对象1420D 的场景配置文件将使得卧室扬声器以图14N中设置的自定义音量播放来自 DJAppleseed的专辑1的歌曲。
如下所述，其他选项可用于为特定类型的附件设备配置场景配置文件。上文参考图14I讨论了播放选项1442A。图14P至图14R示出了其他可用播放选项(例如，1442B至1442D)。
在图14P中，选择播放选项1442B为用户提供了暂停可能在特定类型的附件设备处发生的任何音频播放的能力。具体地讲，为场景配置文件选择播放选项1442A使得将特定类型的附件设备(例如，卧室扬声器)配置为暂停在场景配置文件被触发(例如，激活)时可能发生的任何音频播放。此外，选择播放选项1442B使得停止显示某些选项(例如，1444、1466A至 1466B)。
在图14Q处，选择播放选项1442C为用户提供了恢复在特定类型的附件设备处已经发生的任何音频播放的能力(例如，音频播放处于暂停状态)。具体地讲，选择用于场景配置文件的播放选项1442A使得将特定类型的附件设备(例如，卧室扬声器)配置为在场景配置文件被触发(例如，激活)时恢复音频播放。此外，选择播放选项1442C使得停止显示某些选项(例如，1444)。
在图14R处，选择播放选项1442D为用户提供了放弃改变特定类型的附件设备处的音频播放状态的能力。具体地讲，为场景配置文件选择播放选项1442D使得将特定类型的附件设备(例如，卧室扬声器)配置为在场景配置文件被触发(例如，激活)时继续音频播放的当前状态。例如，如果特定类型的附件设备在场景配置文件被触发时已经在播放特定音频文件，则附件设备将继续播放相同的特定音频文件。此外，选择播放选项1442D 使得停止显示某些选项(例如，1444)。
图14S至图14T示出了在将多个特定类型的附件设备添加到用于场景配置文件的该组附件设备时提供的附加选项。在图14S中，已将特定类型的多个附件设备(例如，604D、1476B至1476C)添加到场景配置文件。用户执行轻击手势以为场景配置文件配置音频选项。因此，电子设备600在音频选项按钮1436处检测轻击手势1478。
在图14T处，在检测到轻击手势1478时，电子设备600显示音频用户界面1440。用户选择音量选项1466B以为特定类型的每个附件设备设置自定义音量。因此，电子设备600检测音量选项1466B处的轻击手势1480。在检测到轻击手势1480时，电子设备600显示音量控件1470B至1470D (例如，在检测到轻击手势1480之前未显示的音量控件)，其中音量控件对应于特定类型的相应附件设备。例如，音量控件1470B对应于卧室扬声器，而音量控件1470C对应于餐厅扬声器。
图15是示出了根据一些实施方案的使用电子设备的方法1500的流程图。在具有显示设备的设备(例如，100、300、500、600)处执行方法 1500。方法1500中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1500提供了用于管理一组可控外部设备和扬声器的直观方式。该方法通过提供界面以设置场景来减少用户管理一组可控外部设备的认知负担，其中该组可控外部设备和扬声器在示能表示的轻击处执行预先确定的任务，从而创建更有效的人机界面。具体地讲，与在不包括扬声器时不显示界面相比，在该组可控外部设备包括扬声器时显示特定于扬声器的界面。仅基于该组可控外部设备示出相关界面减少了配置不相关设置的用户错误。针对电池驱动的计算设备，使得用户能够更快速且更有效地设置场景并管理该组可控外部设备节省了功率并且增加了电子设备的电池两次充电之间的时间间隔。
在框1502处，电子设备经由显示设备显示对应于第一可控外部设备 (例如，具有至少一个可控功能的设备(例如，智能灯泡、智能恒温器、智能扬声器)的第一附件示能表示(例如，604A至604F，可选择的图形图块)(例如，具有用户界面对象表示的可控外部设备的指示(例如文本，图形图标)的用户界面对象)。在一些实施方案中，可控设备是在该电子设备外部的电子设备。在一些示例中，可控外部设备具有使用(例如，经由)电子设备配置的一个或多个特征。
在框1504处，电子设备检测将第一可控外部设备(例如，1418、1420、 1432，经由在对应于第一附件是能表示(例如，在该第一附件是能表示上/ 在该第一附件示能表示处)的位置处检测到的用户输入)添加到第一组可控外部设备(被配置以用于第一场景(例如，包括关于一个或多个可控外部设备(例如，在特定位置处)的指定状态的数据的场景配置文件)的一个或多个输入。在一些实施方案中，在电子设备检测到对应于对第一附件示能表示的选择的用户手势并且检测到确认该选择的用户手势时，添加第一可控外部设备。
在框1506处，响应于检测到将第一可控外部设备添加到第一组可控外部设备的一个或多个输入，在框1508处，电子设备更新第一组可控外部设备以包括第一可控外部设备。
在框1506处，响应于检测到将第一可控外部设备添加到第一组可控外部设备的一个或多个输入，在框1510处，根据确定第一可控外部设备是第一类型(例如，能够执行特定操作(例如，播放音频文件，输出声音)的设备)，电子设备同时显示：对应于第一可控外部设备的第二附件示能表示(例如，图14H中的604D)以及配置示能表示(例如，图14H中的1436)，该配置示能表示在被选择时发起用于为第一可控外部设备配置音频设置的过程。在一些实施方案中，发起用于配置音频设置的过程包括显示用于选择要播放的媒体(例如，音频)项的示能表示。在一些实施方案中，对应于第一可控外部设备的第二附件示能表示与对应于第一可控外部设备的第一附件示能表示相同。在一些实施方案中，对应于第一可控外部设备的第二附件示能表示不同于第一附件示能表示(例如，第二附件示能表示具有附加视觉指示(例如，当前状态(例如，开/关))。
在框1506处，响应于检测到将第一可控外部设备添加到第一组可控外部设备的一个或多个输入，在框1512处，根据确定第一可控外部设备不是第一类型的，电子设备显示对应于第一可控外部设备的第二附件示能表示 (例如，图14F中的604A、604C)而不显示在被选择时发起用于为第一可控外部设备配置音频设置的过程的配置示能表示。
在一些实施方案中，电子设备检测对配置示能表示的选择，从而发起用于为第一可控外部设备配置音频设置的过程。显示发起用于为第一可控外部设备配置音频设置的过程的配置示能表示向用户提供第一可控外部设备可被配置用于音频设置的反馈。为用户提供改进的视觉反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些示例中，作为发起用于为第一可控外部设备配置音频设置的过程的一部分，电子设备显示音频选择示能表示(例如，选择音频按钮) (而不同时显示音频项的表示)。在一些示例中，电子设备检测对音频选择示能表示(例如，1444)的选择(例如，1446)。在一些示例中，响应于检测到对音频选择示能表示的选择，电子设备发起用于选择要在第一可控外部设备上播放的第一媒体类型的音频项(例如，专辑、播放列表、歌曲、广播电台)，包括显示用于导航到第一媒体类型的音频项的一个或多个选项(例如，图14J至图14K)。在一些实施方案中，作为发起用于选择音频项的过程的一部分，电子设备显示音乐用户界面。在一些实施方案中，作为发起用于选择第一媒体类型的音频项的过程的一部分，电子设备显示用于搜索第一媒体类型的音频项的搜索栏，最近播放项(例如，专辑、歌曲、播放列表)和/或在被选择时触发属于特定类别(例如，艺术家、专辑、歌曲、播放列表、广播电台)的音频项的显示的示能表示。在一些实施方案中，可为每个可控外部设备选择不同的音频项。显示用于导航到第一媒体类型的音频项的一个或多个选项为用户提供了可选择特定音频以在第一可控外部设备处播放的反馈。为用户提供改进的视觉反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些示例中，作为发起用于为第一可控外部设备配置音频设置的过程的一部分，电子设备显示音频选择示能表示(例如，选择音频按钮) (而不同时显示音频项的表示)。在一些示例中，电子设备检测音频选择示能表示的选择。在一些示例中，响应于检测到对音频选择示能表示的选择，电子设备经由显示设备同时显示第一音频类别选项和第二音频类别选项，该第一音频类别选项在被选择时发起用于选择第一媒体类型的音频项 (例如，有声读物、音乐、播客、音景)，该第二音频类别选项在被选择时发起用于选择不同于该第一媒体类型的第二媒体类型的音频项(例如， 14J、有声读物、音乐、播客、音景)的过程。在一些实施方案中，第一音频类别选项和第二音频类别选项显示在源用户界面中。在一些实施方案中，在源用户界面处选择音乐选项使得用音乐用户界面替换源用户界面的显示。在一些实施方案中，作为发起用于选择特定媒体类型(例如，第一、第二) 的音频项的过程的一部分，电子设备用用于导航到特定媒体类型(例如，第一、第二)的音频项的一个或多个选项替换第一音频类别选项和第二音频类别选项的显示。显示多个类别的音频选项为用户提供了可选择不同音频类型以在第一可控外部设备处播放的反馈。为用户提供改进的视觉反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些示例中，作为发起用于为第一可控外部设备配置音频设置的过程的一部分，电子设备显示音频选择示能表示(例如，选择音频按钮)。在一些示例中，继检测到对音频选择示能表示的选择之后，电子设备检测用于选择要在第一可控外部设备处播放的音频项的一个或多个用户输入。在一些示例中，继检测到用于选择要在第一可控外部设备处播放的音频项的一个或多个用户输入之后，电子设备经由显示设备同时显示音频选择示能表示(例如，图14L中的1444)和被选择为在第一可控外部设备处播放的音频项的表示(例如，图14L中的1460，专辑封面)。在一些实施方案中，在检测到用于选择要在第一可控外部设备处播放的音频项的一个或多个用户输入之前，不显示音频项的表示。显示被选择在第一可控外部设备处要播放的音频项的表示(例如，专辑封面)为用户提供了关于哪个音频项被正确选择播放的反馈。为用户提供改进的视觉反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些示例中，作为发起用于为第一可控外部设备配置音频设置的过程的一部分，电子设备显示音频选择示能表示(例如，选择音频按钮)。在一些示例中，继检测到对音频选择示能表示的选择之后，电子设备检测用于选择要在第一可控外部设备处播放的音频项的一个或多个用户输入。在一些示例中，继检测到用于选择要在第一可控外部设备处播放的音频项的一个或多个用户输入之后，电子设备经由显示设备同时显示重复示能表示(例如，1462A)和随机播放示能表示(例如，1462B)，该重复示能表示在被选择时配置音频项在播放期间是否在第一可控外部设备处重复，该随机播放示能表示在被选择时配置音频项在第一可控外部设备处播放的顺序。在一些实施方案中，重复示能表示和随机播放示能表示与音频选择示能表示同时显示。在一些实施方案中，在检测到用于选择要在第一可控外部设备处播放的音频项的一个或多个用户输入之前，不显示重复示能表示和随机播放示能表示。显示重复示能表示和随机播放示能表示为用户提供了可在第一可控外部设备处执行不同类型的播放的反馈。为用户提供改进的视觉反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些示例中，作为发起用于为第一可控外部设备配置音频设置的过程的一部分，根据确定第一音频模式类型已被选择，电子设备显示(例如，多个)音频播放选项(例如，音频选择示能表示、当前音量、自定义音量、在经过所选择的时间量之后停止播放音频的选项、重复选项和随机选项)。在一些实施方案中，第一类型的音频模式是用于在第一可控外部设备处播放所选择的音频项的音频模式(例如，“播放音频”)。在一些实施方案中，第一音频模式类型是所选择的默认选项。在一些实施方案中，对应于第一音频模式类型的示能表示与第一音频模式类型已被选择的视觉指示一起显示。在一些实施方案中，同时显示选择音频、音量和停止播放选项。
在一些示例中，在显示音频播放选项时，电子设备检测对音频模式的选择。在一些示例中，响应于检测到对音频模式的选择，根据确定第一音频模式类型已被选择，电子设备继续显示音频播放选项(例如，图14Q)。在一些示例中，响应于检测到对音频模式的选择，根据确定已选择第二音频模式类型，停止显示音频播放选项(例如，图14P)，其中第二音频模式类型不同于第一音频模式类型。在一些实施方案中，第二音频模式类型是用于在第一可控外部设备处不播放所选择的音频项的音频模式(例如，暂停音频、恢复音频、不改变播放内容)。示例包括移除“选择音频”选项或移除音量选项。
在一些示例中，电子设备检测用于将第二可控外部设备添加到(例如，经由在对应于第二附件示能表示(在该第二附件示能表示处/在该第二附件是能表示上)的位置处检测到的用户输入)第一组可控外部设备的一个或多个输入。在一些示例中，响应于检测到用于将第二可控外部设备添加到第一组可控外部设备的一个或多个输入，电子设备更新第一组可控外部设备以包括第二可控外部设备。
在一些示例中，继发起用于为第一可控外部设备配置音频设置的过程之后，电子设备检测用于自定义被选择要在第一可控外部设备处播放的音频项(例如，被选择在第一可控外部设备处播放的音频项)的播放音量的用户输入。在一些示例中，响应于检测到用于自定义播放音量的用户输入，根据确定第一组可控外部设备包括第一类型的单个可控外部设备，电子设备显示(例如，最初显示)用于调节(例如，经由拖动输入)第一可控外部设备处音频项的播放音量的单个音量控件。
在一些示例中，响应于检测到用于自定义播放音量的用户输入，根据确定第一组可控外部设备包括多个第一类型的可控外部设备，电子设备显示(例如，最初显示)用于调节(例如，经由拖动输入)相应可控外部设备处的音频项的相应播放音量的多个音量控件。在一些实施方案中，所选择的默认选项是“当前音量”。在一些实施方案中，如果存在一个可控外部设备，则电子设备放弃显示识别可控外部设备的信息。在一些实施方案中，如果存在多个可控外部设备，则电子设备显示识别可控外部设备中的每一者的信息。在一些实施方案中，针对每个相应的第一类型的可控外部设备显示相应的音量控件。
需注意，上文相对于方法1500所述的过程(例如，图15)的详情也以类似方式适用于下文/上文所述的方法。例如，方法1500任选地包括上文参考方法700、900和1100所述的各种方法的特征中的一个或多个特征。例如，方法1500中所述的具有多个部件的可控外部设备可以是方法700中的可控外部设备，该可控外部设备可使用方法700中所述的界面来配置和访问。为了简明起见，这些详情在下文中不再重复。
图16A至图16F示出了根据一些实施方案的用于管理特定类型的附件设备的应用的示例性用户界面。这些附图中的用户界面用于示出下文所述的过程，包括图17中的过程。
图16A示出了电子设备600，该电子设备是具有显示器603的智能电话。显示器603包括触敏表面，电子设备600可在该触敏表面上检测用户手势(例如，轻击、轻扫、拖动)。在一些实施方案中，电子设备600包括电子设备100、300、500或600的一个或多个特征。
在图16A中，电子设备600显示用于配置附件设备的主用户界面602。主用户界面602在上文中相对于图6A和图14A进一步讨论。在一些实施方案中，附件设备也可被称为可控外部设备。主用户界面602包括表示相应场景配置文件的场景对象1402A至1402C。在一些实施方案中，场景配置文件包括关于位置处的一个或多个附件设备的指定状态的数据。在一些实施方案中，场景配置文件也可被称为“场景”。另外，主用户界面602包括附件示能表示604A至604F，其中附件示能表示是表示附件设备的图形图块。例如，附件示能表示604D表示卧室扬声器，该卧室扬声器能够经由其扬声器进行音频输出。
在图16A处，用户执行轻击手势以配置特定类型的附件设备(例如，能够(例如，经由扬声器)输出声音的附件设备)。因此，在显示主用户界面602时，电子设备600在附件示能表示604D(例如，表示卧室扬声器) 处检测轻击手势1600。
在图16B处，在检测到轻击手势1600时，电子设备600用扬声器附件界面1602的显示替换主用户界面602的显示。当在主用户界面602上选择的附件设备是特定类型(例如，能够输出声音的附件设备)的时，电子设备600显示扬声器附件界面1602。在扬声器附件界面1602上，电子设备 600同时显示播放控件1604A至1604E和闹钟配置选项(例如，1606A至1606B和1608)。在一些实施方案中，如果所选择的附件设备不是特定类型的，则电子设备600放弃同时显示播放控件和闹钟配置选项。另外，扬声器附件界面1602包括设置快捷方式612，该设置快捷方式在被选择时使得显示卧室扬声器的附加设置。
播放控件1604A至1604E提供用于控制卧室扬声器处的音频播放的各种选项。播放控件1604A提供用于设置卧室扬声器的音量(例如，通过向卧室扬声器传输对应指令)的可调节滑块。播放控件1604B提供用于搓擦音频文件(例如，通过向卧室扬声器传输对应指令)的可调节滑块。检测到对播放控件1604C的选择使得播放前一曲目，而检测到对播放控件1604E 的选择使得播放下一曲目(例如，通过向卧室扬声器传输对应的指令)。检测到对播放控件1604D的选择使得音频播放在音频播放处于暂停状态的情况下开始，或者另选地，使得音频播放在音频播放处于播放状态的情况下暂停(例如，通过向卧室扬声器传输对应的指令)。
如上所述，扬声器附件界面1602还包括闹钟配置选项(例如，1606A 至1606B和1608)。例如，电子设备600显示用于编辑当前设置的闹钟的设置的编辑闹钟按钮1606A至1606B。另外，电子设备显示用于设置新闹钟的新闹钟按钮1608。在图16B中，用户执行轻击手势以设置新的闹钟。因此，电子设备600在新闹钟按钮1608处检测轻击手势1610。
在图16C处，在检测到轻击手势1610时，电子设备600用闹钟用户界面1612的显示替换扬声器附件界面1602的显示，以用于配置和设置闹钟。闹钟用户界面包括用于选择设置闹钟的时间的时间控件1614。在一些实施方案中，在确定新闹钟正被设置时，电子设备600将时间控件1614设置为当前时间(例如，上午10:09)。如图16C所示，电子设备600已将闹钟时间设置为下午12:09。在一些实施方案中，电子设备600响应于在时间控件1614处检测到对应于设置闹钟时间的请求的一个或多个输入来设置时间。在一些实施方案中，在确定当前设置的闹钟正被编辑时，电子设备600将时间控件1614设置为当前设置的闹钟被设置的时间。例如，如果在编辑闹钟按钮1606A处检测到轻击手势1610，则电子设备600显示用户界面1612，其中时间控件1614被设置为与编辑闹钟按钮1606A相关联的时间(例如，上午6:00)。
如图16C所示，闹钟用户界面1612还包括声音选项1616A至1616B。声音选项1616A是在被选择时使得显示音调按钮1618的用户界面对象。声音选项1616B是在被选择时使得显示音频选择按钮1444的用户界面对象。另外，闹钟用户界面1612包括音量选项1466A至1466B(如上文相对于图 14M至图14N所述)以及贪睡(snooze)选项1620。检测到对贪睡选项1620的选择使得经由语音输入启用或禁用使在附件设备(例如，卧室扬声器)上响起的闹钟贪睡的能力。在一些实施方案中，用户可经由语音输入 (例如，“嘿，扬声器，使闹钟贪睡”)在附件设备上使闹钟贪睡。
在一些实施方案中，检测对音调按钮1618的选择发起用于选择音调的过程。例如，电子设备600显示在闹钟响起时要播放的可选音调的列表。在一些实施方案中，在检测到对声音选项1616A的选择时，电子设备600立即显示可选音调列表，而不是显示音调按钮1618。在一些实施方案中，音调是少于固定时间量(例如，15、30、45秒)的音频文件的精选版本。
在图16C中显示闹钟用户界面1612时，用户执行一个或多个用户输入以发起用于选择媒体项(例如，有声读物、音乐、播客、音响)的过程。因此，电子设备600在声音选项1616B处检测轻击手势1622。
在图16D处，在检测到轻击手势1622时，电子设备600显示媒体选择按钮1624。在一些实施方案中，用音频选择按钮1444替换媒体选择按钮 1624。为了为附件设备的闹钟选择音频项，用户在媒体选择按钮1624处执行轻击手势。因此，在显示闹钟用户界面1612时，电子设备600在媒体选择按钮1624处检测轻击手势1626。
在图16E处，在检测到轻击手势1626时，电子设备600显示音频源用户界面1448。如上文关于图14J所述，音频源用户界面1448包括源选项 1450A至1450D，这些源选项提供要由用户选择的不同类别的音频项。具体地讲，检测到对源选项(例如，1450A至1450D)的选择触发发起用于选择属于所选择的源选项的类别的音频项的过程。例如，检测到对源选项1450B 的选择使得显示音乐用户界面(例如，图14K的1451)，用户可从该音乐用户界面导航以选择音频项(例如，播放列表、歌曲、专辑)。又如，检测到对源选项1450D的选择使得显示音景用户界面(例如，1630)，用户可从该用户界面选择音景项(例如，音频文件或音频文件的集合)。需注意，下文相对于图18A至图18G进一步描述了音景。在一些实施方案中，在检测到轻击手势1626时，电子设备600不显示音频源用户界面1448，而是立即前进至显示图16F的音景用户界面1630。
如图16E所示，用户执行轻击手势以发起用于选择音景项的过程。因此，电子设备600在检测源选项1450D处检测轻击手势1628。
在图16F处，在检测到轻击手势1628时，电子设备600用包括用于选择音景项的示能表示(例如，1634A至1634E)的音景用户界面1630替换音频源用户界面1448的显示。用户执行轻击手势以选择森林音景。因此，电子设备600在检测示能表示1634A处检测轻击手势1632。
在图16G中，在检测到轻击手势1632时，电子设备600用闹钟用户界面1612的显示替换音景用户界面1630的显示。由于媒体项已被选择(例如，森林音景)，闹钟用户界面1612现在包括表示1636，其表示用户选择的媒体项(例如，森林音景)。
在一些实施方案中，在已经由在上述用户界面处检测到的输入配置闹钟之后，电子设备600根据闹钟的配置将附件设备(例如，卧室扬声器)传输指令。例如，该指令可包括闹钟响起的时间、在闹钟响起时要播放的音频文件(例如，音调或媒体、到音频文件的链接)、是否启用或禁用贪睡能力、音量水平(例如，当前或自定义)或它们的组合。
图17是示出了根据一些实施方案的使用电子设备的方法1700的流程图。在具有显示设备的设备(例如，100、300、500、600)处执行方法 1700。方法1700中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1700提供了用于管理扬声器的直观方式。该方法通过显示用于配置一个用户界面中的扬声器的示能表示来减少用户管理扬声器的认知负担，从而创建更有效的人机界面。对于电池驱动的计算设备，使得用户能够有效地管理来自一个用户界面的扬声器提供更有效的用户界面并且更有效地节省功率，这增加了电子设备的电池两次充电之间的时间间隔。
在框1702处，电子设备经由显示设备同时显示一组一个或多个播放控件(例如，1406A至1406E，用户界面对象在被选择时使得音频播放的对应变化(例如，轻击下一个按钮使得下一首歌曲/媒体项播放，轻击暂停按钮使得歌曲/媒体项停止播放))以用于对媒体项(例如，音频文件、歌曲、有声读物、播客)执行播放功能(播放、暂停、下一曲目、上一曲目)，以及闹钟配置示能表示(例如，图16B中的1608，该用户界面对象在被选择时发起用于配置闹钟的过程(例如，编辑当前闹钟的设置、添加新闹钟)。在一些实施方案中，该组一个或多个播放控件和闹钟配置示能表示显示在附件控制用户界面中。
在框1704处，电子设备检测用户输入(例如，1610、语音输入、用户手势(例如，轻击手势))。
在框1706处，响应于在框1708处检测到该用户输入，根据确定所检测到的用户输入对应于对该组一个或多个播放控件中的播放控件的选择，电子设备发起用于基于所选择的播放控件在可控外部设备(例如，与第一可控外部设备相同，如上所述)处执行播放功能(例如，播放、暂停、下一曲目、上一曲目)的过程。在一些实施方案中，用于在可控外部设备处执行播放功能的过程被发起，同时继续同时显示该组一个或多个播放控件和闹钟配置示能表示。
在框1706处，响应于在框1710处检测到用户输入，根据确定所检测到的用户输入对应于对闹钟配置示能表示(例如，1608)的选择，电子设备用用于设置第一闹钟的时间(例如，在可控外部设备处)的一组时间示能表示(例如，1614，时间轮)替换一组一个或多个播放控件和闹钟配置示能表示的同时显示。在一些实施方案中，该组时间示能表示显示在配置闹钟用户界面中。在一些实施方案中，配置闹钟用户界面替换附件控制用户界面的显示。在一些实施方案中，第二闹钟配置示能表示与闹钟配置示能表示同时显示。在一些实施方案中，根据确定所检测到的用户输入对应于对第二闹钟配置示能表示的选择，电子设备用用于设置不同于第一闹钟的第二闹钟的时间的一组时间示能表示替换该组一个或多个播放控件和闹钟配置示能表示的同时显示。同时显示播放控件和闹钟配置示能表示为用户提供了播放功能可在可控外部设备处执行并且闹钟可被配置用于可控外部设备的反馈。为用户提供改进的视觉反馈并在同一用户界面中显示控件和闹钟示能表示增强了设备的可操作性，并且使用户设备界面更有效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备进行交互时的用户错误)，这另外通过使用户能够更快速且有效地使用设备而减少了功率使用并且改善了设备的电池寿命。
在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，电子设备与用于设置第一闹钟的时间的一组时间示能表示(例如，1614)同时显示多个闹钟声音选项，包括第一(例如，1616A，音调)选项和第二(例如，1616B，媒体)选项。在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，电子设备检测对应于多个闹钟声音选项中的一个的第二用户输入(例如，1622)。在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，响应于检测到对应于多个闹钟声音选项中的一个的第二用户输入，根据确定第二用户输入对应于对第一选项的选择，电子设备发起用于为第一闹钟选择第一媒体类型(例如，音调)的媒体项的过程(例如，显示可选择的音调的下拉列表，用可选择的音调列表替换该组时间示能表示和多个闹钟声音选项的同时显示)。在一些实施方案中，根据确定所检测到的用户输入对应于闹钟配置示能表示的选择，响应于检测到对应于多个闹钟声音选项中的一个的第二用户输入，根据确定第二用户输入对应于第二选项的选择，电子设备发起用于为第一闹钟选择第二媒体类型(例如，歌曲、专辑、播放列表)的媒体项的过程(例如，显示可选媒体项的下拉列表，用用于导航到将由用户选择的媒体项的一个或多个选项(例如，显示源用户界面或音乐用户界面)替换该组时间示能表示和多个闹钟声音选项的同时显示)。在一些实施方案中，第一媒体类型的媒体项从第一源填充/存储在第一数据库中。在一些实施方案中，第二媒体类型的媒体项从第二源填充/存储在第二数据库中。同时显示第一(例如，音调)选项和第二 (例如，媒体)选项为用户提供可为可控外部设备的闹钟选择不同类型的音频的反馈。为用户提供改进的视觉反馈增强了设备的可操作性，并且使用户-设备界面更有效(例如，通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误)，这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，作为发起用于为第一闹钟选择第一媒体类型的媒体项的过程的一部分，电子设备用多个第一媒体类型的可选择的媒体项的显示替换该组时间示能表示和多个闹钟声音选项的同时显示。在一些实施方案中，多个第一媒体类型的可选择的媒体项在当前用户界面上的下拉列表中示出。在一些实施方案中，第一媒体类型的媒体项(例如，音调)是小于固定时间量(例如，15、30、45秒)的音频文件的精选版本。
在一些实施方案中，作为发起用于为第一闹钟选择第二媒体类型的媒体项的过程的一部分，电子设备用用于导航到(例如，将由用户选择的) 第二媒体类型的媒体项的一个或多个选项(例如，1624)的显示替换该组时间示能表示和多个闹钟声音选项的同时显示。在一些实施方案中，一个或多个选项被显示为音乐用户界面的一部分或源用户界面的一部分。在一些实施方案中，电子设备检测在闹钟响起时对应于对要在可控外部设备处播放的第二媒体类型的媒体项(例如，歌曲)的选择的一个或多个输入，其中第二媒体类型的媒体项是可经由一组一个或多个播放控件控制的相同媒体项。换句话讲，用户可使用该组一个或多个播放控件来改变当前正在播放的歌曲的音量，同时还将闹钟配置为在设置闹钟的时间播放该同一首歌曲。显示用于导航到第二媒体类型的媒体项的选项为用户提供了界面以有效地定位期望的媒体项，从而减少了所需输入的数量。减少执行操作所需的输入数量增强了设备的可操作性，并且使用户设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中，根据确定闹钟配置示能表示是第一类型(例如，用于添加新闹钟)的，用于设置第一闹钟的时间(例如，在可控外部设备处)的一组时间示能表示(例如，时间轮)最初包括第一闹钟的时间的当前时间的视觉指示(例如，在没有干预用户输入的情况下使得该当前时间发生的视觉指示)。在一些实施方案中，根据确定闹钟配置示能表示是不同于第一类型的第二类型(例如，用于改变/编辑当前(例如，已设置)闹钟)的，用于设置第一闹钟的时间(例如，在可控外部设备处)的一组时间示能表示(例如，时间轮)最初包括第一闹钟先前被设置的时间的视觉指示(例如，在没有干预用户输入的情况下使得该时间发生的视觉指示)。
在一些实施方案中，电子设备在可控外部设备处检测用于设置(例如，保存、配置)第一闹钟的一个或多个用户输入。在一些实施方案中，响应于在可控外部设备处检测到用于设置第一闹钟的一个或多个输入，电子设备发起用于配置可控制外部设备配置以使闹钟响起的过程(例如，在设置第一闹钟时，播放为第一闹钟选择的音调或媒体项)。在一些实施方案中，发起该过程包括传输用于配置可控外部设备以在设置第一闹钟时使闹钟响起的指令。
在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，电子设备与用于设置第一闹钟的时间的一组时间示能表示(例如，1614，时间轮)同时显示用于配置在可控外部设备处响起的第一闹钟的音量的一个或多个音量选项(例如，1466A至1466B，“当前”按钮，“自定义”按钮)。
在一些实施方案中，在显示用于配置在可控外部设备处响起的闹钟的音量的一个或多个音量选项时，电子设备检测用于自定义第一闹钟的音量的用户输入(例如，经由选择所显示的音量选项中的一者(例如，“自定义”按钮))。在一些实施方案中，响应于检测到用于自定义第一闹钟的音量的用户输入，电子设备显示(例如，最初显示)音量控件，该音量控件用于调节(例如，经由拖动输入)在可控外部设备处响起的第一闹钟的音量。在一些实施方案中，在检测到用于自定义闹钟音量的用户输入之前不显示音量控件。在一些实施方案中，电子设备在可控外部设备处检测用于设置(例如，保存、配置)第一闹钟的一个或多个用户输入。在一些实施方案中，响应于在可控外部设备处检测到用于设置第一闹钟的一个或多个输入，电子设备发起用于配置可控外部设备配置使得闹钟以经由音量控件设置的音量响起的过程。在一些实施方案中，发起该过程包括传输用于配置可控外部设备使得闹钟以经由音量控件设置的音量响起的指令。
在一些实施方案中，根据确定所检测到的用户输入对应于闹钟配置示能表示的选择，电子设备与用于设置第一闹钟的时间的一组时间示能表示 (例如，时间轮)同时显示用于在可控外部设备处启用贪睡选项的贪睡示能表示(例如，1620)。在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，电子设备检测对贪睡示能表示(例如，1620)的选择以启用贪睡选项。在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，电子设备检测用于在可控外部设备处设置(例如，保存、配置)第一闹钟的一个或多个用户输入。在一些实施方案中，根据确定所检测到的用户输入对应于对闹钟配置示能表示的选择，响应于检测到用于在可控外部设备处设置第一闹钟的一个或多个输入，并且根据确定已启用贪睡选项，响应于检测到满足某些标准的语音输入(例如，被确定为对应于短语诸如“嘿，扬声器，使闹钟贪睡”的语音输入)，电子设备发起将可控外部设备配置为暂时禁用在可控外部设备处响起的第一闹钟的过程。
在一些实施方案中，发起该过程包括向可控制外部设备传输指令，以将可控外部设备配置为能够响应于检测到满足某些标准的语音输入而暂时禁用响起的闹钟。
需注意，上文相对于方法1700所述的过程(例如，图17)的详情也以类似方式适用于下文/上文所述的方法。例如，方法1700任选地包括以上参考方法700、900、1100和1500所述的各种方法的一个或多个特征。例如，方法1700中所述的具有多个部件的可控外部设备可以是方法700中的可控外部设备，该可控外部设备可使用方法700中所述的界面来配置和访问。为了简明起见，这些详情在下文中不再重复。
图18A至图18G示出了根据一些实施方案的用于使用语音命令来请求数字助理播放一般声音的示例性用户界面。这些附图中的用户界面用于示出下文所述的过程，包括图19中的过程。
在图18A中，设备600接收用于激活数字助理的语音命令1850A(例如，“嘿，助理”)。一旦数字助理被激活，设备600就在显示器603上显示指示数字助理可用的指示1810(例如，文本)。
图18B至图18C示出了设备600接收请求数字助理播放一种类型的媒体项(例如，舒缓的声音)的语音命令(例如，1850B)。作为响应，设备 600上的数字助理播放所请求类型的特定项(例如，森林声音)，并且还提供所请求类型的其他媒体项的列表(例如，1830A至1830C)作为另选选项。
在图18B中，设备600接收语音命令1850B以“播放舒缓的声音”。响应于接收到语音命令1850B，设备600在显示器603上显示语音命令1850B的表示1820A。在一些实施方案中，当数字助理被激活时，设备600 在显示器603上显示所接收的来自数字助理的语音命令和响应的转录本 1820A至1820C。响应于设备600接收到语音命令1850B，设备600播放所请求类型的特定项(例如，森林声音)，如图18B所示。在一些实施方案中，舒缓的声音不包括乐器或人声音频元素(例如，该声音是自然声音而非人造声音)。在一些实施方案中，舒缓的声包括生成的白噪音。设备600 在显示器603上显示对来自数字助理的语音命令1850B的响应的表示1820B (并且任选地播放对应的音频响应)，该表示指示正在播放舒缓的森林声音。设备600还显示指示存在相同类型的其他可用声音的表示1820C。声音列表1830包括与所请求的类型相同类型(例如，舒缓的声音)的其他声音项的列表。在一些实施方案中，设备600在所请求类型的声音列表中显示当前正在播放的舒缓的声音(例如，森林声音)。设备600显示分别对应于舒缓的海洋、城市和风的声音的声音示能表示1830A至1830C。用户可选择播放对应的声音的声音示能表示1830A至1830C中的任一者。在一些实施方案中，设备600播放对应于所显示的由数字助理提供的响应的转录的音频响应。在一些实施方案中，设备600播放指定附加舒缓声音(例如，海洋、城市和风)的列表的音频列表。
在一些实施方案中，设备600接收播放舒缓声音的附加语音命令。响应于接收到附加语音命令，设备600播放第二舒缓的声音，该第二舒缓的声音可以是先前播放的相同舒缓的声音(例如，森林声音)或不同的舒缓的声音(例如，海洋声音)。在一些实施方案中，在设备600确定设备600已接收到播放舒缓的声音的语音命令少于第一预先确定的次数(例如，3至5 次)时，设备600显示舒缓的声音示能表示1830A至1830C，如图18B所示。在一些实施方案中，在设备600确定设备600已接收到播放舒缓的声音的语音命令超过第一预先确定的次数时，设备600不显示舒缓的声音示能表示1830A至1830C。在一些实施方案中，针对第一预先确定数量的请求显示表示其他可用舒缓的声音的声音示能表示。在一些实施方案中，当设备已接收到播放舒缓的声音的请求超过第二预先确定的次数(例如，6至10 次)时，设备600播放在当前请求之前选择的默认或预先确定的舒缓的声音。在一些实施方案中，基于一个或多个因素诸如播放的新近度或播放的频率来选择默认的舒缓的声音或预先确定的舒缓的声音。
在图18C中，当正在播放舒缓的森林声音时，设备600在显示器603上显示音频播放界面1840。在一些实施方案中，设备600在外部扬声器(例如，客厅扬声器)上播放舒缓的声音。在一些实施方案中，设备600检测音频播放界面1840的快进按钮上的输入。作为响应，设备600播放不同的舒缓的声音。在一些实施方案中，当请求舒缓的声音时，设备600开始播放随机序列和/或随机选择和布置的片段的特定舒缓的声音。因此，如果多次请求舒缓的声音，则播放不同片段的特定舒缓的声音。
图18D至图18E示出了设备600接收使用触摸输入(例如，代替语音命令)播放声音项的请求。在图18D中，设备600检测显示器603上的轻扫手势1850C。在图18E中，响应于检测到轻扫手势1850C，设备600显示搜索栏。设备600检测对应于搜索请求“声音”的输入1850D。响应于接收到搜索请求1850D，设备600显示包括声音列表1860A的热门结果列表1860。声音列表1860A包括可用声音的列表：森林声音1860B和海洋声音1860C。在一些实施方案中，声音列表1860A包括不同类型的声音(例如，舒缓的声音、歌曲等)的列表。可以从搜索结果中选择要播放的森林声音1860B 和海洋声音1860C。
图18F至图18G示出了可从就寝界面1870播放舒缓的声音，该就寝界面可从时钟应用程序访问。在图18F中，设备600检测对应于对时钟应用程序的选择的输入1850E。响应于检测到输入1850E，设备600显示就寝界面 1870。就寝界面1870包括声音片段1880，该声音片段包括可包括用于就寝时间的舒缓的声音的列表。声音片段1880包括舒缓的声音：森林声音1880A和海洋声音1880B。设备600可检测对在声音片段1880中列出的声音(例如，1880A至1880B)的选择，并且开始播放所选择的声音。
图19是示出了根据一些实施方案的使用电子设备来播放特定类型的声音的方法1900的流程图。在具有显示设备的电子设备(例如，100、300、 500、600)处执行方法1900。方法1900中的一些操作任选地被组合，一些操作的次序任选地被改变，并且一些操作任选地被省略。
如下所述，方法1900提供了播放特定类型(例如，不指定特定音频媒体项)的音频媒体项的直观方式。该方法减少了用户在请求电子设备播放特定类型(例如，声音类别(例如，舒缓的声音))的音频媒体项时的认知负担，而无需认定特定的音频媒体项，从而创建更有效的人机界面。
在框1902处，电子设备接收播放第一类型的音频媒体项的请求(例如， 1850B)。该请求认定第一类型的音频媒体项并且不认定第一类型的特定音频媒体项。在一些实施方案中，电子设备(例如，600)具有对作为多个第一类型的媒体项的特定音频媒体项(例如，1830A至1830C)的访问权限 (存储在设备上或设备可访问)。在一些实施方案中，该请求包括用于虚拟助理的语音命令(例如，1850B)(例如，“播放舒缓的声音”)。在一些实施方案中，该请求包括激活虚拟助理的言语触发器(例如，1850A) (例如，“嘿，助理”)。在一些实施方案中，虚拟助理响应于触摸输入 (例如，按压按钮或触敏表面上的输入)而被激活。在一些实施方案中，第一类型的媒体项(例如，“舒缓的声音”)包括多个子类型(1830A至 1830C)(例如，海洋、城市、风)。
在框1904处，响应于接收到播放第一类型的音频媒体项的请求(例如， 1850B)，在框1906处，电子设备(例如，600)播放(例如，1840)第一类型的音频媒体项中的第一音频媒体项。在一些实施方案中，电子设备首先自动(例如，无进一步输入)和/或随机地从电子设备可访问的多个第一类型的音频媒体项中认定第一音频媒体项。
在框1904处，响应于接收到播放第一类型的音频媒体项的请求，在框 1908处，电子设备(例如，600)显示示能表示，该示能表示在被选择时播放第一类型的音频媒体项中的第二音频媒体项(例如，1830A至1830C)，其中该第一类型的音频媒体项中的第二音频媒体项不同于该第一类型的音频媒体项中的第一音频媒体项。显示具有与所请求的相同类型的附加媒体项的示能表示为用户提供了直观的方式来选择相同类型的附加音频媒体项。该方法减少了用户在请求电子设备从一组特定类型(例如，声音类别(例如，舒缓的声音))的音频媒体项中选择音频媒体项时的认知负担，而无需认定特定的音频媒体项，从而创建更有效的人机界面。除了播放所请求类型的媒体项外，由于显示了相同类型的其他音频媒体项，因此减少了输入和附加请求的数量，从而保存了设备的电池电力。
在一些实施方案中，在框1910处，电子设备在播放第一类型的音频媒体项中的第一音频媒体项的同时显示认定第一音频媒体项(例如，项名称 (例如，森林声音)、认定该项的图像)的图形对象(例如，1820B、 1840)。
在一些实施方案中，在播放第一类型的音频媒体项中的第一音频媒体项之后，电子设备接收播放第一类型的音频媒体项的第二请求(例如， 1850B)。在一些实施方案中，第二请求认定第一类型的音频媒体项并且不认定第一类型的特定音频媒体项。在一些实施方案中，响应于接收到播放第一类型的音频媒体项的第二请求，电子设备播放第一类型的音频媒体项中的第三音频媒体项(例如，与第一类型的第一音频媒体项相同的项1840；与第一类型不同的项1830A、1830B或1830C)。在一些实施方案中，响应于接收到播放第一类型音频媒体项的第二请求并且根据确定符合第一组标准，电子设备显示第二示能表示(例如，1830A至1830C)，该第一组标准包括在已接收到不认定第一类型的特定音频媒介项的播放第一类型的音频媒介项的少于第一预先确定数量(例如，3、5)的请求时符合的标准，该第二示能表示在被选择时播放第一类型的音频媒体项中的第四音频媒体项 (例如，不同于第二音频媒体项；与第二音频媒体项相同)。在一些实施方案中，第一类型的音频媒体项的第四音频媒体项(例如，1830A)不同于第一类型的音频媒体项的第三音频媒体项(例如，1830B)。在一些实施方案中，响应于接收到播放第一类型的音频媒体项的第二请求并且根据确定不符合第一组标准，电子设备放弃显示第二示能表示。在一些实施方案中，仅针对预先确定数量的请求显示第一类型的附加音频媒体项的示能表示。
在一些实施方案中，在接收到第二预先确定数量(例如，3、5)的请求之后，该请求播放不认定第一类型的特定音频媒体项的第一类型的音频媒体项，电子设备接收播放第一类型的音频媒体项的第三请求(例如， 1850B)。在一些实施方案中，第三请求认定第一类型的音频媒体项并且不认定第一类型的特定音频媒体项。在一些实施方案中，响应于接收到第三请求，电子设备播放在接收第三请求之前选择的第一类型的音频媒体项 (例如，默认音频媒体项；预先确定的音频媒体项)中的第五音频媒体项 (例如，1840)(例如，与第一类型的第一音频媒体项相同的项；与第一类型不同的项)。在一些实施方案中，基于选自由以下各项组成的组的一个或多个因素来选择(例如，预选)第五音频媒体项：播放的新近度和播放的频率。在播放特定类型的音频媒体项的预先确定数量的请求之后，播放特定类型的音频媒体项中的预先确定的音频媒体项提供了更有效的用户体验。该方法减少了用户在已经做出请求第二预先确定的次数之后必须从一组特定类型(例如，声音类别(例如，舒缓的声音))的音频媒体项中选择音频媒体项的认知负担，从而创建更有效的人机界面。由于自动播放预先确定的音频媒体项而无需附加的用户输入，因此减少了输入和附加请求的数量，从而保存了设备的电池电力。
在一些实施方案中，第一类型的音频媒体项是不包括乐器或人声音频元素的音频媒体项(例如，音频媒体项是自然声音、非人造声音)。在一些实施方案中，在播放期间，可暂停但不可快进音频媒体项。在一些实施方案中，音频媒体项包括生成的白噪音。
在一些实施方案中，第一类型的音频媒体项是包括音频的多个随机选择和布置的片段的音频媒体项(例如，通过从音频的多个可用片段中随机选择并以随机选择的顺序布置随机选择的片段来生成音频媒体项)。
在一些实施方案中，电子设备包括麦克风。在一些实施方案中，播放第一类型的音频媒体项的请求是经由麦克风检测到的语音输入(例如， 1850B)。
在一些实施方案中，电子设备包括触敏表面。在一些实施方案中，播放第一类型的音频媒体项的请求是经由触敏表面检测到的一组一个或多个输入。
需注意，上文相对于方法1900所述的过程(例如，图19)的详情也以类似方式适用于下文/上文所述的方法。例如，方法1900任选地包括上文参考方法1500和1700所述的各种方法的特征中的一个或多个特征。例如，方法1700中所述的具有多个部件的可控外部设备可以是方法1500和1700的可控外部设备，该可控外部设备可使用方法1500和1700中所述的界面来配置和访问。为了简明起见，这些详情在下文中不再重复。
本公开还包括以下示例性项目。
1.一种方法，包括：
在具有显示设备和通信设备的电子设备处：
在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；
检测对应于对所述第一附件示能表示的选择的第一输入；
响应于检测到所述第一输入：
根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；并且
根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：
第一控件示能表示，所述第一控件示能表示在被选择时向可控外部设备传输执行所述第一功能的命令；和
第二控件示能表示，所述第二控件示能表示在被选择时向所述第一可控外部设备传输执行不同于所述第一功能的第二功能的命令。
2.根据项目1所述的方法，其中：
所述第一可控外部设备与所述第一功能和所述第二功能相关联；
并且
根据确定符合所述一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行所述第一功能的命令，而不经由所述通信设备向所述第一可控外部设备传输执行所述第二功能的命令。
3.根据项目1至2中任一项所述的方法，其中所述一组命令传输标准包括当与所述第一可控外部设备相关联的所述第一功能是所述第一可控外部设备的主要功能时满足的第一标准。
4.根据项目1至3中任一项所述的方法，其中：
所述一组命令传输标准包括当与所述第一可控外部设备相关联的所述第一功能与所述第一可控外部设备的具有二元操作状态的第一可控部件相关联时满足的第二标准；并且
所述第一功能是从所述第一可控外部设备的所述第一可控部件的当前操作状态转变为所述第一可控外部设备的所述第一可控部件的另一个操作状态。
5.根据项目1至4中任一项所述的方法，其中在所述显示设备上显示所述第一附件界面还包括：
根据确定所述第一附件界面的一部分将显示在超过所述显示设备的边界的位置中，在第一位置处显示所述第一附件界面，在所述第一位置所述第一附件界面与所述边界对齐；以及
根据确定所述第一附件界面的所述部分将不显示在超过所述显示设备的所述边界的位置中，在基于所述第一附件示能表示的位置的第二位置处显示所述第一附件界面。
6.根据项目1至5中任一项所述的方法，其中：
所述第一附件示能表示包括第一图形元素和第一文本元素；
所述第一附件界面包括对应于所述第一图形元素的第二图形元素和对应于所述第一文本元素的第二文本元素；
显示所述第一附件界面还包括：
显示所述第一图形元素在视觉上转变为所述第二图形元素的动画；以及
显示所述第一文本元素在视觉上转变为所述第二文本元素的动画；所述方法还包括：
在显示所述第一附件界面时，检测对应于停止显示所述第一附件界面的请求的第二输入；以及
响应于检测到所述第二输入，停止显示所述第一附件界面，包括：
显示所述第二图形元素在视觉上转变为所述第一图形元素的动画；以及
显示所述第二文本元素在视觉上转变为所述第一文本元素的动画。
7.根据项目1至6中任一项所述的方法，其中所述第一附件示能表示：
根据确定所述第一可控外部设备与第二可控部件相关联，包括所述第二可控部件的图形指示，所述第二可控部件与所述第一功能相关联；
根据确定所述第一可控外部设备与第三可控部件相关联，包括所述第三可控部件的图形指示，所述第三可控部件与所述第二功能相关联；以及
根据确定所述第一可控外部设备与所述第二可控部件和所述第三可控部件相关联，包括所述第二可控部件的图形指示和所述第三可控部件的图形指示。
8.根据项目7所述的方法，其中所述第一可控外部设备与所述第二可控部件和所述第三可控部件相关联，所述方法还包括：
在显示所述第一附件界面时，检测包括对应于控件重新配置示能表示的输入的第一组一个或多个输入；以及
响应于检测到所述第一组一个或多个输入，显示所述用户界面的第二实例，所述第二实例包括：
第二附件示能表示，所述第二附件示能表示与所述第一可控外部设备的所述第二可控部件相关联并且不与所述第一可控外部设备的所述第三可控部件相关联；以及
第三附件示能表示，所述第三附件示能表示与所述第一可控外部设备的所述第三可控部件相关联并且不与所述第一可控外部设备的所述第二可控部件相关联。
9.根据项目1至8中任一项所述的方法，其中所述第一附件示能表示在检测到所述第一输入之前具有第一外观，所述方法还包括：
响应于检测到所述第一输入并且结合向所述第一可控外部设备传输执行所述第一功能的命令，将所述第一附件示能表示更新为基于所述第一功能的第二外观。
10.根据项目9所述的方法，其中所述第二外观包括基于所述第一功能的动画。
11.根据项目1至10中任一项所述的方法，其中所述第一附件界面包括所述第一控件示能表示和所述第二控件示能表示，并且其中显示所述第一附件界面包括：
根据所述第一功能和所述第二功能符合第一组布局标准，以并排布置显示所述第一控件示能表示和所述第二控件示能表示；以及
根据所述第一功能和所述第二功能符合第二组布局标准，以顶部和底部布置在所述第二控件示能表示上方显示所述第一控件示能表示。
12.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备和通信设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目1至11中任一项所述的方法的指令。
13.一种电子设备，包括：
显示设备；
通信设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目1 至11中任一项所述的方法的指令。
14.一种电子设备，包括：
显示设备；
通信设备；以及
用于执行根据项目1至11中任一项所述的方法的装置。
15.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备和通信设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；
检测对应于对所述第一附件示能表示的选择的第一输入；
响应于检测到所述第一输入：
根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；并且
根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：
第一控件示能表示，所述第一控件示能表示在被选择时向可控外部设备传输执行所述第一功能的命令；以及
第二控件示能表示，所述第二控件示能表示在被选择时向所述可控外部设备传输执行不同于所述第一功能的第二功能的命令。
16.一种电子设备，包括：
显示设备；
通信设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；
检测对应于对所述第一附件示能表示的选择的第一输入；
响应于检测到所述第一输入：
根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；并且根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：
第一控件示能表示，所述第一控件示能表示在被选择时向可控外部设备传输执行所述第一功能的命令；和
第二控件示能表示，所述第二控件示能表示在被选择时向所述可控外部设备传输执行不同于所述第一功能的第二功能的命令。
17.一种电子设备，包括：
显示设备；
通信设备；
用于在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面的装置；
用于检测对应于对所述第一附件示能表示的选择的第一输入的装置；
响应于检测到所述第一输入，用于以下操作的装置：
根据确定符合一组命令传输标准，经由所述通信设备向所述第一可控外部设备传输执行第一功能的命令；以及
根据确定不符合所述一组命令传输标准，在所述显示设备上显示第一附件界面，所述第一附件界面包括：
第一控件示能表示，所述第一控件示能表示在被选择时向可控外部设备传输执行所述第一功能的命令；和
第二控件示能表示，所述第二控件示能表示在被选择时向所述可控外部设备传输执行不同于所述第一功能的第二功能的命令。
18.一种方法，包括：
在具有显示设备的电子设备处：
在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；
检测对应于对所述第一附件示能表示的选择的第一输入；
响应于检测到所述第一输入，在所述显示设备上显示第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；
在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入使得所述第二区域的要显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；并且
根据确定所述第二输入未使得所述第二区域的要显示的部分超过所述阈值量，基于所述第二输入将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
19.根据项目18所述的方法，还包括：
在所述显示设备上显示所述第一附件界面时，检测第三输入；
以及
响应于检测到所述第三输入：
停止显示所述第一附件界面；并且
输出指示不再显示所述第一附件界面的触觉和音频反馈。
20.根据项目18至19中任一项所述的方法，还包括：
根据确定所述第二输入使得所述第二区域的要显示的部分超过阈值量，输出触觉和音频反馈。
21.根据项目18至20中任一项所述的方法，其中：
根据确定所述第一可控外部设备与少于预先确定数量的传感器相关联，所述第一附件界面的所述第一区域包括在所述第一区域中的第一位置处的对应于第一可控设备的所述传感器的一组控件示能表示；以及
根据确定所述第一可控外部设备与所述预先确定数量的或更多的传感器相关联，所述第一附件界面的所述第一区域包括在所述第一区域中的不同于所述第一位置的第二位置处的对应于所述第一可控设备的所述传感器的所述一组控件示能表示。
22.根据项目18至21中任一项所述的方法，其中所述第一附件界面的所述第一区域包括在所述第一区域中的第三位置处的第二区域示能表示，所述方法还包括：
检测对应于所述第二区域示能表示的第四输入；以及
响应于检测到对应于所述第二区域示能表示的所述第四输入，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域。
23.根据项目18至22中任一项所述的方法，其中：
所述第一附件界面包括第一总数量的控件示能表示，其中所述第一总数量的控件示能表示中的所有控件示能表示包括在所述第一区域中，并且所述第一总数量的控件示能表示中没有控件示能表示包括在所述第二区域中。
24.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目18 至23中任一项所述的方法的指令。
25.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目 18至23中任一项所述的方法的指令。
26.一种电子设备，包括：
显示设备；以及
用于执行根据项目18至23中任一项所述的方法的装置。
27.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；
检测对应于对所述第一附件示能表示的选择的第一输入；
响应于检测到所述第一输入，在所述显示设备上显示第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；
在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入使得所述第二区域的要显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；并且
根据确定所述第二输入未使得所述第二区域的要显示的部分超过所述阈值量，基于所述第二输入将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
28.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面；
检测对应于对所述第一附件示能表示的选择的第一输入；
响应于检测到所述第一输入，在所述显示设备上显示第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；
在所述显示设备上显示所述第一附件界面的所述第一区域时，检测第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入使得所述第二区域的要显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；并且
根据确定所述第二输入未使得所述第二区域的要显示的部分超过所述阈值量，基于所述第二输入将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
29.一种电子设备，包括：
显示设备；
用于在所述显示设备上显示包括与第一可控外部设备相关联的第一附件示能表示的用户界面的装置；
用于检测对应于对所述第一附件示能表示的选择的第一输入的装置；
响应于检测到所述第一输入，用于以下操作的装置：在所述显示设备上显示第一附件界面的第一区域，而不显示所述第一附件界面的第二区域，所述第一区域包括第一控件示能表示，所述第一控件示能表示在被选择时控制所述第一可控外部设备的第一功能；
用于在所述显示设备上显示所述第一附件界面的所述第一区域时检测第二输入的装置；以及
响应于检测到所述第二输入，用于以下操作的装置：
根据确定所述第二输入使得所述第二区域的要显示的部分超过阈值量，更新所述用户界面的显示以在所述第一附件界面的顶部部分处显示所述第二区域，同时停止显示所述第一区域，其中所述第二区域包括所述第一可控外部设备的一个或多个设置；以及
根据确定所述第二输入未使得所述第二区域的要显示的部分超过所述阈值量，基于所述第二输入将所述第一附件界面的显示更新为所述第一附件界面的所述第一区域中的第二控件示能表示，而不显示所述第一附件界面的所述第二区域。
30.一种方法，包括：
在具有显示设备的电子设备处：
在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；
响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：
接收对应于所述第一可控外部设备的信息；
根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及
根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；
在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；并且
根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
31.根据项目30所述的方法，其中所述第一附件界面包括组控件示能表示，所述组控件示能表示在被选择时向所述第一可控外部设备传输影响所述多个子部件中的每个子部件的对应状态的命令。
32.根据项目31所述的方法，还包括：
检测对应于对所述第一控件示能表示的选择的第三输入；以及
响应于检测到所述第三输入，向所述第一可控外部设备传输影响所述多个子部件中的每个子部件的对应状态的命令。
33.根据项目30至32中任一项所述的方法，其中所述第一附件界面中的所述多个控件示能表示包括与所述多个子部件中的第一子部件相关联的第一控件示能表示和与所述多个子部件中的第二子部件相关联的第二控件示能表示，所述方法还包括：
在显示所述第一附件界面时，检测对应于所述第一控件示能表示的第四输入；以及
响应于检测到所述第四输入，向所述第一可控外部设备传输影响所述第一子部件的状态的命令，而不向所述第一可控外部设备传输影响所述第二子部件的状态的命令。
34.根据项目30至33中任一项所述的方法，其中所述第一附件界面包括移除附件示能表示，所述方法还包括：
检测对应于所述移除附件示能表示的第五输入；
响应于检测到对应于所述移除附件示能表示的所述第五输入，发起将所述电子设备配置为不再控制所述第一可控外部设备的过程，包括：
根据确定符合一组提示标准，显示完成将所述电子设备配置为不再控制所述第一可控外部设备的过程还会将所述电子设备配置为不再控制至少一个其他子部件设备的指示，所述提示标准包括当所述第一可控外部设备是复合外部设备的子部件设备时符合的标准，所述复合外部设备包括所述电子设备当前被配置为控制的所述至少一个其他子部件设备；以及
根据确定不符合所述一组提示标准，放弃显示完成将所述电子设备配置为不再控制所述第一可控外部设备的过程还会将所述电子设备配置为不再控制所述至少一个其他子部件设备的指示。
35.根据项目30至34中任一项所述的方法，其中所述多个控件示能表示包括对应于第一类型的子部件的一个或多个控件示能表示和对应于第二类型的子部件的一个或多个控件示能表示，所述方法还包括：
在显示所述第一附件界面时，检测包括对应于所述控件重新配置示能表示的输入的第二组一个或多个输入；以及
响应于检测到所述第二组一个或多个输入：
停止显示所述第一附件界面并停止显示所述第一附件示能表示；
显示第三附件示能表示，所述第三附件示能表示在被选择时显示第三附件界面，所述第三附件界面包括对应于第一类型的子部件的一个或多个控件示能表示；并且
显示第四附件示能表示，所述第四附件示能表示在被选择时显示第四附件界面，所述第四附件界面包括对应于第二类型的子部件的一个或多个控件示能表示。
36.根据项目35所述的方法，其中所述第三附件界面包括重新成组示能表示，所述方法还包括：
在显示所述第三附件界面时，检测包括对应于所述重新成组示能表示的输入的第三组一个或多个输入；以及
响应于检测到所述第三组一个或多个输入：
停止显示所述第三附件示能表示和所述第四附件示能表示；并且
重新显示所述第一附件示能表示，所述第一附件示能表示在被选择时显示包括所述多个控件示能表示的所述第一附件界面。
37.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目30 至36中任一项所述的方法的指令。
38.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目 30至36中任一项所述的方法的指令。
39.一种电子设备，包括：
显示设备；以及
用于执行根据项目30至36中任一项所述的方法的装置。
40.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；
响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：
接收对应于所述第一可控外部设备的信息；
根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及
根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；
在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；并且
根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
41.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述电子设备未被配置为控制第一可控外部设备时，检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入；
响应于检测到所述第一组一个或多个输入，发起将所述电子设备配置为控制所述第一可控外部设备的过程，其中所述过程包括：
接收对应于所述第一可控外部设备的信息；
根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及
根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；
在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时，检测第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；并且
根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
42.一种电子设备，包括：
显示设备；
用于在所述电子设备未被配置为控制第一可控外部设备时检测对应于将所述电子设备配置为控制所述第一可控外部设备的请求的第一组一个或多个输入的装置；
响应于检测到所述第一组一个或多个输入，用于发起将所述电子设备配置为控制所述第一可控外部设备的过程的装置，其中所述过程包括：
接收对应于所述第一可控外部设备的信息；
根据基于所接收的信息确定所述第一可控外部设备与多个可控功能相关联，所述多个可控功能与所述第一可控外部设备的多个子部件相关联，在所述显示设备上显示对应于包括所述第一可控外部设备和所述多个子部件的组的第一附件示能表示；以及
根据基于所接收的信息确定所述第一可控外部设备不与所述多个子部件相关联，在所述显示设备上显示对应于所述第一可控外部设备的第二附件示能表示；
用于在所述显示设备上显示所述第一附件示能表示或所述第二附件示能表示时检测第二输入的装置；以及
响应于检测到所述第二输入，用于以下操作的装置：
根据确定所述第二输入对应于对所述第一附件示能表示的选择，在所述显示设备上显示第一附件界面，所述第一附件界面包括对应于所述第一可控外部设备和所述多个子部件的多个控件示能表示以及控件重新配置示能表示，所述控件重新配置示能表示在被选择时发起从所述第一附件界面移除所述多个控件示能表示中的至少第一控件示能表示的过程；以及
根据确定所述第二输入对应于对所述第二附件示能表示的选择，在所述显示设备上显示包括用于所述第一可控外部设备的控件的第二附件界面，而不显示所述控件重新配置示能表示。
43.一种方法，包括：
在具有显示设备的电子设备处：
在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；
在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；
响应于所述第一组一个或多个输入：
选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；并且
将所述温度范围与第一温度模式相关联；
在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；
在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及
响应于检测到所述第二组一个或多个输入：
选择用于激活第一计划操作的第一标准；并且将所述第一温度模式与所述第一计划操作相关联。
44.根据项目43所述的方法，其中所述第二组一个或多个输入包括对应于从多个可用温度模式中选择所述第一温度模式的输入。
45.根据项目43至44中任一项所述的方法，其中选择所述温度范围包括：
在所述温度模式创建用户界面中显示所选择的温度范围的图形指示，包括：
根据所选择的温度范围的第一部分在第一预先确定的温度范围内，以对应于所述第一预先确定的温度范围的第一颜色显示所述图形指示的第一部分；以及
根据所选择的温度范围的第一部分在第二预先确定的温度范围内，以对应于所述第二预先确定的温度范围的不同于所述第一颜色的第二颜色显示所述图形指示的第一部分。
46.根据项目45所述的方法，其中选择所述温度范围包括：
显示所述最低温度的数字指示，包括：
根据所述最低温度在所述第一预先确定的温度范围内，以所述第一颜色显示所述最低温度的数字指示；以及
根据所述最低温度在所述第二预先确定的温度范围内，以所述第二颜色显示所述最低温度的数字指示；以及显示所述最高温度的数字指示，包括：
根据所述最高温度在所述第一预先确定的温度范围内，以所述第一颜色显示所述最高温度的数字指示；以及
根据所述最高温度在所述第二预先确定的温度范围内，以所述第二颜色显示所述最高温度的数字指示。
47.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目43 至46中任一项所述的方法的指令。
48.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目 43至46中任一项所述的方法的指令。
49.一种电子设备，包括：
显示设备；以及
用于执行根据项目43至46中任一项所述的方法的装置。
50.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；
在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；
响应于所述第一组一个或多个输入：
选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；并且
将所述温度范围与第一温度模式相关联；
在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；
在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及
响应于检测到所述第二组一个或多个输入：
选择用于激活第一计划操作的第一标准；并且
将所述第一温度模式与所述第一计划操作相关联。
51.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
在所述显示设备上显示温度模式创建用户界面，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；
在所述显示设备上显示所述温度模式创建用户界面时，检测第一组一个或多个输入；
响应于所述第一组一个或多个输入：
选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；
将所述温度范围与第一温度模式相关联；
在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；
在所述显示设备上显示所述温度计划用户界面时，检测第二组一个或多个输入；以及
响应于检测到所述第二组一个或多个输入：
选择用于激活第一计划操作的第一标准；并且
将所述第一温度模式与所述第一计划操作相关联。
52.一种电子设备，包括：
显示设备；
用于在所述显示设备上显示温度模式创建用户界面的装置，所述温度模式创建用户界面包括用于为能够由所述电子设备控制的外部恒温器设备创建温度模式的第一组控件；
用于在所述显示设备上显示所述温度模式创建用户界面时检测第一组一个或多个输入的装置；
响应于所述第一组一个或多个输入，用于以下操作的装置：
选择包括最低温度和最高温度的温度范围，所述温度范围不同于最低温度范围；以及
将所述温度范围与第一温度模式相关联；
用于以下操作的装置：在将所述温度范围与第一温度模式相关联之后，在所述显示设备上显示包括用于创建所述外部恒温器设备的计划操作的第二组控件的温度计划用户界面；
用于在所述显示设备上显示所述温度计划用户界面时检测第二组一个或多个输入的装置；以及
响应于检测到所述第二组一个或多个输入，用于以下操作的装置：
选择用于激活第一计划操作的第一标准；以及
将所述第一温度模式与所述第一计划操作相关联。
53.一种方法，包括：
在具有显示设备的电子设备处：
经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；
检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备是第一类型，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；并且
根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
54.根据项目53所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，发起用于选择要在所述第一可控外部设备处播放的第一媒体类型的音频项的过程，包括显示用于导航到所述第一媒体类型的音频项的一个或多个选项。
55.根据项目53所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，经由所述显示设备同时显示：
第一音频类别选项，所述第一音频类别选项在被选择时发起用于选择第一媒体类型的音频项的过程，以及
第二音频类别选项，所述第二音频类别选项在被选择时发起用于选择不同于所述第一媒体类型的第二媒体类型的音频项的过程。
56.根据项目53至55中任一项所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；
以及
继检测到用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
所述音频选择示能表示，以及
被选择要在所述第一可控外部设备处播放的音频项的表示。
57.根据项目53至56中任一项所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；
以及
继检测到用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
重复示能表示，所述重复示能表示在被选择时配置所述音频项是否在播放期间在所述第一可控外部设备处重复，以及
随机播放示能表示，所述随机播放示能表示在被选择时配置所述音频项在所述第一可控外部设备处播放的顺序。
58.根据项目53至57中任一项所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括根据确定已选择第一音频模式类型来显示音频播放选项。
59.根据项目58所述的方法，还包括：
在显示所述音频播放选项时，检测对音频模式的选择；以及响应于检测到对所述音频模式的选择：
根据确定已选择所述第一音频模式类型，继续显示所述音频播放选项；并且
根据确定已选择第二音频模式类型，停止显示所述音频播放选项，其中所述第二音频模式类型不同于所述第一音频模式类型。
60.根据项目53至59中任一项所述的方法，还包括：
检测用于将第二可控外部设备添加到所述第一组可控外部设备的一个或多个输入；以及
响应于检测到用于将所述第二可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入，更新所述第一组可控外部设备以包括所述第二可控外部设备。
61.根据项目53至60中任一项所述的方法，还包括：
继发起用于为所述第一可控外部设备配置音频设置的过程之后，检测用于自定义音频项的播放音量的用户输入，所述音频项被选择要在所述第一可控外部设备处播放；以及
响应于检测到用于自定义所述播放音量的所述用户输入：
根据确定所述第一组可控外部设备包括单个所述第一类型的可控外部设备，显示用于调节所述第一可控外部设备处的所述音频项的所述播放音量的单个音量控件；并且
根据确定所述第一组可控外部设备包括多个所述第一类型的可控外部设备，显示用于调节相应的可控外部设备处的所述音频项的相应的播放音量的多个音量控件。
62.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备和音频输入设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目53至61中任一项所述的方法的指令。
63.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目 53至61中任一项所述的方法的指令。
64.一种电子设备，包括：
显示设备；以及
用于执行根据项目53至61中任一项所述的方法的装置。
65.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；
检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备是第一类型，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，
以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及
根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
66.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示；
检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备是第一类型，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；并且
根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
67.一种电子设备，包括：
显示设备；
用于经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示的装置；
用于检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入的装置；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入，用于以下操作的装置：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备是第一类型，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，
以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及
根据确定所述第一可控外部设备不是所述第一类型，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
68.一种方法，包括：
在具有显示设备的电子设备处：
经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；
检测用户输入；以及
响应于检测到所述用户输入：
根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；并且
根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，利用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的同时显示。
69.根据项目68所述的方法，还包括：
根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择：
与用于设置所述第一闹钟的时间的所述一组时间示能表示同时显示多个闹钟声音选项，包括第一选项和第二选项；
检测对应于所述多个闹钟声音选项中的一个闹钟声音选项的第二用户输入；以及
响应于检测到对应于所述多个闹钟声音选项中的一个闹钟声音选项的所述第二用户输入：
根据确定所述第二用户输入对应于对所述第一选项的选择，发起用于为所述第一闹钟选择第一媒体类型的媒体项的过程；并且
根据确定所述第二用户输入对应于对所述第二选项的选择，发起用于为所述第一闹钟选择第二媒体类型的媒体项的过程。
70.根据项目69所述的方法，其中发起用于为所述第一闹钟选择第一媒体类型的媒体项的过程包括利用所述第一媒体类型的多个可选择的媒体项的显示替换所述一组时间示能表示和所述多个闹钟声音选项的同时显示。
71.根据项目69至70中任一项所述的方法，其中发起用于为所述第一闹钟选择第二媒体类型的媒体项的过程包括利用用于导航到所述第二媒体类型的媒体项的一个或多个选项的显示替换所述一组时间示能表示和所述多个闹钟声音选项的同时显示。
72.根据项目68至71中任一项所述的方法，还包括：
根据确定所述闹钟配置示能表示是第一类型，用于设置所述第一闹钟的时间的所述一组时间示能表示最初包括针对所述第一闹钟的时间的当前时间的视觉指示；以及
根据确定所述闹钟配置示能表示是不同于所述第一类型的第二类型，用于设置所述第一闹钟的时间的所述一组时间示能表示最初包括所述第一闹钟先前被设置为的时间的视觉指示。
73.根据项目68至72中任一项所述的方法，还包括：
根据所述确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择：
与用于设置所述第一闹钟的时间的所述一组时间示能表示同时显示用于配置在所述可控外部设备处响起的所述第一闹钟的音量的一个或多个音量选项。
74.根据项目73所述的方法，还包括：
在显示用于配置在所述可控外部设备处响起的闹钟的音量的所述一个或多个音量选项时，检测用于自定义所述第一闹钟的音量的用户输入；以及
响应于检测到用于自定义所述第一闹钟的音量的所述用户输入，显示用于调节在所述可控外部设备处响起的所述第一闹钟的音量的音量控件。
75.根据项目68至74中任一项所述的方法，还包括：
根据所述确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择：
与用于设置所述第一闹钟的时间的所述一组时间示能表示同时显示用于在所述可控外部设备处启用贪睡选项的贪睡示能表示；
检测对所述贪睡示能表示的选择以启用所述贪睡选项；
检测用于在所述可控外部设备处设置所述第一闹钟的一个或多个用户输入；以及
响应于检测到用于在所述可控外部设备处设置所述第一闹钟的所述一个或多个输入并且根据确定已启用所述贪睡选项，发起过程以将所述可控外部设备配置为响应于检测到满足某些标准的语音输入而暂时禁用在所述可控外部设备处响起的所述第一闹钟。
76.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目68 至75中任一项所述的方法的指令。
77.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目 68至75中任一项所述的方法的指令。
78.一种电子设备，包括：
显示设备；以及
用于执行根据项目68至75中任一项所述的方法的装置。
79.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；
检测用户输入；以及
响应于检测到所述用户输入：
根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；并且
根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，利用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的同时显示。
80.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示；
检测用户输入；以及
响应于检测到所述用户输入：
根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；并且
根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，利用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的同时显示。
81.一种电子设备，包括：
显示设备；
用于经由所述显示设备同时显示用于对媒体项执行播放功能的一组一个或多个播放控件以及闹钟配置示能表示的装置；
用于检测用户输入的装置；以及
响应于检测到所述用户输入，用于以下操作的装置：
根据确定所检测到的用户输入对应于对所述一组一个或多个播放控件中的播放控件的选择，发起用于基于所选择的播放控件在可控外部设备处执行播放功能的过程；以及
根据确定所检测到的用户输入对应于对所述闹钟配置示能表示的选择，利用用于设置第一闹钟的时间的一组时间示能表示替换所述一组一个或多个播放控件和所述闹钟配置示能表示的同时显示。
82.一种方法，包括：
在具有显示设备的电子设备处：
接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及
响应于接收到播放所述第一类型的音频媒体项的请求：
播放所述第一类型的音频媒体项中的第一音频媒体项；
并且
显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
83.根据项目82所述的方法，还包括：
在播放所述第一类型的音频媒体项中的所述第一音频媒体项的同时，显示认定所述第一音频媒体项的图形对象。
84.根据项目82至83中任一项所述的方法，还包括：
在播放所述第一类型的音频媒体项中的所述第一音频媒体项之后，接收播放所述第一类型的音频媒体项的第二请求，其中所述第二请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及
响应于接收到播放所述第一类型的音频媒体项的所述第二请求：
播放所述第一类型的音频媒体项中的第三音频媒体项；
根据确定符合第一组标准，显示第二示能表示，所述第一组标准包括当已接收到不认定所述第一类型的特定音频媒体项的播放所述第一类型的音频媒体项的少于第一预先确定数量的请求时符合的标准，所述第二示能表示在被选择时播放所述第一类型的音频媒体项中的第四音频媒体项，其中所述第一类型的音频媒体项中的所述第四音频媒体项不同于所述第一类型的音频媒体项中的所述第三音频媒体项；并且
根据确定不符合所述第一组标准，放弃显示所述第二示能表示。
85.根据项目82至84中任一项所述的方法，还包括：
在接收到不认定所述第一类型的特定音频媒体项的播放所述第一类型的音频媒体项的第二预先确定数量的请求之后，接收播放所述第一类型的音频媒体项的第三请求，其中所述第三请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；
以及
响应于接收到所述第三请求：
播放在接收到所述第三请求之前选择的所述第一类型的音频媒体项中的第五音频媒体项。
86.根据项目82至85中任一项所述的方法，其中所述第一类型的音频媒体项是不包括乐器或人声音频元素的音频媒体项。
87.根据项目82至86中任一项所述的方法，其中所述第一类型的音频媒体项是包括音频的多个随机选择和布置的片段的音频媒体项。
88.根据项目82至87中任一项所述的方法，其中：
所述电子设备包括麦克风；并且
播放所述第一类型的音频媒体项的请求是经由所述麦克风检测到的语音输入。
89.根据项目82至87中任一项所述的方法，其中：
所述电子设备包括触敏表面；并且
播放所述第一类型的音频媒体项的请求是经由所述触敏表面检测到的一组一个或多个输入。
90.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目82 至89中任一项所述的方法的指令。
91.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据项目 82至89中任一项所述的方法的指令。
92.一种电子设备，包括：
显示设备；以及
用于执行根据项目82至89中任一项所述的方法的装置。
93.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及
响应于接收到播放所述第一类型的音频媒体项的请求：
播放所述第一类型的音频媒体项中的第一音频媒体项；并且
显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
94.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
接收播放第一类型的音频媒体项的请求，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及
响应于接收到播放所述第一类型的音频媒体项的请求：
播放所述第一类型的音频媒体项中的第一音频媒体项；
并且
显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
95.一种电子设备，包括：
显示设备；
用于接收播放第一类型的音频媒体项的请求的装置，其中所述请求认定所述第一类型的音频媒体项并且不认定所述第一类型的特定音频媒体项；以及
响应于接收到播放所述第一类型的音频媒体项的请求，用于以下操作的装置：
播放所述第一类型的音频媒体项中的第一音频媒体项；以及
显示示能表示，所述示能表示在被选择时播放所述第一类型的音频媒体项中的第二音频媒体项，其中所述第一类型的音频媒体项中的所述第二音频媒体项不同于所述第一类型的音频媒体项中的所述第一音频媒体项。
出于解释的目的，前面的描述是通过参考具体实施方案来描述的。然而，上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容，很多修改形式和变型形式都是可能的。选择并描述这些实施方案是为了最好地解释这些技术的原理及其实际应用程序。本领域的其他技术人员由此能够最好地利用这些技术以及具有适合于所预期的特定用途的各种修改的各种实施方案。
虽然参照附图对本公开以及示例进行了全面的描述，但应当注意，各种变化和修改对于本领域内的技术人员而言将变得显而易见。此类变化和修改被理解为包括在由权利要求书所限定的本公开和示例的范围内。
如上所述，本技术的一个方面在于收集并使用得自各种来源的数据，以改善管理可控外部设备。本公开预期，在一些实例中，这些所采集的数据可包括唯一地识别或可用于联系或定位特定人员的个人信息数据。此类个人信息数据可以包括人口统计数据、基于位置的数据、电话号码、电子邮件地址、推特ID、家庭地址、与用户的健康或健康水平有关的数据或记录(例如，生命体征测量、药物信息、锻炼信息)、出生日期或任何其他识别或个人信息。
本公开认识到在本发明技术中使用此类个人信息数据可用于使用户受益。例如，个人信息数据可用于提供对设备的改进的管理和监视，并且通常提高安全系统(例如，家庭安全系统)。因此，使用此类个人信息数据使得能够对所递送的内容进行有计划的控制。此外，本公开还预期个人信息数据有益于用户的其他用途。例如，健康和健身数据可用于向用户的总体健康状况提供见解，或者可用作使用技术来追求健康目标的个人的积极反馈。
本公开设想负责采集、分析、公开、传输、存储或其他使用此类个人信息数据的实体将遵守既定的隐私政策和/或隐私实践。具体地，此类实体应当实行并坚持使用被公认为符合或超出对维护个人信息数据的隐私性和安全性的行业或政府要求的隐私政策和实践。此类政策应该能被用户方便地访问，并应随着数据的采集和/或使用变化而被更新。来自用户的个人信息应当被收集用于实体的合法且合理的用途，并且不在这些合法使用之外共享或出售。此外，应在收到用户知情同意后进行此类采集/共享。此外，此类实体应考虑采取任何必要步骤，保卫和保障对此类个人信息数据的访问，并确保有权访问个人信息数据的其他人遵守其隐私政策和流程。另外，这种实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。此外，应当调整政策和实践，以便采集和/或访问的特定类型的个人信息数据，并适用于包括管辖范围的具体考虑的适用法律和标准。例如，在美国，对某些健康数据的收集或获取可能受联邦和/或州法律的管辖，诸如健康保险流通和责任法案(HIPAA)；而其他国家的健康数据可能受到其他法规和政策的约束并应相应处理。因此，在每个国家应为不同的个人数据类型保持不同的隐私实践。
不管前述情况如何，本公开还预期用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开预期可提供硬件元件和/或软件元件，以防止或阻止对此类个人信息数据的访问。例如，就管理可控外部设备而言，本发明技术可被配置为在注册服务期间或之后任何时候允许用户选择“选择加入”或“选择退出”参与对个人信息数据的收集。除了提供“选择加入”和“选择退出”选项外，本公开设想提供与访问或使用个人信息相关的通知。例如，可在下载应用时向用户通知其个人信息数据将被访问，然后就在个人信息数据被应用访问之前再次提醒用户。
此外，本公开的目的是应管理和处理个人信息数据以最小化无意或未经授权访问或使用的风险。一旦不再需要数据，通过限制数据收集和删除数据可最小化风险。此外，并且当适用时，包括在某些健康相关应用程序中，数据去标识可用于保护用户的隐私。可在适当时通过移除特定标识符 (例如，出生日期等)、控制所存储数据的量或特异性(例如，在城市级别而不是在地址级别收集定位数据)、控制数据如何被存储(例如，在用户之间聚合数据)、和/或其他方法来促进去标识。
因此，虽然本公开广泛地覆盖了使用个人信息数据来实现一个或多个各种所公开的实施方案，但本公开还预期各种实施方案也可在无需访问此类个人信息数据的情况下被实现。即，本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。例如，可通过基于非个人信息数据或绝对最低限度的个人信息(例如，与用户相关联的设备所请求的内容、对内容递送服务可用的其他非个人信息或公开可用信息)来推断偏好，从而选择内容(例如，音频内容)并递送给用户。

Claims (30)

1.一种电子设备，包括：
显示设备；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示，其中，所述第一附件示能表示是用户交互式图形用户界面对象；
检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入，其中，检测所述一个或多个输入包括检测至少一个输入，所述至少一个输入对应于对所述第一附件示能表示的选择；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备能够输出声音，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，其中，所述第二附件示能表示是用户交互式图形用户界面对象，以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；并且
根据确定所述第一可控外部设备不能够输出声音，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
2.根据权利要求1所述的电子设备，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，显示用于导航到第一媒体类型的音频项的一个或多个选项。
3.根据权利要求1所述的电子设备，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，经由所述显示设备同时显示：
第一音频类别选项，所述第一音频类别选项在被选择时发起用于选择第一媒体类型的音频项的过程，以及
第二音频类别选项，所述第二音频类别选项在被选择时发起用于选择不同于所述第一媒体类型的第二媒体类型的音频项的过程。
4.根据权利要求1所述的电子设备，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；以及
继检测到用于选择要在所述第一可控外部设备处播放的所述音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
所述音频选择示能表示，以及
被选择要在所述第一可控外部设备处播放的所述音频项的表示。
5.根据权利要求1所述的电子设备，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；以及
继检测到用于选择要在所述第一可控外部设备处播放的所述音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
重复示能表示，所述重复示能表示在被选择时配置所述音频项是否在播放期间在所述第一可控外部设备处重复，以及
随机播放示能表示，所述随机播放示能表示在被选择时配置所述音频项在所述第一可控外部设备处播放的顺序。
6.根据权利要求1所述的电子设备，其中发起用于为所述第一可控外部设备配置音频设置的过程包括根据确定已选择第一音频模式来显示音频播放选项，其中，所述第一音频模式控制音频播放状态。
7.根据权利要求6所述的电子设备，所述一个或多个程序还包括用于以下操作的指令：
在显示所述音频播放选项时，检测对相应音频模式的选择；以及
响应于检测到对所述相应音频模式的选择：
根据确定已选择所述第一音频模式，继续显示所述音频播放选项；并且
根据确定已选择第二音频模式，停止显示所述音频播放选项，其中所述第二音频模式不同于所述第一音频模式。
8.根据权利要求1所述的电子设备，所述一个或多个程序还包括用于以下操作的指令：
检测用于将第二可控外部设备添加到所述第一组可控外部设备的一个或多个输入；以及
响应于检测到用于将所述第二可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入，更新所述第一组可控外部设备以包括所述第二可控外部设备。
9.根据权利要求1所述的电子设备，所述一个或多个程序还包括用于以下操作的指令：
继发起用于为所述第一可控外部设备配置音频设置的过程之后，检测用于自定义音频项的播放音量的用户输入，所述音频项被选择要在所述第一可控外部设备处播放；以及
响应于检测到用于自定义所述播放音量的所述用户输入：
根据确定所述第一组可控外部设备包括单个能够输出声音的可控外部设备，显示用于调节所述第一可控外部设备处的所述音频项的所述播放音量的单个音量控件；并且
根据确定所述第一组可控外部设备包括多个能够输出声音的可控外部设备，显示用于调节相应的可控外部设备处的所述音频项的相应的播放音量的多个音量控件。
10.根据权利要求1所述的电子设备，其中对应于所述第一可控外部设备的所述第二附件示能表示在被选择时执行调节第一可控设备的功能。
11.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示设备的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示，其中，所述第一附件示能表示是用户交互式图形用户界面对象；
检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入，其中，检测所述一个或多个输入包括检测至少一个输入，所述至少一个输入对应于对所述第一附件示能表示的选择；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备能够输出声音，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，其中，所述第二附件示能表示是用户交互式图形用户界面对象，以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；以及
根据确定所述第一可控外部设备不能够输出声音，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
12.根据权利要求11所述的非暂态计算机可读存储介质，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择显示用于导航到第一媒体类型的音频项的一个或多个选项。
13.根据权利要求11所述的非暂态计算机可读存储介质，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，经由所述显示设备同时显示：
第一音频类别选项，所述第一音频类别选项在被选择时发起用于选择第一媒体类型的音频项的过程，以及
第二音频类别选项，所述第二音频类别选项在被选择时发起用于选择不同于所述第一媒体类型的第二媒体类型的音频项的过程。
14.根据权利要求11所述的非暂态计算机可读存储介质，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；以及
继检测到用于选择要在所述第一可控外部设备处播放的所述音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
所述音频选择示能表示，以及
被选择要在所述第一可控外部设备处播放的所述音频项的表示。
15.根据权利要求11所述的非暂态计算机可读存储介质，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述一个或多个程序还包括用于以下操作的指令：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；以及
继检测到用于选择要在所述第一可控外部设备处播放的所述音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
重复示能表示，所述重复示能表示在被选择时配置所述音频项是否在播放期间在所述第一可控外部设备处重复，以及
随机播放示能表示，所述随机播放示能表示在被选择时配置所述音频项在所述第一可控外部设备处播放的顺序。
16.根据权利要求11所述的非暂态计算机可读存储介质，其中发起用于为所述第一可控外部设备配置音频设置的过程包括根据确定已选择第一音频模式来显示音频播放选项，其中，所述第一音频模式控制音频播放状态。
17.根据权利要求16所述的非暂态计算机可读存储介质，所述一个或多个程序还包括用于以下操作的指令：
在显示所述音频播放选项时，检测对相应音频模式的选择；以及
响应于检测到对所述相应音频模式的选择：
根据确定已选择所述第一音频模式，继续显示所述音频播放选项；并且
根据确定已选择第二音频模式，停止显示所述音频播放选项，其中所述第二音频模式不同于所述第一音频模式。
18.根据权利要求11所述的非暂态计算机可读存储介质，所述一个或多个程序还包括用于以下操作的指令：
检测用于将第二可控外部设备添加到所述第一组可控外部设备的一个或多个输入；以及
响应于检测到用于将所述第二可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入，更新所述第一组可控外部设备以包括所述第二可控外部设备。
19.根据权利要求11所述的非暂态计算机可读存储介质，所述一个或多个程序还包括用于以下操作的指令：
继发起用于为所述第一可控外部设备配置音频设置的过程之后，检测用于自定义音频项的播放音量的用户输入，所述音频项被选择要在所述第一可控外部设备处播放；以及响应于检测到用于自定义所述播放音量的所述用户输入：
根据确定所述第一组可控外部设备包括单个能够输出声音的可控外部设备，显示用于调节所述第一可控外部设备处的所述音频项的所述播放音量的单个音量控件；并且
根据确定所述第一组可控外部设备包括多个能够输出声音的可控外部设备，显示用于调节相应的可控外部设备处的所述音频项的相应的播放音量的多个音量控件。
20.根据权利要求11所述的非暂态计算机可读存储介质，其中对应于所述第一可控外部设备的所述第二附件示能表示在被选择时执行调节第一可控设备的功能。
21.一种方法，包括：
在具有显示设备的电子设备处：
经由所述显示设备显示对应于第一可控外部设备的第一附件示能表示，其中，所述第一附件示能表示是用户交互式图形用户界面对象；
检测用于将所述第一可控外部设备添加到第一组可控外部设备的一个或多个输入，其中，检测所述一个或多个输入包括检测至少一个输入，所述至少一个输入对应于对所述第一附件示能表示的选择；
响应于检测到用于将所述第一可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入：
更新所述第一组可控外部设备以包括所述第一可控外部设备；
根据确定所述第一可控外部设备能够输出声音，同时显示：
对应于所述第一可控外部设备的第二附件示能表示，其中，所述第二附件示能表示是用户交互式图形用户界面对象，以及
配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程；并且
根据确定所述第一可控外部设备不能够输出声音，显示对应于所述第一可控外部设备的所述第二附件示能表示而不显示所述配置示能表示，所述配置示能表示在被选择时发起用于为所述第一可控外部设备配置音频设置的过程。
22.根据权利要求21所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，显示用于导航到第一媒体类型的音频项的一个或多个选项。
23.根据权利要求21所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
检测对所述音频选择示能表示的选择；以及
响应于检测到对所述音频选择示能表示的选择，经由所述显示设备同时显示：
第一音频类别选项，所述第一音频类别选项在被选择时发起用于选择第一媒体类型的音频项的过程，以及
第二音频类别选项，所述第二音频类别选项在被选择时发起用于选择不同于所述第一媒体类型的第二媒体类型的音频项的过程。
24.根据权利要求21所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；以及
继检测到用于选择要在所述第一可控外部设备处播放的所述音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
所述音频选择示能表示，以及
被选择要在所述第一可控外部设备处播放的所述音频项的表示。
25.根据权利要求21所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括显示音频选择示能表示，所述方法还包括：
继检测到对所述音频选择示能表示的选择之后，检测用于选择要在所述第一可控外部设备处播放的音频项的一个或多个用户输入；以及
继检测到用于选择要在所述第一可控外部设备处播放的所述音频项的一个或多个用户输入之后，经由所述显示设备同时显示：
重复示能表示，所述重复示能表示在被选择时配置所述音频项是否在播放期间在所述第一可控外部设备处重复，以及
随机播放示能表示，所述随机播放示能表示在被选择时配置所述音频项在所述第一可控外部设备处播放的顺序。
26.根据权利要求21所述的方法，其中发起用于为所述第一可控外部设备配置音频设置的过程包括根据确定已选择第一音频模式来显示音频播放选项，其中，所述第一音频模式控制音频播放状态。
27.根据权利要求26所述的方法，还包括：
在显示所述音频播放选项时，检测对相应音频模式的选择；以及
响应于检测到对所述相应音频模式的选择：
根据确定已选择所述第一音频模式，继续显示所述音频播放选项；并且
根据确定已选择第二音频模式，停止显示所述音频播放选项，其中所述第二音频模式不同于所述第一音频模式。
28.根据权利要求21所述的方法，还包括：
检测用于将第二可控外部设备添加到所述第一组可控外部设备的一个或多个输入；以及
响应于检测到用于将所述第二可控外部设备添加到所述第一组可控外部设备的所述一个或多个输入，更新所述第一组可控外部设备以包括所述第二可控外部设备。
29.根据权利要求21所述的方法，还包括：
继发起用于为所述第一可控外部设备配置音频设置的过程之后，检测用于自定义音频项的播放音量的用户输入，所述音频项被选择要在所述第一可控外部设备处播放；以及
响应于检测到用于自定义所述播放音量的所述用户输入：
根据确定所述第一组可控外部设备包括单个能够输出声音的可控外部设备，显示用于调节所述第一可控外部设备处的所述音频项的所述播放音量的单个音量控件；并且
根据确定所述第一组可控外部设备包括多个能够输出声音的可控外部设备，显示用于调节相应的可控外部设备处的所述音频项的相应的播放音量的多个音量控件。
30.根据权利要求21所述的方法，其中对应于所述第一可控外部设备的所述第二附件示能表示在被选择时执行调节第一可控设备的功能。
CN202011450203.2A 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面 Active CN112506346B (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201962855895P 2019-05-31 2019-05-31
US62/855,895 2019-05-31
US16/584,743 US10904029B2 (en) 2019-05-31 2019-09-26 User interfaces for managing controllable external devices
US16/584,743 2019-09-26
US16/586,002 US10779085B1 (en) 2019-05-31 2019-09-27 User interfaces for managing controllable external devices
US16/586,002 2019-09-27
PCT/US2020/024390 WO2020242563A1 (en) 2019-05-31 2020-03-24 User interfaces for managing controllable external devices
CN202080002596.2A CN112334862A (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202080002596.2A Division CN112334862A (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面

Publications (2)

Publication Number Publication Date
CN112506346A CN112506346A (zh) 2021-03-16
CN112506346B true CN112506346B (zh) 2022-12-23

Family

ID=72425688

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202110235995.XA Pending CN112965597A (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面
CN202011450203.2A Active CN112506346B (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面
CN202080002596.2A Pending CN112334862A (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202110235995.XA Pending CN112965597A (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202080002596.2A Pending CN112334862A (zh) 2019-05-31 2020-03-24 用于管理可控外部设备的用户界面

Country Status (7)

Country Link
US (4) US10904029B2 (zh)
EP (2) EP3869312A1 (zh)
JP (4) JP6934577B2 (zh)
KR (2) KR102275853B1 (zh)
CN (3) CN112965597A (zh)
AU (4) AU2020257092B2 (zh)
WO (1) WO2020242563A1 (zh)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016036436A1 (en) 2014-09-02 2016-03-10 Apple Inc. Stopwatch and timer user interfaces
US11782570B2 (en) * 2017-02-23 2023-10-10 Jue-Hsuan Hsiao Integration platform of internet of things and virtual device
FR3063364B1 (fr) * 2017-02-28 2022-08-19 Mathieu Dufourcq Salle de sport de type "fitness"
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
USD926205S1 (en) * 2019-02-15 2021-07-27 Canva Pty Ltd Display screen or portion thereof with a graphical user interface
USD926797S1 (en) * 2019-02-15 2021-08-03 Canva Pty Ltd Display screen or portion thereof with a graphical user interface
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
KR20220027295A (ko) 2019-05-31 2022-03-07 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
USD946011S1 (en) * 2019-08-14 2022-03-15 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD946010S1 (en) * 2019-08-14 2022-03-15 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD921669S1 (en) * 2019-09-09 2021-06-08 Apple Inc. Display screen or portion thereof with animated graphical user interface
JP7335794B2 (ja) * 2019-11-20 2023-08-30 シュナイダーエレクトリックホールディングス株式会社 情報処理装置及び設定装置
US11686493B2 (en) 2019-12-04 2023-06-27 Ademco Inc. Digital HVAC controller for navigating information based on two or more inputs
US11280512B2 (en) * 2019-12-04 2022-03-22 Ademco Inc. Digital HVAC controller with carousel screens
USD1018575S1 (en) * 2019-12-09 2024-03-19 Caterpillar Inc. Display screen having a graphical user interface
USD950575S1 (en) * 2020-01-28 2022-05-03 Johnson Controls Tyco IP Holdings LLP Display screen or portion thereof with graphical user interface
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
USD944829S1 (en) * 2020-05-14 2022-03-01 Lutron Technology Company Llc Display screen or portion thereof with graphical user interface
USD947234S1 (en) 2020-07-23 2022-03-29 Lutron Technology Company Llc Display screen or portion thereof with animated graphical user interface
USD960896S1 (en) 2020-07-27 2022-08-16 Lutron Technology Company Llc Display screen or portion thereof with graphical user interface
USD960897S1 (en) * 2020-07-27 2022-08-16 Lutron Technology Company Llc Display screen or portion thereof with graphical user interface
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
USD989091S1 (en) * 2020-09-29 2023-06-13 Huawei Technologies Co., Ltd. Display screen or portion thereof with graphical user interface
USD988354S1 (en) * 2020-09-29 2023-06-06 Yokogawa Electric Corporation Display screen or portion thereof with transitional graphical user interface
USD971952S1 (en) * 2020-12-21 2022-12-06 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD995560S1 (en) * 2021-01-08 2023-08-15 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
WO2022155609A1 (en) * 2021-01-18 2022-07-21 Apple Inc. Configuring accessories
US11758035B2 (en) 2021-01-18 2023-09-12 Apple Inc. User interface for configuring external accessories with accessory device management applications
USD997184S1 (en) * 2021-03-19 2023-08-29 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
CN113157511A (zh) * 2021-04-27 2021-07-23 深圳创维－Rgb电子有限公司 外设检测方法、装置及可读存储介质
USD997185S1 (en) * 2021-09-16 2023-08-29 7ollar Corp FedNow IP Holdings Display screen portion with animated graphical user interface
USD997955S1 (en) * 2021-09-22 2023-09-05 Axiomatic Data LLC Display panel portion with a computer icon
CN117879981A (zh) * 2022-10-12 2024-04-12 华为技术有限公司 显示方法及电子设备
KR20240057213A (ko) * 2022-10-24 2024-05-02 삼성전자주식회사 이웃 디바이스를 제어 가능한 전자 디바이스 및 그 제어 방법

Family Cites Families (675)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5086385A (en) 1989-01-31 1992-02-04 Custom Command Systems Expandable home automation system
JP3128126B2 (ja) 1990-02-21 2001-01-29 カシオ計算機株式会社 ストップウォッチ
US5202961A (en) 1990-06-08 1993-04-13 Apple Computer, Inc. Sequential information controller
JPH04175921A (ja) 1990-11-09 1992-06-23 Hitachi Ltd 宅内情報盤
JP3465914B2 (ja) 1992-12-01 2003-11-10 松下電器産業株式会社 シーン制御処理装置
DE69432199T2 (de) 1993-05-24 2004-01-08 Sun Microsystems, Inc., Mountain View Graphische Benutzerschnittstelle mit Verfahren zur Schnittstellebildung mit fernsteuernden Einrichtungen
US6456306B1 (en) 1995-06-08 2002-09-24 Nortel Networks Limited Method and apparatus for displaying health status of network devices
US5795301A (en) 1995-08-31 1998-08-18 Seiko Epson Corporation Display method used in portable pulse measuring device
US6140987A (en) * 1996-09-18 2000-10-31 Intellinet, Inc. User interface for home automation system
US20030093790A1 (en) 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US5974235A (en) 1996-10-31 1999-10-26 Sensormatic Electronics Corporation Apparatus having flexible capabilities for analysis of video information
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
CN1151704C (zh) 1998-01-23 2004-05-26 音响株式会社 声像定位装置和方法
KR100595925B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US7831930B2 (en) 2001-11-20 2010-11-09 Universal Electronics Inc. System and method for displaying a user interface for a remote control application
KR20010041425A (ko) 1998-12-29 2001-05-15 요트.게.아. 롤페즈 분포된 네트워크 장치를 갖는 홈 제어 시스템
US6901439B1 (en) 1999-01-22 2005-05-31 Leviton Manufacturing Co., Inc. Method of adding a device to a network
US6262724B1 (en) 1999-04-15 2001-07-17 Apple Computer, Inc. User interface for presenting media information
US7293280B1 (en) 1999-07-08 2007-11-06 Microsoft Corporation Skimming continuous multimedia content
AUPQ217399A0 (en) 1999-08-12 1999-09-02 Honeywell Limited Realtime digital video server
KR100346263B1 (ko) 1999-11-05 2002-07-26 엘지전자주식회사 멀티미디어 스트림의 브라우징, 편집, 인덱싱을 위한 다단계 위치/구간 지정 방법
AU2295101A (en) 1999-12-30 2001-07-16 C-Smart Llc Method and apparatus for providing distributed control of a home automation system
EP1133119B1 (en) 2000-03-10 2006-12-13 Nokia Corporation Proximity based service adaption
KR100351815B1 (ko) 2000-03-13 2002-09-11 엘지전자 주식회사 홈 네트워크 환경에서의 기기 제어 방법
JP4325071B2 (ja) 2000-04-07 2009-09-02 ソニー株式会社 デジタルビデオ再生方法及びデジタルビデオ再生装置
JP4434424B2 (ja) 2000-04-18 2010-03-17 株式会社ルネサステクノロジ ホームエレクトロニクスシステム、ホームサーバ装置およびコンピュータをホームサーバ装置として機能させるためのプログラムを記録したコンピュータ読取可能な記録媒体
US6483986B1 (en) 2000-05-26 2002-11-19 Keen Personal Media, Inc. Method and apparatus for recording streaming video data upon selection of alternative subject matter
US20050275626A1 (en) 2000-06-21 2005-12-15 Color Kinetics Incorporated Entertainment lighting system
CN100409358C (zh) 2000-09-08 2008-08-06 皇家菲利浦电子有限公司 提供一种彩色滑动条的再现装置
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6912429B1 (en) 2000-10-19 2005-06-28 Destiny Networks, Inc. Home automation system and method
WO2002037217A2 (en) 2000-11-02 2002-05-10 Sony Electronics, Inc. Content and application download based on a home network system configuration profile
US6678413B1 (en) 2000-11-24 2004-01-13 Yiqing Liang System and method for object identification and behavior characterization using video analysis
US7380216B2 (en) 2000-11-30 2008-05-27 International Business Machines Corporation Zoom-capable scrollbar
US7401351B2 (en) 2000-12-14 2008-07-15 Fuji Xerox Co., Ltd. System and method for video navigation and client side indexing
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
TW591353B (en) 2001-02-23 2004-06-11 Asulab Sa Portable object including means for activating an electronic function and method for controlling such an electronic function
US7428023B2 (en) 2001-04-19 2008-09-23 Digeo, Inc. Remote control device with integrated display screen for controlling a digital video recorder
US7904814B2 (en) 2001-04-19 2011-03-08 Sharp Laboratories Of America, Inc. System for presenting audio-video content
US6757517B2 (en) 2001-05-10 2004-06-29 Chin-Chi Chang Apparatus and method for coordinated music playback in wireless ad-hoc networks
JP4293583B2 (ja) 2001-07-13 2009-07-08 株式会社バンダイナムコゲームス 情報配信システムおよび情報記憶媒体
US20030110511A1 (en) 2001-12-11 2003-06-12 Schutte Mark E. Controlling personal video recording functions from interactive television
WO2003053048A1 (en) 2001-12-14 2003-06-26 Koninklijke Philips Electronics N.V. Method of enabling interaction using a portable device
US20030112938A1 (en) 2001-12-17 2003-06-19 Memcorp, Inc. Telephone answering machine and method employing caller identification data
EP1370115B1 (en) 2002-06-07 2009-07-15 Panasonic Corporation Sound image control system
US6792323B2 (en) 2002-06-27 2004-09-14 Openpeak Inc. Method, system, and computer program product for managing controlled residential or non-residential environments
US7933945B2 (en) 2002-06-27 2011-04-26 Openpeak Inc. Method, system, and computer program product for managing controlled residential or non-residential environments
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
JP3978599B2 (ja) 2002-09-19 2007-09-19 三和シヤッター工業株式会社 ホームネットワークシステム
JP4340566B2 (ja) 2003-04-01 2009-10-07 株式会社リコー Ｗｅｂページ生成装置、組み込み装置、Ｗｅｂページ生成の制御方法、Ｗｅｂページ生成プログラム及び記録媒体
JP4062171B2 (ja) 2003-05-28 2008-03-19 ソニー株式会社 積層構造の製造方法
GB0312465D0 (en) 2003-05-30 2003-07-09 Therefore Ltd A data input method for a computing device
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US8290603B1 (en) 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US8234395B2 (en) 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
EP1513084A1 (de) 2003-09-02 2005-03-09 Liechti Ag Verfahren zur zeitlichen Akzeptanz von Einrichtungen, eine hierzu verwendbare Anordnung sowie Gerätschaften
WO2005027068A1 (en) 2003-09-12 2005-03-24 Canon Kabushiki Kaisha Streaming non-continuous video data
US9754480B2 (en) 2003-11-04 2017-09-05 Universal Electronics Inc. System and method for controlling device location determination
US7363028B2 (en) 2003-11-04 2008-04-22 Universal Electronics, Inc. System and method for controlling device location determination
EP1690370B1 (en) 2003-12-01 2017-02-22 Samsung Electronics Co., Ltd. Home network system and method therefor
US20050163345A1 (en) 2003-12-03 2005-07-28 Safehouse International Limited Analysing image data
US7305438B2 (en) 2003-12-09 2007-12-04 International Business Machines Corporation Method and system for voice on demand private message chat
US7079454B2 (en) 2003-12-23 2006-07-18 Alexander Wellen Tactile timepiece
EP1555772A3 (en) 2004-01-15 2013-07-17 Yamaha Corporation Remote control method of external devices
US7292245B2 (en) 2004-01-20 2007-11-06 Sensitron, Inc. Method and apparatus for time series graph display
US7697729B2 (en) 2004-01-29 2010-04-13 Authentec, Inc. System for and method of finger initiated actions
US7092768B1 (en) 2004-03-09 2006-08-15 Liquid Sky Studios, Inc. Distributed control system
US9374607B2 (en) 2012-06-26 2016-06-21 Sonos, Inc. Media playback system with guest access
US8028323B2 (en) 2004-05-05 2011-09-27 Dryden Enterprises, Llc Method and system for employing a first device to direct a networked audio device to obtain a media item
US7197121B2 (en) 2004-06-30 2007-03-27 Glenayre Electronics, Inc. Audio chunking
US20060013554A1 (en) 2004-07-01 2006-01-19 Thomas Poslinski Commercial storage and retrieval
US7730223B1 (en) * 2004-07-30 2010-06-01 Apple Inc. Wireless home and office appliance management and integration
US20100081375A1 (en) 2008-09-30 2010-04-01 Apple Inc. System and method for simplified control of electronic devices
US7562299B2 (en) 2004-08-13 2009-07-14 Pelco, Inc. Method and apparatus for searching recorded video
US8566879B2 (en) 2004-09-28 2013-10-22 Sony Corporation Method and apparatus for navigating video content
US7254516B2 (en) 2004-12-17 2007-08-07 Nike, Inc. Multi-sensor monitoring of athletic performance
US7683889B2 (en) 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US20060171453A1 (en) 2005-01-04 2006-08-03 Rohlfing Thomas R Video surveillance system
US7593782B2 (en) 2005-01-07 2009-09-22 Apple Inc. Highly portable media device
US20060161621A1 (en) 2005-01-15 2006-07-20 Outland Research, Llc System, method and computer program product for collaboration and synchronization of media content on a plurality of media players
US7843491B2 (en) 2005-04-05 2010-11-30 3Vr Security, Inc. Monitoring and presenting video surveillance data
US7769819B2 (en) 2005-04-20 2010-08-03 Videoegg, Inc. Video editing with timeline representations
US8244179B2 (en) 2005-05-12 2012-08-14 Robin Dua Wireless inter-device data processing configured through inter-device transmitted data
CN100440947C (zh) 2005-05-13 2008-12-03 海尔集团公司 一种多功能电视机
US9743266B2 (en) 2005-05-23 2017-08-22 Invention Science Fund I, Llc Device pairing via device to device contact
US20060280186A1 (en) 2005-06-10 2006-12-14 Interdigital Technology Corporation All IP network with server for dynamically downloading management policies to diverse IP networks and converged IP communication units
JP2006350819A (ja) 2005-06-17 2006-12-28 Toshiba Corp 家電機器制御システム
AU2005202866A1 (en) 2005-06-29 2007-01-18 Canon Kabushiki Kaisha Storing video data in a video file
WO2007009238A1 (en) 2005-07-19 2007-01-25 March Networks Corporation Temporal data previewing system
US7567898B2 (en) 2005-07-26 2009-07-28 Broadcom Corporation Regulation of volume of voice in conjunction with background sound
US8892629B2 (en) 2005-09-01 2014-11-18 Samsung Electronics Co., Ltd. System and method for displaying a virtual meeting room
US7415310B2 (en) 2005-09-15 2008-08-19 Intermatic Incorporated System for home automation
US7849323B2 (en) 2005-11-09 2010-12-07 Emc Corporation Password presentation for multimedia devices
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
KR101263392B1 (ko) 2006-01-09 2013-05-21 삼성전자주식회사 홈네트워크 원격 제어기의 비밀키를 이용한 소유권 공유방법 및 장치
US8954852B2 (en) 2006-02-03 2015-02-10 Sonic Solutions, Llc. Adaptive intervals in navigating content and/or media
US20090222392A1 (en) 2006-02-10 2009-09-03 Strands, Inc. Dymanic interactive entertainment
US8516087B2 (en) 2006-02-14 2013-08-20 At&T Intellectual Property I, L.P. Home automation system and method
US8001219B2 (en) 2006-03-16 2011-08-16 Exceptional Innovation, Llc User control interface for convergence and automation system
DE102006033134A1 (de) 2006-07-18 2008-01-24 Abb Patent Gmbh Anzeige- und Bediengerät der Gebäudesystemtechnik
US8572169B2 (en) 2006-08-28 2013-10-29 Myspace, Llc System, apparatus and method for discovery of music within a social network
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7771112B2 (en) 2006-09-10 2010-08-10 Nike, Inc. Watch band or other wrist-borne device assemblies
US9202509B2 (en) 2006-09-12 2015-12-01 Sonos, Inc. Controlling and grouping in a multi-zone media system
US8645463B2 (en) 2006-09-25 2014-02-04 Cisco Technology, Inc. Methods and apparatuses for managing resources within a virtual room
US20080091717A1 (en) 2006-09-27 2008-04-17 Zachary Adam Garbow Generation of Collaborative Playlist Based Upon Musical Preference Data from Multiple Digital Media Players
US7983614B2 (en) 2006-09-29 2011-07-19 Sony Ericsson Mobile Communications Ab Handover for audio and video playback devices
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US20080168395A1 (en) 2007-01-07 2008-07-10 Bas Ording Positioning a Slider Icon on a Portable Multifunction Device
US20100106647A1 (en) 2007-02-28 2010-04-29 Raja Raman Method and system for close range communication using audio tones
JP4312804B2 (ja) 2007-03-01 2009-08-12 株式会社日立国際電気 記録内容表示プログラム及び記録内容表示装置
DE602007007581D1 (de) 2007-04-17 2010-08-19 Harman Becker Automotive Sys Akustische Lokalisierung eines Sprechers
US8483413B2 (en) 2007-05-04 2013-07-09 Bose Corporation System and method for directionally radiating sound
US8325936B2 (en) 2007-05-04 2012-12-04 Bose Corporation Directionally radiating sound in a vehicle
US8068925B2 (en) 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
EP2018032A1 (en) 2007-07-20 2009-01-21 Nederlandse Organisatie voor toegepast- natuurwetenschappelijk onderzoek TNO Identification of proximate mobile devices
EP2056627A1 (en) 2007-10-30 2009-05-06 SonicEmotion AG Method and device for improved sound field rendering accuracy within a preferred listening area
KR101407636B1 (ko) 2007-11-05 2014-06-16 삼성전자주식회사 영상 표시 장치 및 그 제어 방법
US8818941B2 (en) 2007-11-11 2014-08-26 Microsoft Corporation Arrangement for synchronizing media files with portable devices
US8943539B2 (en) 2007-11-21 2015-01-27 Rovi Guides, Inc. Enabling a friend to remotely modify user data
WO2009067670A1 (en) 2007-11-21 2009-05-28 Gesturetek, Inc. Media preferences
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
JP2008099330A (ja) 2007-12-18 2008-04-24 Sony Corp 情報処理装置、携帯電話機
US8423893B2 (en) 2008-01-07 2013-04-16 Altec Lansing Australia Pty Limited User interface for managing the operation of networked media playback devices
WO2009086602A1 (en) 2008-01-07 2009-07-16 Avega Systems Pty Ltd Systems and methods for providing media playback in a networked environment
KR101503714B1 (ko) 2008-02-05 2015-03-20 삼성전자주식회사 Ｇｕｉ 제공방법 및 이를 적용한 멀티미디어 기기
US20090232028A1 (en) 2008-03-11 2009-09-17 Aaron Baalbergen Configuration systems and methods for utilizing location information to configure devices in application systems
TWI454087B (zh) 2008-03-31 2014-09-21 Packetvideo Corp 在一網路中管理媒體的方法以及具有用以管理在一網路中的媒體之程式指令的電腦可讀式媒體
JP2009295147A (ja) 2008-05-07 2009-12-17 Hoya Corp スクロール表示可能な情報処理装置
US20090299810A1 (en) 2008-05-09 2009-12-03 Jardine Joseph M Combining tasks and events
GB2460306B (en) 2008-05-29 2013-02-13 Intrasonics Sarl Data embedding system
US8023425B2 (en) 2009-01-28 2011-09-20 Headwater Partners I Verifiable service billing for intermediate networking devices
US20090304205A1 (en) 2008-06-10 2009-12-10 Sony Corporation Of Japan Techniques for personalizing audio levels
US8977710B2 (en) 2008-06-18 2015-03-10 Qualcomm, Incorporated Remote selection and authorization of collected media transmission
US20170185277A1 (en) 2008-08-11 2017-06-29 Icontrol Networks, Inc. Automation system user interface
KR101524616B1 (ko) 2008-07-07 2015-06-02 엘지전자 주식회사 자이로센서를 구비한 휴대 단말기 및 그 제어방법
KR101446521B1 (ko) 2008-08-12 2014-11-03 삼성전자주식회사 터치 스크린의 정보 스크롤 제어 방법 및 장치
US8213463B2 (en) 2008-09-04 2012-07-03 Savant Systems, Llc Location-based sharing of multimedia control resources
US20100064255A1 (en) 2008-09-05 2010-03-11 Apple Inc. Contextual menus in an electronic device
US20100070490A1 (en) 2008-09-17 2010-03-18 Eloy Technology, Llc System and method for enhanced smart playlists with aggregated media collections
KR101829865B1 (ko) 2008-11-10 2018-02-20 구글 엘엘씨 멀티센서 음성 검출
US20100138007A1 (en) 2008-11-21 2010-06-03 Qwebl, Inc. Apparatus and method for integration and setup of home automation
FR2939554B1 (fr) 2008-12-10 2015-08-21 Somfy Sas Procede de fonctionnement d'un systeme domotique
CN103488417A (zh) 2008-12-18 2014-01-01 日本电气株式会社 滑动条显示控制装置以及滑动条显示控制方法
USD736254S1 (en) 2008-12-26 2015-08-11 Sony Corporation Display panel or screen with an icon
KR101467796B1 (ko) 2009-01-12 2014-12-10 엘지전자 주식회사 이동단말기 및 그 제어 방법
US8363866B2 (en) 2009-01-30 2013-01-29 Panasonic Automotive Systems Company Of America Audio menu navigation method
US20100201815A1 (en) 2009-02-09 2010-08-12 Vitamin D, Inc. Systems and methods for video monitoring
US8243949B2 (en) 2009-04-14 2012-08-14 Plantronics, Inc. Network addressible loudspeaker and audio play
KR101549011B1 (ko) 2009-04-21 2015-09-01 엘지전자 주식회사 이동 단말기 및 이것의 방송 정보 디스플레이 방법
US9141087B2 (en) 2009-04-26 2015-09-22 Nike, Inc. Athletic watch
CA2929927C (en) 2009-04-26 2018-09-11 Nike Innovate C.V. Gps features and functionality in an athletic watch system
US8214494B1 (en) 2009-05-18 2012-07-03 Alarm.Com Incorporated Network device management technology
KR20100132705A (ko) 2009-06-10 2010-12-20 삼성전자주식회사 컨텐츠 리스트 제공방법 및 이를 적용한 멀티미디어 기기
US8281244B2 (en) 2009-06-11 2012-10-02 Apple Inc. User interface for media playback
US9191721B2 (en) 2009-06-16 2015-11-17 Harman International Industries, Incorporated Networked audio/video system
WO2011009101A1 (en) 2009-07-16 2011-01-20 Bluefin Lab, Inc. Estimating and displaying social interest in time-based media
US8935204B2 (en) 2009-08-14 2015-01-13 Aframe Media Services Limited Metadata tagging of moving and still image content
KR20110022980A (ko) 2009-08-28 2011-03-08 한국산업기술대학교산학협력단 기상 및 시간 정보를 이용하여 감성조명을 제어하기 위한 장치 및 그 방법
CN102576487A (zh) 2009-09-01 2012-07-11 Lg电子株式会社 用于控制外部装置及其远程控制器的方法
US8594980B2 (en) * 2009-09-18 2013-11-26 Verizon Patent And Licensing Inc. Method and apparatus of template model view generation for home monitoring and control
ITMI20091600A1 (it) 2009-09-18 2011-03-19 March Networks Corp Tolleranza ai guasti in un sistema di video sorveglianza
JP2011124665A (ja) 2009-12-08 2011-06-23 Mitsubishi Electric Corp リモートコントロール装置及び設備機器システム
CN102740933B (zh) 2009-12-09 2015-11-25 耐克创新有限合伙公司 使用心率信息的运动表现监测系统
KR20110067492A (ko) 2009-12-14 2011-06-22 삼성전자주식회사 Ｇｕｉ 제공방법 및 이를 적용한 멀티미디어 기기
US8458780B1 (en) 2009-12-21 2013-06-04 Emc Corporation Pluggable login architecture and dynamic resource recognition
KR20110074024A (ko) 2009-12-24 2011-06-30 삼성전자주식회사 멀티미디어 기기
KR20110077260A (ko) 2009-12-30 2011-07-07 주식회사 아이리버 애플리케이션과 상호작용하는 컨트롤 키를 제공하는 모바일 디바이스 및 그 방법
US8943415B2 (en) 2010-01-08 2015-01-27 Microsoft Corporation Third party control of location information access
KR20110093040A (ko) 2010-02-11 2011-08-18 엘지전자 주식회사 피사체 감시 장치 및 방법
US8291344B2 (en) 2010-04-07 2012-10-16 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US8787618B2 (en) 2010-04-13 2014-07-22 Sony Corporation Content information processing device, content information processing method, content information processing program, and personal digital assistant
US8111589B2 (en) 2010-04-15 2012-02-07 Joel Vidal Digital wristwatch, digital watch, and digital clock
US8638222B2 (en) 2010-04-19 2014-01-28 Microsoft Corporation Controllable device selection based on controller location
EP2569712B1 (en) * 2010-05-10 2021-10-13 Icontrol Networks, Inc. Control system user interface
US20130060352A1 (en) 2010-05-11 2013-03-07 Panasonic Corporation Electrical device control system, server, electrical device, and electrical device control method
WO2011146898A2 (en) 2010-05-21 2011-11-24 Bologh Mark J Internet system for ultra high video quality
US20110291971A1 (en) 2010-05-28 2011-12-01 Funai Electric Co., Ltd. Highly Integrated Touch Screen Handheld Device
DE202010010266U1 (de) 2010-07-06 2010-10-14 Holzma Plattenaufteiltechnik Gmbh Plattenaufteilanlage
EP2609750A4 (en) 2010-08-26 2014-10-08 Tarik Taleb SYSTEM AND METHOD FOR CREATING A CUSTOMIZED MULTIMEDIA CONTENT CHANNEL FOR A SOCIAL NETWORK
US8854318B2 (en) 2010-09-01 2014-10-07 Nokia Corporation Mode switching
US9445135B2 (en) 2010-09-17 2016-09-13 Futurewei Technologies, Inc. Method and apparatus for scrub preview services
JP5627092B2 (ja) 2010-09-29 2014-11-19 株式会社セキュリティハウス・センター セキュリティシステム
US8923997B2 (en) 2010-10-13 2014-12-30 Sonos, Inc Method and apparatus for adjusting a speaker system
EP2633647B1 (en) 2010-10-27 2019-05-01 Telefonaktiebolaget LM Ericsson (publ) Authorizing an electronic device to control a media rendering unit
US20120115608A1 (en) 2010-11-05 2012-05-10 Howard Pfeifer Method and apparatus for controlling an audio parameter of a plurality of wagering game machines
KR101695398B1 (ko) 2010-12-01 2017-01-11 삼성에스디에스 주식회사 서브 단말에서의 홈 오토메이션 구성 기기 제어 장치 및 방법
JP5649425B2 (ja) 2010-12-06 2015-01-07 株式会社東芝 映像検索装置
US20130340097A1 (en) 2010-12-10 2013-12-19 David M. GOWEL Systems and methods for integrating personal social networks within an organization
WO2012085794A1 (en) 2010-12-22 2012-06-28 Koninklijke Philips Electronics N.V. Control of building automation systems
KR101924974B1 (ko) 2011-01-04 2018-12-04 삼성전자주식회사 이동통신 단말기에서 주변 디바이스를 원격 제어하기 위한 장치 및 방법
US20120169583A1 (en) 2011-01-05 2012-07-05 Primesense Ltd. Scene profiles for non-tactile user interfaces
KR101841574B1 (ko) 2011-01-06 2018-03-23 삼성전자 주식회사 동영상 장면 검색 방법 및 이를 지원하는 휴대 단말기
US8655345B2 (en) 2011-01-08 2014-02-18 Steven K. Gold Proximity-enabled remote control
US9684394B2 (en) 2011-01-10 2017-06-20 Apple Inc. Button functionality
US9049494B2 (en) 2011-01-31 2015-06-02 Cbs Interactive, Inc. Media playback control
WO2012104288A1 (en) 2011-02-03 2012-08-09 Telefonaktiebolaget L M Ericsson (Publ) A device having a multipoint sensing surface
US20120210226A1 (en) 2011-02-11 2012-08-16 Sony Network Entertainment International Llc Method to playback a recently-played asset via a second display
US20120222092A1 (en) 2011-02-25 2012-08-30 Qualcomm Incorporated Controlling access to media for an electronic device
FR2973186A1 (fr) 2011-03-22 2012-09-28 Sagemcom Broadband Sas Procede et dispositif de configuration sur la base de regles de gestion
US8938312B2 (en) 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9727124B2 (en) 2011-04-19 2017-08-08 Apple Inc. Power saving application update in a portable electronic device
US8489065B2 (en) 2011-05-03 2013-07-16 Robert M Green Mobile device controller application for any security system
US9141616B2 (en) 2011-05-06 2015-09-22 Google Inc. Physical confirmation for network-provided content
US9098611B2 (en) 2012-11-26 2015-08-04 Intouch Technologies, Inc. Enhanced video interaction for a user interface of a telepresence network
US11165963B2 (en) 2011-06-05 2021-11-02 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
JP2013007921A (ja) 2011-06-24 2013-01-10 Sony Corp 音制御装置、プログラム及び制御方法
US9639506B2 (en) * 2011-07-07 2017-05-02 Honeywell International Inc. Interface for home energy manager
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
US20130027289A1 (en) 2011-07-27 2013-01-31 Lg Electronics Inc. Electronic device
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US8750677B2 (en) 2011-08-23 2014-06-10 Microsoft Corporation Method for transferring media playback from a different device
KR101962445B1 (ko) 2011-08-30 2019-03-26 삼성전자 주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 사용자 인터페이스 제공 방법
US9286384B2 (en) 2011-09-21 2016-03-15 Sonos, Inc. Methods and systems to share media
US9052810B2 (en) 2011-09-28 2015-06-09 Sonos, Inc. Methods and apparatus to manage zones of a multi-zone media playback system
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US8917877B2 (en) 2011-10-12 2014-12-23 Sony Corporation Distance-based rendering of media files
KR101820734B1 (ko) 2011-10-14 2018-03-13 삼성전자 주식회사 모바일 단말기를 위한 동적 잠금 해제 방법 및 장치
CN103068095A (zh) 2011-10-21 2013-04-24 扬升照明股份有限公司 照明系统及照明系统的控制方法
JP5908253B2 (ja) 2011-10-28 2016-04-26 シャープ株式会社 機器制御装置及び機器制御方法
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US8839109B2 (en) 2011-11-14 2014-09-16 Utc Fire And Security Americas Corporation, Inc. Digital video system with intelligent video selection timeline
US9031847B2 (en) 2011-11-15 2015-05-12 Microsoft Technology Licensing, Llc Voice-controlled camera operations
US8655385B2 (en) 2011-11-18 2014-02-18 Blackberry Limited Social networking methods and apparatus for use in facilitating participation in user-relevant social groups
FR2983177B1 (fr) 2011-11-29 2014-06-06 Airbus Operations Sas Dispositif de dialogue interactif entre un operateur d'un aeronef et un systeme de guidage dudit aeronef.
EP2602677B1 (en) 2011-12-05 2018-02-21 Nxp B.V. Localization method, computer program product and localization device
US9245020B2 (en) 2011-12-14 2016-01-26 Microsoft Technology Licensing, Llc Collaborative media sharing
US20130162411A1 (en) 2011-12-22 2013-06-27 Qualcomm Incorporated Method and apparatus to adapt a remote control user interface
US20130225152A1 (en) 2011-12-23 2013-08-29 Microsoft Corporation Automatically quieting mobile devices
US20130305354A1 (en) 2011-12-23 2013-11-14 Microsoft Corporation Restricted execution modes
US9247492B2 (en) 2011-12-29 2016-01-26 Sonos, Inc. Systems and methods for multi-network audio control
US9191699B2 (en) 2011-12-29 2015-11-17 Sonos, Inc. Systems and methods for connecting an audio controller to a hidden audio network
US9436929B2 (en) 2012-01-24 2016-09-06 Verizon Patent And Licensing Inc. Collaborative event playlist systems and methods
WO2013115748A1 (en) 2012-01-30 2013-08-08 Echostar Ukraine, L.L.C. Apparatus, systems and methods for adjusting output audio volume based on user location
JP5906097B2 (ja) 2012-01-31 2016-04-20 キヤノン株式会社 電子機器、その制御方法、プログラム、及び記録媒体
GB2500566A (en) 2012-01-31 2013-10-02 Avolites Ltd Automated lighting control system allowing three dimensional control and user interface gesture recognition
KR101527038B1 (ko) 2012-02-24 2015-06-08 엘지전자 주식회사 이동 단말기 및 그 제어 방법, 이를 위한 기록 매체
US8725113B2 (en) 2012-03-12 2014-05-13 Google Inc. User proximity control of devices
US8751577B2 (en) 2012-03-15 2014-06-10 Google Inc. Methods and systems for ordering and voting on shared media playlists
US10469897B2 (en) 2012-03-19 2019-11-05 Sonos, Inc. Context-based user music menu systems and methods
CA2870050C (en) 2012-04-09 2019-02-05 The Dgroup Inc. Systems and methods for providing electronic cues for time-based media
US10142122B1 (en) * 2012-04-11 2018-11-27 Google Llc User interfaces, systems and methods for configuring smart devices for interoperability with a smart hub device
KR20130115611A (ko) 2012-04-12 2013-10-22 엘지전자 주식회사 조명 장치 및 디바이스를 이용한 조명 제어 방법
GB201206564D0 (en) 2012-04-13 2012-05-30 Intrasonics Sarl Event engine synchronisation
US20140150029A1 (en) 2012-04-18 2014-05-29 Scorpcast, Llc System and methods for providing user generated video reviews
US9507327B2 (en) 2012-04-20 2016-11-29 Liaison Home Automation, Llc Systems and methods for controlling home and commercial environments including one touch and intuitive functionality
KR20130123053A (ko) 2012-05-02 2013-11-12 삼성전자주식회사 멀티미디어 확장 탐색 방법과 그 멀티미디어 재생 장치
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
US10235014B2 (en) 2012-05-09 2019-03-19 Apple Inc. Music user interface
US9632685B2 (en) 2012-05-31 2017-04-25 Eric Qing Li Method of navigating through a media program displayed on a portable electronic device in a magnified time scale
US10156455B2 (en) 2012-06-05 2018-12-18 Apple Inc. Context-aware voice guidance
US8971556B2 (en) 2012-06-10 2015-03-03 Apple Inc. Remotely controlling a hearing device
US9071453B2 (en) 2012-06-11 2015-06-30 Apple Inc. Location-based device automation
US9306810B2 (en) 2012-06-11 2016-04-05 WiFiZapper, Inc. WiFi zapper smart phone application
US9433032B1 (en) 2012-06-14 2016-08-30 Cisco Technology, Inc. Interface selection for quality of service enforcement
US8880648B1 (en) 2012-06-27 2014-11-04 Audible, Inc. Automated transition of content consumption across devices
US10437454B2 (en) 2012-07-09 2019-10-08 Facebook, Inc. Dynamically scaled navigation system for social network data
US8886785B2 (en) 2012-07-17 2014-11-11 The Procter & Gamble Company Home network of connected consumer devices
US9621371B2 (en) 2012-07-24 2017-04-11 Honeywell International Inc. Wireless sensor device with wireless remote programming
US8995687B2 (en) 2012-08-01 2015-03-31 Sonos, Inc. Volume interactions for connected playback devices
US8930005B2 (en) 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
US9736265B2 (en) 2012-08-09 2017-08-15 Facebook, Inc. Handling notifications
JP6310457B2 (ja) 2012-08-16 2018-04-11 フィリップス ライティング ホールディング ビー ヴィ １又は複数の制御可能な装置を有するシステムの制御
KR101971911B1 (ko) 2012-08-16 2019-04-24 삼성전자주식회사 이미지를 디스플레이하기 위한 방법 및 그 전자 장치
JP6051681B2 (ja) 2012-08-24 2016-12-27 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP2014045258A (ja) 2012-08-24 2014-03-13 Toshiba Corp 遠隔操作装置
US9397852B2 (en) 2012-08-31 2016-07-19 Verizon Patent And Licensing Inc. Connected home user interface systems and methods
US8954853B2 (en) 2012-09-06 2015-02-10 Robotic Research, Llc Method and system for visualization enhancement for situational awareness
JP6478181B2 (ja) 2012-09-10 2019-03-06 三星電子株式会社Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ． 携帯端末と外部表示装置の連結運用方法及びこれを支援する装置
US20140075311A1 (en) 2012-09-11 2014-03-13 Jesse William Boettcher Methods and apparatus for controlling audio volume on an electronic device
US8855793B2 (en) 2012-09-12 2014-10-07 Zuli, Inc. System for learning equipment schedules
KR101992189B1 (ko) 2012-09-19 2019-06-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10042603B2 (en) 2012-09-20 2018-08-07 Samsung Electronics Co., Ltd. Context aware service provision method and apparatus of user device
KR102070196B1 (ko) 2012-09-20 2020-01-30 삼성전자 주식회사 사용자 디바이스에서 상황 인식 서비스 제공 방법 및 장치
US20140087685A1 (en) 2012-09-21 2014-03-27 Cheryl Kellond More efficient display and control for wearable sports instrumentation
US9251787B1 (en) 2012-09-26 2016-02-02 Amazon Technologies, Inc. Altering audio to improve automatic speech recognition
JP2014071835A (ja) 2012-10-01 2014-04-21 Fujitsu Ltd 電子機器及び処理制御方法
RU2533445C2 (ru) 2012-10-02 2014-11-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Автоматическое распознавание и съемка объекта
CN102915630A (zh) 2012-10-10 2013-02-06 鸿富锦精密工业（深圳）有限公司 远程门铃控制系统及其智能门铃装置
JP2014087126A (ja) 2012-10-22 2014-05-12 Sharp Corp 電力管理装置、電力管理装置の制御方法および電力管理装置の制御プログラム
CN103347116A (zh) 2012-11-09 2013-10-09 北京深思洛克软件技术股份有限公司 一种在智能手机中设置多安全模式的系统和方法
CN102932216A (zh) 2012-11-12 2013-02-13 北京圣岩迅科技发展有限公司 智能家居无线网元管理系统
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US8745500B1 (en) 2012-12-10 2014-06-03 VMIX Media, Inc. Video editing, enhancement and distribution platform for touch screen computing devices
US20150243163A1 (en) 2012-12-14 2015-08-27 Biscotti Inc. Audio Based Remote Control Functionality
KR102058918B1 (ko) 2012-12-14 2019-12-26 삼성전자주식회사 홈 모니터링 방법 및 장치
JP6103350B2 (ja) 2012-12-18 2017-03-29 カシオ計算機株式会社 運動支援装置、運動支援方法および運動支援プログラム
US10320803B2 (en) 2012-12-28 2019-06-11 Dish Technologies Llc Determining eligibility for multiple client media streaming
US9294853B1 (en) 2012-12-28 2016-03-22 Google Inc. Audio control process
US10691230B2 (en) 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
JP6158947B2 (ja) 2012-12-29 2017-07-05 アップル インコーポレイテッド タッチ入力からディスプレイ出力への関係間を遷移するためのデバイス、方法及びグラフィカルユーザインタフェース
US11513675B2 (en) 2012-12-29 2022-11-29 Apple Inc. User interface for manipulating user interface objects
US20150189425A1 (en) 2013-01-01 2015-07-02 Aliphcom Mobile device speaker control
US20150189426A1 (en) 2013-01-01 2015-07-02 Aliphcom Mobile device speaker control
KR102002420B1 (ko) 2013-01-18 2019-10-01 삼성전자주식회사 이동기기를 이용하는 스마트 홈 시스템
KR101822463B1 (ko) 2013-01-21 2018-01-26 삼성전자주식회사 복수 개의 아이콘들을 화면상에 배치하는 장치 및 이의 운용 방법
EP2759921B1 (en) 2013-01-25 2020-09-23 Morpho, Inc. Image display apparatus, image displaying method and program
US9319019B2 (en) 2013-02-11 2016-04-19 Symphonic Audio Technologies Corp. Method for augmenting a listening experience
SG11201404877QA (en) 2013-02-20 2014-10-30 Panasonic Ip Corp America Method for controlling information apparatus and program
KR20140104215A (ko) 2013-02-20 2014-08-28 삼성전자주식회사 자동 페어링 기능을 갖는 무선 네트워크 오디오 시스템 및 이를 이용한 자동 페어링 방법
MY181880A (en) * 2013-02-20 2021-01-12 Panasonic Ip Corp America Method for controlling information apparatus and program
KR102047696B1 (ko) 2013-02-20 2019-11-22 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
CN106455272B (zh) 2013-02-20 2019-03-08 松下电器（美国）知识产权公司 信息终端的控制方法和程序以及记录介质
JP5529358B1 (ja) 2013-02-20 2014-06-25 パナソニック株式会社 携帯情報端末の制御方法及びプログラム
CN104247445B (zh) * 2013-02-20 2018-10-12 松下电器（美国）知识产权公司 便携信息终端的控制方法
US20140245160A1 (en) 2013-02-22 2014-08-28 Ubiquiti Networks, Inc. Mobile application for monitoring and controlling devices
JP5963695B2 (ja) 2013-03-01 2016-08-03 株式会社Ｊ−ＷＡＶＥｉ メッセージ送信プログラム、メッセージ送信装置、及びメッセージ配信システム
KR20140109020A (ko) 2013-03-05 2014-09-15 한국전자통신연구원 스마트 가전기기의 제어를 위한 디바이스 정보 구축 장치 및 그 방법
US9319149B2 (en) 2013-03-13 2016-04-19 Aliphcom Proximity-based control of media devices for media presentations
US9866924B2 (en) 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
US10219093B2 (en) 2013-03-14 2019-02-26 Michael Luna Mono-spatial audio processing to provide spatial messaging
US9179199B2 (en) 2013-03-14 2015-11-03 Apple Inc. Media playback across multiple devices
US9806712B2 (en) 2013-03-14 2017-10-31 Control4 Corporation Systems and methods for gesture-based lighting control
US9113300B2 (en) 2013-03-15 2015-08-18 Apple Inc. Proximity fence
US9628414B1 (en) 2013-03-15 2017-04-18 Google Inc. User state based engagement
US9087234B2 (en) 2013-03-15 2015-07-21 Nike, Inc. Monitoring fitness using a mobile device
US9247380B1 (en) 2013-03-15 2016-01-26 Google Inc. Location based mobile device profiles
GB2512821A (en) 2013-03-19 2014-10-15 Simm Tronic Ltd Method and apparatus for control of building functions by means of mobile computing devices
EP2784611A2 (en) 2013-03-25 2014-10-01 Toshiba Lighting & Technology Corporation Electrical equipment control apparatus and electrical equipment control system
JP2014186961A (ja) 2013-03-25 2014-10-02 Toshiba Lighting & Technology Corp 電気機器制御システム
US10694149B2 (en) 2013-03-26 2020-06-23 Verizon Patent And Licensing Inc. Web based security system
EP2981093B1 (en) 2013-03-29 2018-02-14 Panasonic Intellectual Property Corporation of America Mobile information terminal control method and program
CN103260079A (zh) 2013-04-12 2013-08-21 深圳市龙视传媒有限公司 一种多屏互动的控制方法及控制装置
US9247363B2 (en) 2013-04-16 2016-01-26 Sonos, Inc. Playback queue transfer in a media playback system
CN105308657A (zh) 2013-04-23 2016-02-03 卡纳里连接公司 安全和/或监测设备及系统
US9021526B1 (en) 2013-05-03 2015-04-28 Amazon Technologies, Inc. Video navigation preview
AU2013101046A4 (en) 2013-05-23 2013-09-19 Nowww.Us Pty Ltd A process for Encrypted Login to a Secure Computer Network, for the Creation of a Session of Encrypted Communications Between Computers and a Device Including a Mobile Phone Logged into a Network, for the Persistence of Encrypted Communications between Communication Devices, and for the Termination of Communications.
KR102161230B1 (ko) 2013-05-28 2020-09-29 삼성전자주식회사 멀티미디어 콘텐츠 검색을 위한 사용자 인터페이스 방법 및 장치
US9798510B2 (en) 2013-05-29 2017-10-24 Sonos, Inc. Connected state indicator
US9735978B2 (en) 2013-05-29 2017-08-15 Sonos, Inc. Playback queue control via a playlist on a mobile device
KR20140143555A (ko) 2013-06-07 2014-12-17 삼성전자주식회사 휴대 장치의 잠금 화면 상에서 빠른 어플리케이션 실행 방법 및 이를 위한 휴대 장치
US9979438B2 (en) 2013-06-07 2018-05-22 Apple Inc. Controlling a media device using a mobile device
US9654073B2 (en) * 2013-06-07 2017-05-16 Sonos, Inc. Group volume control
US10474240B2 (en) 2013-06-10 2019-11-12 Honeywell International Inc. Frameworks, devices and methods configured for enabling gesture-based interaction between a touch/gesture controlled display and other networked devices
CN105339871B (zh) 2013-06-11 2018-09-28 苹果公司 用于电子设备的旋转输入机构
US10564813B2 (en) 2013-06-18 2020-02-18 Samsung Electronics Co., Ltd. User terminal apparatus and management method of home network thereof
EP3038427B1 (en) 2013-06-18 2019-12-11 Samsung Electronics Co., Ltd. User terminal apparatus and management method of home network thereof
CN109739412B (zh) * 2013-06-18 2021-10-26 三星电子株式会社 用户终端设备及其家庭网络的管理方法
KR102155680B1 (ko) 2013-06-21 2020-09-14 삼성전자주식회사 사용자 단말장치, 제어장치, 사용자 단말장치의 구동방법, 제어장치의 구동방법 및 제어대상장치의 제어시스템
WO2014204286A1 (en) 2013-06-21 2014-12-24 Samsung Electronics Co., Ltd. User terminal and driving method thereof, control device and driving method thereof, and control system of controlled device
WO2014208057A1 (ja) 2013-06-24 2014-12-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報通知方法、情報端末、およびプログラム
US20140375819A1 (en) 2013-06-24 2014-12-25 Pivotal Vision, Llc Autonomous video management system
WO2014206864A1 (en) 2013-06-28 2014-12-31 Koninklijke Philips N.V. System, method and devices for bluetooth party-mode
KR102152643B1 (ko) 2013-07-04 2020-09-08 엘지이노텍 주식회사 모바일디바이스를 이용한 조명 시스템
WO2015008408A1 (ja) 2013-07-19 2015-01-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報端末の制御方法及びプログラム
KR101560448B1 (ko) 2013-07-24 2015-10-16 한국과학기술원 스크린 록 환경에서 특정 어플리케이션 호출을 위한 방법
US9912978B2 (en) 2013-07-29 2018-03-06 Apple Inc. Systems, methods, and computer-readable media for transitioning media playback between multiple electronic devices
KR101444091B1 (ko) 2013-08-06 2014-09-26 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN104345950B (zh) 2013-08-08 2019-02-05 联想(北京)有限公司 一种信息处理的方法及电子设备
US9906575B2 (en) 2013-08-15 2018-02-27 Comcast Cable Communications, Llc Media fling system
US8914752B1 (en) 2013-08-22 2014-12-16 Snapchat, Inc. Apparatus and method for accelerated display of ephemeral messages
US10282068B2 (en) 2013-08-26 2019-05-07 Venuenext, Inc. Game event display with a scrollable graphical game play feed
US9575621B2 (en) 2013-08-26 2017-02-21 Venuenext, Inc. Game event display with scroll bar and play event icons
US9202029B2 (en) 2013-08-27 2015-12-01 Maan ALDUAIJI Computer device, a method for controlling a login status of a computer device and a server
DE112013007377T5 (de) 2013-08-30 2016-05-12 Hewlett-Packard Development Company, L.P. Wärmeprofil auf der Grundlage von Temperaturinformationen für den Ort einer Rechenvorrichtung
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
WO2015040020A1 (en) 2013-09-17 2015-03-26 Koninklijke Philips N.V. Gesture enabled simultaneous selection of range and value
US10025463B2 (en) 2013-09-18 2018-07-17 Vivint, Inc. Systems and methods for home automation scene control
US20150089359A1 (en) 2013-09-25 2015-03-26 At&T Mobility Ii Llc Intelligent Adaptation of Home Screens
CN104469512B (zh) 2013-09-25 2018-02-16 浙江大华技术股份有限公司 一种视频播放器及其控制视频播放的方法
JP6133186B2 (ja) 2013-09-26 2017-05-24 京セラ株式会社 機器制御装置、機器制御方法および制御システム
US9979995B2 (en) 2013-09-30 2018-05-22 Google Llc Visual hot watch spots in content item playback
US9654545B2 (en) 2013-09-30 2017-05-16 Sonos, Inc. Group coordinator device selection
US9288596B2 (en) 2013-09-30 2016-03-15 Sonos, Inc. Coordinator device for paired or consolidated players
US9258524B2 (en) 2013-09-30 2016-02-09 International Business Machines Corporation Streaming playback within a live video conference
US9977591B2 (en) 2013-10-01 2018-05-22 Ambient Consulting, LLC Image with audio conversation system and method
EP3039569A4 (en) 2013-10-09 2017-01-25 Mobile Technology Corporation, LLC Systems and methods for using spatial and temporal analysis to associate data sources with mobile devices
KR102092316B1 (ko) 2013-10-14 2020-03-23 한화테크윈 주식회사 모니터링 방법
US9063640B2 (en) 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
US9792386B2 (en) 2013-10-25 2017-10-17 Turner Broadcasting System, Inc. Concepts for providing an enhanced media presentation
US20160253145A1 (en) 2013-10-31 2016-09-01 Lg Electronics Inc. Electronic device and method for controlling the same
US9727215B2 (en) 2013-11-11 2017-08-08 Htc Corporation Method for performing multimedia management utilizing tags, and associated apparatus and associated computer program product
KR20150055275A (ko) 2013-11-13 2015-05-21 삼성전자주식회사 팜 터치를 이용한 전자장치 제어 방법 및 장치
US10454783B2 (en) 2014-02-05 2019-10-22 Apple Inc. Accessory management system using environment model
US20150142587A1 (en) 2013-11-20 2015-05-21 Honeywell International Inc. System and Method of Dynamic Correlation View for Cloud Based Incident Analysis and Pattern Detection
US9111076B2 (en) 2013-11-20 2015-08-18 Lg Electronics Inc. Mobile terminal and control method thereof
KR101960215B1 (ko) 2013-11-22 2019-03-19 애플 인크. 핸즈프리 빔 패턴 구성
CA2931526C (en) 2013-11-25 2022-04-19 Abl Ip Holding Llc System and method for communication with a mobile device via a positioning system including rf communication devices and modulated beacon light sources
JP6259368B2 (ja) 2013-11-28 2018-01-10 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 携帯端末の制御方法
US10768784B2 (en) 2013-12-06 2020-09-08 Vivint, Inc. Systems and methods for rules-based automations and notifications
US10649418B2 (en) * 2013-12-11 2020-05-12 Ademco Inc. Building automation controller with configurable audio/visual cues
US9781180B2 (en) 2013-12-20 2017-10-03 Verizon Patent And Licensing Inc. Redistributing broadcasted content
US9319782B1 (en) 2013-12-20 2016-04-19 Amazon Technologies, Inc. Distributed speaker synchronization
US9563328B2 (en) 2013-12-23 2017-02-07 Microsoft Technology Licensing, Llc Information surfacing with visual cues indicative of relevance
WO2015097829A1 (ja) 2013-12-26 2015-07-02 株式会社東芝 方法、電子機器およびプログラム
JP5597762B1 (ja) 2013-12-27 2014-10-01 パナソニック株式会社 活動マップ分析装置、活動マップ分析システムおよび活動マップ分析方法
US20160345039A1 (en) 2013-12-30 2016-11-24 Thomson Licensing Proximity dependent media playback
KR20150079106A (ko) 2013-12-31 2015-07-08 삼성전자주식회사 디스플레이 장치, 단말 장치 및 그 제어 방법
CN104766021A (zh) 2014-01-04 2015-07-08 深圳富泰宏精密工业有限公司 权限控制系统及方法
KR102277752B1 (ko) 2014-01-06 2021-07-16 삼성전자주식회사 웨어러블 기기를 이용한 홈 디바이스 제어 장치 및 제어 방법
US20150193196A1 (en) 2014-01-06 2015-07-09 Alpine Electronics of Silicon Valley, Inc. Intensity-based music analysis, organization, and user interface for audio reproduction devices
US20150193127A1 (en) 2014-01-07 2015-07-09 Opentv Inc. Systems and methods of displaying integrated home automation modules
KR20150082824A (ko) 2014-01-08 2015-07-16 삼성전자주식회사 장치 제어 방법 및 제어 장치
US9872368B2 (en) 2014-01-10 2018-01-16 Panasonic Intellectual Property Corporation Of America Control method for mobile device
US20150198938A1 (en) 2014-01-15 2015-07-16 Green Edge Technologies, Inc. Systems, devices, methods and graphical user interface for configuring a building automation system
US20150205511A1 (en) 2014-01-17 2015-07-23 Apple Inc. Systems And Methods For An Animated Graphical User Interface
US10114892B2 (en) 2014-01-22 2018-10-30 Google Llc Creating a single playlist with multiple authors
DE112014006235T5 (de) 2014-01-22 2016-10-13 Apple Inc. Koordiniertes Weiterreichen einer Audiodatenübermittlung
US20150223005A1 (en) 2014-01-31 2015-08-06 Raytheon Company 3-dimensional audio projection
US10212143B2 (en) 2014-01-31 2019-02-19 Dropbox, Inc. Authorizing an untrusted client device for access on a content management system
US20150222680A1 (en) 2014-02-04 2015-08-06 Ford Global Technologies, Llc Local network media sharing
US9185117B2 (en) 2014-02-07 2015-11-10 Bank Of America Corporation User authentication by geo-location and proximity to user's close network
US20150229782A1 (en) 2014-02-11 2015-08-13 Nxp B.V. Notification volume adjustment based on distance from paired device
JP6392522B2 (ja) 2014-02-14 2018-09-19 京セラ株式会社 操作端末、プログラム、及び方法
EP2911149B1 (en) 2014-02-19 2019-04-17 Nokia Technologies OY Determination of an operational directive based at least in part on a spatial audio property
US9728230B2 (en) 2014-02-20 2017-08-08 International Business Machines Corporation Techniques to bias video thumbnail selection using frequently viewed segments
US10885510B2 (en) 2014-02-21 2021-01-05 Paypal, Inc. Facilitating payments using wearable devices
US9372610B2 (en) 2014-02-21 2016-06-21 Sonos, Inc. Media system controller interface
KR102166781B1 (ko) 2014-02-22 2020-10-16 삼성전자주식회사 요청 정보에 따른 장치 제어 방법 및 이를 지원하는 장치
US9893903B2 (en) 2014-02-24 2018-02-13 Microsoft Technology Licensing, Llc Creating connections and shared spaces
US20150242597A1 (en) 2014-02-24 2015-08-27 Google Inc. Transferring authorization from an authenticated device to an unauthenticated device
US9408008B2 (en) 2014-02-28 2016-08-02 Sonos, Inc. Playback zone representations
US9679054B2 (en) 2014-03-05 2017-06-13 Sonos, Inc. Webpage media playback
KR20150104985A (ko) 2014-03-07 2015-09-16 삼성전자주식회사 사용자 단말 및 오디오 시스템, 그리고 이의 스피커 제어 방법
WO2015134755A2 (en) 2014-03-07 2015-09-11 Ubiquiti Networks, Inc. Devices and methods for networked living and work spaces
US20150253735A1 (en) 2014-03-10 2015-09-10 Icon Health & Fitness, Inc. Watch with Multiple Sections for Tracking Multiple Parameters
US20150261493A1 (en) 2014-03-11 2015-09-17 Sonos, Inc. Playback Zone Representations
US9574763B2 (en) 2014-03-12 2017-02-21 Kaipo Chen Multifunctional home monitoring system combined with lighting device
CN104917666B (zh) 2014-03-13 2019-08-06 腾讯科技（深圳）有限公司 一种制作个性化动态表情的方法和装置
US9450812B2 (en) 2014-03-14 2016-09-20 Dechnia, LLC Remote system configuration via modulated audio
US9888207B2 (en) 2014-03-17 2018-02-06 Microsoft Technology Licensing, Llc Automatic camera selection
US9431021B1 (en) 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
US9661058B2 (en) * 2014-08-10 2017-05-23 Belkin International Inc. Grouping of network devices
US9392104B2 (en) 2014-04-15 2016-07-12 Google Inc. Limiting user interaction with a computing device based on proximity of a user
US10444715B2 (en) 2014-05-01 2019-10-15 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
US10554439B2 (en) 2014-05-01 2020-02-04 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
TWI523578B (zh) 2014-04-25 2016-02-21 Cincon Electronics Co Ltd A system and method for grouping a fixture on a DALI system using a handheld device
US10129599B2 (en) 2014-04-28 2018-11-13 Sonos, Inc. Media preference database
US9680960B2 (en) 2014-04-28 2017-06-13 Sonos, Inc. Receiving media content based on media preferences of multiple users
US20150324552A1 (en) 2014-05-12 2015-11-12 Sonos, Inc. Share Restriction for Media Items
US10032364B2 (en) 2014-05-15 2018-07-24 Savant Systems, Llc Standalone wireless lighting application
KR102185702B1 (ko) 2014-05-16 2020-12-02 삼성전자주식회사 컨텐츠 출력 장치, 모바일 장치 및 그 제어 방법
US9876652B2 (en) 2014-05-20 2018-01-23 Savant Systems, Llc Automatic configuration of control device user interface in a home automation system
US20150339917A1 (en) 2014-05-21 2015-11-26 Qualcomm Incorporated Triggering commands on a target device in response to broadcasted event notifications
KR102454196B1 (ko) 2014-05-27 2022-10-14 삼성전자 주식회사 디스플레이 제어 방법 및 이를 제공하는 전자 장치
US9537811B2 (en) 2014-10-02 2017-01-03 Snap Inc. Ephemeral gallery of ephemeral messages
US10055567B2 (en) 2014-05-30 2018-08-21 Apple Inc. Proximity unlock and lock operations for electronic devices
US9207835B1 (en) 2014-05-31 2015-12-08 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US20150355818A1 (en) 2014-06-04 2015-12-10 Sonos, Inc. Continuous Playback Queue
US9654536B2 (en) 2014-06-04 2017-05-16 Sonos, Inc. Cloud queue playback policy
US20150358043A1 (en) 2014-06-05 2015-12-10 Samsung Electronics Co., Ltd. Wearable device, main unit of wearable device, fixing unit of wearable device, and control method of wearable device
TW201547326A (zh) 2014-06-12 2015-12-16 Best Multimedia Technology Co Ltd U 智能家庭系統及燈光控制方法
US9084003B1 (en) 2014-06-19 2015-07-14 Google Inc. Methods, systems, and media for media playback
FR3022646B1 (fr) 2014-06-20 2017-11-10 Somfy Sas Procede de fonctionnement d'un dispositif de commande d'une installation domotique d'un batiment et dispositif de commande.
CN104298188A (zh) 2014-06-22 2015-01-21 福建省科正智能科技有限公司 离家控制系统
EP3108350B1 (en) 2014-06-24 2022-05-18 Apple Inc. Music now playing user interface
US9535986B2 (en) 2014-06-27 2017-01-03 Sonos, Inc. Application launch
JP6137102B2 (ja) 2014-06-30 2017-05-31 キヤノンマーケティングジャパン株式会社 情報処理装置、及びその制御方法、プログラム
US9519413B2 (en) 2014-07-01 2016-12-13 Sonos, Inc. Lock screen media playback control
US10051364B2 (en) 2014-07-03 2018-08-14 Qualcomm Incorporated Single channel or multi-channel audio control interface
US9354794B2 (en) 2014-07-07 2016-05-31 Google Inc. Method and system for performing client-side zooming of a remote video feed
US9420331B2 (en) 2014-07-07 2016-08-16 Google Inc. Method and system for categorizing detected motion events
US10140827B2 (en) 2014-07-07 2018-11-27 Google Llc Method and system for processing motion event notifications
CN104155938B (zh) 2014-07-21 2018-01-09 惠州Tcl移动通信有限公司 一种家居设备管理方法及系统
US9671997B2 (en) 2014-07-23 2017-06-06 Sonos, Inc. Zone grouping
WO2016014120A1 (en) 2014-07-24 2016-01-28 Hewlett-Packard Development Company, L.P. Device authentication agent
US9750116B2 (en) 2014-07-29 2017-08-29 Lumifi, Inc. Automated and pre-configured set up of light scenes
US9811102B2 (en) 2014-07-31 2017-11-07 Antonino Gulli' System and methods for monitoring and reducing the consumption of electricity with a network of smart sensors
US9596603B2 (en) 2014-08-01 2017-03-14 Qualcomm Connected Experiences, Inc. Distributed bulk onboarding process
US10645459B2 (en) 2014-08-04 2020-05-05 Live View Technologies Devices, systems, and methods for remote video retrieval
US9898175B2 (en) 2014-08-05 2018-02-20 Fibar Group S.A. Home network manager for home automation
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
EP3186974B1 (en) 2014-08-29 2020-04-15 Harman International Industries, Inc. Wireless speaker system
JP2016051661A (ja) 2014-09-01 2016-04-11 パナソニックＩｐマネジメント株式会社 照明制御装置及び照明システム
US10275138B2 (en) 2014-09-02 2019-04-30 Sonos, Inc. Zone recognition
WO2016036436A1 (en) 2014-09-02 2016-03-10 Apple Inc. Stopwatch and timer user interfaces
US9680982B2 (en) * 2014-09-03 2017-06-13 Fibar Group S.A. Emergency communication device
US10158946B2 (en) 2014-09-04 2018-12-18 PWV Inc Speaker discovery and assignment
US20160073482A1 (en) * 2014-09-05 2016-03-10 Qualcomm Incorporated Implementing a target lighting scene in an internet of things environment using a mobile light output device
US10042336B2 (en) * 2014-09-09 2018-08-07 Savant Systems, Llc User-defined scenes for home automation
US20170097621A1 (en) 2014-09-10 2017-04-06 Crestron Electronics, Inc. Configuring a control sysem
US9940016B2 (en) 2014-09-13 2018-04-10 Microsoft Technology Licensing, Llc Disambiguation of keyboard input
US10310704B2 (en) 2014-09-18 2019-06-04 Ademco Inc. System and method to have location based personalized UI updates on mobile app for connected users in security, video and home automation applications
CN104361657B (zh) 2014-09-22 2016-06-08 三星电子（中国）研发中心 一种智能锁及智能锁的使用方法
US10631123B2 (en) 2014-09-24 2020-04-21 James Thomas O'Keeffe System and method for user profile enabled smart building control
KR102258052B1 (ko) 2014-09-25 2021-05-28 삼성전자주식회사 전자 장치에서 다른 전자 장치와 컨텐츠를 공유하기 위한 장치 및 방법
WO2016052888A1 (en) 2014-09-29 2016-04-07 Lg Electronics Inc. Mobile terminal and method of controlling the same
WO2016052876A1 (en) 2014-09-30 2016-04-07 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof
WO2016054036A1 (en) 2014-09-30 2016-04-07 The Chamberlain Group, Inc. Garage monitor
JP6517022B2 (ja) 2014-09-30 2019-05-22 株式会社西電通 安否確認システム、インターホン、及び集合住宅
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
WO2016057117A1 (en) 2014-10-10 2016-04-14 Thomson Licensing Method and apparatus for control of media content delivery
US10055094B2 (en) * 2014-10-29 2018-08-21 Xiaomi Inc. Method and apparatus for dynamically displaying device list
CN104820631A (zh) 2014-10-29 2015-08-05 小米科技有限责任公司 对外部设备状态的呈现方法、装置及用户终端
CN105657483B (zh) 2014-11-10 2019-06-04 扬智科技股份有限公司 多媒体播放系统、多媒体文件分享方法及其控制方法
US10424341B2 (en) 2014-11-12 2019-09-24 Massachusetts Institute Of Technology Dynamic video summarization
US10713699B1 (en) 2014-11-14 2020-07-14 Andersen Corporation Generation of guide materials
JP6207762B2 (ja) 2014-11-25 2017-10-04 フィリップス ライティング ホールディング ビー ヴィ 近接ベースの照明制御
US20160156992A1 (en) 2014-12-01 2016-06-02 Sonos, Inc. Providing Information Associated with a Media Item
GB2533101B (en) 2014-12-09 2017-03-15 Haandle Ltd Distributing a network access policy
US9864570B2 (en) 2014-12-09 2018-01-09 Harman International Industries, Incorporated Proximity based temporary audio sharing
WO2016099048A1 (en) * 2014-12-15 2016-06-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling group action
KR102212212B1 (ko) 2014-12-17 2021-02-04 삼성전자주식회사 휴대 장치 및 휴대 장치의 위치 정보 제어방법
JP2016119600A (ja) 2014-12-22 2016-06-30 オリンパス株式会社 編集装置及び編集方法
US10445055B2 (en) 2014-12-23 2019-10-15 Lg Electronics Inc. Mobile terminal, audio output device and audio output system comprising same
KR102250090B1 (ko) 2014-12-24 2021-05-10 삼성전자주식회사 영상 데이터를 송수신하는 디바이스 및 그 방법
US20160187995A1 (en) 2014-12-30 2016-06-30 Tyco Fire & Security Gmbh Contextual Based Gesture Recognition And Control
US9112849B1 (en) 2014-12-31 2015-08-18 Spotify Ab Methods and systems for dynamic creation of hotspots for media control
CN104503688B (zh) 2014-12-31 2018-03-02 小米科技有限责任公司 智能硬件设备的控制实现方法及装置
US9699559B2 (en) 2015-01-05 2017-07-04 Pwv Inc. Discovery, control, and streaming of multi-channel audio playback with enhanced time synchronization
KR101522311B1 (ko) 2015-01-12 2015-05-22 주식회사 지오멕스소프트 미리보기 기능을 갖춘 감시카메라 영상 반출 시스템
KR102315339B1 (ko) 2015-02-02 2021-10-20 삼성전자주식회사 디스플레이 장치의 이의 디스플레이 방법
US10116601B2 (en) 2015-02-06 2018-10-30 Jamdeo Canada Ltd. Methods and devices for display device notifications
US9329831B1 (en) 2015-02-25 2016-05-03 Sonos, Inc. Playback expansion
US9715619B2 (en) 2015-03-14 2017-07-25 Microsoft Technology Licensing, Llc Facilitating aligning a user and camera for user authentication
US10080111B2 (en) 2015-03-19 2018-09-18 Facebook, Inc. Techniques for communication using audio stickers
US9891880B2 (en) 2015-03-31 2018-02-13 Sonos, Inc. Information display regarding playback queue subscriptions
CN104898603B (zh) 2015-04-07 2017-12-26 联想(北京)有限公司 信息处理方法及电子设备
US9483230B1 (en) 2015-04-09 2016-11-01 Sonos, Inc. Wearable device zone group control
USD765118S1 (en) 2015-04-13 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10097902B2 (en) 2015-05-06 2018-10-09 Blackfire Research Corporation System and method for using multiple audio input devices for synchronized and position-based audio
US9954989B2 (en) 2015-05-06 2018-04-24 Eyespage Inc. Lock screen graphical user interface
US11113022B2 (en) 2015-05-12 2021-09-07 D&M Holdings, Inc. Method, system and interface for controlling a subwoofer in a networked audio system
KR20160143136A (ko) 2015-06-04 2016-12-14 엘지전자 주식회사 위치 기반 알림 시스템 및 그것의 제어방법
USD773510S1 (en) 2015-06-05 2016-12-06 Apple Inc. Display screen or portion thereof with graphical user interface
DK179360B1 (en) 2015-06-07 2018-05-22 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US9727749B2 (en) 2015-06-08 2017-08-08 Microsoft Technology Licensing, Llc Limited-access functionality accessible at login screen
US20160364600A1 (en) 2015-06-10 2016-12-15 Microsoft Technology Licensing, Llc Biometric Gestures
US20160366481A1 (en) * 2015-06-12 2016-12-15 Samsung Electronics Co., Ltd. Method and apparatus for service oriented input and output
US9361011B1 (en) 2015-06-14 2016-06-07 Google Inc. Methods and systems for presenting multiple live video feeds in a user interface
KR20170006579A (ko) 2015-07-08 2017-01-18 삼성전자주식회사 전자 장치 및 전자 장치에서의 아이콘 변경 방법
KR20170008601A (ko) 2015-07-14 2017-01-24 삼성전자주식회사 어플리케이션 운용 방법 및 이를 이용하는 전자 장치
US9948980B2 (en) 2015-07-20 2018-04-17 Google Llc Synchronizing audio content to audio and video devices
CN105187940B (zh) 2015-07-29 2018-05-29 广东欧珀移动通信有限公司 一种播放系统的播放列表切换控制方法及装置
CN108139716B (zh) 2015-07-30 2021-04-16 布莱特格林有限公司 多输入的触摸式调光照明控制
US9454336B1 (en) 2015-08-04 2016-09-27 Samsung Electronics Co., Ltd. System and method for improving user experience with proximity estimation
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
CN105069118B (zh) 2015-08-11 2018-04-03 北京思特奇信息技术股份有限公司 一种基于gis配置的应用场景管理方法及系统
CN105159107B (zh) 2015-08-17 2019-01-04 广州市果豆科技有限责任公司 一种智能家居控制方法、控制装置及控制系统
WO2017031302A1 (en) 2015-08-18 2017-02-23 Google Inc. Time series explorer
JP6693066B2 (ja) 2015-08-18 2020-05-13 ヤマハ株式会社 制御装置
US9858739B1 (en) 2015-08-19 2018-01-02 Alarm.Com Incorporated Home monitoring system triggered rules
US10219026B2 (en) 2015-08-26 2019-02-26 Lg Electronics Inc. Mobile terminal and method for playback of a multi-view video
KR20170027999A (ko) 2015-09-03 2017-03-13 삼성전자주식회사 사용자 단말 장치, 시스템 및 그 제어 방법
US20170070775A1 (en) 2015-09-03 2017-03-09 EchoStar Technologies, L.L.C. Methods and systems for coordinating home automation activity
US9628275B2 (en) 2015-09-04 2017-04-18 Blackberry Limited Communication device, method and system for establishing communications using the subscriber identity data of another communication device
US10296128B1 (en) 2015-09-04 2019-05-21 Google Llc Multi-state press and hold user interface
US10120531B2 (en) 2015-09-08 2018-11-06 Apple Inc. User interfaces for navigating and playing content
US10257198B2 (en) 2015-09-11 2019-04-09 Arris Enterprises Llc Password input method for devices with limited user interface
US10299017B2 (en) 2015-09-14 2019-05-21 Logitech Europe S.A. Video searching for filtered and tagged motion
US9313556B1 (en) 2015-09-14 2016-04-12 Logitech Europe S.A. User interface for video summaries
US9710639B1 (en) 2015-09-14 2017-07-18 Google Inc. Single input unlock for computing devices
KR102538348B1 (ko) 2015-09-17 2023-05-31 삼성전자 주식회사 전자 장치 및 전자 장치의 동작 제어 방법
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
KR20170034603A (ko) 2015-09-21 2017-03-29 삼성전자주식회사 알림 이벤트를 제어하는 시스템 및 그 방법
US10334002B2 (en) 2015-09-23 2019-06-25 Edoardo Rizzi Communication device and method
US9646471B2 (en) 2015-09-30 2017-05-09 Apple Inc. User interface using tactile output
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
DE112016004512T5 (de) 2015-09-30 2018-07-12 Apple Inc. Koordinierte steuerung der medienwiedergabe
KR102520402B1 (ko) 2015-10-27 2023-04-12 엘지전자 주식회사 와치 타입 이동 단말기 및 그 동작 방법
CN105263114B (zh) 2015-10-29 2018-10-02 广东美的制冷设备有限公司 智能家居控制的回家模式判断方法、控制设备及系统
JP6685695B2 (ja) 2015-10-30 2020-04-22 キヤノン株式会社 端末及び撮像装置
CN105338368B (zh) 2015-11-02 2019-03-15 腾讯科技（北京）有限公司 一种视频的直播流转点播数据的方法、装置及系统
KR102459127B1 (ko) 2015-11-11 2022-10-27 삼성전자 주식회사 전자 장치 및 정보 제공방법
CN105549947B (zh) 2015-12-21 2019-03-29 联想(北京)有限公司 一种音频设备的控制方法及电子设备
KR20170074552A (ko) 2015-12-22 2017-06-30 삼성전자주식회사 터치 디스플레이를 포함하는 스피커 장치
US10091017B2 (en) 2015-12-30 2018-10-02 Echostar Technologies International Corporation Personalized home automation control based on individualized profiling
US10353754B2 (en) 2015-12-31 2019-07-16 Entefy Inc. Application program interface analyzer for a universal interaction platform
CN105553796A (zh) 2015-12-31 2016-05-04 杭州智蚁科技有限公司 一种基于手机定位的智能家居控制方法及系统
US9939913B2 (en) 2016-01-04 2018-04-10 Sphero, Inc. Smart home control using modular sensing device
KR102501759B1 (ko) 2016-01-05 2023-02-20 삼성전자주식회사 오디오 출력 장치 및 오디오 출력 장치의 동작 방법
US10284980B1 (en) 2016-01-05 2019-05-07 Sonos, Inc. Intelligent group identification
US10303422B1 (en) 2016-01-05 2019-05-28 Sonos, Inc. Multiple-device setup
KR102383130B1 (ko) 2016-01-18 2022-04-08 삼성전자주식회사 기능을 제어하는 방법 및 이를 지원하는 전자 장치
US9898250B1 (en) 2016-02-12 2018-02-20 Amazon Technologies, Inc. Controlling distributed audio outputs to enable voice output
US9820039B2 (en) 2016-02-22 2017-11-14 Sonos, Inc. Default playback devices
KR20170100358A (ko) 2016-02-25 2017-09-04 삼성전자주식회사 전자 장치, 음향 출력 시스템 및 음향 출력 시스템을 위한 전자 장치 제어 방법
US10861305B2 (en) 2016-05-20 2020-12-08 Vivint, Inc. Drone enabled street watch
US10832665B2 (en) 2016-05-27 2020-11-10 Centurylink Intellectual Property Llc Internet of things (IoT) human interface apparatus, system, and method
US10121515B2 (en) 2016-06-06 2018-11-06 Avigilon Corporation Method, system and computer program product for interactively identifying same individuals or objects present in video recordings
CN106096349A (zh) 2016-06-07 2016-11-09 惠州Tcl移动通信有限公司 一种基于锁屏快速开启应用的方法及移动终端
US10310725B2 (en) 2016-06-12 2019-06-04 Apple Inc. Generating scenes based on accessory state
WO2017218192A1 (en) 2016-06-12 2017-12-21 Apple Inc. User interface for managing controllable external devices
DK179494B1 (en) 2016-06-12 2019-01-11 Apple Inc. USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
JP6934892B2 (ja) * 2016-06-12 2021-09-15 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 制御可能な外部デバイスを管理するためのユーザインタフェース
US10511456B2 (en) * 2016-06-12 2019-12-17 Apple Inc. Presenting accessory group controls
US10257474B2 (en) 2016-06-12 2019-04-09 Apple Inc. Network configurations for integrated accessory control
EP3255536B1 (en) 2016-06-12 2020-08-19 Apple Inc. Devices, methods, and graphical user interfaces for dynamically adjusting presentation of user interfaces
US11003147B2 (en) 2016-06-12 2021-05-11 Apple Inc. Automatically grouping accessories
DK201670616A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
US10327037B2 (en) 2016-07-05 2019-06-18 Pluto Inc. Methods and systems for generating and providing program guides and content
JP6909990B2 (ja) 2016-07-06 2021-07-28 パナソニックＩｐマネジメント株式会社 表示制御システム、表示制御方法、及び表示制御プログラム
US10263802B2 (en) 2016-07-12 2019-04-16 Google Llc Methods and devices for establishing connections with remote cameras
US20180018081A1 (en) 2016-07-12 2018-01-18 Google Inc. Methods and Systems for Presenting Smart Home Information in a User Interface
US10762446B2 (en) 2016-08-02 2020-09-01 Ebay Inc. Access control for a digital event
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10057698B2 (en) 2016-09-02 2018-08-21 Bose Corporation Multiple room communication system and method
US10042595B2 (en) 2016-09-06 2018-08-07 Apple Inc. Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US10521107B2 (en) 2016-09-24 2019-12-31 Apple Inc. Devices, methods, and graphical user interfaces for selecting and interacting with different device modes
KR20180038241A (ko) 2016-10-06 2018-04-16 한화테크윈 주식회사 영상 제공 장치 및 방법
JP6827758B2 (ja) 2016-10-12 2021-02-10 東芝映像ソリューション株式会社 移動式アシスト装置及び移動式アシスト方法
CN106656689B (zh) 2016-10-17 2018-10-30 珠海格力电器股份有限公司 一种基于终端的智能家居的控制方法和终端
KR102546763B1 (ko) 2016-10-17 2023-06-22 한화비전 주식회사 영상 제공 장치 및 방법
US10386999B2 (en) 2016-10-26 2019-08-20 Google Llc Timeline-video relationship presentation for alert events
US11238290B2 (en) 2016-10-26 2022-02-01 Google Llc Timeline-video relationship processing for alert events
CN106383645A (zh) 2016-10-31 2017-02-08 维沃移动通信有限公司 一种音乐播放的控制方法及移动终端
US10785328B2 (en) 2016-11-15 2020-09-22 International Business Machines Corporation Efficient collaborations in global enterprise environment
CN110089104B (zh) 2016-12-27 2022-02-11 韩华泰科株式会社 事件存储装置、事件搜索装置和事件警报装置
US10115396B2 (en) 2017-01-03 2018-10-30 Logitech Europe, S.A. Content streaming system
KR20180085931A (ko) 2017-01-20 2018-07-30 삼성전자주식회사 음성 입력 처리 방법 및 이를 지원하는 전자 장치
US10586433B2 (en) 2017-02-13 2020-03-10 Google Llc Automatic detection of zones of interest in a video
US20180232705A1 (en) 2017-02-15 2018-08-16 Microsoft Technology Licensing, Llc Meeting timeline management tool
KR102638911B1 (ko) 2017-02-24 2024-02-22 삼성전자 주식회사 복수의 IoT 장치들을 제어하기 위한 방법 및 장치
US10070093B1 (en) 2017-02-24 2018-09-04 Microsoft Technology Licensing, Llc Concurrent viewing of live content and recorded content
US10523625B1 (en) 2017-03-09 2019-12-31 Snap Inc. Restricted group content collection
KR102414122B1 (ko) 2017-04-19 2022-06-29 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 동작 방법
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10200969B2 (en) 2017-05-09 2019-02-05 Qualcomm Incorporated Methods and apparatus for selectively providing alerts to paired devices
US10928980B2 (en) 2017-05-12 2021-02-23 Apple Inc. User interfaces for playing and managing audio items
US20180329586A1 (en) 2017-05-15 2018-11-15 Apple Inc. Displaying a set of application views
CN109688442B (zh) * 2017-05-16 2021-06-04 苹果公司 用于家庭媒体控制的方法和界面
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
WO2018213004A1 (en) 2017-05-16 2018-11-22 Apple Inc. Credential delegation
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
CN111694484B (zh) * 2017-05-16 2023-07-07 苹果公司 用于在用户界面之间导航的设备、方法和图形用户界面
AU2018271099B2 (en) 2017-05-16 2019-02-14 Apple Inc. Far-field extension for digital assistant services
AU2018201254B1 (en) 2017-05-16 2018-07-26 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US11509944B2 (en) 2017-05-18 2022-11-22 Nbcuniversal Media, Llc System and method for presenting contextual clips for distributed content
US20200186378A1 (en) 2017-05-19 2020-06-11 Curtis Wayne Six Smart hub system
US10778463B2 (en) 2017-05-30 2020-09-15 Harman International Industries, Incorporated Displaying information for a smart-device-enabled environment
CN107219976B (zh) 2017-05-31 2020-07-28 Oppo广东移动通信有限公司 应用显示方法及相关产品
KR102313755B1 (ko) 2017-06-07 2021-10-18 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US10693918B2 (en) 2017-06-15 2020-06-23 Palo Alto Networks, Inc. Radio access technology based security in service provider networks
MX2019015201A (es) 2017-06-15 2020-08-13 Lutron Tech Co Llc Comunicación y control de los sistemas de control de carga.
CN107197441A (zh) 2017-06-20 2017-09-22 北京小米移动软件有限公司 智能家居设备的工作模式控制方法和装置
US10460671B2 (en) 2017-07-04 2019-10-29 Shenzhen China Star Optoelectronics Semiconductor Display Technology Co., Lltd Scanning driving circuit and display apparatus
US10771270B2 (en) 2017-07-20 2020-09-08 Slack Technologies, Inc. Channeling messaging communications in a selected group-based communication interface
US11134227B2 (en) 2017-09-20 2021-09-28 Google Llc Systems and methods of presenting appropriate actions for responding to a visitor to a smart home environment
CN107613235B (zh) 2017-09-25 2019-12-27 北京达佳互联信息技术有限公司 视频录制方法和装置
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US20190130185A1 (en) 2017-11-01 2019-05-02 International Business Machines Corporation Visualization of Tagging Relevance to Video
KR102490376B1 (ko) 2017-11-06 2023-01-25 삼성전자 주식회사 전자 장치 및 전자 장치 간 음성으로 기능을 실행하는 방법
US20190138951A1 (en) 2017-11-09 2019-05-09 Facebook, Inc. Systems and methods for generating multi-contributor content posts for events
CN110024412B (zh) 2017-11-10 2020-12-25 腾讯科技（深圳）有限公司 一种视频直播的方法、装置和系统
US10728624B2 (en) 2017-12-29 2020-07-28 Rovi Guides, Inc. Systems and methods for modifying fast-forward speeds based on the user's reaction time when detecting points of interest in content
US10298643B1 (en) 2018-01-17 2019-05-21 Hulu, LLC Live edge detection during video playback
KR20190102509A (ko) 2018-02-26 2019-09-04 삼성전자주식회사 음성 명령을 수행하는 방법 및 시스템
CN112313924A (zh) 2018-05-07 2021-02-02 谷歌有限责任公司 提供用于控制各种连接设备的复合图形助理界面
KR102280759B1 (ko) 2018-05-07 2021-07-23 애플 인크. 라이브 비디오 피드들 및 기록된 비디오를 보기 위한 사용자 인터페이스들
KR102607666B1 (ko) 2018-08-08 2023-11-29 삼성전자 주식회사 전자 장치에서 사용자 의도 확인을 위한 피드백 제공 방법 및 장치
US10924446B1 (en) 2018-10-08 2021-02-16 Facebook, Inc. Digital story reply container
US20200135191A1 (en) 2018-10-30 2020-04-30 Bby Solutions, Inc. Digital Voice Butler
US10885912B2 (en) 2018-11-13 2021-01-05 Motorola Solutions, Inc. Methods and systems for providing a corrected voice command
KR20200055983A (ko) 2018-11-14 2020-05-22 삼성전자주식회사 장치로부터 방사되는 전자기 신호를 측정하기 위한 방법 및 그 전자 장치
CA3131489A1 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US10708653B1 (en) 2019-03-19 2020-07-07 Bose Corporation Entry presence detection for audio-video products and devices
KR20200111853A (ko) 2019-03-19 2020-10-05 삼성전자주식회사 전자 장치 및 전자 장치의 음성 인식 제어 방법
US10958975B2 (en) 2019-03-27 2021-03-23 Rovi Guides, Inc. Method and apparatus for identifying a single user requesting conflicting content and resolving said conflict
CN114938360B (zh) 2019-04-12 2023-04-18 腾讯科技（深圳）有限公司 一种基于即时通讯应用的数据处理方法和装置
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US20200379716A1 (en) 2019-05-31 2020-12-03 Apple Inc. Audio media user interface
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
KR20220027295A (ko) 2019-05-31 2022-03-07 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
US20210064317A1 (en) 2019-08-30 2021-03-04 Sony Interactive Entertainment Inc. Operational mode-based settings for presenting notifications on a user display
US20210065134A1 (en) 2019-08-30 2021-03-04 Microsoft Technology Licensing, Llc Intelligent notification system
US11172328B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for device localization
US11152011B2 (en) 2019-11-27 2021-10-19 Summit Wireless Technologies, Inc. Voice detection with multi-channel interference cancellation
US10963145B1 (en) 2019-12-30 2021-03-30 Snap Inc. Prioritizing display of user icons associated with content
US11745585B2 (en) 2020-04-20 2023-09-05 Thinkware Corporation Vehicle infotainment apparatus using widget and operation method thereof
US20210349680A1 (en) 2020-05-11 2021-11-11 Apple Inc. User interface for audio message
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US20220365667A1 (en) 2021-05-15 2022-11-17 Apple Inc. User interfaces for managing accessories
US20220377431A1 (en) 2021-05-19 2022-11-24 Apple Inc. Methods and user interfaces for auditory features
US20230098814A1 (en) 2021-09-24 2023-03-30 Apple Inc. Media controls user interface

Also Published As

Publication number Publication date
AU2023203357A1 (en) 2023-06-29
CN112506346A (zh) 2021-03-16
US20200382332A1 (en) 2020-12-03
WO2020242563A1 (en) 2020-12-03
JP2021519987A (ja) 2021-08-12
US10779085B1 (en) 2020-09-15
AU2021261941A1 (en) 2021-12-02
KR20210087572A (ko) 2021-07-12
US11785387B2 (en) 2023-10-10
CN112965597A (zh) 2021-06-15
EP3769200A1 (en) 2021-01-27
AU2023203357B2 (en) 2024-05-30
AU2021261941B2 (en) 2023-03-30
JP6934577B2 (ja) 2021-09-15
KR20200138796A (ko) 2020-12-10
AU2021201403B2 (en) 2021-11-04
JP7019081B2 (ja) 2022-02-14
KR102353685B1 (ko) 2022-01-19
AU2021201403A1 (en) 2021-03-25
KR20220010589A (ko) 2022-01-25
JP7231767B2 (ja) 2023-03-01
JP2023062082A (ja) 2023-05-02
US20230403509A1 (en) 2023-12-14
CN112334862A (zh) 2021-02-05
JP2021101340A (ja) 2021-07-08
US10904029B2 (en) 2021-01-26
KR102275853B1 (ko) 2021-07-12
AU2020257092B2 (en) 2021-09-09
JP2022058822A (ja) 2022-04-12
EP3869312A1 (en) 2021-08-25
US20200413197A1 (en) 2020-12-31
AU2020257092A1 (en) 2020-12-17

Similar Documents

Publication Publication Date Title
CN112506346B (zh) 用于管理可控外部设备的用户界面
US20230041125A1 (en) User interface for audio message
CN112262560B (zh) 用于更新外部设备的网络连接设置的用户界面的方法、电子设备和非暂态计算机可读存储介质
CN116009741A (zh) 用于电子设备的时钟钟面
CN114020203A (zh) 用于内容流式传输的用户界面
US20230393714A1 (en) User interfaces for managing accessories
DK202070618A1 (en) Lighting user interfaces
KR102666493B1 (ko) 제어가능한 외부 디바이스들을 관리하기 위한 사용자 인터페이스들
KR20240073144A (ko) 제어가능한 외부 디바이스들을 관리하기 위한 사용자 인터페이스들
KR102486885B1 (ko) 오디오 메시지를 위한 사용자 인터페이스
US12003659B2 (en) Interfaces and devices for dynamically-available media playback
WO2023235557A1 (en) User interfaces for managing accessories
CN117957518A (zh) 媒体控件用户界面

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant