KR102656129B1 - 오디오 미디어 제어를 위한 사용자 인터페이스 - Google Patents

오디오 미디어 제어를 위한 사용자 인터페이스 Download PDF

Info

Publication number
KR102656129B1
KR102656129B1 KR1020237008877A KR20237008877A KR102656129B1 KR 102656129 B1 KR102656129 B1 KR 102656129B1 KR 1020237008877 A KR1020237008877 A KR 1020237008877A KR 20237008877 A KR20237008877 A KR 20237008877A KR 102656129 B1 KR102656129 B1 KR 102656129B1
Authority
KR
South Korea
Prior art keywords
user interface
interface object
media
input
selectable user
Prior art date
Application number
KR1020237008877A
Other languages
English (en)
Other versions
KR20230039775A (ko
Inventor
데이비드 챈스 그레이엄
테일러 지. 캐리건
패트릭 엘. 코프만
앨런 씨. 다이
크리스토퍼 피. 포스
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US16/584,490 external-priority patent/US11010121B2/en
Application filed by 애플 인크. filed Critical 애플 인크.
Priority to KR1020247011347A priority Critical patent/KR20240049648A/ko
Publication of KR20230039775A publication Critical patent/KR20230039775A/ko
Application granted granted Critical
Publication of KR102656129B1 publication Critical patent/KR102656129B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72442User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for playing music files
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location

Abstract

방법은 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 단계를 포함한다. 전자 디바이스는 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신한다. 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 제1 미디어 아이템을 재생하기 위한 프로세스가 개시되고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스가 디스플레이된다.

Description

오디오 미디어 제어를 위한 사용자 인터페이스{USER INTERFACES FOR AUDIO MEDIA CONTROL}
관련 출원에 대한 상호 참조
본 출원은 2019년 9월 26일자로 출원되고 발명의 명칭이 "USER INTERFACES FOR AUDIO MEDIA CONTROL"인 미국 특허 출원 제16/583,989호, 2019년 9월 26일자로 출원되고 발명의 명칭이 "USER INTERFACES FOR AUDIO MEDIA CONTROL"인 미국 특허 출원 제16/584,490호, 2020년 5월 30일자로 출원되고 발명의 명칭이 "USER INTERFACES FOR AUDIO MEDIA CONTROL"인 미국 가특허 출원 제63/032,603호, 및 2019년 5월 31일자로 출원되고, 발명의 명칭이 "USER INTERFACES FOR AUDIO MEDIA CONTROL"인 미국 가특허 출원 제62/855,852호에 대한 우선권을 주장하며, 이들의 각각의 내용은 그 전문이 본 명세서에 참조로서 편입된다.
기술분야
본 개시내용은 대체로 컴퓨터 사용자 인터페이스들에 관한 것으로, 더 상세하게는 오디오 재생을 제어하기 위한 기법들에 관한 것이다.
전자 디바이스들, 특히 스마트 디바이스들의 수는 계속해서 증가한다. 이들 디바이스들은 점점 더 서로 상호연결되고 있으며, 점점 더 많이 유능하고, 더 복잡한 태스크들을 수행하고 있다. 이와 같이, 이들 디바이스들은 점점 더 신중하게-설계된 사용자 인터페이스들을 가질 것으로 예상된다.
전자 디바이스들을 사용하여 오디오 재생을 제어하기 위한 일부 기법들은 대체적으로 번거롭고 비효율적이다. 예를 들어, 일부 기존의 기법들은 복잡하고 시간 소모적인 사용자 인터페이스를 사용하는데, 이는 다중 키 누르기들 또는 키스트로크(keystroke)들을 포함할 수 있다. 그러한 기법들은 필요한 것보다 더 많은 시간을 요구하여, 사용자 시간 및 디바이스 에너지를 낭비한다. 이러한 후자의 고려사항은 배터리-작동형 디바이스들에서 특히 중요하다.
따라서, 본 기법은 오디오 재생을 제어하기 위한 더 빠르고 더 효율적인 방법들 및 인터페이스들을 전자 디바이스들에 제공한다. 그러한 방법들 및 인터페이스들은, 선택적으로, 오디오 재생을 제어하기 위한 다른 방법들을 보완하거나 대체한다. 그러한 방법들 및 인터페이스들은 사용자에 대한 인지적 부담을 감소시키고 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리-작동형 컴퓨팅 디바이스들의 경우, 그러한 방법들 및 인터페이스들은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
예시적인 방법들이 본 명세서에 개시된다. 예시적인 방법은, 디스플레이 디바이스를 갖는 전자 디바이스에서, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 단계; 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 단계 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하는 단계; 및 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하는 단계; 및 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 단계를 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 비일시적 컴퓨터 판독가능 저장 매체가 본 명세서에 기술된다. 예시적인 비일시적 컴퓨터 판독가능 저장 매체는 디스플레이 디바이스를 갖는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하고; 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 명령어들을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 일시적 컴퓨터 판독가능 저장 매체가 본 명세서에 기술된다. 예시적인 일시적 컴퓨터 판독가능 저장 매체는 디스플레이 디바이스를 갖는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하고; 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 명령어들을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 전자 디바이스들이 본 명세서에 기술된다. 예시적인 전자 디바이스는, 디스플레이 디바이스; 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하고; 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 명령어들을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 전자 디바이스는, 디스플레이 디바이스; 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하기 위한 수단; 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하기 위한 수단 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하기 위한 수단; 및 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 수단을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 방법은, 디스플레이 디바이스를 갖는 전자 디바이스에서: 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 단계 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 단계 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하는 단계; 및 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 단계; 및 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 단계를 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 비일시적 컴퓨터 판독가능 저장 매체는 디스플레이 디바이스를 갖는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하고 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하고; 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 명령어들을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 일시적 컴퓨터 판독가능 저장 매체는 디스플레이 디바이스를 갖는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하고 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하고; 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 명령어들을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 전자 디바이스는, 디스플레이 디바이스; 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하고 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하고; 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 명령어들을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 전자 디바이스는, 디스플레이 디바이스; 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하기 위한 수단 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하기 위한 수단 - 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보를 포함함 -; 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력을 수신하기 위한 수단; 및 제1 입력을 수신하는 것에 응답하여: 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하고; 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력이라는 결정에 따라, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하기 위한 수단을 포함하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다.
예시적인 방법은, 디스플레이 디바이스를 갖는 전자 디바이스에서, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 단계; 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 단계; 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 제1 미디어 아이템의 재생을 개시하는 단계를 포함한다.
예시적인 비일시적 컴퓨터 판독가능 저장 매체는 디스플레이 디바이스를 갖는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고; 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 제1 미디어 아이템의 재생을 개시하기 위한 명령어들을 포함한다.
예시적인 일시적 컴퓨터 판독가능 저장 매체는 디스플레이 디바이스를 갖는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고; 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 제1 미디어 아이템의 재생을 개시하기 위한 명령어들을 포함한다.
예시적인 전자 디바이스는, 디스플레이 디바이스; 하나 이상의 프로세서들; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하며, 하나 이상의 프로그램들은, 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하고; 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하고; 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 제1 미디어 아이템의 재생을 개시하기 위한 명령어들을 포함한다.
예시적인 전자 디바이스는, 디스플레이 디바이스; 외부 디바이스에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하기 위한 수단; 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하기 위한 수단; 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하기 위한 수단; 및 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 제1 미디어 아이템의 재생을 개시하기 위한 수단을 포함한다.
예시적인 방법은, 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템에서: 디스플레이 생성 컴포넌트를 통해, 제1 복수의 선택가능한 사용자 인터페이스 객체들을 포함하는 제1 사용자 인터페이스를 디스플레이하는 단계를 포함하며, 제1 복수의 선택가능한 사용자 인터페이스 객체들은: 선택될 때, 컴퓨터 시스템으로 하여금 컴퓨터 시스템의 상태를 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제1 외부 액세서리 디바이스로 하여금 제1 기능을 수행하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 컴퓨터 시스템이 제1 사용 컨텍스트와 상이한 제2 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제2 외부 액세서리 디바이스로 하여금 제2 기능을 수행하게 하는, 제2 선택가능한 사용자 인터페이스 객체와 상이한, 제3 선택가능한 사용자 인터페이스 객체 - 제3 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라 사용자 인터페이스에 포함되지 않음 - 를 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 비일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 디스플레이 생성 컴포넌트를 통해, 제1 복수의 선택가능한 사용자 인터페이스 객체들을 포함하는 제1 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며, 제1 복수의 선택가능한 사용자 인터페이스 객체들은: 선택될 때, 컴퓨터 시스템으로 하여금 컴퓨터 시스템의 상태를 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제1 외부 액세서리 디바이스로 하여금 제1 기능을 수행하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 컴퓨터 시스템이 제1 사용 컨텍스트와 상이한 제2 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제2 외부 액세서리 디바이스로 하여금 제2 기능을 수행하게 하는, 제2 선택가능한 사용자 인터페이스 객체와 상이한, 제3 선택가능한 사용자 인터페이스 객체 - 제3 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라 사용자 인터페이스에 포함되지 않음 - 를 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 디스플레이 생성 컴포넌트를 통해, 제1 복수의 선택가능한 사용자 인터페이스 객체들을 포함하는 제1 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며, 제1 복수의 선택가능한 사용자 인터페이스 객체들은: 선택될 때, 컴퓨터 시스템으로 하여금 컴퓨터 시스템의 상태를 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제1 외부 액세서리 디바이스로 하여금 제1 기능을 수행하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 컴퓨터 시스템이 제1 사용 컨텍스트와 상이한 제2 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제2 외부 액세서리 디바이스로 하여금 제2 기능을 수행하게 하는, 제2 선택가능한 사용자 인터페이스 객체와 상이한, 제3 선택가능한 사용자 인터페이스 객체 - 제3 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라 사용자 인터페이스에 포함되지 않음 - 를 포함한다.
예시적인 컴퓨터 시스템은, 하나 이상의 프로세서들 - 컴퓨터 시스템은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신함 -; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 하나 이상의 프로그램들은, 디스플레이 생성 컴포넌트를 통해, 제1 복수의 선택가능한 사용자 인터페이스 객체들을 포함하는 제1 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며, 제1 복수의 선택가능한 사용자 인터페이스 객체들은: 선택될 때, 컴퓨터 시스템으로 하여금 컴퓨터 시스템의 상태를 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제1 외부 액세서리 디바이스로 하여금 제1 기능을 수행하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 컴퓨터 시스템이 제1 사용 컨텍스트와 상이한 제2 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제2 외부 액세서리 디바이스로 하여금 제2 기능을 수행하게 하는, 제2 선택가능한 사용자 인터페이스 객체와 상이한, 제3 선택가능한 사용자 인터페이스 객체 - 제3 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라 사용자 인터페이스에 포함되지 않음 - 를 포함한다.
예시적인 컴퓨터 시스템은, 디스플레이 생성 컴포넌트를 통해, 제1 복수의 선택가능한 사용자 인터페이스 객체들을 포함하는 제1 사용자 인터페이스를 디스플레이하기 위한 수단을 포함하며, 컴퓨터 시스템은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하고, 제1 복수의 선택가능한 사용자 인터페이스 객체들은: 선택될 때, 컴퓨터 시스템으로 하여금 컴퓨터 시스템의 상태를 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제1 외부 액세서리 디바이스로 하여금 제1 기능을 수행하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 컴퓨터 시스템이 제1 사용 컨텍스트와 상이한 제2 사용 컨텍스트에 있다는 결정에 따라, 선택될 때, 복수의 외부 액세서리 디바이스들 중 제2 외부 액세서리 디바이스로 하여금 제2 기능을 수행하게 하는, 제2 선택가능한 사용자 인터페이스 객체와 상이한, 제3 선택가능한 사용자 인터페이스 객체 - 제3 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라 사용자 인터페이스에 포함되지 않음 - 를 포함한다.
예시적인 방법은, 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템에서: 외부 미디어 재생 디바이스의 현재 미디어 재생 상태를 나타내는 데이터를 수신하는 단계; 및 데이터를 수신하는 것에 응답하여 그리고 외부 미디어 재생 디바이스 제어 기준들의 세트가 충족된다는 결정에 따라, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 디스플레이하는 단계를 포함하며, 사용자 인터페이스는: 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있음을 나타낸다는 결정에 따라, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작을 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 및 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라: 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템의 재생을 개시하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제2 미리결정된 미디어 아이템의 재생을 개시하게 하는 제3 선택가능한 사용자 인터페이스 객체를 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 비일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 외부 미디어 재생 디바이스의 현재 미디어 재생 상태를 나타내는 데이터를 수신하고; 데이터를 수신하는 것에 응답하여 그리고 외부 미디어 재생 디바이스 제어 기준들의 세트가 충족된다는 결정에 따라, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며, 사용자 인터페이스는: 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있음을 나타낸다는 결정에 따라, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작을 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 및 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라: 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템의 재생을 개시하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제2 미리결정된 미디어 아이템의 재생을 개시하게 하는 제3 선택가능한 사용자 인터페이스 객체를 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 외부 미디어 재생 디바이스의 현재 미디어 재생 상태를 나타내는 데이터를 수신하고; 데이터를 수신하는 것에 응답하여 그리고 외부 미디어 재생 디바이스 제어 기준들의 세트가 충족된다는 결정에 따라, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며, 사용자 인터페이스는: 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있음을 나타낸다는 결정에 따라, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작을 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 및 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라: 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템의 재생을 개시하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제2 미리결정된 미디어 아이템의 재생을 개시하게 하는 제3 선택가능한 사용자 인터페이스 객체를 포함한다.
예시적인 컴퓨터 시스템은, 하나 이상의 프로세서들 - 컴퓨터 시스템은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신함 -; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 하나 이상의 프로그램들은, 외부 미디어 재생 디바이스의 현재 미디어 재생 상태를 나타내는 데이터를 수신하고; 데이터를 수신하는 것에 응답하여 그리고 외부 미디어 재생 디바이스 제어 기준들의 세트가 충족된다는 결정에 따라, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며, 사용자 인터페이스는: 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있음을 나타낸다는 결정에 따라, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작을 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 및 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라: 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템의 재생을 개시하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제2 미리결정된 미디어 아이템의 재생을 개시하게 하는 제3 선택가능한 사용자 인터페이스 객체를 포함한다.
예시적인 컴퓨터 시스템은: 외부 미디어 재생 디바이스의 현재 미디어 재생 상태를 나타내는 데이터를 수신하기 위한 수단 - 컴퓨터 시스템은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신함 -; 및 데이터를 수신하는 것에 응답하여 그리고 외부 미디어 재생 디바이스 제어 기준들의 세트가 충족된다는 결정에 따라, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 디스플레이하기 위한 수단을 포함하며, 사용자 인터페이스는: 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있음을 나타낸다는 결정에 따라, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작을 수정하게 하는 제1 선택가능한 사용자 인터페이스 객체; 및 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라: 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템의 재생을 개시하게 하는 제2 선택가능한 사용자 인터페이스 객체; 및 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제2 미리결정된 미디어 아이템의 재생을 개시하게 하는 제3 선택가능한 사용자 인터페이스 객체를 포함한다.
예시적인 방법은, 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템에서, 디스플레이 생성 컴포넌트를 통해, 사용자 인터페이스를 디스플레이하는 단계 - 사용자 인터페이스는: 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체; 하나 이상의 미디어 재생 디바이스들의 제1 세트와 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체; 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함함 -; 사용자 인터페이스가 표시를 포함하는 동안, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 단계; 및 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 그리고 기준들의 세트가 충족된다는 결정에 따라: 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 또는 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 단계; 및 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지하는 단계를 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 비일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 디스플레이 생성 컴포넌트를 통해, 사용자 인터페이스를 디스플레이하고 - 사용자 인터페이스는: 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체; 하나 이상의 미디어 재생 디바이스들의 제1 세트와 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체; 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함함 -; 사용자 인터페이스가 표시를 포함하는 동안, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하고; 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 그리고 기준들의 세트가 충족된다는 결정에 따라: 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 또는 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하고; 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지하기 위한 명령어들을 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 디스플레이 생성 컴포넌트를 통해, 사용자 인터페이스를 디스플레이하고 - 사용자 인터페이스는: 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체; 하나 이상의 미디어 재생 디바이스들의 제1 세트와 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체; 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함함 -; 사용자 인터페이스가 표시를 포함하는 동안, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하고; 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 그리고 기준들의 세트가 충족된다는 결정에 따라: 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 또는 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하고; 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지하기 위한 명령어들을 포함한다.
예시적인 컴퓨터 시스템은, 하나 이상의 프로세서들 - 컴퓨터 시스템은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신함 -; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 하나 이상의 프로그램들은, 디스플레이 생성 컴포넌트를 통해, 사용자 인터페이스를 디스플레이하고 - 사용자 인터페이스는: 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체; 하나 이상의 미디어 재생 디바이스들의 제1 세트와 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체; 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함함 -; 사용자 인터페이스가 표시를 포함하는 동안, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하고; 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 그리고 기준들의 세트가 충족된다는 결정에 따라: 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 또는 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하고; 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지하기 위한 명령어들을 포함한다.
예시적인 컴퓨터 시스템은: 디스플레이 생성 컴포넌트를 통해, 사용자 인터페이스를 디스플레이하기 위한 수단 - 사용자 인터페이스는: 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체; 하나 이상의 미디어 재생 디바이스들의 제1 세트와 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체; 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함함 -; 사용자 인터페이스가 표시를 포함하는 동안, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하기 위한 수단; 및 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 그리고 기준들의 세트가 충족된다는 결정에 따라: 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 또는 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하고; 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지하기 위한 수단을 포함한다.
예시적인 방법은, 컴퓨터 시스템에서: 컴퓨터 시스템이 하나 이상의 디바이스들의 제1 세트에 미디어를 제공하고 있는 동안, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 개시하는 단계 - 제1 프로세스를 개시하는 단계는, 하나 이상의 디바이스들의 제2 세트와 통신하는 제1 외부 디바이스로부터, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제1 요청을 나타내는 제1 데이터를 수신하는 단계; 및 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제2 요청을 나타내는 제2 데이터를 수신하는 단계를 포함하며, 제2 데이터는 하나 이상의 디바이스들의 제2 세트와 통신하는 제2 외부 디바이스로부터 수신되거나, 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스로부터 수신됨 -; 및 제1 데이터 및 제2 데이터를 수신한 후, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하는 단계를 포함한다.
하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 비일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 컴퓨터 시스템이 하나 이상의 디바이스들의 제1 세트에 미디어를 제공하고 있는 동안, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 개시하고 - 제1 프로세스를 개시하는 것은, 하나 이상의 디바이스들의 제2 세트와 통신하는 제1 외부 디바이스로부터, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제1 요청을 나타내는 제1 데이터를 수신하는 것; 및 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제2 요청을 나타내는 제2 데이터를 수신하는 것을 포함하며, 제2 데이터는 하나 이상의 디바이스들의 제2 세트와 통신하는 제2 외부 디바이스로부터 수신되거나, 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스로부터 수신됨 -; 제1 데이터 및 제2 데이터를 수신한 후, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 명령어들을 포함한다.
컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 컴퓨터 시스템이 하나 이상의 디바이스들의 제1 세트에 미디어를 제공하고 있는 동안, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 개시하고 - 제1 프로세스를 개시하는 것은, 하나 이상의 디바이스들의 제2 세트와 통신하는 제1 외부 디바이스로부터, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제1 요청을 나타내는 제1 데이터를 수신하는 것; 및 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제2 요청을 나타내는 제2 데이터를 수신하는 것을 포함하며, 제2 데이터는 하나 이상의 디바이스들의 제2 세트와 통신하는 제2 외부 디바이스로부터 수신되거나, 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스로부터 수신됨 -; 제1 데이터 및 제2 데이터를 수신한 후, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 명령어들을 포함한다.
예시적인 컴퓨터 시스템은 하나 이상의 프로세서들 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 하나 이상의 프로그램들은, 컴퓨터 시스템이 하나 이상의 디바이스들의 제1 세트에 미디어를 제공하고 있는 동안, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 개시하고 - 제1 프로세스를 개시하는 것은, 하나 이상의 디바이스들의 제2 세트와 통신하는 제1 외부 디바이스로부터, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제1 요청을 나타내는 제1 데이터를 수신하는 것; 및 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제2 요청을 나타내는 제2 데이터를 수신하는 것을 포함하며, 제2 데이터는 하나 이상의 디바이스들의 제2 세트와 통신하는 제2 외부 디바이스로부터 수신되거나, 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스로부터 수신됨 -; 제1 데이터 및 제2 데이터를 수신한 후, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 명령어들을 포함한다.
예시적인 컴퓨터 시스템은: 컴퓨터 시스템이 하나 이상의 디바이스들의 제1 세트에 미디어를 제공하고 있는 동안, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 개시하기 위한 수단 - 제1 프로세스를 개시하기 위한 수단은, 하나 이상의 디바이스들의 제2 세트와 통신하는 제1 외부 디바이스로부터, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제1 요청을 나타내는 제1 데이터를 수신하는 수단; 및 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제2 요청을 나타내는 제2 데이터를 수신하기 위한 수단을 포함하며, 제2 데이터는 하나 이상의 디바이스들의 제2 세트와 통신하는 제2 외부 디바이스로부터 수신되거나, 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스로부터 수신됨 -; 및 제1 데이터 및 제2 데이터를 수신한 후, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 수단을 포함한다.
예시적인 방법은, 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템에서: 제1 사용자로부터, 동작을 수행하라는 제1 요청을 수신하는 단계; 제1 요청에 응답하여, 제1 동작의 수행을 개시하는 단계 - 제1 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제1 동작의 수행을 개시한 후, 하나 이상의 입력 디바이스들을 통해, 동작을 수행하라는 제2 요청을 수신하는 단계; 및 제2 요청을 수신하는 것에 응답하여: 제2 요청이 제1 사용자에 의해 이루어졌다는 결정에 따라, 수행을 개시하는 단계 - 제2 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 및 제2 요청이 제1 사용자와 상이한 제2 사용자에 의해 이루어졌다는 결정에 따라, 제1 동작과는 상이한 제3 동작의 수행을 개시하는 단계를 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 비일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 제1 사용자로부터, 동작을 수행하라는 제1 요청을 수신하고; 제1 요청에 응답하여, 제1 동작의 수행을 개시하고 - 제1 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제1 동작의 수행을 개시한 후, 하나 이상의 입력 디바이스들을 통해, 동작을 수행하라는 제2 요청을 수신하고; 제2 요청을 수신하는 것에 응답하여: 제2 요청이 제1 사용자에 의해 이루어졌다는 결정에 따라, 수행을 개시하고 - 제2 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제2 요청이 제1 사용자와 상이한 제2 사용자에 의해 이루어졌다는 결정에 따라, 제1 동작과는 상이한 제3 동작의 수행을 개시하기 위한 명령어들을 포함한다.
디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 예시적인 일시적 컴퓨터 판독가능 저장 매체로서, 하나 이상의 프로그램들은, 제1 사용자로부터, 동작을 수행하라는 제1 요청을 수신하고; 제1 요청에 응답하여, 제1 동작의 수행을 개시하고 - 제1 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제1 동작의 수행을 개시한 후, 하나 이상의 입력 디바이스들을 통해, 동작을 수행하라는 제2 요청을 수신하고; 제2 요청을 수신하는 것에 응답하여: 제2 요청이 제1 사용자에 의해 이루어졌다는 결정에 따라, 수행을 개시하고 - 제2 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제2 요청이 제1 사용자와 상이한 제2 사용자에 의해 이루어졌다는 결정에 따라, 제1 동작과는 상이한 제3 동작의 수행을 개시하기 위한 명령어들을 포함한다.
예시적인 컴퓨터 시스템은, 하나 이상의 프로세서들 - 컴퓨터 시스템은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신함 -; 및 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 하나 이상의 프로그램들은, 제1 사용자로부터, 동작을 수행하라는 제1 요청을 수신하고; 제1 요청에 응답하여, 제1 동작의 수행을 개시하고 - 제1 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제1 동작의 수행을 개시한 후, 하나 이상의 입력 디바이스들을 통해, 동작을 수행하라는 제2 요청을 수신하고; 제2 요청을 수신하는 것에 응답하여: 제2 요청이 제1 사용자에 의해 이루어졌다는 결정에 따라, 수행을 개시하고 - 제2 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제2 요청이 제1 사용자와 상이한 제2 사용자에 의해 이루어졌다는 결정에 따라, 제1 동작과는 상이한 제3 동작의 수행을 개시하기 위한 명령어들을 포함한다.
예시적인 컴퓨터 시스템은: 제1 사용자로부터, 동작을 수행하라는 제1 요청을 수신하기 위한 수단; 제1 요청에 응답하여, 제1 동작의 수행을 개시하기 위한 수단 - 제1 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제1 동작의 수행을 개시한 후, 하나 이상의 입력 디바이스들을 통해, 동작을 수행하라는 제2 요청을 수신하기 위한 수단; 및 제2 요청을 수신하는 것에 응답하여: 제2 요청이 제1 사용자에 의해 이루어졌다는 결정에 따라, 수행을 개시하고 - 제2 동작은 적어도 제1 수행 파라미터에 기초하여 수행됨 -; 제2 요청이 제1 사용자와 상이한 제2 사용자에 의해 이루어졌다는 결정에 따라, 제1 동작과는 상이한 제3 동작의 수행을 개시하기 위한 수단을 포함한다.
이러한 기능들을 수행하기 위한 실행가능 명령어들은, 선택적으로, 하나 이상의 프로세서들에 의한 실행을 위해 구성된 비일시적 컴퓨터 판독가능 저장 매체 또는 다른 컴퓨터 프로그램 제품에 포함된다. 이러한 기능들을 수행하기 위한 실행가능 명령어들은, 선택적으로, 하나 이상의 프로세서들에 의한 실행을 위해 구성된 일시적 컴퓨터 판독가능 저장 매체 또는 다른 컴퓨터 프로그램 제품에 포함된다.
따라서, 디바이스들에는 오디오 재생을 제어하기 위한 더 빠르고 더 효율적인 방법들 및 인터페이스들이 제공되며, 그에 의해, 그러한 디바이스들의 유효성, 효율성, 및 사용자 만족도를 증가시킨다. 그러한 방법들 및 인터페이스들은 오디오 재생을 제어하기 위한 다른 방법들을 보완하거나 대체할 수 있다.
다양하게 기술된 실시예들의 더 양호한 이해를 위해, 유사한 도면 부호들이 도면 전체에 걸쳐서 대응 부분들을 나타내는 하기의 도면들과 관련하여 하기의 발명을 실시하기 위한 구체적인 내용이 참조되어야 한다.
도 1a는 일부 실시예들에 따른, 터치 감응형 디스플레이를 갖는 휴대용 다기능 디바이스를 예시하는 블록도이다.
도 1b는 일부 실시예들에 따른, 이벤트 처리를 위한 예시적인 컴포넌트들을 예시하는 블록도이다.
도 2는 일부 실시예들에 따른, 터치 스크린을 갖는 휴대용 다기능 디바이스를 예시한다.
도 3은 일부 실시예들에 따른, 디스플레이 및 터치 감응형 표면을 갖는 예시적인 다기능 디바이스의 블록도이다.
도 4a는 일부 실시예들에 따른, 휴대용 다기능 디바이스 상의 애플리케이션들의 메뉴에 대한 예시적인 사용자 인터페이스를 예시한다.
도 4b는 일부 실시예들에 따른, 디스플레이와는 별개인 터치 감응형 표면을 갖는 다기능 디바이스에 대한 예시적인 사용자 인터페이스를 예시한다.
도 5a는 일부 실시예들에 따른 개인용 전자 디바이스를 예시한다.
도 5b는 일부 실시예들에 따른 개인용 전자 디바이스를 예시하는 블록도이다.
도 5c 및 도 5d는 일부 실시예들에 따른, 터치 감응형 디스플레이 및 세기 센서들을 갖는 개인용 전자 디바이스의 예시적인 컴포넌트들을 예시한다.
도 5e 내지 도 5h는 일부 실시예들에 따른, 개인용 전자 디바이스의 예시적인 컴포넌트들 및 사용자 인터페이스들을 예시한다.
도 5i는 일부 실시예들에 따른 전자 디바이스를 예시한다.
도 5j는 일부 실시예들에 따른 전자 디바이스를 예시하는 블록도이다.
도 6a 내지 도 6p는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 7은 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 8은 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 9a 내지 도 9d는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 10은 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 11a 내지 도 11d는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 12는 일부 실시예들에 따른 디바이스들의 예시적인 세트를 예시하는 다이어그램이다.
도 13a 내지 도 13n은 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 14는 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 15a 내지 도 15l은 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 16은 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 17a 내지 도 17p는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 18은 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 19a 내지 도 19i는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 20은 일부 실시예들에 따른 예시적인 방법을 예시한다.
도 21a 내지 도 21f는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 22a 내지 도 22f는 일부 실시예들에 따른 예시적인 사용자 인터페이스들을 예시한다.
도 23은 일부 실시예들에 따른 예시적인 방법을 예시한다.
하기의 설명은 예시적인 방법들, 파라미터들 등을 기재하고 있다. 그러나, 이러한 설명이 본 개시내용의 범주에 대한 제한으로서 의도되지 않고 그 대신에 예시적인 실시예들의 설명으로서 제공된다는 것을 인식해야 한다.
오디오 재생을 제어하기 위한 효율적인 방법들 및 인터페이스들을 제공하는 전자 디바이스들에 대한 필요성이 존재한다. 이하에서 기술되는 기법들은 사용자가 2개의 디바이스들을 서로 근접하게 가져옴으로써 하나의 디바이스로부터 다른 디바이스로의 오디오의 재생을 이송할 수 있게 한다. 예를 들어, 전화에서 음악을 재생하는 동안, 사용자는 무선 스피커에 가깝게 전화를 배치하여 음악의 재생을 무선 스피커로 이송할 수 있으며, 이는 전화보다 더 양호한 사운드 품질을 제공할 수 있다. 전화가 스피커에 근접하게 될 때, 음악이 스피커에서 재생될 수 있음을 사용자에게 통지하기 위해 통지가 전화 상에(예컨대, 전화의 디스플레이의 상부에서) 디스플레이된다. 통지는 스피커 상에서 음악의 재생을 개시하기 위해 탭핑될 수 있다. 통지를 풀다운하는 스와이프 제스처는, 재생을 개시하는 대신에, 스피커 상의 재생을 위해 선택될 수 있는 최근 및/또는 스케줄링된 미디어 아이템들의 큐와 같은 추가적인 정보를 갖는 인터페이스를 제공한다. 스피커 상에서 재생되는 오디오 미디어는 유사한 방식으로 전화로 이송될 수 있다. 오디오가 스피커 상에서 재생되고 있는 동안, 전화를 스피커에 근접하게 가져오는 것은, 전화로 하여금 위에서 논의된 통지와 유사한 통지를 디스플레이하게 하는데, 다만 통지를 탭핑하는 것은 스피커로부터 전화로 오디오를 이송하고, 통지를 스와이핑하는 것은 스피커 상에서 재생되는 미디어에 대한 추가 정보를 디스플레이한다. 일부 실시예들에서, 통지가 디스플레이되는 동안, 전화의 디스플레이 상의 터치 입력 없이 재생을 개시하기 위해 전화는 스피커에 훨씬 더 가깝게 근접하게 될 수 있다. 그러한 기법들은 오디오 미디어의 재생을 개시하는 사용자에 대한 인지적 부담을 감소시켜서, 그에 의해 생산성을 향상시킬 수 있다. 추가로, 그러한 기법들은, 그렇지 않으면 중복적인 사용자 입력들로 낭비되는 프로세서 및 배터리 전력을 감소시킬 수 있다.
이하에서, 도 1a, 도 1b, 도 2, 도 3, 도 4a, 도 4b, 및 도 5a 내지 도 5j는 이벤트 통지들을 관리하기 위한 기법들을 수행하기 위한 예시적인 디바이스들의 설명을 제공한다. 도 6a 내지 도 6p 및 도 11a 내지 도 11d는 오디오 재생을 제어하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 7 및 도 8은 일부 실시예들에 따른, 오디오 재생을 제어하기 위한 방법들을 예시하는 흐름도들이다. 도 6a 내지 도 6p 및 도 11a 내지 도 11d의 사용자 인터페이스들은 도 7 및 도 8에 도시된 프로세스들을 포함하여, 아래에 기술되는 프로세스들을 예시하기 위해 사용된다. 도 9a 내지 도 9d 및 도 11a 내지 도 11d는 오디오 재생을 제어하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 10은 일부 실시예들에 따른, 오디오 재생을 제어하는 방법들을 예시하는 흐름도이다. 도 9a 내지 도 9d 및 도 11a 내지 도 11d의 사용자 인터페이스들은 도 10에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 12는 일부 실시예들에 따른 디바이스들의 예시적인 세트를 예시하는 다이어그램이다. 도 12의 다이어그램은, 도 14, 도 18, 도 20 및 도 23에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 13a 내지 도 13n은 일부 실시예들에 따른, 제어부들을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 14는 일부 실시예들에 따른, 제어부들을 관리하기 위한 방법들을 예시하는 흐름도이다. 도 13a 내지 도 13n의 사용자 인터페이스들은 도 14에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 15a 내지 도 15l은 일부 실시예들에 따른, 오디오 재생을 제어하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 16은 일부 실시예들에 따른, 오디오 재생을 제어하기 위한 방법들을 예시하는 흐름도이다. 도 15a 내지 도 15l의 사용자 인터페이스들은 도 16에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 17a 내지 도 17p는 일부 실시예들에 따른, 디바이스들의 그룹 상에서 오디오 재생을 제어하기 위한 제어부들을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 18은 디바이스들의 그룹 상에서 오디오 재생을 제어하기 위한 제어부들을 관리하기 위한 방법들을 예시하는 흐름도이다. 도 17a 내지 도 17p의 사용자 인터페이스들은 도 18에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 19a 내지 도 19i는 일부 실시예들에 따른, 미디어를 공유하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 20은 미디어를 공유하기 위한 방법들을 예시하는 흐름도이다. 도 19a 내지 도 19i의 사용자 인터페이스들은 도 20에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 21a 내지 도 21f는 일부 실시예들에 따른, 음성 입력을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 22a 내지 도 22f는 일부 실시예들에 따른, 음성 입력을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 23은 일부 실시예들에 따른, 음성 입력을 관리하기 위한 방법들을 예시하는 흐름도이다. 도 21a 내지 도 21f 및 도 22a 내지 도 22f의 사용자 인터페이스들은 도 23에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
이하의 설명이 다양한 요소들을 기술하기 위해 제1, 제2 등과 같은 용어들을 사용하지만, 이 요소들이 그 용어들에 의해 제한되어서는 안된다. 이러한 용어들은 하나의 요소를 다른 요소와 구별하는 데에만 사용된다. 예를 들어, 기술된 다양한 실시예들의 범주로부터 벗어남이 없이, 제1 터치가 제2 터치로 지칭될 수 있고, 이와 유사하게, 제2 터치가 제1 터치로 지칭될 수 있다. 제1 터치 및 제2 터치는 양측 모두가 터치이지만, 그들이 동일한 터치인 것은 아니다.
본 명세서에서 다양하게 기술된 실시예들의 설명에 사용되는 용어는 특정 실시예들을 기술하는 목적만을 위한 것이고, 제한하려는 의도는 아니다. 다양한 기술된 실시예들의 설명 및 첨부된 청구범위에 사용되는 바와 같이, 단수의 형태("a", "an", 및 "the")는 문맥상 명백히 달리 나타내지 않는다면 복수의 형태도 마찬가지로 포함하려는 것으로 의도된다. 또한, 본 명세서에서 사용되는 바와 같은 용어 "및/또는"은 열거되는 연관된 항목들 중 하나 이상의 항목들의 임의의 그리고 모든 가능한 조합들을 나타내고 그들을 포괄하는 것임이 이해될 것이다. 용어들 "포함한다(include)", "포함하는(including)", "포함한다(comprise)", 및/또는 "포함하는(comprising)"은, 본 명세서에서 사용될 때, 언급된 특징들, 정수들, 단계들, 동작들, 요소들, 및/또는 컴포넌트들의 존재를 특정하지만, 하나 이상의 다른 특징들, 정수들, 단계들, 동작들, 요소들, 컴포넌트들, 및/또는 이들의 그룹들의 존재 또는 추가를 배제하지 않음이 추가로 이해될 것이다.
용어 "~할 경우(if)"는, 선택적으로, 문맥에 따라 "~할 때(when)" 또는 "~할 시(upon)" 또는 "결정하는 것에 응답하여(in response to determining)" 또는 "검출하는 것에 응답하여(in response to detecting)"를 의미하는 것으로 해석된다. 유사하게, 구문 "결정된 경우" 또는 "[진술된 상태 또는 이벤트가] 검출된 경우"는, 선택적으로, 문맥에 따라 "결정 시" 또는 "결정하는 것에 응답하여" 또는 "[진술된 상태 또는 이벤트] 검출 시" 또는 "[진술된 상태 또는 이벤트를] 검출하는 것에 응답하여"를 의미하는 것으로 해석된다.
전자 디바이스들, 그러한 디바이스들에 대한 사용자 인터페이스들, 및 그러한 디바이스들을 사용하기 위한 연관된 프로세스들의 실시예들이 기술된다. 일부 실시예들에서, 디바이스는 PDA 및/또는 음악 재생기 기능들과 같은 다른 기능들을 또한 포함하는 휴대용 통신 디바이스, 예컨대 이동 전화기이다. 휴대용 다기능 디바이스들의 예시적인 실시예들은 미국 캘리포니아주 쿠퍼티노 소재의 애플 인크.(Apple Inc.)로부터의 아이폰(iPhone)®, 아이팟 터치(iPod Touch)®, 및 아이패드(iPad)® 디바이스들을 제한 없이 포함한다. 터치 감응형 표면들(예컨대, 터치 스크린 디스플레이들 및/또는 터치패드들)을 갖는 랩톱 또는 태블릿 컴퓨터들과 같은 다른 휴대용 전자 디바이스들이 선택적으로 사용된다. 일부 실시예들에서, 디바이스는 휴대용 통신 디바이스가 아니라 터치 감응형 표면(예컨대, 터치 스크린 디스플레이 및/또는 터치패드)을 갖는 데스크톱 컴퓨터임이 또한 이해되어야 한다. 일부 실시예들에서, 전자 디바이스는 디스플레이 생성 컴포넌트와 (예컨대, 무선 통신을 통해, 유선 통신을 통해) 통신하는 컴퓨터 시스템이다. 디스플레이 생성 컴포넌트는 CRT 디스플레이를 통한 디스플레이, LED 디스플레이를 통한 디스플레이, 또는 이미지 투영을 통한 디스플레이와 같은 시각적 출력을 제공하도록 구성된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 별개이다. 본 명세서에 사용되는 바와 같이, 콘텐츠를 "디스플레이하는" 것은 콘텐츠를 시각적으로 생성하기 위해 유선 또는 무선 연결을 통해, 데이터(예컨대, 이미지 데이터 또는 비디오 데이터)를 통합된 또는 외부 디스플레이 생성 컴포넌트로 송신함으로써 콘텐츠(예컨대, 디스플레이 제어기(156)에 의해 렌더링되거나 디코딩된 비디오 데이터)를 디스플레이하도록 야기하는 것을 포함한다.
이하의 논의에서, 디스플레이 및 터치 감응형 표면을 포함하는 전자 디바이스가 기술된다. 그러나, 전자 디바이스가 선택적으로 물리적 키보드, 마우스 및/또는 조이스틱과 같은 하나 이상의 다른 물리적 사용자 인터페이스 디바이스들을 포함한다는 것이 이해되어야 한다.
디바이스는 전형적으로 다음 중 하나 이상과 같은 다양한 애플리케이션들을 지원한다: 드로잉 애플리케이션, 프레젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 제작 애플리케이션, 디스크 저작 애플리케이션, 스프레드시트 애플리케이션, 게임 애플리케이션, 전화 애플리케이션, 화상 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 운동 지원 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 음악 재생기 애플리케이션, 및/또는 디지털 비디오 재생기 애플리케이션.
디바이스 상에서 실행되는 다양한 애플리케이션들은, 선택적으로, 터치 감응형 표면과 같은 적어도 하나의 보편적인 물리적 사용자 인터페이스 디바이스를 사용한다. 터치 감응형 표면의 하나 이상의 기능들뿐만 아니라 디바이스 상에 디스플레이되는 대응하는 정보는, 선택적으로, 하나의 애플리케이션으로부터 다음 애플리케이션으로 그리고/또는 각각의 애플리케이션 내에서 조정되고/되거나 변경된다. 이러한 방식으로, 디바이스의 (터치 감응형 표면과 같은) 보편적인 물리적 아키텍처는, 선택적으로, 사용자에게 직관적이고 투명한 사용자 인터페이스들을 이용하여 다양한 애플리케이션들을 지원한다.
이제, 터치 감응형 디스플레이들을 갖는 휴대용 디바이스들의 실시예들에 주목한다. 도 1a는 일부 실시예들에 따른, 터치 감응형 디스플레이 시스템(112)을 갖는 휴대용 다기능 디바이스(100)를 예시하는 블록도이다. 터치 감응형 디스플레이(112)는 때때로 편의상 "터치 스크린"이라고 지칭되고, 때때로 "터치 감응형 디스플레이 시스템"으로 알려져 있거나 또는 그렇게 지칭된다. 디바이스(100)는 메모리(102)(선택적으로, 하나 이상의 컴퓨터 판독가능 저장 매체들을 포함함), 메모리 제어기(122), 하나 이상의 프로세싱 유닛(CPU)들(120), 주변기기 인터페이스(118), RF 회로부(108), 오디오 회로부(110), 스피커(111), 마이크로폰(113), 입/출력(I/O) 서브시스템(106), 다른 입력 제어 디바이스들(116), 및 외부 포트(124)를 포함한다. 디바이스(100)는 선택적으로 하나 이상의 광 센서(optical sensor)들(164)을 포함한다. 디바이스(100)는 선택적으로, 디바이스(100)(예컨대, 디바이스(100)의 터치 감응형 디스플레이 시스템(112)과 같은 터치 감응형 표면) 상에서의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서들(165)을 포함한다. 디바이스(100)는 선택적으로, 디바이스(100) 상의 촉각적 출력들을 생성하기 위한 (예를 들어, 디바이스(100)의 터치 감응형 디스플레이 시스템(112) 또는 디바이스(300)의 터치패드(355)와 같은 터치 감응형 표면 상의 촉각적 출력들을 생성하기 위한) 하나 이상의 촉각적 출력 생성기들(167)을 포함한다. 이들 컴포넌트는 선택적으로 하나 이상의 통신 버스들 또는 신호 라인들(103)을 통해 통신한다.
명세서 및 청구범위에서 사용되는 바와 같이, 터치 감응형 표면 상에서의 접촉의 "세기"라는 용어는 터치 감응형 표면 상에서의 접촉(예컨대, 손가락 접촉)의 힘 또는 압력(단위 면적 당 힘), 또는 터치 감응형 표면 상에서의 접촉의 힘 또는 압력에 대한 대체물(대용물(proxy))을 지칭한다. 접촉의 세기는, 적어도 4개의 구별되는 값들을 포함하고 더 전형적으로는 수백 개(예컨대, 적어도 256개)의 구별되는 값들을 포함하는 일정 범위의 값들을 갖는다. 접촉의 세기는 다양한 접근법들, 및 다양한 센서들 또는 센서들의 조합들을 이용하여 선택적으로 결정(또는 측정)된다. 예를 들어, 터치 감응형 표면 아래의 또는 그에 인접한 하나 이상의 힘 센서들은 터치 감응형 표면 상의 다양한 지점들에서 힘을 측정하는 데 선택적으로 사용된다. 일부 구현예들에서는, 다수의 힘 센서들로부터의 힘 측정치들이 접촉의 추정되는 힘을 결정하기 위해 조합(예컨대, 가중 평균)된다. 유사하게, 스타일러스의 압력 감응형 팁(tip)이 터치 감응형 표면 상의 스타일러스의 압력을 결정하는 데 선택적으로 사용된다. 대안적으로, 터치 감응형 표면 상에서 검출된 접촉 면적의 크기 및/또는 그에 대한 변화들, 접촉 부근의 터치 감응형 표면의 정전용량 및/또는 그에 대한 변화들, 및/또는 접촉 부근의 터치 감응형 표면의 저항 및/또는 그에 대한 변화들은 터치 감응형 표면 상의 접촉의 힘 또는 압력에 대한 대체물로서 선택적으로 사용된다. 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 세기 임계치가 초과되었는지의 여부를 결정하는 데 직접 이용된다(예컨대, 세기 임계치는 대체 측정치들에 대응하는 단위로 기술된다). 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 추정된 힘 또는 압력으로 변환되고, 추정된 힘 또는 압력은 세기 임계치가 초과되었는지의 여부를 결정하기 위해 이용된다(예를 들어, 세기 임계치는 압력의 단위로 측정된 압력 임계치이다). 사용자 입력의 속성으로서 접촉의 세기를 사용하는 것은, 그렇지 않았으면 어포던스들을 (예를 들어, 터치 감응형 디스플레이 상에) 디스플레이하고/하거나 (예를 들어, 터치 감응형 디스플레이, 터치 감응형 표면, 또는 노브(knob) 또는 버튼과 같은 물리적/기계적 제어부를 통해) 사용자 입력을 수신하기 위하여 한정된 실면적을 갖는 감소된 크기의 디바이스 상에서 사용자에 의해 액세스 가능하지 않을 수 있는 부가적인 디바이스 기능에의 사용자 액세스를 가능하게 한다.
명세서 및 청구범위에 사용되는 바와 같이, "촉각적 출력"이라는 용어는 디바이스의 이전 위치에 대한 디바이스의 물리적 변위, 디바이스의 다른 컴포넌트(예컨대, 하우징)에 대한 디바이스의 컴포넌트(예컨대, 터치 감응형 표면)의 물리적 변위, 또는 사용자의 촉각을 이용하여 사용자에 의해 검출될 디바이스의 질량 중심에 대한 컴포넌트의 변위를 지칭한다. 예컨대, 디바이스 또는 디바이스의 컴포넌트가 터치에 민감한 사용자의 표면(예컨대, 사용자의 손의 손가락, 손바닥, 또는 다른 부위)과 접촉하는 상황들에서, 물리적 변위에 의해 생성된 촉각적 출력은 사용자에 의해 디바이스 또는 디바이스의 컴포넌트의 물리적 특성들의 인지된 변화에 대응하는 촉감(tactile sensation)으로서 해석될 것이다. 예컨대, 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 또는 트랙패드)의 이동은, 선택적으로, 사용자에 의해 물리적 액추에이터 버튼의 "다운 클릭" 또는 "업 클릭"으로서 해석된다. 일부 경우들에서, 사용자는 사용자의 이동들에 의해 물리적으로 눌리는(예컨대, 변위되는) 터치 감응형 표면과 연관된 물리적 액추에이터 버튼의 이동이 없는 경우에도 "다운 클릭" 또는 "업 클릭"과 같은 촉감을 느낄 것이다. 다른 예로서, 터치 감응형 표면의 이동은, 터치 감응형 표면의 평탄성의 변화가 없는 경우에도, 선택적으로, 사용자에 의해 터치 감응형 표면의 "거칠기(roughness)"로서 해석 또는 감지된다. 사용자에 의한 터치의 이러한 해석들이 사용자의 개별화된 감각 인지(sensory perception)에 영향을 받기 쉬울 것이지만, 대다수의 사용자들에게 보편적인 많은 터치 감각 인지가 있다. 따라서, 촉각적 출력이 사용자의 특정 감각 인지(예컨대, "업 클릭", "다운 클릭", "거칠기")에 대응하는 것으로서 기술될 때, 달리 언급되지 않는다면, 생성된 촉각적 출력은 전형적인(또는 평균적인) 사용자에 대한 기술된 감각 인지를 생성할 디바이스 또는 그의 컴포넌트의 물리적 변위에 대응한다.
디바이스(100)는 휴대용 다기능 디바이스의 일례일 뿐이고, 디바이스(100)는, 선택적으로, 도시된 것보다 더 많거나 더 적은 컴포넌트들을 갖거나, 선택적으로, 둘 이상의 컴포넌트들을 조합하거나, 또는 선택적으로 컴포넌트들의 상이한 구성 또는 배열을 갖는다는 것이 이해되어야 한다. 도 1a에 도시된 다양한 컴포넌트들은 하나 이상의 신호 프로세싱 회로 및/또는 ASIC(application-specific integrated circuit)를 비롯한, 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어 둘 모두의 조합으로 구현된다.
메모리(102)는, 선택적으로, 고속 랜덤 액세스 메모리를 포함하고, 또한 선택적으로, 하나 이상의 자기 디스크 저장 디바이스, 플래시 메모리 디바이스, 또는 다른 비휘발성 솔리드 스테이트 메모리 디바이스(non-volatile solid-state memory device)와 같은 비휘발성 메모리를 포함한다. 메모리 제어기(122)는 선택적으로 디바이스(100)의 다른 컴포넌트들에 의한 메모리(102)에의 액세스를 제어한다.
주변기기 인터페이스(118)는 디바이스의 입력 및 출력 주변기기들을 CPU(120) 및 메모리(102)에 결합하는 데 사용될 수 있다. 하나 이상의 프로세서들(120)은 디바이스(100)에 대한 다양한 기능들을 수행하기 위해 그리고 데이터를 프로세싱하기 위해 메모리(102)에 저장된 다양한 소프트웨어 프로그램들 및/또는 명령어들의 세트들을 구동 또는 실행시킨다. 일부 실시예들에서, 주변기기 인터페이스(118), CPU(120) 및 메모리 제어기(122)는, 선택적으로, 칩(104)과 같은 단일 칩 상에 구현된다. 일부 다른 실시예들에서, 이들은 선택적으로 별개의 칩들 상에서 구현된다.
RF(radio frequency) 회로부(108)는 전자기 신호들이라고도 지칭되는 RF 신호들을 수신 및 송신한다. RF 회로부(108)는 전기 신호들을 전자기 신호들로/로부터 변환하고, 전자기 신호들을 통해 통신 네트워크들 및 다른 통신 디바이스들과 통신한다. RF 회로부(108)는, 선택적으로, 안테나 시스템, RF 송수신기, 하나 이상의 증폭기들, 튜너, 하나 이상의 발진기들, 디지털 신호 프로세서, CODEC 칩셋, SIM(subscriber identity module) 카드, 메모리 등을 포함하지만 이들로 제한되지 않는, 이러한 기능들을 수행하기 위한 잘 알려진 회로부를 포함한다. RF 회로부(108)는, 선택적으로, 네트워크들, 예컨대 월드 와이드 웹(WWW)으로도 지칭되는 인터넷, 인트라넷, 및/또는 무선 네트워크, 예컨대 셀룰러 전화 네트워크, 무선 LAN(local area network) 및/또는 MAN(metropolitan area network), 및 다른 디바이스들과 무선 통신에 의해 통신한다. RF 회로부(108)는, 선택적으로, 예컨대 단거리 통신 무선기기(short-range communication radio)에 의해, 근거리 통신(near field communication, NFC) 필드(field)들을 검출하기 위한 잘 알려진 회로부를 포함한다. 무선 통신은, 선택적으로, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), HSUPA(high-speed uplink packet access), EV-DO(Evolution, Data-Only), HSPA, HSPA+, DC-HSPDA(Dual-Cell HSPA), LTE(long term evolution), NFC(near field communication), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스(Bluetooth), BTLE(Bluetooth Low Energy), Wi-Fi(Wireless Fidelity)(예컨대, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g, IEEE 802.11n 및/또는 IEEE 802.11ac), VoIP(voice over Internet Protocol), Wi-MAX, 이메일용 프로토콜(예컨대, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예컨대, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service)), 및/또는 SMS(Short Message Service), 또는 본 문서의 출원일 당시 아직 개발되지 않은 통신 프로토콜들을 비롯한, 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 제한되지는 않는, 복수의 통신 표준들, 프로토콜들 및 기술들 중 임의의 것을 이용한다.
오디오 회로부(110), 스피커(111), 및 마이크로폰(113)은 사용자와 디바이스(100) 사이에서 오디오 인터페이스를 제공한다. 오디오 회로부(110)는 주변기기 인터페이스(118)로부터 오디오 데이터를 수신하고, 그 오디오 데이터를 전기 신호로 변환하고, 그 전기 신호를 스피커(111)에 송신한다. 스피커(111)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. 오디오 회로부(110)는 또한 마이크로폰(113)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로부(110)는 전기 신호를 오디오 데이터로 변환하고, 프로세싱을 위해 오디오 데이터를 주변기기 인터페이스(118)에 송신한다. 오디오 데이터는, 선택적으로, 주변기기 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로부(108)로부터 인출되고/되거나 메모리(102) 및/또는 RF 회로부(108)로 송신된다. 일부 실시예들에서, 오디오 회로부(110)는 또한 헤드셋 잭(예컨대, 도 2의 212)을 포함한다. 헤드셋 잭은 출력-전용 헤드폰들, 또는 출력(예컨대, 한쪽 또는 양쪽 귀용 헤드폰) 및 입력(예컨대, 마이크로폰) 양쪽 모두를 갖는 헤드셋과 같은 분리가능한 오디오 입/출력 주변기기들과 오디오 회로부(110) 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 터치 스크린(112) 및 다른 입력 제어 디바이스들(116)과 같은, 디바이스(100) 상의 입/출력 주변기기들을 주변기기 인터페이스(118)에 결합한다. I/O 서브시스템(106)은 선택적으로 디스플레이 제어기(156), 광 센서 제어기(158), 심도 카메라 제어기(169), 세기 센서 제어기(159), 햅틱 피드백 제어기(161), 및 다른 입력 또는 제어 디바이스들을 위한 하나 이상의 입력 제어기들(160)을 포함한다. 하나 이상의 입력 제어기들(160)은 다른 입력 제어 디바이스들(116)로부터/로 전기 신호들을 수신/송신한다. 다른 입력 제어 디바이스들(116)은 선택적으로 물리적 버튼들(예컨대, 푸시 버튼(push button), 로커 버튼(rocker button) 등), 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함한다. 일부 실시예들에서, 입력 제어기(들)(160)는, 선택적으로, 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 디바이스 중 임의의 것에 결합된다(또는 어떤 것에도 결합되지 않는다). 하나 이상의 버튼들(예컨대, 도 2의 208)은, 선택적으로, 스피커(111) 및/또는 마이크로폰(113)의 음량 제어를 위한 업/다운 버튼을 포함한다. 하나 이상의 버튼들은 선택적으로 푸시 버튼(예컨대, 도 2의 206)을 포함한다. 일부 실시예들에서, 전자 디바이스는 하나 이상의 입력 디바이스들과 (예컨대, 무선 통신을 통해, 유선 통신을 통해) 통신하는 컴퓨터 시스템이다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 터치 감응형 표면(예컨대, 터치 감응형 디스플레이의 일부로서 트랙패드)을 포함한다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은, 예컨대 사용자의 제스처들(예컨대, 손 제스처들)을 입력으로서 추적하기 위한 하나 이상의 카메라 센서들(예컨대, 하나 이상의 광 센서들(164) 및/또는 하나 이상의 심도 카메라 센서들(175))을 포함한다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 별개이다.
푸시 버튼의 빠른 누르기(quick press)는 선택적으로 터치 스크린(112)의 잠금을 풀거나, 디바이스의 잠금을 해제하기 위해 선택적으로 터치 스크린 상의 제스처들을 사용하는 프로세스를 시작하며, 이는 2005년 12월 23일자로 출원된 미국 특허 출원 제11/322,549호, "Unlocking a Device by Performing Gestures on an Unlock Image"(미국 특허 제7,657,849호)에 기술된 바와 같으며, 이는 이로써 그 전체가 참고로 본 명세서에 포함된다. 푸시 버튼(예컨대, 206)의 더 긴 누르기는 선택적으로 디바이스(100)의 전원을 온 또는 오프한다. 하나 이상의 버튼들의 기능성은, 선택적으로, 사용자 맞춤화가 가능하다. 터치 스크린(112)은 가상 또는 소프트 버튼들 및 하나 이상의 소프트 키보드들을 구현하는 데 사용된다.
터치 감응형 디스플레이(112)는 디바이스와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 제어기(156)는 터치 스크린(112)으로부터/으로 전기 신호들을 수신하고/하거나 송신한다. 터치 스크린(112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 선택적으로 그래픽들, 텍스트, 아이콘들, 비디오 및 이들의 임의의 조합(총칭하여 "그래픽들"로 지칭됨)을 포함한다. 일부 실시예들에서, 시각적 출력의 일부 또는 전부가 선택적으로 사용자 인터페이스 객체들에 대응한다.
터치 스크린(112)은 햅틱 및/또는 촉각적 접촉에 기초하여 사용자로부터의 입력을 수용하는 터치 감응형 표면, 센서 또는 센서들의 세트를 갖는다. 터치 스크린(112) 및 디스플레이 제어기(156)는 (메모리(102) 내의 임의의 연관된 모듈들 및/또는 명령어들의 세트들과 함께) 터치 스크린(112) 상에서의 접촉(및 접촉의 임의의 이동 또는 중단)을 검출하고, 검출된 접촉을 터치 스크린(112) 상에 디스플레이된 사용자 인터페이스 객체들(예컨대, 하나 이상의 소프트 키들, 아이콘들, 웹 페이지들 또는 이미지들)과의 상호작용으로 변환한다. 예시적인 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉 지점은 사용자의 손가락에 대응한다.
터치 스크린(112)은 선택적으로 LCD(liquid crystal display) 기술, LPD(light emitting polymer display) 기술, 또는 LED(light emitting diode) 기술을 이용하지만, 다른 실시예들에서는 다른 디스플레이 기술들이 이용된다. 터치 스크린(112) 및 디스플레이 제어기(156)는, 선택적으로, 용량성, 저항성, 적외선, 및 표면 음향파 기술들뿐만 아니라 다른 근접 센서 어레이들, 또는 터치 스크린(112)과의 하나 이상의 접촉 지점들을 결정하기 위한 다른 요소들을 포함하지만 이들로 한정되지 않는, 현재 공지되어 있거나 추후에 개발되는 복수의 터치 감지 기술들 중 임의의 것을 사용하여, 접촉 및 그의 임의의 이동 또는 중단을 검출한다. 예시적인 실시예에서, 미국 캘리포니아주 쿠퍼티노 소재의 애플 인크.로부터의 아이폰® 및 아이팟 터치®에서 발견되는 것과 같은 투영형 상호 정전용량 감지 기술(projected mutual capacitance sensing technology)이 이용된다.
터치 스크린(112)의 일부 실시예들에서의 터치 감응형 디스플레이는, 선택적으로, 하기 미국 특허들 제6,323,846호(Westerman 외), 제6,570,557호(Westerman 외), 및/또는 제6,677,932호(Westerman), 및/또는 미국 특허 공개 공보 제2002/0015024A1호에 기재된 다중-터치 감응형 터치패드들과 유사하며, 이들 각각은 그 전체가 본 명세서에 참고로 포함된다. 그러나, 터치 스크린(112)은 디바이스(100)로부터의 시각적 출력을 디스플레이하는 반면, 터치 감응형 터치패드들은 시각적 출력을 제공하지 않는다.
터치 스크린(112)의 일부 실시예들에서의 터치 감응형 디스플레이는 하기 출원들에 기술되어 있다: (1) 2006년 5월 2일자로 출원된 미국 특허 출원 제11/381,313호, "Multipoint Touch Surface Controller"; (2) 2004년 5월 6일자로 출원된 미국 특허 출원 제10/840,862호, "Multipoint Touchscreen"; (3) 2004년 7월 30일자로 출원된 미국 특허 출원 제10/903,964호, "Gestures For Touch Sensitive Input Devices"; (4) 2005년 1월 31일자로 출원된 미국 특허 출원 제11/048,264호, "Gestures For Touch Sensitive Input Devices"; (5) 2005년 1월 18일자로 출원된 미국 특허 출원 제11/038,590호, "Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices"; (6) 2005년 9월 16일자로 출원된 미국 특허 출원 제11/228,758호, "Virtual Input Device Placement On A Touch Screen User Interface"; (7) 2005년 9월 16일자로 출원된 미국 특허 출원 제11/228,700호, "Operation Of A Computer With A Touch Screen Interface"; (8) 2005년 9월 16일자로 출원된 미국 특허 출원 제11/228,737호, "Activating Virtual Keys Of A Touch-Screen Virtual Keyboard"; 및 (9) 2006년 3월 3일자로 출원된 미국 특허 출원 제11/367,749호, "Multi-Functional Hand-Held Device". 이 출원들 모두는 그 전체가 본 명세서에 참고로 포함된다.
터치 스크린(112)은, 선택적으로, 100 dpi를 초과하는 비디오 해상도를 갖는다. 일부 실시예들에서, 터치 스크린은 대략 160 dpi의 비디오 해상도를 갖는다. 사용자는, 선택적으로, 스타일러스, 손가락 등과 같은 임의의 적합한 물체 또는 부속물을 사용하여 터치 스크린(112)과 접촉한다. 일부 실시예들에서, 사용자 인터페이스는 주로 손가락 기반 접촉들 및 제스처들을 이용하여 동작하도록 설계되는데, 이는 터치 스크린 상에서의 손가락의 더 넓은 접촉 면적으로 인해 스타일러스 기반 입력보다 덜 정밀할 수 있다. 일부 실시예들에서, 디바이스는 대략적인 손가락 기반 입력을 사용자가 원하는 액션(action)들을 수행하기 위한 정밀한 포인터/커서 위치 또는 커맨드로 변환한다.
일부 실시예들에서, 터치 스크린 이외에, 디바이스(100)는, 선택적으로, 특정 기능들을 활성화 또는 비활성화시키기 위한 터치패드를 포함한다. 일부 실시예들에서, 터치패드는, 터치 스크린과는 달리, 시각적 출력을 디스플레이하지 않는 디바이스의 터치 감응형 영역이다. 터치패드는, 선택적으로, 터치 스크린(112)과는 별개인 터치 감응형 표면 또는 터치 스크린에 의해 형성된 터치 감응형 표면의 연장부이다.
디바이스(100)는 또한 다양한 컴포넌트들에 전력을 공급하기 위한 전력 시스템(162)을 포함한다. 전력 시스템(162)은, 선택적으로, 전력 관리 시스템, 하나 이상의 전원(예컨대, 배터리, 교류 전류(alternating current, AC)), 재충전 시스템, 전력 고장 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시자(예컨대, 발광 다이오드(LED)), 및 휴대용 디바이스들 내에서의 전력의 생성, 관리 및 분배와 연관된 임의의 다른 컴포넌트들을 포함한다.
디바이스(100)는 또한 선택적으로 하나 이상의 광 센서들(164)을 포함한다. 도 1a는 I/O 서브시스템(106) 내의 광 센서 제어기(158)에 결합된 광 센서를 도시한다. 광 센서(164)는 선택적으로 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor) 포토트랜지스터들을 포함한다. 광 센서(164)는 하나 이상의 렌즈들을 통해 투영되는, 주변환경으로부터의 광을 수광하고, 그 광을 이미지를 표현하는 데이터로 변환한다. 이미징 모듈(143)(카메라 모듈로도 지칭됨)과 함께, 광 센서(164)는 선택적으로, 정지 이미지들 또는 비디오를 캡처한다. 일부 실시예들에서, 광 센서는 디바이스 전면 상의 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치되어, 터치 스크린 디스플레이가 정지 및/또는 비디오 이미지 획득을 위한 뷰파인더로서 사용될 수 있게 한다. 일부 실시예들에서, 광 센서는 디바이스의 전면 상에 위치됨으로써, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자들을 보는 동안, 선택적으로, 사용자의 이미지가 화상 회의를 위해 획득되게 한다. 일부 실시예들에서, 광 센서(164)의 위치는 (예를 들어, 디바이스 하우징 내의 렌즈 및 센서를 회전시킴으로써) 사용자에 의해 변경될 수 있어, 단일 광 센서(164)가 터치 스크린 디스플레이와 함께 화상 회의와 정지 및/또는 비디오 이미지 획득 둘 모두에 사용되게 한다.
디바이스(100)는 또한, 선택적으로, 하나 이상의 심도 카메라 센서들(175)을 포함한다. 도 1a는 I/O 서브시스템(106) 내의 심도 카메라 제어기(169)에 결합된 심도 카메라 센서를 도시한다. 심도 카메라 센서(175)는 시점(예를 들어, 심도 카메라 센서)으로부터 장면 내의 객체(예를 들어, 얼굴)의 3차원 모델을 생성하기 위해 주변환경으로부터 데이터를 수신한다. 일부 실시예들에서, 이미징 모듈(143)(카메라 모듈로 또한 지칭됨)과 함께, 심도 카메라 센서(175)는 선택적으로, 이미징 모듈(143)에 의해 캡처된 이미지의 상이한 부분들의 심도 맵을 결정하는 데 사용된다. 일부 실시예들에서, 심도 카메라 센서는 디바이스(100)의 전면 상에 위치되어, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자들을 보는 동안 그리고 심도 맵 데이터를 이용하여 셀피(selfie)들을 캡처하도록, 선택적으로 심도 정보를 갖는 사용자의 이미지가 화상 회의를 위해 획득된다. 일부 실시예들에서, 심도 카메라 센서(175)는 디바이스의 배면 상에, 또는 디바이스(100)의 배면 및 전면 상에 위치된다. 일부 실시예들에서, 심도 카메라 센서(175)의 위치는 (예를 들어, 디바이스 하우징 내의 렌즈 및 센서를 회전시킴으로써) 사용자에 의해 변경될 수 있어, 심도 카메라 센서(175)가 터치 스크린 디스플레이와 함께 화상 회의와 정지 및/또는 비디오 이미지 획득 둘 모두에 사용되게 한다.
디바이스(100)는, 또한, 선택적으로, 하나 이상의 접촉 세기 센서들(165)을 포함한다. 도 1a는 I/O 서브시스템(106) 내의 세기 센서 제어기(159)에 결합된 접촉 세기 센서를 도시한다. 접촉 세기 센서(165)는, 선택적으로, 하나 이상의 압전 저항 스트레인 게이지, 용량성 힘 센서, 전기적 힘 센서, 압전 힘 센서, 광학적 힘 센서, 용량성 터치 감응형 표면, 또는 다른 세기 센서들(예컨대, 터치 감응형 표면 상에서의 접촉의 힘(또는 압력)을 측정하는 데 사용되는 센서들)을 포함한다. 접촉 세기 센서(165)는 주변환경으로부터 접촉 세기 정보(예컨대, 압력 정보 또는 압력 정보에 대한 대용물)를 수신한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서는 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(112))과 함께 위치(collocate)되거나 그에 근접한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서는 디바이스(100)의 전면 상에 위치된 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치된다.
디바이스(100)는 또한 선택적으로 하나 이상의 근접 센서들(166)을 포함한다. 도 1a는 주변기기 인터페이스(118)에 결합된 근접 센서(166)를 도시한다. 대안적으로, 근접 센서(166)는, 선택적으로, I/O 서브시스템(106) 내의 입력 제어기(160)에 결합된다. 근접 센서(166)는, 선택적으로, 미국 특허 출원들 제11/241,839호, "Proximity Detector In Handheld Device"; 제11/240,788호, "Proximity Detector In Handheld Device"; 제11/620,702호, "Using Ambient Light Sensor To Augment Proximity Sensor Output"; 제11/586,862호, "Automated Response To And Sensing Of User Activity In Portable Devices"; 및 제11/638,251호, "Methods And Systems For Automatic Configuration Of Peripherals"에 기술된 바와 같이 수행되며, 이들은 그 전체가 본 명세서에 참고로 포함된다. 일부 실시예들에서, 근접 센서는 다기능 디바이스가 사용자의 귀 근처에 위치될 때(예컨대, 사용자가 전화 통화를 하고 있을 때) 터치 스크린(112)을 끄고 디스에이블(disable)시킨다.
디바이스(100)는, 또한, 선택적으로, 하나 이상의 촉각적 출력 생성기들(167)을 포함한다. 도 1a는 I/O 서브시스템(106) 내의 햅틱 피드백 제어기(161)에 결합된 촉각적 출력 생성기를 도시한다. 촉각적 출력 생성기(167)는, 선택적으로, 스피커들 또는 다른 오디오 컴포넌트들과 같은 하나 이상의 전자음향 디바이스들 및/또는 모터, 솔레노이드, 전기활성 중합체, 압전 액추에이터, 정전 액추에이터, 또는 다른 촉각적 출력 생성 컴포넌트(예컨대, 전기 신호들을 디바이스 상의 촉각적 출력들로 변환하는 컴포넌트)와 같은, 에너지를 선형 모션(linear motion)으로 변환하는 전자기계 디바이스들을 포함한다. 접촉 세기 센서(165)는 햅틱 피드백 모듈(133)로부터 촉각적 피드백 생성 명령어들을 수신하여 디바이스(100)의 사용자에 의해 감지될 수 있는 디바이스(100) 상의 촉각적 출력들을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기는 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(112))과 함께 위치되거나 그에 근접하며, 선택적으로, 터치 감응형 표면을 수직으로(예컨대, 디바이스(100)의 표면 내/외로) 또는 측방향으로(예컨대, 디바이스(100)의 표면과 동일한 평면에서 전후로) 이동시킴으로써 촉각적 출력을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기 센서는 디바이스(100)의 전면 상에 위치된 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치된다.
디바이스(100)는 또한 선택적으로 하나 이상의 가속도계들(168)을 포함한다. 도 1a는 주변기기 인터페이스(118)에 결합된 가속도계(168)를 도시한다. 대안적으로, 가속도계(168)는 선택적으로 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합된다. 가속도계(168)는, 선택적으로, 미국 특허 공개 공보 제20050190059호, "Acceleration-based Theft Detection System for Portable Electronic Devices" 및 미국 특허 공개 공보 제20060017692호, "Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer"에 기술된 바와 같이 수행되며, 이들 양측 모두는 그들 전체가 참고로 본 명세서에 포함된다. 일부 실시예들에서, 하나 이상의 가속도계들로부터 수신된 데이터의 분석에 기초하여 터치 스크린 디스플레이 상에 인물 뷰(portrait view) 또는 풍경 뷰(landscape view)로 정보가 디스플레이된다. 디바이스(100)는, 선택적으로, 가속도계(들)(168)에 부가하여, 디바이스(100)의 위치 및 배향(예를 들어, 인물 또는 풍경)에 관한 정보를 획득하기 위한 자력계 및 GPS(또는 GLONASS 또는 다른 글로벌 내비게이션 시스템) 수신기를 포함한다.
일부 실시예들에서, 메모리(102)에 저장된 소프트웨어 컴포넌트들은 운영 체제(126), 통신 모듈(또는 명령어들의 세트)(128), 접촉/모션 모듈(또는 명령어들의 세트)(130), 그래픽 모듈(또는 명령어들의 세트)(132), 텍스트 입력 모듈(또는 명령어들의 세트)(134), GPS 모듈(또는 명령어들의 세트)(135), 및 애플리케이션들(또는 명령어들의 세트들)(136)을 포함한다. 게다가, 일부 실시예들에서, 메모리(도 1a의 102 또는 도 3의 370)는 도 1a 및 도 3에 도시된 바와 같이 디바이스/글로벌 내부 상태(157)를 저장한다. 디바이스/글로벌 내부 상태(157)는, 존재하는 경우, 어느 애플리케이션들이 현재 활성 상태인지를 나타내는 활성 애플리케이션 상태; 어떤 애플리케이션들, 뷰들 또는 다른 정보가 터치 스크린 디스플레이(112)의 다양한 영역들을 점유하는지를 나타내는 디스플레이 상태; 디바이스의 다양한 센서들 및 입력 제어 디바이스들(116)로부터 획득된 정보를 포함하는 센서 상태; 및 디바이스의 위치 및/또는 자세에 관한 위치 정보 중 하나 이상을 포함한다.
운영 체제(126)(예컨대, Darwin, RTXC, LINUX, UNIX, OS X, iOS, WINDOWS, 또는 VxWorks와 같은 임베디드 운영 체제)는 일반적인 시스템 태스크들(예컨대, 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어 및 관리하기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하고, 다양한 하드웨어와 소프트웨어 컴포넌트들 사이의 통신을 용이하게 한다.
통신 모듈(128)은 하나 이상의 외부 포트들(124)을 통한 다른 디바이스들과의 통신을 용이하게 하고, 또한 RF 회로부(108) 및/또는 외부 포트(124)에 의해 수신되는 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 외부 포트(124)(예컨대, USB, 파이어와이어(FIREWIRE) 등)는 다른 디바이스들에 직접적으로 또는 네트워크(예컨대, 인터넷, 무선 LAN 등)를 통해 간접적으로 결합하도록 구성된다. 일부 실시예들에서, 외부 포트는 아이팟®(애플 인크.의 상표) 디바이스들에서 사용되는 30-핀 커넥터와 동일하거나 유사하고/하거나 이와 호환가능한 멀티-핀(예컨대, 30-핀) 커넥터이다.
접촉/모션 모듈(130)은, 선택적으로, (디스플레이 제어기(156)와 함께) 터치 스크린(112), 및 다른 터치 감응형 디바이스들(예컨대, 터치패드 또는 물리적 클릭 휠)과의 접촉을 검출한다. 접촉/모션 모듈(130)은 접촉이 발생했는지의 여부를 결정하는 것(예컨대, 손가락-다운 이벤트(finger-down event)를 검출하는 것), 접촉의 세기(예컨대, 접촉의 힘 또는 압력, 또는 접촉의 힘 또는 압력에 대한 대체물)를 결정하는 것, 접촉의 이동이 있는지의 여부를 결정하여 터치 감응형 표면을 가로지르는 이동을 추적하는 것(예컨대, 하나 이상의 손가락-드래깅 이벤트(finger-dragging event)들을 검출하는 것), 및 접촉이 중지되었는지의 여부를 결정하는 것(예컨대, 손가락-업 이벤트(finger-up event) 또는 접촉 중단을 검출하는 것)과 같은, 접촉의 검출과 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/모션 모듈(130)은 터치 감응형 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉 지점의 이동을 결정하는 것은, 선택적으로, 접촉 지점의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향의 변화)를 결정하는 것을 포함한다. 이 동작들은, 선택적으로, 단일 접촉들(예컨대, 한 손가락 접촉들)에 또는 다수의 동시 접촉들(예컨대, "멀티터치"/다수의 손가락 접촉들)에 적용된다. 일부 실시예들에서, 접촉/모션 모듈(130) 및 디스플레이 제어기(156)는 터치패드 상의 접촉을 검출한다.
일부 실시예들에서, 접촉/모션 모듈(130)은 동작이 사용자에 의해 수행되었는지 여부를 결정하는 데 (예컨대, 사용자가 아이콘에 대해 "클릭"했는지 여부를 결정하는 데) 하나 이상의 세기 임계치들의 세트를 이용한다. 일부 실시예들에서, 적어도 세기 임계치들의 서브세트가 소프트웨어 파라미터들에 따라 결정된다(예컨대, 세기 임계치들은 특정 물리적 액추에이터들의 활성화 임계치들에 의해 결정되지 않으며, 디바이스(100)의 물리적 하드웨어를 변경함이 없이 조정될 수 있다). 예를 들어, 트랙패드 또는 터치 스크린 디스플레이의 마우스 "클릭" 임계치는 트랙패드 또는 터치 스크린 디스플레이 하드웨어를 변경함이 없이 넓은 범위의 미리정의된 임계 값들 중 임의의 것으로 설정될 수 있다. 추가로, 일부 구현예들에서, 디바이스의 사용자는 (예컨대, 개개의 세기 임계치들을 조정함으로써 그리고/또는 복수의 세기 임계치들을 시스템 레벨 클릭 "세기" 파라미터로 한꺼번에 조정함으로써) 일정 세기 임계치들의 세트 중 하나 이상을 조정하기 위한 소프트웨어 설정들을 제공받는다.
접촉/모션 모듈(130)은, 선택적으로, 사용자에 의한 제스처 입력을 검출한다. 터치 감응형 표면 상에서의 상이한 제스처들은 상이한 접촉 패턴들(예컨대, 검출된 접촉들의 상이한 모션들, 타이밍들, 및/또는 세기들)을 갖는다. 따라서, 제스처는, 선택적으로, 특정 접촉 패턴을 검출함으로써 검출된다. 예를 들어, 손가락 탭 제스처(finger tap gesture)를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 손가락-다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)에서(예컨대, 아이콘의 위치에서) 손가락-업(리프트오프(liftoff)) 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 감응형 표면 상에서 손가락 스와이프 제스처(finger swipe gesture)를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 하나 이상의 손가락-드래깅 이벤트들을 검출하고, 그에 후속하여 손가락-업(리프트오프) 이벤트를 검출하는 것을 포함한다.
그래픽 모듈(132)은, 디스플레이되는 그래픽의 시각적 효과(예컨대, 밝기, 투명도, 채도, 콘트라스트 또는 다른 시각적 속성)를 변경하기 위한 컴포넌트들을 포함하는, 터치 스크린(112) 또는 다른 디스플레이 상에서 그래픽을 렌더링 및 디스플레이하기 위한 다양한 공지된 소프트웨어 컴포넌트들을 포함한다. 본 명세서에서 사용되는 바와 같이, 용어 "그래픽"은 텍스트, 웹 페이지들, 아이콘들(예컨대, 소프트 키들을 포함하는 사용자 인터페이스 객체들), 디지털 이미지들, 비디오들, 애니메이션들 등을 제한 없이 포함하는, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다.
일부 실시예들에서, 그래픽 모듈(132)은 사용될 그래픽을 표현하는 데이터를 저장한다. 각각의 그래픽에는, 선택적으로, 대응하는 코드가 할당된다. 그래픽 모듈(132)은, 필요한 경우, 좌표 데이터 및 다른 그래픽 속성 데이터와 함께, 디스플레이될 그래픽을 특정하는 하나 이상의 코드들을 애플리케이션들 등으로부터 수신하며, 이어서 스크린 이미지 데이터를 생성하여 디스플레이 제어기(156)에 출력한다.
햅틱 피드백 모듈(133)은 디바이스(100)와의 사용자 상호작용들에 응답하여 디바이스(100) 상의 하나 이상의 위치들에서 촉각적 출력들을 생성하기 위하여 촉각적 출력 생성기(들)(167)에 의해 이용되는 명령어들을 생성하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다.
선택적으로 그래픽 모듈(132)의 컴포넌트인 텍스트 입력 모듈(134)은 다양한 애플리케이션들(예컨대, 연락처(137), 이메일(140), IM(141), 브라우저(147), 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션)에 텍스트를 입력하기 위한 소프트 키보드들을 제공한다.
GPS 모듈(135)은 디바이스의 위치를 결정하고, 이 정보를 다양한 애플리케이션들에서의 사용을 위해 (예컨대, 위치 기반 다이얼링에서 사용하기 위해 전화(138)에; 사진/비디오 메타데이터로서 카메라(143)에; 그리고 날씨 위젯들, 지역 옐로 페이지 위젯들 및 지도/내비게이션 위젯들과 같은 위치 기반 서비스들을 제공하는 애플리케이션들에) 제공한다.
애플리케이션들(136)은, 선택적으로, 다음의 모듈들(또는 명령어들의 세트들), 또는 이들의 서브세트 또는 수퍼세트(superset)를 포함한다:
Figure 112023028882311-pat00001
연락처 모듈(137)(때때로 주소록 또는 연락처 목록으로 지칭됨);
전화 모듈(138);
화상 회의 모듈(139);
이메일 클라이언트 모듈(140);
인스턴트 메시징(IM) 모듈(141);
운동 지원 모듈(142);
정지 및/또는 비디오 이미지들을 위한 카메라 모듈(143);
이미지 관리 모듈(144);
비디오 재생기 모듈;
음악 재생기 모듈;
브라우저 모듈(147);
캘린더 모듈(148);
날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5), 및 사용자에 의해 얻어지는 다른 위젯들뿐 아니라 사용자-생성 위젯들(149-6) 중 하나 이상을 선택적으로 포함하는 위젯 모듈들(149);
사용자-생성 위젯들(149-6)을 만들기 위한 위젯 생성기 모듈(150);
검색 모듈(151);
비디오 재생기 모듈 및 음악 재생기 모듈을 통합하는 비디오 및 음악 재생기 모듈(152);
메모 모듈(153);
지도 모듈(154); 및/또는
온라인 비디오 모듈(155).
선택적으로 메모리(102) 내에 저장되는 다른 애플리케이션들(136)의 예들은 다른 워드 프로세싱 애플리케이션들, 다른 이미지 편집 애플리케이션들, 드로잉 애플리케이션들, 프레젠테이션 애플리케이션들, JAVA-인에이블형(enabled) 애플리케이션들, 암호화, 디지털 저작권 관리, 음성 인식 및 음성 복제를 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 연락처 모듈(137)은, 선택적으로, 주소록 또는 연락처 목록(예컨대, 메모리(102) 또는 메모리(370) 내의 연락처 모듈(137)의 애플리케이션 내부 상태(192)에 저장됨)을 관리하는 데 사용되며, 이는 하기를 포함한다: 이름(들)을 주소록에 추가하는 것; 주소록으로부터 이름(들)을 삭제하는 것; 전화번호(들), 이메일 주소(들), 물리적 주소(들) 또는 다른 정보를 이름과 연관시키는 것; 이미지를 이름과 연관시키는 것; 이름들을 분류 및 정렬하는 것; 전화(138), 화상 회의 모듈(139), 이메일(140) 또는 IM(141)에 의한 통신을 개시하고/하거나 용이하게 하기 위해 전화번호들 또는 이메일 주소들을 제공하는 것 등.
RF 회로부(108), 오디오 회로부(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 및 텍스트 입력 모듈(134)과 함께, 전화 모듈(138)은, 선택적으로, 전화번호에 대응하는 문자들의 시퀀스를 입력하고, 연락처 모듈(137) 내의 하나 이상의 전화번호에 액세스하고, 입력된 전화번호를 수정하고, 개별 전화번호를 다이얼링하고, 대화를 하고, 대화가 완료된 때 접속해제하거나 끊는 데 사용된다. 전술한 바와 같이, 무선 통신은 선택적으로 복수의 통신 표준들, 프로토콜들 및 기술들 중 임의의 것을 사용한다.
RF 회로부(108), 오디오 회로부(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 광 센서(164), 광 센서 제어기(158), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 모듈(137) 및 전화 모듈(138)과 함께, 화상 회의 모듈(139)은 사용자 지시들에 따라 사용자와 한 명 이상의 다른 참가자들 사이의 화상 회의를 개시, 시행 및 종료하도록 하는 실행가능 명령어들을 포함한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 이메일 클라이언트 모듈(140)은 사용자 지시들에 응답하여 이메일을 작성, 송신, 수신, 및 관리하도록 하는 실행가능 명령어들을 포함한다. 이미지 관리 모듈(144)과 함께, 이메일 클라이언트 모듈(140)은 카메라 모듈(143)로 촬영된 정지 또는 비디오 이미지들을 갖는 이메일을 생성 및 전송하는 것을 매우 용이하게 한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 인스턴트 메시징 모듈(141)은, 인스턴트 메시지에 대응하는 문자들의 시퀀스를 입력하고, 이전에 입력된 문자들을 수정하고, (예를 들어, 전화 기반 인스턴트 메시지들을 위한 단문자 메시지 서비스(Short Message Service, SMS) 또는 멀티미디어 메시지 서비스(Multimedia Message Service, MMS) 프로토콜을 이용하거나, 인터넷 기반 인스턴트 메시지들을 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 개개의 인스턴트 메시지를 송신하고, 인스턴트 메시지들을 수신하고, 수신된 인스턴트 메시지들을 보도록 하는 실행가능 명령어들을 포함한다. 일부 실시예들에서, 송신 및/또는 수신된 인스턴트 메시지들은 선택적으로 그래픽, 사진, 오디오 파일, 비디오 파일 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 바와 같은 다른 첨부물들을 포함한다. 본 명세서에서 사용되는 바와 같이, "인스턴트 메시징"은 전화 기반 메시지들(예컨대, SMS 또는 MMS를 이용하여 전송되는 메시지들) 및 인터넷 기반 메시지들(예컨대, XMPP, SIMPLE 또는 IMPS를 이용하여 전송되는 메시지들) 둘 모두를 지칭한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 지도 모듈(154), 및 음악 재생기 모듈과 함께, 운동 지원 모듈(142)은, (예컨대, 시간, 거리, 및/또는 열량 소비 목표와 함께) 운동들을 고안하고; 운동 센서들(스포츠 디바이스들)과 통신하고; 운동 센서 데이터를 수신하고; 운동을 모니터링하는 데 사용되는 센서들을 교정하고; 운동을 위한 음악을 선택 및 재생하고; 운동 데이터를 디스플레이, 저장 및 송신하도록 하는 실행가능 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 광 센서(들)(164), 광 센서 제어기(158), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 함께, 카메라 모듈(143)은, 정지 이미지들 또는 비디오(비디오 스트림을 포함함)를 캡처하고 이들을 메모리(102) 내에 저장하거나, 정지 이미지 또는 비디오의 특성을 수정하거나, 메모리(102)로부터 정지 이미지 또는 비디오를 삭제하도록 하는 실행가능 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 함께, 이미지 관리 모듈(144)은 정지 및/또는 비디오 이미지들을 배열하거나, 수정(예컨대, 편집)하거나, 또는 그렇지 않으면 조작하고, 라벨링하고, 삭제하고, (예컨대, 디지털 슬라이드 쇼 또는 앨범에) 제시하고, 저장하도록 하는 실행가능 명령어들을 포함한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 브라우저 모듈(147)은, 웹 페이지들 또는 이들의 부분들뿐만 아니라 웹 페이지들에 링크된 첨부물들 및 다른 파일들을 검색하고, 그들에 링크하고, 수신하고, 그리고 디스플레이하는 것을 비롯한, 사용자 지시들에 따라 인터넷을 브라우징하도록 하는 실행가능 명령어들을 포함한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 함께, 캘린더 모듈(148)은 사용자 지시들에 따라 캘린더들 및 캘린더들과 연관된 데이터(예컨대, 캘린더 엔트리들, 할 일 목록들 등)를 생성, 디스플레이, 수정, 및 저장하도록 하는 실행가능 명령어들을 포함한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 모듈들(149)은 사용자에 의해 선택적으로 다운로드 및 사용되거나(예컨대, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)), 또는 사용자에 의해 생성되는(예컨대, 사용자-생성 위젯(149-6)) 미니-애플리케이션들이다. 일부 실시예들에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파일 및 자바스크립트(JavaScript) 파일을 포함한다. 일부 실시예들에서, 위젯은 XML(Extensible Markup Language) 파일 및 자바스크립트 파일(예컨대, 야후(Yahoo)! 위젯들)을 포함한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 생성기 모듈(150)은 선택적으로 사용자에 의해 위젯들을 생성(예컨대, 웹 페이지의 사용자 특정 부분을 위젯으로 변경)하는 데 사용된다.
터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 검색 모듈(151)은 사용자 지시들에 따라 하나 이상의 검색 기준들(예컨대, 하나 이상의 사용자-특정 검색어들)에 매칭되는 메모리(102) 내의 텍스트, 음악, 사운드, 이미지, 비디오, 및/또는 다른 파일들을 검색하도록 하는 실행가능 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 오디오 회로부(110), 스피커(111), RF 회로부(108) 및 브라우저 모듈(147)과 함께, 비디오 및 음악 재생기 모듈(152)은, 사용자가 MP3 또는 AAC 파일들과 같은 하나 이상의 파일 포맷들로 저장된 기록된 음악 및 다른 사운드 파일들을 다운로드 및 재생할 수 있도록 하는 실행가능 명령어들, 및 비디오들을 (예컨대, 터치 스크린(112) 상에서 또는 외부 포트(124)를 통해 외부의 연결된 디스플레이 상에서) 디스플레이하도록, 상영하도록, 또는 다른 방식으로 재생하도록 하는 실행가능 명령어들을 포함한다. 일부 실시예들에서, 디바이스(100)는 선택적으로 아이팟(애플 인크.의 상표)과 같은 MP3 재생기의 기능성을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 메모 모듈(153)은 사용자 지시들에 따라 메모들, 할 일 목록들 등을 생성 및 관리하도록 하는 실행가능 명령어들을 포함한다.
RF 회로부(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 및 브라우저 모듈(147)과 함께, 지도 모듈(154)은 선택적으로 사용자 지시들에 따라 지도들 및 지도들과 연관된 데이터(예컨대, 운전 길 안내; 특정한 위치에 또는 그 인근의 상점들 및 다른 관심 지점들에 관한 데이터; 및 다른 위치-기반 데이터)를 수신하고, 디스플레이하고, 수정하고, 저장하는 데 사용된다.
터치 스크린(112), 디스플레이 제어기(156), 접촉/모션 모듈(130), 그래픽 모듈(132), 오디오 회로부(110), 스피커(111), RF 회로부(108), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140) 및 브라우저 모듈(147)과 함께, 온라인 비디오 모듈(155)은 사용자가 H.264와 같은 하나 이상의 파일 포맷의 온라인 비디오들에 액세스하고, 그들을 브라우징하고, (예컨대, 스트리밍 및/또는 다운로드에 의해) 수신하고, (예컨대, 터치 스크린 상에서 또는 외부 포트(124)를 통해 외부의 연결된 디스플레이 상에서) 재생하고, 특정한 온라인 비디오로의 링크와 함께 이메일을 전송하고, 그렇지 않으면 관리하게 하는 명령어들을 포함한다. 일부 실시예들에서, 이메일 클라이언트 모듈(140)보다는 오히려 인스턴트 메시징 모듈(141)이 특정 온라인 비디오로의 링크를 전송하는 데 사용된다. 온라인 비디오 애플리케이션에 대한 추가적 설명은, 2007년 6월 20일자로 출원된 미국 가특허 출원 제60/936,562호, "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos" 및 2007년 12월 31일자로 출원된 미국 특허 출원 제11/968,067호, "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos"에서 찾아볼 수 있으며, 이들의 내용은 이로써 그 전체가 본 명세서에 참고로 포함된다.
앞서 식별된 모듈들 및 애플리케이션들 각각은 상술한 하나 이상의 기능들 및 본 출원에 기술되는 방법들(예컨대, 본 명세서에 기술되는 컴퓨터 구현 방법들 및 다른 정보 프로세싱 방법들)을 수행하기 위한 실행가능 명령어들의 세트에 대응한다. 이들 모듈(예컨대, 명령어들의 세트들)은 별개의 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 따라서 이들 모듈의 다양한 서브세트들이 선택적으로 다양한 실시예들에서 조합되거나 그렇지 않으면 재배열된다. 예컨대, 비디오 재생기 모듈은 선택적으로, 음악 재생기 모듈과 함께 단일 모듈(예컨대, 도 1a의 비디오 및 음악 재생기 모듈(152)) 내에 조합된다. 일부 실시예들에서, 메모리(102)는 선택적으로, 앞서 식별된 모듈들 및 데이터 구조들의 서브세트를 저장한다. 또한, 메모리(102)는, 선택적으로, 전술되지 않은 추가의 모듈들 및 데이터 구조들을 저장한다.
일부 실시예들에서, 디바이스(100)는 디바이스 상의 미리정의된 세트의 기능들의 동작이 터치 스크린 및/또는 터치패드를 통해 전용으로 수행되는 디바이스이다. 터치 스크린 및/또는 터치패드를 디바이스(100)의 동작을 위한 주 입력 제어 디바이스로서 사용함으로써, 디바이스(100) 상의 (푸시 버튼들, 다이얼들 등과 같은) 물리적 입력 제어 디바이스들의 수가 선택적으로 감소된다.
전적으로 터치 스크린 및/또는 터치패드를 통해 수행되는 미리정의된 세트의 기능들은, 선택적으로, 사용자 인터페이스들 간의 내비게이션을 포함한다. 일부 실시예들에서, 터치패드는, 사용자에 의해 터치될 때, 디바이스(100)를 디바이스(100) 상에 디스플레이되는 임의의 사용자 인터페이스로부터 메인, 홈 또는 루트 메뉴로 내비게이팅한다. 이러한 실시예들에서, "메뉴 버튼"이 터치패드를 이용하여 구현된다. 일부 다른 실시예들에서, 메뉴 버튼은 터치패드 대신에 물리적 푸시 버튼 또는 다른 물리적 입력 제어 디바이스이다.
도 1b는 일부 실시예들에 따른, 이벤트 처리를 위한 예시적인 컴포넌트들을 예시하는 블록도이다. 일부 실시예들에서, 메모리(도 1a의 102 또는 도 3의 370)는 (예컨대, 운영 체제(126)에서의) 이벤트 분류기(170) 및 각각의 애플리케이션(136-1)(예컨대, 전술된 애플리케이션들(137 내지 151, 155, 380 내지 390) 중 임의의 것)을 포함한다.
이벤트 분류기(170)는 이벤트 정보를 수신하고, 이벤트 정보를 전달할 애플리케이션(136-1), 및 애플리케이션(136-1)의 애플리케이션 뷰(191)를 결정한다. 이벤트 분류기(170)는 이벤트 모니터(171) 및 이벤트 디스패처 모듈(event dispatcher module)(174)을 포함한다. 일부 실시예들에서, 애플리케이션(136-1)은 애플리케이션이 활성이거나 실행 중일 때 터치 감응형 디스플레이(112) 상에 디스플레이되는 현재 애플리케이션 뷰(들)를 나타내는 애플리케이션 내부 상태(192)를 포함한다. 일부 실시예들에서, 디바이스/글로벌 내부 상태(157)는 이벤트 분류기(170)에 의해 어느 애플리케이션(들)이 현재 활성인지 결정하는 데 이용되며, 애플리케이션 내부 상태(192)는 이벤트 분류기(170)에 의해 이벤트 정보를 전달할 애플리케이션 뷰들(191)을 결정하는 데 이용된다.
일부 실시예들에서, 애플리케이션 내부 상태(192)는 애플리케이션(136-1)이 실행을 재개할 때 이용될 재개 정보, 애플리케이션(136-1)에 의해 디스플레이되고 있거나 디스플레이될 준비가 된 정보를 나타내는 사용자 인터페이스 상태 정보, 사용자가 애플리케이션(136-1)의 이전 상태 또는 뷰로 되돌아가는 것을 가능하게 하기 위한 상태 큐(queue), 및 사용자에 의해 취해진 이전 액션들의 재실행(redo)/실행취소(undo) 큐 중 하나 이상과 같은 추가 정보를 포함한다.
이벤트 모니터(171)는 주변기기 인터페이스(118)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트(예를 들어, 다중 터치 제스처의 일부로서 터치 감응형 디스플레이(112) 상에서의 사용자 터치)에 대한 정보를 포함한다. 주변기기 인터페이스(118)는 I/O 서브시스템(106) 또는 센서, 예컨대, 근접 센서(166), 가속도계(들)(168), 및/또는 (오디오 회로부(110)를 통한) 마이크로폰(113)으로부터 수신하는 정보를 송신한다. 주변기기 인터페이스(118)가 I/O 서브시스템(106)으로부터 수신하는 정보는 터치 감응형 디스플레이(112) 또는 터치 감응형 표면으로부터의 정보를 포함한다.
일부 실시예들에서, 이벤트 모니터(171)는 요청들을 미리결정된 간격으로 주변기기 인터페이스(118)에 전송한다. 이에 응답하여, 주변기기 인터페이스(118)는 이벤트 정보를 송신한다. 다른 실시예들에서, 주변기기 인터페이스(118)는 중요한 이벤트(예컨대, 미리결정된 잡음 임계치를 초과하는 입력 및/또는 미리결정된 지속기간 초과 동안의 입력을 수신하는 것)가 있을 때에만 이벤트 정보를 송신한다.
일부 실시예들에서, 이벤트 분류기(170)는 또한 히트 뷰(hit view) 결정 모듈(172) 및/또는 활성 이벤트 인식기 결정 모듈(173)을 포함한다.
히트 뷰 결정 모듈(172)은 터치 감응형 디스플레이(112)가 하나 초과의 뷰를 디스플레이할 때 하나 이상의 뷰들 내에서 서브이벤트가 발생한 곳을 결정하기 위한 소프트웨어 절차들을 제공한다. 뷰들은 사용자가 디스플레이 상에서 볼 수 있는 제어부들 및 다른 요소들로 구성된다.
애플리케이션과 연관된 사용자 인터페이스의 다른 양태는 본 명세서에서 때때로 애플리케이션 뷰들 또는 사용자 인터페이스 창(user interface window)들로 지칭되는 한 세트의 뷰들인데, 여기서 정보가 디스플레이되고 터치 기반 제스처가 발생한다. 터치가 검출되는 (각각의 애플리케이션의) 애플리케이션 뷰들은 선택적으로 애플리케이션의 프로그램 또는 뷰 계층구조 내의 프로그램 레벨들에 대응한다. 예를 들어, 터치가 검출되는 최하위 레벨의 뷰는 선택적으로 히트 뷰로 지칭되고, 적절한 입력들로서 인식되는 이벤트들의 세트는, 선택적으로, 터치 기반 제스처를 시작하는 초기 터치의 히트 뷰에 적어도 부분적으로 기초하여 결정된다.
히트 뷰 결정 모듈(172)은 터치 기반 제스처의 서브이벤트들과 관련된 정보를 수신한다. 애플리케이션이 계층구조에서 조직화된 다수의 뷰들을 갖는 경우, 히트 뷰 결정 모듈(172)은 히트 뷰를, 서브이벤트를 처리해야 하는 계층구조 내의 최하위 뷰로서 식별한다. 대부분의 상황들에서, 히트 뷰는 개시되는 서브이벤트(예컨대, 이벤트 또는 잠재적 이벤트를 형성하는 서브이벤트들의 시퀀스에서의 제1 서브이벤트)가 발생하는 최하위 레벨 뷰이다. 일단 히트 뷰가 히트 뷰 결정 모듈(172)에 의해 식별되면, 히트 뷰는 전형적으로 그것이 히트 뷰로서 식별되게 한 것과 동일한 터치 또는 입력 소스와 관련된 모든 서브이벤트들을 수신한다.
활성 이벤트 인식기 결정 모듈(173)은 뷰 계층구조 내에서 어느 뷰 또는 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는지를 결정한다. 일부 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 히트 뷰만이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 서브이벤트의 물리적 위치를 포함하는 모든 뷰들이 적극 참여 뷰(actively involved view)들인 것으로 결정하고, 그에 따라 모든 적극 참여 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 터치 서브이벤트들이 전적으로 하나의 특정 뷰와 연관된 영역으로 한정되었더라도, 계층구조 내의 상위 뷰들은 여전히 적극 참여 뷰들로서 유지될 것이다.
이벤트 디스패처 모듈(174)은 이벤트 정보를 이벤트 인식기(예컨대, 이벤트 인식기(180))에 디스패치한다. 활성 이벤트 인식기 결정 모듈(173)을 포함하는 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 정보를 활성 이벤트 인식기 결정 모듈(173)에 의해 결정된 이벤트 인식기에 전달한다. 일부 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 큐 내에 이벤트 정보를 저장하는데, 이벤트 정보는 각각의 이벤트 수신기(182)에 의해 인출된다.
일부 실시예들에서, 운영 체제(126)는 이벤트 분류기(170)를 포함한다. 대안적으로, 애플리케이션(136-1)은 이벤트 분류기(170)를 포함한다. 또 다른 실시예들에서, 이벤트 분류기(170)는 독립형 모듈이거나, 또는 접촉/모션 모듈(130)과 같이 메모리(102)에 저장되는 다른 모듈의 일부이다.
일부 실시예들에서, 애플리케이션(136-1)은 복수의 이벤트 핸들러들(190) 및 하나 이상의 애플리케이션 뷰들(191)을 포함하며, 이들의 각각은 애플리케이션의 사용자 인터페이스의 각각의 뷰 내에 발생하는 터치 이벤트들을 처리하기 위한 명령어들을 포함한다. 애플리케이션(136-1)의 각각의 애플리케이션 뷰(191)는 하나 이상의 이벤트 인식기들(180)을 포함한다. 전형적으로, 각각의 애플리케이션 뷰(191)는 복수의 이벤트 인식기들(180)을 포함한다. 다른 실시예들에서, 이벤트 인식기들(180) 중 하나 이상은 사용자 인터페이스 키트 또는 애플리케이션(136-1)이 방법들 및 다른 속성들을 물려받는 상위 레벨 객체와 같은 별개의 모듈의 일부이다. 일부 실시예들에서, 각각의 이벤트 핸들러(190)는 데이터 업데이터(176), 객체 업데이터(177), GUI 업데이터(178), 및/또는 이벤트 분류기(170)로부터 수신된 이벤트 데이터(179) 중 하나 이상을 포함한다. 이벤트 핸들러(190)는 선택적으로 데이터 업데이터(176), 객체 업데이터(177) 또는 GUI 업데이터(178)를 이용하거나 호출하여 애플리케이션 내부 상태(192)를 업데이트한다. 대안적으로, 애플리케이션 뷰들(191) 중 하나 이상은 하나 이상의 각각의 이벤트 핸들러들(190)을 포함한다. 또한, 일부 실시예들에서, 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178) 중 하나 이상은 각각의 애플리케이션 뷰(191) 내에 포함된다.
각각의 이벤트 인식기(180)는 이벤트 분류기(170)로부터 이벤트 정보(예컨대, 이벤트 데이터(179))를 수신하고 그 이벤트 정보로부터 이벤트를 식별한다. 이벤트 인식기(180)는 이벤트 수신기(182) 및 이벤트 비교기(184)를 포함한다. 일부 실시예들에서, 이벤트 인식기(180)는 또한 적어도 메타데이터(183) 및 이벤트 전달 명령어들(188)(선택적으로 서브이벤트 전달 명령어들을 포함함)의 서브세트를 포함한다.
이벤트 수신기(182)는 이벤트 분류기(170)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트, 예를 들어 터치 또는 터치 이동에 관한 정보를 포함한다. 서브이벤트에 따라서, 이벤트 정보는 또한 서브이벤트의 위치와 같은 추가 정보를 포함한다. 서브이벤트가 터치의 모션과 관련되는 경우, 이벤트 정보는 또한 선택적으로 서브이벤트의 속력 및 방향을 포함한다. 일부 실시예들에서, 이벤트들은 하나의 배향으로부터 다른 배향으로(예컨대, 인물 배향으로부터 풍경 배향으로, 또는 그 반대로)의 디바이스의 회전을 포함하며, 이벤트 정보는 디바이스의 현재 배향(디바이스 자세로도 지칭됨)에 관한 대응하는 정보를 포함한다.
이벤트 비교기(184)는 이벤트 정보를 미리정의된 이벤트 또는 서브이벤트 정의들과 비교하고, 그 비교에 기초하여, 이벤트 또는 서브이벤트를 결정하거나, 이벤트 또는 서브이벤트의 상태를 결정 또는 업데이트한다. 일부 실시예들에서, 이벤트 비교기(184)는 이벤트 정의들(186)을 포함한다. 이벤트 정의들(186)은 이벤트들(예컨대, 서브이벤트들의 미리정의된 시퀀스들), 예를 들어 이벤트 1(187-1), 이벤트 2(187-2) 등의 정의들을 포함한다. 일부 실시예들에서, 이벤트(187) 내의 서브이벤트들은, 예를 들어, 터치 시작, 터치 종료, 터치 이동, 터치 취소, 및 다중 터치를 포함한다. 일례에서, 이벤트 1(187-1)에 대한 정의는 디스플레이된 객체 상에의 더블 탭이다. 더블 탭은, 예를 들어, 미리결정된 페이즈(phase) 동안의 디스플레이된 객체 상의 제1 터치(터치 시작), 미리결정된 페이즈 동안의 제1 리프트오프(터치 종료), 미리결정된 페이즈 동안의 디스플레이된 객체 상의 제2 터치(터치 시작), 및 미리결정된 페이즈 동안의 제2 리프트오프(터치 종료)를 포함한다. 다른 예에서, 이벤트 2(187-2)에 대한 정의는 디스플레이된 객체 상에의 드래깅이다. 드래깅은, 예를 들어, 미리결정된 페이즈 동안의 디스플레이된 객체 상의 터치(또는 접촉), 터치 감응형 디스플레이(112)를 가로지르는 터치의 이동, 및 터치의 리프트오프(터치 종료)를 포함한다. 일부 실시예들에서, 이벤트는 또한 하나 이상의 연관된 이벤트 핸들러들(190)에 대한 정보를 포함한다.
일부 실시예들에서, 이벤트 정의(187)는 각각의 사용자 인터페이스 객체에 대한 이벤트의 정의를 포함한다. 일부 실시예들에서, 이벤트 비교기(184)는 어느 사용자 인터페이스 객체가 서브이벤트와 연관되는지 결정하도록 히트 테스트(hit test)를 수행한다. 예를 들어, 3개의 사용자 인터페이스 객체들이 터치 감응형 디스플레이(112) 상에 디스플레이된 애플리케이션 뷰에서, 터치 감응형 디스플레이(112) 상에서 터치가 검출되는 경우, 이벤트 비교기(184)는 3개의 사용자 인터페이스 객체들 중 어느 것이 터치(서브이벤트)와 연관되어 있는지를 결정하도록 히트 테스트를 수행한다. 각각의 디스플레이된 객체가 각각의 이벤트 핸들러(190)와 연관되는 경우, 이벤트 비교기는 어느 이벤트 핸들러(190)가 활성화되어야 하는지 결정하는 데 히트 테스트의 결과를 이용한다. 예를 들어, 이벤트 비교기(184)는 히트 테스트를 트리거하는 객체 및 서브이벤트와 연관된 이벤트 핸들러를 선택한다.
일부 실시예들에서, 각각의 이벤트(187)에 대한 정의는 또한 서브이벤트들의 시퀀스가 이벤트 인식기의 이벤트 유형에 대응하는지 대응하지 않는지 여부가 결정된 후까지 이벤트 정보의 전달을 지연하는 지연된 액션들을 포함한다.
각각의 이벤트 인식기(180)가, 일련의 서브이벤트들이 이벤트 정의들(186) 내의 이벤트들 중 어떠한 것과도 매칭되지 않는 것으로 결정하는 경우, 각각의 이벤트 인식기(180)는 이벤트 불가능, 이벤트 실패, 또는 이벤트 종료 상태에 진입하고, 그 후 각각의 이벤트 인식기는 터치 기반 제스처의 후속 서브이벤트들을 무시한다. 이러한 상황에서, 만일 있다면, 히트 뷰에 대해 활성 상태로 유지되는 다른 이벤트 인식기들이 진행 중인 터치 기반 제스처의 서브이벤트들을 계속해서 추적 및 프로세싱한다.
일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트 전달 시스템이 어떻게 적극 참여 이벤트 인식기들에 대한 서브이벤트 전달을 수행해야 하는지를 나타내는 구성가능한 속성들, 플래그(flag)들, 및/또는 목록들을 갖는 메타데이터(183)를 포함한다. 일부 실시예들에서, 메타데이터(183)는 이벤트 인식기들이 어떻게 서로 상호작용하는지, 또는 상호작용하게 되는지를 나타내는 구성가능한 속성들, 플래그들, 및/또는 목록들을 포함한다. 일부 실시예들에서, 메타데이터(183)는, 서브이벤트들이 뷰 또는 프로그램 계층구조에서의 다양한 레벨들에 전달되는지 여부를 나타내는 구성가능한 속성들, 플래그들, 및/또는 목록들을 포함한다.
일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트의 하나 이상의 특정 서브이벤트들이 인식될 때 이벤트와 연관된 이벤트 핸들러(190)를 활성화한다. 일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트와 연관된 이벤트 정보를 이벤트 핸들러(190)에 전달한다. 이벤트 핸들러(190)를 활성화시키는 것은 각각의 히트 뷰에 서브이벤트들을 전송(및 지연 전송)하는 것과는 별개이다. 일부 실시예들에서, 이벤트 인식기(180)는 인식된 이벤트와 연관된 플래그를 보내고, 그 플래그와 연관된 이벤트 핸들러(190)는 그 플래그를 캐치하고 미리정의된 프로세스를 수행한다.
일부 실시예들에서, 이벤트 전달 명령어들(188)은 이벤트 핸들러를 활성화시키지 않으면서 서브이벤트에 관한 이벤트 정보를 전달하는 서브이벤트 전달 명령어들을 포함한다. 대신에, 서브이벤트 전달 명령어들은 일련의 서브이벤트들과 연관된 이벤트 핸들러들에 또는 적극 참여 뷰들에 이벤트 정보를 전달한다. 일련의 서브이벤트들 또는 적극 참여 뷰들과 연관된 이벤트 핸들러들은 이벤트 정보를 수신하고 미리결정된 프로세스를 수행한다.
일부 실시예들에서, 데이터 업데이터(176)는 애플리케이션(136-1)에서 이용되는 데이터를 생성 및 업데이트한다. 예를 들어, 데이터 업데이터(176)는 연락처 모듈(137)에서 이용되는 전화 번호를 업데이트하거나, 비디오 재생기 모듈에서 이용되는 비디오 파일을 저장한다. 일부 실시예들에서, 객체 업데이터(177)는 애플리케이션(136-1)에서 이용되는 객체들을 생성 및 업데이트한다. 예를 들어, 객체 업데이터(177)는 새로운 사용자 인터페이스 객체를 생성하거나, 또는 사용자 인터페이스 객체의 위치를 업데이트한다. GUI 업데이터(178)는 GUI를 업데이트한다. 예를 들어, GUI 업데이터(178)는 터치 감응형 디스플레이 상의 디스플레이를 위해 디스플레이 정보를 준비하고 이를 그래픽 모듈(132)에 전송한다.
일부 실시예들에서, 이벤트 핸들러(들)(190)는 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178)를 포함하거나 이들에 액세스한다. 일부 실시예들에서, 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178)는 각각의 애플리케이션(136-1) 또는 애플리케이션 뷰(191)의 단일 모듈 내에 포함된다. 다른 실시예들에서, 이들은 둘 이상의 소프트웨어 모듈들 내에 포함된다.
터치 감응형 디스플레이 상의 사용자 터치들의 이벤트 처리에 관하여 전술한 논의는 또한 입력 디바이스들을 갖는 다기능 디바이스들(100)을 동작시키기 위한 다른 형태들의 사용자 입력들에도 적용되지만, 그 모두가 터치 스크린들 상에서 개시되는 것이 아니라는 것을 이해해야 한다. 예를 들어, 단일 또는 다수의 키보드 누르기 또는 유지(hold)와 선택적으로 조화된 마우스 이동 및 마우스 버튼 누르기; 터치패드 상에서의, 탭, 드래그, 스크롤 등과 같은 접촉 이동들; 펜 스타일러스 입력들; 디바이스의 이동; 구두 명령어들; 검출된 눈 이동들; 생체측정 입력들; 및/또는 이들의 임의의 조합은, 인식될 이벤트를 정의하는 서브이벤트들에 대응하는 입력들로서 선택적으로 이용된다.
도 2는 일부 실시예들에 따른, 터치 스크린(112)을 갖는 휴대용 다기능 디바이스(100)를 예시한다. 터치 스크린은, 선택적으로, 사용자 인터페이스(UI)(200) 내에서 하나 이상의 그래픽들을 디스플레이한다. 이러한 실시예는 물론 하기에 기술되는 다른 실시예들에서, 사용자는, 예를 들어, 하나 이상의 손가락들(202)(도면에서 축척대로 도시되지 않음) 또는 하나 이상의 스타일러스들(203)(도면에서 축척대로 도시되지 않음)을 이용하여 그래픽 상에 제스처를 행함으로써 그래픽들 중 하나 이상을 선택하는 것이 가능하게 된다. 일부 실시예들에서, 하나 이상의 그래픽들의 선택은 사용자가 하나 이상의 그래픽들과의 접촉을 중단할 때 발생한다. 일부 실시예들에서, 제스처는 선택적으로 디바이스(100)와 접촉한 손가락의 하나 이상의 탭들, (좌측에서 우측으로의, 우측에서 좌측으로의, 상측으로의 그리고/또는 하측으로의) 하나 이상의 스와이프들, 및/또는 (우측에서 좌측으로의, 좌측에서 우측으로의, 상측으로의 그리고/또는 하측으로의) 롤링을 포함한다. 일부 구현예들 또는 상황들에서, 그래픽과 부주의하여 접촉되면 그 그래픽은 선택되지 않는다. 예를 들면, 선택에 대응하는 제스처가 탭일 때, 애플리케이션 아이콘 위를 스윕(sweep)하는 스와이프 제스처는 선택적으로, 대응하는 애플리케이션을 선택하지 않는다.
디바이스(100)는 또한 선택적으로 "홈" 또는 메뉴 버튼(204)과 같은 하나 이상의 물리적 버튼을 포함한다. 전술된 바와 같이, 메뉴 버튼(204)은 선택적으로, 디바이스(100) 상에서 선택적으로 실행되는 애플리케이션들의 세트 내의 임의의 애플리케이션(136)으로 내비게이팅하는 데 사용된다. 대안적으로, 일부 실시예들에서, 메뉴 버튼은 터치 스크린(112) 상에 디스플레이된 GUI에서 소프트 키로서 구현된다.
일부 실시예들에서, 디바이스(100)는 터치 스크린(112), 메뉴 버튼(204), 디바이스의 전원을 온/오프하고 디바이스를 잠그기 위한 푸시 버튼(206), 음량 조절 버튼(들)(208), 가입자 식별 모듈(SIM) 카드 슬롯(210), 헤드셋 잭(212), 및 도킹/충전 외부 포트(124)를 포함한다. 푸시 버튼(206)은, 선택적으로, 버튼을 누르고 버튼을 미리정의된 시간 간격 동안 누른 상태로 유지함으로써 디바이스의 전원을 온/오프시키고/시키거나; 버튼을 누르고 미리정의된 시간 간격이 경과하기 전에 버튼을 누름해제함으로써 디바이스를 잠그고/잠그거나; 디바이스를 잠금해제하거나 잠금해제 프로세스를 개시하는 데 사용된다. 대안적인 실시예에서, 디바이스(100)는 또한 마이크로폰(113)을 통해 일부 기능들의 활성화 또는 비활성화를 위한 구두 입력을 수용한다. 디바이스(100)는 또한, 선택적으로, 터치 스크린(112) 상에서의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서들(165) 및/또는 디바이스(100)의 사용자를 위해 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기들(167)을 포함한다.
도 3은 일부 실시예들에 따른, 디스플레이 및 터치 감응형 표면을 갖는 예시적인 다기능 디바이스의 블록도이다. 디바이스(300)가 휴대용일 필요는 없다. 일부 실시예들에서, 디바이스(300)는, 랩톱 컴퓨터, 데스크톱 컴퓨터, 태블릿 컴퓨터, 멀티미디어 재생기 디바이스, 내비게이션 디바이스, (어린이 학습 장난감과 같은) 교육용 디바이스, 게이밍 시스템, 또는 제어 디바이스(예컨대, 가정용 또는 산업용 제어기)이다. 디바이스(300)는 전형적으로 하나 이상의 프로세싱 유닛(CPU)들(310), 하나 이상의 네트워크 또는 다른 통신 인터페이스들(360), 메모리(370), 및 이들 컴포넌트를 상호연결하기 위한 하나 이상의 통신 버스들(320)을 포함한다. 통신 버스들(320)은 선택적으로 시스템 컴포넌트들을 상호연결하고 이들 사이의 통신을 제어하는 회로부(때때로 칩셋이라고 지칭됨)를 포함한다. 디바이스(300)는 전형적으로 터치 스크린 디스플레이인 디스플레이(340)를 포함하는 입/출력(I/O) 인터페이스(330)를 포함한다. I/O 인터페이스(330)는 또한, 선택적으로, 키보드 및/또는 마우스(또는 다른 포인팅 디바이스)(350) 및 터치패드(355), 디바이스(300) 상에 촉각적 출력들을 생성하기 위한 촉각적 출력 생성기(357)(예컨대, 도 1a를 참조하여 전술된 촉각적 출력 생성기(들)(167)와 유사함), 및 센서들(359)(예컨대, 광 센서, 가속도 센서, 근접 센서, 터치 감응형 센서, 및/또는 도 1a를 참조하여 전술된 접촉 세기 센서(들)(165)와 유사한 접촉 세기 센서)을 포함한다. 메모리(370)는 DRAM, SRAM, DDR RAM 또는 다른 랜덤 액세스 솔리드 스테이트 메모리 디바이스들과 같은 고속 랜덤 액세스 메모리를 포함하며; 선택적으로 하나 이상의 자기 디스크 저장 디바이스, 광 디스크 저장 디바이스, 플래시 메모리 디바이스, 또는 다른 비휘발성 솔리드 스테이트 저장 디바이스와 같은 비휘발성 메모리를 포함한다. 메모리(370)는 선택적으로 CPU(들)(310)로부터 원격으로 위치된 하나 이상의 저장 디바이스들을 포함한다. 일부 실시예들에서, 메모리(370)는 휴대용 다기능 디바이스(100)(도 1a)의 메모리(102)에 저장된 프로그램들, 모듈들, 및 데이터 구조들과 유사한 프로그램들, 모듈들, 및 데이터 구조들, 또는 이들의 서브세트를 저장한다. 또한, 메모리(370)는, 선택적으로, 휴대용 다기능 디바이스(100)의 메모리(102) 내에 존재하지 않는 추가의 프로그램들, 모듈들 및 데이터 구조들을 저장한다. 예를 들어, 디바이스(300)의 메모리(370)는, 선택적으로, 드로잉 모듈(380), 프레젠테이션 모듈(382), 워드 프로세싱 모듈(384), 웹사이트 제작 모듈(386), 디스크 저작 모듈(388), 및/또는 스프레드시트 모듈(390)을 저장하는 반면, 휴대용 다기능 디바이스(100)(도 1a)의 메모리(102)는, 선택적으로, 이러한 모듈들을 저장하지 않는다.
도 3에서의 앞서 식별된 요소들 각각은, 선택적으로, 전술된 메모리 디바이스들 중 하나 이상에 저장된다. 앞서 식별된 모듈들 각각은 상술한 기능을 수행하기 위한 명령어들의 세트에 대응한다. 앞서 식별된 모듈들 또는 프로그램들(예컨대, 명령어들의 세트들)은 별개의 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 따라서 다양한 실시예들에서 이들 모듈의 다양한 서브세트들이 선택적으로 조합되거나 그렇지 않으면 재배열된다. 일부 실시예들에서, 메모리(370)는 선택적으로, 상기에서 식별된 모듈들 및 데이터 구조들의 서브세트를 저장한다. 또한, 메모리(370)는, 선택적으로, 전술되지 않은 추가의 모듈들 및 데이터 구조들을 저장한다.
이제, 예를 들어, 휴대용 다기능 디바이스(100) 상에서 선택적으로 구현되는 사용자 인터페이스들의 실시예들에 주목한다.
도 4a는 일부 실시예들에 따른, 휴대용 다기능 디바이스(100) 상의 애플리케이션들의 메뉴에 대한 예시적인 사용자 인터페이스를 예시한다. 유사한 사용자 인터페이스들이 선택적으로 디바이스(300) 상에 구현된다. 일부 실시예들에서, 사용자 인터페이스(400)는 하기의 요소들, 또는 그들의 서브세트나 수퍼세트를 포함한다:
셀룰러 및 Wi-Fi 신호들과 같은 무선 통신(들)을 위한 신호 세기 표시자(들)(402);
시간(404);
블루투스 표시자(405);
배터리 상태 표시자(406);
다음과 같은, 빈번하게 사용되는 애플리케이션들에 대한 아이콘들을 갖는 트레이(408):
o 부재 중 전화들 또는 음성메일 메시지들의 개수의 표시자(414)를 선택적으로 포함하는 "전화"라고 라벨링된 전화 모듈(138)에 대한 아이콘(416);
o 읽지 않은 이메일들의 개수의 표시자(410)를 선택적으로 포함하는 "메일"이라고 라벨링된 이메일 클라이언트 모듈(140)에 대한 아이콘(418);
o "브라우저"라고 라벨링된 브라우저 모듈(147)에 대한 아이콘(420);및
o 아이팟(애플 인크.의 상표) 모듈(152)로도 지칭되는, "아이팟"이라고 라벨링된 비디오 및 음악 재생기 모듈(152)에 대한 아이콘(422);및
다음과 같은, 다른 애플리케이션들에 대한 아이콘들:
o "메시지"라고 라벨링된 IM 모듈(141)에 대한 아이콘(424);
o "캘린더"라고 라벨링된 캘린더 모듈(148)에 대한 아이콘(426);
o "사진"이라고 라벨링된 이미지 관리 모듈(144)에 대한 아이콘(428);
o "카메라"라고 라벨링된 카메라 모듈(143)에 대한 아이콘(430);
o "온라인 비디오"라고 라벨링된 온라인 비디오 모듈(155)에 대한 아이콘(432);
o "주식"이라고 라벨링된 주식 위젯(149-2)에 대한 아이콘(434);
o "지도"라고 라벨링된 지도 모듈(154)에 대한 아이콘(436);
o "날씨"라고 라벨링된 날씨 위젯(149-1)에 대한 아이콘(438);
o "시계"라고 라벨링된 알람 시계 위젯(149-4)에 대한 아이콘(440);
o "운동 지원"이라고 라벨링된 운동 지원 모듈(142)에 대한 아이콘(442);
o "메모"라고 라벨링된 메모 모듈(153)에 대한 아이콘(444);및
o 디바이스(100) 및 그의 다양한 애플리케이션들(136)에 대한 설정에의 액세스를 제공하는, "설정"이라고 라벨링된, 설정 애플리케이션 또는 모듈에 대한 아이콘(446).
도 4a에 예시된 아이콘 라벨들은 단지 예시적인 것임에 유의해야 한다. 예를 들면, 비디오 및 음악 재생기 모듈(152)에 대한 아이콘(422)은 "음악" 또는 "음악 재생기"라고 라벨링된다. 기타 라벨들이 선택적으로 다양한 애플리케이션 아이콘들에 대해 사용된다. 일부 실시예들에서, 각각의 애플리케이션 아이콘에 대한 라벨은 각각의 애플리케이션 아이콘에 대응하는 애플리케이션의 이름을 포함한다. 일부 실시예들에서, 특정 애플리케이션 아이콘에 대한 라벨은 특정 애플리케이션 아이콘에 대응하는 애플리케이션의 이름과는 구별된다.
도 4b는 디스플레이(450)(예컨대, 터치 스크린 디스플레이(112))와는 별개인 터치 감응형 표면(451)(예컨대, 도 3의 태블릿 또는 터치패드(355))을 갖는 디바이스(예컨대, 도 3의 디바이스(300)) 상의 예시적인 사용자 인터페이스를 예시한다. 디바이스(300)는 또한, 선택적으로, 터치 감응형 표면(451) 상에서의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서들(예컨대, 센서들(359) 중 하나 이상) 및/또는 디바이스(300)의 사용자에 대한 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기들(357)을 포함한다.
후속하는 예들 중 일부가 (터치 감응형 표면과 디스플레이가 조합된) 터치 스크린 디스플레이(112) 상의 입력들을 참조하여 제공될 것이지만, 일부 실시예들에서, 디바이스는 도 4b에 도시된 바와 같이 디스플레이와 별개인 터치 감응형 표면 상에서 입력들을 검출한다. 일부 실시예들에서, 터치 감응형 표면(예컨대, 도 4b의 451)은 디스플레이(예컨대, 450) 상의 주축(예컨대, 도 4b의 453)에 대응하는 주축(예컨대, 도 4b의 452)을 갖는다. 이 실시예들에 따르면, 디바이스는 디스플레이 상의 각자의 위치들에 대응하는 위치들(예컨대, 도 4b에서, 460은 468에 대응하고, 462는 470에 대응함)에서 터치 감응형 표면(451)과의 접촉들(예컨대, 도 4b의 460 및 462)을 검출한다. 이러한 방식으로, 터치 감응형 표면(예컨대, 도 4b의 451) 상에서 디바이스에 의해 검출된 사용자 입력들(예컨대, 접촉들(460, 462) 및 그 이동들)은 터치 감응형 표면이 디스플레이와는 별개일 때 디바이스에 의해 다기능 디바이스의 디스플레이(예컨대, 도 4b의 450) 상의 사용자 인터페이스를 조작하는 데 사용된다. 유사한 방법들이, 선택적으로, 본 명세서에 기술된 다른 사용자 인터페이스들에 이용된다는 것이 이해되어야 한다.
추가적으로, 하기의 예들이 손가락 입력들(예컨대, 손가락 접촉들, 손가락 탭 제스처들, 손가락 스와이프 제스처들)을 주로 참조하여 주어지는 반면, 일부 실시예들에서, 손가락 입력들 중 하나 이상은 다른 입력 디바이스로부터의 입력(예컨대, 마우스 기반 입력 또는 스타일러스 입력)으로 대체된다는 것이 이해되어야 한다. 예컨대, 스와이프 제스처는, 선택적으로, 마우스 클릭(예컨대, 접촉 대신) 및 뒤이은 스와이프의 경로를 따른 커서의 이동(예컨대, 접촉의 이동 대신)으로 대체된다. 다른 예로서, (예컨대, 접촉의 검출에 이어 접촉을 검출하는 것을 중지하는 것 대신에) 커서가 탭 제스처의 위치 위에 위치되어 있는 동안에 탭 제스처가 선택적으로 마우스 클릭으로 대체된다. 유사하게, 다수의 사용자 입력이 동시에 검출되는 경우, 다수의 컴퓨터 마우스가 선택적으로 동시에 사용되거나, 또는 마우스와 손가락 접촉들이 선택적으로 동시에 사용되는 것으로 이해하여야 한다.
도 5a는 예시적인 개인용 전자 디바이스(500)를 예시한다. 디바이스(500)는 몸체(502)를 포함한다. 일부 실시예들에서, 디바이스(500)는 디바이스들(100, 300)(예컨대, 도 1a 내지 도 4b)에 관련하여 기술된 특징부들의 일부 또는 전부를 포함할 수 있다. 일부 실시예들에서, 디바이스(500)는 터치 감응형 디스플레이 스크린(504)(이하, 터치 스크린(504))을 갖는다. 터치 스크린(504)에 대해 대안적으로 또는 부가적으로, 디바이스(500)는 디스플레이 및 터치 감응형 표면을 갖는다. 디바이스들(100, 300)과 같이, 일부 실시예들에서, 터치 스크린(504)(또는 터치 감응형 표면)은, 선택적으로, 가해지는 접촉들(예컨대, 터치들)의 세기를 검출하기 위한 하나 이상의 세기 센서들을 포함한다. 터치 스크린(504)(또는 터치 감응형 표면)의 하나 이상의 세기 센서들은 터치들의 세기를 표현하는 출력 데이터를 제공할 수 있다. 디바이스(500)의 사용자 인터페이스는 터치들의 세기에 기초하여 터치들에 응답할 수 있는데, 이는 상이한 세기들의 터치들이 디바이스(500) 상의 상이한 사용자 인터페이스 동작들을 호출할 수 있다는 것을 의미한다.
터치 세기를 검출하고 프로세싱하기 위한 예시적인 기법들은, 예를 들어, 관련 출원들: 2013년 5월 8일자로 출원되고 발명의 명칭이 "Device, Method, and Graphical User Interface for Displaying User Interface Objects Corresponding to an Application"인 국제 특허 출원 PCT/US2013/040061호(WIPO 공개 번호 WO/2013/169849호로서 공개됨), 및 2013년 11월 11일자로 출원되고 발명의 명칭이 "Device, Method, and Graphical User Interface for Transitioning Between Touch Input to Display Output Relationships"인 국제 특허 출원 PCT/US2013/069483호(WIPO 공개 번호 WO/2014/105276호로서 공개됨)에서 찾아지며, 이들 각각은 전체적으로 본 명세서에 참고로 포함된다.
일부 실시예들에서, 디바이스(500)는 하나 이상의 입력 메커니즘들(506, 508)을 갖는다. 입력 메커니즘들(506, 508)(포함되어 있는 경우)은 물리적인 것일 수 있다. 물리적 입력 메커니즘들의 예들은 푸시 버튼들 및 회전가능 메커니즘들을 포함한다. 일부 실시예들에서, 디바이스(500)는 하나 이상의 부착 메커니즘들을 갖는다. 이러한 부착 메커니즘들(포함되어 있는 경우)은 디바이스(500)가, 예를 들어, 모자, 안경, 귀걸이, 목걸이, 셔츠, 재킷, 팔찌, 시계줄, 쇠줄(chain), 바지, 벨트, 신발, 지갑, 배낭 등에 부착될 수 있게 한다. 이 부착 메커니즘들은 디바이스(500)가 사용자에 의해 착용되도록 한다.
도 5b는 예시적인 개인용 전자 디바이스(500)를 도시한다. 일부 실시예들에서, 디바이스(500)는 도 1a, 도 1b, 및 도 3에 관련하여 기술된 컴포넌트들의 일부 또는 전부를 포함할 수 있다. 디바이스(500)는 I/O 섹션(514)을 하나 이상의 컴퓨터 프로세서들(516) 및 메모리(518)와 동작가능하게 결합하는 버스(512)를 갖는다. I/O 섹션(514)은 디스플레이(504)에 연결될 수 있고, 이는 터치 감응형 컴포넌트(522), 및 선택적으로, 세기 센서(524)(예컨대, 접촉 세기 센서)를 가질 수 있다. 또한, I/O 섹션(514)은, Wi-Fi, 블루투스, 근거리 통신(NFC), 셀룰러, 및/또는 다른 무선 통신 기법들을 사용하여, 애플리케이션 및 운영 체제 데이터를 수신하기 위해 통신 유닛(530)과 연결될 수 있다. 디바이스(500)는 입력 메커니즘들(506 및/또는 508)을 포함할 수 있다. 입력 메커니즘(506)은, 선택적으로, 회전가능 입력 디바이스 또는 예를 들어 누름가능 및 회전가능한 입력 디바이스이다. 일부 예들에서, 입력 메커니즘(508)은, 선택적으로, 버튼이다.
일부 예들에서, 입력 메커니즘(508)은, 선택적으로, 마이크로폰이다. 개인용 전자 디바이스(500)는, 선택적으로, GPS 센서(532), 가속도계(534), 방향 센서(540)(예컨대, 나침반), 자이로스코프(536), 모션 센서(538), 및/또는 이들의 조합과 같은, 다양한 센서들을 포함하고, 이들 모두는 I/O 섹션(514)에 동작가능하게 연결될 수 있다.
개인용 전자 디바이스(500)의 메모리(518)는 컴퓨터 실행가능한 명령어들을 저장하기 위한 하나 이상의 비일시적 컴퓨터 판독가능 저장 매체를 포함할 수 있으며, 컴퓨터 실행가능한 명령어들은, 예를 들어, 하나 이상의 컴퓨터 프로세서들(516)에 의해 실행될 때, 컴퓨터 프로세서들로 하여금 프로세스들(700, 800, 1000, 1400, 1600, 1800, 2000, 2300)(도 7, 도 8, 도 10, 도 14, 도 18, 도 20, 도 23)을 포함하는 아래에 기술되는 기법들을 수행하게 할 수 있다. 컴퓨터 판독가능 저장 매체는 명령어 실행 시스템, 장치, 또는 디바이스에 의해 또는 그와 관련하여 사용하기 위한 컴퓨터 실행가능 명령어들을 유형적으로(tangibly) 포함하거나 저장할 수 있는 임의의 매체일 수 있다. 일부 예들에서, 저장 매체는 일시적 컴퓨터 판독가능 저장 매체이다. 일부 예들에서, 저장 매체는 비일시적 컴퓨터 판독가능 저장 매체이다. 비일시적 컴퓨터 판독가능 저장 매체는 자기, 광, 및/또는 반도체 저장소들을 포함할 수 있지만, 이들로 제한되지 않는다. 이러한 저장소의 예들은 자기 디스크들, CD, DVD, 또는 블루레이 기술들에 기초한 광 디스크들은 물론, 플래시, 솔리드 스테이트 드라이브들 등과 같은 영속적 솔리드 스테이트 메모리를 포함한다. 개인용 전자 디바이스(500)는 도 5b의 컴포넌트들 및 구성에 한정되지 않고, 다수의 구성들에서 다른 또는 추가적인 컴포넌트들을 포함할 수 있다.
여기서 사용되는 바와 같이, "어포던스"라는 용어는 디바이스들(100, 300, 및/또는 500)(도 1a, 도 3, 및 도 5a와 도 5b)의 디스플레이 스크린 상에 선택적으로 디스플레이되는 사용자 상호작용형(user-interactive) 그래픽 사용자 인터페이스 객체를 지칭한다. 예를 들어, 이미지(예컨대, 아이콘), 버튼, 및 텍스트(예컨대, 하이퍼링크) 각각이 선택적으로 어포던스를 구성한다.
본 명세서에 사용되는 바와 같이, "포커스 선택자(focus selector)"라는 용어는 사용자와 상호작용하고 있는 사용자 인터페이스의 현재 부분을 나타내는 입력 요소를 지칭한다. 커서 또는 다른 위치 마커(location marker)를 포함하는 일부 구현예들에서, 커서가 특정 사용자 인터페이스 요소(예컨대, 버튼, 창, 슬라이더 또는 다른 사용자 인터페이스 요소) 위에 있는 동안 터치 감응형 표면(예컨대, 도 3의 터치패드(355) 또는 도 4b의 터치 감응형 표면(451)) 상에서의 입력(예컨대, 누르기 입력)이 검출될 때, 특정 사용자 인터페이스 요소가 검출된 입력에 따라 조정되도록, 커서는 "포커스 선택자"로서 기능한다. 터치 스크린 디스플레이 상의 사용자 인터페이스 요소들과의 직접적인 상호작용을 인에이블하는 터치 스크린 디스플레이(예컨대, 도 1a의 터치 감응형 디스플레이 시스템(112) 또는 도 4a의 터치 스크린(112))를 포함하는 일부 구현예들에서, 입력(예컨대, 접촉에 의한 누르기 입력)이 특정 사용자 인터페이스 요소(예컨대, 버튼, 창, 슬라이더 또는 다른 사용자 인터페이스 요소)의 위치에 있는 터치 스크린 디스플레이 상에서 검출될 때, 특정 사용자 인터페이스 요소가 검출된 입력에 따라 조정되도록, 터치 스크린 상에서 검출된 접촉이 "포커스 선택자"로서 기능한다. 일부 구현예들에서, (예를 들어, 포커스를 하나의 버튼으로부터 다른 버튼으로 이동시키도록 탭 키 또는 화살표 키를 사용함으로써) 터치 스크린 디스플레이 상의 대응하는 커서의 이동 또는 접촉의 이동 없이 포커스가 사용자 인터페이스의 하나의 영역으로부터 사용자 인터페이스의 다른 영역으로 이동되며; 이러한 구현예들에서, 포커스 선택자는 사용자 인터페이스의 상이한 영역들 사이에서의 포커스의 이동에 따라 이동한다. 포커스 선택자가 갖는 특정 형태와 무관하게, 포커스 선택자는 일반적으로 (예컨대, 사용자가 상호작용하고자 하는 사용자 인터페이스의 요소를 디바이스에 나타내는 것에 의해) 사용자 인터페이스와의 사용자의 의도된 상호작용을 전달하기 위해 사용자에 의해 제어되는 사용자 인터페이스 요소(또는 터치 스크린 디스플레이 상에서의 접촉)이다. 예를 들어, 터치 감응형 표면(예컨대, 터치패드 또는 터치 스크린) 상에서 누르기 입력이 검출되는 동안 각각의 버튼 위의 포커스 선택자(예컨대, 커서, 접촉 또는 선택 박스)의 위치는 (디바이스의 디스플레이 상에 보여지는 다른 사용자 인터페이스 요소들과 달리) 사용자가 각각의 버튼을 활성화시키려고 하고 있다는 것을 나타낼 것이다.
명세서 및 청구범위에서 사용되는 바와 같이, 접촉의 "특성 세기"라는 용어는 접촉의 하나 이상의 세기들에 기초한 접촉의 특성을 지칭한다. 일부 실시예들에서, 특성 세기는 다수의 세기 샘플들에 기초한다. 특성 세기는, 선택적으로, 미리정의된 수의 세기 샘플들, 또는 (예컨대, 접촉을 검출한 이후에, 접촉의 리프트오프를 검출하기 이전에, 접촉의 이동의 시작을 검출하기 이전 또는 이후에, 접촉의 종료를 검출하기 이전에, 접촉의 세기의 증가를 검출하기 이전 또는 이후에, 그리고/또는 접촉의 세기의 감소를 검출하기 이전 또는 이후에) 미리정의된 이벤트에 대해 미리결정된 기간(예컨대, 0.05, 0.1, 0.2, 0.5, 1, 2, 5, 10초) 동안 수집된 세기 샘플들의 세트에 기초한다. 접촉의 특성 세기는, 선택적으로, 접촉의 세기들의 최대 값, 접촉의 세기들의 중간 값(mean value), 접촉의 세기들의 평균값(average value), 접촉의 세기들의 상위 10 백분위 값(top 10 percentile value), 접촉의 세기들의 최대 값의 절반의 값, 접촉의 세기들의 최대 값의 90 퍼센트의 값 등 중 하나 이상에 기초한다. 일부 실시예들에서, 접촉의 지속기간은 (예컨대, 특성 세기가 시간의 경과에 따른 접촉의 세기의 평균일 때) 특성 세기를 결정하는 데 사용된다. 일부 실시예들에서, 동작이 사용자에 의해 수행되었는지 여부를 결정하기 위해, 특성 세기가 하나 이상의 세기 임계치들의 세트와 비교된다. 예를 들어, 하나 이상의 세기 임계치의 세트는 선택적으로 제1 세기 임계치 및 제2 세기 임계치를 포함한다. 이 예에서, 제1 임계치를 초과하지 않는 특성 세기를 갖는 접촉의 결과, 제1 동작이 행해지고, 제1 세기 임계치를 초과하지만 제2 세기 임계치를 초과하지 않는 특성 세기를 갖는 접촉의 결과, 제2 동작이 행해지며, 제2 임계치 초과의 특성 세기를 갖는 접촉의 결과, 제3 동작이 행해진다. 일부 실시예들에서, 특성 세기와 하나 이상의 임계치 간의 비교는, 제1 동작을 수행할지 제2 동작을 수행할지 결정하기 위해 사용되기보다는, 하나 이상의 동작을 수행할지 여부(예컨대, 각각의 동작을 수행할지 또는 각각의 동작을 수행하는 것을 보류할지 여부)를 결정하기 위해 사용된다.
도 5c는 복수의 세기 센서들(524A 내지 524D)을 사용하여 터치 감응형 디스플레이 스크린(504) 상에서의 복수의 접촉들(552A 내지 552E)을 검출하는 것을 예시한다. 도 5c는 세기 단위들에 대한 세기 센서들(524A 내지 524D)의 현재 세기 측정치들을 보여주는 세기 다이어그램들을 추가로 포함한다. 이 예에서, 세기 센서들(524A, 524D)의 세기 측정치들은 각각 9개의 세기 단위들이고, 세기 센서들(524B, 524C)의 세기 측정치들은 각각 7개의 세기 단위들이다. 일부 구현예들에서, 총 세기는 복수의 세기 센서들(524A 내지 524D)의 세기 측정치들의 합이고, 이는 이 예에서 32개 세기 단위들이다. 일부 실시예들에서, 각각의 접촉에는 총 세기의 일부분인 각각의 세기가 할당된다. 도 5d는 힘의 중심(554)으로부터의 각각의 거리에 기초하여 접촉들(552A 내지 552E)에 총 세기를 할당하는 것을 예시한다. 이 예에서, 접촉들(552A, 552B, 552E)에는 각각 총 세기 중 8개 세기 단위들의 접촉의 세기가 할당되고, 접촉들(552C, 552D)에는 각각 총 세기 중 4개 세기 단위들의 접촉의 세기가 할당된다. 보다 일반적으로, 일부 구현예들에서, 각각의 접촉(j)에는 미리정의된 수학 함수 Ij = Aㅇ(Dj/ΣDi)에 따라 총 세기(A)의 일부분인 각각의 세기(Ij)가 할당되는데, 여기서 Dj는 힘의 중심까지의 각각의 접촉(j)의 거리이고, ΣDi는 힘의 중심까지의 모든 각각의 접촉들의 거리들의 총합이다(예를 들어, i=1 내지 마지막). 도 5c 및 도 5d를 참조하여 설명된 동작들이 디바이스(100, 300, 또는 500)와 유사하거나 동일한 전자 디바이스를 사용하여 수행될 수 있다. 일부 실시예들에서, 접촉의 특성 세기는 접촉의 하나 이상의 세기들에 기초한다. 일부 실시예들에서, 세기 센서들을 이용하여 단일 특성 세기(예컨대, 단일 접촉의 단일 특성 세기)를 결정한다. 세기 다이어그램들은 디스플레이된 사용자 인터페이스의 일부분이 아니고, 독자를 돕기 위해 도 5c 및 도 5d에 포함된 것임을 주의해야 한다.
일부 실시예들에서, 특성 세기를 결정하기 위해 제스처의 일부분이 식별된다. 예를 들어, 터치 감응형 표면은, 선택적으로, 시작 위치로부터 전이하여 종료 위치(이 지점에서 접촉의 세기가 증가함)에 도달하는 연속적인 스와이프 접촉을 수신한다. 이 예에서, 종료 위치에서의 접촉의 특성 세기는 선택적으로 스와이프 접촉 전체가 아니라 연속적인 스와이프 접촉의 일부분에만(예컨대, 종료 위치에서의 스와이프 접촉의 부분에만) 기초한다. 일부 실시예들에서, 접촉의 특성 세기를 결정하기 전에 선택적으로 스와이프 접촉의 세기들에 평활화 알고리즘이 적용된다. 예를 들어, 평활화 알고리즘은, 선택적으로, 비가중 이동 평균(unweighted sliding-average) 평활화 알고리즘, 삼각(triangular) 평활화 알고리즘, 메디안 필터(median filter) 평활화 알고리즘, 및/또는 지수(exponential) 평활화 알고리즘 중 하나 이상을 포함한다. 일부 상황들에서, 이 평활화 알고리즘들은 특성 세기를 결정하기 위해 스와이프 접촉의 세기들에서의 좁은 급등(spike)들 또는 급감(dip)들을 제거한다.
터치 감응형 표면 상에서의 접촉의 세기는, 선택적으로, 접촉-검출 세기 임계치, 가볍게 누르기 세기 임계치, 깊게 누르기 세기 임계치, 및/또는 하나 이상의 다른 세기 임계치와 같은, 하나 이상의 세기 임계치에 대해 특성화된다. 일부 실시예들에서, 가볍게 누르기 세기 임계치는, 디바이스가 물리적 마우스의 버튼 또는 트랙패드를 클릭하는 것과 전형적으로 연관된 동작들을 수행하게 될 세기에 대응한다. 일부 실시예들에서, 깊게 누르기 세기 임계치는, 디바이스가 물리적 마우스의 버튼 또는 트랙패드를 클릭하는 것과 전형적으로 연관된 동작들과는 상이한 동작들을 수행하게 될 세기에 대응한다. 일부 실시예들에서, 접촉이 가볍게 누르기 세기 임계치 미만의(예컨대, 그리고 공칭 접촉 검출 세기 임계치(이 미만에서는 접촉이 더 이상 검출되지 않음) 초과의) 특성 세기로 검출될 때, 디바이스는 가볍게 누르기 세기 임계치 또는 깊게 누르기 세기 임계치와 연관된 동작을 수행함이 없이 터치 감응형 표면 상의 접촉의 이동에 따라 포커스 선택자를 이동시킬 것이다. 일반적으로, 달리 언급되지 않는 한, 이 세기 임계치들은 사용자 인터페이스 도면들의 상이한 세트들 사이에서 일관성이 있다.
가볍게 누르기 세기 임계치 미만의 세기로부터 가볍게 누르기 세기 임계치와 깊게 누르기 세기 임계치 사이의 세기로의 접촉의 특성 세기의 증가는 때때로 "가볍게 누르기" 입력으로서 지칭된다. 깊게 누르기 세기 임계치 미만의 세기로부터 깊게 누르기 세기 임계치 초과의 세기로의 접촉의 특성 세기의 증가는 때때로 "깊게 누르기" 입력으로서 지칭된다. 접촉 검출 세기 임계치 미만의 세기로부터 접촉 검출 세기 임계치와 가볍게 누르기 세기 임계치 사이의 세기로의 접촉의 특성 세기의 증가는 때때로 터치 표면 상에서의 접촉을 검출하는 것으로서 지칭된다. 접촉 검출 세기 임계치 초과의 세기로부터 접촉 검출 세기 임계치 미만의 세기로의 접촉의 특성 세기의 감소는 때때로 터치 표면으로부터의 접촉의 리프트오프를 검출하는 것으로서 지칭된다. 일부 실시예들에서, 접촉 검출 세기 임계치는 영(0)이다. 일부 실시예들에서, 접촉 검출 세기 임계치는 0 초과이다.
본 명세서에 기술된 일부 실시예들에서, 하나 이상의 동작들은, 각각의 누르기 입력을 포함하는 제스처를 검출하는 것에 응답하여 또는 각각의 접촉(또는 복수의 접촉들)으로 수행되는 각각의 누르기 입력을 검출하는 것에 응답하여 수행되며, 여기서 각각의 누르기 입력은 누르기 입력 세기 임계치 초과의 접촉(또는 복수의 접촉들)의 세기의 증가를 검출하는 것에 적어도 부분적으로 기초하여 검출된다. 일부 실시예들에서, 각각의 동작은, 누르기 입력 세기 임계치 초과의 각각의 접촉의 세기의 증가(예컨대, 각각의 누르기 입력의 "다운 스트로크(down stroke)")를 검출하는 것에 응답하여 수행된다. 일부 실시예들에서, 누르기 입력은 누르기 입력 세기 임계치 초과의 각각의 접촉의 세기의 증가 및 누르기 입력 세기 임계치 미만의 접촉의 세기의 후속하는 감소를 포함하며, 각각의 동작은 누르기 입력 임계치 미만의 각각의 접촉의 세기의 후속하는 감소(예컨대, 각각의 누르기 입력의 "업 스트로크(up stroke)")를 검출하는 것에 응답하여 수행된다.
도 5e 내지 도 5h는 도 5e의 가볍게 누르기 세기 임계치(예컨대, "ITL") 미만의 세기로부터 도 5h의 깊게 누르기 세기 임계치(예컨대, "ITD") 초과의 세기로의 접촉(562)의 세기의 증가에 대응하는 누르기 입력을 포함하는 제스처의 검출을 예시한다. 미리정의된 영역(574)에 디스플레이되는 애플리케이션 아이콘들(572A 내지 572D)을 포함하는 디스플레이된 사용자 인터페이스(570) 상에서, 커서(576)가 앱 2에 대응하는 애플리케이션 아이콘(572B) 위에 디스플레이되는 동안, 접촉(562)을 이용하여 수행된 제스처가 터치 감응형 표면(560) 상에서 검출된다. 일부 실시예들에서, 제스처는 터치 감응형 디스플레이(504) 상에서 검출된다. 세기 센서들은 터치 감응형 표면(560) 상에서의 접촉들의 세기를 검출한다. 디바이스는 접촉(562)의 세기가 깊게 누르기 세기 임계치(예컨대, "ITD")를 초과하여 정점에 도달한 것으로 결정한다. 접촉(562)은 터치 감응형 표면(560) 상에서 유지된다. 제스처의 검출에 응답하여, 그리고 제스처 동안 깊게 누르기 세기 임계치(예컨대, "ITD")를 초과하는 세기를 갖는 접촉(562)에 따라, 앱 2에 대해 최근에 열어본 문서들의 축소 스케일 표현들(578A 내지 578C)(예컨대, 섬네일(thumbnail)들)이 디스플레이되는데, 이는 도 5f 내지 도 5h에 도시된 바와 같다. 일부 실시예들에서, 하나 이상의 세기 임계치들에 비교되는 세기는 접촉의 특성 세기이다. 접촉(562)에 대한 세기 다이어그램은 디스플레이된 사용자 인터페이스의 일부분이 아니고, 독자를 돕기 위하여 도 5e 내지 도 5h에 포함된다는 것에 유의해야 한다.
일부 실시예들에서, 표현들(578A 내지 578C)의 디스플레이는 애니메이션을 포함한다. 예를 들어, 도 5f에 도시된 바와 같이, 표현(578A)은 초기에 애플리케이션 아이콘(572B)에 근접하게 디스플레이된다. 애니메이션이 진행됨에 따라, 도 5g에 도시된 바와 같이, 표현(578A)은 위로 이동하고 표현(578B)은 애플리케이션 아이콘(572B)에 근접하게 디스플레이된다. 이어서, 도 5h에 도시된 바와 같이, 표현(578A)은 위로 이동하고, 표현(578B)은 표현(578A)을 향해 위로 이동하고, 표현(578C)은 애플리케이션 아이콘(572B)에 근접하게 디스플레이된다. 표현들(578A 내지 578C)은 아이콘(572B) 위에 어레이를 형성한다. 일부 실시예들에서, 도 5f 및 도 5g에 도시된 바와 같이, 애니메이션은 접촉(562)의 세기에 따라 진행되는데, 접촉(562)의 세기가 깊게 누르기 세기 임계치(예컨대, "ITD")를 향해 증가함에 따라 표현들(578A 내지 578C)이 나타나서 위로 이동한다. 일부 실시예들에서, 애니메이션의 진행상황이 기초하는 세기는 접촉의 특성 세기이다. 도 5e 내지 도 5h를 참조하여 기술된 동작들은 디바이스(100, 300, 또는 500)와 유사하거나 동일한 전자 디바이스를 사용하여 수행될 수 있다.
일부 실시예들에서, 디바이스는 때때로 "지터(jitter)"로 지칭되는 우발적인 입력들을 회피하기 위해 세기 히스테리시스를 채용하며, 여기서 디바이스는 누르기 입력 세기 임계치에 대한 미리정의된 관계를 갖는 히스테리시스 세기 임계치(예컨대, 히스테리시스 세기 임계치는 누르기 입력 세기 임계치보다 더 낮은 X 세기 단위이거나, 히스테리시스 세기 임계치는 누르기 입력 세기 임계치의 75%, 90% 또는 어떤 적절한 비율임)를 정의하거나 선택한다. 이와 같이, 일부 실시예들에서, 누르기 입력은 누르기 입력 세기 임계치 초과의 각각의 접촉의 세기의 증가 및 누르기 입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만의 접촉의 세기의 후속하는 감소를 포함하며, 각각의 동작은 히스테리시스 세기 임계치 미만의 각각의 접촉의 세기의 후속하는 감소(예컨대, 각각의 누르기 입력의 "업 스트로크")를 검출하는 것에 응답하여 수행된다. 유사하게, 일부 실시예들에서, 누르기 입력은 디바이스가 히스테리시스 세기 임계치 이하에서의 세기로부터 누르기 입력 세기 임계치 이상에서의 세기로의 접촉의 세기의 증가, 및 선택적으로, 히스테리시스 세기 이하에서의 세기로의 접촉의 세기의 후속적인 감소를 검출하는 경우에만 검출되고, 각각의 동작은 누르기 입력(예컨대, 주변환경에 따른 접촉의 세기의 증가 또는 접촉의 세기의 감소)을 검출하는 것에 응답하여 수행된다.
설명의 편의상, 누르기 입력 세기 임계치와 연관된 누르기 입력에 응답하여 또는 누르기 입력을 포함하는 제스처에 응답하여 수행되는 동작들의 설명은, 선택적으로, 누르기 입력 세기 임계치 초과의 접촉의 세기의 증가, 히스테리시스 세기 임계치 미만의 세기로부터 누르기 입력 세기 임계치 초과의 세기로의 접촉의 세기의 증가, 누르기 입력 세기 임계치 미만의 접촉의 세기의 감소, 및/또는 누르기 입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만의 접촉의 세기의 감소 중 어느 하나를 검출하는 것에 응답하여 트리거된다. 또한, 동작이 누르기 입력 세기 임계치 미만의 접촉의 세기의 감소를 검출하는 것에 응답하여 수행되는 것으로서 기술되어 있는 예들에서, 동작은, 선택적으로, 누르기 입력 세기 임계치에 대응하고 그보다 더 낮은 히스테리시스 세기 임계치 미만의 접촉의 세기의 감소를 검출하는 것에 응답하여 수행된다.
도 5i는 예시적인 전자 디바이스(580)를 예시한다. 디바이스(580)는 몸체(580A)를 포함한다. 일부 실시예들에서, 디바이스(580)는 디바이스들(100, 300, 500)(예컨대, 도 1a 내지 도 5b)과 관련하여 기술된 특징부들의 일부 또는 전부를 포함할 수 있다. 일부 실시예들에서, 디바이스(580)는 하나 이상의 스피커들(580B)(몸체(580A) 내에 은폐됨), 하나 이상의 마이크로폰들(580C), 하나 이상의 터치 감응형 표면들(580D), 및 하나 이상의 디스플레이들(580E)을 갖는다. 디스플레이 및 터치 감응형 표면(580D)에 대해 대안적으로 또는 그에 더하여, 디바이스는 터치 감응형 디스플레이(터치스크린으로도 지칭됨)를 갖는다. 디바이스들(100, 300, 500)과 같이, 일부 실시예들에서, 터치 감응형 표면(580D)(또는 터치 스크린)은 선택적으로, 가해지는 접촉들(예컨대, 터치들)의 세기를 검출하기 위한 하나 이상의 세기 센서들을 포함한다. 터치 감응형 표면(580D)(또는 터치스크린)의 하나 이상의 세기 센서들은 터치들의 세기를 표현하는 출력 데이터를 제공할 수 있다. 디바이스(580)의 사용자 인터페이스는 터치들의 세기에 기초하여 터치들에 응답할 수 있는데, 이는 상이한 세기들의 터치들이 디바이스(580) 상의 상이한 사용자 인터페이스 동작들을 호출할 수 있다는 것을 의미한다. 일부 실시예들에서, 하나 이상의 디스플레이들(580E)은 하나 이상의 발광 다이오드(LED)들이다. 예를 들어, 디스플레이는 단일 LED, LED 클러스터(예컨대, 적색, 녹색, 및 청색 LED), 복수의 개별 LED들, 복수의 개별 LED 클러스터들, 또는 하나 이상의 LED들의 다른 배열일 수 있다. 예를 들어, 디스플레이(580E)는 원형 형상(예컨대, 링)으로 배열되는 9개의 개별 LED 클러스터들의 어레이일 수 있다. 일부 예들에서, 하나 이상의 디스플레이들은 하나 이상의 다른 유형의 발광 요소들로 구성된다.
도 5j는 예시적인 개인용 전자 디바이스(580)를 도시한다. 일부 실시예들에서, 디바이스(580)는 도 1a, 도 1b, 도 3, 도 5a, 및 도 5b와 관련하여 설명된 컴포넌트들의 일부 또는 전부를 포함할 수 있다. 디바이스(580)는 I/O 섹션(594)을 하나 이상의 컴퓨터 프로세서들(596) 및 메모리(598)와 동작가능하게 결합하는 버스(592)를 갖는다. I/O 섹션(594)은 디스플레이(582)에 연결될 수 있고, 이는 터치 감응형 컴포넌트(584), 및 선택적으로, 세기 센서(585)(예컨대, 접촉 세기 센서)를 가질 수 있다. 일부 실시예들에서, 터치 감응형 컴포넌트(584)는 디스플레이(582)와는 별개의 컴포넌트이다. 또한, I/O 섹션(594)은, Wi-Fi, 블루투스, 근거리 통신(NFC), 셀룰러, 및/또는 다른 무선 통신 기법들을 사용하여, 애플리케이션 및 운영 체제 데이터를 수신하기 위해 통신 유닛(590)과 연결될 수 있다. 디바이스(580)는 입력 메커니즘들(588)을 포함할 수 있다. 일부 예들에서, 입력 메커니즘(588)은, 선택적으로, 버튼이다. 일부 예들에서, 입력 메커니즘(588)은, 선택적으로, 마이크로폰이다. 입력 메커니즘(588)은, 선택적으로, 복수의 마이크로폰들(예컨대, 마이크로폰 어레이)이다.
전자 디바이스(580)는 오디오를 출력하기 위한 스피커(586)를 포함한다. 디바이스(580)는, 오디오 데이터를 수신하고 오디오 데이터를 전기 신호로 변환하며 전기 신호를 스피커(586)로 송신하는 오디오 회로부(예컨대, I/O 섹션(594))를 포함할 수 있다. 스피커(586)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. (예컨대, I/O 섹션(594) 내의) 오디오 회로부는 또한, 음파들로부터 마이크로폰(예컨대, 입력 메커니즘(588))에 의해 변환된 전기 신호들을 수신한다. (예컨대, I/O 섹션(594) 내의) 오디오 회로부는 전기 신호를 오디오 데이터로 변환한다. 오디오 데이터는, 선택적으로, I/O 섹션(594)에 의해 메모리(598) 및/또는 (예컨대, 통신 유닛(590) 내의) RF 회로부로부터 인출되고/되거나 그로 송신된다.
개인용 전자 디바이스(580)의 메모리(598)는 컴퓨터 실행가능한 명령어들을 저장하기 위한 하나 이상의 비일시적 컴퓨터 판독가능 저장 매체를 포함할 수 있으며, 컴퓨터 실행가능한 명령어들은, 예를 들어, 하나 이상의 컴퓨터 프로세서들(596)에 의해 실행될 때, 컴퓨터 프로세서들로 하여금 프로세스들(800(도 8), 1000(도 10), 1200(도 12), 1400(도 14), 1600(도 16), 1800(도 18), 2000(도 20), 및 2300(도 23))을 포함하는 아래에 기술되는 기법들을 수행하게 할 수 있다. 컴퓨터 판독가능 저장 매체는 명령어 실행 시스템, 장치, 또는 디바이스에 의해 또는 그와 관련하여 사용하기 위한 컴퓨터 실행가능 명령어들을 유형적으로(tangibly) 포함하거나 저장할 수 있는 임의의 매체일 수 있다. 일부 예들에서, 저장 매체는 일시적 컴퓨터 판독가능 저장 매체이다. 일부 예들에서, 저장 매체는 비일시적 컴퓨터 판독가능 저장 매체이다. 비일시적 컴퓨터 판독가능 저장 매체는 자기, 광, 및/또는 반도체 저장소들을 포함할 수 있지만, 이들로 제한되지 않는다. 이러한 저장소의 예들은 자기 디스크들, CD, DVD, 또는 블루레이 기술들에 기초한 광 디스크들은 물론, 플래시, 솔리드 스테이트 드라이브들 등과 같은 영속적 솔리드 스테이트 메모리를 포함한다. 개인용 전자 디바이스(580)는 도 5j의 컴포넌트들 및 구성에 한정되지 않고, 다수의 구성들에서 다른 또는 추가적인 컴포넌트들을 포함할 수 있다.
본 명세서에 사용되는 바와 같이, "설치된 애플리케이션"은 전자 디바이스(예컨대, 디바이스들(100, 300, 및/또는 500)) 상에 다운로드되어 디바이스 상에서 시작될(예컨대, 열리게 될) 준비가 된 소프트웨어 애플리케이션을 지칭한다. 일부 실시예들에서, 다운로드된 애플리케이션은, 다운로드된 패키지로부터 프로그램 부분들을 추출하여 추출된 부분들을 컴퓨터 시스템의 운영 체제와 통합하는 설치 프로그램을 통해 설치된 애플리케이션이 된다.
본 명세서에 사용되는 바와 같이, 용어들 "열린 애플리케이션" 또는 "실행 중인 애플리케이션"은 (예컨대, 디바이스/글로벌 내부 상태(157) 및/또는 애플리케이션 내부 상태(192)의 일부로서) 보유된 상태 정보를 갖는 소프트웨어 애플리케이션을 지칭한다. 열린 또는 실행 중인 애플리케이션은 선택적으로 다음의 애플리케이션 유형들 중 임의의 것이다:
애플리케이션이 사용되고 있는 디바이스의 디스플레이 스크린 상에 현재 디스플레이되는 활성 애플리케이션;
현재 디스플레이되지 않지만, 애플리케이션에 대한 하나 이상의 프로세스들이 하나 이상의 프로세서들에 의해 프로세싱되고 있는 백그라운드 애플리케이션(또는 백그라운드 프로세스); 및
실행 중이 아니지만, 메모리(각각 휘발성 및 비휘발성)에 저장되고 애플리케이션의 실행을 재개하는 데 사용될 수 있는 상태 정보를 갖는 보류(suspended) 또는 휴면(hibernated) 애플리케이션.
본 명세서에 사용되는 바와 같이, 용어 "닫힌 애플리케이션"은 보유된 상태 정보가 없는 소프트웨어 애플리케이션들을 지칭한다(예컨대, 닫힌 애플리케이션들에 대한 상태 정보가 디바이스의 메모리에 저장되어 있지 않다). 따라서, 애플리케이션을 닫는 것은 애플리케이션에 대한 애플리케이션 프로세스들을 중지 및/또는 제거하고, 디바이스의 메모리로부터 애플리케이션에 대한 상태 정보를 제거하는 것을 포함한다. 일반적으로, 제1 애플리케이션에 있는 동안 제2 애플리케이션을 여는 것은 제1 애플리케이션을 닫지 않는다. 제2 애플리케이션이 디스플레이되고 제1 애플리케이션이 디스플레이되는 것이 중지되는 경우, 제1 애플리케이션은 백그라운드 애플리케이션으로 된다.
이제, 휴대용 다기능 디바이스(100), 디바이스(300), 디바이스(500), 디바이스(580)와 같은 전자 디바이스 상에서 구현되는 사용자 인터페이스("UI")들 및 연관된 프로세스들의 실시예들에 주목한다.
도 6a 내지 도 6p는 일부 실시예들에 따른, 오디오 재생을 제어하기 위한 예시적인 사용자 인터페이스들을 예시한다. 이 도면들에서의 사용자 인터페이스들은 도 7 및 도 8의 방법들을 포함하여 하기에 기술되는 프로세스들을 예시하는 데 사용된다.
디바이스들은 근접성 조건의 만족을 사용하여 하나 이상의 기능들을 수행할 수 있다. 하나의 디바이스의 다른 디바이스에 대한 근접성의 사용은, 사용자(예컨대, 디바이스들 중 하나를 보유함)가 디바이스들 중 하나 또는 둘 모두 상에서 일부 액션(예컨대, 인터페이스를 호출함)을 수행하고 싶을 것이라는 명확한 표시자로서 사용될 수 있다. 예를 들어, 이것은 기능을 수행하기 위한 과도한 사용자 입력(예를 들어, 디바이스 디스플레이 상에서 하나 이상의 메뉴들을 내비게이팅하기 위함)을 회피함으로써 디바이스 리소스들의 낭비를 방지할 수 있다. 또한, 이것은 예를 들어 기능을 수행하는(예컨대, 디스플레이 상에서 인터페이스를 호출함) 데 요구되는 사용자 입력들의 수를 감소시킴으로써 사용자 시간을 절약할 수 있다.
도 6a는 예시적인 전자 디바이스(600)(예컨대, 전화) 및 디바이스(650)(예컨대, 스마트 스피커)를 예시한다. 일부 실시예들에서, 디바이스(600)는 디바이스(100, 300, 또는 500)의 하나 이상의 특징부들을 포함한다. 디바이스(650)는 디바이스(580)의 하나 이상의 특징부들을 포함한다. 일부 실시예들에서, 디바이스(650)는 디바이스(100, 300, 또는 500)의 하나 이상의 특징부들을 포함한다. 도 6a에 예시된 실시예에서, 디바이스(650)는 주방에 위치되고, "주방 스피커"로 지정된다. 디바이스(600) 및 디바이스(650)는 디바이스(600) 및 디바이스(650)가 각각 다른 디바이스에 관한 정보를 획득할 수 있도록 (예컨대, 블루투스, 근거리 통신, 네트워크 연결을 통해) 연결된다. 그러한 정보는 디바이스 상에서 현재 재생중이거나 최근에 재생된 오디오에 관한 정보를 포함할 수 있다.
도 6a 내지 도 6p는 디바이스(600) 및 디바이스(650)의 예시적인 물리적 배열들을 예시한다. 도 6a는 디바이스(650) 및 디바이스(650)로부터 상대적으로 긴 거리에 있는 디바이스(600)를 포함하는 제1 시나리오를 예시한다. 도 6a는 제1 시나리오의 예시적인 조감도를 예시한다. 도 6a에 도시된 바와 같이, 디바이스(600) 및 디바이스(650)는 멀리 떨어져 있다. 도 6a는 디바이스(650) 주위의 근접성 조건 범위 표시자(652)를 도시한다. 근접성 조건 범위 표시자는 또한 본 명세서에서 "근접 구역 표시자" 또는 간단히 "근접 구역"으로 지칭된다. 디바이스(600)는 근접성 조건 범위 표시자(652)의 내부에 있지 않다. 근접성 조건 범위 표시자들은 이해를 돕기 위해 도면들에 포함되지만, 디바이스(600) 또는 디바이스(650) 상에 디스플레이되지 않는다. 근접성 조건 범위 표시자(652)는 시각적 보조로서 포함되고, 근접성 조건을 만족할 물리적 근접성을 표현하도록 의도된다. 예를 들어, 범위 표시자(652)는 디바이스(650)의 근거리 통신 검출 회로부의 범위를 표현할 수 있다. 일부 실시예들에서, 디바이스들 사이의 근접성을 검출하기 위해 임의의 적절한 기법이 사용될 수 있다. 예를 들어, 일부 예들에서, 광대역 무선 연결이 사용된다. 광대역 무선 연결은, 예를 들어, 하나 이상의 디바이스들의 방향성, 거리, 및 배향 중 하나 이상을 결정하는 데 사용된다. 따라서, 근접성 조건 범위 표시자(652) 내의(예컨대, 부분적으로 또는 완전히) 검출가능한 디바이스의 존재는 근접성 조건을 만족할 것이지만, 검출가능한 디바이스가 범위 표시자(652)의 외부에 위치되는 경우에는 그렇지 않을 것이다. 당업자는 물리적 근접성의 검출 범위가 불균일할 수 있고, 다수의 변수들(예컨대, 무선 간섭, 공기 습도 등)에 의해 영향을 받을 수 있고, 3차원의 공간 내의 지점들을 포함할 수 있다는 것을 이해할 것이며, 이들 모두는 본 개시내용의 범주 내에 있도록 의도된다. 따라서, 근접성 조건 범위 표시자(652)의 그래픽 표현은 근접성 조건이 만족되는지 여부를 결정하는 것의 범주를 제한하도록 의도되지 않는다. 또한, 도면들은 반드시 축척대로 도시된 것은 아니며, 단지 시각적 보조로서 포함된다. 따라서, 달리 언급되지 않는 한, 도면들에 도시된 특징부들의 크기 및 축척은 가까이 근접하는 데 또는 근접성 조건을 만족하는 데 요구되는 거리에 대한 제한으로서 의도되지 않는다.
도 6a는 디바이스(600)의 오디오 활동을 나타내는 오디오 활동 표시자(625), 및 디바이스(650)의 오디오 활동을 나타내는 오디오 활동 표시자(675)를 도시한다. 오디오 활동 표시자(625) 및 오디오 활동 표시자(675)는 도 6a에 예시된 시나리오에서, 오디오 활동 표시자(625) 및 오디오 활동 표시자(675) 내의 음표들을 지나는 대각선들에 의해 나타낸 바와 같이, 디바이스(600) 및 디바이스(650) 둘 모두가 현재 오디오를 출력하고 있지 않다는(예를 들어, 미디어를 재생하고 있지 않는다는) 것을 나타낸다. 오디오 활동 표시자들은 이해를 돕기 위해 도면들에 포함되지만, 디바이스(600) 또는 디바이스(650) 상에 디스플레이되지 않는다. 활동 표시들에 더하여, 이하에서 기술되는 도면들 중 일부는 또한 오디오 표현들(예컨대, 672a 내지 672c)을 포함하며, 이들은 또한 디바이스(600) 상에서 재생되는 특정 미디어 아이템의 이해를 돕기 위해 도면들에 포함된다. 이러한 오디오 표현들은 또한 디바이스(600) 또는 디바이스(650) 상에 디스플레이되지 않는다.
도 6b는 디바이스(650)로부터 짧은 거리에 있는 디바이스(600)를 포함하는 제2 시나리오를 예시한다. 도 6b는 제2 시나리오의 예시적인 조감도를 예시한다. 6b에 도시된 바와 같이, 디바이스(600) 및 디바이스(650)는 함께 가깝게 있고, 이제 디바이스(600)는 적어도 부분적으로 근접성 조건 범위 표시자(652) 내에 있다. 근접성 조건 범위 표시자(652)는 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다).
물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(600) 상에서 최근에 재생된 미디어 아이템을 표현하는 미디어 정보 어포던스(606)를 디스플레이한다. 예시적인 미디어 아이템들은 음악 트랙, 오디오 북(또는 챕터와 같은, 그의 일부분), 팟캐스트, 비디오, 및 전화 통화를 포함하지만, 이들로 제한되지 않는다. 일부 실시예들에서, 미디어 정보 어포던스(606)는 디바이스(600) 및 디바이스(650) 둘 모두가 현재 오디오를 재생하고 있지 않다는 결정에 따라 디바이스(600) 상에서 최근에 재생된 미디어 아이템을 표현한다. 도 6b에서, 미디어 정보 어포던스(606)는 음악 트랙(예컨대, 노래)을 표현한다.
미디어 정보 어포던스(606)는 선택적으로 미디어 아이템에 관한 정보를 제공하는 여러 그래픽 요소들을 포함하며, 이들은 다음을 포함한다: (1) 디바이스(600)가 근접해 있는 디바이스(예컨대, 주방 스피커로도 지칭되는, 디바이스(650))를 나타내는 외부 디바이스 표시자(606-1); (2) 미디어 정보 어포던스(606)와 연관된 액션 또는 기능(예컨대, 미디어 정보 어포던스(606)의 선택에 응답하여 수행되는 액션)을 나타내는 액션 표시자(606-2); (3) 미디어 아이템을 식별하는 정보(예컨대, 노래 제목("Summertime") 및 아티스트 "DJ AP")를 제공하는 미디어 아이템 표시자(606-3); (4) 미디어 아이템의 상태(예컨대, "최근에 재생됨")를 설명하는 미디어 아이템 상태 표시자(606-4); 및 (5) 미디어 아이템과 연관된 이미지(예컨대, 노래가 포함된 앨범의 앨범 커버)를 포함하는 미디어 아이템 그래픽(606-5).
액션 표시자(606-2)에 의해 나타낸 바와 같이, 미디어 정보 어포던스(606)의 선택은 미디어 정보 어포던스(606)와 연관된 미디어 아이템이 디바이스(650) 상에서 재생되게 할 수 있다. 일부 실시예들에서, 미디어 정보 어포던스(606)의 선택에 응답하여 수행되는 액션은 입력의 유형에 의존한다. 예를 들어, 예컨대 입력(610a)에 의해 예시된 바와 같은, 미디어 정보 어포던스(606) 상의 입력에 응답하여, 디바이스(650)는 동작을 수행할 수 있다. 예를 들어, 입력이 탭 제스처인 경우, 디바이스(650) 상에서의 미디어 아이템의 재생이 개시되는 반면, 입력이 미디어 정보 어포던스(606) 상에서 또는 그 근처에서 시작하는 하향 스와이프 제스처인 경우에는 상이한 동작이 수행된다.
도 6b에 예시된 바와 같이, 디바이스(600)는 미디어 정보 어포던스(606) 상의 입력(예컨대, 스와이프)을 수신할 수 있다. 입력을 수신하는 것에 응답하여, 그리고 입력이 스와이프라는 결정에 따라(예컨대, 탭과는 대조적으로), 디바이스(600)는 도 6c에 도시된 바와 같이, 미디어 정보 어포던스(608)를 디스플레이한다. 도 6b 및 도 6c에 예시된 실시예에서, 디바이스(600)는 또한 미디어 정보 어포던스(606)의 디스플레이를 중지하고, 미디어 정보 어포던스(608)에 의해 점유되지 않은 사용자 인터페이스(604)의 부분을 부분적으로 가린다(예를 들어, 그레이 아웃, 블러 아웃). 미디어 정보 어포던스(608)는, 선택적으로, 다음을 포함하는, 미디어 아이템에 관한 정보를 제공하는 여러 그래픽 요소들을 포함한다: (1) 디바이스(600)가 근접해 있는 디바이스(예컨대, 주방 스피커로도 지칭되는, 디바이스(650))를 나타내는 외부 디바이스 표시자(608-1); (2) 미디어 정보 어포던스(608)와 연관된 액션 또는 기능(예컨대, 미디어 정보 어포던스(608)의 선택에 응답하여 수행되는 액션)을 나타내는 액션 표시자(608-2); (3) 미디어 아이템을 식별하는 정보(예컨대, 노래 제목("Summertime")) 및 아티스트 "DJ AP")를 제공하는 미디어 아이템 표시자(608-3); (4) 미디어 아이템의 상태(예컨대, "최근에 재생됨")를 설명하는 미디어 아이템 상태 표시자(608-4); 및 (5) 미디어 아이템과 연관된 이미지(예컨대, 노래가 포함된 앨범의 앨범 커버)를 포함하는 미디어 아이템 그래픽(608-5). 일부 실시예들에서, 미디어 정보 어포던스(608)는 미디어 정보 어포던스(606)와 상이하다. 도 6b 및 도 6c에 예시된 실시예에서, 미디어 정보 어포던스(608)는 미디어 정보 어포던스(606)보다 더 크고 디스플레이(602)의 중간에 또는 그 근처에 디스플레이되는 반면, 미디어 정보 어포던스(606)는 디스플레이(602)의 상부에 또는 그 근처에 디스플레이된다. 예를 들어, 어포던스(608)에서 제공된 미디어 정보는 어포던스(606)에서 제공된 미디어 정보의 확대된, 확장된 버전일 수 있다.
미디어 정보 어포던스(608)가 디스플레이되는 동안 미디어 아이템의 선택에 대응하는 입력에 응답하여(예를 들어, 미디어 아이템 그래픽(608-5) 상의 탭, 또는 미디어 아이템 그래픽(608-5)이 미디어 정보 어포던스(608)에 입력되는 동안의 미디어 아이템 그래픽(608) 상의 탭), 디바이스(650) 상에서의 미디어 아이템 "DJ AP에 의한 Summertime"의 재생이 개시된다.
또한, 미디어 정보 어포던스(608)는 디바이스(650) 상에서의 재생을 위해 선택될 수 있는 미디어 아이템들의 큐(예컨대, 도 6c의 미디어 아이템 그래픽(608-5, 608-6))를 포함한다. 도 6c에 도시된 바와 같이, 미디어 정보 어포던스(608)는 제2 미디어 아이템에 대응하는 미디어 아이템 그래픽(608-6)을 포함한다. 도 6c에서, 디바이스(600)는 미디어 정보 어포던스(608) 상의 입력(예컨대, 우측으로부터 좌측으로의 스와이프를 표현하는 입력(601b))을 수신한다. 입력(610b)을 수신하는 것에 응답하여, 디바이스(600)는 도 6d에 도시된 바와 같이, 미디어 정보 어포던스(608) 내에서 미디어 아이템 그래픽들을 수평 방식으로 스크롤한다. 미디어 정보 어포던스(608)를 스크롤하는 것은, 미디어 정보 어포던스(608)의 좌측 에지로부터 부분적으로 벗어나도록 미디어 아이템 그래픽(608-5)을 이동시키는 것, 미디어 정보 어포던스(608)의 중간에 미디어 아이템 그래픽(608-6)을 완전히 디스플레이하는 것, 및 이전에 완전히 숨겨졌던(예컨대, 디스플레이되지 않은) 미디어 아이템 그래픽(608-7)을 부분적으로 디스플레이하는 것을 포함한다. 스크롤의 결과로서, 미디어 아이템 표시자(608-3)는 미디어 아이템 표시자(608-3a)로 대체되며(또는 업데이트되며), 이는 미디어 아이템 그래픽(608-6)에 대응하는 미디어 아이템을 식별하는 정보(예컨대, 재생목록("Hit Mix") 및 사용자 "Jane")를 제공한다. 일부 실시예들에서, 미디어 아이템 그래픽(608-6)에 대응하는 미디어 아이템은 미디어 아이템 그래픽(608-5)에 대응하는 미디어 아이템 직전에 재생되었던 미디어 아이템이고, 도 6d의 미디어 아이템 상태 표시자(608-4)에 의해 나타낸 바와 같이, 최근에 재생된 것으로 간주된다. 일부 실시예들에서, 미디어 정보 어포던스(608) 내의 큐는 미디어 아이템 그래픽(608-5)에 대응하는 미디어 아이템 이후에 재생되도록 스케줄링되는 미디어 아이템들(예컨대, 재생될 다음 2, 4, 5, 8개의 미디어 아이템들)을 포함한다. 일부 그러한 실시예들에서, 미디어 아이템 그래픽(608-6)에 대응하는 미디어 아이템은 미디어 아이템 그래픽(608-5)에 대응하는 미디어 아이템 이후에 재생되도록 스케줄링된 미디어 아이템을 표현하고, 선택적으로, 미디어 아이템 상태 표시자(608-4)는 예컨대 "다음(Up Next)"과 같은 미디어 아이템 상태 표시자로 대체되거나 업데이트된다.
도 6d에서, 디바이스(600)는 미디어 아이템 그래픽(608-6)에 의해 표현되는 미디어 아이템의 선택에 대응하는 입력(610c)(예컨대, 탭)을 수신한다. 입력(610c)을 수신하는 것에 응답하여, 디바이스(600)는 디바이스(650) 상에서 미디어 아이템 그래픽(608-6)에 의해 표현된 미디어 아이템의 재생을 개시하도록 디바이스(650)에 명령어를 송신한다. 도 6e는 디바이스(650) 상에서 미디어 아이템의 재생을 개시한 후의 디바이스(600) 및 디바이스(650)의 상태를 예시한다. 도 6e에서, 오디오 활동 표시자(675)는 디바이스(650)가 현재 오디오를 재생하고 있음을 나타내고, 오디오 활동 표시자(625)는 디바이스(600)가 여전히 오디오를 재생하고 있지 않음을 나타낸다. 미디어 정보 어포던스(608)는 선택적으로 현재 상태를 반영하도록 업데이트되고; 업데이트된 액션 표시자(608-2a)는 미디어 아이템 "Jane에 의한 Hit Mix"가 이제 디바이스(650) 상에서 재생되고 있음을 나타내며, 이는 디바이스(650)("주방 스피커")를 여전히 식별하는 외부 디바이스 식별자(608-1)에 의해 나타낸 바와 같다.
도 6f는 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부에 있지 않고, 디바이스(600)가 오디오를 재생하고 있으며(오디오 활동 표시자(625)에 의해 나타낸 바와 같음), 디바이스(650)가 오디오를 재생하고 있지 않은(오디오 활동 표시자(675)에 의해 나타낸 바와 같음) 시나리오를 예시한다. 도 6f에서, 디바이스(600)는 디바이스(600) 상에서 실행되는 음악 애플리케이션의 사용자 인터페이스(614)를 디스플레이하는데, 이는 디바이스(600) 상에서 현재 재생되고 있는 미디어 아이템을 나타낸다. 도 6g는 디바이스(600)가 오디오를 재생하고 있고 디바이스(650)가 오디오를 재생하고 있지 않는 동안(예컨대, 앨범 "Sophomore"로부터의 아티스트 "Mac Band"에 의한 노래 "The Sound") 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부로 적어도 부분적으로 이동되는 것을 예시한다. 근접성 조건 범위 표시자(652)는 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, (예를 들어, 디바이스(600)와 디바이스(650) 사이에 미디어 아이템들을 전송하기 위해) 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다).
물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(600) 상에서 현재 재생중인 미디어 아이템을 표현하는 미디어 정보 어포던스(616)를 디스플레이한다. 일부 실시예들에서, 미디어 정보 어포던스(616)는 디바이스(600)가 현재 미디어 아이템을 재생하고 있다는 결정에 따라 디바이스(600) 상에서 현재 재생중인 미디어 아이템을 표현한다.
미디어 정보 어포던스(616)는 선택적으로 디바이스(600) 상에서 현재 재생중인 미디어 아이템에 관한 정보를 제공하는 여러 그래픽 요소들을 포함하며, 이들은 다음을 포함한다: (1) 디바이스(600)가 근접해 있는 디바이스(예컨대, 주방 스피커로도 지칭되는, 디바이스(650))를 나타내는 외부 디바이스 표시자(616-1); (2) 미디어 정보 어포던스(616)와 연관된 액션 또는 기능(예컨대, 미디어 정보 어포던스(616)의 선택에 응답하여 수행되는 액션)을 나타내는 액션 표시자(616-2); (3) 미디어 아이템을 식별하는 정보(예컨대, 노래 제목("The Sound") 및 아티스트 "Mac Band")를 제공하는 미디어 아이템 표시자(616-3); (4) 미디어 아이템의 상태(예컨대, "전화로부터")를 설명하는 미디어 아이템 상태 표시자(616-4); 및 (5) 미디어 아이템과 연관된 이미지(예컨대, 노래가 포함된 앨범의 앨범 커버)를 포함하는 미디어 아이템 그래픽(616-5).
액션 표시자(616-2)에 의해 나타낸 바와 같이, 미디어 정보 어포던스(616)의 선택은 미디어 정보 어포던스(616)와 연관된 미디어 아이템이 디바이스(650) 상에서 재생되게 할 수 있다. 또한, 미디어 아이템 상태 표시자(616-4)는 재생될 미디어 아이템의 소스를 나타낸다(예컨대, "전화로부터").
일부 실시예들에서, 현재 재생중인 미디어 아이템에 대응하는 미디어 정보 어포던스(616)는 최근에 재생된 미디어 아이템에 대응하는 미디어 정보 어포던스(606)와 유사하다. 예를 들어, 미디어 정보 어포던스(616)의 선택에 응답하여 수행되는 액션은 입력의 유형에 의존한다. 일부 실시예들에서, 미디어 정보 어포던스(616) 상의 탭 제스처에 응답하여, 디바이스(600) 상에서 현재 재생중인 미디어 아이템의 재생은 디바이스(650) 상에서 개시되는 반면, 미디어 정보 어포던스(616) 상에서 또는 그 근처에서 시작하는 하향 스와이프 제스처는 디바이스(600)로 하여금 전술된 미디어 정보 어포던스(608)와 유사한 미디어 정보 어포던스를 디스플레이하게 하지만, 도 6g의 디바이스(600) 상에서 현재 재생중인 미디어 아이템에 대한 정보를 갖는다.
도 6g에서, 디바이스(600)는 미디어 정보 어포던스(616)의 선택에 대응하는 입력(610d)(예컨대, 탭)을 수신한다. 입력(610d)을 수신하는 것에 응답하여, 디바이스(600)는 디바이스(600) 상에서 현재 재생중인 미디어 아이템의 재생을 개시하도록 디바이스(650)에 명령어를 송신한다. 도 6h에 도시된 바와 같이, 입력(610d)을 수신하는 것에 응답하여, 디바이스(600)는 업데이트된 미디어 정보 어포던스(616a)를 디스플레이한다(예컨대, 미디어 정보 어포던스(616)를 새로운 어포던스로 대체하거나 또는 미디어 정보 어포던스(616)의 디스플레이를 유지하지만, 그 내에 디스플레이된 정보의 적어도 일부분을 변화시킨다). 도 6h에서, 미디어 정보 어포던스(616a)는 업데이트된 액션 표시자(616-2a)를 포함하는데, 이는 재생이 개시되었음을 나타낸다(예컨대, "스피커로 이송중"). 일부 실시예들에서, 디바이스(600)는, 현재 재생중인 미디어 아이템 "Mac Band에 의한 The Sound" 대신에 최근에 재생된 미디어 아이템 "DJ AP에 의한 Summertime"에 대응하는 정보를 갖는 것을 제외하고는, 미디어 정보 어포던스(606)(도 6b) 상의 탭에 응답하여 미디어 정보 어포던스(616a)와 유사한 미디어 정보 어포던스를 디스플레이한다.
도 6i에 도시된 바와 같이, 업데이트된 미디어 정보 어포던스(616a)를 디스플레이한 후(예를 들어, 디바이스(650) 상에서 재생이 성공적으로 시작되었다는 표시에 응답하여, 또는 입력(610d)을 수신하거나 미디어 정보 어포던스(616a)를 디스플레이한 후 미리결정된 시간량 뒤에), 디바이스(600)는 미디어 정보 어포던스(616a)를 디스플레이하는 것을 중지하고, 오디오가 디바이스(650), "주방 스피커" 상에서 재생되고 있음을 나타내기 위해(오디오 상태 표시자(675)에 의해 나타낸 바와 같이) 사용자 인터페이스(614)를 그래픽 요소(614-2)로 업데이트한다. 오디오 상태 표시자(625)는, (예컨대, 입력(610d)에 응답하여) 디바이스(650) 상에서 재생이 시작될 때 디바이스(600)가 오디오를 재생하는 것을 중지함을 나타낸다. 일부 실시예들에서, 디바이스(600)는 디바이스(650) 상에서의 재생 동안 오디오(예컨대, "Mac Band에 의한 The Sound")를 계속해서 재생한다.
도 6j는 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부에 있지 않고, 디바이스(600)가 오디오를 재생하고 있으며(오디오 활동 표시자(625)에 의해 나타낸 바와 같음), 디바이스(650)가 디바이스(600) 상에서 재생되는 오디오와 상이한 오디오를 재생하고 있는(오디오 활동 표시자(675)에 의해 나타낸 바와 같음) 시나리오를 예시한다. 특히, 도 6j에서, 디바이스(600)는 사용자 인터페이스(618) 상에 도시된 바와 같이 "O Christmas Tree"를 재생하고 있고, 디바이스(650)는 오디오 표현(672a)에 의해 나타낸 바와 같이 "Old MacDonald"를 재생하고 있다. 오디오 표현(672a)은 단지 예시적인 목적으로만 제공된다. 도 6j에서, 디바이스(600)는 디바이스(600) 상에서 실행되는 음악 애플리케이션의 사용자 인터페이스(618)를 디스플레이하는데, 이는 디바이스(600) 상에서 현재 재생되고 있는 미디어 아이템을 나타낸다. 도 6k는 디바이스(600) 및 디바이스(650) 둘 모두가 그들 각자의 오디오 미디어 아이템들을 재생하고 있는 동안 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부로 적어도 부분적으로 이동되는 것을 예시한다. 근접성 조건 범위 표시자(652)는 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다).
도 6k에 예시된 바와 같이, 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(600) 상에서 현재 재생중인 미디어 아이템을 표현하는 미디어 정보 어포던스(620)를 디스플레이한다. 일부 실시예들에서, 미디어 정보 어포던스(620)는 디바이스(600)가 현재 미디어 아이템을 재생하고 있다는 결정에 따라(예컨대, 디바이스(650)가 오디오를 재생하고 있는지 여부에 관계없이) 디바이스(600) 상에서 현재 재생중인 미디어 아이템을 표현한다. 일부 실시예들에서, 미디어 정보 어포던스(620)는 디바이스(600) 및 디바이스(650) 둘 모두가 현재 오디오를 재생하고 있다는 결정에 따라 디바이스(600) 상에서 현재 재생중인 미디어 아이템을 표현한다.
미디어 정보 어포던스(620)는 선택적으로 디바이스(600) 상에서 현재 재생중인 미디어 아이템에 관한 정보를 제공하는 여러 그래픽 요소들을 포함하며, 이들은 다음을 포함한다: (1) 디바이스(600)가 근접해 있는 디바이스(예컨대, 도 6k에서 "주방 스피커"로도 지칭되는, 디바이스(650))를 나타내는 외부 디바이스 표시자(620-1); (2) 미디어 정보 어포던스(620)와 연관된 액션 또는 기능(예컨대, 미디어 정보 어포던스(620)의 선택에 응답하여 수행되는 액션)을 나타내는 액션 표시자(620-2); (3) 미디어 아이템을 식별하는 정보(예컨대, 노래 제목("O Christmas Tree") 및 아티스트 "Carolers")를 제공하는 미디어 아이템 표시자(620-3); (4) 미디어 아이템의 상태(예컨대, "전화로부터")를 설명하는 미디어 아이템 상태 표시자(620-4); 및 (5) 미디어 아이템과 연관된 이미지(예컨대, 노래가 포함된 앨범의 앨범 커버)를 포함하는 미디어 아이템 그래픽(620-5).
액션 표시자(620-2)에 의해 나타낸 바와 같이, 미디어 정보 어포던스(620)의 선택은 미디어 정보 어포던스(620)와 연관된 미디어 아이템이 디바이스(650) 상에서 재생되게 할 수 있다. 또한, 미디어 아이템 상태 표시자(620-4)는 재생될 미디어 아이템의 소스를 나타낸다(예컨대, "전화로부터").
일부 실시예들에서, 미디어 정보 어포던스(620)는 미디어 정보 어포던스(616)와 유사하다. 예를 들어, 미디어 정보 어포던스(620)의 선택에 응답하여 수행되는 액션은 입력의 유형에 의존한다. 일부 실시예들에서, 미디어 정보 어포던스(620) 상의 탭 제스처에 응답하여, 디바이스(600) 상에서 현재 재생중인 미디어 아이템의 재생은 디바이스(650) 상에서 개시되는 반면, 미디어 정보 어포던스(620) 상에서 또는 그 근처에서 시작하는 하향 스와이프 제스처는 디바이스(600)로 하여금 전술된 미디어 정보 어포던스(608)와 유사한 미디어 정보 어포던스를 디스플레이하게 하지만, 도 6k의 디바이스(600) 상에서 현재 재생중인 미디어 아이템에 대한 정보를 갖는다.
도 6k에서, 디바이스(600)는 미디어 정보 어포던스(620)의 선택에 대응하는 입력(610e)(예컨대, 탭)을 수신한다. 입력(610e)을 수신하는 것에 응답하여, 디바이스(600)는 디바이스(600) 상에서 현재 재생중인 미디어 아이템의 재생을 개시하도록 디바이스(650)에 명령어를 송신한다. 일부 실시예들에서, 입력(610e)을 수신하는 것에 응답하여, 디바이스(600)는, 디바이스(600) 상에서 현재 재생중인 미디어 아이템이 디바이스(650) 상에서의 재생을 위해 이송되고 있음을 나타내기 위해, 업데이트된 미디어 정보 어포던스(616a)와 유사한 업데이트된 미디어 정보 어포던스를 디스플레이한다.
도 6l에 도시된 바와 같이, 입력(610e)을 수신한 후(예를 들어, 입력(610e)을 수신하는 것에 응답하여), 디바이스(600)는 미디어 정보 어포던스(620)를 디스플레이하는 것을 중지하고, 오디오가 디바이스(650), "주방 스피커" 상에서 재생되고 있음을 나타내기 위해(오디오 상태 표시자(675)에 의해 나타낸 바와 같이) 사용자 인터페이스(618)를 그래픽 요소(618-2)로 업데이트한다. 오디오 상태 표시자(625)는, (예컨대, 입력(610e)에 응답하여) 디바이스(650) 상에서 재생이 시작될 때 디바이스(600)가 오디오를 재생하는 것을 중지함을 나타낸다. 오디오 상태 표시(675)는 디바이스(650)가 오디오(예컨대, 오디오 표현(672b)에 의해 나타내어지는 "O Christmas Tree")를 재생하고 있음을 나타낸다. 일부 실시예들에서, 디바이스(600)는 디바이스(650) 상에서의 재생 동안 오디오(예컨대, "O Christmas Tree")를 계속해서 재생한다.
도 6m은 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부에 있지 않고, 디바이스(600)가 오디오를 재생하고 있지 않으며(오디오 활동 표시자(625)에 의해 나타낸 바와 같음), 디바이스(650)가 오디오(오디오 활동 표시자(675)에 의해 나타낸 바와 같이, The Stars에 의한 "Anything"(예컨대, 672c))를 재생하고 있는 시나리오를 예시한다. 도 6m에서, 디바이스(600)는 사용자 인터페이스(604)(예컨대, 애플리케이션 아이콘들을 갖는 홈 스크린)를 디스플레이한다. 도 6n은 디바이스(600) 및 디바이스(650) 둘 모두가 그들 각자의 오디오 미디어 아이템들을 재생하고 있는 동안 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부로 적어도 부분적으로 이동되는 것을 예시한다. 근접성 조건 범위 표시자(652)는 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다).
물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(650) 상에서 현재 재생중인 미디어 아이템을 표현하는 미디어 정보 어포던스(622)를 디스플레이한다. 일부 실시예들에서, 미디어 정보 어포던스(622)는, 디바이스(650)가 현재 미디어 아이템을 재생하고 있고 디바이스(600)는 현재 미디어 아이템을 재생하고 있지 않는다는 결정에 따라, 디바이스(650) 상에서 현재 재생중인 미디어 아이템을 표현한다. 일부 실시예들에서, 미디어 정보 어포던스(620)는 디바이스(650)가 현재 미디어 아이템을 재생하고 있다는 결정에 따라(예컨대, 디바이스(600)가 미디어 아이템을 재생하고 있는지 여부에 관계없이) 디바이스(650) 상에서 현재 재생중인 미디어 아이템을 표현한다.
미디어 정보 어포던스(622)는 선택적으로 디바이스(650) 상에서 현재 재생중인 미디어 아이템에 관한 정보를 제공하는 여러 그래픽 요소들을 포함하며, 이들은 다음을 포함한다: (1) 디바이스(600)가 근접해 있는 디바이스(예컨대, 주방 스피커로도 지칭되는, 디바이스(650))를 나타내는 외부 디바이스 표시자(622-1); (2) 미디어 정보 어포던스(622)와 연관된 액션 또는 기능(예컨대, 미디어 정보 어포던스(622)의 선택에 응답하여 수행되는 액션)을 나타내는 액션 표시자(622-2); (3) 미디어 아이템을 식별하는 정보(예컨대, 노래 제목("Anything") 및 아티스트 "The Stars")를 제공하는 미디어 아이템 표시자(622-3); 및 (4) 미디어 아이템과 연관된 이미지(예컨대, 노래가 포함된 앨범의 앨범 커버)를 포함하는 미디어 아이템 그래픽(622-4).
액션 표시자(622-2)에 의해 나타낸 바와 같이, 미디어 정보 어포던스(622)의 선택은 미디어 정보 어포던스(622)와 연관된 미디어 아이템이 디바이스(600) 상에서 재생되게(예를 들어, 디바이스(650)로부터 이송되게) 할 수 있다.
일부 실시예들에서, 미디어 정보 어포던스(622)의 선택에 응답하여 수행되는 액션은 입력의 유형에 의존한다. 예를 들어, 미디어 정보 어포던스(622) 상의 탭 제스처에 응답하여, 디바이스(650) 상에서 현재 재생중인 미디어 아이템의 재생은 디바이스(600) 상에서 개시되는 반면, 미디어 정보 어포던스(622) 상에서 또는 그 근처에서 시작하는 하향 스와이프 제스처는 디바이스(600)로 하여금 전술된 미디어 정보 어포던스(608)와 유사한 미디어 정보 어포던스를 디스플레이하게 하지만, 도 6n의 디바이스(650) 상에서 현재 재생중인 미디어 아이템에 대한 정보를 갖는다.
도 6n에서, 디바이스(600)는 미디어 정보 어포던스(622)의 선택에 대응하는 입력(610f)(예컨대, 탭)을 수신한다. 입력(610f)을 수신하는 것에 응답하여, 디바이스(600)는 디바이스(650) 상에서 현재 재생중인 미디어 아이템의, 디바이스(600) 상에서의 재생을 개시한다. 도 6o에 도시된 바와 같이, 입력(610f)을 수신하는 것에 응답하여, 디바이스(600)는, 디바이스(650) 상에서 현재 재생중인 미디어 아이템이 디바이스(600) 상에서의 재생을 위해 이송되고 있음을 나타내기 위해 업데이트된 액션 표시자(622-2a)를 갖는, 업데이트된 미디어 정보 어포던스(622a)(업데이트된 미디어 정보 어포던스(616a)와 유사함)를 디스플레이한다.
도 6p에 도시된 바와 같이, 업데이트된 미디어 정보 어포던스(622a)를 디스플레이한 후(예를 들어, 디바이스(600) 상에서 재생이 성공적으로 시작되었다는 표시에 응답하여, 또는 입력(610f)을 수신하거나 미디어 정보 어포던스(622a)를 디스플레이한 후 미리결정된 시간량 뒤에), 디바이스(600)는 미디어 정보 어포던스(622a)를 디스플레이하는 것을 중지하고, (오디오 상태 표시자(625)에 의해 나타낸 바와 같이) 오디오가 디바이스(600) 상에서 재생되고 있음을 나타내기 위해 사용자 인터페이스(624)를 디스플레이한다. 일부 실시예들에서, 사용자 인터페이스(624)는 디바이스(600) 상에서 재생을 개시하는 것에 응답하여 시작되는 음악 애플리케이션에 대응하며, 사용자가 디바이스(600) 상의 재생을 추가로 제어할 수 있게 한다. 오디오 상태 표시자(675)는, (예컨대, 입력(610f)에 응답하여) 디바이스(600) 상에서 재생이 시작될 때 디바이스(650)가 오디오를 재생하는 것을 중지함을 나타낸다. 일부 실시예들에서, 디바이스(650)는 디바이스(600) 상에서의 재생 동안 오디오(예컨대, The Stars에 의한 "Anything")를 계속해서 재생한다.
도 7은 일부 실시예들에 따른, 전자 디바이스를 사용하여 오디오 재생을 제어하기 위한 방법을 예시하는 흐름도이다. 방법(700)은 디스플레이 디바이스(예컨대, 602)를 갖는 디바이스(예컨대, 100, 300, 500, 또는 600)에서 수행된다. 방법(700)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 방법(700)은 오디오 재생을 제어하기 위한 직관적인 방식을 제공한다. 본 방법은 오디오 재생을 제어하는 것에 대한 사용자의 인지적 부담을 감소시키며, 이에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 오디오 재생을 제어할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 전자 디바이스(예컨대, 600)는 컴퓨터 시스템이다. 컴퓨터 시스템은, 선택적으로, 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신(예컨대, 유선 통신, 무선 통신)한다. 디스플레이 생성 컴포넌트는 CRT 디스플레이를 통한 디스플레이, LED 디스플레이를 통한 디스플레이, 또는 이미지 투영을 통한 디스플레이와 같은 시각적 출력을 제공하도록 구성된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 별개이다. 사용자 입력을 수신하는 터치 감응형 표면과 같은 하나 이상의 입력 디바이스들이 입력을 수신하도록 구성된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 별개이다. 따라서, 컴퓨터 시스템은, 유선 또는 무선 연결을 통해, 데이터(예컨대, 이미지 데이터 또는 비디오 데이터)를 통합 또는 외부 디스플레이 생성 컴포넌트로 송신하여 콘텐츠를 (예를 들어, 디스플레이 디바이스를 사용하여) 시각적으로 생성할 수 있고, 유선 또는 무선 연결로, 하나 이상의 입력 디바이스들로부터 입력을 수신할 수 있다.
전자 디바이스는, 외부 디바이스(예컨대, 650)에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건(예컨대, 652에 의해 표현됨)을 만족한다는 표시를 검출한다(702). 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 근접성 조건은 전자 디바이스 사이의 거리가 임계 거리(예컨대, 6 인치, 12 인치, 18 인치, 24 인치) 미만인 경우 만족된다.
물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는, 디스플레이 디바이스를 통해, 제1 미디어 아이템(예컨대, 음악 트랙, 오디오 북(또는 챕터와 같은, 그의 일부분), 팟캐스트, 비디오, 전화 통화; 전자 디바이스 상에서 현재 재생되고 있는 미디어 아이템, 전자 디바이스 상에서 재생되고 있었고 종료되었거나 중지 또는 일시정지된 가장 최근의 미디어 아이템, 사용자가 미디어 애플리케이션을 시작하거나 재생목록을 선택할 때 전자 디바이스 상에서 다음에 재생되도록 스케줄링된 미디어 아이템, 예컨대 재생목록 내의 제1 트랙)을 표현하는 제1 미디어 정보 어포던스(예컨대, 606, 616, 620)를 디스플레이하며(704), 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보(예컨대, 606-1 내지 606-5)를 포함한다. 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것은, 물리적 근접성이 근접성 조건을 만족함을 사용자에게 나타냄으로써 자동으로 피드백을 제공하여, 제1 미디어 정보 어포던스를 디스플레이하는 데 필요한 입력들의 수를 감소시킨다. 추가 사용자 입력을 요구하지 않으면서 조건들의 세트가 충족되었을 때 개선된 피드백을 제공하여, 동작을 수행하는 데 필요한 입력들의 수를 감소시키고, 동작을 수행하는 것은, (예를 들어, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 보다 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 보다 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
전자 디바이스는 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력(예컨대, 610a, 610d, 610e)을 수신한다(706).
제1 입력을 수신하는 것에 응답하여(708), 제1 입력이 제1 유형의 입력(예컨대, 제1 미디어 정보 어포던스에 대응하는 위치에서 전자 디바이스의 터치 감응형 디스플레이 상의 탭 제스처)이라는 결정에 따라, 전자 디바이스는 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신한다(710)(예를 들어, 도 6h 및 도 6i).
제1 입력을 수신하는 것에 응답하여(708), 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력(예를 들어, 제1 미디어 정보 어포던스 상의 방향성 스와이프 제스처)이라는 결정에 따라, 전자 디바이스는, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스(예컨대, 608)를 디스플레이하며(712), 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다. 제1 미디어 어포던스를 선택하는 입력의 유형에 의존하여 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하는 것, 또는 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 것은, 추가의 디스플레이된 제어부들로 사용자 인터페이스를 혼란스럽게 하지 않고서 제1 미디어 어포던스에 관련된 추가의 제어 옵션들을 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 추가의 제어 옵션들을 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 전자 디바이스는 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하지 않으면서 제2 미디어 정보 어포던스를 디스플레이한다. 일부 실시예들에서, 제2 세트의 정보는 제1 세트의 정보를 포함하지만, 상이하게 디스플레이된다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 제1 미디어 아이템에 관한 추가의 정보(예컨대, 더 많은 상세사항) 및/또는 제1 미디어 아이템의 더 큰 그래픽 표현을 포함한다. 일부 실시예들에서, 제2 세트의 정보는 제1 미디어 아이템에 후속하는 미디어 아이템들(예컨대, 제1 미디어 아이템 이후에 재생되도록 스케줄링된 미디어 아이템들) 및/또는 큐 내에서 제1 미디어 아이템 이전의 미디어 아이템들(예컨대, 제1 미디어 아이템 이전에 재생되었거나, 또는 재생목록과 같은 미디어 아이템들의 목록 내에서 제1 미디어 아이템 이전에 위치되는 미디어 아이템들)을 포함하는, 미디어 아이템들의 큐를 포함한다.
일부 실시예들에서, 제1 미디어 정보 어포던스는 외부 디바이스를 식별하는 표시(예컨대, 606-1, 606-2)를 포함한다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 외부 디바이스를 식별하는 표시를 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스는, 제1 미디어 정보 어포던스의 선택이 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시할 것이라는 표시를 포함한다.
일부 실시예들에서, 제1 입력을 수신하는 것에 응답하여, 그리고 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스는 외부 디바이스 상에서의 제1 미디어 아이템의 재생이 개시되었음을 나타내기 위해 제1 미디어 정보 어포던스의 시각적 외관(예컨대, 612-2a)을 변경한다(예컨대, 도 6h 참조). 일부 실시예들에서, 제1 미디어 정보 어포던스의 시각적 외관을 변경하는 것은, 선택적으로 제1 미디어 아이템에 관한 제1 세트의 정보 중 적어도 일부의 디스플레이를 유지하면서, 외부 디바이스 상에서 제1 미디어 아이템의 재생이 개시되었음을 나타내는 텍스트를 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스의 시각적 외관을 변경하는 것은, 제1 미디어 정보 어포던스의 선택이 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시할 것이라는 표시를, 외부 디바이스 상에서 제1 미디어 아이템의 재생이 개시되었다는 표시(예컨대, 텍스트)로 대체하는 것을 포함한다.
일부 실시예들에서, 제1 미디어 아이템에 관한 제1 세트의 정보는 제1 미디어 아이템에 대응하는 미디어 아이템의 유형을 나타낸다(예컨대, 606-5, 902-4). 미디어 아이템들의 예시적인 유형들은 음악 트랙, 오디오 북, 팟캐스트, 비디오, 및 전화 통화를 포함하지만, 이들로 제한되지 않는다. 일부 실시예들에서, 전화 통화 미디어 아이템에 대한 제1 세트의 정보는 통화의 참가자의 아바타를 포함한다.
일부 실시예들에서, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 제1 미디어 아이템이 데이터 송신 조건을 만족한다는 결정에 따라(예를 들어, 제1 미디어 아이템은 전화 통화이고; 제1 미디어 아이템은 전자 디바이스에 이용가능하지만 외부 디바이스에는 이용가능하지 않은 애플리케이션, 서비스, 또는 계정에 의해 제공됨), 전자 디바이스는 제1 미디어 아이템에 대한 데이터를 외부 디바이스로 송신한다. 일부 실시예들에서, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 제1 미디어 아이템이 데이터 송신 조건을 만족하지 않는다는 결정에 따라(예를 들어, 제1 미디어 아이템은 외부 디바이스가 액세스를 갖는 특정 애플리케이션, 서비스, 또는 계정에 의해 제공됨), 전자 디바이스는 제1 미디어 아이템에 대한 데이터를 외부 디바이스로 송신하는 것을 보류한다. 제1 미디어 아이템이 데이터 송신 조건을 만족하는지 여부에 기초하여 제1 미디어 아이템에 대한 데이터를 외부 디바이스로 송신하는 것(또는 그렇지 않음)은 사용자가 데이터를 송신하기 위해 추가 입력들을 제공해야 하는 것을 피한다. 추가 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 미디어 아이템을 포함하는 미디어 아이템들의 큐는 재생을 개시하기 전에 전자 디바이스 상에 존재한다. 일부 그러한 실시예들에서, 재생을 개시하는 것은 큐를 외부 디바이스로 이송하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 아이템은 공통 사용자 계정을 통해 전자 디바이스 및 외부 디바이스 둘 모두에 액세스가능하다. 일부 실시예들에서, 외부 디바이스는 공통 사용자 계정으로부터 제1 미디어 아이템을 획득한다(예컨대, 제1 아이템의 재생은 전자 디바이스로부터 외부 디바이스로 제1 미디어 아이템을 스트리밍하는 것을 포함하지 않는다). 일부 실시예들에서, 외부 디바이스는 공통 사용자 계정으로부터 큐를 획득한다.
일부 실시예들에서, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신한 후, 시간 조건이 충족된다는 결정에 응답하여(예를 들어, 제1 유형의 제1 입력을 수신한 이래로 임계량의 시간이 경과하였음), 전자 디바이스는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지한다(예를 들어, 도 6i 참조).
일부 실시예들에서, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안 그리고 제1 입력을 수신하기 전에, 전자 디바이스는 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 물리적 분리 조건(예컨대, 656에 의해 표현됨)을 만족한다는 표시를 검출한다. 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 물리적 분리 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 물리적 분리 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 미리정의된 임계 거리를 초과하는 경우에 만족된다. 일부 실시예들에서, 물리적 분리 조건과 연관된 임계 거리는 (제1) 근접성 조건과 연관된 제1 임계 거리보다 크다. 예를 들어, 물리적 분리 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제3 임계 거리(예컨대, 20 피트)를 초과하는 경우에 만족되고, 제1 근접성 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제1 임계 거리(예컨대, 1 내지 2 피트)보다 작은 경우에 만족되며, 여기서 제3 임계 거리는 제1 임계 거리보다 크다. 일부 실시예들에서, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안 그리고 제1 입력을 수신하기 전에, 물리적 근접성이 물리적 분리 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지한다(예컨대, 도 11d). 물리적 근접성이 물리적 분리 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지하는 것은, 재생이 더 이상 제1 미디어 정보 어포던스의 선택을 통해 외부 디바이스 상에서 개시될 수 없음을 나타내는 피드백을 사용자에게 제공한다. 개선된 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 유형의 입력은 탭 제스처(예컨대, 610d)를 포함하고, 제2 유형의 입력은 스와이프 또는 드래그 제스처(예컨대, 610a; 수직 상향 또는 수직 하향 스와이프 또는 드래그 제스처)를 포함한다.
일부 실시예들에서, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스는 제2 미디어 정보 어포던스의 선택을 표현하는 제2 입력(예컨대, 610c)을 수신한다. 일부 실시예들에서, 제2 미디어 정보 어포던스의 선택을 표현하는 제2 입력을 수신하는 것에 응답하여, 전자 디바이스는 외부 디바이스 상에서 제2 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신한다. 일부 실시예들에서, 제2 미디어 아이템은 제1 미디어 아이템이다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 제1 미디어 아이템의 표현 및 적어도 하나의 다른 미디어 아이템의 표현을 포함하는 미디어 아이템들의 큐를 표현한다. 일부 그러한 실시예들에서, 전자 디바이스는 입력(예컨대, 수평 스와이프 또는 드래그 제스처)에 응답하여 큐를 스크롤한다. 일부 실시예들에서, 큐 내의 미디어 아이템의 선택에 대응하는 입력에 응답하여, 전자 디바이스는 외부 디바이스 상에서의 선택된 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신한다. (예컨대, 제1 미디어 아이템에 관한 추가 정보와 함께) 제2 미디어 정보 어포던스를 디스플레이하고 제2 미디어 정보 어포던스의 선택에 응답하여 외부 디바이스 상에서 제2 미디어 아이템의 재생을 개시하는 것은, 추가 정보 및/또는 외부 디바이스 상의 재생에 대한 제어를 사용자에게 제공함으로써 개선된 피드백을 제공한다. 개선된 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것은, 전자 디바이스가 제1 미디어 아이템의 재생을 야기하고 있는 동안에 발생한다(예컨대, 도 6g). 일부 실시예들에서, 재생을 야기하는 것은 전자 디바이스의 하나 이상의 스피커들을 통해 미디어 아이템을 출력하는 것, 또는 하나 이상의 연결된 외부 스피커들에서의 출력을 야기하는 것을 포함한다. 일부 실시예들에서, 제1 입력을 수신하는 것에 응답하여, 그리고 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스는 전자 디바이스에서 제1 미디어 아이템의 재생을 야기하는 것을 중지한다(예컨대, 도 6i 참조). 일부 실시예들에서, 전자 디바이스는 제1 미디어 아이템을 계속해서 재생한다.
일부 실시예들에서, 제1 미디어 정보 어포던스는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 동안 제1 미디어 아이템이 전자 디바이스 상에서 재생되고 있다는 결정에 따라 제1 미디어 아이템을 표현한다(예컨대, 도 6g). 일부 실시예들에서, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하는 것은, 제1 미디어 아이템이 전자 디바이스 상에서 현재 재생되고 있다는 결정에 따라 수행된다.
일부 실시예들에서, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스는 외부 디바이스 상에서 제3 미디어 아이템을 재생하는 것을 중지한다(예컨대, 도 6l 참조).
일부 실시예들에서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 동안 전자 디바이스가 미디어 아이템을 재생하고 있지 않다는 결정에 따라(예컨대, 도 6b), 제1 미디어 아이템은 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하기 전 가장 최근에 전자 디바이스 상에서 재생된 미디어 아이템이다. 일부 실시예들에서, 제1 미디어 정보 어포던스는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 시점에 외부 디바이스가 미디어 아이템을 재생하고 있지 않다는 결정에 따라 전자 디바이스 상에서 가장 최근에 재생된 미디어 아이템을 표현한다.
방법(700)(예컨대, 도 7)과 관련하여 위에서 설명된 프로세스들의 상세사항들은, 또한, 이하에서 기술되는 방법들에 유사한 방식으로 적용가능하다는 것에 유의한다. 예를 들어, 방법(800) 및/또는 방법(1000)은, 선택적으로, 방법(700)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(700)의 동작(706)은 방법(1000)의 동작(1004)에서 기술된 제1 미디어 정보 어포던스를 선택하기 위해 수행될 수 있고, 동작들(708, 710, 및/또는 712)은 선택에 응답하여 방법(1000)의 일부로서 수행될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 8은 일부 실시예들에 따른, 전자 디바이스를 사용하여 오디오 재생을 제어하기 위한 방법을 예시하는 흐름도이다. 방법(800)은 디스플레이 디바이스(예컨대, 602)를 갖는 디바이스(예컨대, 100, 300, 500, 또는 600)에서 수행된다. 방법(800)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 방법(800)은 오디오 재생을 제어하기 위한 직관적인 방식을 제공한다. 본 방법은 오디오 재생을 제어하는 것에 대한 사용자의 인지적 부담을 감소시키며, 이에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 오디오 재생을 제어할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 전자 디바이스(예컨대, 600)는 컴퓨터 시스템이다. 컴퓨터 시스템은, 선택적으로, 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신(예컨대, 유선 통신, 무선 통신)한다. 디스플레이 생성 컴포넌트는 CRT 디스플레이를 통한 디스플레이, LED 디스플레이를 통한 디스플레이, 또는 이미지 투영을 통한 디스플레이와 같은 시각적 출력을 제공하도록 구성된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 별개이다. 사용자 입력을 수신하는 터치 감응형 표면과 같은 하나 이상의 입력 디바이스들이 입력을 수신하도록 구성된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 별개이다. 따라서, 컴퓨터 시스템은, 유선 또는 무선 연결을 통해, 데이터(예컨대, 이미지 데이터 또는 비디오 데이터)를 통합 또는 외부 디스플레이 생성 컴포넌트로 송신하여 콘텐츠를 (예를 들어, 디스플레이 디바이스를 사용하여) 시각적으로 생성할 수 있고, 유선 또는 무선 연결로, 하나 이상의 입력 디바이스들로부터 입력을 수신할 수 있다.
전자 디바이스는, 외부 디바이스(예컨대, 650)에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건(예컨대, 652에 의해 표현됨)을 만족한다는 표시를 검출한다(802). 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 근접성 조건은 전자 디바이스들 사이의 거리가 임계 거리(예컨대, 6 인치, 12 인치, 18 인치, 24 인치) 미만인 경우 만족된다.
물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는, 디스플레이 디바이스를 통해, 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템(예컨대, 음악 트랙, 오디오 북(또는 챕터와 같은, 그의 일부분), 팟캐스트, 비디오, 전화 통화)을 표현하는 제1 미디어 정보 어포던스(예컨대, 622)를 디스플레이한다(804). 일부 실시예들에서, 제1 미디어 정보 어포던스는 제1 미디어 아이템이 현재 외부 디바이스 상에서 재생되고 있고 현재 전자 디바이스 상에서 재생되고 있지 않다는 결정에 따라 제1 미디어 아이템을 표현한다. 일부 실시예들에서, 제1 미디어 정보 어포던스는 제1 미디어 아이템에 관한 제1 세트의 정보(예컨대, 622-1 내지 622-4)를 포함한다. 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것은, 물리적 근접성이 근접성 조건을 만족함을 사용자에게 나타냄으로써 자동으로 피드백을 제공하여, 제1 미디어 정보 어포던스를 디스플레이하는 데 필요한 입력들의 수를 감소시킨다. 추가 사용자 입력을 요구하지 않으면서 조건들의 세트가 충족되었을 때 개선된 피드백을 제공하여, 동작을 수행하는 데 필요한 입력들의 수를 감소시키고, 동작을 수행하는 것은, (예를 들어, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 보다 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 보다 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
전자 디바이스는 제1 미디어 정보 어포던스의 선택을 표현하는 제1 입력(예컨대, 610f)을 수신한다(806).
제1 입력을 수신하는 것에 응답하여(808), 제1 입력이 제1 유형의 입력(예컨대, 제1 미디어 정보 어포던스에 대응하는 위치에서 전자 디바이스의 터치 감응형 디스플레이 상의 탭 제스처)이라는 결정에 따라, 전자 디바이스는 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시한다(810).
제1 입력을 수신하는 것에 응답하여(808), 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력(예를 들어, 제1 미디어 정보 어포던스 상의 방향성 스와이프 제스처)이라는 결정에 따라, 전자 디바이스는, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스(예컨대, 608)를 디스플레이하며(812), 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하고 제1 미디어 아이템에 관한 제2 세트의 정보를 포함한다. 제1 미디어 어포던스를 선택하는 입력의 유형에 의존하여 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것 또는 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 것은, 추가의 디스플레이된 제어부들로 사용자 인터페이스를 혼란스럽게 하지 않고서 제1 미디어 어포던스에 관련된 추가의 제어 옵션들을 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 추가의 제어 옵션들을 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2 세트의 정보는 제1 세트의 정보를 포함하지만, 상이하게 디스플레이된다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 제1 미디어 아이템에 관한 추가의 정보(예컨대, 더 많은 상세사항) 및/또는 제1 미디어 아이템의 더 큰 그래픽 표현을 포함한다. 일부 실시예들에서, 제2 세트의 정보는 제1 미디어 아이템에 후속하는 미디어 아이템들(예컨대, 제1 미디어 아이템 이후에 재생되도록 스케줄링된 미디어 아이템들) 및/또는 큐 내에서 제1 미디어 아이템 이전의 미디어 아이템들(예컨대, 제1 미디어 아이템 이전에 재생되었거나, 또는 재생목록과 같은 미디어 아이템들의 목록 내에서 제1 미디어 아이템 이전에 위치되는 미디어 아이템들)을 포함하는, 미디어 아이템들의 큐를 포함한다.
일부 실시예들에서, 전자 디바이스는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 시점에 전자 디바이스가 오디오 미디어 아이템을 재생하고 있지 않다는 결정에 따라 외부 디바이스 상에서 현재 재생되고 있는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이한다(예컨대, 도 6n).
일부 실시예들에서, 제1 미디어 정보 어포던스는 전자 디바이스를 식별하는 표시(예컨대, 622-2)를 포함한다. 일부 실시예들에서, 제2 미디어 어포던스는 전자 디바이스를 식별하는 표시를 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스는 제1 미디어 정보 어포던스의 선택이 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시할 것이라는 표시를 포함한다.
일부 실시예들에서, 제1 입력을 수신하는 것에 응답하여, 그리고 제1 입력이 제1 유형의 입력이라는 결정에 따라, 전자 디바이스는, 전자 디바이스 상에서 제1 미디어 아이템의 재생이 개시되었음을 나타내기 위해 제1 미디어 정보 어포던스(예컨대, 622-2a)의 시각적 외관을 변경한다. 일부 실시예들에서, 제1 미디어 정보 어포던스의 시각적 외관을 변경하는 것은, 선택적으로 제1 미디어 아이템에 관한 제1 세트의 정보 중 적어도 일부의 디스플레이를 유지하면서, 전자 디바이스 상에서 제1 미디어 아이템의 재생이 개시되었음을 나타내는 텍스트를 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스의 시각적 외관을 변경하는 것은, 제1 미디어 정보 어포던스의 선택이 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시할 것이라는 표시를, 전자 디바이스 상에서 제1 미디어 아이템의 재생이 개시되었다는 표시(예컨대, 텍스트)로 대체하는 것을 포함한다.
일부 실시예들에서, 제1 미디어 정보 어포던스는 외부 디바이스를 제1 미디어 아이템의 소스로서 식별하는 표시(예컨대, 622-1)를 포함한다.
일부 실시예들에서, 제1 미디어 아이템에 관한 제1 세트의 정보는 제1 미디어 아이템에 대응하는 미디어 아이템의 유형을 나타낸다(예컨대, 622-4, 902-4). 미디어 아이템들의 예시적인 유형들은 음악 트랙, 오디오 북, 팟캐스트, 비디오, 및 전화 통화를 포함하지만, 이들로 제한되지 않는다. 일부 실시예들에서, 전화 통화 미디어 아이템에 대한 제1 세트의 정보는 통화의 참가자의 아바타를 포함한다.
일부 실시예들에서, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 제1 미디어 아이템이 데이터 송신 조건을 만족한다는 결정에 따라(예를 들어, 제1 미디어 아이템은, 외부 디바이스에 이용가능하지만 전자 디바이스에는 이용가능하지 않은 애플리케이션 또는 계정에 의해 제공됨), 전자 디바이스는 외부 디바이스로부터 제1 미디어 아이템에 대한 데이터를 수신한다. 일부 실시예들에서, 제1 미디어 아이템을 포함하는 미디어 아이템들의 큐는 재생을 개시하기 전에 외부 디바이스 상에 존재한다. 일부 그러한 실시예들에서, 재생을 개시하는 것은 큐를 전자 디바이스로 이송하는 것을 포함한다. 일부 실시예들에서, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 제1 미디어 아이템이 데이터 송신 조건을 만족하지 않는다는 결정에 따라(예를 들어, 전자 디바이스는 제1 미디어 아이템에 대한 데이터를 외부 디바이스로 송신하고 있었고; 제1 미디어 아이템은 전화 통화이고; 제1 미디어 아이템은 전자 디바이스가 액세스를 갖는 특정 애플리케이션, 서비스, 또는 계정에 의해 제공됨), 전자 디바이스는 외부 디바이스로부터 제1 미디어 아이템에 대한 데이터를 수신하는 것을 보류한다. 제1 미디어 아이템이 데이터 송신 조건을 만족하는지 여부에 기초하여 외부 디바이스로부터 제1 미디어 아이템에 대한 데이터를 수신하는 것(또는 그렇지 않음)은, 사용자가 데이터를 수신하기 위해 추가 입력들을 제공해야 하는 것을 피한다. 추가 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 미디어 아이템을 포함하는 미디어 아이템들의 큐는 재생을 개시하기 전에 외부 디바이스 상에 존재한다. 일부 그러한 실시예들에서, 재생을 개시하는 것은 큐를 전자 디바이스로 이송하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 아이템은 공통 사용자 계정을 통해 전자 디바이스 및 외부 디바이스 둘 모두에 액세스가능하다. 일부 실시예들에서, 전자 디바이스는 공통 사용자 계정으로부터 제1 미디어 아이템을 획득한다(예컨대, 제1 아이템의 재생은 외부 디바이스로부터 전자 디바이스로 제1 미디어 아이템을 스트리밍하는 것을 포함하지 않는다). 일부 실시예들에서, 전자 디바이스는 공통 사용자 계정으로부터 큐를 획득한다.
일부 실시예들에서, 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시한 후, 시간 조건이 충족된다는 결정에 응답하여(예를 들어, 제1 유형의 제1 입력을 수신한 이래로 임계량의 시간이 경과하였음), 전자 디바이스는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지한다(예를 들어, 도 6p 참조).
일부 실시예들에서, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이한 후 그리고 제1 입력을 수신하기 전에, 전자 디바이스는 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 물리적 분리 조건(예컨대, 656에 의해 표현됨)을 만족한다는 표시를 검출한다. 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 물리적 분리 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 물리적 분리 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 미리정의된 임계 거리를 초과하는 경우에 만족된다. 일부 실시예들에서, 물리적 분리 조건과 연관된 임계 거리는 (제1) 근접성 조건과 연관된 제1 임계 거리보다 크다. 예를 들어, 물리적 분리 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제3 임계 거리(예컨대, 20 피트)를 초과하는 경우에 만족되고, 제1 근접성 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제1 임계 거리(예컨대, 1 내지 2 피트)보다 작은 경우에 만족되며, 여기서 제3 임계 거리는 제1 임계 거리보다 크다. 일부 실시예들에서, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이한 후 그리고 제1 입력을 수신하기 전에, 물리적 근접성이 물리적 분리 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지한다(예컨대, 도 11d). 물리적 근접성이 물리적 분리 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지하는 것은, 재생이 더 이상 제1 미디어 정보 어포던스의 선택을 통해 전자 디바이스 상에서 개시될 수 없음을 나타내는 피드백을 사용자에게 제공한다. 개선된 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 유형의 입력은 탭 제스처(예컨대, 610f)를 포함하고, 제2 유형의 입력은 스와이프 또는 드래그 제스처(예컨대, 610a; 수직 상향 또는 수직 하향 스와이프 또는 드래그 제스처)를 포함한다.
일부 실시예들에서, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스(예컨대, 608)를 디스플레이하는 동안, 전자 디바이스는 제2 미디어 정보 어포던스의 선택을 표현하는 제2 입력(예컨대, 610c)을 수신한다. 일부 실시예들에서, 제2 미디어 정보 어포던스의 선택을 표현하는 제2 입력을 수신하는 것에 응답하여, 전자 디바이스는 전자 디바이스 상에서 제2 미디어 아이템의 재생을 개시한다. 일부 실시예들에서, 제2 미디어 아이템은 제1 미디어 아이템이다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 제1 미디어 아이템의 표현 및 적어도 하나의 다른 미디어 아이템의 표현을 포함하는 미디어 아이템들의 큐를 표현한다. 일부 그러한 실시예들에서, 전자 디바이스는 입력(예컨대, 수평 스와이프 또는 드래그 제스처)에 응답하여 큐를 스크롤한다. 일부 실시예들에서, 큐 내의 미디어 아이템의 선택에 대응하는 입력에 응답하여, 전자 디바이스는 전자 디바이스 상에서 선택된 미디어 아이템의 재생을 개시한다. (예컨대, 제1 미디어 아이템에 관한 추가 정보와 함께) 제2 미디어 정보 어포던스를 디스플레이하고 제2 미디어 정보 어포던스의 선택에 응답하여 전자 디바이스 상에서 제2 미디어 아이템의 재생을 개시하는 것은, 추가 정보 및/또는 외부 디바이스 상의 재생에 대한 제어를 사용자에게 제공함으로써 개선된 피드백을 제공한다. 개선된 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 입력을 수신하는 것에 응답하여, 그리고 제1 입력이 제1 유형의 입력이라는 결정에 따라, 외부 디바이스는 제1 미디어 아이템을 재생하는 것을 중지한다(예컨대, 도 6p 참조). 일부 실시예들에서, 외부 디바이스는 제1 미디어 아이템을 계속해서 재생한다.
방법(800)(예컨대, 도 8)과 관련하여 위에서 설명된 프로세스들의 상세사항들은, 또한, 이하에서 기술되는 방법들에 유사한 방식으로 적용가능하다는 것에 유의한다. 예를 들어, 방법(1000)은, 선택적으로, 방법(800)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(800)의 동작(806)은 방법(1000)의 동작(1004)에서 설명된 제1 미디어 정보 어포던스를 선택하기 위해 수행될 수 있고, 동작들(808, 810, 및/또는 812)은 선택에 응답하여 방법(1000)의 일부로서 수행될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 9a 내지 도 9d는 일부 실시예들에 따른, 미디어의 재생을 제어하기 위한 예시적인 방법들 및 사용자 인터페이스들을 예시한다. 일부 실시예들에서, 도 9a 내지 도 9d를 참조하여 기술된 기법들은 사용자가 터치 입력으로 상이한 디바이스 상에서 미디어 아이템의 재생을 개시할 수 있게 한다.
도 9a는 도 6a 내지 도 6p를 참조하여 전술된, 디바이스(600), 디바이스(650), 및 근접성 조건 범위 표시자(652)를 예시한다. 또한, 도 9a는 재생 근접성 조건 범위 표시자(654)를 예시한다. 아래에서 더 상세히 설명되는 바와 같이, 미디어 아이템의 재생은 디바이스(600)를 재생 근접성 조건 범위 표시자(654) 내에 가져옴으로써 (예를 들어, 606, 608, 616, 620, 및 622와 같은 미디어 정보 어포던스의 선택 없이) 자동으로 개시될 수 있다.
재생 근접성 조건 범위 표시자(654)는 시각적 보조로서 포함되고, 재생 근접성 조건을 만족할 물리적 근접성을 표현하도록 의도된다. 재생 근접성 조건 범위 표시자(654) 내의(예컨대, 부분적으로 또는 완전히) 검출가능한 디바이스(예컨대, 600)의 존재는 재생 근접성 조건을 만족할 것이지만, 검출가능한 디바이스가 재생 근접성 조건 범위 표시자(654)의 외부에 위치되는 경우에는 그렇지 않을 것이다. 재생 근접성 조건 범위 표시자(654)의 그래픽 표현은 재생 근접성 조건이 만족되는지 여부를 결정하는 것의 범주를 제한하도록 의도되지 않는다. 또한, 도면들은 반드시 축척대로 도시된 것은 아니며, 단지 시각적 보조로서 포함된다. 따라서, 달리 언급되지 않는 한, 도면들에 도시된 특징부들의 크기 및 축척은 가까이 근접하는 데 또는 재생 근접성 조건을 만족하는 데 요구되는 거리에 대한 제한으로서 의도되지 않는다. 그러나, 도 9a에서 화살표들(d1, d2)에 의해 나타낸 바와 같이, 재생 근접성 조건 범위 표시자(654)는 근접성 조건 범위 표시자(652)의 내부에 있어서(예컨대, d1은 d2보다 큼), 디바이스(600)는 근접성 조건 범위 표시자(652)와 연관된 근접성 조건을 만족하기 위해서 있는 것보다 재생 근접성 조건 범위 표시자(654)와 연관된 재생 근접성 조건을 만족하기 위해 디바이스(650)에 더 가까워야만 한다.
도 9a는 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부에 있지 않고, 디바이스(600)가 활성 전화 통화를 가지며(전화 사용자 인터페이스(900) 및 오디오 활동 표시자(625)에 의해 나타낸 바와 같음), 디바이스(650)가 오디오를 재생하고 있지 않은(오디오 활동 표시자(675)에 의해 나타낸 바와 같음) 시나리오를 예시한다. 도 9a에서, 디바이스(600)는 전화 통화에 대한 오디오 출력을 제공하는 것(오디오 상태 표시자(900-1)에 의해 나타낸 바와 같음) 및 전화 통화에 대한 오디오 입력을 수신하는 것 둘 모두를 수행하고 있다. 도 9a 내지 도 9d가 전화 통화 미디어 아이템을 참조하여 기술되지만, 기술된 기법들은 다른 유형의 미디어 아이템들(예컨대, 비디오 통화, 음악 트랙, 오디오 북, 팟캐스트)에 적용될 수 있다. 유사하게, 도 6a 내지 도 6p를 참조하여 전술된 기법들은 전화 통화에 적용될 수 있다.
도 9b는 디바이스(600) 상의 전화 통화 동안에 디바이스(600)가 적어도 부분적으로 근접성 조건 범위 표시자(652)의 내부로 이동되는 것을 예시한다. 근접성 조건 범위 표시자(652)는 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다).
물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(600) 상에서 현재 재생중인 미디어 아이템(예컨대, 사용자 인터페이스(900)와 연관된 전화 통화)을 표현하는 미디어 정보 어포던스(902)를 디스플레이한다. 미디어 정보 어포던스(902)는 전화 통화 미디어 아이템에 적용될 때 미디어 정보 어포던스들(606, 608, 616, 620, 622)과 유사하다.
미디어 정보 어포던스(902)는 선택적으로 도 9b의 전화 통화에 관한 정보를 제공하는 여러 그래픽 요소들을 포함하며, 이들은 다음을 포함한다: (1) 디바이스(600)가 근접해 있는 디바이스(예컨대, 주방 스피커로도 지칭되는, 디바이스(650))를 나타내는 외부 디바이스 표시자(902-1); (2) 미디어 정보 어포던스(902)와 연관된 액션 또는 기능(예컨대, 미디어 정보 어포던스(902)의 선택에 응답하여 수행되는 액션)을 나타내는 액션 표시자(902-2); (3) 미디어 아이템을 식별하는 정보(예컨대, 통화 참가자("John Appleseed") 및 현재 통화 소스 "전화")를 제공하는 미디어 아이템 표시자(902-3); 및 (4) 미디어 아이템과 연관된 이미지를 포함하는 미디어 아이템 그래픽(902-4). 도 9b에 예시된 실시예에서, 미디어 아이템 그래픽(902-4)은 통화의 상대방 통화 참가자의 표현(예컨대, 아바타) 및 전화를 표현하는 아이콘 또는 섬네일을 포함한다. 일부 실시예들에서, 미디어 아이템 그래픽(902-4)에서의 통화 참가자의 표현은 참가자의 이니셜 또는 이름을 포함한다.
도 9b는 미디어 정보 어포던스(902)가 디바이스(600) 상에 디스플레이되는 동안 그리고 디바이스(600) 상의 전화 통화가 프로세스 중인 동안 디바이스(600)가 적어도 부분적으로 재생 근접성 조건 범위 표시자(654)의 내부로 이동되는 것을 예시한다. 재생 근접성 조건 범위 표시자(654)는 재생 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 재생 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 재생 근접성 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 재생 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 재생 근접성 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다).
물리적 근접성이 재생 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(650) 상에서 전화 통화의 재생을 개시한다. 도 9c에 도시된 바와 같이, 물리적 근접성이 재생 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는, 디바이스(600) 상에서 현재 프로세스 중인 전화 통화가 디바이스(600)로 이송되고 있음을 나타내기 위해 업데이트된 액션 표시자(902-2a)를 갖는, 업데이트된 미디어 정보 어포던스(902a)(업데이트된 미디어 정보 어포던스(616a, 622a)와 유사함)를 디스플레이한다. 일부 실시예들에서, 전화 통화의 재생을 개시하는 것은 디바이스(650) 상에서 전화 통화의 오디오를 출력하는 것을 포함한다. 일부 실시예들에서, 물리적 근접성이 재생 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(650)는 전화 통화에 대한 오디오 입력을 수신하기 시작한다(예컨대, 디바이스(650)에 의해 수신된 오디오는 다른 참가자에 송신됨). 일부 실시예들에서, 디바이스(600)는 전화 통화의 소스를 유지한다.
도 9d에 도시된 바와 같이, 업데이트된 미디어 정보 어포던스(902a)를 디스플레이한 후(예를 들어, 디바이스(650) 상에서 재생이 성공적으로 시작되었다는 표시에 응답하여, 또는 물리적 근접성이 재생 근접성 조건을 만족한다는 표시를 검출하거나 미디어 정보 어포던스(902a)를 디스플레이한 후 미리결정된 시간량 뒤에), 디바이스(600)는 미디어 정보 어포던스(902a)를 디스플레이하는 것을 중지하고, (업데이트된 오디오 상태 표시자(900-1a)에 의해 나타낸 바와 같이) 오디오가 디바이스(650) 상에서 재생되고 있음을 나타내기 위해 사용자 인터페이스(900)를 업데이트한다.
도 10은 일부 실시예들에 따른, 전자 디바이스를 사용하여 오디오 재생을 제어하기 위한 방법을 예시하는 흐름도이다. 방법(1000)은 디스플레이 디바이스(예컨대, 602)를 갖는 디바이스(예컨대, 100, 300, 500, 또는 600)에서 수행된다. 방법(1000)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 방법(1000)은 오디오 재생을 제어하기 위한 직관적인 방식을 제공한다. 본 방법은 오디오 재생을 제어하는 것에 대한 사용자의 인지적 부담을 감소시키며, 이에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 오디오 재생을 제어할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 전자 디바이스(예컨대, 600)는 컴퓨터 시스템이다. 컴퓨터 시스템은, 선택적으로, 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신(예컨대, 유선 통신, 무선 통신)한다. 디스플레이 생성 컴포넌트는 CRT 디스플레이를 통한 디스플레이, LED 디스플레이를 통한 디스플레이, 또는 이미지 투영을 통한 디스플레이와 같은 시각적 출력을 제공하도록 구성된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 디스플레이 생성 컴포넌트는 컴퓨터 시스템과 별개이다. 사용자 입력을 수신하는 터치 감응형 표면과 같은 하나 이상의 입력 디바이스들이 입력을 수신하도록 구성된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 통합된다. 일부 실시예들에서, 하나 이상의 입력 디바이스들은 컴퓨터 시스템과 별개이다. 따라서, 컴퓨터 시스템은, 유선 또는 무선 연결을 통해, 데이터(예컨대, 이미지 데이터 또는 비디오 데이터)를 통합 또는 외부 디스플레이 생성 컴포넌트로 송신하여 콘텐츠를 (예를 들어, 디스플레이 디바이스를 사용하여) 시각적으로 생성할 수 있고, 유선 또는 무선 연결로, 하나 이상의 입력 디바이스들로부터 입력을 수신할 수 있다.
전자 디바이스는, 외부 디바이스(예컨대, 650)에 연결되는 동안, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건(예컨대, 652에 의해 표현됨)을 만족한다는 표시를 검출한다(1002). 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 제1 근접성 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제1 임계 거리(예컨대, 6 인치, 12 인치, 18 인치, 24 인치) 미만인 경우 만족된다.
물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는, 디스플레이 디바이스를 통해, 제1 미디어 아이템(예컨대, 음악 트랙, 오디오 북(또는 챕터와 같은, 그의 일부분), 팟캐스트, 비디오, 전화 통화; 전자 디바이스 상에서 재생될 미디어 아이템(예컨대, 전자 디바이스 상에서 현재 재생되고 있는 미디어 아이템, 전자 디바이스 상에서 재생되고 있었고 종료되었거나 중지 또는 일시정지된 가장 최근의 미디어 아이템, 사용자가 미디어 애플리케이션을 시작하거나 재생목록을 선택할 때 전자 디바이스 상에서 다음에 재생되도록 스케줄링된 미디어 아이템, 예컨대 재생목록 내의 제1 트랙); 외부 디바이스 상에서 재생될 미디어 아이템)을 표현하는 제1 미디어 정보 어포던스(예컨대, 902)를 디스플레이한다(1004). 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것은, 물리적 근접성이 근접성 조건을 만족함을 사용자에게 나타냄으로써 자동으로 피드백을 제공하여, 제1 미디어 정보 어포던스를 디스플레이하는 데 필요한 입력들의 수를 감소시킨다. 추가 사용자 입력을 요구하지 않으면서 조건들의 세트가 충족되었을 때 개선된 피드백을 제공하여, 동작을 수행하는 데 필요한 입력들의 수를 감소시키고, 동작을 수행하는 것은, (예를 들어, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 보다 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 보다 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스는 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건(예컨대, 654에 의해 표현됨)을 만족한다는 표시를 검출한다(1006). 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 전자 디바이스와 외부 디바이스 사이의 거리가 제2 임계 거리보다 작은 경우 제2 근접성 조건이 만족되며, 여기서 제2 임계 거리는 제1 임계 거리보다 작다(예컨대, 0 인치, 0.5 인치, 1 인치, 1.5 인치, 2 인치, 6 인치 미만). 일부 실시예들에서, 제2 근접성 조건은, 전자 디바이스가 제1 근접성 조건(예를 들어, 제1 미디어 정보 어포던스의 디스플레이를 트리거하는 데 요구되는 근접성)을 만족하는 데 요구되는 것보다 외부 디바이스에 더 가까운 것에 대응한다.
물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는 제1 미디어 아이템의 재생을 개시한다(1008)(예컨대, 도 9c). 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것은 제1 미디어 정보 어포던스의 선택을 검출하지 않고서 수행된다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것은 제1 미디어 아이템이 전자 디바이스 상에서 재생되게 한다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것은 제1 미디어 아이템이 외부 디바이스 상에서 재생되게 한다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것은 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하는 것을 포함한다. 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템의 재생을 개시하는 것은, 물리적 근접성이 근접성 조건을 만족함을 사용자에게 나타냄으로써 자동으로 피드백을 제공하여, 제1 미디어 정보 어포던스를 디스플레이하는 데 필요한 입력들의 수를 감소시킨다. 추가 사용자 입력을 요구하지 않으면서 조건들의 세트가 충족되었을 때 개선된 피드백을 제공하여, 동작을 수행하는 데 필요한 입력들의 수를 감소시키고, 동작을 수행하는 것은, (예를 들어, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 보다 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 보다 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 근접성 조건은 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 임계 거리(예컨대, 652, D1)보다 작은 경우에 만족된다. 일부 실시예들에서, 제2 근접성 조건은 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 임계 거리보다 작은 제2 임계 거리(예컨대, 654, D2)보다 작은 경우에 만족된다.
일부 실시예들에서, 제1 미디어 정보 어포던스는 제1 미디어 아이템의 재생이 개시될 수 있는 디바이스를 식별하는 표시(예컨대, 902-1, 902-2)를 포함한다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 제1 미디어 아이템의 재생이 개시되고 있는 디바이스(예컨대, 목적지 디바이스)를 식별하는 표시를 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스는 제1 미디어 아이템의 재생이 개시될 수 있는 디바이스의 표시를 포함하고, 제1 미디어 정보 어포던스의 그 선택은 표시된 디바이스 상에서 제1 미디어 아이템의 재생을 개시할 것이다.
일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스는 제1 미디어 아이템의 재생이 개시되었음을 나타내기 위해 제1 미디어 정보 어포던스의 시각적 외관을 변경한다(예컨대, 902-2a). 일부 실시예들에서, 제1 미디어 정보 어포던스의 시각적 외관을 변경하는 것은, 선택적으로 제1 미디어 아이템에 관한 적어도 일부 정보의 디스플레이를 유지하면서, 제1 미디어 아이템의 재생이 개시되었음을 나타내는 텍스트를 디스플레이하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스의 시각적 외관을 변경하는 것은, 제1 미디어 정보 어포던스의 선택이 제1 미디어 아이템의 재생을 개시할 것이라는 표시를, 제1 미디어 아이템의 재생이 개시되었다는 표시(예컨대, 텍스트)로 대체하는 것을 포함한다.
일부 실시예들에서, 제1 미디어 정보 어포던스는 제1 미디어 아이템에 대응하는 미디어 아이템의 유형을 나타낸다(예컨대, 606-5, 622-4, 902-4). 미디어 아이템들의 예시적인 유형들은 음악 트랙, 오디오 북, 팟캐스트, 비디오, 및 전화 통화를 포함하지만, 이들로 제한되지 않는다. 일부 실시예들에서, 전화 통화 미디어 아이템에 대한 제1 미디어 정보 어포던스는 통화의 참가자의 아바타를 포함한다.
일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 제1 미디어 아이템이 데이터 송신 조건을 만족한다는 결정에 따라(예를 들어, 제1 미디어 아이템은 제1 미디어 아이템의 재생이 개시되고 있는 디바이스에 이용가능하지 않은 애플리케이션, 서비스, 또는 계정에 의해 제공됨), 전자 디바이스는 전자 디바이스와 외부 디바이스 사이에서 제1 미디어 아이템에 대한 데이터를 송신한다. 일부 실시예들에서, 제1 미디어 아이템을 포함하는 미디어 아이템들의 큐는 초기에 재생을 개시하기 전에 제1 미디어 아이템의 소스인 디바이스 상에 존재한다. 일부 그러한 실시예들에서, 재생을 개시하는 것은 제1 미디어 아이템의 재생이 개시되고 있는 디바이스로 큐를 이송하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 제1 미디어 아이템이 데이터 송신 조건을 만족하지 않는다는 결정에 따라(예를 들어, 제1 미디어 아이템은 전자 디바이스 및 외부 디바이스 둘 모두가 액세스를 갖는 특정 애플리케이션, 서비스, 또는 계정에 의해 제공됨), 전자 디바이스는 전자 디바이스와 외부 디바이스 사이에서 제1 미디어 아이템에 대한 데이터를 송신하는 것을 보류한다. 제1 미디어 아이템이 데이터 송신 조건을 만족하는지 여부에 기초하여 전자 디바이스와 외부 디바이스 사이에서 제1 미디어 아이템에 대한 데이터를 송신하는 것(또는 그렇지 않음)은 사용자가 데이터를 송신하기 위해 추가 입력들을 제공해야 하는 것을 피한다. 추가 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 미디어 아이템을 포함하는 미디어 아이템들의 큐는 재생을 개시하기 전에 (예를 들어, 전자 디바이스 또는 외부 디바이스 상에) 존재한다. 일부 그러한 실시예들에서, 재생을 개시하는 것은 전자 디바이스와 외부 디바이스 사이에서 큐를 이송하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 아이템은 공통 사용자 계정을 통해 전자 디바이스 및 외부 디바이스 둘 모두에 액세스가능하다. 일부 실시예들에서, 재생이 개시되는 디바이스는 공통 사용자 계정으로부터 제1 미디어 아이템을 획득한다(예컨대, 제1 아이템의 재생은 전자 디바이스와 외부 디바이스 사이에서 제1 미디어 아이템을 스트리밍하는 것을 포함하지 않는다). 일부 실시예들에서, 재생이 개시되는 디바이스는 공통 사용자 계정으로부터 큐를 획득한다.
일부 실시예들에서, 제1 미디어 아이템의 재생을 개시한 후, 시간 조건이 충족된다는 결정에 응답하여(예를 들어, 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출한 이래로 임계량의 시간이 경과하였음), 전자 디바이스는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지한다(예를 들어, 도 9c 및 도 9d 참조).
일부 실시예들에서, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이한 후 그리고 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하기 전에, 전자 디바이스는 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 물리적 분리 조건(예컨대, 656에 의해 표현됨)을 만족한다는 표시를 검출한다. 일부 실시예들에서, 표시는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 물리적 분리 조건을 만족한다는 결정에 응답하여 제공된다. 일부 실시예들에서, 물리적 분리 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 미리정의된 임계 거리를 초과하는 경우에 만족된다. 일부 실시예들에서, 물리적 분리 조건과 연관된 임계 거리는 제1 근접성 조건과 연관된 임계 거리(예를 들어, 제1 임계 거리)보다 크다. 예를 들어, 물리적 분리 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제3 임계 거리(예컨대, 20 피트)를 초과하는 경우에 만족되고, 제1 근접성 조건은 전자 디바이스와 외부 디바이스 사이의 거리가 제1 임계 거리(예컨대, 1 내지 2 피트)보다 작은 경우에 만족되며, 여기서 제3 임계 거리는 제1 임계 거리보다 크다. 일부 실시예들에서, 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이한 후 그리고 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하기 전에, 물리적 근접성이 물리적 분리 조건을 만족한다는 표시를 검출하는 것에 응답하여, 전자 디바이스는 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지한다(예컨대, 도 11c 및 도 11d 참조). 물리적 근접성이 물리적 분리 조건을 만족한다는 표시를 검출하는 것에 응답하여 제1 미디어 아이템을 표현하는 제1 미디어 정보 어포던스를 디스플레이하는 것을 중지하는 것은, 재생이 더 이상 제1 미디어 정보 어포던스의 선택을 통해 개시될 수 없음을 나타내는 피드백을 사용자에게 제공한다. 개선된 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하기 전에, 전자 디바이스는 제1 미디어 정보 어포던스의 선택을 표현하는 입력(예컨대, 610a, 610d, 610e, 610f)을 검출한다. 일부 실시예들에서, 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하기 전에, 제1 입력을 수신하는 것에 응답하여, 제1 입력이 제1 유형의 입력(예컨대, 제1 미디어 정보 어포던스에 대응하는 위치에서 전자 디바이스의 터치 감응형 디스플레이 상의 탭 제스처)이라는 결정에 따라, 전자 디바이스는 제1 미디어 아이템의 재생을 개시한다. 일부 실시예들에서, 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하기 전에, 제1 입력을 수신하는 것에 응답하여, 제1 입력이 제1 유형의 입력과는 상이한 제2 유형의 입력(예를 들어, 제1 미디어 정보 어포던스 상의 방향성 스와이프 제스처)이라는 결정에 따라, 전자 디바이스는, 디스플레이 디바이스를 통해, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스(예컨대, 608)를 디스플레이하며, 제2 미디어 정보 어포던스는 제1 미디어 정보 어포던스와 상이하다. 제1 미디어 어포던스를 선택하는 입력의 유형에 의존하여 제1 미디어 아이템의 재생을 개시하는 것 또는 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 것은, 추가의 디스플레이된 제어부들로 사용자 인터페이스를 혼란스럽게 하지 않고서 제1 미디어 어포던스에 관련된 추가의 제어 옵션들을 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 추가의 제어 옵션들을 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 미디어 아이템을 표현하는 제2 미디어 정보 어포던스를 디스플레이하는 동안, 전자 디바이스는 제2 미디어 정보 어포던스의 선택을 표현하는 제2 입력(예컨대, 610c)을 수신한다. 일부 실시예들에서, 제2 미디어 정보 어포던스의 선택을 표현하는 제2 입력을 수신하는 것에 응답하여, 전자 디바이스는 제2 미디어 아이템의 재생을 개시한다. 일부 실시예들에서, 제2 미디어 아이템은 제1 미디어 아이템이다. 일부 실시예들에서, 제2 미디어 정보 어포던스는 제1 미디어 아이템의 표현 및 적어도 하나의 다른 미디어 아이템의 표현을 포함하는 미디어 아이템들의 큐를 표현한다. 일부 그러한 실시예들에서, 전자 디바이스는 입력(예컨대, 수평 스와이프 또는 드래그 제스처)에 응답하여 큐를 스크롤한다. 일부 실시예들에서, 큐 내의 미디어 아이템의 선택에 대응하는 입력에 응답하여, 전자 디바이스는 선택된 미디어 아이템의 재생을 개시한다. (예컨대, 제1 미디어 아이템에 관한 추가 정보와 함께) 제2 미디어 정보 어포던스를 디스플레이하고 제2 미디어 정보 어포던스의 선택에 응답하여 제2 미디어 아이템의 재생을 개시하는 것은, 추가 정보 및/또는 재생에 대한 제어를 사용자에게 제공함으로써 개선된 피드백을 제공한다. 개선된 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 동안 제1 미디어 아이템이 전자 디바이스 상에서 재생되고 있다는 결정에 따라(예컨대, 도 6g), 전자 디바이스는 전자 디바이스 상에서 제1 미디어 아이템의 재생을 중지하고 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시한다(예컨대, 도 6i). 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제2 근접성 조건을 만족한다는 표시를 검출하는 동안 제1 미디어 아이템이 외부 디바이스 상에서 재생되고 있다는 결정에 따라, 전자 디바이스는 외부 디바이스 상에서 제1 미디어 아이템의 재생을 중지하고 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시한다.
일부 실시예들에서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 동안 제1 미디어 아이템은 전자 디바이스 상에서 재생되고 있다(예컨대, 도 6g 및 도 6k 참조). 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하는 것을 포함한다. 일부 실시예들에서, 제1 미디어 정보 어포던스는, 전자 디바이스와 외부 디바이스 사이의 제1 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 시점에 전자 디바이스가 제1 미디어 아이템을 재생하고 있다는 결정에 따라 제1 미디어 아이템을 표현한다. 일부 실시예들에서, 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시하도록 외부 디바이스에 명령어를 송신하는 것은, 제1 미디어 아이템이 전자 디바이스 상에서 현재 재생되고 있다는 결정에 따라 수행된다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것은 전자 디바이스 상에서 제1 미디어 아이템을 재생하는 것을 중지하는 것을 포함한다.
일부 실시예들에서, 외부 디바이스 상의 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스는 외부 디바이스 상에서 제3 미디어 아이템을 재생하는 것을 중지한다(예컨대, 도 6l).
일부 실시예들에서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 동안 전자 디바이스도 외부 디바이스도 미디어 아이템을 재생하고 있지 않다는 결정에 따라(예컨대, 6b), 제1 미디어 아이템은 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하기 전 가장 최근에 전자 디바이스 상에서 재생된 미디어 아이템이다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스는 외부 디바이스 상에서 제1 미디어 아이템의 재생을 개시한다. 일부 실시예들에서, 제1 미디어 정보 어포던스는, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 시점에 외부 디바이스가 미디어 아이템을 재생하고 있지 않다는 결정에 따라 전자 디바이스 상에서 가장 최근에 재생된 미디어 아이템을 표현한다.
일부 실시예들에서, 전자 디바이스와 외부 디바이스 사이의 물리적 근접성이 제1 근접성 조건을 만족한다는 표시를 검출하는 동안, 전자 디바이스가 미디어 아이템을 재생하고 있지 않고 외부 디바이스가 미디어 아이템을 재생하고 있다는 결정에 따라(예컨대, 도 6n), 제1 미디어 아이템은 외부 디바이스 상에서 재생되는 미디어 아이템이다. 일부 실시예들에서, 제1 미디어 아이템의 재생을 개시하는 것의 일부로서, 전자 디바이스는 전자 디바이스 상에서 제1 미디어 아이템의 재생을 개시한다.
방법(1000)(예컨대, 도 10)과 관련하여 전술된 프로세스들의 상세사항들은 또한 전술된 방법들과 유사한 방식으로 적용가능함에 유의한다. 예를 들어, 방법(700) 및/또는 방법(800)은, 선택적으로, 방법(1000)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(1000)의 동작들(1006, 1008)은 방법(700) 및/또는 방법(800)에서 기술된 제1 미디어 아이템의 재생을 개시하기 위해 방법(700) 및/또는 방법(800)에 적용될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 11a 내지 도 11d는 예를 들어, 미디어 정보 어포던스들(606, 608, 616, 620, 622, 902)과 같은 그래픽 요소들의 디스플레이를 중지하기 위한 기법들을 예시한다. 도 11a는 전술된 바와 같은, 디바이스(600), 디바이스(650), 및 근접성 조건 범위 표시자(652)를 예시한다. 또한, 도 11a는 요소 제거 조건 범위 표시자(656)를 포함한다. 요소 제거 조건 범위 표시자(656)는 시각적 보조로서 포함되고, 요소 제거 조건을 만족할 범위를 표현하도록 의도된다. 요소 제거 조건 범위 표시자(656) 외부의(예컨대, 부분적으로 또는 완전히) 검출가능한 디바이스(예컨대, 600)의 존재는 요소 제거 조건을 만족할 것이지만, 검출가능한 디바이스가 요소 제거 조건 범위 표시자(656)의 내부에 위치되는 경우에는 그렇지 않을 것이다. 요소 제거 조건 범위 표시자(656)의 그래픽 표현은 요소 제거 조건이 만족되는지 여부를 결정하는 것의 범주를 제한하도록 의도되지 않는다. 또한, 도면들은 반드시 축척대로 도시된 것은 아니며, 단지 시각적 보조로서 포함된다. 따라서, 달리 언급되지 않는 한, 도면들에 도시된 특징부들의 크기 및 축척은 요소 제거 조건을 만족하는 데 요구되는 거리에 대한 제한으로서 의도되지 않는다. 그러나, 요소 제거 조건 범위 표시자(656)는 근접성 조건 범위 표시자(652)의 외부에 있어서, 디바이스(600)는 근접성 조건 범위 표시자(652)와 연관된 근접성 조건을 만족하기 위해서 있는 것보다 요소 제거 조건 범위 표시자(656)와 연관된 요소 제거 조건을 만족하기 위해 디바이스(650)로부터 더 멀리 떨어져 있어야 한다.
도 11a는 디바이스(600)가 근접성 조건 범위 표시자(652)의 내부에 있지 않은 시나리오를 예시한다(예컨대, 도 6a, 도 6f, 도 6j, 도 6m, 또는 도 9a). 도 11b는 디바이스(600)가 적어도 부분적으로 근접성 조건 범위 표시자(652)의 내부로 이동되는 것을 예시한다(예컨대, 도 6b, 도 6g, 도 6k, 도 6n, 또는 도 9b). 근접성 조건 범위 표시자(652)는 근접성 조건을 만족하는 물리적 근접성을 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 근접성 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다). 물리적 근접성이 근접성 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 미디어 아이템을 표현하는 미디어 정보 어포던스(1100)(예컨대, 미디어 정보 어포던스(606, 608, 616, 620, 622, 또는 902))를 디스플레이한다. 일부 실시예들에서, 미디어 정보 어포던스에 의해 표현된 미디어 아이템은 전술된 바와 같이, 디바이스(600) 및/또는 디바이스(650)의 오디오 출력 상태에 기초한다.
도 11c는, 미디어 정보 어포던스(1100)가 디스플레이되는 동안, 디바이스(600)가 근접성 조건 범위 표시자(652)의 외부로 이동되지만, 요소 제거 조건 범위 표시자(656) 내에 남아 있는 것을 예시한다. 도 11c에 도시된 바와 같이, 디바이스(600)는 미디어 정보 어포던스(1100)의 디스플레이를 계속한다.
도 11d는 미디어 정보 어포던스(1100)가 디스플레이되는 동안, 디바이스(600)가 요소 제거 조건 범위 표시자(656)의 외부로 이동되는 것을 예시한다. 요소 제거 조건 범위 표시자(656)는 요소 제거 조건을 만족하는 물리적 범위를 표현하기 때문에, 디바이스(600)는 디바이스(600)와 디바이스(650) 사이의 물리적 범위가 요소 제거 조건을 만족한다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 요소 제거 조건이 만족된다는 표시를 전송하기 위해 디바이스(650)와의 통신을 개시한다). 일부 예들에서, 디바이스(650)는 요소 제거 조건이 만족된다는 표시를 검출한다(예컨대, 그리고, 이에 응답하여, 예를 들어, 요소 제거 조건이 만족된다는 표시를 전송하기 위해 디바이스(600)와의 통신을 개시한다). 디바이스(600)와 디바이스(650) 사이의 물리적 범위가 요소 제거 조건을 만족한다는 표시를 검출하는 것에 응답하여, 디바이스(600)는 미디어 정보 어포던스(1100)의 디스플레이를 중지한다(예컨대, 디스플레이(602)로부터 미디어 정보 어포던스(1100)를 제거함).
도 12는 일부 실시예들에 따른, 다이어그램(1200)을 포함하고 물리적 구조물 및 물리적 구조물 내에 그리고 주위에 위치된 디바이스들의 예시적인 세트를 예시한다. 도 12는 도 14, 도 16, 도 18, 도 20, 및 도 23에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
다이어그램(1200)은 집(1202), 및 액세서리 디바이스들의 세트(예컨대, 디바이스(1246), 디바이스(1204) 등)를 포함한다. 집(1202)의 내부는 다수의 방들, 예를 들어 주방(1202a), 식당(1202b), 침실(1202c), 거실(1202d), 및 일광욕실(1202e)을 포함한다. 주방(1202a)은 집(1202)의 상부 좌측 부분에 있고, 식당(1202b)은 주방(1202a)과 침실(1202c) 사이에 있으며, 여기에서 침실(1202c)은 식당(1202b)의 우측에 있다. 주방(1202a)과 식당(1202b)은 그들 사이에 벽을 갖지 않는 반면, 식당(1202b)과 침실(1202c)은 그들 사이에 벽을 갖는다. 거실(1202d)은 집(1202)의 저부 좌측 부분에 있고, 일광욕실(1202e)은 집(1202)의 저부 우측 부분에 있다. 집(1202)의 외부에는 현관(1202f)이 위치되어 있다. 일부 실시예들에서, 집(1202)은 도 12에 도시된 것들 이외의 방들을 포함하고/하거나, 도 12에 도시된 방들을 제외한다. 다이어그램(1200)이 집을 도시하지만, 이는 단지 예일 뿐이고, 본 명세서에서 설명되는 기법들은 사무실 건물, 호텔, 아파트 등과 같은 다른 유형들의 물리적 구조물들에 대해서도 작동할 수 있다는 것이 인식되어야 한다. 도 12에 예시된 바와 같이, 집(1202)의 각각의 부분(예컨대, 방, 현관)은 적어도 하나의 디바이스를 갖는다. 그러나, 일부 실시예들에서, 집(1202)의 일부분은 디바이스를 갖지 않는다.
도 12에 예시된 바와 같이, 주방 스피커(1206)는 주방(1202a) 내의 스토브와 벽 사이의 카운터 상에 위치된다. 식당 조명(1212) 및 식당 스피커(1216)는 식당(1202b) 내에 위치된다. 식당 조명(1212)은 식당 테이블 상에 위치되고, 식당 스피커(1216)는 식당 테이블의 우측에 위치된다. 또한, 식당(1202b) 내의 벽 상에 온도조절기(1218)가 또한 있다. 침실(1202c)에서, 침실 조명(1232)은 침대의 측부에 인접해 있고, 침실 스피커(1236)는 침대의 반대 측부에 위치된다. 거실(1202d)에서, 거실 스피커(1246) 및 거실 스피커(1248)는 텔레비전(1244)의 서로 반대편인 측부들 상에 있고, 거실 램프(1242)는 텔레비전(1244)의 전방에 위치된다. 일광욕실(1202e)에서, 일광욕실 스피커(1256) 및 일광욕실 스피커(1258)는 방의 서로 반대편인 측부들 상에 위치된다. 현관(1202f) 상에는 현관 조명(1262), 카메라 초인종(1264), 및 초인종(1266)과 같은 디바이스들이 위치되어 있다.
이러한 예에서, 도 12에 도시된 스피커들(예컨대, 주방 스피커(1206), 식당 스피커(1216), 침실 스피커(1236), 거실 스피커(1246), 거실 스피커(1248), 일광욕실 스피커(1256), 및 일광욕실 스피커(1258)), 조명들(예컨대, 식당 (1212), 침실 조명(1232), 거실 램프(1242), 현관 조명(1262)), 온도조절기(1218), 텔레비전(1244), 초인종 카메라(1264), 및 초인종(1266)은 집(1202)에 할당된다(예컨대, 집(1202)에 대응하는 디바이스들의 그룹에 (예컨대, 집(1202)과 연관된 사용자 계정에 의해) 프로그램식으로 맵핑된다). 게다가, 개개의 개별 스피커, 조명, 텔레비전, 온도조절기, 카메라, 및 초인종은 또한 그것이 위치되는 집의 일부분(예컨대, 방, 그 일부분)에 할당된다(예컨대, 그에 대응하는 그룹에 맵핑된다). 예를 들어, 주방 스피커(1206)는 주방(1202a)에 할당되고(예컨대, 주방에 대응하는 그룹에 프로그램식으로 맵핑됨); 식당 조명(1212), 식당 스피커(1216), 온도조절기(1218)는 식당(1202b)에 할당되고; 침실 조명(1232) 및 침실 스피커(1236)는 침실(1202c)에 할당되며; 거실 램프(1242), 텔레비전(1244), 거실 스피커(1246) 및 거실 스피커(1248)는 거실(1202d)에 할당되고; 일광욕실 스피커(1256) 및 일광욕실 스피커(1258)는 일광욕실(1202e)에 할당되고; 현관 조명(1262), 카메라 초인종(1264), 및 초인종(1266)은 현관(1202f)에 할당된다. 일부 실시예들에서, 집(1202)의 일부분에 대응하는 각각의 그룹은 또한 전체 집(1202)에 할당된다. 따라서, 이 예에서, 집(1202)의 방 또는 집(1202)의 현관에 맵핑되는 디바이스들은 또한 전체 집(1202)에 동시에 맵핑된다.
일부 실시예들에서, 도 12에 도시된 스피커들, 조명들, 카메라들, 초인종들, 및 텔레비전들은, 서로 직접 연결되거나 하나 이상의 네트워크들(예컨대, 무선 네트워크들(예컨대, 블루투스, NFC, Wi-Fi, 4G 등))을 통해 서로 간접적으로 연결되는 스마트 디바이스들이다. 일부 실시예들에서, 스피커들은 전술된 바와 같이 디바이스(650)의 하나 이상의 컴포넌트들을 포함한다. 일부 실시예들에서, 스마트 어플라이언스들, 스마트 온도조절기들, 스마트 플러그 콘센트(plug outlet)들 등과 같은 다른 스마트 디바이스들이 하나 이상의 네트워크들에 연결된다. 일부 실시예들에서, 하나 이상의 개인용 디바이스들이 집(1202)에 할당될 수 있다. 일부 실시예들에서, 집(1202)에 할당되는 개인용 디바이스들은 전자 디바이스(600)를 포함한다. 일부 실시예들에서, 개인용 디바이스들은 하나 이상의 태블릿들, 스마트워치들, 랩톱들, 데스크톱들 등을 포함한다.
도 13a 내지 도 13m은 일부 실시예들에 따른, 제어부들을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 이들 도면들의 사용자 인터페이스들은 도 14에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
도 13a 내지 도 13i는 디바이스(600)의 사용자 컨텍스트에 기초하여 다수의 제어부들의 디스플레이를 관리하기 위한 예시적인 시나리오들을 예시한다. 도 13a 내지 도 13i의 대부분은 집(예컨대, 집(1202))의 개략도 및 집의 물리적 속성들에 대한 디바이스들의 표현들(예컨대, 집의 벽 또는 방에 대한 디바이스의 위치)을 포함한다. 예를 들어, 도 13a의 집(1202)은 디바이스(600)의 위치를 나타내는 위치(1302a)에서의 표시(예컨대, 사람의 심볼)를 포함한다. 개략도는 설명을 위한 시각적 보조로서만 예시적인 목적으로 제공된다. 따라서, 개략도는 디바이스(600)가 특정 위치에 있는지 여부를 결정하는 것의 범주를 제한하도록 의도되지 않는다. 또한, 도면들은 반드시 축척대로 도시된 것은 아니며, 단지 시각적 보조로서 포함된다. 따라서, 달리 언급되지 않는 한, 도면들에 도시된 특징부들의 크기 및 축척은, 디바이스(600)가 소정 사용 컨텍스트에서 있도록 요구되는 위치에 대한 제한으로서 의도되지 않는다.
도 13a는 사용자 인터페이스(1320)를 디스플레이하는 디바이스(600)를 예시한다. 사용자 인터페이스(1320)는 (사용자 인터페이스(1320)의 상부 근처에 위치되는) 정적 제어 부분(1322)과 (사용자 인터페이스(1320)의 저부 근처에 위치되는) 정적 제어 부분(1326) 사이에 시각적으로 위치되는 동적 제어 부분(1324)을 포함한다. 제어 부분들(예컨대, 1324, 1322, 1326) 각각은 다수의 제어부들을 포함하는 것으로서 도 13a에 도시되어 있다. 그러나, 본 명세서에 기술된 바와 같이, 사용자 인터페이스(1320)의 정적 제어 부분들(예컨대, 1322, 1326)에 제시된 제어부들은 (예컨대, 본 명세서에 기술된 바와 같이) 디바이스(600)의 사용 컨텍스트가 변화할 때 변화하지 않는다. 따라서, 정적 제어 부분들에 제시된 제어부들은, 디바이스의 사용 컨텍스트가 변화할 때에도 지속된다. 그러나, 사용자 인터페이스(1320)의 동적 제어 부분(예컨대, 1324)에 제시된 제어부는 (예컨대, 본 명세서에 기술된 바와 같이) 디바이스(600)의 사용 컨텍스트가 변화할 때 (예컨대, 디바이스(600)가 제어부들 중 하나 이상에 지시된 사용자 입력을 검출하지 않고서) 변화할 수 있다. 따라서, 동적 제어 부분(1324)에 제시된 제어부들은, 변화하는 사용 컨텍스트들에 기초하여, 동적이다.
도 13a에 예시된 바와 같이, 정적 제어 부분들(예컨대, 1322, 1326)은 디바이스(600)에 국부적인 동작들을 수행하기 위한 다수의 제어부들("국부적 동작 제어부들")을 포함한다. 예를 들어, 도 13a에 도시된 바와 같이, 정적 제어 부분(1322)은 무선 연결 제어부(1322a), 셀룰러 연결 제어부(1322b), 음악 애플리케이션 제어부(1322c), 및 배향 잠금 제어부(1332d)와 같은 다수의 국부적 동작 제어부들을 포함한다. 유사하게, 정적 제어 부분(1326)은 플래시라이트 제어부(1332e) 및 계산기 제어부(1332f)를 포함한다. 사용자 인터페이스(1320) 상의 각각의 디바이스 제어부는, 선택될 때, (예컨대, 집(1202)의 액세서리 디바이스들과 같은 액세서리 디바이스의 상태를 수정하지 않으면서) 디바이스(600)의 상태를 수정한다.
디바이스 제어부는 상이한 방식들로 디바이스(600)의 상태를 수정할 수 있다. 일부 실시예들에서, 디바이스(600)의 상태는, 연결성 설정(예컨대, 무선, 셀룰러, 블루투스 설정) 또는 디스플레이 설정(예컨대, 디바이스(600)의 배향이 변화할 때 디스플레이를 변화시키거나 변화시키지 않는 것)이 켜지고/꺼지는 것과 같은, 디바이스(600)의 설정들 중 하나 이상이 변화할 때 수정된다. 예를 들어, 일부 실시예들에서, 디바이스(600)는 무선 연결 제어부(1322a)의 선택을 검출하고, 선택을 검출하는 것에 응답하여, 디바이스(600)의 무선 연결성 상태를 수정한다(예컨대, 무선 네트워크에 연결되는 디바이스(600)의 능력을 켜고/끈다). 일부 실시예들에서, 디바이스(600)의 상태는 디바이스(600)의 미디어 출력이 변화할때 수정된다. 예를 들어, 일부 실시예들에서, 디바이스(600)는 음악 애플리케이션 제어부(1332c)의 선택을 검출하고, 선택을 검출하는 것에 응답하여, 디바이스(600)의 미디어 출력의 상태를 수정한다(예컨대, 되감기, 빨리감기, 재생한다). 일부 실시예들에서, 디바이스(600)의 상태는 디바이스(600)의 디스플레이 상태가 변화할 때(예컨대, 국부적 동작 제어부들 중 하나의 선택을 수신하는 것에 응답하여 상이한 사용자 인터페이스를 디스플레이하는 것, 국부적 동작 제어부들 중 하나의 선택을 수신하는 것에 응답하여 상이한 세트의 제어부들을 디스플레이하는 것) 수정된다. 예를 들어, 일부 실시예들에서, 디바이스(600)는 계산기 제어부(1332f)의 선택을 검출하고, 선택을 검출하는 것에 응답하여, 사용자 인터페이스(1320)를 계산기 애플리케이션을 위한 사용자 인터페이스로 대체함으로써 디바이스(600)의 상태를 수정한다. 일부 실시예들에서, 디바이스(600)의 상태는 디바이스(600)의 하나 이상의 하드웨어 컴포넌트가 켜지고/꺼질 때 수정된다. 예를 들어, 일부 실시예들에서, 디바이스(600)는 플래시라이트 제어부(1332e)의 선택을 검출하고, 선택을 검출하는 것에 응답하여, 디바이스(600)의 일부인 조명의 상태를 수정한다.
도 13a에 예시된 바와 같이, 동적 제어 부분(1324)은 디바이스(600)가 동작하고 있는 사용 컨텍스트에 기초하여 디스플레이되는 동적 액세서리 디바이스 제어부들, 예컨대 집 도착 장면 제어부(1334a), 및 현관 조명 제어부(1334b)를 포함한다. 동적 액세서리 디바이스 제어부들은 디바이스(600) 외부에 있는 액세서리 디바이스들을 제어하기 위한 제어부들이다. 도 13a에서, 집 도착 장면 제어부(1334a) 및 현관 조명 제어부(1334b)는 (예를 들어, 도 12와 관련하여 전술된 바와 같이) 집(1202) 내의 액세서리 디바이스들을 제어하기 위한 제어부들이다. 도 13a에서, 집 도착 장면 제어부(1334a)는 복수의 디바이스들을 제어하는 매크로이다. 따라서, 일부 실시예들에서, 디바이스(600)는 집 도착 장면 제어부(1334a) 상의 탭 제스처를 검출하고, 집 도착 장면 제어부(1334a) 상의 탭 제스처를 검출하는 것에 응답하여, 온도조절기(1218)가 켜지고 원하는 온도로 설정되고, 거실 램프(1242)가 켜지고, 거실 스피커(1248)가 재즈 음악을 재생하게 하는 명령어를 송신한다. 이와 비교하여, 현관 조명 제어부(1334b)는 단지 하나의 디바이스(예컨대, 현관 조명(1262))을 제어하고 하나의 기능(예컨대, 현관 조명(1262)을 온/오프로 토글링함)을 수행한다. 따라서, 일부 실시예들에서, 디바이스(600)는 현관 조명 제어부(1334b) 상의 탭 제스처를 검출하고, 탭 제스처를 검출하는 것에 응답하여, 현관 조명(1262)이 켜지거나 꺼지게 하는 명령어를 송신한다.
도 13a에서 전술된 바와 같이, 집 도착 장면 제어부(1334a) 및 현관 조명 제어부(1334b)는 동적 제어 부분(1324)에 디스플레이되는데, 그 이유는, 디바이스(600)가 집(1202) 외부의 위치(예컨대, 1302a에 의해 도시된 바와 같음)에 있는 것에 대응하는 사용 컨텍스트에서 디바이스(600)가 동작하고 있기 때문이다. 따라서, 일부 실시예들에서, 디바이스(600)가 집 도착 장면 제어부(1334a) 및 현관 조명 제어부(1334b)를 동적 제어 부분(1324)에 디스플레이할 때, 이들 특정 제어부는, 디바이스(600)가 집(1202) 외부에 위치될(또는 도 13a의 각각의 사용 컨텍스트에서 동작하고 있을) 때 디바이스(600)를 동작시키는 사용자에게 더 유용하다는 결정이 이루어졌다.
도 13a에 예시된 바와 같이, 집 제어부(1333)가 또한 동적 부분(1324)에 디스플레이된다. 도 13a에서, 집 제어부(1333)는 집(1202)에 대응하는 제어부여서, 집 제어부(1333)가 선택될 때, 현재 디스플레이되지 않는 하나 이상의 액세서리 디바이스 제어부들을 디바이스(600)가 디스플레이하도록 한다. 또한, 집 제어부(1333)의 선택은, 디바이스(600)가 집(1202)에 할당된 액세서리 디바이스들을 제어하기 위해 이용가능한 액세서리 디바이스 제어부들의 전체 세트를 갖는 사용자 인터페이스(예컨대, 하나 이상의 사용자 인터페이스 스크린들)로 내비게이팅되도록 하는 액세스 포인트이다.
도 13a에서, 디바이스(600)는 다수의 집들과 연관된다(예를 들어, 상이한 집들에 할당된 액세서리 디바이스들을 관리하도록 인가된다). 집 제어부(1333)는 집(1202)에 대응하는 식별자(예컨대, "123 MAIN ST", 집(1202)의 주소)를 포함하는데, 그 이유는, 디바이스(600)가 현재, 집(1202)에 할당되고 디바이스(600)가 연관되는 다른 집에는 할당되지 않은 액세서리 디바이스들을 디스플레이하도록 구성되어 있기 때문이다. 일부 실시예들에서, 디바이스(600)는, 디바이스(600)가 (예컨대, 하나 이상의 데이터베이스들에서) 집의 사용자, 관리자, 게스트 등 중 하나 이상으로서 등록될 때 집과 연관된다.
일부 실시예들에서, 디바이스(600)가 다른 집에 할당된 액세서리 디바이스 제어부들을 디스플레이하도록 구성될 때, 디바이스(600)는 도 13a에 디스플레이되는 것과는 상이한 식별자를 집 제어부(1333) 상에 디스플레이한다. 일부 실시예들에서, 디바이스(600)가 다른 집에 할당된 액세서리 디바이스들을 디스플레이하도록 구성될 때, 디바이스(600)는 상이한 동적 디바이스 제어부들(예컨대, 특정 집과 관련 있는 디바이스 제어부들)을 디스플레이한다. 일부 실시예들에서, 디바이스(600)는, 각각의 집이 디바이스(600)가 연관되는 가장 가까운 집이라는 결정이 이루어질 때 각각의 집에 할당된 액세서리 디바이스 제어부들을 디스플레이하도록 구성된다. 이들 실시예 중 일부에서, 그 결정(예컨대, 가장 가까운 집 결정)은 "현재 집" 설정이 활성으로 설정될 때에만 이루어진다. 일부 실시예들에서, "현재 집" 설정이 비활성으로 설정될 때, 디바이스(600)는 디바이스(600)가 액세서리 디바이스 제어부들의 세트를 디스플레이한 마지막 집에 할당된 액세서리 디바이스 제어부들을 디스플레이하도록 구성된다. 일부 실시예들에서, 디바이스(600)는, 디바이스(600)가 각각의 집의 적어도 하나의 액세서리 디바이스로 하여금 동작을 수행하게 한 명령어들을 송신한, 마지막 집에 할당된 액세서리 디바이스 제어부들을 디스플레이하도록 구성된다. 일부 실시예들에서, 디바이스(600)가 단지 하나의 집과 연관될 때, 디바이스(600)는 집 제어부(1333) 상에 식별자로서 "집"을 디스플레이한다. 일부 실시예들에서, 디바이스(600)가 어떠한 제어부도 갖지 않는 집(또는 집에 할당된 제어부들이 소정 기준들(예컨대, 특정 개수 또는 특정 유형의 액세서리)을 충족하지 않는 집)에 할당되는 액세서리 디바이스 제어부들을 디스플레이하도록 구성될 때, 디바이스(600)는 집 제어부(1333)를 (예컨대, 도 13a에 도시된 것보다 큰 크기로) 크기조정하여, 집 제어부(1333)가 사실상 동적 부분(1324)의 대부분을 채우도록(예컨대, 2개의 행들을 차지하도록) 한다.
도 13b에서, 개략도는 디바이스(600)가 위치(1302a)(예컨대, 도 13a에서의)로부터 위치(1302b)로 이동한 것을 도시한다. 개략도에 의해 도시된 바와 같이, 디바이스(600)는 집(1202)의 내부에 있고, 특히, 디바이스(600)가 위치(1302b)에 있는 동안 침실(1202c) 내에 있다.
도 13b에서, 디바이스(600)가 도 13a의 컨텍스트와 상이한 사용 컨텍스트에서 동작하고 있다는 결정이 이루어진다. 여기서, 디바이스(600)는, 디바이스(600)가 집(1202)의 외부에 있는 위치(예컨대, 1302a)에 있는 것으로부터 집(1202)의 내부에 있는 위치(예컨대, 1302b)로 이동했기 때문에, 상이한 사용 컨텍스트에서 동작하고 있다. 구체적으로, 도 13b에서, 디바이스(600)가 침실(1202c)의 내부에(그리고/또는 집(1202)의 내부에) 위치되는 것에 대응하는 사용 컨텍스트에서 디바이스(600)가 동작하고 있다는 결정이 이루어진다.
도 13b에 예시된 바와 같이, 디바이스가 집(1202) 내부에 위치되는 것으로 결정되기 때문에(예컨대, 디바이스가 침실에 위치됨), 디바이스(600)는 도 13a에서 디스플레이된 동적 액세서리 디바이스 제어부들의 세트와는 상이한 동적 액세서리 디바이스 제어부들의 세트를 디스플레이하도록 동적 제어 부분(1324)을 업데이트한다. 도 13b에 예시된 바와 같이, 디바이스(600)는 독서 시간 장면 제어부(1334c), 침실 조명 제어부(1334d)(예컨대, 선택될 때, 침실 조명(1232)이 켜지고/꺼지게 함), 침실 스피커 제어부(1334e)(예컨대, 선택될 때, 침실 스피커(1236)가 미디어 재생을 일시정지하거나 개시하게 함), 및 굿나잇 장면 제어부(1334f)를 디스플레이하며, 이들은 도 13a에서의 동적 제어 부분(1324)에서 디스플레이된 액세서리 제어부들과 상이하다. 또한, 도 13b에 디스플레이된 제어부들은 침실(1202c) 내의 하나 이상의 액세서리 디바이스들(예컨대, 침실 조명(1232), 침실 스피커(1236))을 제어하기 위한 것이며, 여기서 도 13a의 제어부들 중 어느 것도 침실 내의 액세서리들 중 임의의 것을 제어하기 위한 것이 아니었다. 따라서, 도 13b에서, 동적 제어 부분(1324)에 디스플레이된 제어부들은, 사용자 및 디바이스(600)가 침실(1202c) 내에 위치될 때, 도 13a의 동적 제어 부분(1324)에 디스플레이된 제어부들보다, 사용자에게 잠재적으로 더 관련이 있다.
도 13b에 예시된 바와 같이, 디바이스(600)는, 디바이스(600)가 상이한 사용 컨텍스트에서 동작하고 있다는 결정에 관계없이, 집 제어부(1333)를 계속해서 디스플레이한다. 도 13b에 도시된 바와 같이, 집 제어부(1333)는, 집 제어부(1333)가 도 13a에 디스플레이된 것과, 동일한 크기이며, 동일한 위치에서 동적 제어 부분(1324)에 디스플레이된다.
도 13a 및 도 13b의 동적 제어 부분(1324)을 비교할 때, 동적 제어 부분(1324)의 크기는 동일하게 유지되어, 사용자 인터페이스(1320)의 동일한 영역을 차지한다. 그러나, 도 13a의 동적 제어 부분(1324)에 디스플레이된 제어부들의 수는 3개인 반면(예컨대, 집 제어부(1333), 집 도착 장면 제어부(1334a), 현관 조명 제어부(1334b)), 도 13b의 동적 제어 부분(1324)에 디스플레이된 제어부의 수는 5개이다(예컨대, 집 제어부(1333), 독서 장면 제어부(1334c), 침실 조명 제어부(1334d), 침실 스피커 제어부(1334e), 및 굿나잇 장면 제어부(1334f)). 따라서, 도 13a 및 도 13b에 도시된 바와 같이, 디바이스(600)는 동적 제어 부분(1324)의 크기를 변경하지 않으면서 동적 제어 부분(1324)에 상이한 수의 제어부들을 디스플레이한다. 도 13a 및 도 13b를 비교할 때, 디바이스(600)는, 디바이스(600)가 특정 사용 컨텍스트에 있는 것으로 인해 동적 제어 부분(1324)에 디스플레이되는 제어부들의 수가 더 클 때, 더 작은 크기의 액세서리 디바이스 제어부들을 디스플레이함으로써 이러한 사용자 인터페이스를 달성한다. 예를 들어, 도 13a의 현관 제어부(1334b)는, 도 13b에서 독서 장면 제어부(1334c) 및 굿나잇 장면 제어부(1334f)가 함께 점유하는 동적 제어 부분(1324)의 거의 동일한 면적을 점유한다. 또한, 집 도착 장면 제어부(1334a)는, 도 13b에서 침실 조명 제어부(1334d) 및 침실 스피커 제어부(1334e)가 함께 점유하는 동적 제어 부분(1324)의 거의 동일한 면적을 점유한다.
도 13b에 예시된 바와 같이, 집 제어부(1333)는, 집 제어부(1333)가 도 13a에서 있었던 것과 동일한 크기로, 그리고 동일한 위치에서 동적 제어 부분(1324)에 유지된다. 따라서, 동적 제어 부분(1324)의 다른 제어부들과는 달리, 집 제어부(1333)는, 도 13a 및 도 13b에서 동작하고 있는 사용 컨텍스트 및/또는 동적 제어 부분(1324)에 디스플레이되는 다른 제어부들의 수(예컨대, 0 초과의 수)에 관계없이, 동일한 크기로 유지되고 동일한 위치에서 디스플레이된다. 일부 실시예들에서, 집(1333)의 크기 및/또는 위치는, 디바이스(600)가 상이한 사용 컨텍스트에서 동작하고 있을 때 또는 동적 제어 부분(1324)에 디스플레이되는 다른 제어부들의 수(예컨대, 0 초과의 수)에 기초하여 변화한다. 도 13b에서, 사용자 인터페이스(1320)는 22:10(10:10 PM)에 디스플레이되고 있다.
도 13c에서, 도 13c에서 디바이스(600)는 도 13b에서 디바이스(600)가 있었던 동일한 위치에 있지만, 디바이스(600)가 상이한 사용 컨텍스트에서 동작하고 있다는 결정이 이루어진다. 여기서, 디바이스(600)는, 디바이스(600)가 도 13b에 디스플레이된 것(22:10)과 상이한 시간(예컨대, 06:42(6:42 AM))에 사용자 인터페이스(1320)를 디스플레이하고 있기 때문에, 상이한 사용 컨텍스트에서 동작하고 있다.
도 13c에 예시된 바와 같이, 디바이스(600)는 사용자 인터페이스(1320)가 06:42에 디스플레이되는 것에 대응하는 사용 컨텍스트에서 동작하고 있기 때문에, 디바이스(600)는 상이한 세트의 제어부들을 디스플레이한다. 도 13c에 도시된 바와 같이, 디바이스(600)는 도 13b에서 이전에 디스플레이된 굿나잇 장면 제어부(1334f)를, 굿모닝 장면 제어부(1334g)로 대체하였다. 다시 말하면, 도 13c에서, 디바이스(600)는 이전 사용 컨텍스트에서(예컨대, 도 13b에서) 디스플레이된 것과 동일한 수의 제어부들을 디스플레이하지만; 제어부들의 세트들은, 디바이스(600)가 상이한 사용 컨텍스트에 기초하기 때문에, 상이이다. 일부 실시예들에서, 디바이스(600)는 도 13b에서 이전에 디스플레이된 디바이스(600)와는 상이한 수의 제어부들을 도 13c에서 디스플레이한다. 도 13c에서, 디바이스(600)는 집 제어부(1333) 상에서 제스처(1350c)(예컨대, 탭 제스처, 길게-누르기 제스처)를 검출한다.
도 13d 및 도 13e는 디바이스(600)가 도 13c의 제스처(1350c)를 검출하는 것에 응답하여 디스플레이할 수 있는 예시적인 사용자 인터페이스들을 예시한다. 도 13d에 예시된 바와 같이, 제스처(1350c)를 검출하는 것에 응답하여, 디바이스(600)는 홈 애플리케이션을 위한 사용자 인터페이스(1340)를 디스플레이하고 사용자 인터페이스(1320)를 디스플레이하는 것을 중지한다. 도 13d에 예시된 바와 같이, 사용자 인터페이스(1340)는 액세서리 디바이스 제어부들(1336)을 포함한다. 도 13d에 도시된 바와 같이, 사용자 인터페이스(1340)는, 사용자 인터페이스(1340) 상에 디스플레이된 정보가 사용자 인터페이스(1340) 상에 디스플레이되는 장면들(예컨대, 1344) 및 액세서리들(예컨대, 1346) 제어부들에 관한 것임을 나타내기 위해, 집(602)과 연관되는 식별자("123 Main Street")를 포함한다. 도 13d에서, 사용자 인터페이스(1340) 상에 디스플레이된 집(602)과 연관되는 식별자는, 위에서 논의된 바와 같이, 도 13a 내지 도 13c의 집 제어부(1333) 상에 디스플레이된 식별자와 동일하다. 일부 실시예들에서, "집"이 집 제어부(1333) 상에 디스플레이된 식별자일 때(예컨대, 디바이스(600)가 하나의 집과만 연관되기 때문에), 사용자 인터페이스(1340) 상에 디스플레이된 식별자는 집 제어부 상에 디스플레이된 식별자와는 상이하다(예컨대, "123 상이한 주소").
도 13d에서, 제스처(1350c)를 검출하는 것에 응답하여, 디바이스(600)는 홈 애플리케이션을 시작하였고 홈 애플리케이션을 위한 사용자 인터페이스를 디스플레이하였다. 홈 애플리케이션을 위한 사용자 인터페이스들을 디스플레이하는 동안, 디바이스(600)는 집(602)에 할당된 액세서리 디바이스들의 세트를 제어하기 위한 이용가능한 제어부들을 (예컨대, 사용자 인터페이스들의 내비게이션을 통해) 디스플레이할 수 있다. 도 13d에서, 액세서리 디바이스 제어부들(1336)은 도 13c에 디스플레이된 동적 액세서리 디바이스 제어부들 중 하나 이상과 동일한 기능성을 갖는 하나 이상의 액세서리 디바이스 제어부들을 포함한다. 예를 들어, 침실 조명 제어부(1336d)는 도 13c의 침실 조명 제어부(1334d)와 동일한 기능성을 갖는다. 도 13d에서, 액세서리 디바이스 제어부들(1336)은 도 13c에 디스플레이된 동적 액세서리 디바이스 제어부들에 의해 수행되는 기능과는 상이한 기능들을 수행하는 하나 이상의 액세서리 디바이스 제어부들을 포함한다. 예를 들어, 식당 조명 제어부(1336g)는 식당 조명(1212)이 기능을 수행하게 하고 도 13d에 디스플레이되지만, 도 13c에서는 식당 조명(1212)이 기능을 수행하게 하는 제어부가 없다.
도 13e에 예시된 바와 같이(예컨대, 도 13d의 대안으로서), 제스처(1350c)를 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1340)의 컴포넌트들 중 하나 이상을 디스플레이하도록 사용자 인터페이스(1320)를 업데이트한다(예컨대, 사용자 인터페이스(1320)를 계속해서 디스플레이한다). 도 13e에 도시된 바와 같이, 사용자 인터페이스(1320)는 액세서리 디바이스 제어부들(1336)을 포함한다. 도 13e에서, 처음 6개의 액세서리 디바이스 제어부들은 또한 (예를 들어, 도 13d에서) 사용자 인터페이스(1340)를 통해 디스플레이된다. 또한, 도 13d에서보다 도 13e에서 더 많은 수의 액세서리 디바이스 제어부들(1336)이 디스플레이된다. 액세서리 디바이스 제어부들(1336)(예컨대, 추가의 액세서리 디바이스 제어부들)을 디스플레이하기 위한 공간을 만들기 위해, 디바이스(600)는 집 제어부(1333), 및 (예컨대, 무선 연결 제어부(1322a), 플래시라이트 제어부(1332e)와 같은) 국부적 동작 제어부들을 사용자 인터페이스(1320)의 그들 각자의 부분들에 디스플레이하는 것을 중지한다. 또한, 액세서리 디바이스 제어부들(1336)은 도 13e에서 동일한 크기이지만, 동적 액세서리 디바이스 제어부들은 도 13c에서 상이한 크기들이었다. 또한, 액세서리 디바이스 제어부(1336) 중 적어도 하나는, 도 13c에서 국부적 동작 제어부가 디스플레이된 사용자 인터페이스(1320)의 부분에 디스플레이된다. 일부 실시예들에서, 디바이스(600)는 (예컨대, 도 13d와 관련하여 위에서 논의된 바와 같이) 디바이스(600)가 사용자 인터페이스(1340) 상에 액세서리 디바이스 제어부들을 디스플레이하는 데 사용했던 사용자 인터페이스(1320)(및/또는 다른 컴포넌트들) 상에 액세서리 디바이스 제어부들을 디스플레이하기 위해 하나 이상의 유사한 기법들을 사용한다.
일부 실시예들에서, 디바이스(600)는 (예컨대, 디바이스(600)가 도 13d에서의 사용자 인터페이스(1340)를 디스플레이했을 때와는 대조적으로) 홈 애플리케이션을 시작하지 않고 도 13e에서의 액세서리 디바이스 제어부들(1336)을 디스플레이한다.
일부 실시예들에서, 디바이스(600)는 수신되는 제스처의 유형에 기초하여 도 13e의 인터페이스(1320) 또는 도 13d의 사용자 인터페이스(1340)를 디스플레이한다. 예를 들어, 일부 실시예들에서, 제스처(1350c)가 제1 유형 제스처(예컨대, 탭 제스처, 길게-누르기 제스처)라는 결정이 이루어질 때, 디바이스(600)는 도 13d에서의 사용자 인터페이스(1340)를 디스플레이한다. 일부 실시예들에서, 제스처(1350c)가 제1 유형(예컨대, 길게-누르기 제스처, 탭 제스처)과 상이한 유형의 제스처라는 결정이 이루어질 때, 디바이스(600)는 도 13e에서의 사용자 인터페이스(1320)를 디스플레이한다. 따라서, 일부 실시예들에서, 이러한 사용자 인터페이스들(예컨대, 도 13d의 1340, 도 13e의 1320)은 도 13c에서의 집 제어부(1333) 상에서 수신되는 입력의 유형에 기초하여 액세스될 수 있다.
도 13f 및 도 13g는 디바이스(600)가 도 13e에서 2개의 상이한 제스처들을 검출할 때 디바이스(600)가 디스플레이할 수 있는 예시적인 사용자 인터페이스들을 예시한다. 도 13e에서, 디바이스(600)는 내비게이션 제어부(1334) 상에서 탭 제스처(1350e1)를 검출한다. 도 13f에 예시된 바와 같이, 탭 제스처(1350e1)를 검출하는 것에 응답하여, 디바이스(600)는 메뉴(1338)를 디스플레이하도록 사용자 인터페이스(1320)를 업데이트하고, 액세서리 디바이스 제어부들(1336)을 디스플레이하는 것을 중지한다. 디스플레이 메뉴(1338)는 침실 내비게이션 제어부(1338d)와 같은, 집(1202) 내의 개개의 방들에 대응하는 제어부들로 내비게이팅하기 위한 제어부들을 포함한다. 일부 실시예들에서, 디바이스(600)는 침실 내비게이션 제어부(1338d) 상의 탭 제스처를 검출하는 것에 응답하여 침실(1202c)에서 이용가능한 디바이스들(예컨대, 침실 조명(1232), 침실 스피커(1236))을 제어하기 위한 액세서리 디바이스 제어부들을 디스플레이한다. 일부 실시예들에서, 침실 내비게이션 제어부(1338d) 상의 탭 제스처를 검출하는 것에 응답하여, 침실(1202c)에서 이용가능한 디바이스들을 제어하기 위한 액세서리 디바이스 제어부들은 도 13c의 동적 제어 부분(1334)에 디스플레이되는 액세서리 디바이스 제어부들과는 상이한 하나 이상의 액세서리 디바이스 제어부들을 포함한다.
대안적으로, 도 13e에서, 디바이스(600)는 식당 조명 제어부(1336g) 상에서 제스처(1350e2)(예컨대, 눌러서 유지하기)를 검출한다. 도 13g에 예시된 바와 같이, 제스처(1350e2)를 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1360)를 디스플레이하고 사용자 인터페이스(1320)를 디스플레이하는 것을 중지한다. 사용자 인터페이스(1360)는, 선택될 때, 디바이스(600)로 하여금, 식당 조명 제어부(1336g)의 선택이 식당 조명(1216)이 수행하게 할 수 있는 것과는 상이한 기능들을 수행하도록 식당 조명(1216)에 명령어(들)을 전송하게 하는, 추가의 제어부들을 포함한다. 예를 들어, 도 13e에서, 식당 조명 제어부(1336g)의 선택(예컨대, 탭 제스처)은 디바이스(600)로 하여금, 식당 조명 제어부(1336g)가 켜지고/꺼지게 하는 명령어를 송신하게 한다. 그러나, 13g에서, 사용자 인터페이스(1360)는 조명 디머 제어부(1362)(예컨대, 이는, 선택될 때, 식당 조명(1216)이 디밍하게 함) 및 색 변화 제어부(1364)(예컨대, 이는, 선택될 때, 식당 조명이 색을 변화시키게 하며, 이는 디바이스(600)로 하여금 도 13e의 식당 조명 제어부(1336g)와는 상이한 기능들을 수행하게 할 수 있음)를 포함한다.
도 13h에 예시된 바와 같이, 디바이스(600)는 동적 제어 부분(1324) 내의 집 제어부(1333) 및 동적 액세서리 디바이스 제어부들, 및 사용자 인터페이스(1320)의 정적 부분들 내의 국부적 동작 제어부들을 갖는 사용자 인터페이스(1320)를 디스플레이한다(예컨대, 도 13g의 사용자 인터페이스(1320)를 디스플레이한 후의 소정 시점에서). 그러나, 도 13h에 디스플레이된 동적 액세서리 디바이스 제어부들의 세트는 도 13c에 디스플레이되는 동적 액세서리 디바이스 제어부들과는 상이한데, 그 이유는 디바이스(600)가 상이한 사용 컨텍스트에서 동작하고 있다는 결정이 이루어졌기 때문이다. 특히, 디바이스(600)는, 침실 조명 제어부(1334d) 대신에, 식당 조명 제어부(1334h)(예컨대, 선택될 때, 디바이스(600)로 하여금 식당 조명(1212)이 켜지고/꺼지게 하는 명령어들을 송신하게 하는 제어부)를 디스플레이한다. 도 13h에서, 디바이스(600)는, 제어부들의 사용 이력에 기초하여 결정되는 사용 컨텍스트에서 디바이스(600)가 동작하고 있기 때문에, 식당 조명 제어부(1334h)를 디스플레이한다. 특히, 600은 도 13c(또는 13f)에서 상이한 사용자 컨텍스트에서 동작하고 있는데, 그 이유는 식당 조명(1216)이 가장 최근에 사용된 그리고/또는 액세스 제어부였다는 결정이 이루어졌기 때문이다(예컨대, 사용자 인터페이스(1360)가 최근에 도 13g에서 디스플레이되었고/되었거나 제스처(1350e2)가 최근에 도 13e에서 검출되었기 때문임). 일부 실시예들에서, 제어부의 사용 이력은 또한, 제어부가 가장 빈번하게 사용됨, (예를 들어, 사용자 선택에 의해) 즐겨찾기됨, 가장 최근에 액세스됨, 가장 최근에 디스플레이됨, 제어부와 가장 최근에 상호작용됨, 또는 이들의 임의의 조합 중 하나 이상인 것에 기초하여 결정될 수 있다.
도 13i에서, 디바이스(600)가 상이한 위치에 있기 때문에(예컨대, 도 13i에서의 위치(1302c)가 도 13h에서의 위치(1302b)와 상이함) 디바이스(600)는 (예컨대, 도 13h에서와는) 상이한 사용 컨텍스트에서 동작하고 있다는 결정이 이루어진다. 구체적으로, 디바이스(600)가 도 13i에서 동작하고 있는 사용 컨텍스트는 디바이스(600)가 거실(1202d)(예컨대, 또는 도 13h에서 디바이스(600)가 동작하고 있었던 곳(예컨대, 침실(1202c)과 상이한 방)에서 동작하고 있기 때문에 결정된다.
도 13i에 예시된 바와 같이, 디바이스(600)가 거실(1202d)(예컨대, 상이한 사용 컨텍스트)에서 동작하고 있기 때문에, 디바이스(600)는 도 13h에서 이전에 디스플레이된 제어부들의 세트와는 상이한 세트의 제어부들을 동적 제어 부분(1224)에 디스플레이한다. 예를 들어, 도 13i에서, 디바이스(600)는, 도 13h에서 이전에 디스플레이되지 않은, 온도조절기 제어부(1334i), 거실 제어부(1334j), 식당 제어부(1334g), 주방 제어부(1334k)를 디스플레이한다. 또한, 도 13h에서의 동적 제어 부분(1224)에 디스플레이된 제어부들의 수보다, 도 13i에서의 동적 제어 부분(1224)에 더 많은 수의 제어부들이 디스플레이된다. 도 13i에서, 이는 도 13a 내지 도 13c와 관련하여 전술된 바와 같은 하나 또는 기법들(예컨대, 더 작은 제어부들을 디스플레이하는 것)을 사용하여 달성된다. 도 13i에서, 디바이스(600)는 디바이스(600)의 반시계 방향 회전(1350i)을 검출한다(예컨대, 디바이스(600)는 반시계 방향으로 90도 물리적으로 회전됨).
도 13j에 예시된 바와 같이, 반시계 방향 회전(1350i)을 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1320)의 디스플레이를 세로 배향으로부터 가로 배향으로 전이시킨다. 도 13j에 예시된 바와 같이, 디바이스(600)가 가로 배향으로 사용자 인터페이스를 디스플레이할 때, 디바이스(600)는 정적 부분(1326)에 이전에 디스플레이된 국부적 동작 제어부들과 같은 국부적 동작 제어부들 중 일부를 디스플레이하는 것을 중지한다. 또한, 도 13j에서, 디바이스(600)는 또한 동적 제어 부분(1324)으로부터 동적 디바이스 제어부들의 일부(예컨대, 도 13i에서의 주방 팬 제어부(1334k))를 디스플레이하는 것을 중지한다.
도 13k에 예시된 바와 같이(예컨대, 도 13i를 디스플레이한 후의 소정 시점에서), 디바이스(600)는 디바이스(600)가 (예컨대, 도 13a 내지 도 13j의 잠금해제된 상태에 있는 것과는 대조적으로) 잠금된 상태에 있음을 나타내는 사용자 인터페이스(1370)를 디스플레이한다. 도 13k에서, 디바이스(600)는 사용자 인터페이스(1370) 상에서 스와이프 제스처(1350k)를 검출한다.
도 13l에 예시된 바와 같이, 스와이프 제스처(1350k)를 검출하는 것에 응답하여, 디바이스(600)는 디바이스(600)가 잠금된 상태에서 동작하고 있기 때문에 어떠한 동적 디바이스 제어부들 및 집 제어부(1333)도 없이 사용자 인터페이스(1320)를 디스플레이한다(예컨대, 동적 제어 부분(1324)에서 동적 제어부들을 포함하지 않는다). 도 13l에서, 표시(1352)가 동적 제어 영역(1324)에 디스플레이된다. 표시(1352)는 동적 디바이스 제어부들이 디스플레이되도록 하기 위해 디바이스(600)가 잠금해제되어야 한다는 것을 사용자에게 통지한다. 일부 실시예들에서, 사용자 인터페이스(1320)는, 디바이스(600)가 보안 이유들로(예컨대, 제어부들에 대한 인가되지 않은 액세스를 제한하고/하거나 동적 디바이스 제어부들 및/또는 집 제어부(1333)가 디스플레이되기 전에 인증을 요구하기 위해) 잠금된 상태에서 동작하고 있는 동안, 어떠한 동적 디바이스 제어부들 및 집 제어부(1333)도 없이 디스플레이된다. 일부 실시예들에서, 디바이스(600)는, 인가되지 않은 사용자들이 집(1202) 내의 액세서리 디바이스들이 제어부들 중 하나 이상의 선택을 통해 기능들을 수행하게 하는 것을 방지하기 위해, 동적 디바이스 제어부들 및 집 제어부(1333)를 생략한다.
도 13m에서, 디바이스(600)는 잠금해제된 상태에 있다(예컨대, 도 13i를 디스플레이한 후의 소정 시점에서). 도 13m에 예시된 바와 같이, 디바이스(600)는 활성 상태에 있는(예컨대, 설정은 온임) 동적 제어부 설정 어포던스(1382)를 포함하는 사용자 인터페이스(1380)를 디스플레이한다. 도 13m에서, 디바이스(600)는 동적 제어부 설정 어포던스(1382) 상에서 탭 제스처(13M)를 검출한다.
도 13n에 예시된 바와 같이, 탭 제스처(13M)를 검출하는 것에 응답하여, 디바이스(600)는 활성 상태로부터 비활성 상태(예컨대, 설정은 오프임)로 동적 제어부 설정 어포던스(1382)를 토글링한다. 일부 실시예들에서, 도 13n에서, 디바이스(600)는 사용자 인터페이스(1380) 상에서 스와이프 제스처를 검출한다. 일부 실시예들에서, 사용자 인터페이스(1380) 상에서 스와이프 제스처를 검출하는 것에 응답하여, 디바이스(600)는, 동적 제어부 설정(1382)이 비활성 상태에 있기 때문에, 어떠한 동적 디바이스 제어부들 및 집 제어부(1333)도 없이 사용자 인터페이스(1320)를 디스플레이한다(예컨대, 동적 제어 부분(1324)을 제거함).
도 14는 일부 실시예들에 따른, 제어부들을 관리하기 위한 방법들을 예시하는 흐름도이다. 방법(1400)은 디스플레이 생성 컴포넌트(예컨대, 602) 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템(예컨대, 100, 300, 500, 또는 600)에서 수행된다. 방법(1400)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 일부 실시예들에 따른 제어부들을 관리하기 위한 방법(1400). 본 방법은 일부 실시예들에 따른 제어부들을 관리하는 것에 대한 사용자의 인지적 부담을 감소시키며, 그에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 오디오 재생을 제어할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
컴퓨터 시스템은, 디스플레이 생성 컴포넌트를 통해, 제1 복수의 선택가능한 사용자 인터페이스 객체들(예컨대, 1332a 내지 1332f, 1333, 1334a 내지 1334k)(예컨대, 어포던스들)(예컨대, 복수의 액세서리 디바이스들(예컨대, 스마트 홈 액세서리 디바이스(예컨대, 스마트(예컨대, 지능형) 전구들, 온도조절기, 도어 로크, 도어 오프너(예컨대, 차고 도어 오프너), 스피커, 텔레비전, 전기 콘센트, 전력 스트립, 카메라, 어플라이언스(예를 들어, 냉장고, 스토브)))을 제어하기 위한 복수의 선택가능한 사용자 인터페이스 객체들을 포함하는 제1 복수의 선택가능한 사용자 인터페이스 객체들)을 포함하는(그리고/또는 제1 사용자 인터페이스 상에 디스플레이되는), 제1 사용자 인터페이스(예컨대, 320)(예컨대, 제어 센터(예컨대, 컴퓨터 시스템 상의 하나 이상의 설정들(예컨대, 하나 이상의 Wi-Fi 설정들, 블루투스 설정들, 디스플레이 설정들(예컨대, 밝기 제어부들), 사운드 설정들) 또는 컴퓨터 시스템과 통신하는 하나 이상의 액세서리 디바이스들을 제어(예컨대, 설정)하는 복수의 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스))를 디스플레이한다(1402). 일부 실시예들에서, 제1 사용자 인터페이스를 디스플레이하기 전에, 컴퓨터 시스템은 디스플레이 생성 컴포넌트를 통해 제1 사용자 인터페이스(예컨대, 제어 센터(예컨대, 컴퓨터 시스템 상의 하나 이상의 설정들(예컨대, 하나 이상의 Wi-Fi 설정들, 블루투스 설정들, 디스플레이 설정들(예컨대, 밝기 제어부들), 사운드 설정들) 또는 컴퓨터 시스템과 통신하는 하나 이상의 액세서리 디바이스들을 제어(예컨대, 설정)하는 복수의 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스))를 디스플레이하라는 요청에 대응하는 입력(예컨대, 하나 이상의 입력 디바이스들 상의 스와이프 제스처)을 수신하고; 디스플레이 생성 컴포넌트를 통해 제1 사용자 인터페이스를 디스플레이하라는 요청에 대응하는 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 제1 사용자 인터페이스를 디스플레이한다. 일부 실시예들에서, 복수의 선택가능한 사용자 인터페이스 객체들 중 적어도 하나는 디바이스들의 제1 그룹과 연관되거나 그에 맵핑된다. 일부 실시예들에서, 제1 그룹의 디바이스들은 상위 레벨 위치(또는 목적지)(예컨대, 제1 유형의 위치)(예컨대, 집 위치, 사업체, 사무실(예컨대, 상위 레벨 위치인 위치(예컨대, 상위 레벨 위치의 위치에 의해 정의되는 영역 및/또는 주연부 내에 있는 하나 이상의 위치들(예컨대, 하위 위치들) 및/또는 하나 이상의 영역들(또는 구역들)을 정의하는 위치, 위치들의 계층구조의 상위 레벨에 있는 위치, 하나 이상의 위치들(예컨대, 하위 위치들) 및/또는 하나 이상의 영역들(또는 구역들)에 (예컨대, 프로그램식으로) 링크되는 위치)))와 연관되거나 그에 맵핑된다. 일부 실시예들에서, 디바이스들의 제1 그룹은 디바이스들의 복수의 하위그룹들을 포함할 수 있다. 일부 실시예들에서, 디바이스들의 하위그룹은 하위 위치(예컨대, 상위 레벨 위치에(예컨대, 상위 레벨 위치의 경계, 영역, 또는 주연부 내에; 그리고/또는 정의, 식별, 및/또는 상위 레벨 위치에 (예컨대, 사용자에 의해) 링크되는(예컨대, 프로그램식으로 링크되는)) 위치되는 방 및/또는 구역(예컨대, 상위 레벨 위치에서 상위 레벨 위치 내의(예컨대, 상위 레벨 위치의 경계, 영역, 또는 주연부 내의 그리고/또는 정의, 식별, 및/또는 (예컨대, 사용자에 의해) 링크되는) 2개 이상의 하위 위치들에 의해 정의되는 위치(예컨대, 상위 레벨 위치 내의 거실 및 식당을 포함하는 엔터테인먼트 구역, 상위 레벨 위치 내의 2개 이상의 침실들, 거실들, 욕실들을 포함하는 개인용 구역)))와 연관되거나 그에 맵핑된다. 일부 실시예들에서, 제1 사용자 인터페이스는 제어 사용자 인터페이스이다. 일부 실시예들에서, 제1 사용자 인터페이스는 다른 사용자 인터페이스의 상부에 오버레이된다(예컨대, 그것의 상부에 오버레이가 없이 이전에 디스플레이되었던 사용자 인터페이스). 일부 실시예들에서, 제1 사용자 인터페이스는 음악을 제어하기 위한 제어부들(예컨대, 슬라이더들, 선택가능한 사용자 인터페이스 객체들(예컨대, 어포던스들)), 하나 이상의 설정들(예컨대, Wi-Fi, 비행기 모드, 블루투스, 셀룰러 연결성을 온/오프로 토글링하기 위해)(예컨대, 디스플레이 생성 컴포넌트의 밝기를 조정하기 위해, 컴퓨터 시스템의 하나 이상의 스피커들의 사운드를 조정하기 위해), 하나 이상의 상태 표시자들(예컨대, 배터리 백분율 표시, Wi-Fi 표시, 셀룰러 연결성 표시, 블루투스 표시자)을 포함한다. 일부 실시예들에서, 제1 사용자 인터페이스는 상위 레벨 위치와 연관되거나 그에 맵핑되지 않는 복수의 제어부들을 포함한다.
제1 복수의 선택가능한 사용자 인터페이스 객체들은, 선택될 때, 컴퓨터 시스템으로 하여금 (예컨대, 외부 디바이스의 상태를 컴퓨터 시스템(예컨대, 디바이스(600))로 수정하지 않고서) 컴퓨터 시스템의 상태를 수정하게 하는(예컨대, 컴퓨터 시스템의 디스플레이 생성 컴포넌트의 밝기를 수정(예컨대, 조정)하는 것, 컴퓨터 시스템의 하나 이상의 스피커들의 사운드를 수정하는 것, 상태(예컨대, Wi-Fi, 비행기 모드, 블루투스의 (예컨대, 온/오프))를 수정하는 것, 컴퓨터 시스템의 디스플레이 스크린 상에 디스플레이되는 사용자 인터페이스를 수정 또는 변화시키는 것(예컨대, 이전에 디스플레이되지 않았고 그리고/또는 제1 사용자 인터페이스와는 상이한 제2 사용자 인터페이스를 디스플레이하는 것)), 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1332a 내지 1332f, 1333)(예컨대, 홈 앱 버튼)를 포함한다(1404). 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 동작하고 있는 사용 컨텍스트에 관계없이 디스플레이된다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는, 선택될 때, 외부 액세서리 디바이스(예컨대, 제1 외부 액세서리 디바이스 및 제2 액세서리 디바이스)(또는 임의의 외부 액세서리 디바이스들)가 기능을 수행하게 하지 않으면서 컴퓨터 시스템(예컨대, 전화)의 상태를 수정한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 그것이 선택될 때 액세서리를 제어하지 않는다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는, 선택될 때, 컴퓨터 시스템으로 하여금 제1 사용자 인터페이스와 상이한 제2 사용자 인터페이스를 디스플레이하게 한다. 일부 실시예들에서, 제1 사용자 인터페이스는 오버레이인 한편(예를 들어, 다른 사용자 인터페이스의 상부 상에 오버레이됨 - 여기서 다른 사용자 인터페이스의 부분들은 보임), 제2 사용자 인터페이스는 오버레이가 아니다. 일부 실시예들에서, 제2 사용자 인터페이스는 하나 이상의 액세서리 디바이스들을 제어하기 위한 제2 복수의 선택가능한 사용자 인터페이스 객체들을 포함한다(예를 들어, 제2 사용자 인터페이스 상에 디스플레이된다). 일부 실시예들에서, 액세서리들을 제어하기 위한 제2 복수의 선택가능한 사용자 인터페이스 객체들은 선택가능한 사용자 인터페이스 객체들의 제1 그룹 중 또는 이상(또는 복수)을 포함하고, 선택가능한 사용자 인터페이스 객체들의 제1 그룹 중 하나 이상(또는 복수)을 포함하지 않는다. 일부 실시예들에서, 액세서리들을 제어하기 위한 제2 복수의 선택가능한 사용자 인터페이스 객체들은 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 선택가능한 사용자 인터페이스 객체들의 제1 그룹 중 하나 이상(또는 복수)은 제2 사용자 인터페이스를 사용하여 내비게이팅될 수 있다.
제1 복수의 선택가능한 사용자 인터페이스 객체들은, 컴퓨터 시스템이 제1 사용 컨텍스트(예컨대, 컴퓨터 시스템의 상태, 사용 시간(예컨대, 제1 사용자 인터페이스를 디스플레이하는 시간), 사용 위치(예컨대, 제1 사용자 인터페이스가 디스플레이될 때의 위치(예컨대, 하나 이상의 GPS 센서들에 의해 결정됨)), 하나 이상의 액세서리들의 사용 이력 중 하나 이상)에 있다는 결정에 따라(1406), 선택될 때, 복수의 외부 액세서리 디바이스들 중 제1 외부 액세서리 디바이스(예컨대, 스마트 홈 액세서리 디바이스(예컨대, 스마트(예컨대, 지능형) 전구들, 온도조절기, 도어 로크, 도어 오프너(예컨대, 차고 도어 오프너), 스피커, 텔레비전, 전기 콘센트, 전력 스트립, 카메라, 어플라이언스(예컨대, 냉장고, 스토브)))로 하여금 제1 기능(예컨대, 제1 사용 컨텍스트(예컨대, 컴퓨터 시스템이 제1 사용 컨텍스트에 있는 것)에 기초하여 선택되는 제1 기능)을 수행하게 하는(예컨대, 외부 액세서리 디바이스로 하여금 외부 액세서리 디바이스가 수행하도록 구성되는 하나 이상의 기능들(예컨대, 켜기/끄기, 온도 설정, 잠금해제/잠금)을 수행하게 하는) 제2 선택가능한 사용자 인터페이스 객체(예컨대, 1334a 내지 1334k(예컨대, 1334b))를 포함한다.
제1 복수의 선택가능한 사용자 인터페이스 객체들은, 컴퓨터 시스템이 제1 사용 컨텍스트와는 상이한 제2 사용 컨텍스트에 있다는 결정에 따라(1408), 선택될 때, 복수의 외부 액세서리 디바이스들 중 제2 외부 액세서리 디바이스(예컨대, 1206, 1212, 1216, 1232, 1236, 1242, 1244, 1246, 1248, 1242, 1256, 1258, 1262, 1264, 1266)(예컨대, 스마트 홈 액세서리 디바이스(예컨대, 스마트(예컨대, 지능형) 전구들, 온도조절기, 도어 로크, 도어 오프너(예컨대, 차고 도어 오프너), 스피커, 텔레비전, 전기 콘센트, 전력 스트립, 카메라, 어플라이언스(예컨대, 냉장고, 스토브)))로 하여금 제2 기능을 수행하게 하는(예컨대, 액세서리 디바이스로 하여금 하나 이상의 기능들(예컨대, 켜기/끄기, 온도 설정, 잠금해제/잠금)을 수행하게 하는), (예컨대, 외부 액세서리 디바이스로 하여금 외부 액세서리 디바이스가 수행하도록 구성되는 하나 이상의 기능들(예컨대, 켜기/끄기, 온도 설정, 잠금해제/잠금)을 수행하게 하는), 제2 선택가능한 사용자 인터페이스 객체와는 상이한, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1334a 내지 1334k(예컨대, 1334d))를 포함하며(예컨대, 컴퓨터 시스템의 상태, 사용 시간(예컨대, 제1 사용자 인터페이스를 디스플레이하는 시간), 제1 사용자 인터페이스가 디스플레이될 때의 사용 위치(예컨대, 위치(예컨대, 하나 이상의 GPS 센서들에 의해 결정됨)), 하나 이상의 액세서리들의 사용 이력 중 하나 이상) (예컨대, 제1 사용 컨텍스트(예컨대, 컴퓨터 시스템이 제1 사용 컨텍스트에 있는 것)에 기초하여 선택되는 제1 기능), 여기서 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1334a 내지 1334k(예컨대, 1334d))는 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라 사용자 인터페이스에 포함되지 않는다. 일부 실시예들에서, 제2 사용 컨텍스트에 기초하여 선택되는 기능은 제1 사용 컨텍스트에 기초하여 선택되는 기능과는 상이하다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체는 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하지 않으면서 디스플레이된다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체는 제2 선택가능한 사용자 인터페이스 객체와, 사용자 인터페이스 상에서의 동일한 위치를 점유하지 않는다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체는 제2 선택가능한 사용자 인터페이스 객체와 상이한 크기이다(예컨대, 제1 및 제2 사용 컨텍스트 둘 모두가 둘 다 충족되는지 여부에 관계없이). 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 디스플레이 상의 고정된 위치 상에(예컨대, 컴퓨터 시스템의 사용 컨텍스트와 관계없이 동일한 위치에) 디스플레이된다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템이 제2 사용 컨텍스트에 있을 때 사용자 인터페이스에 포함되지 않는다. 일부 실시예들에서, 제1 사용 컨텍스트는 제1 사용자 인터페이스가 디스플레이 생성 컴포넌트를 통해 디스플레이되는 동안 제2 사용 컨텍스트로 변화할 것이고, 일부 실시예들에서, 제1 선택가능한 객체들 이외에 이전에 디스플레이된 선택가능한 사용가능한 객체들은 디스플레이되는 것이 중지되거나, 또는 이전에 디스플레이되지 않은 새로운 선택가능한 사용가능한 객체들이 디스플레이된다. (예컨대, 컴퓨터 시스템의 사용 컨텍스트에 기초하여) 규정된 조건들이 충족될 때 하나 이상의 외부 디바이스들이 상이한 기능들을 수행하게 하기 위한 동적 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은, 관련 있는 선택가능한 사용자 인터페이스 객체들에 관한 피드백을 사용자에게 제공할 뿐만 아니라, 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 컴퓨터 시스템에 의해 제공된 선택가능한 객체들에 의해 제어될 수 있는 컴퓨터 시스템 및 외부 디바이스들의 더 많은 제어를 사용자에게 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 개선된 시각적 피드백을 제공하고 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다. 제1 및 제2 사용 컨텍스트들 둘 모두에서 이용가능한, 일관된 선택가능한 사용자 인터페이스 객체(예컨대, 제1 선택가능한 사용자 인터페이스 객체)를 디스플레이하는 것은, 컴퓨터 시스템의 하나 이상의 설정들을 변화시키기 위한 일관된 제어부를 사용자에게 제공한다. 제1 및 제2 사용 컨텍스트들 둘 모두에서 이용가능한 제어부를 사용자에게 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다. 컴퓨터 시스템이 특정 사용 컨텍스트에 있다는 결정에 따라 동적 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은 사용자가 컴퓨터 시스템을 적절히 동작시킬 수 있게 한다. 사용자에게 제시되는 그러한 정보의 인지적 콘텐츠는 컴퓨터 시스템에서 우세한 내부 상태에 관한 것이고, 따라서 기술적 효과이다. 예를 들어, 컴퓨터 시스템에서 우세한 내부 상태는 동적으로 변화하고, 상이한 선택가능한 사용자 인터페이스 객체들이 결과로서 디스플레이된다. 동적 선택가능한 사용자 인터페이스 객체들의 그러한 제시는 사용자가 컴퓨터 시스템과 상호작용하도록 프롬프트한다.
일부 실시예들에서, 제1 외부 액세서리 디바이스(예컨대, 1206, 1212, 1216, 1232, 1236, 1242, 1244, 1246, 1248, 1242, 1256, 1258, 1262, 1264, 1266)는 제2 외부 액세서리 디바이스(예컨대, 1206, 1212, 1216, 1232, 1236, 1242, 1244, 1246, 1248, 1242, 1256, 1258, 1262, 1264, 1266)와 상이하다. 일부 실시예들에서, 선택될 때 제2 디바이스를 포함하는 복수의 디바이스로 하여금 복수의 기능들을 수행하게 하는 제2 선택가능한 사용자 인터페이스 객체(예컨대, 선택될 때, 활성화될 매크로(예컨대, 프로그램, 장면)를 개시하는 제2 선택가능한 사용자 인터페이스 객체 - 여기서 매크로는 복수의 디바이스들로 하여금 미리정의된(예컨대, 또는 맞춤화된) 시퀀스로 복수의 기능들을 수행하게 함 -).
일부 실시예들에서, 제1 사용 컨텍스트는, 제1 사용자 인터페이스가 제1 시간(예컨대, 도 13a에서의 22:10)에(예컨대, 제1 시간 범위 동안) 디스플레이될(예컨대, 초기에 디스플레이되거나, 또는 그 동안 디스플레이될) 때 충족되는 요건을 포함한다. 일부 실시예들에서, 제2 사용 컨텍스트는, 제1 사용자 인터페이스가 제1 시간과는 상이한 제2 시간(예컨대, 도 13c에서의 06:42)에(예컨대, 제1 시간 범위와는 상이한 제2 시간 범위 동안) 디스플레이될(예컨대, 초기에 디스플레이되거나, 또는 그 동안 디스플레이될) 때 충족되는 요건을 포함한다. 일부 실시예들에서, 제1 시간(또는 제2 시간)에 디스플레이되는 제1 사용자 인터페이스(또는 제2 사용자 인터페이스)는, 컴퓨터 시스템이 제1 시간(또는 제2 시간)에(또는 제1 시간(또는 제2 시간) 이전의 시간에) 제1 사용자 인터페이스 디바이스를 디스플레이하기 위한 요청(예컨대, 스와이프)을 수신하는 것에 기초한다. 일부 실시예들에서, 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정은 현재 시간의 결정을 포함한다. 일부 실시예들에서, 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정은 현재 시간의 결정을 포함한다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은 제1 기간 동안에만 제2 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은 제1 기간과 상이한 제2 기간 동안에만 제3 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제2 기간은 제1 기간과 중첩되지 않는다. 상이한 시간들에 그리고 이들 시간에 관련 있는 동적 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은, 덜 관련 있는 제어 옵션들로 사용자 인터페이스를 혼란스럽게 하지 않고서 관련 있는 제어 옵션들을 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 개선된 제어 옵션들을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 사용 컨텍스트는 컴퓨터 시스템이 (예컨대, 제1 하나 이상의 위치들에 대응하는) 제1 위치(예컨대, 1302a, 1302b, 1302c)에서 검출될 때 충족되는 요건을 포함한다. 일부 실시예들에서, 제2 사용 컨텍스트는 컴퓨터 시스템이 제1 위치와 상이한 (예컨대, 제1 하나 이상의 위치들과 상이한 제2 하나 이상의 위치들에 대응하는) 제2 위치(예컨대, 1302a, 1302b, 1302c)에서 검출될 때 충족되는 요건을 포함한다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은 컴퓨터 시스템이 제1 위치에 있을 때에만 제2 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은 컴퓨터 시스템이 제2 위치에 있을 때 제3 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제1 위치 및 제2 위치는 중첩되지 않는다. 상이한 위치들에 대한 그리고 이들 위치에 관련 있는 동적 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은, 덜 관련 있는 제어 옵션들로 사용자 인터페이스를 혼란스럽게 하지 않고서 관련 있는 제어 옵션들을 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 개선된 제어 옵션들을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 사용 컨텍스트는, 컴퓨터 시스템이 이전에 제1 외부 액세서리 디바이스로 하여금 제3 기능(예컨대, 1360, 1334h)(예컨대, 제1 기능과 동일하거나 상이한 기능)을 수행하게 했을 때 충족되는 요건을 포함한다. 일부 실시예들에서, 제1 외부 액세서리 디바이스는 가장 일반적으로 제어되는 디바이스 또는 가장 최근에 제어된 디바이스이다. 일부 실시예들에서, 제2 사용 컨텍스트는, 컴퓨터 시스템이 이전에 제2 외부 액세서리 디바이스로 하여금 제4 기능(예컨대, 1360, 1334h)(예컨대, 제2 기능과 동일하거나 상이한 기능)을 수행하게 했을 때 충족되는 요건을 포함한다. 일부 실시예들에서, 제2 외부 액세서리 디바이스는 가장 일반적으로 제어되는 디바이스 또는 가장 최근에 제어된 디바이스이다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은, 컴퓨터 시스템이 이전에 제1 외부 액세서리 디바이스로 하여금 제3 기능을 수행하게 했을 때에만 제2 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은, 컴퓨터 시스템이 이전에 제2 외부 액세서리 디바이스로 하여금 제4 기능을 수행하게 했을 때 제3 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제3 기능과 제4 기능은 상이하다. 외부 액세서리 디바이스들에 의한 제어 옵션들의 이전 사용에 기초하여 하나 이상의 외부 디바이스들로 하여금 상이한 기능들을 수행하게 하기 위한 동적 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은, 더 적은 관련 있는 제어 옵션들로 사용자 인터페이스를 혼란스럽게 하지 않으면서 더 관련 있는 제어 옵션들을 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 개선된 제어 옵션들을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은, 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 포함하는 제1 개수의(예컨대, 도 13a의 1333, 1334a, 1334b) 선택가능한 사용자 인터페이스 객체들을 포함한다. 일부 실시예들에서, 제1 복수의 선택가능한 사용자 인터페이스 객체들은, 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체 및 제3 선택가능한 사용자 인터페이스 객체를 포함하는 제2 개수의(예컨대, 도 13a의 1333, 1334c 내지 1334f) 선택가능한 사용자 인터페이스 객체들을 포함한다. 일부 실시예들에서, 제1 개수는 제2 개수와 상이하다(예컨대, 제1 개수는 제2 개수보다 크고; 제1 개수는 제2 개수보다 작음). 컴퓨터 시스템이 동작하고 있는 사용 컨텍스트에 기초하여 상이한 개수의 제어부들을 제공하는 것은, (예컨대, UI의 빈 공간을 채우도록) 관련 없는 추가의 제어부들로 UI를 혼란스럽게 하지 않고서 관련 있는 개수의 제어부들을 사용자에게 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 컴퓨터 시스템은 제1 선택가능한 사용자 인터페이스 객체에 대응하는 제1 사용자 입력(예컨대, 탭 입력, 눌러서 유지하기 입력)을 수신한다. 일부 실시예들에서, 제1 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 외부 액세서리 디바이스들(예컨대, 홈 관리 애플리케이션에 의해 생성된 애플리케이션)을 제어하기 위한 사용자 인터페이스(예컨대, 1320, 1340)를 디스플레이하며, 사용자 인터페이스는 다음을 포함한다: 컴퓨터 시스템이 제1 사용 컨텍스트에 있는 것에 따라 - 여기서 제1 사용 컨텍스트는, 컴퓨터 시스템이 현재 하나 이상의 외부 액세서리 디바이스들의 제1 세트에 대응하는 제1 위치(예컨대, 제1 집(예컨대, "123 Main Street"))와 연관된다는 것을 포함함 -, 선택될 때, 하나 이상의 외부 액세서리 디바이스들의 제1 세트 중 제1 외부 액세서리 디바이스(예컨대, 스마트 홈 액세서리 디바이스(예컨대, 스마트(예컨대, 지능형) 전구들, 온도조절기, 도어 로크, 도어 오프너(예컨대, 차고 도어 오프너), 스피커, 텔레비전, 전기 콘센트, 전력 스트립, 카메라, 어플라이언스(예컨대, 냉장고, 스토브)))로 하여금 제5 기능을 수행하게 하는(예컨대, 외부 액세서리 디바이스로 하여금, 외부 액세서리 디바이스가 수행하도록 구성되는 하나 이상의 기능들(예컨대, 켜기/끄기, 온도 설정, 잠금해제/잠금)을 수행하게 하는) 제1 외부 액세서리 디바이스 사용자 인터페이스 객체(예컨대, 1336); 및 컴퓨터 시스템이 제2 사용 컨텍스트에 있는 것에 따라 - 여기서 제2 사용 컨텍스트는, 컴퓨터 시스템이 현재 하나 이상의 외부 액세서리 디바이스들의 제1 세트와 상이한 하나 이상의 외부 액세서리 디바이스들의 제2 세트에 대응하는 제2 위치(예컨대, 제2 집(예컨대, "345 First Street"))와 연관된다는 것을 포함함 -, 선택될 때, 하나 이상의 외부 액세서리 디바이스들의 제2 세트 중 제1 외부 액세서리 디바이스(예컨대, 스마트 홈 액세서리 디바이스(예컨대, 스마트(예컨대, 지능형) 전구들, 온도조절기, 도어 로크, 도어 오프너(예컨대, 차고 도어 오프너), 스피커, 텔레비전, 전기 콘센트, 전력 스트립, 카메라, 어플라이언스(예컨대, 냉장고, 스토브)))로 하여금 제6 기능을 수행하게 하는(예컨대, 외부 액세서리 디바이스로 하여금, 외부 액세서리 디바이스가 수행하도록 구성되는 하나 이상의 기능들(예컨대, 켜기/끄기, 온도 설정, 잠금해제/잠금)을 수행하게 하는) 제2 외부 액세서리 디바이스 사용자 인터페이스 객체(예컨대, 1336). 컴퓨터 시스템이 컨텍스트적으로 연관되는 위치에 기초하여 상이한 외부 액세서리 디바이스들에 대한 상이한 제어부들을 포함하는 하나 이상의 외부 액세서리 디바이스들을 제어하기 위한 사용자 인터페이스를 디스플레이하는 것은, 디바이스들의 현재 위치에 더 관련 있는 제어 옵션들을 사용자에게 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 사용자 인터페이스는 컴퓨터 시스템이 제1 사용자-구성가능한 모드(예컨대, 도 13m의 1382)(예컨대, 동적 외부 액세서리 디바이스 제어부들이 제1 사용자 인터페이스 내의 디스플레이를 위해 인에이블되는 모드; 컴퓨터 시스템의 설정 사용자 인터페이스에서 선택될 수 있는 모드)에 있는 동안 디스플레이된다 일부 실시예들에서, 컴퓨터 시스템이 제2 사용자-구성가능한 모드(예컨대, 도 13n의 1382)(예컨대, 동적 외부 액세서리 디바이스 제어부들이 제1 사용자 인터페이스 내의 디스플레이를 위해 인에이블되지 않는 모드; 컴퓨터 시스템의 설정 사용자 인터페이스에서 선택될 수 있는 모드)에 있는 동안, 컴퓨터 시스템은 제2 복수의 사용자 인터페이스 객체들을 포함하는 제2 사용자 인터페이스(예컨대, 도 13l의 1320)를 디스플레이한다. 일부 실시예들에서, 제2 복수의 사용자 인터페이스 객체들은 제1 복수의 사용자 인터페이스 객체들의 제1 서브세트를 포함하고, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 포함하는 제1 복수의 사용자 인터페이스 객체들의 제2 서브세트 중 어떠한 선택가능한 사용자 인터페이스 객체들도 포함하지 않는다. 일부 실시예들에서, 제2 서브세트는 외부 액세서리 디바이스로 하여금 기능을 수행하게 하는 제1 복수의 사용자 인터페이스 객체들 중 임의의 선택가능한 사용자 인터페이스 객체를 포함한다. 동적 디바이스 제어가 디스에이블될 때 동적 선택가능한 사용자 인터페이스 객체들을 디스플레이하지 않는 것은, 동적 디바이스 제어부가 디스에이블되는지 여부에 대한 피드백을 제공하고, 사용자에게 그 특징부에 대한 추가의 제어를 제공한다. 개선된 시각적 피드백 및 특징부들에 대한 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 사용자 인터페이스는 컴퓨터 시스템이 잠금해제된 사용자 인터페이스 상태(예컨대, 제1 세트의 사용자 인터페이스 기능들(예컨대, 디폴트 세트)이 이용가능한 상태)에 있는 동안에 디스플레이된다. 일부 실시예들에서, 컴퓨터 시스템이 잠금된 사용자 인터페이스 상태(예컨대, 13k 및 13l)(예컨대, 제1 세트의 사용자 인터페이스 기능들 중 하나 이상이 이용가능하지 않은 상태(제한된 사용자 인터페이스 상태))에 있는 동안, 컴퓨터 시스템은 제3 복수의 사용자 인터페이스 객체들을 포함하는 제3 사용자 인터페이스(예컨대, 도 13l의 1320)를 디스플레이한다. 일부 실시예들에서, 제3 복수의 사용자 인터페이스 객체들은 제1 복수의 사용자 인터페이스 객체들의 제3 서브세트를 포함하고, 제1 복수의 사용자 인터페이스 객체들의 제4 서브세트를 포함하지 않는다. 일부 실시예들에서, 제4 서브세트는 제2 선택가능한 사용자 인터페이스 객체 및/또는 제3 선택가능한 사용자 인터페이스 객체를 포함한다. 일부 실시예들에서, 제4 서브세트는 외부 액세서리 디바이스로 하여금 기능을 수행하게 하는 제1 복수의 사용자 인터페이스 객체들 중 임의의 선택가능한 사용자 인터페이스 객체를 포함한다. 잠금된 상태에 있는 동안 제1 복수의 사용자 인터페이스 객체들의 서브세트를 디스플레이하지 않으면서 제1 복수의 사용자 인터페이스 객체들의 서브세트를 디스플레이하는 것은, 컴퓨터 시스템으로 하여금 잠금된 상태에 있는 동안 어느 제어부들이 제공될지 제한할 수 있게 하며, 이는 컴퓨터 시스템이 잠금될 때(예컨대, 전자 디바이스가 더 안전한 상태에 있거나, 또는 컴퓨터 시스템의 추가 기능성에 액세스하기 위해 소정 유형의 패스코드가 제공될 필요가 있는 상황들에서) 선택가능한 사용자 인터페이스 객체들에의 의도하지 않은 액세스를 보호한다. 개선된 보안을 제공하는 것은 사용자 인터페이스를 더 안전하게 만들고 인가되지 않은 입력들을 감소시키며, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 안전하고 효율적으로 사용할 수 있게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 컴퓨터 시스템은 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력(예컨대, 탭 제스처, 길게 누르기 제스처)을 수신한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 그리고 제2 선택가능한 사용자 인터페이스 객체 또는 제3 선택가능한 사용자 인터페이스 객체를 포함하는 제1 사용자 인터페이스(예컨대, 도 13e의 1320)를 디스플레이하는 동안, 컴퓨터 시스템은 제2 선택가능한 사용자 인터페이스 객체 및 제3 선택가능한 사용자 인터페이스 객체와 상이한 제6 선택가능한 사용자 인터페이스 객체(예컨대, 1336, 1336g)를 디스플레이한다. 일부 실시예들에서, 제6 선택가능한 사용자 인터페이스 객체의 선택은, 복수의 외부 액세서리 디바이스들 중 제7 외부 액세서리 디바이스(예컨대, 스마트 홈 액세서리 디바이스(예컨대, 스마트(예컨대, 지능형) 전구, 온도조절기, 도어 로크, 도어 오프너(예컨대, 차고 도어 오프너), 스피커, 텔레비전, 전기 콘센트, 전력 스트립, 카메라, 어플라이언스(예를 들어, 냉장고, 스토브)))로 하여금 제7 기능을 수행하게 한다(예컨대, 액세서리 디바이스로 하여금 하나 이상의 기능들(예컨대, 끄기/켜기, 온도 설정, 잠금해제/잠금)을 수행하게 한다). 일부 실시예들에서, 제7 기능은 제1 기능 및 제2 기능과 상이하다. 일부 실시예들에서, 제7 외부 액세서리 디바이스는 제1 외부 액세서리 디바이스 및 제2 외부 액세서리 디바이스와 상이하다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 제1 선택가능한 사용자 인터페이스 객체(및/또는 선택될 때, 컴퓨터 시스템으로 하여금 상태를 수정하게 하는(예컨대, 컴퓨터 시스템의 디스플레이 생성 컴포넌트의 밝기를 수정함(예컨대, 조정함), 컴퓨터 시스템의 하나 이상의 스피커들의 사운드를 수정함, 상태(Wi-Fi, 비행기 모드, 블루투스의 (예컨대, 온/오프))를 수정함, 컴퓨터 시스템의 디스플레이 스크린 상에 디스플레이되는 사용자 인터페이스를 수정 또는 변화시킴(이전에 디스플레이되지 않은 그리고/또는 제1 사용자 인터페이스와 상이한 제2 사용자 인터페이스를 디스플레이하는 것)) 다른 선택가능한 사용자 인터페이스 객체들)를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 (예를 들어, 각각의 외부 액세서리 디바이스가 할당되는 방에 의해) 특정 순서로 정렬되는 외부 액세서리 디바이스들을 제어하기 위한 복수의 선택가능한 사용자 인터페이스 객체들을 디스플레이한다. 입력(예컨대, 길게 누르기 입력)을 수신하는 것에 응답하여 제1 사용자 인터페이스 상에 동적으로 디스플레이되지 않고 있었던 추가의 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은, 제1 사용자 인터페이스를 혼란스럽게 하지 않고서 추가의 제어 옵션들을 사용자에게 제공한다. 사용자 인터페이스를 혼란스럽게 하지 않고서 추가의 제어 옵션들을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 위치는 제1 물리적 구조물(예컨대, 집, 홈, 사무실 건물)과 연관된 위치로부터 미리결정된 거리보다 작게 떨어진 위치이다. 일부 실시예들에서, 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제2 외부 액세서리 디바이스는 제1 물리적 구조물의 내부 위치와 연관된다.
일부 실시예들에서, 제2 물리적 구조물은 제1 영역 및 제1 영역과 상이한 제2 영역을 포함한다. 일부 실시예들에서, 제1 위치는 물리적 구조물의 제2 영역 내에 있지 않으면서 물리적 구조물의 제1 영역 내에 있는 위치이다. 일부 실시예들에서, 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제2 외부 액세서리 디바이스는 제1 영역과 연관되고 제2 영역과는 연관되지 않는다.
일부 실시예들에서, 제2 위치는 물리적 구조물(예컨대, 집, 홈, 사무실 건물)로부터 미리결정된 거리 이상 떨어진 위치이다. 일부 실시예들에서, 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정에 따라, 제3 외부 액세서리 디바이스는 물리적 구조물의 외부 위치와 연관된다.
일부 실시예들에서, 제1 사용자 인터페이스는 제1 부분 및 제2 부분; 및 컴퓨터를 포함한다. 일부 실시예들에서, 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제1 부분은 하나 이상의 선택가능한 사용자 인터페이스 객체들의 고정된 레이아웃에 기초하여 디스플레이되고, 제2 부분은 하나 이상의 선택가능한 사용자 인터페이스 객체들의 제1 가변 레이아웃을 포함한다. 일부 실시예들에서, 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정에 따라, 제1 부분은 고정된 레이아웃에 기초하여 디스플레이되고, 제2 부분은 하나 이상의 선택가능한 사용자 인터페이스 객체들의 제2 가변 레이아웃에 기초하여 디스플레이된다. 일부 실시예들에서, 제2 가변 레이아웃은 제3 가변 레이아웃과 상이하다.
일부 실시예들에서, 컴퓨터 시스템이 소정 배향으로 있는 동안: 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체들은 제1 사용자 인터페이스의 일부분을 점유하는(예컨대, 그 내에 있고 이를 채우는) 제3 레이아웃으로 디스플레이되고; 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정에 따라, 제2 선택가능한 사용자 인터페이스 객체들은 제1 사용자 인터페이스의 일부분을 점유하는(예컨대, 그 내에 있고 이를 채우는) 제4 레이아웃으로 디스플레이된다. 일부 실시예들에서, 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제1 수의 선택가능한 사용자 인터페이스는 제1 사용자 인터페이스의 일부분을 점유하는 제3 레이아웃으로 디스플레이된다. 일부 실시예들에서, 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정에 따라, 제2 수의 선택가능한 사용자 인터페이스는 제1 사용자 인터페이스의 일부분을 점유하는, 제3 레이아웃 및 제2 레이아웃과 상이한 제4 레이아웃으로 디스플레이된다. 일부 예들에서, 제3 레이아웃은 제4 레이아웃과 상이하다.
일부 실시예들에서, 제2 사용자 인터페이스를 디스플레이하는 것의 일부로서, 컴퓨터 시스템은 제2 선택가능한 사용자 인터페이스 객체에 대응하는 선택가능한 사용자 인터페이스 객체 및 제3 선택가능한 사용자 인터페이스 객체에 대응하는 선택가능한 사용자 인터페이스 객체 중 적어도 하나를 디스플레이한다(또는 둘 모두를 동시에 디스플레이함).
일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체에 대응하는 선택가능한 사용자 인터페이스 객체를 디스플레이하지 않으면서 제2 사용자 인터페이스를 디스플레이하는 동안, 컴퓨터 시스템은 제3 사용자 인터페이스를 디스플레이하라는 요청에 대응하는 사용자 입력을 수신한다. 일부 실시예들에서, 제3 사용자 인터페이스를 디스플레이하라는 요청을 수신하는 것에 응답하여, 컴퓨터 시스템은 제2 선택가능한 사용자 인터페이스 객체에 대응하는 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 포함하는 제3 사용자 인터페이스를 디스플레이한다.
일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 동적 제어부들의 개수와 관계없이 동일한 크기이다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 제1 사용자 인터페이스의 제2 부분에 디스플레이된다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체가 제1 사용자 인터페이스의 제2 부분에 디스플레이되는 동안, 컴퓨터 시스템은: 컴퓨터 시스템이 제1 사용 컨텍스트에 있다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체는 제1 크기를 갖고; 컴퓨터 시스템이 제2 사용 컨텍스트에 있다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체는 제1 크기와는 상이한 제2 크기를 갖는다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 제1 사용자 인터페이스의 제1 부분에 디스플레이되고, 제1 선택가능한 사용자 인터페이스 객체가 제1 사용자 인터페이스의 제1 부분에 디스플레이되는 동안, 제1 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템의 사용 컨텍스트와 관계없이 동일한 크기이다.
방법(1400)(예컨대, 도 14)과 관련하여 전술된 프로세스들의 상세사항들은 또한 위에서/아래에서 기술된 방법들과 유사한 방식으로 적용가능함에 유의한다. 예를 들어, 방법(800)은, 선택적으로, 방법(1400)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(800)의 동작(806)은 컴퓨터 시스템이 방법(1400)의 동작(1402)을 수행하고 있는 동안 디스플레이될 수 있는 제1 미디어 정보 어포던스를 선택하기 위해 수행될 수 있고, 동작들(808, 810, 및/또는 812)은 선택에 응답하여 방법(1400)의 일부로서 수행될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 15a 내지 도 15l은 일부 실시예들에 따른, 오디오 재생을 제어하기 위한 예시적인 사용자 인터페이스들을 예시한다. 이들 도면들의 사용자 인터페이스들은 도 7, 도 8, 도 10, 및 도 16에 도시된 프로세스들을 포함하여 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
도 15a 내지 도 15d는 외부 미디어 재생 디바이스(예컨대, 거실 스피커(1248))가 현재 미디어를 재생하고 있는 예시적인 시나리오들을 예시한다. 도 15a 내지 도 15d는 또한 외부 미디어 재생 디바이스가 현재 미디어를 재생하고 있는 동안 디스플레이되는 사용자 인터페이스들을 예시하며, 디바이스(600)는 외부 미디어 재생 디바이스로부터 각자의 거리만큼 떨어져 있다. 도 15a 내지 도 15d는, 디바이스(600)의 위치(예컨대, 1502a 내지 1502c)가 외부 미디어 재생 디바이스의 위치로부터 떨어져 있는 각자의 거리(예컨대, 1504a 내지 1504c)의 표현을 포함하는 개략도(1500)를 포함한다. 개략도(1500)는 설명을 위한 시각적 보조로서만 예시적인 목적으로 제공된다. 따라서, 개략도(1500)는 디바이스(600)가 외부 미디어 재생 디바이스로부터 미리결정된 거리 내에 있는지 여부를 결정하는 것의 범주를 제한하도록 의도되지 않는다. 또한, 도면들은 반드시 축척대로 도시된 것은 아니며, 단지 시각적 보조로서 포함된다. 따라서, 달리 언급되지 않는 한, 도면들에 도시된 특징부들의 크기 및 축척은 외부 미디어 재생 디바이스로부터 미리결정된 거리 내에 있도록 요구되는 거리에 대한 제한으로서 의도되지 않는다. 일부 실시예들에서, 도 15a 내지 도 15d와 관련하여 기술된 기법들은, 전술된 바와 같이(예를 들어, 근접성 범위 표시자(652)에 의해 표현된 바와 같이 그리고 도 6a 내지 도 6p와 관련하여 전술되는 하나 이상의 기법들을 사용하여), 근접성 조건 범위 내에 있는 디바이스(600)와 관련하여 위에서 논의된 기법들과 유사하다.
도 15a는 다수의 애플리케이션 아이콘들을 포함하는 사용자 인터페이스(1508)를 디스플레이하는 디바이스(600)를 예시한다. 도 15a의 개략도(1500)에 의해 도시된 바와 같이, 디바이스(600)는 거실 스피커(1248)로부터 거리(1504a)만큼 떨어진 위치(1502a)에 있다.
도 15b에서, 개략도(1500)는 디바이스(600)가 현재 거실 스피커(1248)로부터 거리(1504b)만큼 떨어진 위치(1502b)에 있는 것을 도시한다. 거리(1504b)는 도 15a에 도시된 거리(1504a)보다 작다. 따라서, 도 15b에서, 디바이스(600)는 디바이스(600)가 도 15a에서 있었던 것보다 거실 스피커(1248)에 더 가깝다.
도 15b에서, 외부 디바이스 제어 기준들(예컨대, 제어 기준들)의 세트가 충족되지 않는다는 결정이 이루어진다. 여기서, 디바이스(600)가 거실 스피커(1248)에 충분히 가깝게 있지 않기 때문에(예컨대, 거리(1504b)는 미리결정된 거리(예컨대, 1, 3, 5 미터) 내에 있지 않음) 제어 기준들이 충족되지 않는다는 결정이 이루어진다. 일부 실시예들에서, 제어 기준들이 충족되는지 여부의 결정은 디바이스(600) 또는 디바이스(600)와 통신하는 서버와 같은 하나 이상의 다른 디바이스들에 의해 이루어진다.
도 15b에 예시된 바와 같이, 디바이스(600)는, 외부 디바이스 제어 기준들이 충족되지 않기 때문에(예컨대, 디바이스(600)가 거실 스피커(1248)로부터 거리(1504b)에 있을 때), 사용자 인터페이스(1508)를 업데이트하지 않거나 사용자 인터페이스(1508)와는 상이한 사용자 인터페이스를 디스플레이하지 않는다.
도 15c에서, 개략도(1500)는 디바이스(600)가 현재 거실 스피커(1248)로부터 거리(1504c)만큼 떨어진 위치(1502c)에 있는 것을 도시한다. 거리(1504c)는 도 15b에 도시된 거리(1504b)보다 작다. 따라서, 도 15c에서, 디바이스(600)는 디바이스(600)가 도 15b에서 있었던 것보다 거실 스피커(1248)에 더 가깝다.
도 15c에서, 제어 기준들이 충족된다는 결정이 이루어진다. 여기서, 디바이스(600)가 거실 스피커(1248)에 충분히 가깝게 있기 때문에(예컨대, 거리(1504c)는 미리결정된 거리(예컨대, 1, 3, 5 미터) 내에 있음) 제어 기준들이 충족된다는 결정이 이루어진다. 도 15c에서, 디바이스(600)가 디바이스(600)의 임의의 사용자 인터페이스 요소들에 지시된 임의의 특정 제스처들 또는 사용자 입력들을 수신하지 않으면서 제어 기준들이 충족된다는 결정이 이루어진다. 일부 실시예들에서, 제어 기준들이 충족되는지 여부를 결정할 때, 거실 스피커(1248)에 대한 디바이스(600)의 물리적 배향에 기초하지 않는 결정이 이루어진다. 다시 말하면, 일부 실시예들에서, 제어 기준들은 디바이스(600)가 거실 스피커(1248) 또는 환경 내의 임의의 다른 객체에 대응하는 위치를 향하는지 또는 그로부터 멀어지게 향하는지 여부에 기초하여 충족되는 기준을 포함하지 않는다. 일부 실시예들에서, 제어 기준들이 충족되는지 여부를 결정할 때, 전자 디바이스(600)의 특정 이동 여부에 기초하지(예컨대, 디바이스(600)가 거실 스피커(1248)에 대응하는 위치를 향해 가속하고 있는지 여부에 기초하지) 않는 결정이 이루어진다. 일부 실시예들에서, 제어 기준들이 2개의 상이한 외부 미디어 재생 디바이스들에 대해 충족될 때(예컨대, 디바이스(600)가 2개의 상이한 외부 미디어 재생 디바이스들에 충분히 가까울 때), 디바이스(600)는, 디바이스(600)에 가장 가까운 디바이스 또는 현재 미디어를 재생하고 있는 디바이스(600)에 가장 가까운 디바이스에 대응하는 사용자 인터페이스(1510)(또는 아래에서 논의되는 사용자 인터페이스(1530))와 유사한 사용자 인터페이스를 자동으로 디스플레이할 것이다.
일부 실시예들에서, 제어 기준들은 외부 미디어 재생 디바이스에서 미디어의 재생을 개시하기 위한 음성 커맨드가 디바이스(600)로부터 이루어질 때 충족되는 기준을 포함한다. 일부 실시예들에서, 음성 커맨드는 하나 이상의 음성 인식 및/또는 생체측정 알고리즘들에 의해 분석되어, 음성이 (예컨대, 계정을 통해) 디바이스(600)와 연관되는 사용자에 속한다고 결정한다. 따라서, 일부 실시예들에서, 음성 커맨드를 외부 미디어 재생 디바이스에 발행하는 것으로 인식된 사용자와 연관되는 디바이스는 (예컨대, 제어 기준들이 충족되기 때문에) 자동으로 사용자 인터페이스(예컨대, 사용자 인터페이스(1510) 또는 사용자 인터페이스(1530)와 같은(아래에서 논의됨))를 디스플레이할 것인 반면, 사용자와 연관되지 않는 디바이스는, 디바이스들 둘 모두가 외부 미디어 재생 디바이스에 (예컨대, 그로부터 미리결정된 거리 내에서) 충분히 가까울지라도 (예컨대, 제어 기준들이 충족되기 때문에) 사용자 인터페이스를 자동으로 디스플레이하지 않을 것이다.
일부 실시예들에서, 제어 기준들은 디바이스(600)가 외부 미디어 재생 디바이스와 동일한 계정(예를 들어, 모바일 디바이스 계정, 미디어 저장소 계정, 미디어 제공자 계정)에 로그인될 때 충족되는 기준을 포함한다. 따라서, 일부 실시예들에서, 외부 미디어 재생 디바이스와 동일한 계정에 로그인되는 디바이스는 사용자 인터페이스를 자동으로 디스플레이할 것인 반면, 외부 미디어 재생 디바이스와 동일한 계정에 로그인되지 않은 디바이스는, 디바이스들 둘 모두가 외부 미디어 재생 디바이스에 (예컨대, 그로부터 미리결정된 거리 내에서) 충분히 가까울지라도 그렇지 않을 것이다.
일부 실시예들에서, 제어 기준들은 디바이스(600)가 미디어 재생과 동일한 계정에 로그인되고/되거나, 외부 미디어 재생 디바이스가 미디어를 재생하고 있고/있거나, 디바이스(600)가 디바이스(600)와 동일한 방(예컨대, 거실(1202d)) 내에 있을 때 충족되는 기준을 포함한다. 일부 실시예들에서, 외부 미디어 재생 디바이스와 동일한 계정에 로그인된 2개 이상의 디바이스들이 있고 2개 이상의 디바이스들이 외부 미디어 재생 디바이스에 충분히 가까울 때, 디바이스들 중 적어도 하나는, (예컨대, 디바이스로부터의 커맨드가 외부 미디어 재생 디바이스로 전송될 때) 외부 미디어 재생 디바이스 상에서의 미디어의 재생을 제어하고 있거나, 또는 사용자 인터페이스(1510) 또는 사용자 인터페이스(1530)(아래에서 논의됨)와 같은 사용자 인터페이스를 디스플레이하고 있는 디바이스의 표시(예컨대, 디바이스의 소유자와 연관된 식별자)를 디스플레이할 것이다.
제어 기준들이 충족되는지 여부에 관한 결정과 함께, 거실 스피커(1248)가 현재 미디어를 재생하도록 구성되어 있다는(예를 들어, 현재 미디어를 출력하고 있다는) 결정이 이루어지며, 이는 도 15a의 오디오 활동 표시자(1592)에 의해 예시된다. 도 15c에서, 개략도(1500)는 거실 스피커(1248) 위의 오디오 활동 표시자(1592) 및 식당 스피커(1216) 위의 오디오 활동 표시자(1594)를 포함한다. 오디오 활동 표시자(1592)(예컨대, 음표)는 오디오 활동 표시자(1594)(예컨대, "그것을 지나는 사선을 갖는 음표")와 대조되어, 오디오 활동 표시자(1592)가 거실 스피커(1248)가 현재 미디어를 출력하고 있음을 나타내는 반면 오디오 활동 표시자(1594)는 거실 스피커(1216)가 현재 미디어를 출력하고 있지 않음을 나타내도록 할 수 있다. 오디오 활동 표시자(1592) 및 오디오 활동 표시자(1594)는 유사한 목적을 위해 제공되고 각각 오디오 활동 표시자(675) 및 오디오 활동 표시자(625)와 동일한 속성들을 갖는다는 것이 이해되어야 한다.
도 15c에 예시된 바와 같이, 디바이스(600)는, 제어 기준들이 충족되고 거실 스피커(1248)가 현재 미디어를 재생하고 있다는 결정들이 이루어졌기 때문에, 사용자 인터페이스(1510)를 디스플레이한다. 사용자 인터페이스(1510)는 디바이스 식별자(1512), 디바이스 식별자(1514), 현재 미디어 식별자(1516), 타이머 제어부(1528), 및 미디어 재생 제어부들, 예컨대 재생 위치 제어부(1518), 되감기 제어부(1520), 일시정지 제어부(1522), 빨리감기 제어부(1524), 및 볼륨 레벨 제어부(1526)를 포함한다. 디바이스 식별자(1512) 및 디바이스 식별자(1514)는 사용자 인터페이스(1510)를 통해 제어될 수 있는 디바이스의 이름을 나타낸다. 따라서, 도 15c에서, 디바이스 식별자(1512) 및 디바이스 식별자(1514)는, 디바이스(600)가 거실 스피커(1248)에 충분히 가깝기 때문에 거실 스피커(1248)가 사용자 인터페이스(1510)를 통해 제어될 수 있다는 것을 나타낸다(예컨대, "거실"). 도 15c에 도시된 바와 같이, 디바이스 식별자(1512)는 또한 사용자 인터페이스(1510)를 통해 제어될 수 있는 디바이스의 유형의 그래픽 표현 옆에 디스플레이된다. 따라서, 도 15c에서, 그래픽 표현은 스피커이다. 현재 미디어 식별자(1516)는 현재 거실 스피커(1248)에 의해 재생되고 있거나 제어되고 있는 미디어를 나타낸다. 따라서, 도 15c에서, 거실 스피커(1248)는 "아티스트 1"에 의해 연주되는 노래, "트랙 1"을 재생하고 있다.
타이머 제어부(1528)는 선택적으로 타이머를 제어하기 위한 다수의 제어부들(예컨대, 일시정지 제어부, 중지 제어부)을 포함한다. 도 15c에서, 타이머 제어부(1528)는 비-미디어 관련 애플리케이션(예컨대, 타이머 애플리케이션, 알람 애플리케이션)에 대응한다. 따라서, 도 15c에서, 타이머 제어부(1528)는 미디어 재생 제어부들이 대응하는 미디어 관련 애플리케이션(예컨대, 음악 애플리케이션, 비디오 애플리케이션, 팟캐스트 애플리케이션)과는 상이한 유형의 애플리케이션에 대응한다.
도 15c에서, 미디어 재생 제어부들 중 임의의 것이 (예컨대, 제스처를 통해) 선택될 때, 거실 스피커(1248)로 하여금 미디어 재생 동작을 수정하게 하는 명령어가 디바이스(600)에 의해 송신된다. 예를 들어, 되감기 제어부(1520)에 지시된 제스처를 수신하는 것에 응답하여, 디바이스(600)는 거실 스피커(1248)로 하여금 현재 재생되고 있는 "트랙 1"을 되감게 하는 명령어를 송신한다.
도 15c에 예시된 바와 같이, 재생 위치 제어부(1518)는 재생 위치 표시자(1518a)를 포함한다. 도 15c에서, 재생 위치 표시자(1518a)는 미디어의 현재 재생 위치(예컨대, 재생되고 있는 미디어의 현재 시간)에 대응하는 재생 위치 제어부(1518) 상의 위치에 있다. 도 15c에서, 재생 위치 표시자(1518a)는 미디어의 재생 상태 및 남은 시간을 나타내는 데이터에 기초하여 재생 위치 제어부(1518) 상의 위치에 디스플레이되어, 미디어 재생 제어부들이 거실 스피커(1248) 상에서 재생되고 있는 미디어의 현재 상태와 동기화되도록 한다. 도 15c에서, 디바이스(600)는 재생 위치 제어부(1518)의 재생 위치 표시자(1518a) 상에서 드래그 제스처(1550c)를 검출한다.
도 15d에 예시된 바와 같이, 드래그 제스처(1550c)를 검출하는 것에 응답하여, 디바이스(600)는 재생 위치 표시자(1518a)를 재생 위치 제어부(1518) 상의 제1 위치로부터 재생 위치 제어부(1518) 상의 제2 위치로 이동시킨다. 재생 위치 제어부(1518) 상의 새로운 위치에서 재생 위치 표시자(1518a)를 디스플레이하는 것과 함께, 디바이스(600)는, 스피커로 하여금 재생 위치 제어부(1518) 상의 제1 위치에 대응하는 미디어의 위치(예컨대, 도 15c의 00:30)로부터 재생 위치 제어부(1518) 상의 제2 위치에 대응하는 미디어의 위치(예컨대, 02:15)로 미디어의 재생을 건너뛰게 하는 명령어를 거실 스피커(1248)에 송신한다.
도 15e 및 도 15f는 외부 미디어 재생 디바이스(예컨대, 식당 스피커(1216))가 현재 미디어를 재생하고 있지 않은 예시적인 시나리오들을 예시한다. 도 15e 및 도 15f는 또한 외부 미디어 재생 디바이스가 현재 미디어를 재생하고 있지 않은 동안 디스플레이되는 사용자 인터페이스들을 예시하며, 디바이스(600)는 외부 미디어 재생 디바이스로부터 각자의 거리만큼 떨어져 있다. 도 15e 및 도 15f는, 디바이스(600)의 각자의 위치(예컨대, 1502e, 1502f)가 외부 미디어 재생 디바이스의 위치로부터 떨어져 있는 각자의 거리(예컨대, 1504e, 1504f)의 각자의 표현을 포함하는 개략도(1500)를 포함한다. 일부 실시예들에서, 도 15e 및 도 15f와 관련하여 기술된 기법들은, 전술된 바와 같이(예를 들어, 근접성 범위 표시자(652)에 의해 표현된 바와 같이 그리고 도 6a 내지 도 6p와 관련하여 전술되는 하나 이상의 기법들을 사용하여), 근접성 조건 범위 내에 있는 디바이스(600)와 관련하여 위에서 논의된 기법들과 유사하다.
도 15e에서, 개략도(1500)는 디바이스(600)가 현재 거실 스피커(1248)로부터 거리(1504d)만큼 그리고 식당 스피커(1216)로부터 거리(1504e)만큼 떨어진 위치(1502e)에 있는 것을 도시한다. 거리(1504d)는 거리(1504c)보다 크다(도 15c 및 도 15d에 도시된 바와 같음). 따라서, 도 15e에서, 디바이스(600)는 디바이스(600)가 도 15d에서 있었던 것보다 거실 스피커(1248)로부터 더 멀리 떨어져 있다.
도 15e에서, 디바이스(600)가 임의의 외부 미디어 디바이스(예컨대, 거실 스피커(1248), 식당 스피커(1216))에 가깝지 않기 때문에 제어 기준들이 충족되지 않는다는 결정이 이루어진다. 따라서, 도 15e에 예시된 바와 같이, 디바이스(600)는 (예컨대, 도 15c 및 도 15d와 관련하여 위에서 논의된 바와 같이) 거실 스피커(1248)를 제어했던 미디어 재생 제어부들을 포함한 사용자 인터페이스(1510)를 디스플레이하는 것을 자동으로 중지하고, 애플리케이션 아이콘들의 세트를 갖는 사용자 인터페이스(1508)를 재디스플레이한다. 일부 실시예들에서, 제어 기준들이 충족되지 않는다는 결정이 이루어질 때, 디바이스(600)는, 디바이스(600) 상에 디스플레이된 사용자 인터페이스를 변화시키기 위한 제스처가 수신될 때까지 그리고/또는 (예컨대, 거실 스피커(1248)와는 상이한 디바이스에 대한) 제어 기준들이 충족될 때까지, 사용자 인터페이스(1510)를 계속해서 디스플레이한다.
도 15f에서, 개략도(1500)는 디바이스(600)가 현재 식당 스피커(1216)로부터 거리(1504f)만큼 떨어진 위치(1502f)에 있는 것을 도시한다. 거리(1504f)는 거리(1504e)보다 작다(도 15e에 도시된 바와 같음). 따라서, 도 15f에서, 디바이스(600)는 그것이 도 15e에서 있었던 것보다 식당 스피커(1216)에 더 가깝다.
도 15f에서, 제어 기준들이 충족된다는 결정이 이루어진다. 여기서, 디바이스(600)가 식당 스피커(1216)에 충분히 가깝게 있기 때문에(예컨대, 거리(1502f)는 제어를 위한 미리결정된 거리(예컨대, 1, 3, 5 미터) 내에 있음) 제어 기준들이 충족된다는 결정이 이루어진다. 제어 기준들이 충족되는지 여부에 관한 결정과 함께, 식당 스피커(1216)가 현재 미디어를 재생하고 있지 않다는(예를 들어, 현재 미디어를 출력하고 있지 않다는) 결정이 이루어지며, 이는 (도 15c와 관련하여 위에서 논의된 바와 같이) 오디오 활동 표시자(1594)에 의해 예시된다.
도 15f에 예시된 바와 같이, 디바이스(600)는, 제어 기준들이 충족되고 식당 스피커(1216)가 현재 미디어를 재생하고 있지 않다는 결정들이 이루어졌기 때문에, 사용자 인터페이스(1530)를 디스플레이한다. 일부 실시예들에서, 사용자 인터페이스(1530)는 디바이스(600)가 식당(1202b)에 들어간 것으로 결정될 때 디스플레이된다.
사용자 인터페이스(1530)는 디바이스 식별자들(예컨대, "식당") 및 타이머 또는 알람 제어부(예컨대, 타이머 제어부(1528))와 같은, 사용자 인터페이스(1510)와 유사한 컴포넌트들을 포함한다. 그러나, 식당 스피커(1216)가 현재 미디어를 재생하고 있지 않기 때문에(예컨대, 미디어를 재생하는 대신에), 사용자 인터페이스(1530)는 추천된 미디어 아이템 그래픽들(1532)을 포함한다. 일부 실시예들에서, 사용자 인터페이스(1530)에 디스플레이된 타이머 또는 알람 제어부는 사용자 인터페이스(1510)에 디스플레이되는 타이머 또는 알람 제어부와 상이하다(예컨대, 다른 디바이스가 제어되고 있기 때문에 그리고/또는 각자의 사용자 인터페이스를 통해 제어되고 있는 디바이스가 상이한 미디어 재생 상태에 있기 때문에).
도 15f에 예시된 바와 같이, 추천된 미디어 아이템 그래픽들(1532)은 재생목록들(예컨대, 추천된 미디어 아이템 그래픽들(1532a, 1532d)), 팟캐스트들(예컨대, 추천된 미디어 아이템 그래픽들(1532b, 1532e)), 및 앨범들(예컨대, 추천된 미디어 아이템 그래픽들(1532c, 1532f))과 같은 상이한 유형의 미디어 아이템들을 나타낸다. 추천된 미디어 아이템 그래픽들(1532) 각각은 도 15f의 식당 스피커(1216) 상에서 재생되도록 추천되고 있는 미리결정된 미디어 아이템을 표현한다. 추천된 미디어 아이템 그래픽들 각각은 각자의 추천된 미디어 아이템을 제공(예컨대, 호스팅, 저장, 이송)하고 있는 소스(예컨대, 소스 애플리케이션 또는 소스 디바이스)를 나타내는 소스 표시자를 포함한다. 예를 들어, 추천된 미디어 아이템 그래픽(1532a)(예컨대, "재생목록 1")은 소스 표시자(1532a1)를 가지며, 이는 추천된 미디어 아이템 그래픽(1532a)에 의해 표현되는 추천된 미디어 아이템이 디바이스(600) 상에 국부적으로 저장되어 있음을 나타낸다. 다른 예로서, 추천된 미디어 아이템 그래픽(1532c)(예컨대, "앨범 1")은 소스 표시자(1532c1)를 가지며, 이는 추천된 미디어 아이템 그래픽(1532c)에 의해 표현되는 추천된 미디어 아이템이 음악 애플리케이션에 의해 제공되고 있음을 나타낸다. 일부 실시예들에서, 제1 추천된 미디어 아이템 그래픽(예컨대, 1532a)은 디바이스(600) 상에서 현재 재생되고 있는 미디어 아이템(또는 재생될 큐 내의 첫 번째의 것)에 대응한다. 일부 실시예들에서, 디바이스(600)가 추천된 미디어 아이템 그래픽들(1532) 중 하나 상에서 탭 제스처를 검출할 때, 식당 스피커(1216)는 각자의 추천된 미디어 아이템 그래픽에 의해 표현되는 미디어의 재생을 개시한다. 일부 실시예들에서, 재생목록 미디어 아이템을 나타내는 미디어 아이템을 선택하는 것은, 식당 스피커(1216)로 하여금 재생목록 미디어 아이템들의 일부인 다수의 미디어 아이템들을 재생하게 할 것이다. 일부 실시예들에서, 디바이스(600)는 미디어 아이템 그래픽들(예컨대, 608-7)과 관련하여 (예컨대, 도 6c 내지 도 6e에서) 전술된 기법들을 사용하여, 추천된 미디어 아이템 그래픽들(1532) 중 하나 이상을 디스플레이하고/하거나 선택하고/하거나 그에 지시된 제스처(들)에 응답한다. 일부 실시예들에서, 좌향 또는 우향 스와이프 제스처가 사용자 인터페이스(1510) 상에서 검출될 때(예컨대, 도 15c에서), 디바이스(600)는 사용자 인터페이스(1510) 상에 디스플레이된 콘텐츠를 변화시키지 않으면서 사용자 인터페이스(1510)의 디스플레이를 계속한다(예를 들어, 사용자 인터페이스(1510)는 디스플레이될 임의의 추천된 미디어 아이템 그래픽들을 포함하지 않기 때문이다). 도 15f에서, 디바이스(600)는 사용자 인터페이스(1530) 상에서 좌향 스와이프 제스처(1550f)를 검출한다.
도 15g에 예시된 바와 같이, 좌향 스와이프 제스처(1550f)를 검출하는 것에 응답하여, 디바이스(600)는 추천된 미디어 아이템 그래픽들을 좌측으로 슬라이딩하여, 새롭게 디스플레이된 추천된 미디어 아이템 그래픽(1532g) 및 추천된 미디어 아이템 그래픽(1532h)을 디스플레이한다. 여기서, 추천된 미디어 아이템 그래픽(1532g) 및 추천된 미디어 아이템 그래픽(1532h)은 각각 도 15f의 추천된 미디어 아이템 그래픽들(1532a 내지 1532f)에 의해 표현되지 않은 미디어 아이템을 나타낸다. 도 15g에서, 디바이스(600)는 사용자 인터페이스(1530) 상에서 상향 스와이프 제스처(1550g)를 검출한다.
도 15h에 예시된 바와 같이, 상향 스와이프 제스처(1550g)를 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1530)를 상향으로 스크롤하여, 알람 제어부(1534a) 및 알람 제어부(1534b)와 같은 비-미디어 관련 애플리케이션들에 대응하는 추가의 제어부들을 디스플레이한다. 일부 실시예들에서, 상향 또는 하향 스와이프 제스처가 사용자 인터페이스(1510) 상에서 검출될 때(예컨대, 도 15c에서), 디바이스(600)는 사용자 인터페이스를 스크롤하여, 비-미디어 관련 애플리케이션들에 대응하는 추가의 제어부들을 디스플레이한다. 일부 실시예들에서, 알람 제어부(1534a) 상의 제스처를 검출하는 것에 응답하여, 디바이스(600)는 알람 제어부(1534a)와 연관된 시간(예컨대, 5:00 AM)에 켜지도록 알람을 스케줄링할 것이다.
도 15c를 다시 참조하면, 디바이스(600)는 디바이스(600)가 잠금해제된 상태에 있었던 동안 사용자 인터페이스(1510)를 디스플레이하였고, 다른 디바이스 제어부들(예컨대, 디바이스(600)의 볼륨, 밝기, 블루투스 연결을 제어하기 위한 제어부들)을 갖는 음악 애플리케이션 제어부(예컨대, 1572)를 디스플레이하고 있지 않았다. 도 15i 및 도 15j에 도시된 바와 같이, 디바이스(600)는 디바이스(600)가 상이한 상태에 있을 때(그리고 제어 기준들이 충족되고 외부 디바이스가 현재 미디어를 재생하고 있는 것으로 결정될 때) 사용자 인터페이스(1510)에 대응하는 상이한 사용자 인터페이스들을 디스플레이한다. 도 15i는 디바이스(600)가 잠금된 상태에 있기 때문에 디바이스(600)가 사용자 인터페이스(1560)를 디스플레이하는 것을 예시한다. 사용자 인터페이스(1560)는 디바이스 식별자(예컨대, "거실") 및 하나 이상의 유사한 미디어 재생 제어부들과 같은, 사용자 인터페이스(1510)와 유사한 컴포넌트들을 포함한다. 그러나, 사용자 인터페이스(1560)는 어떠한 타이머 및/또는 알람 제어부들도 포함하지 않는다. 도 15j는, 디바이스(600)가 다른 디바이스 제어부들을 갖는 음악 애플리케이션 제어부(예컨대, 1572)를 디스플레이하고 있기 때문에 디바이스(600)가 사용자 인터페이스(1560)를 디스플레이하는 것을 예시한다. 사용자 인터페이스(1570)는 현재 미디어 식별자(예컨대, "트랙 1")와 같은, 사용자 인터페이스(1510)와 유사한 컴포넌트들을 포함한다. 그러나, 사용자 인터페이스(1560)는 어떠한 타이머 및/또는 알람 제어부들도 포함하지 않는다. 또한, 사용자 인터페이스(1572)는 재생 위치 제어부(1518) 및 볼륨 레벨 제어부(1526)와 같은, 사용자 인터페이스(1510) 상에 디스플레이되었던 모든 미디어 제어부들을 포함하지는 않는다.
도 15f를 다시 참조하면, 디바이스(600)는 디바이스(600)가 잠금해제된 상태에 있었던 동안 사용자 인터페이스(1530)를 디스플레이하였고, 복수의 다른 디바이스 제어부들(예컨대, 디바이스(600)의 볼륨, 밝기, 블루투스 연결 등을 제어하기 위한 제어부들)을 갖는 음악 애플리케이션 제어부(예컨대, 1592)를 디스플레이하고 있지 않았다. 도 15k 및 도 15l에 도시된 바와 같이, 디바이스(600)는 디바이스(600)가 상이한 상태에 있을 때(그리고 제어 기준들이 충족되고 외부 디바이스가 현재 미디어를 재생하고 있지 않은 것으로 결정될 때) 사용자 인터페이스(1530)에 대응하는 상이한 사용자 인터페이스들을 디스플레이한다. 도 15k는 디바이스(600)가 잠금된 상태에 있기 때문에 디바이스(600)가 사용자 인터페이스(1580)를 디스플레이하는 것을 예시한다. 사용자 인터페이스(1580)는 디바이스 식별자(예컨대, "식당")와 같은, 사용자 인터페이스(1530)와 유사한 컴포넌트들을 포함한다. 그러나, 사용자 인터페이스(1580)는 어떠한 타이머 및/또는 알람 제어부들도 포함하지 않고, 감소된 수의 추천된 미디어 아이템 그래픽들을 포함한다. 또한, 디스플레이되는 추천된 미디어 아이템 그래픽들은 어떠한 소스 표시자도 포함하지 않는다. 도 15l은, 디바이스(600)가 복수의 다른 디바이스 제어부들을 갖는 음악 애플리케이션 제어부(예컨대, 1582)를 디스플레이하고 있기 때문에 디바이스(600)가 사용자 인터페이스(1590)를 디스플레이하는 것을 예시한다. 사용자 인터페이스(1590)는 사용자 인터페이스(1530)와 유사한 컴포넌트들을 포함한다. 그러나, 사용자 인터페이스(1590)는 어떠한 타이머 및/또는 알람 제어부들 또는 추천된 미디어 아이템 그래픽들도 포함하지 않는다.
도 16은 일부 실시예들에 따른, 전자 디바이스를 사용하여 오디오 재생을 제어하기 위한 방법들을 예시하는 흐름도이다. 방법(1600)은 디스플레이 생성 컴포넌트(예컨대, 디스플레이 제어기, 터치 감응형 디스플레이 시스템) 및 하나 이상의 입력 디바이스들(예컨대, 터치 감응형 표면)과 통신하는 컴퓨터 시스템(예컨대, 100, 300, 500, 또는 600)(예컨대, 스마트폰, 스마트워치)에서 수행된다. 방법(1600)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 방법(1600)은 오디오 재생을 제어하기 위한 직관적인 방식을 제공한다. 본 방법은 오디오 재생을 제어하는 것에 대한 사용자의 인지적 부담을 감소시키며, 이에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 오디오 재생을 제어할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
컴퓨터 시스템은 외부 미디어 재생 디바이스(예컨대, 1216, 1248)(예를 들어, 스피커, 텔레비전, 디지털 미디어 재생기)의 현재 미디어(예컨대, 오디오 및/또는 시각적 미디어) 재생 상태(예컨대, 오디오 또는 시각적 미디어를 출력하는 상태)를 나타내는 데이터를 수신한다(예컨대, 1602). 일부 실시예들에서, 데이터는 (예컨대, 유선 또는 무선 연결을 통해) 외부 미디어 재생 디바이스로부터 직접 수신된다. 일부 실시예들에서, 데이터는 중간 서버를 통해 수신된다.
컴퓨터 시스템은, 데이터를 수신하는 것에 응답하여 그리고 외부 미디어 재생 디바이스 제어 기준들의 세트가 충족된다는 결정에 따라, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스(예컨대, 1510 또는 1530)를 디스플레이한다(1604). 일부 실시예들에서, 외부 디바이스 미디어 제어 기준들의 세트는 컴퓨터 시스템이 미디어 재생 디바이스에 연결될 때 충족되는 기준을 포함한다. 일부 실시예들에서, 결정은 컴퓨터 시스템과 연관된 (예컨대, 임의의) 앱 상의 (예컨대, 임의의) 사용자 입력들에 관계없이 발생한다(예를 들어, 결정은 자동으로 발생한다). 일부 실시예들에서, 사용자 인터페이스는, 개입하는 사용자 입력 없이, 외부 미디어 재생 디바이스(예컨대, 스피커, 텔레비전, 디지털 미디어 재생기)의 현재 미디어 재생 상태를 나타내는 데이터를 수신하는 것에 응답하여, 자동으로 디스플레이된다. 일부 실시예들에서, 데이터는 (예컨대, 유선 또는 무선 연결을 통해) 외부 미디어 재생 디바이스로부터 직접 수신된다. 일부 실시예들에서, 데이터는 중간 서버를 통해 수신된다. 일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는 컴퓨터 시스템의 이동에 기초한(예컨대, 가속도계 데이터에 기초한) 어떠한 기준도 포함하지 않는다. 일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는 컴퓨터 시스템의 물리적 배향에 기초한(예컨대, 가속도계 또는 자이로스코프 데이터에 기초한) 어떠한 기준도 포함하지 않는다.
외부 미디어 재생 디바이스에서 미디어 재생을 제어하기 위한 사용자 인터페이스는, 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작(예컨대, 1592에 의해 나타낸 바와 같음)을 수행하고 있음을 나타낸다는 결정에 따라, 하나 이상의 입력 디바이스들을 통해 선택될 때(예컨대, 1550c를 통해), (예컨대, 일부 실시예들에서, 커맨드를 (예컨대, 서버를 통해) 외부 미디어 재생 디바이스로 직접 또는 간접적으로 송신함으로써) 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작을 수정하게 하는(예컨대, 동작을 일시정지 또는 중지, 현재 재생중인 미디어로부터 상이한 미디어로의 전이, 빨리감기 동작, 되감기 동작, 볼륨 증가 또는 감소 동작) 제1 선택가능한 사용자 인터페이스 객체(예컨대, 도 15c의 1518, 1520, 1522, 1526)를 포함한다(1606).
외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스는, 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라(예컨대, 미디어 재생 디바이스는 오디오 또는 시각적 미디어를 출력하고 있지 않음(예컨대, 1594에 의해 나타낸 바와 같음))(1608), 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템(예컨대, 추천된 미디어 아이템, 현재 외부 미디어 재생 디바이스 상에서 재생되도록 구성되어 있지 않은 미디어 아이템)의 재생을 개시하게 하는 제2 선택가능한 사용자 인터페이스 객체를 포함한다(1610). 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스는, 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있지 않음을 나타낸다는 결정에 따라(예컨대, 미디어 재생 디바이스는 오디오 또는 시각적 미디어를 출력하고 있지 않음)(1608), 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 제2 미리결정된 미디어 아이템(예컨대, 추천된 미디어 아이템, 현재 외부 미디어 재생 디바이스 상에서 재생되도록 구성되어 있지 않은 미디어 아이템)의 재생을 개시하게 하는 제3 선택가능한 사용자 인터페이스 객체를 포함한다(1612). 일부 실시예들에서, 데이터가 외부 미디어 재생 디바이스가 현재 미디어 재생 동작을 수행하고 있음을 나타낸다는 결정에 따라, 컴퓨터 시스템은, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 미리결정된 미디어 아이템의 재생을 개시하게 하는 선택가능한 사용자 인터페이스 객체의 디스플레이를 보류한다. 일부 실시예들에서, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 디스플레이하는 동안, 컴퓨터 시스템은, (예컨대, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스와는 상이한) 상이한 외부 미디어 재생 디바이스에 대한 미디어를 제어하기 위한 다른 사용자 인터페이스를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 사용자 인터페이스는 외부 디바이스와 연관된 식별자를 포함한다. 외부 디바이스가 현재 미디어를 재생하고 있는지 여부에 기초하여 재생되고 있는 미디어를 수정하기 위한 선택가능한 객체를 제공하도록 선택하거나 또는 추천된(예컨대, 미리결정된) 아이템들을 보여주는 선택가능한 객체를 제공하도록 선택하는 것은, 외부 디바이스의 현재 상태에 관한 피드백을 사용자에게 제공하고, 외부 디바이스 상에서의 미디어 재생의 상태를 변화시키기 위해 개시될 수 있는 동작을 나타내는 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다. 제어 기준들이 충족될 때 (예컨대, 컴퓨터 시스템이 미디어를 재생하고 있는지 여부를 포함하는 규정된 조건들이 충족되는지 여부에 관계없이) 외부 디바이스로 하여금 비-미디어-관련 기능을 수행하게 하는 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것은, 다른 상황들 하에서 사용자 인터페이스를 혼란스럽게 하지 않고서 외부 디바이스에 대한 추가의 제어를 사용자에게 제공한다. UI를 혼란스럽게 하지 않고서 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2(또는 제1) 선택가능한 사용자 인터페이스 객체는, 디스플레이될 때, 컴퓨터 시스템이 제1 디스플레이 상태(예컨대, 잠금해제된 상태(예컨대, 컴퓨터 시스템의 기능성이 인증(예컨대, 패스워드 인증, 생체측정 인증 등)을 요구하지 않고서 액세스가능한 상태) 및 잠금된 상태(예컨대, 컴퓨터 시스템의 적어도 일부 기능성에 대한 액세스가 인증(예컨대, 패스워드 인증, 생체측정 인증 등)을 요구하는 상태) 중 하나)에서 동작하고 있다는 결정에 따라, 제1 시각적 외관(예컨대, 1510, 1530)으로 디스플레이된다(예를 들어, 잠금된 상태에서, 제1 선택가능한 객체(예컨대, 제어부들(예컨대, 동작을 일시정지 또는 중지, 현재 재생중인 미디어로부터 상이한 미디어로의 전이, 빨리감기 동작, 되감기 동작, 볼륨 증가 또는 감소 동작))는 제1 시각적 외관의 일부분 내에(예컨대, 윈도우된 영역 내에) 디스플레이된다(예컨대, 날짜 및/또는 시간, 잠금된 상태 등의 표시들을 포함한다)) (예를 들어, 잠금해제된 상태에서, 제어부들은 제1 시각적 외관의 전체에 디스플레이된다).
일부 실시예들에서, 제2(또는 제1) 선택가능한 사용자 인터페이스 객체는, 디스플레이될 때, 컴퓨터 시스템이, 제1 디스플레이 상태와는 상이한, 제2 디스플레이 상태(예컨대, 잠금해제된 상태(예컨대, 컴퓨터 시스템의 기능성이 인증(예컨대, 패스워드 인증, 생체측정 인증 등)을 요구하지 않고서 액세스가능한 상태) 및 잠금된 상태(예컨대, 컴퓨터 시스템의 기능성에 대한 액세스가 인증(예컨대, 패스워드 인증, 생체측정 인증 등)을 요구하는 상태) 중 하나)에서 동작하고 있다는 결정에 따라, 제1 시각적 외관과는 상이한 제2 시각적 외관(예컨대, 1560, 1570, 1580, 1590)으로 디스플레이된다(예를 들어, 잠금된 상태에서, 제1 선택가능한 객체(예컨대, 제어부들(예컨대, 동작을 일시정지 또는 중지, 현재 재생중인 미디어로부터 상이한 미디어로의 전이, 빨리감기 동작, 되감기 동작, 볼륨 증가 또는 감소 동작))가 제2 시각적 외관의 일부분 내에(예컨대, 윈도우된 영역 내에) 디스플레이된다(예컨대, 날짜 및/또는 시간, 잠금된 상태 등의 표시들을 포함한다)) (예를 들어, 잠금해제된 상태에서, 제어부들은 제2 시각적 외관의 전체에 디스플레이된다). 일부 실시예들에서, 컴퓨터 시스템이 제1 디스플레이 상태에서 동작하고 있다는 결정에 따라, 제2 선택가능한 사용자 인터페이스 객체는 제3 시각적 외관으로 디스플레이된다. 일부 실시예들에서, 컴퓨터 시스템이 제1 디스플레이 상태와 상이한 제2 디스플레이 상태에서 동작하고 있다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체는 제4 시각적 외관과 상이한 제3 시각적 외관으로 디스플레이된다. 규정된 조건들이 충족될 때 선택가능한 사용자 인터페이스 객체들을 상이하게 디스플레이하는 것은, 사용자가, 제공된 피드백을 통해, 전자 디바이스가 동작하고 있는 상태를 신속하게 인식할 수 있게 한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 디스플레이 생성 컴포넌트를 통해, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한(예컨대, 동작을 일시정지 또는 중지, 현재 재생중인 미디어로부터 상이한 미디어로 전이시키는 동작, 빨리감기 동작, 되감기 동작, 볼륨 증가 또는 감소 동작) 사용자 인터페이스(예컨대, 1510, 1530)를 디스플레이하는 동안, 컴퓨터 시스템은, 컴퓨터 시스템이 제1 위치(예컨대, 1502c)(예컨대, 영역, 건물(예컨대, 집) 내의 방)로부터 제2 위치(예컨대, 1502f)(예컨대, 영역, 건물(예컨대, 집) 내의 방)로 이동했다는 표시(예컨대, 내부적으로-생성된 표시, 외부적으로 생성된 표시)를 수신한다. 일부 실시예들에서, 표시는 (예컨대, 유선 또는 무선 연결을 통해) 외부 미디어 재생 디바이스로부터 컴퓨터 시스템의 컴포넌트로부터 직접 수신된다. 일부 실시예들에서, 데이터는 중간 서버를 통해 수신된다. 일부 실시예들에서, 컴퓨터 시스템이 제1 영역(예컨대, 1202d)으로부터 제2 영역(예컨대, 1202b)(예컨대, 건물(예컨대, 집) 내의 방)으로 이동했다는 표시를 수신하는 것에 응답하여, 컴퓨터 시스템은, 외부 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스(예컨대, 1510, 1530)를 수정한다(예를 들어, 컴퓨터 시스템의 동작들(예컨대, 동작을 일시정지 또는 중지, 현재 재생중인 미디어로부터 상이한 미디어로의 전이, 빨리감기 동작, 되감기 동작, 볼륨 증가 또는 감소 동작)을 제어하도록 수정된다) (예를 들어, (예컨대, 동작들을 제어하기 위한 디폴트 사용자 인터페이스 객체들을 갖는) 디폴트 사용자 인터페이스로 수정된다). 일부 실시예들에서, 사용자 인터페이스의 수정은 다른 외부 재생 디바이스를 제어하기 위해 사용자 인터페이스를 수정하는 것을 포함한다. 규정된 조건들이 충족될 때 외부 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스를 자동으로 수정하는 것은, 컴퓨터 시스템의 위치에 기초하여 변화하고 이용가능한 선택가능한 사용자 인터페이스 객체들이 어떻게 다양한 외부 디바이스들에 영향을 미칠 것인지를 사용자가 볼 수 있게 하는 사용자 인터페이스를 제공한다. 추가의 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 최적화된 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다. 일부 실시예들에서, 미디어 재생 동작을 수정하는 것은, 재생 동작의 속도를 변경하는 것(예컨대, 빨리감기)(예컨대, 1520, 1524), 미디어의 재생을 일시정지하는 것(예컨대, 1522), 미디어의 재생을 되감는 것(예컨대, 1520), 및 미디어의 재생의 볼륨을 수정하는 것(예컨대, 1526)으로 구성된 그룹으로부터 선택된 수정을 포함한다.
일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는, 컴퓨터 시스템과 외부 미디어 재생 디바이스 사이의 거리(예컨대, 1504a 내지 1504d, 1504f)가 임계 거리(예컨대, 미리결정된 임계 거리(예컨대, 1, 2, 5, 10, 20 피트)) 미만일 때 충족되는 기준을 포함한다. 외부 디바이스와 컴퓨터 시스템 사이의 거리에 기초하여 외부 디바이스를 제어하기 위한 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스를 디스플레이하는 것은, 근접성 표준들을 충족하는 사용자들만 선택가능한 사용자 인터페이스를 제시받도록 허용함으로써 컴퓨터 시스템의 보안을 향상시킨다. 개선된 보안을 제공하는 것은 사용자 인터페이스를 더 안전하게 만들고 인가되지 않은 입력들을 감소시키며, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 안전하고 효율적으로 사용할 수 있게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는 외부 미디어 재생 디바이스에서 미디어의 재생을 개시하라는 음성 커맨드(예컨대, 재생)가 컴퓨터 시스템에서 수신될 때 충족되는 기준을 포함한다. 일부 실시예들에서, 컴퓨터 시스템은 (예컨대, 하나 이상의 음성 인식 기법들을 통해) 특정 사용자에 의해 발행된 것으로서 음성 커맨드를 식별한다. 규정된 조건들이 충족될 때(예를 들어, 사용자의 음성이 검출되었을 때, 여기서 음성은 외부 디바이스가 기능을 수행하도록 하는 커맨드들에 대응함) 외부 디바이스를 제어하기 위한 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스를 디스플레이하는 것은, 소정 표준들을 충족하는 사용자들만이 선택가능한 사용자 인터페이스 객체들을 자동으로 제시받도록 허용함으로써 컴퓨터 시스템의 보안을 향상시킨다. 개선된 보안을 제공하는 것은 사용자 인터페이스를 더 안전하게 만들고 인가되지 않은 입력들을 감소시키며, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 안전하고 효율적으로 사용할 수 있게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는 외부 미디어 재생 디바이스가 제1 유형의 것(예컨대, 헤드폰)이라는 결정이 이루어질 때 충족되는 기준을 포함한다. 일부 실시예들에서, 제1 유형의 외부 미디어 재생 디바이스는 컴퓨터 시스템에 연결되기 전에 다른 디바이스와 연결되고/되거나 페어링되지 않는다. 외부 디바이스를 제어하기 위한 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스를 디스플레이하는 것은, 자동으로, 제1 유형의 디바이스가 연결될 때, 추가 입력에 대한 필요성 없이 최적화된 제어 옵션들을 사용자에게 제공한다. 추가의 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 최적화된 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는, 외부 미디어 재생 디바이스가 현재 미디어를 재생하고 있고 컴퓨터 시스템 및 외부 미디어 재생 디바이스가 현재 동일한 계정(예컨대, 미디어 제공자 계정, 모바일 디바이스의 계정, 미디어 저장소 계정 등)에 로그인될 때 충족되는 기준을 포함한다. 컴퓨터 시스템이 외부 디바이스와 동일한 계정에 로그인될 때 외부 디바이스를 제어하기 위한 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스를 디스플레이하는 것은, 소정 표준들을 충족하는 사용자들만이 선택가능한 사용자 인터페이스 객체들을 자동으로 제시받도록 허용함으로써 컴퓨터 시스템의 보안을 향상시킨다. 개선된 보안을 제공하는 것은 사용자 인터페이스를 더 안전하게 만들고 인가되지 않은 입력들을 감소시키며, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 안전하고 효율적으로 사용할 수 있게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 외부 미디어 재생 디바이스 제어 기준들의 세트는, 컴퓨터 시스템 및 외부 미디어 재생 디바이스가 동일 위치(예컨대, 영역; 동일한 방 내에서 미리정의된 경계 또는 주연부 등) 내에 있고 컴퓨터 시스템 및 외부 미디어 재생 디바이스가 현재 동일한 계정(예컨대, 미디어 제공자 계정, 모바일 디바이스의 계정, 미디어 저장소 계정 등)에 로그인되어 있다는 결정이 이루어질 때 충족되는 기준을 포함한다. 컴퓨터 시스템이 외부 디바이스가 위치되는 동일한 영역(예컨대, 방)에 있고 외부 디바이스와 동일한 계정에 로그인될 때 외부 디바이스를 제어하기 위한 선택가능한 사용자 인터페이스 객체들을 갖는 사용자 인터페이스를 디스플레이하는 것은, 근접성 표준들을 충족하는 사용자들만이 선택가능한 사용자 인터페이스 객체들을 자동으로 제시받도록 허용함으로써 컴퓨터 시스템의 보안을 향상시킨다. 개선된 보안을 제공하는 것은 사용자 인터페이스를 더 안전하게 만들고 인가되지 않은 입력들을 감소시키며, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 안전하고 효율적으로 사용할 수 있게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체는 제1 미리결정된 미디어 아이템에 대한 소스(예컨대, 소스 디바이스(예컨대, 개인용 디바이스, 제3자 애플리케이션, 미디어 제공자 등) 및/또는 소스 애플리케이션)의 표시(예컨대, 1532a1, 1532c1)를 포함한다. 일부 실시예들에서, 미리결정된 미디어 아이템은 복수의 소스들로부터의 미디어 아이템들을 포함하고, 소스를 나타내는 표시는 미디어 아이템들 중 적어도 하나의 미디어 아이템에 대한 각자의 소스를 나타낸다. 미리결정된 미디어 아이템에 대한 소스의 표시를 디스플레이하는 것은, 사용자가 추천된 미디어 아이템을 제공하고 있는 소스(예컨대, 애플리케이션 또는 디바이스)를 신속하게 인식할 수 있게 하는 피드백을 사용자에게 제공한다(예컨대, 이는 사용자가 추천된 미디어 아이템을 수정하는 방법을 이해하도록 돕는다). 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 미리결정된 미디어 아이템(예컨대, 1532a)은 복수의 미디어 아이템들을 포함하는 재생목록(예컨대, 미리결정된 재생목록)이다. 재생목록인 미리결정된 미디어 아이템을 디스플레이하는 것은, 과도한 입력들을 요구하지 않으면서, 사용자가 미리결정된 미디어 아이템과 연관된 다수의 미디어 아이템들을 신속하게 선택하거나 재생할 수 있게 한다. 제어 옵션들을 최적화하고 과도한 입력들을 감소시키는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 컴퓨터 시스템은 제스처(예컨대, 제1 방향(예컨대, 수평 또는 수직)으로의 제1 유형의 제스처(예컨대, 스와이프))(예컨대, 디스플레이 생성 컴포넌트의 제1 위치에 대응하는 위치에서 개시되는 제스처)를 수신한다. 일부 실시예들에서, 제스처(예컨대, 1550f, 1550g)를 수신하는 것에 응답하여 그리고 제스처(예컨대, 1550f)가 제1 방향(예컨대, 수평)이라는 결정에 따라, 컴퓨터 시스템은, 선택될 때, 외부 미디어 재생 디바이스로 하여금 제1 미리결정된 미디어 아이템 및 제2 미리결정된 미디어 아이템과 상이한 제3 미리결정된 미디어 아이템의 재생을 개시하게 하는, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1532g, 1532h)를 디스플레이한다(예컨대, 제3 추천된 미디어 아이템을 디스플레이한다). 일부 실시예들에서, 제스처(예컨대, 1550f, 1550g)를 수신하는 것에 응답하여 그리고 제스처(예컨대, 1550g)가 제1 방향과는 상이한 제2 방향에 있다는 결정에 따라, 컴퓨터 시스템은, 선택될 때, 외부 미디어 재생 디바이스로 하여금 비-미디어-관련 기능(예컨대, 외부 미디어 재생 디바이스로 하여금 미디어 재생을 개시하게 하는 것을 포함하지 않는 기능)을 수행하게 하는, 제4 선택가능한 사용자 인터페이스 객체(예컨대, 1534a, 1534b)를 디스플레이한다. 일부 실시예들에서, 비-미디어 관련 기능은 타이머 기능 또는 알람 기능이다. 일부 실시예들에서, 제1 방향은 제2 방향에 수직이다. 일부 실시예들에서, 제1 방향은 제2 방향과 반대가 아니다. 일부 실시예들에서, 제4 선택가능한 사용자 인터페이스 객체(예컨대, 타이머)를 디스플레이하는 것은 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 중지하는 것을 포함한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것은 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 중지하는 것을 포함한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 제2 제스처를 수신하는 것; 및 제스처를 수신하는 것에 응답하여 그리고 제2 제스처가 제1 방향이라는 결정에 따라, 추천된 콘텐츠의 디스플레이를 보류하고/하거나 디스플레이 또는 사용자 인터페이스를 유지하는 것(예컨대, 추가의 콘텐츠를 디스플레이하지 않거나, 또는 제스처를 수신하기 전에 이전에 디스플레이되었던 시각적 콘텐츠의 디스플레이를 유지함); 및 제2 제스처가 제2 방향이라는 결정에 따라, 제4 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것. 상이한 방향성 제스처들에 기초하여 상이한 유형들의 선택가능한 사용자 인터페이스 객체들을 디스플레이하는 것은 사용자 인터페이스를 혼란스럽게 하지 않으면서 더 많은 제어 옵션들을 사용자에게 제공한다. 추가 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 디바이스의 추가 제어를 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스는, 하나 이상의 입력 디바이스들을 통해 선택될 때, 외부 미디어 재생 디바이스로 하여금 비-미디어-관련 기능을 수행하게 하는 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1534a, 1534b)를 포함한다. 일부 실시예들에서, 비-미디어 관련 기능은 타이머 기능 또는 알람 기능이다. 일부 실시예들에서, 미디어 재생 동작은 제1 애플리케이션(예컨대, 미디어 재생 애플리케이션)에 의해 수행되고, 비-미디어-관련 기능은 외부 미디어 재생 디바이스의 제2 애플리케이션에 의해 수행된다.
일부 실시예들에서, 다른 컴퓨터 시스템(예컨대, 스마트폰, 스마트워치)이 외부 미디어 재생 디바이스에 연결되고 외부 미디어 재생 디바이스로 하여금 미디어 재생 동작 제어 동작을 수정하게 하도록 인에이블된다는 결정에 따라, 컴퓨터 시스템 및 다른 컴퓨터 시스템이 동일한 계정(예를 들어, 미디어 제공자 계정, 모바일 디바이스의 계정, 미디어 저장소 계정 등)에 로그인된다는 결정이 이루어질 때 다른 컴퓨터 시스템의 표시를 디스플레이한다.
일부 실시예들에서, 음성 입력이 (예컨대, 컴퓨터 시스템의 마이크로폰을 통해) 검출되고 음성 입력이 컴퓨터 시스템과 연관된 사용자에 대응하는 것으로 결정될 때, 음성 입력은 사용자에 의해 외부 미디어 디바이스를 제어하기 위해 제공되거나, 또한 제공되었다. 일부 실시예들에서, 컴퓨터 시스템과 연관된 사용자는 외부 미디어 디바이스를 제어하기 위한 음성 입력을 또한 제공한 동일한 사용자이고, 선택될 때, 다른 컴퓨터 시스템으로 하여금 외부 재생 디바이스의 미디어 재생 동작을 수정하게 하는 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 보류하도록 다른 컴퓨터 시스템에 명령어가 전송된다. 일부 실시예들에서, 다른 컴퓨터 시스템은 외부 재생 미디어 디바이스와 동일한 영역 내에(예컨대, 동일한 방, 미리정의된 경계 또는 주연부 등 내에) 있다.
일부 실시예들에서, 외부 미디어 재생 디바이스의 현재 미디어(예컨대, 오디오 및/또는 시각적 미디어) 재생 상태(예컨대, 오디오 또는 시각적 미디어를 출력하는 상태)를 나타내는 데이터는 현재 미디어의 현재 재생 시간의 표시를 포함하고, 미디어를 재생하는 것의 남은 시간을 제공하기 위한 사용자 인터페이스 객체는 현재 재생 시간의 표시에 기초하여 현재 재생 상태를 보여주도록 업데이트된다.
일부 실시예에서, 외부 미디어 재생 디바이스에서의 미디어 재생을 제어하기 위한 사용자 인터페이스는 외부 미디어 재생 디바이스와 연관된 식별자(예를 들어, 외부 미디어 재생 디바이스를 나타내는 이름, 라벨, 심볼(예컨대, "스피커") 및/또는 외부 미디어 디바이스의 위치(예컨대, "주방"))를 포함한다.
일부 실시예들에서, 미리결정된 미디어 아이템은 컴퓨터 시스템(예컨대, 스마트폰, 스마트워치) 상에서 재생되는 미디어 아이템(예컨대, 오디오 및/또는 시각적 미디어)에 대응하고, 미디어 아이템을 나타내는 표시(예컨대, 이미지)를 포함한다. 일부 실시예들에서, 미리결정된 미디어 아이템의 각각의 미디어 아이템에 대해, 소스(예컨대, 소스 디바이스(예컨대, 개인용 디바이스, 제3자 애플리케이션, 미디어 제공자 등) 및/또는 소스 애플리케이션)의 표시(예컨대, 이미지)를 디스플레이한다.
방법(1600)(예컨대, 도 16)과 관련하여 전술된 프로세스들의 상세사항들은 또한 전술된 방법들과 유사한 방식으로 적용가능함에 유의한다. 예를 들어, 방법(800)은, 선택적으로, 방법(1600)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(800)의 동작(806)은 방법(1600)의 동작(1608)에서 기술된 제1 미디어 정보 어포던스를 선택하기 위해 수행될 수 있고, 동작들(808, 810, 및/또는 812)은 선택에 응답하여 방법(1600)의 일부로서 수행될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 17a 내지 도 17p는 일부 실시예들에 따른, 디바이스들의 그룹 상에서 오디오 재생을 제어하기 위한 제어부들을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 일부 실시예들에서, 도 17a 내지 도 17p를 참조하여 이하에서 기술되는 사용자 인터페이스들은, 전자 디바이스(600)로 하여금 디바이스들의 새로운 그룹을 생성하고 디바이스들의 새로운 그룹 상에서의 미디어의 재생을 제어하기 위한 사용자 인터페이스 요소들을 제공할 수 있게 한다. 이들 도면들의 사용자 인터페이스들은 도 18 및 도 23에 도시된 프로세스들을 포함하여 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
도 17a는 사용자 인터페이스(1700)를 디스플레이하는 디바이스(600)를 예시한다. 사용자 인터페이스(1700)는 디바이스(600) 상에서 실행되는 음악 애플리케이션의 사용자 인터페이스이다. 사용자 인터페이스(1700)는 미디어 출력 제어 어포던스(1702) 및 그래픽 요소(1704a)를 포함한다. 그래픽 요소(1704a)는, 미디어 표현(1706)에 대응하는 미디어(예컨대, "아티스트 1"에 의한 "트랙 1")가 현재 디바이스(600)(예컨대, "전화") 상에서 그리고/또는 디바이스(600)에 물리적으로 연결되는 하나 이상의 스피커들을 통해 재생되고 있음을 나타낸다. 일부 실시예들에서, 사용자 인터페이스(1700)는 하나 이상의 컴포넌트들과 함께 또는 전술된 바와 같은(예컨대, 도 6f 및 도 6i) 하나 이상의 기법들을 사용하여 디스플레이된다. 예를 들어, 일부 실시예들에서, 디바이스(600)는, 그래픽 요소(614-2)와 관련하여 위에서 논의된 바와 같이, 하나 이상의 기법들을 사용하여 그래픽 요소(1704a)를 디스플레이한다. 도 17a에서, 디바이스(600)는 미디어 출력 제어 어포던스(1702) 상의 탭 제스처(1750a)를 검출한다(예를 들어, 또는 그의 선택에 대응하는 위치에서 제스처를 검출한다). 도 17b에 예시된 바와 같이, 탭 제스처(1750a)를 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1700)의 일부분 위에 미디어 출력 제어 오버레이(1710)를 디스플레이한다. 일부 실시예들에서, 탭 제스처(1750a)를 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1700)를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 탭 제스처(1750a)를 검출하는 것에 응답하여, 미디어 출력 제어 오버레이(1710)는 디바이스(600)의 디스플레이의 대부분을 차지한다.
도 17b에 예시된 바와 같이, 미디어 출력 제어 오버레이(1710)는 선택 표시자(1712a)(예컨대, 도 17b의 체크마크)와 함께 디스플레이되는 전화 출력 어포던스(1712)를 포함한다. 전화 출력 어포던스(1712)는, 미디어가 현재 디바이스(600)를 통해 재생되도록(그리고/또는 제어되도록) 구성되어 있음을 나타내기 위해 선택 표시자(1712a)와 함께 디스플레이된다. 도 17b에서, 미디어가 현재 디바이스(600)를 통해 재생되도록 구성되어 있다는 표시는 또한 그래픽 요소(1704a)에 의해 나타내어진다(예컨대, 도 17a와 관련하여 전술된 바와 같음). 일부 실시예들에서, 디바이스가 현재 미디어를 재생하도록 구성되어 있을 때, 디바이스는 현재 미디어를 출력하고 있다.
미디어 출력 제어 오버레이(1710)는 또한 선택적으로 헤드폰 출력 어포던스(1714), 주방 출력 어포던스(1716), 식당 출력 어포던스(1718), 및 거실 출력 어포던스(1720)와 같은 하나 이상의 외부 디바이스들 상의 미디어의 출력을 제어하기 위한 추가의 어포던스들을 포함한다. 도 17b에 도시된 바와 같이, 미디어의 출력을 제어하기 위한 이러한 추가의 출력 어포던스들은 어떠한 선택 표시자들과도 함께 디스플레이되지 않는데, 그 이유는 미디어가 현재 이들 추가의 어포던스들 각각에 대응하는 각자의 디바이스들을 통해 재생되도록 구성되어 있지 않기 때문이다. 여기서, 이들 추가의 어포던스들 각각에 대응하는 외부 디바이스들은 이전에 논의되었다. 예를 들어, 주방 출력 어포던스(1716)가 선택 표시자와 함께 디스플레이될 때, 미디어는 주방 스피커(1206)를 통해 재생되거나 제어되도록 구성되고; 식당 출력 어포던스(1718)가 선택 표시자와 함께 디스플레이될 때, 미디어는 식당 스피커(1216)를 통해 재생되거나 제어되도록 구성되며; 거실 출력 어포던스(1720)가 선택 표시자와 함께 디스플레이될 때, 미디어는 거실 텔레비전(1244)을 통해 재생되거나 제어되도록 구성된다. 일부 실시예들에서, 출력 어포던스는 다수의 외부 디바이스들에 대응할 수 있다. 예를 들어, 일부 실시예들에서, 거실 출력 어포던스(1720)가 선택 표시자와 함께 디스플레이될 때, 미디어는 거실 텔레비전(1244), 거실 스피커(1246), 및 거실 스피커(1248)를 통해 재생되거나 제어되도록 구성된다.
일부 실시예들에서, 침실(1202c) 내의 스피커(예컨대, 침실 스피커(1236)) 및/또는 일광욕실(1202e) 내의 스피커들(예컨대, 일광욕실 스피커(1256) 및 일광욕실 스피커(1258))을 통한 미디어의 출력을 제어하기 위한 어포던스와 같은, 미디어의 출력을 제어하기 위한 하나 이상의 다른 어포던스들이 미디어 출력 제어 오버레이(1710)에 포함된다. 일부 실시예들에서, 디바이스(600)는 미디어 출력 제어 어포던스(1702) 상의 다른 탭 제스처를 검출하는 것에 응답하여 사용자 인터페이스(1710)를 디스플레이하는 것을 중지한다(예컨대, 도 17a에 도시된 바와 같은 사용자 인터페이스(1700)를 디스플레이한다). 도 17b에서, 디바이스(600)는 주방 출력 어포던스(1716)의 일부분 상에서 탭 제스처(1750b)를 검출한다.
도 17c에서, 탭 제스처(1750b)를 검출하는 것에 응답하여, 디바이스(600)는 미디어(예컨대, 도 17a의 미디어 표현(1706)에 대응하는 미디어)의 재생을 개시하기 위해 주방 스피커(1206)에 명령어를 전송한다. 일부 실시예들에서, 미디어의 재생을 개시하도록 디바이스에 명령어를 전송하는 것은, 미디어가 디바이스를 통해 재생되거나 제어되도록 구성하는 것의 일부이다.
도 17c에 예시된 바와 같이, 디바이스(600)는 또한 탭 제스처(1750b)를 검출하는 것에 응답하여 선택 표시자(1716a)를 포함하도록 주방 출력 어포던스(1716)를 업데이트한다. 여기서, 선택 표시자(1716a)는, 주방 스피커(1206)가 현재 미디어(예컨대, 미디어는 도 17a의 미디어 표현(1706)에 대응함)를 재생하고/하거나 미디어를 제어하도록 구성되어 있음을 나타낸다. 또한, 주방 스피커(1206)가 현재 미디어를 재생하고/하거나 미디어를 제어하도록 구성되어 있기 때문에, 디바이스(600)는 그래픽 요소(1704a)(예컨대, 전화가 미디어를 재생하도록 구성되었음을 나타낸 그래픽)를, 미디어가 현재 주방(1202a)과 연관된 디바이스(예컨대, 주방 스피커(1206))를 통해 재생되거나 제어되도록 구성되어 있음을 나타내기 위한 그래픽 요소(1704b)(예컨대, "주방")로 대체한다. 또한, 도 17c에서, 디바이스(600)는, 디바이스(600)가 더 이상 디바이스(600)에 물리적으로 연결된 하나 이상의 스피커들을 통해 미디어를 출력하고 있지(또는 출력하도록 구성되지) 않기 때문에, 그래픽 요소(1704a)를 디스플레이하는 것을 중지한다. 도 17c에서, 디바이스(600)는, (예컨대, 주방 출력 어포던스(1716)의) 선택 표시자(1716a)가 디스플레이되는 동안, 식당 출력 어포던스(1718)의 일부분 상에서 탭 제스처(1750c)를 검출한다.
도 17d에서, 탭 제스처(1750c)를 검출하는 것에 응답하여, 디바이스(600)는 미디어(예컨대, 도 17a의 미디어 표현(1706)에 대응하는 미디어)의 재생을 개시하도록 식당 스피커(1216)에 명령어를 전송하여, 식당 스피커(1216)가 명령어를 수신한 후에 미디어를 재생하도록 구성되게 한다. 도 17c에 예시된 바와 같이, 디바이스(600)는 또한 탭 제스처(1750c)를 검출하는 것에 응답하여 선택 표시자(1718a)를 포함하도록 식당 출력 어포던스(1718)를 업데이트한다. 여기서, 선택 표시자(1718a)는 식당 스피커(1216)가 현재 미디어를 재생하고/하거나 미디어를 제어하도록 구성되어 있음을 나타낸다. 선택 표시자(1718a)를 포함하는 식당 출력 어포던스(1718)에 더하여, 주방 출력 어포던스(1716)는 선택 표시자(1716a)를 계속해서 포함한다. 따라서, 탭 제스처(1750d)를 검출하는 것에 응답하여, 디바이스(600)는 주방 스피커 및 식당 스피커로부터 일시적 그룹을 생성하고, 그래픽 요소(1704b)(예컨대, "주방")를 그래픽 요소(1704c)(예컨대, "주방 및 식당")로 대체한다. 그래픽 요소(1704c)는 미디어가 현재 주방(1202a)과 연관된 하나 이상의 디바이스들 및 거실(1202)과 연관된 하나 이상의 디바이스들에 의해 재생되거나 제어되도록 구성되어, 디바이스들의 일시적 그룹화를 생성함을 나타낸다.
다시 도 17b 및 도 17c를 참조하면, (예컨대, 탭 제스처(1750b)를 검출하는 것에 응답하여) 디바이스(600)가 미디어를 재생하도록 구성되는 것을 중지한 동안에, 주방 스피커(1206)는 미디어를 재생하도록 구성되었다. 그러나, 도 17c 및 도 17d에서, 주방 스피커(1206) 및 거실 스피커(1216) 둘 모두는 (예컨대, 탭 제스처(1750c)를 검출하는 것에 응답하여) 미디어를 재생하도록 구성된다. 따라서, 이 예에서, 디바이스(600)는 (예컨대, 미디어 출력 제어 오버레이(1710) 상의 하나 이상의 입력들을 통해) 미디어가 다수의 디바이스들 상에서 동시에 재생될(또는 그에 의해 제어될) 수 있게 하여, 집(1202)의 방에 할당된 디바이스들의 제1 그룹 및 집(1202)의 상이한 방에 할당된 디바이스들의 제2 그룹과 같은 디바이스들의 일시적 그룹화들을 생성한다. 일시적 그룹들은, 미디어를 수신하도록 선택될 때, 사용자 또는 디바이스가 디바이스들 각각에 개별적으로 미디어를 전송할 것을 선택해야 할 필요 없이 동시에 동일한 미디어를 재생할 수 있는, 디바이스들의 사용자-생성 그룹들이다. 일부 실시예들에서, 도 17d에서 전화 출력 어포던스(1712) 상의 탭 제스처를 검출하는 것에 응답하여, 디바이스(600)는 선택 표시자들(1716a, 1718a)을 디스플레이하는 것을 중지하고, 선택 표시자(1712a)(예컨대, 도 17b에 도시된 바와 같음)를 디스플레이하고, 주방 및 식당 스피커들이 미디어를 재생하도록 구성되는 것을 중지하는 동안에 미디어를 출력한다. 도 17d에서, 디바이스(600)는 선택 표시자들(1716a, 1718a)이 동시에 디스플레이된 후 미리결정된 기간(예컨대, 5초, 10초, 30초) 내에 주방 출력 어포던스(1716)의 일부분 상에서 탭 제스처(1750d)를 검출한다.
도 17e에서, 탭 제스처(1750d)를 검출하는 것에 응답하여, 디바이스(600)는 미디어의 재생을 중지하도록 주방 스피커(1206)에 명령어를 전송하여, 주방 스피커(1206)가 명령어를 수신한 후에 미디어를 재생하도록 구성되지 않게 한다. 도 17e에 예시된 바와 같이, 탭 제스처(1750d)를 검출하는 것에 응답하여, 디바이스(600)는 선택 표시자(1716a)를 디스플레이하는 것을 중지한다. 탭 제스처(1750d)를 검출하는 것에 응답하여, 디바이스(600)는 또한, 식당 스피커(1216)가 미디어를 재생하도록 구성되고 주방 스피커(1206)는 더 이상 미디어를 재생하지 않도록 구성됨을 나타내기 위해, 그래픽 요소(1704c)(예컨대, "주방 및 식당")를 그래픽 요소(1704d)(예컨대, "식당")로 대체한다.
도 17f 내지 도 17h는, 2개의(또는 그 이상의) 선택 표시자들이 동시에 디스플레이된 후(그리고/또는 디바이스들의 2개의 일시적 그룹화들(또는 그 이상)이 미디어를 재생하도록 동시에 구성된 후) 미리결정된 기간 내에 탭 제스처가 검출되지 않는 시나리오를 예시한다. 도 17e에서, 디바이스(600)는 주방 출력 어포던스(1716)의 일부분 상에서 탭 제스처(1750e)를 검출한다.
도 17f에서, 탭 제스처(1750e)를 검출하는 것에 응답하여, 디바이스(600)는 (예컨대, 도 17d와 관련하여) 전술된 것들과 유사한 하나 이상의 기법들을 수행한다. 따라서, 도 17f에 예시된 바와 같이, 주방 출력 어포던스(1716)는 선택 표시자(1716a)와 함께 디스플레이되고, 식당 출력 어포던스(1718)는 선택 표시자(1718a)와 함께 디스플레이된다. 또한, 도 17f에서, 주방 스피커(1206) 및 식당 스피커(1216)는 미디어를 재생하도록 구성되며, 이는 그래픽 요소(1704c)에 의해 나타내어진다.
도 17g에서, 디바이스(600)는 선택 표시자들이 동시에 디스플레이된 후 미리결정된 기간(예컨대, 5초, 10초, 30초) 내에 (예컨대, 도 17f의 어포던스들(1712, 1714, 1716, 1718, 1720)의 어떠한 부분 상에서도) 탭 제스처를 검출하지 않는다. 도 17g에 예시된 바와 같이, 디바이스(600)는, 주방 출력 어포던스(1716) 및 식당 출력 어포던스(1718)가 합체하고/하거나 병합하여 단일 출력 어포던스를 형성하여 주방 및 식당 내의 디바이스들 사이에 일시적 그룹화를 생성하는 애니메이션을 디스플레이한다. 디바이스(600)가 미리결정된 기간이 경과하기 전에 탭 제스처를 검출하지 않았기 때문에, 그룹화는 지속된다. 애니메이션을 디스플레이할 때, 디바이스(600)는 주방 출력 어포던스(1716)와 식당 출력 어포던스(1718) 사이의 경계를 디스플레이하는 것을 중지하고, 주방 출력 어포던스(1716) 및 식당 출력 어포던스(1718)를 함께 수렴시킨다(또는 이동시킨다). 또한, 디바이스(600)는 또한 그래픽 아이콘들(예컨대, 도 17g의 스피커 아이콘들)을 함께 병합한다.
도 17h에 예시된 바와 같이, 디바이스(600)는 선택 표시자(1722a)를 포함하는 주방-및-식당-출력 어포던스(1722)를 디스플레이한다. 주방-및-식당-출력 어포던스(1722)는 주방 출력 어포던스(1716) 및 식당 출력 어포던스(1718)가 도 17g에 관련하여 전술된 애니메이션을 통해 합체되어, 주방 및 식당으로부터의 디바이스들의 일시적 그룹을 생성한 결과이다. 도 17h에 예시된 바와 같이, 주방-및-식당-출력(1722)은 주방 출력 어포던스(1716)와 연관된 식별자(도 17f의 "주방") 및 식당 출력 어포던스(1718)와 연관된 식별자(도 17f의 "식당")의 조합인 식별자("주방 및 식당")를 포함한다. 또한, 주방-및-식당-출력 어포던스(1722)는 또한, 주방-및-식당-출력 어포던스(1722)의 일부분의 선택에 응답하여 미디어의 재생을 위해 구성 또는 구성해제될 수 있는 스피커들의 수("2개의 스피커")를 포함한다. 일부 실시예들에서, 스피커들의 수는 스피커 디바이스들의 수(예컨대, 상이한 방에 할당되는 다수의 스피커들)를 식별한다. 일부 실시예들에서, 스피커들의 수는 합체된 스피커 그룹 내의 스피커들의 총 개수를 식별한다. 일부 실시예들에서, 디바이스(600)는 도 17g에서의 합체되는 애니메이션을 디스플레이하지 않고, 다른 방식으로, 예컨대 애니메이션 없이, 주방 출력 어포던스(1716) 및 주방 출력 어포던스(1718)를 대체하는 주방-및-식당-출력 어포던스(1722)를 디스플레이한다. 일부 실시예들에서, 디바이스(600)는 탭 제스처(1750e)를 검출한 직후에 선택 표시자(1722a)를 포함하는 주방-및-식당-출력 어포던스(1722)를 디스플레이한다. 일부 실시예들에서, 디바이스(600)는, 탭 제스처(1750e)를 검출한 직후에 그리고 미디어 출력 제어 오버레이(1710)를 종료하고 재디스플레이한 직후에, 선택 표시자(1722a)를 포함하는 주방-및-식당-출력 어포던스(1722)를 디스플레이한다. 다시 말하면, 미디어 출력 제어 오버레이(1710)는, 적어도 2개의 출력 어포던스들이 새로운 출력 어포던스로 합체되기 위해 탭 제스처(1750e)를 검출한 후에 디스플레이되어야 하는 것은 아니다. 일부 실시예들에서, 디바이스(600)는 적어도 2개의 출력 어포던스들을 함께 합체하기 전 또는 후에 (예컨대, 하나 이상의 제스처들을 통해) 확인을 수신한다. 일부 실시예에서, 부정적인 확인(예컨대, 합체하지 않기 위함)을 수신하는 것에 응답하여, 디바이스(600)는 적어도 2개의 출력 어포던스들을 별개인 것으로서 계속해서 디스플레이(및/또는 재디스플레이)할 것이다. 일부 실시예에서, 긍정적인 확인(예컨대, 합체하기 위함)을 수신하는 것에 응답하여, 합체된 그룹은 디스플레이된 상태를 유지하고/하거나 디스플레이된다.
도 17h에 예시된 바와 같이, 주방-및-식당-출력 어포던스(1722)는 또한 확장 어포던스(1722b)를 포함한다. 도 17h에서, 확장 어포던스(1722b)는 선택 표시자(1722a)가 디스플레이되는 부분(예컨대, 우측 부분)과는 상이한 주방-및-식당-출력 어포던스(1722)의 부분(예컨대, 좌측 부분) 상에 디스플레이된다. 또한, 확장 어포던스는 합체된 출력 어포던스(예컨대, 출력 어포던스(1722)) 상에만 디스플레이되고, 합체되지 않은 출력 어포던스(예컨대, 출력 어포던스(1720)) 상에는 디스플레이되지 않는다.
도 17h에 예시된 바와 같이, 주방 스피커(1206) 및 식당 스피커(1216)는 미디어를 재생하도록 구성된 상태를 유지하며, 이는 그래픽 요소(1704c)(예컨대, "주방 및 식당")에 의해 나타내어진다. 일부 실시예들에서, 디바이스(600)는 선택 표시자(1722a)(예컨대, 주방-및-식당-출력 어포던스(1722)의 우측 부분) 상에서 탭 제스처(1750h1)를 검출한다. 일부 실시예들에서, 탭 제스처(1750h1)를 검출하는 것에 응답하여, 디바이스(600)는, (1) 선택 표시자(1722) 및 그래픽 요소(1704c)를 디스플레이하는 것을 중지하고, (2) 미디어(예컨대, 도 17a의 미디어 표현(1706)에 대응하는 미디어)의 재생을 중지하도록 주방 스피커(1206) 및 식당 스피커(1216)에 명령어를 전송하여, 주방 스피커(1206) 및 식당 스피커(1216)가 명령어를 수신한 후에 미디어를 재생하지 않도록 구성되게 한다. 일부 실시예들에서, (1) 선택 표시자(1722a) 및 그래픽 요소(1704c)를 디스플레이하는 것을 중지한 후에 그리고/또는 (2) 주방 스피커(1206) 및 식당 스피커(1216)에 명령어를 전송한 후에, 디바이스(600)는 주방-및-식당-출력 어포던스(1722)를 계속해서 디스플레이하고 주방 및 거실에 대한 개별 출력 어포던스들을 재디스플레이하지 않는다. 일부 실시예들에서, 디바이스(600)는 (예컨대, 선택 표시자(1722a) 상에서의) 제스처가 미리결정된 기간 동안 검출되는지 여부에 관계없이 주방-및-식당-출력 어포던스(1722)를 계속해서 디스플레이한다. 다시 말하면, 주방 스피커(1206) 및 식당 스피커(1216)가 더 이상 미디어를 재생하도록 구성되지 않더라도 주방-및-식당-출력 어포던스(1722)는 계속해서 디스플레이된다. 일부 실시예들에서, 디바이스(600)는, 선택 표시자(1722a)가 디스플레이되지 않는 동안 탭 제스처를 수신하는 것에 응답하여 미디어를 재생하도록 주방 스피커(1206) 및 식당 스피커(1216)에 명령어를 전송한다. 도 17h에서, 디바이스(600)는, 선택 표시자(1722a)가 디스플레이되는 동안, 거실 출력 어포던스(1720)의 일부분 상에서 탭 제스처(1750h2)를 검출한다.
도 17i에 예시된 바와 같이, 탭 제스처(1750h2)를 검출하는 것에 응답하여, 디바이스(600)는 주방-및-식당-출력 어포던스(1722) 및 거실 출력 어포던스(1720)를 합체하여 주방-식당-거실 출력 어포던스(1724)를 디스플레이하는데, 그 이유는, (예컨대, 도 17g 및 도 17h에 관련하여 전술된 바와 유사한 기법들을 사용하여) (예컨대, 선택 표시자 상의) 후속 제스처가 미리결정된 기간 내에 검출되지 않았기 때문이다. 도 17i에 예시된 바와 같이, 주방-식당-거실 출력 어포던스(1724)는 주방 출력 어포던스(1716)의 식별자("주방"), 식당 출력 어포던스(1718)(예컨대, "2" 중 1), 및 거실 출력 어포던스(1720)(예컨대, "2" 중 1)의 조합인 식별자("주방 + 2")를 포함한다. 또한, 주방-식당-거실 출력 어포던스(1724)는, 어포던스가 선택될 때 미디어를 재생하도록 구성되는 디바이스들의 수의 표시(예컨대, "3개의 스피커")를 포함한다.
도 17h에 도시된 바와 같이, 탭 제스처(1750h2)를 검출하는 것에 응답하여, 디바이스(600)는 또한 텔레비전(1244)에 명령어를 전송하여, 텔레비전(1244)이 미디어를 재생하도록 구성되게 한다. 따라서, 명령어를 텔레비전(1244)에 전송한 후, 주방(1202a)에 할당된 디바이스, 식당(1202b)에 할당된 디바이스, 및 거실(1202d)에 할당된 디바이스는 미디어를 재생하도록 구성된다. 이러한 지정은 도 17i에서 디스플레이되는 그래픽 요소(1704e)(예컨대, "주방 + 2")에 의해 반영된다.
일부 실시예들에서, 디바이스(600)는 전술된 바와 같은(예컨대, 도 17g 및 도 17h에서) 하나 이상의 기법들을 사용하여 주방-식당-거실 출력 어포던스(1724)를 디스플레이한다. 일부 실시예들에서, 디바이스(600)는 선택 표시자(1724b)(예컨대, 주방-및-식당-출력 어포던스(1724)의 우측 부분) 상에서 탭 제스처(1750i1)를 검출한다. 일부 실시예들에서, 탭 제스처(1750i1)를 검출하는 것에 응답하여, 디바이스(600)는, (1) 선택 표시자(1724b) 및 그래픽 요소(1704e)를 디스플레이하는 것을 중지하고, (2) 미디어(예컨대, 도 17a의 미디어 표현(1706)에 대응하는 미디어)의 재생을 중지하도록 주방 스피커(1206), 식당 스피커(1216), 텔레비전(1244)에 명령어를 전송하여, 주방 스피커(1206), 식당 스피커(1216), 텔레비전(1244)이 명령어를 수신한 후에 미디어를 재생하지 않도록 구성되게 한다. 일부 실시예들에서, 디바이스(600)는 탭 제스처(1750i1) 또는 탭 제스처(1750il)에 후속하는 제스처를 검출하는 것에 응답하여, (예컨대, 디바이스(600)가 탭 제스처(1750h1) 또는 탭 제스처(1750h1)에 후속하는 제스처를 검출하는 것에 관련하여) 전술된 기법들과 유사한 기법들을 사용한다.
도 17i에 예시된 바와 같이, 주방-식당-거실 출력 어포던스(1724)는 또한 (예컨대, 확장 어포던스(1722b)와 관련하여) 전술된 것들과 유사한 기법들을 사용하여 디스플레이되는 확장 어포던스(1724b)를 포함한다. 도 17i에서, 디바이스(600)는 확장 어포던스(1724b) 상에서 탭 제스처(1724i2)를 검출한다.
도 17j에 예시된 바와 같이, 탭 제스처(1724i2)를 검출하는 것에 응답하여, 디바이스(600)는 주방-식당-거실 출력 어포던스(1724)를 만들기 위해 합체되었던 개개의 출력 어포던스들을 디스플레이함으로써 주방-식당-거실 출력 어포던스(1724)를 확장시킨다. 따라서, 도 17j에서, 주방 출력 어포던스(1716), 식당 출력 어포던스(1718), 및 거실 출력 어포던스(1720)는 주방-식당-거실 출력 어포던스(1724) 동안 디스플레이된다. 일부 실시예들에서, 도 17j에서, 주방 식당-거실 출력 어포던스(1724)를 구성하는 개개의 출력 어포던스들이 디스플레이될 때 주방-식당-거실 출력 어포던스(1724)는 디스플레이된 채로 유지된다.
특히, 도 17j에 예시된 바와 같이, 주방 출력 어포던스(1716), 식당 출력 어포던스(1718), 및 거실 출력 어포던스(1720)는 선택 표시자들(1716a, 1718a, 1720a)과 함께 각각 디스플레이된다. 따라서, 미디어는 현재 주방 스피커(1206), 식당 스피커(1216), 및 텔레비전(1244)을 통해 재생되거나 제어되도록 구성되며, 이는 또한 그래픽 요소(1704e)("주방 + 2")가 계속해서 디스플레이되는 것에 의해 표현된다. 도 17j에서, 디바이스(600)는 선택 표시자(1718a) 상에서 탭 제스처(1750j)를 검출한다.
도 17k에 예시된 바와 같이, 도 17j에서의 탭 제스처(1750j)를 검출하는 것에 응답하여, 디바이스(600)는 선택 표시(1718a)를 디스플레이하는 것을 중지하고, 다른 선택 표시자들은 탭 제스처를 통해 선택되지 않았기 때문에 이들의 디스플레이는 유지한다. 또한, 탭 제스처(1750j)를 검출하는 것에 응답하여, 디바이스(600)는 미디어의 재생을 중지하도록 식당 스피커(1216)에 명령어를 전송하여, 식당 스피커(1216)가 명령어를 수신한 후에 미디어를 재생하도록 구성되지 않게 하며, 이는 또한 그래픽 요소(1704f)(예컨대, "주방 및 거실")가 디스플레이되는 것에 의해 표현된다.
도 17l에서, 디바이스(600)는 탭 제스처(1750j)를 검출한 후 미리결정된 기간(예컨대, 5초, 10초, 30초) 내에 (예컨대, 도 17f의 어포던스들(1712, 1714, 1716, 1718, 1720)의 어떠한 부분 상에서도) 탭 제스처를 검출하지 않는다. 도 17l에 예시된 바와 같이, 디바이스(600)는, 전술된 것들과 하나 이상의 유사한 기법들을 사용하여, 주방 출력 어포던스(1716) 및 거실 출력 어포던스(1720)를 합체하여 주방-및-거실-출력 어포던스(1726)를 디스플레이한다. 특히, 도 17l에 예시된 바와 같이, 식당 어포던스(1718)는 식당-및-거실-출력 어포던스(1726)로부터 분리되어 디스플레이되는데, 그 이유는, 디바이스(600)가 탭 제스처(1750j)를 검출하는 것에 응답하여 합체된 그룹(예컨대, 주방-식당-거실 출력 어포던스(1724))으로부터 식당 어포던스(1718)(및/또는 식당 스피커(1216))를 효과적으로 제거했기 때문이다.
도 17m은 디바이스(600)가, 사용자 인터페이스(1700) 및 미디어 출력 제어 오버레이(1710) 대신에 디스플레이될 수 있는 대안적인 사용자 인터페이스인 사용자 인터페이스(1760)를 디스플레이하는 것을 예시한다. 디바이스(600)는 하나 이상의 컴포넌트들과 함께 그리고/또는 미디어 출력 제어 오버레이(1710)와 관련하여 전술된 바와 같은 하나 이상의 기법들을 사용하여 사용자 인터페이스(1760)를 디스플레이한다. 예를 들어, 일부 실시예들에서, 디바이스(600)는, 탭 제스처(1750h2)를 검출하는 것과 관련하여 전술된 것들과 유사한 기법들을 사용하여, 식당 출력 어포던스(1718)의 일부분 상에서 탭 제스처(1724m1)를 검출하는 것에 응답하여 주방-식당-거실 출력 어포던스(1726)를 디스플레이한다. 일부 실시예들에서, 사용자 인터페이스(1760)는 (예컨대, 도 13a에서) 사용자 인터페이스(1320) 상에 디스플레이되는 음악 제어부(1332c) 상의 탭 제스처를 검출하는 것에 응답하여 디스플레이된다.
사용자 인터페이스(1760)는 또한 사용자 인터페이스(1700) 및 미디어 출력 제어 오버레이(1710) 상에 디스플레이되지 않는 다른 컴포넌트들, 예컨대 어포던스(1762)를 포함한다. 도 17m에서, 디바이스(600)는 어포던스(1762) 상에서 탭 제스처(1750m2)를 검출한다.
도 17n에 예시된 바와 같이, 도 17m에서의 탭 제스처(1750m2)를 검출하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1760)를 디스플레이하는 것을 중지하고 사용자 인터페이스(1770)를 디스플레이한다. 사용자 인터페이스(1770)는 디바이스들의 그룹 상에서 재생되고 있는 미디어의 상태(예컨대, 현재 재생중 사용자 인터페이스)를 보여주는 다수의 그룹 어포던스들(예컨대, 1772, 1776, 1780)을 포함한다. 사용자 인터페이스(1770) 상의 그룹 어포던스들은 (예컨대, 17l에 도시된 바와 같이) 현재 구성된 출력 어포던스들과 일대일 관계를 갖는다. 따라서, 17n에서, 전화 그룹 어포던스(1772)는 전화 출력 어포던스(1712)와 관련되고, 주방-및-거실-그룹 어포던스(1776)는 주방-및-거실 출력 어포던스(1726)와 관련되고, 식당 그룹 어포던스(1780)는 식당 출력 어포던스(1718)와 관련된다. 일부 실시예들에서, 사용자 인터페이스(1770) 상의 어포던스들의 그룹은 미디어 출력 제어 오버레이(1710) 및/또는 사용자 인터페이스(1760) 상에 구성 및/또는 디스플레이되는 출력 어포던스들에 기초하여 동적으로 업데이트된다. 일부 실시예들에서, 디바이스(600)는 주방-및-거실 출력 어포던스(1726) 상에서 탭 제스처(1750n)를 검출한다. 일부 실시예들에서, 탭 제스처(1750n)를 검출하는 것에 응답하여, 디바이스(600)는, 선택될 때, 주방 스피커(1206) 및 텔레비전(1244)으로 하여금 (예컨대, 도 15c 및 도 15d와 관련하여 전술된 바와 같이) 미디어 재생 동작을 수정하게 하는 미디어 재생 제어부들(예컨대, 재생, 일시정지, 녹음, 셔플, 되감기, 빨리감기, 볼륨 레벨 어포던스/제어부 중 하나 이상)을 갖는 사용자 인터페이스를 디스플레이한다. 일부 실시예들에서, 미디어 재생 제어부들이 디스플레이되는 동안, 전화 그룹 어포던스(1772), 주방-및-거실-그룹 어포던스(1776), 및 식당 그룹 어포던스(1780) 중 하나 이상이 디스플레이된다.
도 17o는 사용자 인터페이스(1508)를 디스플레이하는 디바이스(600)를 예시한다. 도 17o에 예시된 바와 같이, 사용자 인터페이스(1780)는 주방(1202a) 및 거실(1202d)과 연관된 디바이스들이 연결됨(또는 미디어를 재생하는 데 이용가능함)을 나타내는 통지(1782)를 포함한다. 따라서, 도 17o는, 통지들이 주방-및-거실 출력 어포던스(1726)에 대응하는 그룹화와 같은 합체된 그룹화(예컨대, 새롭게 생성된 그룹)의 표시와 함께 전자 디바이스에서 수신될 수 있음을 입증한다.
도 17p는 태블릿 디바이스(1700)(예컨대, 태블릿 디바이스(1700)는 디바이스들(100, 300, 500, 600)의 하나 이상의 특징부들을 포함함)가 사용자 인터페이스(1790)를 디스플레이하는 것을 예시한다. 여기서, 태블릿 디바이스는, 도 17p에 도시된 바와 같이, 디바이스(600)와 상이하다. 도 17p에 예시된 바와 같이, 사용자 인터페이스(1790)는 사용자 인터페이스(1760)와 유사하고, 사용자 인터페이스(1760)와 관련하여 전술된 것들과 하나 이상의 유사한 기법들을 사용하여 디스플레이된다. 또한, 사용자 인터페이스(1790)는, 태블릿 디바이스가, 디바이스(600)가 재생하고 있는 미디어(예컨대, 도 17a의 "아티스트 1"에 의한 "트랙 1")로부터 미디어(예컨대, "아티스트 2"에 의한 "트랙 2")를 재생하고 있음을 나타낸다.
특히, 도 17p에서, 사용자 인터페이스(1790)는 (예컨대, 도 17j 내지 도 17l에 전술된 바와 같이) 디바이스(600)를 통해 생성된 주방-및-거실 출력 어포던스(1726)를 포함한다. 따라서, 도 17p는 새롭게 생성된 출력 어포던스가 다른 디바이스들에 이용가능할 수 있음을 입증한다. 일부 실시예들에서, 새롭게 생성된 출력 어포던스가 다른 디바이스들에 이용가능한지 여부는 하나 이상의 프라이버시 설정들에 기초한다. 일부 실시예들에서, 새롭게 생성된 출력 어포던스는 (예컨대, 하나 이상의 프라이버시 설정들의 상태에 기초하여) 누구에게나 이용가능하다. 일부 실시예들에서, 새롭게 생성된 출력 어포던스는 (예컨대, 하나 이상의 프라이버시 설정들의 상태에 기초하여) 집(1202)과 연관된 디바이스들과 동일한 네트워크(예컨대, 또는 네트워크들의 그룹 중 하나)에 연결되는 디바이스들에만 이용가능하다. 일부 실시예들에서, 새롭게 생성된 출력 어포던스는 (예컨대, 하나 이상의 프라이버시 설정들의 상태에 기초하여) 집(1202)과 연관되도록 (예컨대, 사용자 계정에 의해) 지정되는 디바이스들에만 이용가능하다. 일부 실시예들에서, 새롭게 생성된 출력 어포던스는 (예컨대, 하나 이상의 프라이버시 설정들의 상태에 기초하여) 도 12에서 집(1202)과 연관된 계정과 같은, 디바이스(600)가 또한 등록되어 있는 동일한 계정(또는 계정들의 그룹)에 등록되어 있는 디바이스들에만 이용가능하다. 일부 실시예들에서, 새롭게 생성된 출력 어포던스는 (예컨대, 하나 이상의 프라이버시 설정들의 상태에 기초하여) 디바이스(600)의 소정 근접성 내에 있는 디바이스들에만 이용가능하다.
도 18은 전자 디바이스를 사용하여 디바이스들의 그룹 상에서 오디오 재생을 제어하기 위한 제어부들을 관리하기 위한 방법들을 예시하는 흐름도이다. 방법(1800)은 디스플레이 생성 컴포넌트(예컨대, 602)(예컨대, 디스플레이 제어기, 터치 감응형 디스플레이 시스템) 및 하나 이상의 입력 디바이스들(예컨대, 터치 감응형 표면)과 통신하는 컴퓨터 시스템(예컨대, 100, 300, 500, 또는 600)(예컨대, 스마트폰, 스마트워치)에서 수행된다.
이하에서 기술되는 바와 같이, 방법(1800)은 디바이스들의 그룹 상의 오디오 재생을 제어하기 위한 제어부들을 관리하기 위한 직관적인 방식을 제공한다. 본 방법은 디바이스들의 그룹 상의 오디오 재생을 제어하기 위한 제어부들을 관리하는 것에 대한 사용자의 인지적 부담을 감소시키며, 이에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 오디오 재생을 제어할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
컴퓨터 시스템은, 디스플레이 생성 컴포넌트를 통해, 하나 이상의 미디어 재생 디바이스들의 제1 세트(예컨대, 컴퓨터 시스템, 외부 재생 디바이스(예컨대, 스피커, 텔레비전, 스마트 홈 어플라이언스))를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1716, 1718, 1720)(예컨대, 주방에 위치된 재생 디바이스를 선택하기 위한 어포던스와 같은 어포던스)를 포함하는 사용자 인터페이스(예컨대, 1710, 1760, 1790)를 디스플레이한다(1802). 일부 실시예들에서, 컴퓨터 시스템은 외부 재생 디바이스에 연결된다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는, 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시(예컨대, 심볼(예컨대, 체크마크), 색상, 제2 선택가능한 사용자 인터페이스 객체의 선택의 가압되거나 눌러진 상태)에 대응한다(예를 들어, 그와 함께 디스플레이되거나(예컨대, 그와 동시에 디스플레이되거나), 그에 인접하여(예컨대, 옆에) 디스플레이되거나, 또는 이를 포함한다). 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는 하나 이상의 미디어 재생 디바이스들의 제1 세트를 나타내는 표시(예컨대, 라벨(예컨대, 미디어 디바이스들을 제어하기 위한 복수의 선택가능한 사용자 인터페이스 객체들 각각에 대해 디스플레이되는 영숫자 문자들의 고유 시리즈))를 포함한다. 일부 실시예들에서, 컴퓨터 시스템은 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하고(예컨대, 검출하고), 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제1 세트로 하여금 미디어의 재생(예컨대, 출력, 출력하지 않음)을 제어하게 하는 명령어들을 하나 이상의 미디어 재생 디바이스들의 제1 세트에 전송하고/하거나, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 상에서 재생을 개시하도록 구성된다.
사용자 인터페이스는 하나 이상의 미디어 재생 디바이스들의 제1 세트와는 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체(예컨대, 1716, 1718, 1720, 1722)(예컨대, 식당에 위치된 재생 디바이스를 선택하기 위한 어포던스와 같은 어포던스)를 포함한다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체는, 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시(예컨대, 심볼(예컨대, 체크마크), 색상, 제2 선택가능한 사용자 인터페이스 객체의 선택의 가압되거나 눌러진 상태)에 대응하지 않는다(예를 들어, 그와 함께 디스플레이되거나(예컨대, 그와 동시에 디스플레이되거나), 그에 인접하여(예컨대, 옆에) 디스플레이되거나, 또는 이를 포함하지 않는다). 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체는 하나 이상의 미디어 재생 디바이스들의 제2 세트를 나타내는 표시(예컨대, 라벨(예컨대, 미디어 재생 디바이스들의 재생을 제어하기 위한 복수의 선택가능한 사용자 인터페이스 객체들 각각에 대해 디스플레이되는 영숫자 문자들의 고유 시리즈))를 포함한다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체는 제1 선택가능한 사용자 인터페이스 객체와 상이하다. 일부 실시예들에서, 컴퓨터 시스템은 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하고(예컨대, 검출하고), 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제2 세트로 하여금 미디어의 재생(예컨대, 재생, 재생하지 않음)을 제어하게 하는 명령어들을 하나 이상의 미디어 재생 디바이스들의 제2 세트에 전송하고/하거나, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 상에서 재생을 개시하도록 구성된다.
사용자 인터페이스는 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시(예컨대, 1716a, 1718a, 1720a, 1722a)(예컨대, 심볼(예컨대, 체크마크), 색상, 제1 선택가능한 사용자 인터페이스 객체의 선택의 가압되거나 눌러진 상태)를 포함한다. 일부 실시예들에서, 표시는 제1 선택가능한 사용자 인터페이스 객체와 함께 디스플레이되거나(예컨대, 동시에 디스플레이되거나), 그에 인접하여(예컨대, 옆에) 또는 그 위에 디스플레이되거나, 또는 그 내에 포함된다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스가 선택된다는 표시는, 하나 이상의 재생 디바이스들의 제1 세트가 미디어를 재생하고 있다는(또는 (예컨대, 컴퓨터 시스템을 통해) 미디어를 재생하도록 구성되어 있다는) 표시이다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는, 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시(예컨대, 심볼(예컨대, 체크마크), 색상, 제2 선택가능한 사용자 인터페이스 객체의 선택의 가압되거나 눌러진 상태)에 대응한다(예를 들어, 그와 함께 디스플레이되거나(예컨대, 그와 동시에 디스플레이되거나), 그에 인접하여(예컨대, 옆에) 디스플레이되거나, 또는 이를 포함한다). 일부 실시예들에서, 컴퓨터 시스템은 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하고(예컨대, 검출하고), 제1 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제1 세트로 하여금 미디어의 재생(예컨대, 출력, 출력하지 않음)을 제어하게 하는 명령어들을 하나 이상의 미디어 재생 디바이스들의 제1 세트에 전송하고/하거나, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 상에서 재생을 개시하도록 구성된다.
사용자 인터페이스가 그 표시를 포함하는 동안(그리고, 일부 실시예들에서, 사용자 인터페이스가 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시를 포함하지 않는 동안), 컴퓨터 시스템은 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력(예컨대, 1750e)을 수신한다(1804).
제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력(예컨대, 1750e)을 수신하는 것에 응답하여 그리고 기준들의 세트가 충족된다는 결정에 따라(예컨대, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체 둘 모두가 선택되었다는 것을 포함하는 기준(또는 제1 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시 및 제2 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시), 미리결정된 기간(예컨대, 5, 10, 30, 60초) 동안 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체 둘 모두가 선택되었다는 것을 포함하는 기준(또는 제1 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시 및 제2 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시))(1806), 컴퓨터 시스템은, 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 또는 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722)를 디스플레이한다(1808). 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제2 세트로 하여금 미디어의 재생(예컨대, 재생, 재생하지 않음)을 제어하게 하는 명령어들을 하나 이상의 미디어 재생 디바이스들의 제2 세트에 전송한다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제2 세트 상에서 재생을 개시하도록 구성된다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시(예컨대, 제2 선택가능한 사용자 인터페이스 객체에 대응하는(예컨대, 그에 인접하여(예컨대, 옆에) 디스플레이되는) 심볼(예컨대, 체크마크), 색상, 선택의 가압되거나 눌러진 상태)와 함께 디스플레이한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체는, 하나 이상의 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시(예컨대, 심볼(예컨대, 체크마크), 색상, 제2 선택가능한 사용자 인터페이스 객체의 선택의 가압되거나 눌러진 상태)에 대응한다(예를 들어, 그와 함께 디스플레이되거나(예컨대, 그와 동시에 디스플레이되거나), 그에 인접하여(예컨대, 옆에) 디스플레이되거나, 또는 이를 포함한다). 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체는 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 제2 하나 이상의 재생 디바이스들을 나타내는 표시(예컨대, 라벨(예컨대, 미디어 디바이스들의 재생을 제어하기 위한 복수의 선택가능한 사용자 인터페이스 객체들 각각에 대해 디스플레이되는 영숫자 문자들의 고유 시리즈))를 포함한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체는 제1 선택가능한 사용자 인터페이스 객체로부터의 라벨의 하나 이상의 부분들, 및 제2 선택가능한 사용자 인터페이스 객체 상의 라벨로부터의 하나 이상의 부분들을 포함한다.
제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력(예컨대, 1750e)을 수신하는 것에 응답하여 그리고 기준들의 세트가 충족된다는 결정에 따라(예컨대, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체 둘 모두가 선택되었다는 것을 포함하는 기준(또는 제1 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시 및 제2 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시), 미리결정된 기간(예컨대, 5, 10, 30, 60초) 동안 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체 둘 모두가 선택되었다는 것을 포함하는 기준(또는 제1 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시 및 제2 선택가능한 사용자 인터페이스 객체가 디스플레이된다는 표시))(1806), 컴퓨터 시스템은, 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1716) 및 제2 사용자 인터페이스 객체(예컨대, 1718)(및 제1 선택가능한 사용자 인터페이스 객체가 선택되었다는 표시)를 디스플레이하는 것을 중지한다(1810). 일부 실시예들에서, 하나 이상의 미디어 재생 디바이스들의 제1 세트가 미디어를 재생하고 있다는 표시(예컨대, 심볼(예컨대, 체크마크), 색상, 선택의 가압되거나 눌러진 상태)와 함께 제1 선택가능한 사용자 인터페이스 객체가 디스플레이될 때 하나 이상의 미디어 재생 디바이스들의 제1 세트가 미디어를 재생되고 있다는 결정이 이루어진다. 일부 실시예들에서, 컴퓨터 시스템이 하나 이상의 미디어 재생 디바이스들의 제1 세트로 미디어를 송신하고 있을 때 하나 이상의 미디어 재생 디바이스들의 제1 세트가 미디어를 재생한다는 결정이 이루어진다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여 즉시(예컨대, 각자의 기준들이 충전되는 것에 관계없이) 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하고, 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 기준들의 각자의 세트가 충족된 후 또는 그러한 결정에 따라서만, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하고, 제1 선택가능한 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 각자의 기준들은, 제2 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신한 후 그리고/또는 제1 선택가능한 사용자 인터페이스 객체가 하나 이상의 미디어 재생 디바이스들의 제1 세트가 미디어를 재생하고 있다는 표시를 포함하는 동안(그리고 제2 선택가능한 사용자 인터페이스 객체가 하나 이상의 미디어 재생 디바이스들의 제1 세트가 미디어를 재생하고 있다는 표시를 포함하는 동안) 충족되는 기준을 포함한다. 일부 실시예들에서, 기준들의 각자의 세트가 충족된다는 결정에 따라, 컴퓨터 시스템은 이전에 디스플레이된 선택가능한 사용자 인터페이스 객체의 디스플레이를 유지하며, 여기서 선택가능한 사용자 인터페이스 객체는 제1 선택가능한 사용자 인터페이스 객체, 제2 선택가능한 사용자 인터페이스 객체, 또는 제3 선택가능한 사용자 인터페이스 객체가 아니다. 일부 실시예들에서, 기준들의 각자의 세트가 충족되지 않는다는 결정에 따라, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트의 재생을 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체의 디스플레이를 보류한다. 일부 실시예들에서, 기준들의 각자의 세트가 충족되지 않는다는 결정에 따라, 컴퓨터 시스템은 제1 사용자 인터페이스 객체 및 제2 사용자 인터페이스 객체의 디스플레이를 유지한다. 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 통해 제어되었던 디바이스들의 그룹을 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 반면, 그러한 객체들을 디스플레이하는 것을 중지하는 것은, 단일 제어부를 이용해 디바이스들의 다수의 세트들을 제어하는 옵션을 사용자에게 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 컴퓨터 시스템은, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722a)의 선택(예컨대, 그와 연관되는 위치(예컨대, 제3 선택가능한 사용자 인터페이스 객체가 디스플레이되는 위치이든, 또는 제1 입력을 수신하는 것에 응답하여 디스플레이될 위치이든)에 대응하는 제3 선택가능한 사용자 인터페이스 객체의 일부분 상의 선택)에 대응하는 제1 사용자 입력(예컨대, 1750h1)(예컨대, 제3 선택가능한 사용자 인터페이스 객체의 일부분 상의 탭 입력)을 수신한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제1 사용자 입력을 수신하는 것에 응답하여 그리고 사용자 인터페이스가 (예컨대, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력이 수신되는 시점에) 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722)가 선택된다는 표시(예컨대, 단일 표시)를 포함하는 것에 따라(예컨대, 그러한 결정에 따라)(예컨대, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 제2 미디어 재생 디바이스들이 미디어를 재생하고 있음), 컴퓨터 시스템은, 사용자 인터페이스 내에, 제3 선택가능한 사용자 인터페이스 객체가 선택된다는 표시(예컨대, 1722a)(예컨대, 심볼(예컨대, 체크마크), 색상, 제3 선택가능한 사용자 인터페이스 객체의 선택의 가압되거나 눌러진 상태)를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여(그리고, 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체가 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시를 포함한다는 결정에 따라), 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트 상에서 재생을 개시하도록 구성되지 않는다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제1 사용자 입력을 수신하는 것에 응답하여 그리고 사용자 인터페이스가 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722)가 선택된다는 표시(예컨대, 단일 표시)를 포함하지 않는 것에 따라(예컨대, 그러한 결정에 따라), 컴퓨터 시스템은, 사용자 인터페이스 내에, 제3 선택가능한 사용자 인터페이스 객체가 선택된다는 표시(예컨대, 1722a)를 디스플레이한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 제1 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여(그리고, 제3 선택가능한 사용자 인터페이스 객체가 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트가 미디어를 재생하고 있다는 표시를 포함하지 않는다는 결정에 따라), 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트 상에서 재생을 개시하도록 구성된다. 디바이스들의 그룹을 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체가 제3 선택가능한 사용자 인터페이스 객체의 기존의 선택 상태에 기초하여 선택된다는 표시를 업데이트하는 것은, 객체의 업데이트된 선택 상태에 대한 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1716)는 하나 이상의 미디어 재생 디바이스들의 제1 세트와 연관된 식별자(예컨대, 이름 또는 심볼)를 포함한다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체(예컨대, 1718)는 하나 이상의 미디어 재생 디바이스의 제2 세트와 연관된 식별자(예컨대, 이름 또는 심볼)를 포함한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체의 식별자는 제2 선택가능한 사용자 인터페이스 객체와 연관된 식별자와 상이하다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722)를 디스플레이하는 것의 일부로서, 컴퓨터 시스템은 하나 이상의 미디어 재생 디바이스들의 제3 세트와 연관된 식별자를 디스플레이한다. 일부 실시예들에서, 식별자는 하나 이상의 미디어 재생 디바이스들의 제1 세트와 연관된 식별자를 나타내는 일부분(예컨대, 심볼, 이름, 텍스트, 또는 숫자의 일부분) 및 하나 이상의 미디어 재생 디바이스들의 제2 세트와 연관된 식별자를 나타내는 일부분(예컨대, 심볼, 이름, 텍스트, 또는 숫자의 일부분)을 포함한다. 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체들의 식별자에 기초하는 식별자를 갖는 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것은, 제3 선택가능한 객체와 연관되는 동작을 나타내는 시각적 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 컴퓨터 시스템은, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1724)의 선택(예컨대, 그와 연관되는 위치(예컨대, 제3 선택가능한 사용자 인터페이스 객체가 디스플레이되는 위치이든, 또는 제1 입력을 수신하는 것에 응답하여 디스플레이될 위치이든)에 대응하지 않는 제3 선택가능한 사용자 인터페이스 객체의 일부분 상의 선택)에 대응하는 제2 사용자 입력(예컨대, 1750i2)(예컨대, 제3 선택가능한 사용자 인터페이스 객체의 일부분 상의 탭 입력)을 수신한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제2 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1716(예컨대, 도 17k에서)) 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제2 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체(예컨대, 1718(예컨대, 도 17k에서)) 및 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제2 사용자 입력을 수신하는 것에 응답하여, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 중지하고 외부 디바이스들의 그룹의 표현의 디스플레이를 유지하는 것은 제어부들이다(예컨대, 하나 이상의 미디어 재생 디바이스들의 제3 세트와 연관된 표현, 여기서 표현은 하나 이상의 미디어 재생 디바이스들의 제1 세트와 연관된 식별자를 나타내는 부분 및 하나 이상의 미디어 재생 디바이스의 제2 세트와 연관된 식별자를 나타내는 부분을 포함함). 제3 선택가능한 사용자 인터페이스 객체가 선택될 때 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스를 디스플레이하는 것은, 제3 선택가능한 사용자 인터페이스 객체에 대응하는 선택가능한 사용자 인터페이스 객체들의 그룹에 대한 제어를 사용자에게 제공한다. 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체, 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하고, 그리고 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체, 및 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 동안, 컴퓨터 시스템은 제1 선택가능한 사용자 인터페이스 객체의 하나 이상의 선택들에 대응하는 하나 이상의 사용자 입력들을 수신한다. 일부 실시예들에서, (예컨대, 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 동안) 하나 이상의 사용자 입력들(예컨대, 1750k)을 수신하는 것에 응답하여, 그리고 제1 선택가능한 사용자 인터페이스 객체의 하나 이상의 선택들 중 마지막 선택(예컨대, 1750k)이 컴퓨터 시스템으로 하여금 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 것을 중지하게 했다는 결정에 따라, 컴퓨터 시스템은, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하지 않으면서 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1716) 및 제2 선택가능한 사용자 인터페이스 객체(예컨대, 1720)를 계속해서 디스플레이한다. 일부 실시예들에서, (예컨대, 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 동안) 하나 이상의 사용자 입력들(예컨대, 1750k)을 수신하는 것에 응답하여, 그리고 제1 선택가능한 사용자 인터페이스 객체의 하나 이상의 선택들 중 마지막 선택이 컴퓨터 시스템으로 하여금 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하게 했다는 결정에 따라, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하지 않으면서 제3 선택가능한 사용자 인터페이스 객체를 디스플레이한다. 하나 이상의 사용자 입력들에 응답하여, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하지 않으면서 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 계속해서 디스플레이하는 것은, 외부 디바이스들의 제1 세트가 더 이상 제3 사용자 인터페이스 객체와 연관되지 않는다는 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 사용자 인터페이스는 하나 이상의 미디어 재생 디바이스들의 제4 세트(예컨대, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트(및 하나 이상의 미디어 재생 디바이스들의 제3 세트)와는 상이한 하나 이상의 미디어 재생 디바이스들의 세트)를 제어하기 위한 제4 선택가능한 사용자 인터페이스 객체(예컨대, 1720)를 포함한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722)(및/또는 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제2 사용자 입력을 수신하는 것에 응답하여 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체 및 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 것, 및 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 것) 및 제4 선택가능한 사용자 인터페이스 객체(예컨대, 1720)를 디스플레이하는 동안, 컴퓨터 시스템은 제4 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력(예컨대, 1750h2)을 수신한다. 일부 실시예들에서, 제4 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 사용자 인터페이스 내에, 하나 이상의 미디어 재생 디바이스들의 제1 세트, 하나 또는 미디어 재생 디바이스들의 제2 세트, 및 하나 이상의 미디어 재생 디바이스들의 제4 세트를 제어하기 위한 제5 선택가능한 사용자 인터페이스 객체(예컨대, 1724)를 디스플레이한다. 일부 실시예들에서, 제4 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722) 및 제4 선택가능한 사용자 인터페이스 객체(예컨대, 1724)를 디스플레이하는 것을 중지한다. 일부 실시예들에서, 새로운 스피커가 추가되는 경우(예컨대, 제4 선택가능한 사용자 인터페이스 객체의 선택), 컴퓨터 시스템은, 제3 선택가능한 사용자 인터페이스 객체가 디스플레이되고 그것이 선택된다는 표시를 갖는지, 또는 제1 및 제2 사용자 인터페이스 객체들이 디스플레이되고 이들이 선택된다는 표시를 갖든지에 관계없이, 제3 선택가능한 사용자 인터페이스 객체의 스피커들을 갖는 오디오 소스로서 새로운 스피커를 추가한다. 제1 선택가능한 사용자 인터페이스 객체, 제2 선택가능한 사용자 인터페이스 객체, 및 제4 선택가능한 사용자 인터페이스 객체를 통해 제어되었던 디바이스들의 그룹을 제어하기 위한 제5 선택가능한 사용자 인터페이스 객체를 디스플레이하면서, 이들 객체를 더 이상 별도로 디스플레이하지 않는 것은, 사용자 인터페이스를 혼란스럽게 하지 않으면서 컴퓨터 시스템의 제어를 사용자에게 제공한다. 사용자에게 추가의 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 컴퓨터 시스템의 추가의 제어를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 컴퓨터 시스템과 상이한 제2 컴퓨터 시스템(예컨대, 서버, 개인용 디바이스)으로, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체의 그룹화를 나타내는 그룹화 정보(예컨대, 도 17p의 1726)를 송신한다. 일부 실시예들에서, 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체의 그룹화를 나타내는 그룹화 정보를 송신하는 것은, 제3 선택가능한 사용자 인터페이스 객체에 대응하는 정보를 송신하는 것을 포함한다. 일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체는 컴퓨터 시스템(및 제2 컴퓨터 시스템)과는 상이한 제3 컴퓨터 시스템을 통해 디스플레이되도록 구성된다. 일부 실시예들에서, 송신된 정보는 제3 컴퓨터 시스템에서의(상에서의, 통한) 제3 선택가능한 사용자 인터페이스 객체의 디스플레이를 야기한다. 일부 실시예들에서, 제3 컴퓨터 시스템은 제1 컴퓨터 시스템과 동일한 사용자 계정에 할당된다. 일부 실시예들에서, 그룹화 정보를 송신하는 것은, 제3 시스템으로 하여금 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체의 그룹화를 나타내는 정보를 수신하게 한다. 제3 선택가능한 사용자 인터페이스 객체가 컴퓨터 시스템과 상이한 제2 컴퓨터 시스템을 통해 디스플레이되도록 구성된다는 것을 나타내는 정보를 송신하는 것은, 추가 입력들을 통해 동작에 수동으로 영향을 미칠 필요 없이 다른 컴퓨터 시스템을 정보로 업데이트하는 능력을 사용자에게 제공한다. 추가의 사용자 입력을 요구하지 않고서 조건들의 세트가 충족되었을 때 최적화된 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 사용자 인터페이스 내에, 제3 선택가능한 사용자 인터페이스 객체(예컨대, 1722)를 디스플레이한 후, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제1 세트(및/또는 하나 이상의 미디어 재생 디바이스들의 제2 세트)가 컴퓨터 시스템에 연결된다는(예컨대, 연결이 발생하기 전에 사용자 입력 없이 자동으로 연결됨) 표시에 대응하는 데이터를 수신한다. 일부 실시예들에서, 데이터를 수신하는 것에 응답하여, 컴퓨터 시스템은, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트가 컴퓨터 시스템에 연결되어 있음을 나타내는 통지(예컨대, 1782)(예컨대, 자동 연결 경보)를 디스플레이한다. 일부 실시예들에서, 통지는 이전에 디스플레이되었던 다른 통지와 상이한 색상(예컨대, 청색)이다. 제3 선택가능한 사용자 인터페이스 객체의 선택에 의해 제어될 수 있는 디바이스들이 컴퓨터 시스템에 연결되었다는(예컨대, 자동으로 연결됨) 통지를 디스플레이하는 것은, 디바이스들의 그룹(예컨대, 디바이스들의 동적 그룹)이 컴퓨터 시스템에 연결되었음을 나타내는 시각적 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 사용자 인터페이스(예컨대, 1710)를 디스플레이하는 동안, 컴퓨터 시스템은, 사용자 인터페이스 상의 제1 위치에서(예컨대, 제2 사용자 인터페이스(예컨대, 미디어 재생 인터페이스)를 디스플레이하기 위한 선택가능한 사용자 인터페이스 객체 상에서) 사용자 입력을 수신한다. 일부 실시예들에서, 사용자 인터페이스 상의 제1 위치(예컨대, 1702의 위치)에서 사용자 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은, 디스플레이 생성 컴포넌트를 통해, 하나 이상의 입력 디바이스들을 통해 선택될 때, 미디어를 재생하고 있는 하나 이상의 외부 미디어 재생 디바이스들로 하여금 미디어 재생 동작(예컨대, 동작을 일시정지 또는 중지, 현재 재생중인 미디어로부터 상이한 미디어로의 전이, 빨리감기 동작, 되감기 동작, 볼륨 증가 또는 감소 동작, 반복 동작, 셔플 동작(예컨대, 도 17a의 사용자 인터페이스(1700) 상에서의))을 수정하게 하는(그리고, 일부 실시예들에서, 외부 미디어 재생 디바이스에 직접 또는 (예컨대, 서버를 통해) 간접적으로 커맨드를 송신함으로써) 선택가능한 사용자 인터페이스 객체들을 포함하는 제2 사용자 인터페이스(예컨대, 1700)(예컨대, 미디어 재생 인터페이스)를 디스플레이한다. 기존의 재생 동작들의 미디어 재생 동작들을 수정하기 위한 옵션들을 포함하는 제2 사용자 인터페이스를 디스플레이하는 것은, 사용자가 초기 사용자 인터페이스를 혼란스럽게 하지 않으면서 미디어 재생 디바이스들의 세트들을 제어하기 위한 사용자 인터페이스로부터, 재생 동작들을 수정하기 위한 사용자 인터페이스로 전이할 수 있게 한다. 추가 디스플레이된 제어부들로 UI를 혼란스럽게 하지 않고서 디바이스의 추가 제어를 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 기준들의 세트는, 제2 선택가능한 사용자 인터페이스 객체의 표시 및 제1 선택가능한 사용자 인터페이스 객체의 표시가 미리결정된 기간 동안(예컨대, 2, 3, 30초)(예컨대, 미리결정된 기간은 0이 아니며, 사람이 지각가능함) 선택될 때 만족되는 기준을 포함한다. 소정 기간 후에 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 통해 제어되었던 디바이스들의 그룹을 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것은, 객체가 제3 사용자 인터페이스 객체에 의해 대체되기 전에 제1 선택가능한 사용자 인터페이스 객체의 선택을 반전시키는 능력을 사용자에게 제공하여, 의도하지 않은 입력들의 발생을 감소시킨다. 선택을 반전시키는 옵션을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제3 선택가능한 사용자 인터페이스 객체의 일부로서 사용자 인터페이스를 디스플레이하는 동안(예컨대, 그리고 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 중지하는 동안), 컴퓨터 시스템은, 제3 사용자 인터페이스 객체를 디스플레이하기 이전에, (예컨대, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하기 위해 제1 선택가능한 사용자 인터페이스 객체의 디스플레이 및 제2 선택가능한 사용자 인터페이스 객체의 디스플레이를 (예컨대, 병합, 합체, 조합하는) 애니메이션) (예컨대, 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하기 전에) 제1 선택가능한 사용자 인터페이스 객체의 제1 부분(예컨대, 도 17g에 도시된 1716의 부분)(예컨대, 제1 선택가능한 사용자 인터페이스 객체의 제2 부분은 포함하지 않으면서) 및 제2 선택가능한 사용자 인터페이스 객체의 제1 부분(예컨대, 도 17g의 도시된 1718의 부분)(예컨대, 제2 선택가능한 사용자 인터페이스 객체의 제2 부분은 포함하지 않으면서)을 포함하는 단일 사용자 인터페이스 객체(예컨대, 도 17g의 1716 및 1718의 조합)를 디스플레이한다. 일부 실시예들에서, 애니메이션을 디스플레이하는 동안, 제1 선택가능한 사용자 인터페이스 객체의 일부분 및 제3 선택가능한 사용자 인터페이스 객체의 일부분은 아주 짧은 시간 동안 결합되는 것으로 보인다. 일부 실시예들에서, (예컨대, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 것에 응답하여) 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것은, 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트로 하여금 (예컨대, 미디어 재생 디바이스들의 적어도 2개의 세트들을 나타내는)(예컨대, 합체되는) 선택가능한 사용자 인터페이스 객체들의 디스플레이의 애니메이션을 디스플레이하게 하는 정보를 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 하나 이상의 미디어 재생 디바이스들의 제2 세트에 송신하는 것을 포함한다. 제1 선택가능한 사용자 인터페이스 객체 및 제2 선택가능한 사용자 인터페이스가 합체하여 제3 선택가능한 사용자 인터페이스 객체를 형성하는 애니메이션을 디스플레이하는 것은, 제3 선택가능한 사용자 인터페이스 객체에 대응하는 선택가능한 사용자 인터페이스 객체들의 그룹 또는 제어부들에 관한 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신한 후, 컴퓨터 시스템은 제3 선택가능한 사용자 인터페이스 객체를 확인하기 위한 선택가능한 사용자 인터페이스 객체를 디스플레이한다. 제1 선택가능한 사용자 인터페이스 객체의 상태 변화를 반영하기 위해 (사용자가 제1 및 선택가능한 사용자 인터페이스 객체들을 선택할 때) 제3 선택가능한 사용자 인터페이스 객체의 시각적 특성들을 업데이트하는 것, 및 제1 및 제2 선택가능한 사용자 인터페이스 객체들의 그룹화를 확인하기 위한 사용자 인터페이스를 디스플레이하는 것은, 사용자가 제1 및 제2 선택가능한 사용자 인터페이스 객체들을 의도하지 않게 그룹화하는 것을 피하도록 도움으로써 - 이는, 동작이 수행되기 전에 확인이 요구됨을 사용자가 인식할 수 있게 함 - 사용자에게 컴퓨터 시스템의 더 많은 제어를 제공한다. 확인 사용자 인터페이스 요소를 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
방법(1800)(예컨대, 도 18)과 관련하여 전술된 프로세스들의 상세사항들은, 또한, 이하에서 기술되는 방법들과 유사한 방식으로 적용가능함에 유의한다. 예를 들어, 방법(800)은, 선택적으로, 방법(1800)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(800)의 동작(806)은 방법(1800)의 동작(1808)에서 기술된 스피커들의 그룹에 대응하는 제1 미디어 정보 어포던스를 선택하기 위해 수행될 수 있고, 동작들(808, 810, 및/또는 812)은 선택에 응답하여 방법(1800)의 일부로서 수행될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 19a 내지 도 19i는 일부 실시예들에 따른, 미디어를 공유하기 위한 예시적인 사용자 인터페이스들을 예시한다. 이들 도면들의 사용자 인터페이스들은 도 20에 도시된 프로세스들을 포함하여, 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
도 19a는 예시적인 디스플레이 스크린(1902)(예컨대, "Jane의 TV"), 버드들(1906a)(예컨대, "Jane의 버드"), 및 리모트(remote)(1904)를 예시한다. 도 19a에서, 디스플레이 스크린(1902)은, 통신 링크(1908a)에 의해 도시된 바와 같이, 버드들(1906a)과 미디어를 공유하도록 구성되고 링크되는 멀티미디어 디바이스(예컨대, 디바이스 또는 다른 출력 디바이스에서의 출력을 위한 멀티미디어 콘텐츠를 저장 및/또는 생성하는 디바이스)이다. 리모트(1904)는 또한 디스플레이 스크린(1902)에 링크되어, 리모트(1904)를 통해 검출된 제스처들이 프로세싱을 위해 디스플레이 스크린(1902)으로 송신되도록 한다. 일부 실시예들에서, 제2 디바이스에 링크되는 디바이스(예컨대, 디스플레이 스크린, 헤드폰, 전화)는, 제2 디바이스와 (예컨대, 무선 또는 유선 매체를 통해) 동작가능하게 통신하거나, (예컨대, 블루투스, 근거리 통신, 네트워크 연결을 통해) 연결되는(예컨대, 페어링되는) 디바이스이다.
일부 실시예들에서, 디스플레이 스크린(1902)은, 멀티미디어 디바이스 자체라기보다는, 디스플레이 스크린(1902)에서의 출력을 위해 멀티미디어 콘텐츠를 제공하는 멀티미디어 디바이스에 직접 링크된다. 일부 실시예들에서, 디스플레이 스크린(1902) 또는 디스플레이 스크린(1902)에 링크된 멀티미디어 디바이스는 디바이스들(100, 300, 또는 500)의 하나 이상의 특징부들을 포함한다. 일부 실시예들에서, 멀티미디어 디바이스는 디스플레이 스크린(1902) 및 버드들(1906a)과 미디어를 공유하도록 구성된다. 일부 실시예들에서, 멀티미디어 디바이스는 또한 리모트(1904)에 링크되어, 디스플레이 스크린(1902)이 멀티미디어 디바이스에 링크되는 시나리오에서 리모트(1904)를 통해 검출된 제스처들이 프로세싱을 위해 멀티미디어 디바이스에 송신되도록 한다. 일부 실시예들에서, 멀티미디어 디바이스(예컨대, 디스플레이 스크린(1902)에 링크됨)는 디스플레이 스크린(1902)으로 하여금, 하나 이상의 제스처들(또는 리모트(1904)로부터 송신되는 하나 이상의 제스처들의 표시)을 수신하는 것에 응답하여 하나 이상의 사용자 인터페이스 요소들을 디스플레이하게 한다. 일부 실시예들에서, 멀티미디어 디바이스는 버드들(1906a)과 미디어를 공유하여, 미디어(예컨대, 오디오)가 버드들(1906a)에 의한 출력에 이용가능하도록 한다. 따라서, 하기의 설명은 종종, 단순화를 위해, 액션들을 수행하거나, 엔티티(예컨대, 계정과 연관됨)에 속하거나, 하나 이상의 디바이스들(예컨대, 헤드폰들, 전화들)에 링크되는 디스플레이 스크린(1902)을 지칭할 것이다. 그러나, 하기의 설명은 디스플레이 스크린(1902) 및 하나 이상의 디바이스들에 링크되는 하나 이상의 멀티미디어 디바이스들이 있는 시나리오들을 고려하며, 이를 배제하지 않는다. 이러한 시나리오들에서, 멀티미디어 디바이스(들)(그리고 디스플레이 스크린이 아님)는 엔티티에 속할 수 있고/있거나 하나 이상의 액션들(예를 들어, 디스플레이 스크린(1902) 상에 하나 이상의 사용자 인터페이스들의 디스플레이를 야기하는 것, 하나 이상의 제스처들을 수신하는 것, 미디어를 공유하는 것, 및/또는 디스플레이 스크린(1902)과 관련하여 본 명세서에 기술된 다른 로직을 수행하는 것)을 수행할 수 있다.
도 19a에서, 디스플레이 스크린(1902)은 Jane에 속한다(예컨대, "Jane의 TV"). 또한, 버드들(1906a)은 Jane에 속하는(예컨대, "Jane"인(예컨대, 또는 그 단어를 포함하는) 식별자 또는 이름을 포함하는 사용자 계정과 연관되는) 헤드폰들이다. 따라서, 일부 실시예들에서, 디바이스는, 디바이스가 엔티티를 나타내는 식별자 또는 이름(예컨대, "Jane")을 포함하는 사용자 계정과 연관될(예컨대, 그에 로그인될) 때, 그 엔티티(예컨대, 사람, 건물, 집)에 속한다.
도 19a에 예시된 바와 같이, 디스플레이 스크린(1902)은 사용자 인터페이스(1930)를 디스플레이한다. 사용자 인터페이스(1930)는 스피커 그룹(1922) 및 헤드폰 그룹(1924)을 포함한다. 스피커 그룹(1922)은 하나 이상의 스피커 제어부들을 포함하며, 여기서 각각의 스피커 제어부는 디스플레이 스크린(1902)으로부터 특정 스피커로 미디어를 공유하기 위한 제어부이다. 스피커 제어부들은 주방 스피커 제어부(1926)를 포함한다. 주방 스피커 제어부(1926)는, 주방 스피커(1206)(예컨대, 도 12와 관련하여 논의된 바와 같음)가 디스플레이 스크린(1902)에 링크되거나 이전에 링크되었기 때문에, 디스플레이된다. 헤드폰 그룹(1924)은 디스플레이 스크린(1902)으로부터, 디스플레이 스크린(1902)에 링크되거나 이전에 링크된 헤드폰으로 미디어를 공유하기 위한 하나 이상의 제어부들을 포함한다. 헤드폰 그룹(1924)은 공유 표시(1932a)(예컨대, 사용자 인터페이스(1930) 상의 "Jane의 버드" 옆에 있는 체크마크)와 함께 디스플레이되는 버드 제어부(1932)("Jane의 버드")를 포함한다. 공유 표시(1932a)는 버드들(1906a)이 디스플레이 스크린(1902)에 의해 공유되는 미디어를 수신하도록 구성되고 링크됨을 나타낸다. 특히, 주방 스피커 제어부(1926)는 공유 표시와 함께 디스플레이되지 않는데, 그 이유는 주방 스피커(1206)가 디스플레이 스크린(1902)에 의해 공유되는 미디어를 수신하도록 구성되어 있지 않기 때문이다. 버드 제어부(1932)에 더하여, 오디오 공유 제어부(1934)가 또한 헤드폰 그룹(1924)의 내부에 위치된다. 도 19a에서, 오디오 공유 제어부(1934)는 버드 제어부(1932) 아래에 디스플레이된다. 일부 실시예들에서, 오디오 공유 제어부(1934)는, 미리결정된 수(예컨대, 1) 미만의 헤드폰(예컨대, 버드)이 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성되고 링크될 때, 디스플레이되지 않는다. 일부 실시예들에서, 오디오 공유 제어부(1934)는, 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성되고 링크되는 헤드폰들의 수에 관계없이, 디스플레이된다.
도 19b에 예시된 바와 같이, 디스플레이 스크린(1902)은, 통신 링크(1908b)에 의해 도시된 바와 같이, 디바이스(1910)("Nick의 전화")에 링크된다. 디바이스(1910)는, 통신 링크(1912b)에 의해 도시된 바와 같이, 버드들(1906b)(예컨대, "Nick의 버드")에 링크된다. 일부 실시예들에서, 디바이스(1910)는 하나 이상의 컴포넌트들을 포함하고 디바이스(600)와 관련하여 본 명세서에 기술된 바와 같은 하나 이상의 기법들을 사용한다.
도 19b에서, 버드들(1906a)(예컨대, "Jane의 버드") 및 버드들(1906b)("Nick의 버드)은 디스플레이 스크린(1902)으로부터 미리결정된 거리 내에 있어서, 버드들 각각의 각자의 속성들(예컨대, 구성 속성들, 위치)이 조건들의 세트를 만족하는 경우 버드들 각각은 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성될 수 있다. 따라서, 도 19b에서, 버드들(1906a)의 속성들은 현재 (예컨대, 도 19b의 버드 제어부(1932) 옆의 체크마크에 의해 도시된 바와 같이) 조건들의 세트를 만족한다. 따라서, 버드들(1906a)은 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성된다. 한편, 버드들(1906b)의 속성들은 현재 조건들의 세트를 만족시키지 않으며; 따라서, 버드들(1906b)은 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성되지 않는다.
본 명세서에 사용되는 바와 같이, 한 쌍의 버드들이 디스플레이 스크린(1902)에 링크되어 그로부터 미디어를 수신하도록 구성될 때, 디스플레이 스크린(1902)은 현재 한 쌍의 버드들과 오디오 미디어(예컨대, 디스플레이 스크린(1902)에 의해 현재 재생되고 있는 미디어)를 공유하도록 구성된다. 따라서, 버드들(1906b)은 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성되지 않기 때문에, 디스플레이 스크린(1902)은 현재 버드들(1906b)에 의해 출력될 수 있는 미디어를 공유하도록 구성되어 있지 않다(예컨대, 또는 공유할 수 없다). 그러나, 디스플레이 스크린(1902)은 현재, 버드들(1906a)이 디스플레이 스크린(1902)에 링크되어 그로부터 미디어를 수신하도록 구성되어 있기 때문에, 버드들(1906a)에 의해 출력될 수 있는 미디어를 공유하도록 구성된다. 또한, 도 19b에서, 한 쌍의 버드들의 속성들이 조건들의 세트를 만족하고 디스플레이 스크린(1902) 근처에(예컨대, 그로부터 미리결정된 거리 내에) 있을 때, 버드들은 디스플레이 스크린(1902)에 자동으로 링크되어 미디어를 수신하도록 구성된다(예컨대, 디스플레이 스크린은 버드들(1902a)과 미디어를 공유할 수 있다). 따라서, 일부 실시예들에서, 버드들(1906a)은, 버드들(1906a)이 디스플레이 스크린(1902) 근처로 이동되었을 때, 디스플레이 스크린(1902)에 자동으로 링크되어 미디어를 수신하도록 구성되었다.
일부 실시예들에서, 조건들의 세트는, 한 쌍의 버드들이 디스플레이 스크린(1902)이 연관되는 동일한 사용자 계정과 연관될(예컨대, 그에 등록될, 로그인될) 때 충족되는 조건을 포함한다. 일부 실시예들에서, 조건들의 세트는, 버드들의 세트가 디스플레이 스크린(1902)이 연관되는 계정을 통해 디스플레이 스크린으로부터 미디어를 수신하도록 허용되는 것으로서 지정될 때 충족되는 조건을 포함한다. 일부 실시예들에서, 조건들의 세트는, 한 세트의 버드들이 과거에 디스플레이 스크린(1902)에 연결되었다는(그리고, 일부 실시예들에서, 계속해서 디스플레이 스크린(1902)에 연결되도록 허용됨) 표시가 있을 때 충족되는 조건을 포함한다.
도 19c 내지 도 19i는, 디스플레이 스크린(1902)이 디스플레이 스크린(1902)에 의해 현재 재생되고 있는 미디어를 공유하도록 구성되어, 미디어가 버드들(1906b)에 의해 출력될 수 있도록 하는, 디스플레이 스크린(1902)을 버드들(1906b)과 연결하는 프로세스를 도시한다. 도 19b에서, 리모트(1904)는 하향 내비게이션 제스처(1950b)를 수신하고, 프로세싱을 위해 하향 내비게이션 제스처(1950b)의 표시를 디스플레이 스크린(1902)에 송신한다.
도 19c에 예시된 바와 같이, 하향 내비게이션 제스처(1950b)의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 선택 표시자를, (예컨대, 도 19b에서의) 버드 제어부(1932)에서 디스플레이되는 것으로부터 (예컨대, 도 19c에서의) 오디오 공유 제어부(1934)로 이동시킨다. 도 19c에서, 리모트(1904)는 오디오 공유 제어부(1934)에 지시된 선택 제스처(1950c)를 수신하고, 선택 제스처(1950c)의 표시를 프로세싱을 위해 디스플레이 스크린(1902)으로 송신한다.
도 19c1에 예시된 바와 같이, 선택 제스처(1950c)의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 사용자 인터페이스(1930) 상에 오버레이된 사용자 인터페이스(1938)를 디스플레이한다. 일부 실시예들에서, 공유 취소 옵션(1938c)에 지시되는 선택 제스처의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 사용자 인터페이스(1938)를 디스플레이하는 것을 중지하고 사용자 인터페이스(1930)를 계속해서 디스플레이한다. 사용자 인터페이스(1938)는 일시적 공유 옵션(1938a), 영구 공유 옵션(1938b), 및 공유 취소 옵션(1938c)과 같은 공유 옵션들을 포함한다. 일부 실시예들에서, 공유 취소 옵션(1938c)에 지시되는 선택 제스처의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 미디어를 공유하기 위한 프로세스를 개시하지 않는다(예컨대, 그리고 사용자 인터페이스(1930) 상에 오버레이된 사용자 인터페이스(1938)를 디스플레이하는 것을 중지함).
일부 실시예들에서, 영구 공유 옵션(1938b)에 지시되는 선택 제스처의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 주변기기 디바이스(예컨대, "Nick의 버드", 1906b)와 미디어를 공유하기 위한 프로세스를 개시하여, 프로세스의 완료는 (예컨대, 공유를 위한 일시적 기간 없이) 디스플레이 스크린(1902)이 주변기기 디바이스와 미디어를 공유하는 것이 수동으로 구성해제될 때까지(또는 주변기기 디바이스가 디스플레이 스크린(1902)으로부터 미디어를 수신하는 것이 수동으로 구성해제될 때까지) 주변기기 디바이스와 미디어를 공유하도록 디스플레이 스크린(1902)을 구성하도록 한다. 일부 실시예들에서, 디스플레이 스크린(1902)은 오디오 제어부(1934)에 지시된 선택 제스처(1950c)를 수신하는 것에 응답하여 사용자 인터페이스(1938)를 디스플레이하지 않고, 대신에, 도 19d의 사용자 인터페이스(1940)를 디스플레이한다. 그러한 실시예들에서, 디스플레이 스크린(1902)은, 공유 옵션(1938b)의 선택에 관하여 기술된 것과 유사한 방식으로, 미디어의 프로비저닝(provision)에 대한 미리결정된 시간 제한 없이 버드들(1906b)에 미디어를 제공하도록 구성될 것이다. 도 19c에서, 리모트(1904)는 일시적 공유 옵션(1938a)에 지시된 선택 제스처(1950c1)를 수신하고, 선택 제스처(1950c1)의 표시를 프로세싱을 위해 디스플레이 스크린(1902)으로 송신한다.
도 19d에서, 선택 제스처(1950c1)의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 사용자 인터페이스(1940)를 디스플레이하며 미디어를 공유하기 위한 프로세스를 개시하여, 프로세스의 완료는, 디스플레이 스크린(1902)이 일시적 기간(예컨대, 미리정의된 기간) 동안 주변기기 디바이스와 미디어를 공유하도록 구성되게 구성한다. 일부 실시예들에서, 일시적 기간은 미리정의된 기간, 예컨대 특정 시간으로부터의 미리결정된 시간(예컨대, 지금부터 1시간), 디스플레이 스크린(1902)에 의해 출력되고 있는 현재 미디어의 지속기간에 기초한 기간(예컨대, 영화의 지속기간, 현재 재생중인 영화에서 남은 나머지 시간), 시간 간격 또는 미리결정된 이벤트의 종료에 기초하는 기간(예컨대, 하루, 일주일)이다. 따라서, 선택 제스처(1950c1)의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 (예컨대, 수동으로 구성해제될 필요 없이) 일시적 기간 후에 주변기기 디바이스와 미디어를 공유하는 것이 자동으로 구성해제된다. 일부 실시예들에서, 선택 제스처(1950c1)의 표시를 수신하는 것에 응답하여, 디바이스(600)는 상이한 선택가능한 일시적 시간 옵션들(예컨대, 미리정의된 기간들, 미디어의 지속기간 및/또는 미리결정된 이벤트에 기초한 시간들)을 갖는 사용자 인터페이스를 디스플레이한다. 옵션들 중 하나에 지시된 선택을 수신하는 것에 응답하여, 디바이스(600)는 사용자 인터페이스(1940)를 디스플레이하고, 선택된 기간 옵션들에 기초하여 미디어를 공유하기 위한 프로세스를 개시한다.
도 19d에서, 선택 제스처(1950c1)의 표시(또는 기간 옵션의 선택)를 수신하는 것에 응답하여, 미디어 공유 프로세스의 일부로서, 디바이스(600)는 하나 이상의 통지들을 전송하기 위한 프로세스를 개시한다. 하나 이상의 통지들을 전송하기 위한 프로세스를 개시하는 것의 일부로서, 디스플레이 스크린(1902)은, 디스플레이 스크린(1902) 근처에 있는 하나 이상의 디바이스들(예컨대, 디바이스(1910))로 하여금 통지를 디스플레이하게 하는 명령어 또는 요청을 전송한다. 도 19d에서, 명령어는 한 세트의 버드들에 링크되고/되거나 그에 페어링되는 디바이스들(예컨대, 전화, 태블릿 등)에만 전송된다. 일부 실시예들에서, 명령어는 다른 디바이스들로 전송될 수 있다(예컨대, 명령어는 통지를 디스플레이하기 위한 브로드캐스트된 요청일 수 있다).
도 19d에 예시된 바와 같이, 사용자 인터페이스(1940)는, 통지가 적어도 하나의 인근 디바이스로 전송되었고, 인근 디바이스에 연결되는 한 쌍의 버드들(예컨대, 또는 다른 유형의 액세서리 디바이스)과 미디어를 공유하도록 디스플레이 스크린(1902)을 구성하기 위해 상호작용되어야 한다는 표시를 포함한다. 사용자 인터페이스(1940)는 또한, 선택될 때, 디스플레이 스크린(1902)이 사용자 인터페이스(1930)를 재디스플레이하게 하는 취소 제어부(1942)를 포함한다. 도 19d에서, 디바이스(1910)(예컨대, "Nick의 전화")는, (예컨대, 디스플레이 스크린(1902)에 의해 개시된 통지들을 전송하기 위한 프로세스를 통해) 공유 통지가 디스플레이되어야 함을 나타내는 데이터를 수신한다.
도 19e에 예시된 바와 같이, 통지가 디스플레이되어야 함을 나타내는 데이터를 수신하는 것에 응답하여, 디바이스(1910)(예컨대, "Nick의 전화")는 공유 통지(1960)를 디스플레이한다. 공유 통지(1960)는 버드들(1906b)("Nick의 버드")이 디스플레이 스크린(1902)에 링크되어 미디어를 수신하도록 구성될 수 있음을 나타낸다. 도 19e에서, 디바이스(1910)는 공유 통지(1960) 상에서 제스처(1952e)(예컨대, 눌러서 유지하기 제스처)를 검출한다.
도 19f에 예시된 바와 같이, 제스처(1952e)를 검출하는 것에 응답하여, 디바이스(1910)는 오디오 공유 제어부(1962)를 디스플레이하며, 여기서 오디오 공유 제어부(1902)의 선택은, 멀티미디어 디바이스가 디바이스(예컨대, 그 제어부를 디스플레이하는 디바이스, 디바이스(1910))에 연결된 액세서리 디바이스(예컨대, 버드들(1906b))와 오디오를 공유할 수 있게 한다. 도 19f에서, 디바이스(1910)는 오디오 공유 제어부(1962) 상에서 제스처(1952f)(예컨대, 탭 제스처)를 검출한다.
도 19g에서, 제스처(1952f)를 검출하는 것에 응답하여, 디바이스(1910)는 (예컨대, 위에서 개시된 미디어를 공유하기 위한 프로세스에서의 단계로서(예컨대, 도 19d에서)) 디스플레이 스크린(1902)과 버드들(1906b) 사이에서 미디어를 공유하기 위한 프로세스의 개시를 야기한다. 미디어를 공유하기 위한 프로세스의 개시를 야기하는 것의 일부로서, 디바이스(1910)는, 디스플레이 스크린(1902)으로 하여금 도 19g에 도시된 사용자 인터페이스(1970)를 디스플레이하게 하는 명령어를 전송한다. 도 19g에 예시된 바와 같이, 사용자 인터페이스(1970)는 오디오 공유 제어부(1972) 및 취소 제어부(1974)(예컨대, 선택될 때, 디스플레이 스크린(1902)으로 하여금 사용자 인터페이스(1930)를 재디스플레이하게 함)를 포함한다. 도 19g에서, 리모트(1904)는 오디오 공유 제어부(1972)에 지시된 선택 제스처(1950g)를 수신하고, 선택 제스처(1950g)의 표시를 프로세싱을 위해 디스플레이 스크린(1902)으로 송신한다.
도 19h에 예시된 바와 같이, 선택 제스처(1950g)의 표시를 수신하는 것에 응답하여, 디스플레이 스크린(1902)은 사용자 인터페이스(1980)를 디스플레이한다. 사용자 인터페이스(1980)는, 액세서리 디바이스가 디스플레이 스크린(1902)으로부터 미디어를 수신할 수 있도록, 액세서리 디바이스(예컨대, 버드들(1906b), "Nick의 버드")(예컨대, 이는, 멀티미디어 및 액세서리 디바이스 사이에서 미디어를 공유하기 위한 프로세스의 개시를 야기한 디바이스에 링크됨)를 구성하기 위한 하나 이상의 명령어들을 포함한다. 여기서, 명령어는 "Nick의 버드 케이스의 버튼을 누르고 있으세요"라고 말하며, 이는 사용자가 (예컨대, 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 버드들(1906b)을 구성하기 위해) 버드들(1906b)에 링크되는 케이스 상의 버튼을 누르고 있어야 한다는 것을 나타낸다. 도 19h에서, 눌러서 유지하기 제스처(1956h)가 버드들(1906b)(예컨대, "Nick의 버드")에 (예컨대, 통신 링크(1914b)에 의해 도시된 바와 같이) 링크된 케이스(1986)(예컨대, Nick의 버드 케이스")에서 검출된다.
도 19i에서, 눌러서 유지하기 제스처(1956h)가 검출된 후, 디스플레이 스크린(1902)은 (예컨대, 통신 링크(1908c)에 의해 도시된 바와 같이) 링크되고, (버드들(1906b)이 버드들(1906b)의 하나 이상의 스피커들을 사용하여 미디어를 출력(예컨대, 재생)할 수 있도록) 버드들(1906b)에 출력될(예컨대, 전송될) 수 있는 미디어를 공유하도록 구성된다. 도 19i에 예시된 바와 같이, 디스플레이 스크린(1902)은 사용자 인터페이스(1930)를 재디스플레이하는데, 이는 이제 표시(1936a)와 함께 디스플레이되는 버드 제어부(1936)를 포함한다. (예를 들어, "Nick의 버드" 옆에 있는 체크마크). 표시(1936a)는 버드들(1906b)이 디스플레이 스크린(1902)에 의해 공유되는 미디어를 수신하도록 구성되고 링크됨을 나타낸다. 특히, 도 19h에서, (예컨대, 표시(1936a)에 의해 도시된) 버드들(1906a) 및 (예컨대, 표시(1932a)에 의해 도시된) 버드들(1906b)은 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 동시에 구성된다. 따라서, 1906a 및 1906b는 디스플레이 스크린(1902)에 의해 현재 재생되고 있는 미디어를 동시에 출력할 수 있다. 또한, 일시적 공유 옵션(1938a)이 도 19c1에서 선택된 실시예들에서, 버드들(1906b)은 일시적 기간 동안 미디어를 수신하도록 구성된다. 따라서, 일부 실시예들에서, 디스플레이 스크린(1902)은 상이한 기간들 동안 버드들(1906b, 1906a)과 미디어를 공유하도록 구성된다(예컨대, 디스플레이 스크린(1902)은, 수동 구성해제의 이벤트(예컨대, 영구 공유 옵션(1938b)과 관련하여 전술된 바와 같음)까지 또는 버드들(1906b)이 미디어를 수신하도록 구성되는 기간과는 상이한 일시적 기간 동안에 버드들(1906a)과 미디어를 공유하도록 구성된다). 도 19i에 예시된 바와 같이, 사용자 인터페이스(1930)는 더 이상 오디오 공유 제어부(1934)를 포함하지 않는다. 일부 실시예들에서, 사용자 인터페이스(1930)는 더 이상 오디오 공유 제어부(1934)를 포함하지 않는데, 그 이유는 최대량(예컨대, 2, 3, 5)의 액세서리 디바이스들이 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 동시에 구성되어 있다는 결정이 이루어지기 때문이다. 일부 실시예들에서, 사용자 인터페이스(1930)는, 최대량의 액세서리 디바이스들이 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 동시에 구성되는지 여부에 관계없이, 오디오 공유 제어부(1934)를 계속해서 포함한다.
도 19i에 예시된 바와 같이, 버드들(1906b)은 디스플레이 스크린(1902)에 직접 링크되어, 디스플레이 스크린(1902)이 출력될 버드들(1906b)과 직접 미디어를 공유하도록 한다. 일부 실시예들에서, 버드들(1906b)은 디스플레이 스크린(1902)과 직접 링크되지 않아서, 디스플레이 스크린(1902) 스크린은 디바이스(1910)(예컨대, 19h에서)와 미디어를 공유하고, 디바이스(1910)는 출력될 버드들(1906b)과 미디어를 공유한다. 일부 실시예들에서, 버드들(1906b)이 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성될 때 버드들(1906b)은 더 이상 도 19i에서 디바이스(1910)에 링크되지 않는다. 일부 실시예들에서, 버드들(1906b)은 (예컨대, 버드들(1906b)이 디스플레이 스크린(1902)으로부터 미디어를 수신하도록 구성될 때) 버드들(1906b)이 디스플레이 스크린(1902)에 직접 링크되는지 여부에 관계없이 디바이스(1910)에 링크된 채로 유지된다. 일부 실시예들에서, 버드들(예컨대, 1906a, 1906b)은 디스플레이 스크린(1902)으로부터의 동작가능한 통신 범위를 벗어날 수 있다. 버드들이 동작가능한 통신 범위 밖으로 이동하는 경우, 이들은 더 이상 디스플레이 스크린(1902) 상에서 현재 재생중인 미디어에 대한 오디오를 재생하지 않을 수 있다. 버드들이 동작가능한 통신 범위로 복귀할 때, 그들이 디스플레이 스크린(1902)에 영구적으로 연결되는 경우 또는 그들이 일시적으로 연결되지만, 시간이 일시적 연결성 기간 내에 있는 경우, 버드들은 (예를 들어, 추가 사용자 입력을 요구하거나 재설정을 요구하지 않으면서) 디스플레이 스크린(1902) 상에서 현재 재생중인 미디어의 오디오 부분을 재개할 수 있다. 일부 구현예들에서, 디스플레이 스크린(1902)은 수동으로 버드들을 연결해제하기 위한 하나 이상의 사용자 인터페이스 옵션들을 제공한다. 수동으로 버드들을 연결해제함으로써, 영구적으로 링크되었던 버드들은 디스플레이 스크린(1902)의 헤드폰 섹션에 더 이상 디스플레이되지 않을 것이고, 일시적으로 링크되었던 버드들은 일시적 기간의 지속기간(예컨대, 남은 지속기간) 동안 링크되지 않을 것이다.
특히, (예컨대, 도 19a 내지 도 19i와 관련하여) 전술된 바와 같이, 디스플레이 스크린(1902)은 (예컨대, 도 19c1에서의 선택 제스처(1950c1)를 통해) 오디오 공유 제어부(1934)가 선택된 후에 버드들(1906b)과 미디어를 공유하도록 자동으로 구성되지 않는다. 대신에, 디스플레이 스크린(1902)이 버드들(1906b)과 미디어를 공유하도록 구성될 수 있기 전에, (예컨대, 도 19c1의 선택 제스처(1950c1)를 통한) 디스플레이 스크린(1902)으로부터의 그리고 (예컨대, 도 19f의 선택 제스처(1952f)를 통한) (예컨대, 버드들(1906b)에 이미 링크되어 있는) 디바이스(1910)로부터의 명시적 확인이 필요하다. 디바이스들 둘 모두로부터의 이러한 명시적 확인을 요구하는 것은, 보안을 향상시키고/시키거나 오디오의 의도하지 않은 공유 또는 수신의 위험을 감소시킨다. 예를 들어, Jane 및 Nick이 도 19a 내지 도 19f에서의 각자의 디바이스들 각각에 대한 제어를 갖는다고 가정하면, 전술된 기법들은, Jane의 디스플레이 스크린이 Nick의 허가 없이 Nick의 버드들에 의해 출력되는 미디어를 공유할 수 있는 위험을 감소시킨다. 또한, 전술된 기법들은, Nick이, Jane의 허가 없이, 디스플레이 스크린(1902)으로부터 수신되는 미디어를 Nick의 버드들을 통해 청취할 수 있는 위험을 감소시킨다. 따라서, 전술된 기법들은, 각각의 디바이스가 각각의 개별 디바이스의 사용자에 의해 의도된 대로 각자의 디바이스로부터 미디어를 수신/출력하는 가능성을 증가시킨다.
도 20은 일부 실시예들에 따른, 전자 디바이스를 사용하여 다수의 디바이스들에서 오디오 재생을 관리하기 위한 방법들을 예시하는 흐름도이다. 방법(2000)은 컴퓨터 시스템(예컨대, 100, 300, 500, 1902)에서 수행된다. 방법(2000)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 방법(2000)은 다수의 디바이스들에서 오디오 재생을 관리하기 위한 직관적인 방법을 제공한다. 본 방법은 다수의 디바이스들에서 오디오 재생을 관리하는 것 또는 사용자에 대한 인지적 부담을 감소시키며, 이에 의해 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 컴퓨팅 디바이스들의 경우, 사용자가 더 빠르고 더 효율적으로 다수의 디바이스들에서 오디오 재생을 관리할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
컴퓨터 시스템(예컨대, 1902)이 미디어(예컨대, 오디오 미디어(예컨대, 음악))를 하나 이상의 디바이스들의 제1 세트(예컨대, 1906a)에 제공하고 있는 동안(예컨대, 그리고, 일부 실시예들에서, (예컨대, 하나 이상의 설정들 또는 무선 연결들(예컨대, 블루투스 또는 Wi-Fi 연결)을 통해) 하나 이상의 디바이스들의 제1 세트에서의 미디어 재생을 제어하도록(예컨대, 하나 이상의 디바이스들의 제1 세트로 하여금 미디어를 재생하게 하도록) 구성되는 동안), 컴퓨터는 미디어를 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)에 제공하기 위한(그리고, 일부 실시예들에서, 하나 이상의 디바이스들의 제2 세트에서의 미디어 재생을 제어하기 위한) 제1 프로세스를 개시하면서, 하나 이상의 디바이스들의 제1 세트(예컨대, 906a)에 미디어를 계속해서 제공한다(예컨대, 1932)(2002).
하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)에 미디어를 제공하기 위한 프로세스를 개시하는 것의 일부로서, 컴퓨터 시스템은, 하나 이상의 디바이스들의 제2 세트(1906b)와 통신하는 제1 외부 디바이스(예컨대, 1910)(예컨대, 스마트폰; 스마트워치; 개인용 컴퓨터; 태블릿 컴퓨터)로부터, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제1 요청(예컨대, 인가; 승인)을 나타내는 제1 데이터를 수신한다(2004).
하나 이상의 디바이스들의 제2 세트에 미디어를 제공하기 위한 프로세스를 개시하는 것의 일부로서, 컴퓨터 시스템은, 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)에 미디어를 제공하기 위한 제1 프로세스를 진행하라는 제2 요청(예컨대, 인가; 승인)을 나타내는 제2 데이터를 수신하며(2006), 여기서 제2 데이터는, 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)와 통신하는 제2 외부 디바이스(예컨대, 1986)(하나 이상의 디바이스들의 제2 세트와, 다른 디바이스들(예컨대, 제2 데이터의 송신을 야기하는 입력 디바이스를 포함하는 하나 이상의 디바이스들의 제2 세트에 대한 케이스)의 연결을 용이하게 하는 디바이스)로부터 수신되거나, 또는 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스(예컨대, 1912)로부터 수신된다.
미디어를 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)에 제공하기 위한 프로세스를 개시하는 것의 일부로서, 컴퓨터 시스템은, 제1 데이터 및 제2 데이터를 수신한 후에(그리고, 일부 실시예들에서, 제1 데이터 및 제2 데이터를 수신하는 것에 응답하여), 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)에 미디어를 제공한다(2008). 제1 외부 디바이스로부터 그리고 제2 외부 디바이스로부터 둘 다로부터 또는 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스로부터 데이터를 수신한 후에 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하는 것은, 미디어의 의도하지 않은 프로비저닝의 확률을 감소시키고, 컴퓨터 시스템의 사용자 및 디바이스들의 제2 세트의 사용자 둘 모두에 대한 미디어 프로비저닝의 보안을 증가시킨다. 잘못된 동작들의 확률을 감소시키고 보안을 개선하는 것은, (예를 들어, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 보다 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 보다 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 컴퓨터 시스템은 디스플레이 생성 컴포넌트(예컨대, 1902)와 통신한다. 일부 실시예들에서, 제1 프로세스를 개시하기 전에, 컴퓨터 시스템은, 디스플레이 생성 컴포넌트를 통해, 미디어 프로비저닝 기준들의 제1 세트가 만족된다는 결정에 따라, 선택될 때, 제1 프로세스가 개시되게 하는 제1 선택가능한 사용자 인터페이스 객체(예컨대, 1934)(예컨대, "오디오 공유" 어포던스)를 포함하는 제1 사용자 인터페이스(예컨대, 1930)(예컨대, 디바이스들의 세트들에의 미디어의 프로비저닝을 제어하기 위한 인터페이스; 제어 사용자 인터페이스). 일부 실시예들에서, 미디어 프로비저닝 기준들의 제1 세트가 만족되지 않는다는 결정에 따라, 제1 사용자 인터페이스는 제1 선택가능한 사용자 인터페이스 객체를 포함하지 않는다. 일부 실시예들에서, 제1 사용자 인터페이스(예컨대, 1930)는, 컴퓨터 시스템이 (예컨대, 제1 선택가능한 사용자 인터페이스 객체와 동시에 디스플레이되는) 하나 이상의 디바이스들의 제1 세트에 오디오를 제공하고 있다는 표시(예컨대, 그래픽 및/또는 텍스트 표시)를 포함한다. 일부 실시예들에서, 미디어 프로비저닝 기준들의 제1 세트는 컴퓨터 시스템이 하나 이상의 디바이스들의 미리결정된 수(예컨대, 1; 2; 3 미만; 2 미만)의 세트들에 미디어를 제공하고 있을 때 만족된다. 일부 실시예들에서, 미리결정된 유형(예컨대, 무선 헤드폰)의 하나 이상의 디바이스들의 세트들에. 제1 프로세스를 개시하기 위한 인터페이스 객체를 조건부로 디스플레이하는 것은, 언제 프로세스가 개시를 위해 이용가능한지에 대한 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다. 시스템이 현재 미리결정된 수의 디바이스들에 미디어를 제공하고 있는지 여부에 기초하여 제1 프로세스를 개시하기 위한 인터페이스 객체를 조건부로 디스플레이하는 것은, 언제 프로세스가 개시를 위해 이용가능한지에 대한 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 프로세스는, 제1 데이터를 수신하기 전에, 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하는 것을 인가하라는 제1 요청을 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)와 통신하는 제1 외부 디바이스(예컨대, 1910)에 송신하는 것을 개시하는 것(예컨대, 하나 이상의 중개 디바이스들(예컨대, 서버, 네트워크 디바이스, 라우터)을 통해 송신하거나, 또는 송신되도록 야기하는 것)을 포함한다. 일부 실시예들에서, 요청은, 제1 외부 디바이스(예컨대, 1912)로 하여금, 선택될 때 제1 데이터의 송신을 야기하는 선택가능한 사용자 인터페이스 객체(예컨대, 1960e)를 디스플레이하게 한다(예컨대, 요청은 명령어이다). 미디어의 프로비저닝을 인가하라는 요청을 송신하는 것은, 제1 데이터에 대해 제1 외부 디바이스에 프롬프트하는 능력을 컴퓨터 시스템에 제공하여, 미디어 프로비저닝 프로세스의 유용성을 개선한다. 개선된 유용성을 제공하는 것은 사용자-시스템 상호작용을 증가시키고 시스템의 사용을 촉진하며, 이는, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 외부 디바이스로의 제1 요청의 송신을 개시하는 것의 일부로서, 컴퓨터 시스템(예컨대, 1902)은, 복수의 잠재적 외부 디바이스들(예컨대, 1912, 1906b)로의 요청(예컨대, 미디어를 공유하기 위한 요청)의 브로드캐스트를 개시한다(예컨대, 하나 이상의 중개 디바이스들(예컨대, 서버, 네트워크 디바이스, 라우터)에 의해 브로드캐스트하거나 브로드캐스트되도록 야기하는 것)(예컨대, 잠재적으로 복수의 수신자들로의 비-특정 송신). 요청을 브로드캐스트하는 것은 제1 데이터를 제공할 수 있는 디바이스들에 의한 요청의 수신을 최적화하여 미디어 프로비저닝 프로세스의 유용성을 개선한다. 개선된 유용성을 제공하는 것은 사용자-시스템 상호작용을 증가시키고 시스템의 사용을 촉진하며, 이는, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 컴퓨터 시스템은, 제1 요청의 송신을 개시할 때 (예컨대, 제1 외부 디바이스와 통신 상태(또는 페어링된 관계)에 있지 않음) 또는 하나 이상의 디바이스들의 제2 세트와 통신하지 않는다.
일부 실시예들에서, 제1 데이터를 수신하는 것에 응답하여(그리고, 일부 실시예들에서, 제2 데이터를 수신하기 전에), 컴퓨터 시스템은 제2 선택가능한 사용자 인터페이스 객체(예컨대, 1972)를 포함하는 확인 사용자 인터페이스(예컨대, 1970)를 디스플레이한다. 일부 실시예들에서, 컴퓨터는 제2 선택가능한 사용자 인터페이스 객체에 대응하는 입력을 (예컨대, 1950g를 통해) 수신한다. 일부 실시예들에서, 제2 선택가능한 사용자 인터페이스 객체에 대응하는 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 제2 외부 디바이스에서 입력(예컨대, 특정 입력)을 제공하도록 하는 프롬프트(예컨대, 1980)(예컨대, 그래픽 프롬프트; 텍스트 프롬프트)를 디스플레이하거나, 또는 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스에서 입력을 제공하도록 하는 프롬프트(예컨대, 1980)(예컨대, 특정 입력)를 디스플레이한다. 일부 실시예들에서, 확인 사용자 인터페이스는 제2 데이터를 수신하기 전에 디스플레이된다. 제2 외부 디바이스에서 또는 하나 이상의 디바이스들의 제2 세트 중 제1 디바이스에서 입력을 제공하도록 하는 프롬프트를 디스플레이하는 것은, 시스템-사용자 상호작용을 개선하고, 미디어 프로비저닝 프로세스를 진행하는 데 필요한 단계들에 대한 피드백을 사용자들에게 제공한다. 사용자-시스템 상호작용을 개선하고 시스템의 사용을 촉진하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 하나 이상의 디바이스들의 제1 세트에 미디어를 계속해서 제공하면서 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하는 것의 일부로서, 컴퓨터 시스템은, 미디어가 하나 이상의 디바이스들의 제2 세트에 제공되고 있다는 표시(예컨대, 1936)(예컨대, 그래픽 표시; 텍스트 표시)를 디스플레이한다(그리고, 일부 실시예들에서, 또한 미디어가 하나 이상의 디바이스들의 제1 세트에 제공되고 있다는 표시를 디스플레이함). 시스템이 하나 이상의 디바이스들의 제2 세트에 미디어를 제공하고 있다는 표시를 디스플레이하는 것은, 어느 디바이스들이 현재 미디어를 제공받고 있는지에 관한 피드백을 사용자에게 제공한다. 사용자에게 개선된 시각적 피드백을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 프로세스를 개시하기 전에, 하나 이상의 디바이스들의 제2 세트(예컨대, 1906b)는 제1 외부 디바이스(예컨대, 1912)에 의해 제공된 미디어를 재생하도록 구성된다.
일부 실시예들에서, 컴퓨터 시스템은 제1 사용자 계정과 연관된다(예컨대, 그에 서명된다). 일부 실시예들에서, 제1 외부 디바이스는 제1 사용자 계정과 상이한 제2 사용자 계정과 연관된다. 일부 실시예들에서, 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하는 것은 컴퓨터 시스템과 하나 이상의 디바이스들의 제2 세트 사이의 직접 연결(예컨대, 무선 연결)을 통해 발생한다. 일부 실시예들에서, 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하는 것은, 미디어를 제1 외부 디바이스에 제공하여 하나 이상의 디바이스들의 제2 세트에 제공하는 것을 포함한다.
일부 실시예들에서, 미디어를 하나 이상의 디바이스의 제1 세트에 계속해서 제공하면서 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하는 것의 일부로서, 일시적 공유 옵션(예컨대, 1938a)의 선택에 대응하는 입력(예컨대, 1950c1)이 수신되었다는 결정에 따라(예컨대, 제1 데이터를 수신하기 전에 컴퓨터 시스템에 의해 디스플레이되었던 공유의 지속기간을 선택하기 위해, 사용자 인터페이스 상에서 수신된 입력), 컴퓨터 시스템은, 미디어를 제1 미리결정된 기간 이하 동안 하나 이상의 디바이스들의 제2 세트에 제공한다(예컨대, 오디오의 프로비저닝은 미리결정된 기간 후에 자동으로(예컨대, 사용자 입력을 요구하지 않고서) 중단되고/중지되고/종료된다). 일부 실시예들에서, 미디어를 하나 이상의 디바이스의 제1 세트에 계속해서 제공하면서 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하는 것의 일부로서, 비-일시적(예컨대, 무기한) 공유 옵션의 선택에 대응하는 입력이 수신되었다는 결정에 따라(예컨대, 제1 데이터를 수신하기 전에 컴퓨터 시스템에 의해 디스플레이되었던 공유의 지속기간을 선택하기 위해, 사용자 인터페이스 상에서 수신된 입력), 컴퓨터 시스템은, 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하는 것에 대한 미리결정된 시간 제한을 구성하지 않고서, 미디어를 하나 이상의 디바이스들의 제2 세트에 제공한다. 일부 실시예들에서, 제1 미리결정된 기간은, 현재 시간으로부터의 미리결정된 기간(예컨대, 미디어의 제공의 시작 후 또는 일시적 공유 옵션의 선택에 대응하는 입력의 수신 후 1시간; 현재 재생중인 미디어에 기초하여 선택된 미리결정된 기간(예컨대, 현재 재생중인 미디어(예컨대, 영화)에서 남은 시간); 및 미리결정된 이벤트까지의(예컨대, 현재 날의 종료까지; 일몰까지) 미리결정된 기간으로 이루어진 군으로부터 선택된다. 일부 실시예들에서, 비-일시적(예컨대, 무기한) 공유 옵션(예컨대, 1938b)의 선택에 대응하는 입력이라는 결정에 따라(예컨대, 제1 데이터를 수신하기 전에 컴퓨터 시스템에 의해 디스플레이되었던 공유의 지속기간을 선택하기 위해, 사용자 인터페이스 상에서 수신된 입력), 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하는 것에 대한 미리결정된 시간 제한을 구성하지 않고서, 미디어를 하나 이상의 디바이스들의 제2 세트에 제공한다. 제1 미리결정된 기간 이하 동안 미디어를 하나 이상의 디바이스들의 제2 세트에 제공하기 위한 옵션을 제공하는 것은, 공유의 지속기간을 제한하기 위한 옵션을 사용자에게 제공하며, 이는 보안을 증가시키고 오디오의 의도하지 않은 공유의 위험을 감소시킬 수 있다. 추가의 제어 옵션들을 제공하고 보안을 증가시키는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
방법(2000)(예컨대, 도 20)과 관련하여 위에서 설명된 프로세스들의 상세사항들은, 또한, 이하에서 기술되는 방법들에 유사한 방식으로 적용가능하다는 것에 유의한다. 예를 들어, 방법(2000)은, 선택적으로, 방법(1700)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
도 21a 내지 도 21f는 일부 실시예들에 따른, 음성 입력을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 특히, 도 21a 내지 도 21f는 음성 입력이 다수의 사용자들로부터 검출되고 있고 검출된 음성 입력에 응답하여 미디어가 출력되는 시나리오를 입증한다. 이들 도면들의 사용자 인터페이스들은 도 18 및 도 23에 도시된 프로세스들을 포함하여 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
도 21a는 다수의 스피커 디바이스들, 예컨대 주방 스피커(1206), 식당 스피커(1216), 침실 스피커(1236), 거실 스피커(1246), 거실 스피커(1248), 일광욕실 스피커(1256), 및 일광욕실 스피커(1258)를 포함하는 집(1202)의 다이어그램을 예시한다. 도 21a에서, 디바이스들은, 집(1202) 및/또는 집(1202)의 특정 방에 할당되는 것을 포함하여, 도 12와 관련하여 전술된 바와 같은, 하나 이상의 속성들을 갖는다.
집(1202)의 다이어그램에 더하여, 도 21a는 또한 (예컨대, 도 17n과 관련하여) 전술된 바와 같은 하나 이상의 기법들을 사용하여, 사용자 인터페이스(1770)를 디스플레이하는 디바이스(600)를 예시한다. 사용자 인터페이스(1770)는 다수의 그룹 어포던스들, 예컨대 전화 그룹 어포던스(1770), 거실-및-식당 그룹 어포던스(2172), 침실 그룹 어포던스(2178), 및 일광욕실 그룹 어포던스(2180)를 포함한다. 도 21a에서, 그룹 어포던스들은, 도 17n과 관련하여 전술된 바와 같이, 각자의 출력 어포던스들에 대응한다. 또한, 거실-및-식당 그룹 어포던스(2172)는 (예컨대, 도 17a 내지 도 17p와 관련하여) 전술된 바와 같은 하나 이상의 유사한 기법들을 사용하여 생성된 그룹화를 식별한다. 일부 실시예들에서, 주방 그룹 어포던스가 또한 사용자 인터페이스(1770)에 디스플레이되거나, 또는 도 21a에서의 사용자 인터페이스(1770)에 디스플레이되는 다른 그룹 어포던스들 중 하나의 그룹 어포던스의 디스플레이를 대체한다.
도 21a에 예시된 바와 같이, Jane 및 John은 식당 스피커(1216)에 근접하게 위치된다. 도 21a에서, 식당 스피커(1216)는 음성 입력(2150a)(예컨대, Jane에 의해 발언된, "이봐 어시스턴트, 식당 및 거실 그룹에서 클래식 음악을 재생해줘")을 검출한다. 여기서, 음성 입력(2150a)은 (예컨대, 도 17a 내지 도 17p와 관련하여) 전술된 바와 같은 하나 이상의 유사한 기법들을 사용하여 그룹화된 특정 그룹 스피커들(예컨대, "식당 및 거실 그룹") 상에서 클래식 음악의 재생을 개시하라는 명령어에 대응한다.
도 21b에 예시된 바와 같이, 음성 입력(2150a)을 검출하는 것에 응답하여, 식당 스피커(1216)는 음성 입력(2150a)과 일치하는 동작의 수행을 개시한다. 예를 들어, 도 21b에서, 식당 스피커(1216)는, 식당 스피커(1216), 거실 스피커(1246), 및 거실 스피커(1248)(예컨대, 식당 및 거실 그룹에 할당된 스피커들)로 하여금 클래식 음악을 출력하게 하는 명령어를 송신한다. 도 21b에서, 클래식 음악의 출력은 각각의 스피커 위에 도시되는 클래식 출력 표시자들(2114a, 2114b, 2114c)에 의해 표현된다. 특히, 도 21b에서, 주방, 침실, 및 일광욕실 내의 스피커들은, 그들이 미디어를 재생하고 있지 않기 때문에(예를 들어, 그들은 식당 및 거실 그룹과 연관되지 않기 때문에) 그들 위에 출력 표시자들을 포함하지 않는다.
도 21b에서, 식당 스피커(1216)는 (예컨대, 클래식 음악이 스피커들 상에서 재생되고 있는 동안) 음성 입력(2150b)(예컨대, Jane에 의해 발언된, "이봐 어시스턴트, 재즈 음악을 재생해줘")을 검출한다. 여기서, 음성 입력(2150b)은 재즈 음악의 재생을 개시하기 위한 명령어에 대응한다. 그러나, 음성 입력(2150b)은 (예컨대, 음성 입력(2150a)과는 대조적으로) 그 유형의 음악이 재생되어야 하는 스피커들의 그룹의 표시를 포함하지 않는다. 음성 입력(2150b)을 검출하는 것에 응답하여, 음성 입력(2150b)이 도 21a의 음성 입력(2150a)을 발언한 동일한 사용자(예컨대, "Jane")에 의해 발언되었다는 결정이 이루어진다.
도 21c에 예시된 바와 같이, 음성 입력(2150b)이 음성 입력(2150a)을 발언한 동일한 사용자(예컨대, "Jane")에 의해 발언되었다는 결정이 이루어졌기 때문에, 식당 스피커(1216), 거실 스피커(1246), 및 거실 스피커(1248)(예컨대, 식당 및 거실 그룹에 할당된 스피커들)는 클래식 음악 대신에 재즈 음악을 출력하게 된다. 또한, 식당 및 거실 스피커들은, 음성 입력(2150b)이 스피커들의 그룹의 표시를 포함하지 않았더라도, 재즈 음악을 출력하게 된다. 도 21c에서, 재즈 음악의 출력은 각각의 스피커 위에 도시되는 재즈 출력 표시자들(2116a, 2116b, 2116c)에 의해 표현된다.
도 21c에서, 식당 스피커(1216)는 (예컨대, 재즈 음악이 스피커들 상에서 재생되고 있는 동안) 음성 입력(2152c)(예컨대, John에 의해 발언된, "이봐 어시스턴트, 록 음악을 재생해줘")을 검출한다. 여기서, 음성 입력(2152c)은 록 음악의 재생을 개시하기 위한 명령어에 대응한다. 그러나, 음성 입력(2152c)은 음성 입력(2150a)에서와 같이 그 유형의 음악이 재생되어야 하는 스피커들의 그룹의 표시를 포함하지 않는다. 음성 입력(2152c)을 검출하는 것에 응답하여, 음성 입력(2152c)이 도 21b의 음성 입력(2150b)(예컨대, 및/또는 도 21a의 음성 입력(2150a))을 발언한 사용자(예컨대, "Jane")와는 상이한 사용자(예컨대, "John" 또는 Jane으로 인식되지 않는 사용자)에 의해 발언되었다는 결정이 이루어진다. 일부 실시예들에서, 음성 입력이 동일하거나 상이한 사용자에 의해 발언되었는지 여부의 결정은 하나 이상의 음성 인식 알고리즘들을 통해 이루어진다. 일부 실시예들에서, 사람들 중 한 명 이상과 연관되는 생체측정 데이터는 데이터베이스에 저장되고, 음성 입력이 동일한 사용자에 대응하는지 여부를 결정하기 위해 액세스된다. 일부 실시예들에서, 새로운 음성 입력이 이전 음성 입력과는 상이한 사용자에 의해 발언되는 것으로 인식될 때, 상이한 사용자는 (예컨대, 저장된 생체측정 사용자를 통해) 특정 사용자 및/또는 알려진 사용자로서 인식된다. 일부 실시예들에서, 새로운 음성 입력이 이전 음성 입력과는 상이한 사용자에 의해 발언되는 것으로 인식될 때, 상이한 사용자는 (예컨대, 상이한 사용자에 대해 저장된 충분한 생체측정 데이터가 없기 때문에) 미지의 사용자로서 인식된다.
도 21d에 예시된 바와 같이, 음성 입력(2152c)이 음성 입력(2150b)(및/또는 2150a)을 발언한 사용자(예컨대, "Jane")와는 상이한 사용자(예컨대, "John")에 의해 발언되었다는 결정이 이루어졌기 때문에, 식당 스피커(1216)는 오디오 출력(2148d)(예컨대, "여기서 또는 거실 및 식당 그룹에서?)을 제공한다. 오디오 출력(2148d)은, 식당 스피커(1216)가, 스피커들 중 임의의 스피커가 미디어를 출력하도록 야기되기 전에 어디로 록 음악을 출력할지에 관한 확인을 요구한다는 것을 나타낸다. 특히, 오디오 출력(2148)은 오로지 식당 스피커(1216)에서(예컨대, "여기서") 또는 식당 스피커(1216), 거실 스피커(1246), 및 거실 스피커(1248)(예컨대, "식당 및 거실 그룹") 상에서 록 음악을 출력하도록 선택이 이루어질 수 있음을 나타낸다. 특히, 식당 스피커(1216)는, John이 자신의 음성 입력(예컨대, 디바이스 그룹 식별자를 갖지 않는 음성 입력(2152c))이 Jane의 음성 입력(예컨대, 음성 입력(2150b))에서의 동일한 스피커들의 그룹에 영향을 주도록 의도하는지 여부를 결정하는 것의 불확실성 때문에, 확인을 얻기 위해 오디오 출력(2148d)을 제공한다. 도 21d에서, 오디오 출력(2148d) 전 및 후에, 재즈 음악은 식당 및 거실 스피커들에 의해 계속해서 출력된다. 도 21d에서, 음성 입력(2152c)이 이전 음성 입력을 발언한 동일한 사용자(예컨대, "Jane")로부터 온 것이었다는 결정이 이루어진 경우, 록 음악은 식당 및 거실 스피커들에 의해 출력될 것이다.
도 21e에서, 식당 스피커(1216)는 이전 커맨드가 식당 스피커(1216)에만 적용되어야 함을 나타내는 음성 입력(2152d)("여기서")을 검출한다. 도 21f에 예시된 바와 같이, 음성 입력(2152d)을 검출하는 것에 응답하여, 식당 스피커(1216)는, 록 출력 표시자(2118a)에 의해 나타낸 바와 같이, 재즈 음악을 출력하는 것을 중지하고 록 음악을 출력하는 것을 시작하도록 야기된다. 특히, 도 21e에 예시된 바와 같이, 거실 스피커들(1246, 1248)은 음성 입력(2152d)이 검출되었기 때문에 (예컨대, 재즈 음악 표시자(2116b, 2116c)에 의해 나타낸 바와 같이) 재즈 음악을 계속해서 출력한다. 일부 실시예들에서, 이전 커맨드가 식당 및 거실 그룹에 적용되어야 함을 나타내는 음성 입력을 검출하는 것에 응답하여, 록 음악은 식당 및 거실 스피커들에 의해 출력되고 재즈 음악은 출력되지 않는다(예를 들어, 식당 및 거실 스피커들은 음악을 출력하는 것을 중지함).
도 21f에 예시된 바와 같이, 음성 입력(2152d)을 검출하는 것에 응답하여, 사용자 인터페이스(1770)는, 식당 및 거실이 현재 상이한 미디어를 출력하고 있고/있거나 동기화되지 않거나 동일한 그룹에 포함되지 않음을 반영하기 위해(예컨대, 도 17a 내지 도 17p와 관련하여 위에서 논의된 바와 같이), 거실(예컨대, 2182) 및 식당(예컨대, 2184)에 대한 별개의 그룹 어포던스들을 디스플레이한다 따라서, 사용자 인터페이스(1710)는 거실-및-식당 그룹 어포던스(2172)를 포함하지 않는다. 일부 실시예들에서, 음성 입력(2152)을 검출하는 것에 응답하여, 사용자 인터페이스(1710)는 자동으로 업데이트되어(예컨대, 사용자 인터페이스(1710) 상의 어떠한 사용자 입력도 없이), 별개의 식당 및 거실 그룹 어포던스들에 대응하는 출력 어포던스들을 디스플레이하고 거실-및-식당 그룹 어포던스(2172)에 대응하는 출력 어포던스의 디스플레이를 중지한다.
도 22a 내지 도 22f는 일부 실시예들에 따른, 음성 입력을 관리하기 위한 예시적인 사용자 인터페이스들을 예시한다. 특히 도 22a 내지 도 22f는 음성 입력이 다수의 사용자들로부터 검출되고 있고 검출된 음성 입력을 검출하는 것에 응답하여 타이머가 제어되는 시나리오를 입증한다. 이들 도면들의 사용자 인터페이스들은 도 18 및 도 23에 도시된 프로세스들을 포함하여 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다.
도 22a는 식당 스피커(1216)와 같은 다수의 디바이스들을 포함하는 집(1202)의 다이어그램을 예시한다. 도 22a에서, 디바이스들은 하나 이상의 속성들을 갖고, 도 12에서 전술된 바와 같이, 집(1202) 및/또는 집(1202)의 특정 방들에 할당된다. 도 22a에 예시된 바와 같이, Jane 및 John은 식당 스피커(1216) 주위에 위치된다. 도 22a에서, 식당 스피커(1216)는 음성 입력(2250a)(예컨대, Jane에 의해 발언된, "이봐 어시스턴트, 주방 타이머를 5분으로 설정해줘")을 검출한다. 여기서, 음성 입력(2150a)은 "주방"으로 명명된 타이머(예컨대, 주방 타이머)를 5분 동안 개시하라는 명령어에 대응한다.
도 22b에 예시된 바와 같이, 음성 입력(2250a)을 검출하는 것에 응답하여, 식당 스피커(1216)는 주방 타이머가 개시되게 한다. 또한, 식당 스피커(1216)는 주방 타이머가 개시되었음을 나타내기 위해 오디오 출력(2248b)을 제공한다.
도 22c에 예시된 바와 같이, 식당 스피커(1216)는 음성 입력(2250c)(예컨대, Jane에 의해 발언된, "타이머를 일시정지해줘")을 검출한다. 도 22c에서, 음성 입력(2250c)을 검출하는 것에 응답하여, (예컨대, 도 21b 내지 도 21d와 관련하여) 전술된 것들과 유사한 기법들을 사용하여, 음성 입력(2250c)이 음성 입력(2250a)과 동일한 사용자(예컨대, "Jane")에 의해 발언되었다는 결정이 이루어진다.
도 22d에 예시된 바와 같이, 음성 입력(2250c)이 동일한 사용자에 의해 발언되었다는 결정이 이루어지기 때문에, 식당 스피커(1216)는 주방 타이머가 일시정지되게 한다. 또한, 식당 스피커(1216)는 주방 타이머가 일시정지되었음을 나타내기 위해 오디오 출력(2248d)(예컨대, "주방 타이머를 일시정지했습니다")을 제공한다.
도 22e에 예시된 바와 같이, 식당 스피커(1216)는 음성 입력(2252e)(예컨대, John에 의해 발언된, "이봐 어시스턴트, 타이머를 재개해줘")을 검출한다. 도 22e에서, 음성 입력(2252e)을 검출하는 것에 응답하여, (예컨대, 도 21b 내지 도 21d와 관련하여) 전술된 것들과 유사한 기법들을 사용하여, 음성 입력(2252e)이 검출된 이전 음성 입력(예컨대, 음성 입력(2250c))을 발언한 사용자와는 상이한 사용자(예컨대, "John" 또는 Jane으로 식별되지 않은 사용자)에 의해 발언되었다는 결정이 이루어진다.
도 22f에 예시된 바와 같이, 음성 입력(2252e)이 상이한 사용자에 의해 발언되었다는 결정이 이루어지기 때문에, 식당 스피커(1216)는, 주방 타이머를 재개하지 않으면서(예컨대, 음성 입력(2252e)과 연관된 동작을 수행하지 않으면서) 오디오 출력(2248f)(예컨대, "Jane의 주방 타이머를 재개하시겠습니까")을 제공한다. 여기서, 오디오 출력(2248f)은, 상이한 사용자(예를 들어, "John")가, 원래 주방 타이머를 시작 또는 셋업한 사용자(예컨대, "Jane")에 의해 시작되었던 주방 타이머를 취소할 것을 의도하는지 여부에 관한 확인을 얻고자 한다. Jane이 음성 입력(2252e)과 동일한 단어들을 발언하는 실시예들에서, 주방 타이머는, 식당 스피커(1216)가 오디오 출력(2248f)을 제공하는 것 없이, 재개된다.
도 21a 내지 도 21f 및 도 22a 내지 도 22f에서 전술되고 논의된 것들과 유사한 기법들을 통합하는 하나 이상의 다른 시나리오들(예를 들어, 음악, 알람, 타이머, 네비게이션 등의 애플리케이션들과 관련된 시나리오들)이 실현될 수 있다. 예를 들어, 일부 실시예들에서, 식당 스피커(1216)는 6:00 AM으로 설정되는 "웨이크업"으로 명명된 알람(또는 타이머)을 개시하는 Jane으로부터의 음성 입력을 수신할 수 있다. 이들 실시예중 일부에서, 식당 스피커(1216)는 8:00 AM으로 설정되는 "웨이크업"으로 명명된 다른 알람(또는 타이머)을 개시하는 John으로부터의 후속 음성 입력을 수신할 수 있다. 제1 세트의 실시예들에서, 양측 알람들을 개시한 후, 식당 스피커(1216)는 Jane으로부터 웨이크업 알람을 취소하라는 음성 입력을 수신하고, 음성 입력을 수신하는 것에 응답하여 그리고 Jane은 이전 음성 입력을 제공하지 않았기 때문에(예컨대, John이 8:10으로 설정된 "웨이크업"으로 명명된 알람을 수행했음), 식당 스피커(1216)는 Jane이 Jane의 웨이크업 타이머 또는 John의 웨이크업 타이머를 취소하도록 의도하는지 여부를 확인하는 오디오 출력을 제공한다. 제2 세트의 실시예들에서, 양측 알람들을 개시한 후, 식당 스피커(1216)는 John으로부터 웨이크업 알람을 취소하라는 음성 입력을 수신하고, 음성 입력을 수신하는 것에 응답하여 그리고 John이 이전 음성 입력을 제공했기 때문에, 식당 스피커(1216)는 John이 개시한 타이머를 취소한다. 제3 세트의 실시예들에서, 양측 알람들을 개시한 후, 식당 스피커(1216)는 Jane 또는 John으로부터 웨이크업 알람을 취소하는 음성 입력을 수신하고, 음성 입력을 수신하는 것에 응답하여, 식당 스피커(1216)는, 확인하기 위한 출력을 제공하지 않으면서 음성 입력을 제공한 각자의 사용자에 의해 개시되었던 알람을 취소한다.
도 23은 일부 실시예들에 따른, 전자 디바이스를 사용하여 음성 입력을 관리하기 위한 방법을 예시하는 흐름도이다. 방법(2300)은 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템(예컨대, 100, 300, 500, 600, 또는 650)에서 수행된다. 방법(2300)의 일부 동작들은 선택적으로 조합되고, 일부 동작들의 순서들은 선택적으로 변경되며, 일부 동작들은 선택적으로 생략된다.
이하에서 기술되는 바와 같이, 방법(2300)은 음성 입력을 관리하기 위한 직관적인 방식을 제공한다. 본 방법은 음성 입력을 관리하는 것에 대한 사용자의 인지적 부담을 감소시키며, 그에 의해 더 효율적인 인간-기계 인터페이스를 생성한다. 배터리-작동형 컴퓨팅 디바이스들의 경우, 사용자가 재생을 더 빠르고 더 효율적으로 관리할 수 있게 하는 것은 전력을 절약하고 배터리 충전들 사이의 시간을 증가시킨다.
컴퓨터 시스템은, 제1 사용자(예컨대, 음성 인식 및/또는 인증을 통해 식별된 사용자)로부터, 동작(예컨대, 미디어 재생, 타이머 시작; 알람 시작)을 수행하기 위한 제1 요청(예컨대, 음성 요청; 자연 언어 요청; 발언)을 수신한다(2302). 일부 실시예들에서, 제1 요청은 컴퓨터 시스템에서 동작하거나 컴퓨터 시스템과 통신하는 디지털 어시스턴트에 의해 프로세싱된다.
컴퓨터 시스템은, 제1 요청에 응답하여, 제1 동작(예컨대, 2150a, 2114a 내지 2114c)의 수행(예컨대, 수행하는 것)을 개시하며(2304), 여기서 제1 동작은 적어도 제1 수행 파라미터(예컨대, 2150a)(예컨대, 동작을 수행하기 위한 하나 이상의 컴퓨터 시스템들의 세트(예컨대, "그룹 1", "모든 디바이스"), 사용자/요청자의 식별; 동작의 유형(예컨대, 미디어 재생, 타이머 시작), 가변 제어 수행(variable controlling performance)(예컨대, 미디어 재생의 경우, 미디어 식별자(예컨대, 클래식 음악, 록 음악, 특정 노래)))에 기초하여 수행된다. 일부 실시예들에서, 제1 요청은 제1 수행 파라미터를 포함한다(예를 들어, 요청은 "그룹 1에서 음악을 재생해줘"를 포함한다).
컴퓨터 시스템은, 제1 동작(예컨대, 2150a, 2114a 내지 2114c, 2248b)의 수행을 개시한 후(예컨대, 제1 동작의 수행이 진행 중인 동안), 컴퓨터 시스템은, 하나 이상의 입력 디바이스들을 통해, 동작(예컨대, 미디어 재생, 타이머 시작; 알람 시작)을 수행하기 위한 제2 요청(예컨대, 2150b, 2152c)(예컨대, 음성 요청; 자연 언어 요청; 발언)을 수신한다(2306).
제2 요청을 수신하는 것에 응답하여(2308), 그리고 제2 요청이 제1 사용자(예컨대, 2150b, 2250a)에 의해 이루어졌다는 결정에 따라 (예를 들어, 음성 인식에 기초하여), 컴퓨터 시스템은 제2 동작(예컨대, 2150b, 2114a 내지 2114c, 2248c, 2248d)(예컨대, 미디어 재생, 타이머 시작; 알람 시작)의 수행(예컨대, 수행하는 것)을 개시하며(2310), 여기서 제2 동작은 적어도 제1 수행 파라미터에 기초하여 수행된다. 일부 실시예들에서, 컴퓨터 시스템은, 제1 수행 파라미터가 제2 요청에 특정될 것을 요구하지 않으면서, 제2 동작의 수행을 위해, 제1 동작의 제1 수행 파라미터를 자동으로 채택한다.
제2 요청(예컨대, 2152c)을 수신하는 것에 응답하여(2308), 그리고 제2 요청이 제1 사용자와 상이한 제2 사용자(예컨대, 명시적으로 정의된 식별을 갖는 사용자(예컨대, 음성 인식을 통해 식별됨); 제1 사용자가 아닌 것으로 식별되지만, 특정 인식된 식별이 없는 사용자)에 의해 이루어졌다는 결정에 따라, 컴퓨터 시스템은 제1 동작(예컨대, 2116a 내지 2116c)과는 상이한 제3 동작(예컨대, 2248f)의 수행(예컨대, 수행하는 것)을 개시한다(2312). 요청이 제1 요청과 동일한 사용자에 의해 이루어지는지 여부에 기초하여 제2 요청에 응답하여 상이한 동작들을 수행하는 것은, 최적의 동작을 수행하는 데 필요한 사용자 입력들(예컨대, 제1 또는 제2 동작을 수행할지 여부를 정의하는 입력)의 수를 감소시킨다. 추가 사용자 입력을 요구하지 않고서 조건들의 세트가 충족될 때 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2 요청(예컨대, 2152c, 2150b, 2252e)은 제1 동작의 수행이 진행 중인 동안 수신된다. 일부 실시예들에서, 제1 동작(예컨대, 재생 동작의 결과로서 재생중인 음악)의 효과가 진행 중인 동안.
일부 실시예들에서, 제1 수행 파라미터(예컨대, 2152c, 2150b, 2252e, 2250c를 발언한 사람)는 제1 사용자의 아이덴티티이다. 사용자가 그들의 아이덴티티를 제공할 것을 요구하지 않고서, 제1 사용자의 아이덴티티에 기초하여 제1 및 제2 동작들 둘 모두를 수행하는 것은, 제1 및 제2 동작들을 수행하는 데 필요한 입력들의 수를 감소시킨다. 추가 사용자 입력을 요구하지 않고서 조건들의 세트가 충족될 때 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 컴퓨터 시스템은 하나 이상의 출력 디바이스들(예컨대, 오디오 생성 컴포넌트(예컨대, 스피커); 디스플레이 생성 컴포넌트)과 통신한다. 일부 실시예들에서, 제3 동작은, 제4 동작(예컨대, 미디어 재생, 타이머 시작; 알람 시작)을 수행할 하나 이상의 디바이스들의 세트(예컨대, 컴퓨터 시스템을 포함하는 디바이스들의 세트)를 식별하는 입력(예컨대, 오디오 입력)에 대한 요청(예컨대, 2148d, 2248f)(예컨대, 시각적 요청(예컨대, 텍스트 또는 그래픽); 오디오 요청(예컨대, 음성 구절))을 하나 이상의 출력 디바이스들을 통해 출력하는 것을 포함한다. 일부 실시예들에서, 제4 동작은 적어도 제2 수행 파라미터(예컨대, 제2 요청에 포함되었던 가변 제어 수행(예컨대, 미디어 재생의 경우, 미디어 식별자(예컨대, 클래식 음악, 록 음악, 특정 노래)))에 기초하여 수행된다. 동작을 수행할 디바이스들의 세트를 식별하는 입력에 대한 요청을 출력하는 것은, 잘못된 디바이스들의 세트에서 동작을 수행할 확률을 감소시킨다. 동작을 잘못 수행할 확률을 감소시키면서 동작을 수행하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 동작은 하나 이상의 디바이스들의 제1 세트(예컨대, 1216, 1246, 1248)(예컨대, 컴퓨터 시스템을 포함하는 디바이스들의 세트)에서 수행된다(예컨대, 그에 의해 수행된다). 일부 실시예들에서, 제4 동작(예컨대, 2118a)을 수행할 하나 이상의 디바이스들의 세트를 식별하는 입력에 대한 요청(예컨대, 2148d)을 출력한 후, 컴퓨터 시스템은, 하나 이상의 입력 디바이스들을 통해, 하나 이상의 디바이스들의 제1 세트와는 상이한 하나 이상의 디바이스들의 제2 세트(예컨대, 1216)(예컨대, 컴퓨터 시스템을 포함하는 디바이스들의 세트)를 식별하는 제1 입력(예컨대, 2152c, 2252e)을 수신한다. 일부 실시예들에서, 제1 입력을 수신하는 것에 응답하여, 컴퓨터 시스템은 하나 이상의 디바이스들의 제2 세트에서의 제4 동작의 수행을 개시한다. 출력된 요청 후에 수신된 입력에 의해 식별된 디바이스들의 제2 세트에서 제4 동작을 수행하는 것은, 제4 동작의 수행에 대한 추가의 제어를 사용자에게 제공한다. 추가의 제어를 사용자에게 제공하는 것은, (예컨대, 디바이스를 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 디바이스의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 디바이스를 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제1 동작의 수행을 개시한 후 그리고 제4 동작(예컨대, 2118a)의 수행을 개시하기 전에, 컴퓨터 시스템은 하나 이상의 디바이스들의 제1 세트(예컨대, 1216, 1246, 1248)의 멤버로서 적어도 제1 외부 디바이스(예컨대, 1216)(예컨대, 스마트 폰, 디지털 미디어 재생기, 개인용 컴퓨터)에 식별가능하다. 일부 실시예들에서, 제4 동작(예컨대, 2118a)의 수행을 개시한 후, 컴퓨터 시스템은 하나 이상의 디바이스들의 제2 세트의 멤버로서 적어도 제1 외부 디바이스(예컨대, 1216)에 식별가능하다. 일부 실시예들에서, 컴퓨터 시스템은 더 이상 하나 이상의 디바이스들의 제1 세트의 멤버로서 식별가능하지 않다. 컴퓨터 시스템의 식별가능한 멤버십을 수정하는 것은, 컴퓨터 시스템의 현재 멤버십에 대한 피드백을 사용자들에게 제공한다. 사용자들에게 개선된 피드백을 제공하는 것은, (예를 들어, 디바이스를 동작시킬 때/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적으로 만드는데, 이는 부가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용할 수 있게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제4 동작을 수행할 하나 이상의 디바이스들의 세트를 식별하는 입력에 대한 요청은 제4 동작을 수행하기 위한 가능한(예컨대, 그럴듯한, 예측된) 수행 파라미터(예컨대, "여기서" 또는 "이 디바이스에서")를 식별하는 것을 포함한다. 일부 실시예들에서, 제2 동작은 제1 요청을 수행하는 데 사용된 동일한 복수의 디바이스들을 사용하여 수행된다.
일부 실시예들에서, 제1 동작(예컨대, 2114a 내지 2114c)의 수행을 개시한 후(예컨대, 제1 동작의 수행이 진행 중인 동안), 컴퓨터 시스템은, 하나 이상의 입력 디바이스들을 통해, 동작(예컨대, 미디어 재생, 타이머 시작; 알람 시작)을 수행하기 위한 제3 요청(예컨대, 2150b)(예컨대, 음성 요청; 자연 언어 요청; 발언)을 수신한다. 제3 요청에 응답하여, 컴퓨터 시스템은 제5 동작(예컨대, 미디어 재생, 타이머 시작; 알람 시작)의 수행을 개시한다. 일부 실시예들에서, 제5 동작의 수행은 제4 요청을 수행한 사용자의 아이덴티티에 상관없이 발생한다(예컨대, 제5 동작은 상이한 사용자들에 대해 동일한 방식으로 수행된다). 사용자 아이덴티티와는 독립적인 소정 동작들을 수행하는 것은, 모든 사용자들에 걸쳐 일관되게 수행되는 소정 동작들을 사용자들에게 제공한다. 개선된 그리고/또는 추가의 제어 옵션들을 제공하는 것은, (예컨대, 컴퓨터 시스템을 작동시키고/그와 상호작용할 때 사용자가 적절한 입력들을 제공하는 것을 돕고 사용자 실수들을 감소시킴으로써) 컴퓨터 시스템의 작동성을 향상시키고 사용자-시스템 인터페이스를 더 효율적으로 만드는데, 이는 추가적으로, 사용자가 컴퓨터 시스템을 더 신속하고 효율적으로 사용하는 것을 가능하게 함으로써 컴퓨터 시스템의 전력 사용량을 감소시키고 배터리 수명을 개선시킨다.
일부 실시예들에서, 제2 요청이 제1 사용자와 상이한 제2 사용자에 의해 이루어졌다는 결정은 제2 사용자의 특정 아이덴티티의 결정을 포함한다. 일부 실시예들에서, 제2 요청은 음성 요청/발언이고, 식별은 음성 인식을 통해 이루어진다.
일부 실시예들에서, 제2 요청이 제1 사용자와는 상이한 제2 사용자에 의해 이루어졌다는 결정은 제2 사용자의 특정 아이덴티티의 결정을 포함하지 않는다(예컨대, 제2 요청은 제1 사용자 프로파일을 포함하여, 어떠한 사용자 프로파일과도 매칭되지 않는 사용자에 의해 이루어진다).
일부 실시예들에서, 제1 동작(및, 일부 실시예들에서, 또한 제2 동작)은 다음으로 이루어진 군으로부터 선택된다: 미디어(예컨대, 음악)를 재생하는 것(예컨대, 2114a 내지 2114c), 타이머를 시작하는 것(예컨대, 2248b), 알람을 시작하는 것, 및 내비게이션 명령어들을 제공하는 것.
방법(2300)(예컨대, 도 23)과 관련하여 전술된 프로세스들의 상세사항들은 또한 전술된 방법들과 유사한 방식으로 적용가능함에 유의한다. 예를 들어, 방법(1800)은, 선택적으로, 방법(2300)을 참조하여 전술된 다양한 방법들의 특성들 중 하나 이상을 포함한다. 예를 들어, 방법(1800)의 동작(1808)은 방법(2300)의 2304에 기술된 바와 같은 액션을 수행하기 위해 스피커들의 새로운 그룹을 생성하도록 수행될 수 있다. 간결함을 위해, 이러한 상세사항들은 이하에서 반복되지 않는다.
앞의 설명은, 설명의 목적을 위해, 특정 실시예들을 참조하여 기술되었다. 그러나, 상기의 예시적인 논의들은 본 발명을 개시된 정확한 형태들로 규명하거나 제한하려는 의도는 아니다. 많은 수정들 및 변형들이 상기 교시 내용들의 관점에서 가능하다. 실시예들은 기법들의 원리 및 그것들의 실제적인 응용을 가장 잘 설명하기 위하여 선택되고 기술되었다. 따라서, 당업자들은 고려된 특정 사용에 적합한 바와 같은 다양한 수정들을 사용하여 기법들 및 다양한 실시예들을 최상으로 활용하는 것이 가능하게 된다.
본 개시내용 및 예들이 첨부의 도면들을 참조하여 충분히 기술되었지만, 당업자들에게 다양한 변경들 및 수정들이 명백할 것이라는 것에 유의해야 한다. 그러한 변경들 및 수정들은 청구항들에 의해 정의되는 바와 같은 개시내용 및 예들의 범주 내에 포함되는 것으로 이해되어야 한다.
전술된 바와 같이, 본 기술의 일 양태는 오디오 미디어의 사용자들에게의 전달을 개선하기 위한, 다양한 소스들로부터 입수가능한 데이터의 수집 및 사용이다. 본 개시내용은, 일부 경우들에 있어서, 이러한 수집된 데이터가 특정 개인을 고유하게 식별하거나 또는 그와 연락하거나 그의 위치를 확인하는 데 이용될 수 있는 개인 정보 데이터를 포함할 수 있음을 고려한다. 그러한 개인 정보 데이터는 인구통계 데이터, 위치 기반 데이터, 전화 번호들, 이메일 주소들, 트위터 ID들, 집 주소들, 계정 정보 및/또는 오디오 미디어 서비스들(예컨대, 스트리밍 음악 서비스들)에 대한 사용자 선호도들, 사용자의 건강 또는 피트니스 레벨과 관련한 데이터 또는 기록들(예컨대, 바이탈 사인(vital sign) 측정치들, 약물 정보, 운동 정보), 생년월일, 또는 임의의 다른 식별 또는 개인 정보를 포함할 수 있다.
본 개시내용은 본 기술에서의 그러한 개인 정보 데이터의 이용이 사용자들에게 이득을 주기 위해 사용될 수 있음을 인식한다. 예를 들어, 개인 정보 데이터는 더 큰 관심이 있는 오디오 미디어를 사용자에게 제공하는 데 이용될 수 있다. 따라서, 그러한 개인 정보 데이터의 이용은 사용자들이 제공된 콘텐츠의 계산된 제어를 가능하게 한다. 게다가, 사용자에게 이득을 주는 개인 정보 데이터에 대한 다른 이용들이 또한 본 개시내용에 의해 고려된다. 예를 들어, 건강 및 피트니스 데이터는 사용자의 일반적인 웰니스(wellness)에 대한 식견들을 제공하는 데 사용될 수 있거나, 또는 웰니스 목표들을 추구하는 기술을 이용하는 개인들에게 긍정적인 피드백으로서 사용될 수 있다.
본 개시내용은 그러한 개인 정보 데이터의 수집, 분석, 공개, 전송, 저장, 또는 다른 이용을 담당하는 엔티티들이 잘 확립된 프라이버시 정책들 및/또는 프라이버시 관례들을 준수할 것이라는 것을 고려한다. 특히, 그러한 엔티티들은, 대체로 개인 정보 데이터를 사적이고 안전하게 유지시키기 위한 산업적 또는 행정적 요건들을 충족시키거나 넘어서는 것으로 인식되는 프라이버시 정책들 및 관례들을 구현하고 지속적으로 이용해야 한다. 그러한 정책들은 사용자들에 의해 쉽게 액세스가능해야 하고, 데이터의 수집 및/또는 이용이 변화함에 따라 업데이트되어야 한다. 사용자들로부터의 개인 정보는 엔티티의 적법하며 적정한 사용들을 위해 수집되어야 하고, 이들 적법한 사용들을 벗어나서 공유되거나 판매되지 않아야 한다. 또한, 그러한 수집/공유는 사용자들의 통지된 동의를 수신한 후에 발생해야 한다. 부가적으로, 그러한 엔티티들은 그러한 개인 정보 데이터에 대한 액세스를 보호하고 안전하게 하며 개인 정보 데이터에 대한 액세스를 갖는 다른 사람들이 그들의 프라이버시 정책들 및 절차들을 고수한다는 것을 보장하기 위한 임의의 필요한 단계들을 취하는 것을 고려해야 한다. 게다가, 그러한 엔티티들은 널리 인정된 프라이버시 정책들 및 관례들에 대한 그들의 고수를 증명하기 위해 제3자들에 의해 그들 자신들이 평가를 받을 수 있다. 추가로, 정책들 및 관례들은 수집되고/되거나 액세스되는 특정 유형들의 개인 정보 데이터에 대해 조정되고, 관할구역 특정 고려사항들을 비롯한 적용가능한 법률들 및 표준들에 적응되어야 한다. 예를 들어, 미국에서, 소정 건강 데이터의 수집 또는 그에 대한 액세스는 연방법 및/또는 주의 법, 예컨대 미국 건강 보험 양도 및 책임 법령(Health Insurance Portability and Accountability Act, HIPAA)에 의해 통제될 수 있는 반면; 다른 국가들에서의 건강 데이터는 다른 규정들 및 정책들의 적용을 받을 수 있고 그에 따라 취급되어야 한다. 따라서, 상이한 프라이버시 관례들은 각각의 국가의 상이한 개인 데이터 유형들에 대해 유지되어야 한다.
전술한 것에도 불구하고, 본 개시내용은 또한 사용자들이 개인 정보 데이터의 사용, 또는 그에 대한 액세스를 선택적으로 차단하는 실시예들을 고려한다. 즉, 본 개시내용은 그러한 개인 정보 데이터에 대한 액세스를 방지하거나 차단하기 위해 하드웨어 및/또는 소프트웨어 요소들이 제공될 수 있다는 것을 고려한다. 예를 들어, 스트리밍 오디오 서비스들의 경우에, 본 기술은 사용자들이 서비스를 위한 등록 중 또는 이후 임의의 시간에 개인 정보 데이터의 수집 시의 참여의 "동의함" 또는 "동의하지 않음"을 선택하는 것을 허용하도록 구성될 수 있다. 다른 예에서, 사용자들은 스트리밍 오디오 서비스들을 위한 사용자 선호도 또는 계정 정보를 제공하지 않도록 선택할 수 있다. 또 다른 예에서, 사용자들은 선호도 데이터가 유지되는 시간의 길이를 제한하거나 또는 기본 선호도 프로파일의 개발을 전적으로 금지하도록 선택할 수 있다. "동의" 및 "동의하지 않음" 옵션들을 제공하는 것에 더하여, 본 개시내용은 개인 정보의 액세스 또는 이용에 관한 통지들을 제공하는 것을 고려한다. 예를 들어, 사용자는 그들의 개인 정보 데이터가 액세스될 앱을 다운로드할 시에 통지받고, 이어서 개인 정보 데이터가 앱에 의해 액세스되기 직전에 다시 상기하게 될 수 있다.
더욱이, 의도하지 않은 또는 인가되지 않은 액세스 또는 사용의 위험요소들을 최소화하는 방식으로 개인 정보 데이터가 관리되고 다루어져야 한다는 것이 본 개시내용의 의도이다. 데이터의 수집을 제한하고 데이터가 더 이상 필요하지 않게 되면 데이터를 삭제함으로써 위험이 최소화될 수 있다. 추가로, 그리고 소정의 건강 관련 애플리케이션들을 비롯하여, 적용가능할 때, 사용자의 프라이버시를 보호하기 위해 데이터 비식별화가 사용될 수 있다. 적절한 경우, 특정 식별자들(예컨대, 생년월일 등)을 제거함으로써, 저장된 데이터의 양 또는 특이성을 제어함으로써(예컨대, 주소 수준이라기보다는 오히려 도시 수준에서 위치 데이터를 수집함으로써), 데이터가 저장되는 방식을 제어함으로써(예컨대, 사용자들에 걸쳐 데이터를 집계함으로써), 그리고/또는 다른 방법들에 의해, 비식별화가 용이하게 될 수 있다.
따라서, 본 개시내용이 하나 이상의 다양한 개시된 실시예들을 구현하기 위해 개인 정보 데이터의 사용을 광범위하게 커버하지만, 본 개시내용은 다양한 실시예들이 또한 그러한 개인 정보 데이터에 액세스할 필요 없이 구현될 수 있다는 것을 또한 고려한다. 즉, 본 기술의 다양한 실시예들은 그러한 개인 정보 데이터의 전부 또는 일부의 결여로 인해 동작불가능하게 되지는 않는다. 예를 들어, 오디오 콘텐츠는, 사용자와 연관된 디바이스에 의해 요청되는 콘텐츠, 오디오 콘텐츠 전달 서비스들에 대해 이용가능한 다른 비-개인 정보, 또는 공개적으로 입수가능한 정보와 같은 비-개인 정보 데이터 또는 최소량의 개인 정보에 기초하여 선호도를 추론함으로써 선택되고 사용자들에게 전달될 수 있다.

Claims (14)

  1. 방법으로서,
    디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템에서:
    상기 디스플레이 생성 컴포넌트를 통해, 사용자 인터페이스를 디스플레이하는 단계 - 상기 사용자 인터페이스는,
    하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 제1 선택가능한 사용자 인터페이스 객체;
    상기 하나 이상의 미디어 재생 디바이스들의 제1 세트와 상이한 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 제2 선택가능한 사용자 인터페이스 객체; 및
    상기 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함함 -;
    상기 사용자 인터페이스가 상기 표시를 포함하는 동안, 상기 제2 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 단계; 및
    상기 제2 선택가능한 사용자 인터페이스 객체의 상기 선택에 대응하는 상기 사용자 입력을 수신하는 것에 응답하여, 그리고 기준들의 세트가 충족된다는 결정에 따라 - 상기 기준들의 세트는, 상기 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시 및 상기 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시가 미리결정된 기간 동안 동시에 디스플레이될 때 만족되는 기준을 포함함 -:
    상기 사용자 인터페이스 내에, 상기 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 상기 하나 이상의 미디어 재생 디바이스들의 제2 세트를 포함하는 하나 이상의 미디어 재생 디바이스들의 제3 세트를 제어하기 위한 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 단계; 및
    상기 제1 선택가능한 사용자 인터페이스 객체 및 상기 제2 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 중지하는 단계를 포함하는, 방법.
  2. 제1항에 있어서,
    상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 상기 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제1 사용자 입력을 수신하는 단계; 및
    상기 제3 선택가능한 사용자 인터페이스 객체의 상기 선택에 대응하는 상기 제1 사용자 입력을 수신하는 것에 응답하여:
    상기 사용자 인터페이스가, 상기 제3 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 포함하는 것에 따라, 상기 제3 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 상기 사용자 인터페이스 내에 디스플레이하는 것을 중지하는 단계; 및
    상기 사용자 인터페이스가, 상기 제3 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 포함하지 않는 것에 따라, 상기 제3 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 상기 사용자 인터페이스 내에 디스플레이하는 단계를 추가로 포함하는, 방법.
  3. 제1항에 있어서,
    상기 제1 선택가능한 사용자 인터페이스 객체는 상기 하나 이상의 미디어 재생 디바이스들의 제1 세트와 연관된 식별자를 포함하고;
    상기 제2 선택가능한 사용자 인터페이스 객체는 상기 하나 이상의 미디어 재생 디바이스들의 제2 세트와 연관된 식별자를 포함하고;
    상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 단계는 상기 하나 이상의 미디어 재생 디바이스들의 제3 세트와 연관된 식별자를 디스플레이하는 단계를 포함하고, 상기 하나 이상의 미디어 재생 디바이스들의 제3 세트와 연관된 식별자는 상기 하나 이상의 미디어 재생 디바이스들의 제1 세트와 연관된 식별자를 나타내는 부분 및 상기 하나 이상의 미디어 재생 디바이스들의 제2 세트와 연관된 식별자를 나타내는 부분을 포함하는, 방법.
  4. 제1항에 있어서,
    상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 상기 제3 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 제2 사용자 입력을 수신하는 단계; 및
    상기 제3 선택가능한 사용자 인터페이스 객체의 상기 선택에 대응하는 상기 제2 사용자 입력을 수신하는 것에 응답하여:
    상기 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 상기 제1 선택가능한 사용자 인터페이스 객체, 및 상기 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 디스플레이하는 단계; 및
    상기 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 상기 제2 선택가능한 사용자 인터페이스 객체, 및 상기 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
  5. 제4항에 있어서,
    상기 하나 이상의 미디어 재생 디바이스들의 제1 세트를 제어하기 위한 상기 제1 선택가능한 사용자 인터페이스 객체, 및 상기 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 디스플레이하고, 그리고 상기 하나 이상의 미디어 재생 디바이스들의 제2 세트를 제어하기 위한 상기 제2 선택가능한 사용자 인터페이스 객체, 및 상기 제2 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 디스플레이하는 동안, 상기 제1 선택가능한 사용자 인터페이스 객체의 하나 이상의 선택들에 대응하는 하나 이상의 사용자 입력들을 수신하는 단계; 및
    상기 하나 이상의 사용자 입력들을 수신하는 것에 응답하여:
    상기 제1 선택가능한 사용자 인터페이스 객체의 상기 하나 이상의 선택들 중 마지막 선택이 상기 컴퓨터 시스템으로 하여금 상기 제1 선택가능한 사용자 인터페이스 객체가 선택된다는 상기 표시를 디스플레이하는 것을 중지하게 했다는 결정에 따라, 상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하지 않으면서 상기 제1 선택가능한 사용자 인터페이스 객체 및 상기 제2 선택가능한 사용자 인터페이스 객체를 계속해서 디스플레이하는 단계를 포함하는, 방법.
  6. 제1항에 있어서,
    상기 사용자 인터페이스는 하나 이상의 미디어 재생 디바이스들의 제4 세트를 제어하기 위한 제4 선택가능한 사용자 인터페이스 객체를 포함하고;
    상기 방법은,
    상기 제3 선택가능한 사용자 인터페이스 객체 및 상기 제4 선택가능한 사용자 인터페이스 객체를 디스플레이하는 동안, 상기 제4 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 사용자 입력을 수신하는 단계; 및
    상기 제4 선택가능한 사용자 인터페이스 객체의 선택에 대응하는 상기 사용자 입력을 수신하는 것에 응답하여:
    상기 사용자 인터페이스 내에, 상기 하나 이상의 미디어 재생 디바이스들의 제1 세트, 상기 하나 이상의 미디어 재생 디바이스들의 제2 세트, 및 상기 하나 이상의 미디어 재생 디바이스들의 제4 세트를 제어하기 위한 제5 선택가능한 사용자 인터페이스 객체를 디스플레이하는 단계; 및
    상기 제3 선택가능한 사용자 인터페이스 객체 및 상기 제4 선택가능한 사용자 인터페이스 객체를 디스플레이하는 것을 중지하는 단계를 추가로 포함하는, 방법.
  7. 제1항에 있어서,
    상기 제2 선택가능한 사용자 인터페이스 객체의 상기 선택에 대응하는 상기 사용자 입력을 수신하는 것에 응답하여, 상기 컴퓨터 시스템과 상이한 제2 컴퓨터 시스템으로, 상기 제1 선택가능한 사용자 인터페이스 객체 및 상기 제2 선택가능한 사용자 인터페이스 객체의 그룹화를 나타내는 그룹화 정보를 송신하는 단계를 추가로 포함하는, 방법.
  8. 제1항에 있어서,
    상기 사용자 인터페이스 내에, 상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이한 후, 상기 하나 이상의 미디어 재생 디바이스들의 제1 세트가 상기 컴퓨터 시스템에 연결되어 있다는 표시에 대응하는 데이터를 수신하는 단계; 및
    상기 데이터를 수신하는 것에 응답하여, 상기 하나 이상의 미디어 재생 디바이스들의 제1 세트 및 상기 하나 이상의 미디어 재생 디바이스들의 제2 세트가 상기 컴퓨터 시스템에 연결되어 있음을 나타내는 통지를 디스플레이하는 단계를 추가로 포함하는, 방법.
  9. 제1항에 있어서,
    상기 사용자 인터페이스를 디스플레이하는 동안, 상기 사용자 인터페이스 상의 제1 위치에서 사용자 입력을 수신하는 단계; 및
    상기 사용자 인터페이스 상의 상기 제1 위치에서 상기 사용자 입력을 수신하는 것에 응답하여, 상기 디스플레이 생성 컴포넌트를 통해, 상기 하나 이상의 입력 디바이스들을 통해 선택될 때, 미디어를 재생하고 있는 하나 이상의 외부 미디어 재생 디바이스들로 하여금 미디어 재생 동작을 수정하게 하는 선택가능한 사용자 인터페이스 객체를 포함하는 제2 사용자 인터페이스를 디스플레이하는 단계를 추가로 포함하는, 방법.
  10. 제1항에 있어서, 상기 사용자 인터페이스를 디스플레이하는 동안, 상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하는 단계는, 상기 제3 선택가능한 사용자 인터페이스 객체를 디스플레이하기 전에,
    상기 제1 선택가능한 사용자 인터페이스 객체의 제1 부분; 및
    상기 제2 선택가능한 사용자 인터페이스 객체의 제1 부분
    을 포함하는 단일 사용자 인터페이스 객체를 디스플레이하는 단계를 포함하는, 방법.
  11. 제1항에 있어서,
    상기 제2 선택가능한 사용자 인터페이스 객체의 상기 선택에 대응하는 상기 사용자 입력을 수신한 후, 상기 제3 선택가능한 사용자 인터페이스 객체를 확인하기 위한 선택가능한 사용자 인터페이스 객체를 디스플레이하는 단계를 추가로 포함하는, 방법.
  12. 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 제1항 내지 제11항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 판독가능 저장 매체.
  13. 디스플레이 생성 컴포넌트 및 하나 이상의 입력 디바이스들과 통신하는 컴퓨터 시스템으로서,
    하나 이상의 프로세서들; 및
    상기 하나 이상의 프로세서들에 의해 실행되도록 구성된 하나 이상의 프로그램들을 저장하는 메모리를 포함하고,
    상기 하나 이상의 프로그램들은 제1항 내지 제11항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는, 컴퓨터 시스템.
  14. 삭제
KR1020237008877A 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스 KR102656129B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020247011347A KR20240049648A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
US201962855852P 2019-05-31 2019-05-31
US62/855,852 2019-05-31
US16/584,490 US11010121B2 (en) 2019-05-31 2019-09-26 User interfaces for audio media control
US16/583,989 2019-09-26
US16/584,490 2019-09-26
US16/583,989 US10996917B2 (en) 2019-05-31 2019-09-26 User interfaces for audio media control
US202063032603P 2020-05-30 2020-05-30
US63/032,603 2020-05-30
PCT/US2020/035488 WO2020243691A1 (en) 2019-05-31 2020-05-31 User interfaces for audio media control
KR1020227006175A KR20220027295A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020227006175A Division KR20220027295A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020247011347A Division KR20240049648A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스

Publications (2)

Publication Number Publication Date
KR20230039775A KR20230039775A (ko) 2023-03-21
KR102656129B1 true KR102656129B1 (ko) 2024-04-11

Family

ID=73551508

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020237008877A KR102656129B1 (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스
KR1020227006175A KR20220027295A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스
KR1020247011347A KR20240049648A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스
KR1020217035472A KR102436985B1 (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스

Family Applications After (3)

Application Number Title Priority Date Filing Date
KR1020227006175A KR20220027295A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스
KR1020247011347A KR20240049648A (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스
KR1020217035472A KR102436985B1 (ko) 2019-05-31 2020-05-31 오디오 미디어 제어를 위한 사용자 인터페이스

Country Status (7)

Country Link
US (3) US11620103B2 (ko)
EP (3) EP4231124A1 (ko)
JP (3) JP7075547B2 (ko)
KR (4) KR102656129B1 (ko)
CN (4) CN117170620A (ko)
AU (4) AU2020282362B2 (ko)
WO (1) WO2020243691A1 (ko)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10705701B2 (en) 2009-03-16 2020-07-07 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
EP4365725A2 (en) 2014-05-30 2024-05-08 Apple Inc. Continuity
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
EP4050467A1 (en) 2014-09-02 2022-08-31 Apple Inc. Phone user interface
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
EP3788775B1 (en) * 2018-05-02 2021-09-22 Telefonaktiebolaget LM Ericsson (publ) User equipment, method by a user equipment, and network node
USD898759S1 (en) * 2019-01-04 2020-10-13 Apple Inc. Display screen or portion thereof with animated graphical user interface
EP4231124A1 (en) 2019-05-31 2023-08-23 Apple Inc. User interfaces for audio media control
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
KR20210042520A (ko) * 2019-10-10 2021-04-20 삼성전자주식회사 전자 장치 및 이의 제어 방법
CN111225266B (zh) * 2020-02-25 2022-03-15 上海哔哩哔哩科技有限公司 用户界面交互方法和系统
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11553618B2 (en) 2020-08-26 2023-01-10 PassiveLogic, Inc. Methods and systems of building automation state load and user preference via network systems activity
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
CN112860164B (zh) * 2021-01-22 2022-02-08 璞真生活有限公司 香薰机的控制方法、控制装置、移动终端及存储介质
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
KR20230023212A (ko) * 2021-08-10 2023-02-17 삼성전자주식회사 상태 변경에 따라 음성 명령 처리 결과를 출력하는 전자 장치 및 그의 동작 방법
WO2023049023A1 (en) * 2021-09-24 2023-03-30 Apple Inc. Media controls user interface
CN114564265B (zh) * 2021-12-22 2023-07-25 上海小度技术有限公司 有屏智能设备的交互方法、装置以及电子设备
US11546323B1 (en) 2022-08-17 2023-01-03 strongDM, Inc. Credential management for distributed services
US11736531B1 (en) 2022-08-31 2023-08-22 strongDM, Inc. Managing and monitoring endpoint activity in secured networks
US11765159B1 (en) 2022-09-28 2023-09-19 strongDM, Inc. Connection revocation in overlay networks
US11698700B1 (en) * 2022-11-15 2023-07-11 Jackpocket Inc. Systems and methods for automated interaction with a touch-screen device
US11916885B1 (en) 2023-01-09 2024-02-27 strongDM, Inc. Tunnelling with support for dynamic naming resolution
US11765207B1 (en) * 2023-03-17 2023-09-19 strongDM, Inc. Declaring network policies using natural language

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160299669A1 (en) 2014-09-02 2016-10-13 Sonos, Inc. Location Based Playback System Control
US20160360344A1 (en) 2015-06-04 2016-12-08 Lg Electronics Inc. Location based reminder system and method for controlling the same
US20170357420A1 (en) 2016-06-12 2017-12-14 Apple Inc. Device, Method, and Graphical User Interface for Media Playback
US20180335903A1 (en) 2017-05-16 2018-11-22 Apple Inc. Methods and interfaces for home media control

Family Cites Families (1479)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5347628A (en) 1990-01-18 1994-09-13 International Business Machines Corporation Method of graphically accessing electronic data
JP2516287B2 (ja) 1990-05-31 1996-07-24 インターナショナル・ビジネス・マシーンズ・コーポレイション デ―タ表示方法及び装置
US5202961A (en) 1990-06-08 1993-04-13 Apple Computer, Inc. Sequential information controller
US5305435A (en) 1990-07-17 1994-04-19 Hewlett-Packard Company Computer windows management system and method for simulating off-screen document storage and retrieval
JPH04258090A (ja) 1991-02-13 1992-09-14 Hitachi Ltd 映像同期処理方法および装置
FR2693810B1 (fr) 1991-06-03 1997-01-10 Apple Computer Systemes d'interfaces d'utilisateurs a acces direct a une zone secondaire d'affichage.
EP0526064B1 (en) 1991-08-02 1997-09-10 The Grass Valley Group, Inc. Video editing system operator interface for visualization and interactive control of video material
US6061062A (en) 1991-12-20 2000-05-09 Apple Computer, Inc. Zooming controller
WO1993014454A1 (en) 1992-01-10 1993-07-22 Foster-Miller, Inc. A sensory integrated data interface
JPH05266169A (ja) 1992-03-24 1993-10-15 Toshiba Corp 画像処理装置
US5999173A (en) 1992-04-03 1999-12-07 Adobe Systems Incorporated Method and apparatus for video editing with video clip representations displayed along a time line
US5682326A (en) 1992-08-03 1997-10-28 Radius Inc. Desktop digital video processing system
US5404316A (en) 1992-08-03 1995-04-04 Spectra Group Ltd., Inc. Desktop digital video processing system
US5754174A (en) 1992-08-27 1998-05-19 Starfish Software, Inc. User interface with individually configurable panel interfaces for use in a computer system
CA2151581C (en) 1992-12-17 2000-09-05 Lucas Longginou An information transmission system for increasing the effective rate of transfer of information
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
JPH0728689A (ja) 1993-07-09 1995-01-31 Hitachi Ltd 情報処理装置
US5758180A (en) 1993-04-15 1998-05-26 Sony Corporation Block resizing function for multi-media editing which moves other blocks in response to the resize only as necessary
KR0132749B1 (ko) 1993-08-05 1998-04-24 가나이 쯔또무 아이콘 메뉴 표시장치 및 아이콘 메뉴 표시방법
US5557724A (en) 1993-10-12 1996-09-17 Intel Corporation User interface, method, and apparatus selecting and playing channels having video, audio, and/or text streams
JPH07219970A (ja) 1993-12-20 1995-08-18 Xerox Corp 加速フォーマットでの再生方法及び再生装置
JP3546337B2 (ja) 1993-12-21 2004-07-28 ゼロックス コーポレイション 計算システム用ユーザ・インタフェース装置及びグラフィック・キーボード使用方法
US5513342A (en) 1993-12-28 1996-04-30 International Business Machines Corporation Display window layout system that automatically accommodates changes in display resolution, font size and national language
US5521841A (en) 1994-03-31 1996-05-28 Siemens Corporate Research, Inc. Browsing contents of a given video sequence
US5487143A (en) 1994-04-06 1996-01-23 Altera Corporation Computer user interface having tiled and overlapped window areas
CA2124028C (en) 1994-05-20 2000-07-25 Derek Kent William Smith Directional actuator for electronic media navigation
US5568603A (en) 1994-08-11 1996-10-22 Apple Computer, Inc. Method and system for transparent mode switching between two different interfaces
US5614940A (en) 1994-10-21 1997-03-25 Intel Corporation Method and apparatus for providing broadcast information with indexing
US5495566A (en) 1994-11-22 1996-02-27 Microsoft Corporation Scrolling contents of a window
JPH08147138A (ja) 1994-11-24 1996-06-07 Taito Corp 情報提供装置
JPH08166783A (ja) 1994-12-13 1996-06-25 Hitachi Ltd 情報処理装置
US5611060A (en) 1995-02-22 1997-03-11 Microsoft Corporation Auto-scrolling during a drag and drop operation
US5657246A (en) 1995-03-07 1997-08-12 Vtel Corporation Method and apparatus for a video conference user interface
AU5442796A (en) 1995-04-06 1996-10-23 Avid Technology, Inc. Graphical multimedia authoring system
US6496182B1 (en) 1995-06-07 2002-12-17 Microsoft Corporation Method and system for providing touch-sensitive screens for the visually impaired
US6108704A (en) 1995-09-25 2000-08-22 Netspeak Corporation Point-to-point internet protocol
JP3597647B2 (ja) 1995-09-29 2004-12-08 株式会社東芝 符号化方法及び装置
JP3786294B2 (ja) 1995-10-02 2006-06-14 ソニー株式会社 画像制御装置および方法
US5732184A (en) 1995-10-20 1998-03-24 Digital Processing Systems, Inc. Video and audio cursor video editing system
US5760767A (en) 1995-10-26 1998-06-02 Sony Corporation Method and apparatus for displaying in and out points during video editing
US20020002562A1 (en) 1995-11-03 2002-01-03 Thomas P. Moran Computer controlled display system using a graphical replay device to control playback of temporal data representing collaborative activities
US5778053A (en) 1995-12-21 1998-07-07 Intel Corporation Answering machine services for data conferences
US5864868A (en) 1996-02-13 1999-01-26 Contois; David C. Computer control system and user interface for media playing devices
JP3591120B2 (ja) 1996-03-19 2004-11-17 富士通株式会社 メニュー画面制御装置
JP2003264621A (ja) 1996-04-26 2003-09-19 Mitsubishi Electric Corp 携帯情報端末装置
US5880733A (en) 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
US5793366A (en) 1996-11-12 1998-08-11 Sony Corporation Graphical display of an animated data stream between devices on a bus
US6006227A (en) 1996-06-28 1999-12-21 Yale University Document stream operating system
JPH1091281A (ja) 1996-08-19 1998-04-10 Internatl Business Mach Corp <Ibm> 情報処理機器
JPH1066008A (ja) 1996-08-23 1998-03-06 Kokusai Denshin Denwa Co Ltd <Kdd> 動画像検索編集装置
US6407757B1 (en) 1997-12-18 2002-06-18 E-Book Systems Pte Ltd. Computer-based browsing method and computer program product for displaying information in an electronic book form
US5760772A (en) 1996-08-30 1998-06-02 Novell, Inc. Method for automatically resizing a child window
US6140987A (en) 1996-09-18 2000-10-31 Intellinet, Inc. User interface for home automation system
FI111674B (fi) 1996-10-31 2003-08-29 Nokia Corp Käyttäjäliityntä
US6115037A (en) 1996-11-15 2000-09-05 Hitachi Denshi Kabushiki Kaisha Motion image control method and apparatus
US6544295B1 (en) 1996-11-18 2003-04-08 Starfish Software, Inc. Methods for managing preferred internet sites in a computer system having a browser
US5936623A (en) 1996-11-18 1999-08-10 International Business Machines Corporation Method and apparatus for selecting a particular object from among a large number of objects
US5815153A (en) 1996-11-20 1998-09-29 International Business Machines Corporation Multifunction control with changeable appearance
US6175922B1 (en) 1996-12-04 2001-01-16 Esign, Inc. Electronic transaction systems and methods therefor
JPH10198517A (ja) 1997-01-10 1998-07-31 Tokyo Noukou Univ 表示装置の表示内容制御方法
WO1998035468A2 (en) 1997-01-27 1998-08-13 Benjamin Slotznick System for delivering and displaying primary and secondary information
US20010038391A1 (en) 1997-01-28 2001-11-08 Hideo Fukuchi Information display apparatus
JPH10232757A (ja) 1997-02-19 1998-09-02 Sharp Corp メディア選択装置
US5872566A (en) 1997-02-21 1999-02-16 International Business Machines Corporation Graphical user interface method and system that provides an inertial slider within a scroll bar
US5874958A (en) 1997-03-31 1999-02-23 Sun Microsystems, Inc. Method and apparatus for accessing information and items across workspaces
CA2202106C (en) 1997-04-08 2002-09-17 Mgi Software Corp. A non-timeline, non-linear digital multimedia composition method and system
US6031529A (en) 1997-04-11 2000-02-29 Avid Technology Inc. Graphics design software user interface
US6362837B1 (en) 1997-05-06 2002-03-26 Michael Ginn Method and apparatus for simultaneously indicating rating value for the first document and display of second document in response to the selection
FI115689B (fi) 1997-05-21 2005-06-15 Nokia Corp Menetelmä ja järjestely matkaviestimen näytöllä esitettävän tiedon vierittämiseksi
JP3624626B2 (ja) 1997-05-28 2005-03-02 ソニー株式会社 情報処理装置および方法、並びに記録媒体
GB9715256D0 (en) 1997-07-21 1997-09-24 Rank Xerox Ltd Token-based docement transactions
EP1014257A4 (en) 1997-08-12 2000-10-04 Matsushita Electric Ind Co Ltd WINDOW DISPLAY DEVICE
US6166736A (en) 1997-08-22 2000-12-26 Natrificial Llc Method and apparatus for simultaneously resizing and relocating windows within a graphical display
DE19743551C1 (de) 1997-10-01 1999-02-11 Siemens Ag Verfahren zum Einlesen eines Datenwertes
US6393462B1 (en) 1997-11-13 2002-05-21 International Business Machines Corporation Method and apparatus for automatic downloading of URLs and internet addresses
EP0962074B1 (en) 1997-11-25 2012-12-19 Motorola Mobility LLC Audio content player methods, systems, and articles of manufacture
JP2000101879A (ja) 1998-09-25 2000-04-07 Canon Inc 撮像装置
GB2333215B (en) 1998-01-13 2002-05-08 Sony Electronics Inc Systems and methods for enabling manipulation of a plurality of graphic images on a display screen
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
EP0932325B1 (en) 1998-01-23 2005-04-27 Onkyo Corporation Apparatus and method for localizing sound image
CA2318815C (en) 1998-01-26 2004-08-10 Wayne Westerman Method and apparatus for integrating manual input
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US6308187B1 (en) 1998-02-09 2001-10-23 International Business Machines Corporation Computer system and method for abstracting and accessing a chronologically-arranged collection of information
FI980427A (fi) 1998-02-25 1999-08-26 Ericsson Telefon Ab L M Menetelmä, järjestely ja laite todentamiseen
US6351765B1 (en) 1998-03-09 2002-02-26 Media 100, Inc. Nonlinear video editing system
US6236400B1 (en) 1998-04-02 2001-05-22 Sun Microsystems, Inc. Method and apparatus for controlling the display of hierarchical information
US6118450A (en) 1998-04-03 2000-09-12 Sony Corporation Graphic user interface that is usable as a PC interface and an A/V interface
US6393430B1 (en) 1998-05-08 2002-05-21 Sony Corporation Method and system for automatically recording music data files by using the hard drive of a personal computer as an intermediate storage medium
US6446080B1 (en) 1998-05-08 2002-09-03 Sony Corporation Method for creating, modifying, and playing a custom playlist, saved as a virtual CD, to be played by a digital audio/visual actuator device
JPH11338600A (ja) 1998-05-26 1999-12-10 Yamatake Corp 設定数値変更方法および設定数値変更装置
US6584479B2 (en) 1998-06-17 2003-06-24 Xerox Corporation Overlay presentation of textual and graphical annotations
US7831930B2 (en) 2001-11-20 2010-11-09 Universal Electronics Inc. System and method for displaying a user interface for a remote control application
JP2000105772A (ja) 1998-07-28 2000-04-11 Sharp Corp 情報管理装置
US6366296B1 (en) 1998-09-11 2002-04-02 Xerox Corporation Media browser using multimodal analysis
US6317784B1 (en) 1998-09-29 2001-11-13 Radiowave.Com, Inc. Presenting supplemental information for material currently and previously broadcast by a radio station
JP3123990B2 (ja) 1998-10-05 2001-01-15 埼玉日本電気株式会社 携帯無線端末
JP3580710B2 (ja) 1998-10-15 2004-10-27 松下電器産業株式会社 分散型インターネットブラウザシステムとその表示方法
US6452609B1 (en) 1998-11-06 2002-09-17 Supertuner.Com Web application for accessing media streams
JP2000163193A (ja) 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
US6178403B1 (en) 1998-12-16 2001-01-23 Sharp Laboratories Of America, Inc. Distributed voice capture and recognition system
US20020048224A1 (en) 1999-01-05 2002-04-25 Dygert Timothy W. Playback device having text display and communication with remote database of titles
JP2000209324A (ja) 1999-01-12 2000-07-28 Nec Corp 宛先発信制御システムおよび宛先発信制御方法
US20020059295A1 (en) 1999-01-29 2002-05-16 Harold Aaron Ludtke Method and system for distributed queues in a multimedia network
JP2000284879A (ja) 1999-01-29 2000-10-13 Square Co Ltd ゲーム装置、ビデオゲームにおけるコマンド入力方法、及び、その方法を実現するためのプログラムを記録したコンピュータ読み取り可能な記録媒体
EP1028570B1 (en) 1999-02-11 2004-11-17 Sony International (Europe) GmbH Terminal for wireless telecommunication and method for displaying icons on a display of such a terminal
JP3921865B2 (ja) 1999-03-11 2007-05-30 カシオ計算機株式会社 データ処理システムおよびそのプログラム記録媒体
US6456305B1 (en) 1999-03-18 2002-09-24 Microsoft Corporation Method and system for automatically fitting a graphical display of objects to the dimensions of a display window
US6590594B2 (en) 1999-03-25 2003-07-08 International Business Machines Corporation Window scroll-bar
US6847778B1 (en) 1999-03-30 2005-01-25 Tivo, Inc. Multimedia visual progress indication system
US6538665B2 (en) 1999-04-15 2003-03-25 Apple Computer, Inc. User interface for presenting media information
US6515681B1 (en) 1999-05-11 2003-02-04 Prophet Financial Systems, Inc. User interface for interacting with online message board
US6369835B1 (en) 1999-05-18 2002-04-09 Microsoft Corporation Method and system for generating a movie file from a slide show presentation
GB2350523B (en) 1999-05-26 2003-11-26 Nokia Mobile Phones Ltd Communication device
JP4021589B2 (ja) 1999-06-07 2007-12-12 株式会社日立製作所 データ管理方法及びその実施装置
JP5405704B2 (ja) 1999-06-18 2014-02-05 イーチャージ コーポレーション 仮想支払アカウントを用いてインターネットワークを介して商品、サービス及びコンテンツを注文する方法及び装置
US6553345B1 (en) 1999-08-26 2003-04-22 Matsushita Electric Industrial Co., Ltd. Universal remote control allowing natural language modality for television and multimedia searches and requests
US6976229B1 (en) 1999-12-16 2005-12-13 Ricoh Co., Ltd. Method and apparatus for storytelling with digital photographs
WO2001053963A1 (en) 2000-01-24 2001-07-26 Zapmedia, Inc. System and method for the distribution and sharing of media assets between media players devices
JP2001202176A (ja) 2000-01-24 2001-07-27 Casio Comput Co Ltd 情報表示装置、情報表示プログラムが記録された記録媒体
US6539343B2 (en) 2000-02-03 2003-03-25 Xerox Corporation Methods for condition monitoring and system-level diagnosis of electro-mechanical systems with multiple actuating components operating in multiple regimes
US7240296B1 (en) 2000-02-11 2007-07-03 Microsoft Corporation Unified navigation shell user interface
US20010049627A1 (en) 2000-02-29 2001-12-06 Simpson William E. Method and system for distribution of electronic coupons
DE60125079T2 (de) 2000-03-10 2007-04-19 Nokia Corp. Nähezustand basierte Service-Anpassung
US20010039497A1 (en) 2000-03-30 2001-11-08 Hubbard Edward A. System and method for monitizing network connected user bases utilizing distributed processing systems
US6674452B1 (en) 2000-04-05 2004-01-06 International Business Machines Corporation Graphical user interface to query music by examples
US20010030667A1 (en) 2000-04-10 2001-10-18 Kelts Brett R. Interactive display interface for information objects
JP4434424B2 (ja) 2000-04-18 2010-03-17 株式会社ルネサステクノロジ ホームエレクトロニクスシステム、ホームサーバ装置およびコンピュータをホームサーバ装置として機能させるためのプログラムを記録したコンピュータ読取可能な記録媒体
JP4325075B2 (ja) 2000-04-21 2009-09-02 ソニー株式会社 データオブジェクト管理装置
WO2001082086A1 (fr) 2000-04-24 2001-11-01 Matsushita Electric Industrial Co., Ltd. Dispositif de definition de droit d'acces et terminal gestionnaire
JP4042340B2 (ja) 2000-05-17 2008-02-06 カシオ計算機株式会社 情報機器
JP2001331758A (ja) 2000-05-22 2001-11-30 Sumisho Computer Systems Corp 認証ワークフローシステム、認証サーバ装置、決裁に関する認証方法、記録媒体
US6879322B2 (en) 2000-05-30 2005-04-12 Fujitsu Limited Three-dimensional object display system, three-dimensional object display method and recording medium recording a three-dimensional object display program
US7451389B2 (en) 2000-06-06 2008-11-11 Microsoft Corporation Method and system for semantically labeling data and providing actions based on semantically labeled data
US7240297B1 (en) 2000-06-12 2007-07-03 International Business Machines Corporation User assistance system
US6714233B2 (en) 2000-06-21 2004-03-30 Seiko Epson Corporation Mobile video telephone system
EP1212885B1 (en) 2000-06-21 2009-04-29 Seiko Epson Corporation Mobile telephone and radio communication device cooperatively processing incoming call
US6477117B1 (en) 2000-06-30 2002-11-05 International Business Machines Corporation Alarm interface for a smart watch
US6556222B1 (en) 2000-06-30 2003-04-29 International Business Machines Corporation Bezel based input mechanism and user interface for a smart watch
SE517484C2 (sv) 2000-06-30 2002-06-11 Nokia Corp Föräldrakontroll av anordningar som levererar mediainnehåll
US7081905B1 (en) 2000-06-30 2006-07-25 International Business Machines Corporation Method and apparatus for dynamically controlling scroller speed employed for a user interface of a wearable appliance
US6677965B1 (en) 2000-07-13 2004-01-13 International Business Machines Corporation Rubber band graphical user interface control
US6745186B1 (en) 2000-08-17 2004-06-01 Eastman Kodak Company Product and method for organizing and searching digital images
US6834371B1 (en) 2000-08-31 2004-12-21 Interactive Video Technologies, Inc. System and method for controlling synchronization of a time-based presentation and its associated assets
JP2002074322A (ja) 2000-08-31 2002-03-15 Sony Corp 情報処理装置及び情報処理方法並びにデータ記録媒体
JP2002082745A (ja) 2000-09-07 2002-03-22 Sony Corp 情報処理装置及び方法、並びにプログラム格納媒体
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7319454B2 (en) 2000-11-10 2008-01-15 Microsoft Corporation Two-button mouse input using a stylus
KR100369646B1 (ko) 2000-11-23 2003-01-30 삼성전자 주식회사 휴대용 단말기의 사용자 인터페이스방법
US7080159B2 (en) 2000-12-15 2006-07-18 Ntt Docomo, Inc. Method and system for effecting migration of application among heterogeneous devices
US20080060009A1 (en) 2000-12-22 2008-03-06 Hillcrest Laboratories, Inc. Client/server methods and systems for generating a user interface
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7299416B2 (en) 2001-02-15 2007-11-20 Denny Jaeger Metro for creating and using linear time line and play rectangle
US20020116276A1 (en) 2001-02-20 2002-08-22 Ottley Steven R. Intuitive graphical user interface for dynamically addressing electronic shopping cart deliverables
US20020137565A1 (en) 2001-03-09 2002-09-26 Blanco Victor K. Uniform media portal for a gaming system
JP3762243B2 (ja) 2001-03-26 2006-04-05 陣山 俊一 情報処理方法、情報処理プログラム並びに携帯情報端末装置
JP2002288125A (ja) 2001-03-27 2002-10-04 Just Syst Corp 作業状態再現システム、作業状態再現方法
US20020142734A1 (en) 2001-04-03 2002-10-03 James Wickstead Miniaturized wrist phone
US7134093B2 (en) 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
US6757517B2 (en) 2001-05-10 2004-06-29 Chin-Chi Chang Apparatus and method for coordinated music playback in wireless ad-hoc networks
US20050024341A1 (en) 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
JP2002342356A (ja) 2001-05-18 2002-11-29 Nec Software Kyushu Ltd 情報提供システム,方法,およびプログラム
JP2002351768A (ja) 2001-05-29 2002-12-06 Mitsubishi Electric Corp 転送者端末及び情報転送方法
US20020191028A1 (en) 2001-06-19 2002-12-19 Senechalle David A. Window manager user interface
JP2003030245A (ja) 2001-07-12 2003-01-31 Sony Corp 情報閲覧装置、情報閲覧システム、サーバ装置、端末装置、情報閲覧方法、情報提供方法、情報閲覧プログラム、情報提供プログラムおよび記録媒体
US6922147B1 (en) 2001-07-12 2005-07-26 Ann S. Viksnins Warning system sensing child left behind in infant seat in vehicle
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
JP2003043978A (ja) 2001-07-31 2003-02-14 Sharp Corp 対面式表示装置
US7369997B2 (en) 2001-08-01 2008-05-06 Microsoft Corporation Controlling speech recognition functionality in a computing device
EP1413116A1 (en) 2001-08-03 2004-04-28 Matsushita Electric Industrial Co., Ltd. Access control system
JP4593842B2 (ja) 2001-08-03 2010-12-08 キヤノン株式会社 動画像検索装置及びその制御方法
US7200590B2 (en) 2001-08-15 2007-04-03 Yahoo! Inc. Data sharing
US20030188183A1 (en) 2001-08-27 2003-10-02 Lee Lane W. Unlocking method and system for data on media
JP4174980B2 (ja) 2001-08-28 2008-11-05 株式会社日立プラントテクノロジー シール剤印刷装置
US6690365B2 (en) 2001-08-29 2004-02-10 Microsoft Corporation Automatic scrolling
US7071915B2 (en) 2001-09-13 2006-07-04 E-Book Systems Pte Ltd. Method for displaying flipping pages via electromechanical information browsing device
US7191233B2 (en) 2001-09-17 2007-03-13 Telecommunication Systems, Inc. System for automated, mid-session, user-directed, device-to-device session transfer system
AUPR815201A0 (en) 2001-10-08 2001-11-01 University Of Wollongong, The Session mobility using digital items
KR20030030384A (ko) 2001-10-10 2003-04-18 김수경 비누 조성물 및 이를 이용하여 비누를 제조하는 방법
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US7046230B2 (en) 2001-10-22 2006-05-16 Apple Computer, Inc. Touch pad handheld device
US20070085841A1 (en) 2001-10-22 2007-04-19 Apple Computer, Inc. Method and apparatus for accelerated scrolling
WO2003036520A1 (en) 2001-10-23 2003-05-01 Visto Corporation System and method for merging remote and local data in a single user interface
GB2381692B (en) 2001-10-31 2004-09-08 Alphamosaic Ltd Video-telephony system
US7415502B2 (en) 2001-11-16 2008-08-19 Sbc Technology Resources, Inc. Method and system for intelligent routing based on presence detection
US7091964B2 (en) 2001-11-30 2006-08-15 Palm, Inc. Electronic device with bezel feature for receiving input
KR20040062992A (ko) 2001-12-14 2004-07-09 코닌클리케 필립스 일렉트로닉스 엔.브이. 휴대용 장치를 사용하는 상호 작용을 가능하게 하는 방법
US20030112938A1 (en) 2001-12-17 2003-06-19 Memcorp, Inc. Telephone answering machine and method employing caller identification data
TW546942B (en) 2001-12-19 2003-08-11 Inventec Multimedia & Telecom Battery status voice alert method for wireless communication equipment
JP2005513550A (ja) 2001-12-21 2005-05-12 ブリルトン・ソフトウェア・リミテッド 同期されたフォーマット的学習システム、方法およびコンピュータプログラム
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
US8004496B2 (en) 2002-01-08 2011-08-23 Koninklijke Philips Electronics N.V. User interface for electronic devices for controlling the displaying of long sorted lists
EP1469375B1 (en) 2002-01-22 2011-07-13 Fujitsu Limited Menu element selecting device and method
EP1469374A4 (en) 2002-01-22 2009-11-11 Fujitsu Ltd MENU ELEMENTS DEVICE AND METHOD
US7138997B2 (en) 2002-06-28 2006-11-21 Autodesk, Inc. System for physical rotation of volumetric display enclosures to facilitate viewing
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
US20030182139A1 (en) 2002-03-22 2003-09-25 Microsoft Corporation Storage, retrieval, and display of contextual art with digital media files
US9412417B2 (en) 2002-04-05 2016-08-09 Apple Inc. Persistent group of media items for a media device
US7797446B2 (en) 2002-07-16 2010-09-14 Apple Inc. Method and system for updating playlists
US6971017B2 (en) 2002-04-16 2005-11-29 Xerox Corporation Ad hoc secure access to documents and services
US7987491B2 (en) 2002-05-10 2011-07-26 Richard Reisman Method and apparatus for browsing using alternative linkbases
JP3761165B2 (ja) 2002-05-13 2006-03-29 株式会社モバイルコンピューティングテクノロジーズ 表示制御装置、携帯型情報端末装置、プログラム、及び表示制御方法
JP3793740B2 (ja) 2002-05-13 2006-07-05 株式会社モバイルコンピューティングテクノロジーズ 携帯型情報端末装置、表示制御情報、及び表示制御方法
TWI238348B (en) 2002-05-13 2005-08-21 Kyocera Corp Portable information terminal, display control device, display control method, and recording media
US7191411B2 (en) 2002-06-06 2007-03-13 Moehrle Armin E Active path menu navigation system
EP1370115B1 (en) 2002-06-07 2009-07-15 Panasonic Corporation Sound image control system
EP1516453A1 (en) 2002-06-17 2005-03-23 Koninklijke Philips Electronics N.V. Method for authentication between devices
JP2004038896A (ja) 2002-06-28 2004-02-05 Clarion Co Ltd 表示制御手段
JP4108406B2 (ja) 2002-06-28 2008-06-25 クラリオン株式会社 表示制御装置
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US8762236B1 (en) 2002-07-15 2014-06-24 Paymentech, Llc System and apparatus for transaction data format and function verification
US20040019640A1 (en) 2002-07-25 2004-01-29 Bartram Linda Ruth System and method for distributing shared storage for collaboration across multiple devices
US7166791B2 (en) 2002-07-30 2007-01-23 Apple Computer, Inc. Graphical user interface and methods of use thereof in a multimedia player
US7606560B2 (en) 2002-08-08 2009-10-20 Fujitsu Limited Authentication services using mobile device
JP2004102682A (ja) 2002-09-10 2004-04-02 Nec Corp 端末ロックシステムおよび端末ロック方法
US9100493B1 (en) 2011-07-18 2015-08-04 Andrew H B Zhou Wearable personal digital device for facilitating mobile device payments and personal use
US20040066710A1 (en) 2002-10-03 2004-04-08 Yuen Wai Man Voice-commanded alarm clock system, and associated methods
US20040073432A1 (en) 2002-10-15 2004-04-15 Stone Christopher J. Webpad for the disabled
US7169996B2 (en) 2002-11-12 2007-01-30 Medialab Solutions Llc Systems and methods for generating music using data/music data file transmitted/received via a network
US7199786B2 (en) 2002-11-29 2007-04-03 Daniel Suraqui Reduced keyboards system using unistroke input and having automatic disambiguating and a recognition method using said system
JP2004192573A (ja) 2002-12-13 2004-07-08 Fujitsu Ltd 情報処理装置及び情報表示方法
US7370290B2 (en) 2002-12-19 2008-05-06 Microsoft Corporation Contact card
US20040130581A1 (en) 2003-01-03 2004-07-08 Microsoft Corporation Interaction model
US20050240756A1 (en) 2003-01-12 2005-10-27 Yaron Mayer System and method for improving the efficiency, comfort, and/or reliability in Operating Systems, such as for example Windows.
US7098896B2 (en) 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
JP2004295159A (ja) 2003-02-07 2004-10-21 Sony Corp アイコン表示システム、アイコン表示方法、電子機器装置およびコンピュータプログラム
US7739597B2 (en) 2003-02-24 2010-06-15 Microsoft Corporation Interactive media frame display
US7373657B2 (en) 2003-03-10 2008-05-13 Avaya Technology Corp. Method and apparatus for controlling data and software access
US20050021418A1 (en) 2003-03-18 2005-01-27 Matt Marcus Remote activation of digital media
US7404149B2 (en) 2003-03-28 2008-07-22 International Business Machines Corporation User-defined assistive GUI glue
JP4340566B2 (ja) 2003-04-01 2009-10-07 株式会社リコー Webページ生成装置、組み込み装置、Webページ生成の制御方法、Webページ生成プログラム及び記録媒体
US20060160090A1 (en) 2003-04-11 2006-07-20 Macina Robert A Composition splice variants and methods relating to cancer specific genes and proteins
US20050097135A1 (en) 2003-04-18 2005-05-05 Ian Epperson Touch panel user interface
AU2004232013A1 (en) 2003-04-18 2004-11-04 Benjamin Firooz Ghassabian Systems to enhance data entry in mobile and fixed environment
US20040235520A1 (en) 2003-05-20 2004-11-25 Cadiz Jonathan Jay Enhanced telephony computer user interface allowing user interaction and control of a telephone using a personal computer
KR20070026810A (ko) 2003-05-21 2007-03-08 가부시키가이샤 히다치 하이테크놀로지즈 지문센서내장 휴대 단말장치
JP4341298B2 (ja) 2003-05-23 2009-10-07 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP2004356816A (ja) 2003-05-28 2004-12-16 Hitachi Ltd 通信システム、通信端末及び通信端末の動作プログラム
JP4062171B2 (ja) 2003-05-28 2008-03-19 ソニー株式会社 積層構造の製造方法
US7593749B2 (en) 2003-05-28 2009-09-22 Nokia Corporation Method and radio terminal equipment arrangement of indicating incoming connection
GB0312465D0 (en) 2003-05-30 2003-07-09 Therefore Ltd A data input method for a computing device
WO2005003907A2 (en) 2003-06-26 2005-01-13 Ebay Inc. Method and apparatus to authenticate and authorize user access to a system
US20040268400A1 (en) 2003-06-26 2004-12-30 Microsoft Corporation Quick starting video content
US7433714B2 (en) 2003-06-30 2008-10-07 Microsoft Corporation Alert mechanism interface
JP4385301B2 (ja) 2003-07-14 2009-12-16 ソニー株式会社 情報記録装置、情報記録方法及び情報記録プログラム
KR100538579B1 (ko) 2003-07-14 2005-12-22 이지케어텍(주) 온라인 상에서의 의무기록서식 관리 방법
WO2005008444A2 (en) 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
JP2005044036A (ja) 2003-07-24 2005-02-17 Ricoh Co Ltd スクロール制御方法、その方法をコンピュータに実行させるプログラム
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US8234395B2 (en) 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US8290603B1 (en) * 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US7082573B2 (en) 2003-07-30 2006-07-25 America Online, Inc. Method and system for managing digital assets
US7546470B2 (en) 2003-08-13 2009-06-09 International Business Machines Corporation Selective computer component activation apparatus method and system
US7535465B2 (en) 2003-09-02 2009-05-19 Creative Technology Ltd. Method and system to display media content data
US20050052458A1 (en) 2003-09-08 2005-03-10 Jaron Lambert Graphical user interface for computer-implemented time accounting
CN1525723A (zh) 2003-09-16 2004-09-01 海信集团有限公司 用计算机收发手机短信息的方法
US7756726B2 (en) 2003-09-25 2010-07-13 International Business Machines Corporation Secured medical sign-in
BRPI0414482B1 (pt) 2003-09-26 2017-11-21 Disney Enterprises, Inc. Parental control of cell phone access
JP2005109720A (ja) 2003-09-29 2005-04-21 Sony Corp 通信システム、情報処理装置および方法、記録媒体、並びにプログラム
US20070009234A1 (en) 2003-09-30 2007-01-11 Koninklijke Philips Electronics N.V. Using content identifiers to download cd-cover pictures to present audio content items
US20130097302A9 (en) 2003-10-01 2013-04-18 Robert Khedouri Audio visual player apparatus and system and method of content distribution using the same
US7532196B2 (en) 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
US7415720B2 (en) 2003-10-31 2008-08-19 Samsung Electronics Co., Ltd. User authentication system and method for controlling the same
EP1538536A1 (en) 2003-12-05 2005-06-08 Sony International (Europe) GmbH Visualization and control techniques for multimedia digital content
US20070143495A1 (en) 2003-12-08 2007-06-21 Shai Porat Personal messaging systems
US7305438B2 (en) 2003-12-09 2007-12-04 International Business Machines Corporation Method and system for voice on demand private message chat
JP2005190108A (ja) 2003-12-25 2005-07-14 Kureo:Kk 表示制御プログラム、表示制御方法および表示制御装置
US7895537B2 (en) 2003-12-29 2011-02-22 International Business Machines Corporation Method and apparatus for setting attributes and initiating actions through gestures
US7631276B2 (en) 2003-12-29 2009-12-08 International Business Machines Corporation Method for indication and navigating related items
US7421656B2 (en) 2004-01-05 2008-09-02 Microsoft Corporation Systems and methods for interacting with a user interface of a media player
US20050162402A1 (en) 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
US7580866B2 (en) 2004-02-10 2009-08-25 Verizon Business Global Llc Apparatus, methods, and computer readable medium for determining the location of a portable device in a shopping environment
US7437005B2 (en) 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
US7441207B2 (en) 2004-03-18 2008-10-21 Microsoft Corporation Method and system for improved viewing and navigation of content
US7403769B2 (en) 2004-03-23 2008-07-22 Nokia Corporation System and method for music synchronization in a mobile device
US20050216839A1 (en) 2004-03-25 2005-09-29 Keith Salvucci Audio scrubbing
US9374607B2 (en) 2012-06-26 2016-06-21 Sonos, Inc. Media playback system with guest access
US20050229112A1 (en) 2004-04-13 2005-10-13 Clay Timothy M Method and system for conveying an image position
US8028323B2 (en) 2004-05-05 2011-09-27 Dryden Enterprises, Llc Method and system for employing a first device to direct a networked audio device to obtain a media item
WO2005109829A1 (en) 2004-05-06 2005-11-17 Koninklijke Philips Electronics N.V. Method device and program for seamlessly transferring the execution of a software application from a first to a second device
US8526646B2 (en) 2004-05-10 2013-09-03 Peter V. Boesen Communication device
US7370244B2 (en) 2004-05-26 2008-05-06 Sap Ag User-guided error correction
US7353466B2 (en) 2004-05-28 2008-04-01 Microsoft Corporation System and method for generating message notification objects on dynamically scaled timeline
GB2431500B (en) 2004-06-18 2009-03-25 Microth Inc Stroke-based data entry device, system, and method
US7519223B2 (en) 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
US7379047B2 (en) 2004-06-30 2008-05-27 Microsoft Corporation Using a physical object to control an attribute of an interactive display application
US7197121B2 (en) 2004-06-30 2007-03-27 Glenayre Electronics, Inc. Audio chunking
US20060020904A1 (en) 2004-07-09 2006-01-26 Antti Aaltonen Stripe user interface
US20060019649A1 (en) 2004-07-21 2006-01-26 Feinleib David A System and method for remote telephone ringer
US7765243B2 (en) 2004-07-26 2010-07-27 Sandisk Il Ltd. Unified local-remote logical volume
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
WO2006020304A2 (en) 2004-07-30 2006-02-23 Apple Computer, Inc. Mode-based graphical user interfaces for touch sensitive input devices
US7730223B1 (en) 2004-07-30 2010-06-01 Apple Inc. Wireless home and office appliance management and integration
EP2000893B1 (en) 2004-07-30 2016-09-21 Apple Inc. Mode-based graphical user interfaces for touch sensitive input devices
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
CN1993672A (zh) 2004-08-02 2007-07-04 皇家飞利浦电子股份有限公司 在触摸屏上的压控导航
US7724242B2 (en) 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US7619615B1 (en) 2004-08-31 2009-11-17 Sun Microsystems, Inc. Method and apparatus for soft keys of an electronic device
EP1805585B1 (en) 2004-10-08 2017-08-16 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
WO2006041097A1 (ja) 2004-10-12 2006-04-20 Nippon Telegraph And Telephone Corporation 3次元ポインティング方法、3次元表示制御方法、3次元ポインティング装置、3次元表示制御装置、3次元ポインティングプログラム、及び3次元表示制御プログラム
US20060085751A1 (en) 2004-10-14 2006-04-20 O'brien John P Music user interface
US7810035B2 (en) 2004-10-15 2010-10-05 Microsoft Corporation Browsing web content using predictive navigation links
US7706637B2 (en) 2004-10-25 2010-04-27 Apple Inc. Host configured for interoperation with coupled portable media player device
US10200468B2 (en) 2004-11-18 2019-02-05 Microsoft Technology Licensing, Llc Active agenda
US8478363B2 (en) 2004-11-22 2013-07-02 The Invention Science Fund I, Llc Transfer then sleep
JP4411193B2 (ja) 2004-12-09 2010-02-10 富士フイルム株式会社 ディスプレイ付き撮像装置及び画像表示装置
EP1672471A1 (en) 2004-12-14 2006-06-21 Thomson Multimedia Broadband Belgium Content playback device with touch screen
DE102005040125A1 (de) 2004-12-17 2006-06-29 Volkswagen Ag Bedienvorrichtung
US7629966B2 (en) 2004-12-21 2009-12-08 Microsoft Corporation Hard tap
US7489306B2 (en) 2004-12-22 2009-02-10 Microsoft Corporation Touch screen accuracy
CN1797295A (zh) 2004-12-25 2006-07-05 鸿富锦精密工业(深圳)有限公司 一种用于选择动态选项的图形用户界面
JP4896397B2 (ja) 2004-12-28 2012-03-14 富士通株式会社 プログラム、制限方法及びコンピュータ
KR100677421B1 (ko) 2004-12-30 2007-02-02 엘지전자 주식회사 휴대단말기에서의 참조필드 이용방법
US20060146074A1 (en) 2004-12-31 2006-07-06 Harrison Edward R Display for rotatable steering device
US7536565B2 (en) 2005-01-07 2009-05-19 Apple Inc. Techniques for improved playlist processing on media devices
US20060161621A1 (en) 2005-01-15 2006-07-20 Outland Research, Llc System, method and computer program product for collaboration and synchronization of media content on a plurality of media players
US8700729B2 (en) 2005-01-21 2014-04-15 Robin Dua Method and apparatus for managing credentials through a wireless network
JP2006209258A (ja) 2005-01-25 2006-08-10 Kenwood Corp Av処理装置、av処理方法及びプログラム
US8682722B1 (en) 2005-01-28 2014-03-25 Advertising.Com Llc Controlling user experience
US7454192B1 (en) 2005-02-04 2008-11-18 Sprint Communications Company, L.P. Postal address validation using mobile telephone location information
US20060178110A1 (en) 2005-02-09 2006-08-10 Nokia Corporation System and method for interacting with an entity by means of a mobile station via a user-wearable terminal
US20060176278A1 (en) 2005-02-10 2006-08-10 Motorola, Inc. Method and system for display orientation
US7707044B2 (en) 2005-02-11 2010-04-27 Avaya Inc. Use of location awareness to transfer communications sessions between terminals in a healthcare environment
US7783065B2 (en) 2005-03-18 2010-08-24 Nyko Technologies, Inc. Wireless headphone kit for media players
KR20060102724A (ko) 2005-03-24 2006-09-28 삼성전자주식회사 휴대단말기와 그에 따른 리모트 컨트롤 장치
US20060224882A1 (en) 2005-03-31 2006-10-05 Microsoft Corporation Method and system for unlocking a computing device
US7750893B2 (en) 2005-04-06 2010-07-06 Nintendo Co., Ltd. Storage medium storing input position processing program, and input position processing device
US20060236847A1 (en) 2005-04-07 2006-10-26 Withop Ryan L Using images as an efficient means to select and filter records in a database
JP2006295753A (ja) 2005-04-14 2006-10-26 Matsushita Electric Ind Co Ltd 録画再生装置、録画再生方法、及び録画再生プログラム
SG161290A1 (en) 2005-04-19 2010-05-27 Microsoft Corp Network commercial transactions
US20090144391A1 (en) 2007-11-30 2009-06-04 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Audio sharing
US20060246874A1 (en) 2005-04-28 2006-11-02 Sullivan Scott L Cell phone systems
US20060250578A1 (en) 2005-05-06 2006-11-09 Pohl Garrick G Systems and methods for controlling, monitoring, and using remote applications
US20060256090A1 (en) 2005-05-12 2006-11-16 Apple Computer, Inc. Mechanical overlay
US8244179B2 (en) 2005-05-12 2012-08-14 Robin Dua Wireless inter-device data processing configured through inter-device transmitted data
CN100440947C (zh) 2005-05-13 2008-12-03 海尔集团公司 一种多功能电视机
US9743266B2 (en) 2005-05-23 2017-08-22 Invention Science Fund I, Llc Device pairing via device to device contact
US7530029B2 (en) 2005-05-24 2009-05-05 Microsoft Corporation Narrow mode navigation pane
KR100708135B1 (ko) 2005-05-25 2007-04-17 삼성전자주식회사 항목의 블록화를 이용한 스크롤 방법 및 장치
US20060271867A1 (en) 2005-05-27 2006-11-30 Wang Kong Q Mobile communications terminal and method therefore
US20060271425A1 (en) 2005-05-27 2006-11-30 Microsoft Corporation Advertising in application programs
EP1894282A4 (en) 2005-06-06 2012-02-22 Chip Pc Israel Ltd MULTI-STAGE THIN CLIENTS ADMINISTRATION SYSTEM AND METHOD
KR100643306B1 (ko) 2005-06-13 2006-11-10 삼성전자주식회사 리모트 컨트롤에서의 선택 위치 또는 방향과 동일한 위치또는 방향의 메뉴를 선택할 수 있는 사용자 인터페이스를제공하는 장치 및 방법
US20060281449A1 (en) 2005-06-14 2006-12-14 Huang Kun Enhanced call register menu
US20060288226A1 (en) 2005-06-15 2006-12-21 Stelor Productions, Llc. System and method for establishing and authorizing a security code
US20060286971A1 (en) 2005-06-17 2006-12-21 Maly John W Automatic storage of contact information on a cellular phone
US7831054B2 (en) 2005-06-28 2010-11-09 Microsoft Corporation Volume control
US20070004451A1 (en) 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
AU2005203074A1 (en) 2005-07-14 2007-02-01 Canon Information Systems Research Australia Pty Ltd Image browser
US7567898B2 (en) 2005-07-26 2009-07-28 Broadcom Corporation Regulation of volume of voice in conjunction with background sound
CN1908981A (zh) 2005-08-01 2007-02-07 富士通株式会社 用于物理销售点交易的无线计算机钱包
JP2007041976A (ja) 2005-08-05 2007-02-15 Canon Inc データ処理装置、ファイル処理方法、記憶媒体およびプログラム
US20070048714A1 (en) 2005-08-12 2007-03-01 Microsoft Corporation Media player service library
EP1760619A1 (en) 2005-08-19 2007-03-07 STMicroelectronics Ltd. System for restricting data access
EP2017729B1 (en) 2005-08-23 2018-08-08 BlackBerry Limited Method and system for transferring an application state from a first electronic device to a second electronic device
US20070055947A1 (en) 2005-09-02 2007-03-08 Microsoft Corporation Animations and transitions
US7487346B2 (en) 2005-09-06 2009-02-03 Apple Inc. Techniques and graphical user interfaces for categorical shuffle
KR100802615B1 (ko) 2005-09-09 2008-02-13 엘지전자 주식회사 이동 단말기의 이벤트 표시 장치 및 그 방법
CN100437671C (zh) 2005-09-09 2008-11-26 中国工商银行股份有限公司 异地授权系统及方法
US20070057775A1 (en) 2005-09-10 2007-03-15 O'reilly Mike R Unpredictable alarm clock
US7735018B2 (en) 2005-09-13 2010-06-08 Spacetime3D, Inc. System and method for providing three-dimensional graphical user interface
US9629384B2 (en) 2005-09-14 2017-04-25 S & P Ingredient Development, Llc Low sodium salt composition
US20070070045A1 (en) 2005-09-27 2007-03-29 Shu-Chuan Sung Entering a character into an electronic device
US8943439B2 (en) 2005-09-28 2015-01-27 Access Co., Ltd. System and method for organizing application programs and status information
WO2007043222A1 (ja) 2005-10-07 2007-04-19 Matsushita Electric Industrial Co., Ltd. 入力装置及びそれを備えた携帯端末
US7378954B2 (en) 2005-10-21 2008-05-27 Barry Myron Wendt Safety indicator and method
JP4394062B2 (ja) 2005-10-28 2010-01-06 アルプス電気株式会社 パッド型入力装置
US20070097090A1 (en) 2005-10-31 2007-05-03 Battles Amy E Digital camera user interface
US7849323B2 (en) 2005-11-09 2010-12-07 Emc Corporation Password presentation for multimedia devices
US20070115933A1 (en) 2005-11-22 2007-05-24 Sbc Knowledge Ventures Lp Method for maintaining continuity of a multimedia session between media devices
JP2007158919A (ja) 2005-12-07 2007-06-21 Fujifilm Corp 画像表示装置及び画像表示方法
JP4894252B2 (ja) 2005-12-09 2012-03-14 ソニー株式会社 データ表示装置、データ表示方法及びデータ表示プログラム
US20070136778A1 (en) 2005-12-09 2007-06-14 Ari Birger Controller and control method for media retrieval, routing and playback
TW200723081A (en) 2005-12-13 2007-06-16 Universal Scient Ind Co Ltd Circular multimedia playback progress indicator and method of indicating signals thereof
US20070150918A1 (en) 2005-12-22 2007-06-28 Sony Ericsson Mobile Communications Ab Methods, devices, and computer program products for providing parental control over access to media content using a mobile terminal
JP4881615B2 (ja) 2005-12-23 2012-02-22 パナソニック株式会社 電子機器の認証についての識別管理システム
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7467352B2 (en) 2005-12-29 2008-12-16 Motorola, Inc. Method and apparatus for mapping corresponding functions in a user
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US20070168369A1 (en) 2006-01-04 2007-07-19 Companionlink Software, Inc. User interface for a portable electronic device
US7574672B2 (en) 2006-01-05 2009-08-11 Apple Inc. Text entry interface for a portable communication device
US7596761B2 (en) 2006-01-05 2009-09-29 Apple Inc. Application user interface with navigation bar showing current and prior application contexts
DE602006001570D1 (de) 2006-01-10 2008-08-07 Alcatel Lucent Verfahren und Zugangsserver, um einen Benutzer eine zentrale Anmeldungsprozedur bereitzustellen
WO2007080629A1 (ja) 2006-01-10 2007-07-19 Fujitsu Limited 携帯型端末装置、アドレス帳転送装置、携帯型端末装置における情報の表示方法、アドレス帳転送方法、およびコンピュータプログラム
RU2008133871A (ru) 2006-01-20 2010-02-27 Конвесейшнл Компьютинг Корпорейшн (Us) Носимый интерфейс-клиент с дисплеем
US7934169B2 (en) 2006-01-25 2011-04-26 Nokia Corporation Graphical user interface, electronic device, method and computer program that uses sliders for user input
CA2640261A1 (en) 2006-01-26 2007-08-09 Imprivata, Inc. Systems and methods for multi-factor authentication
BRPI0706887A2 (pt) 2006-01-30 2012-08-21 Clearplay Inc "método para suprimir algum conteúdo de multimìdia de uma apresentação de conteúdo de multimìdia fornecida por um servidor remoto a um aparelho reprodutor de conteúdo de multimìdia do cliente e método para aplicar e sincronizar dados de filtro de conteúdo de mutimìdia com uma apresentação de conteúdo de multimìdia."
ATE510396T1 (de) 2006-02-01 2011-06-15 Research In Motion Ltd System und methode für die validierung eines benutzerkontos mit einer drahtlosen vorrichtung
US8078990B2 (en) 2006-02-01 2011-12-13 Research In Motion Limited Secure device sharing
JP2009093206A (ja) 2006-02-02 2009-04-30 Panasonic Corp 通信端末装置及び情報通知方法
US8954852B2 (en) 2006-02-03 2015-02-10 Sonic Solutions, Llc. Adaptive intervals in navigating content and/or media
AU2006337227B2 (en) 2006-02-03 2010-09-09 Mideye Ab A system, an arrangement and a method for end user authentication
JP5161794B2 (ja) 2006-02-10 2013-03-13 アップル インコーポレイテッド 動的インタラクティブエンターテイメントベニュー
US7827289B2 (en) 2006-02-16 2010-11-02 Dell Products, L.P. Local transmission for content sharing
WO2007102110A2 (en) 2006-03-07 2007-09-13 Koninklijke Philips Electronics N.V. Method of transferring data
JP4850682B2 (ja) 2006-03-07 2012-01-11 富士通株式会社 ロックシステム、ロック解除装置、機器、ロック解除方法及び回路装置
US9953097B2 (en) 2006-03-16 2018-04-24 Ebay Inc. System and method for managing network traffic routing
US20090063851A1 (en) 2006-03-20 2009-03-05 Nijdam Mark J Establishing communications
US20070226778A1 (en) 2006-03-22 2007-09-27 Jorg Pietruszka Bluetooth theft protection
CN100521610C (zh) 2006-03-31 2009-07-29 腾讯科技(深圳)有限公司 客户端播放网络媒体文件的方法及客户端
US9395905B2 (en) 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US7818264B2 (en) 2006-06-19 2010-10-19 Visa U.S.A. Inc. Track data encryption
KR101194539B1 (ko) 2006-04-12 2012-10-26 삼성전자주식회사 미디어 파일 빠른 검색 방법 및 장치
US20070249288A1 (en) 2006-04-14 2007-10-25 Kamran Moallemi Distance-based security
US20070260547A1 (en) 2006-05-05 2007-11-08 On Q Technologies Pty Ltd. System and Method for Purchasing Digital Content
CN101438545B (zh) 2006-05-05 2013-04-17 Nxp股份有限公司 无线网络中认证设备的方法和装置
KR100679412B1 (ko) 2006-05-11 2007-02-07 삼성전자주식회사 관성센서를 구비한 휴대단말의 알람기능 제어방법 및 장치
JP2007304854A (ja) 2006-05-11 2007-11-22 Hitachi Electronics Service Co Ltd セキュリティシステム及び保守用パソコン
US8086698B2 (en) 2006-06-02 2011-12-27 Google Inc. Synchronizing configuration information among multiple clients
US8015014B2 (en) 2006-06-16 2011-09-06 Storz Endoskop Produktions Gmbh Speech recognition system with user profiles management component
CN106936587B (zh) 2006-06-19 2020-05-12 维萨美国股份有限公司 消费者认证系统和方法
US8594742B2 (en) 2006-06-21 2013-11-26 Symbol Technologies, Inc. System and method for monitoring a mobile device
US8010555B2 (en) 2006-06-30 2011-08-30 Aperio Technologies, Inc. System and method for managing images over a network
US8467766B2 (en) 2006-07-06 2013-06-18 Qualcomm Incorporated Methods and systems for managing payment sources in a mobile environment
US20080010387A1 (en) 2006-07-07 2008-01-10 Bryce Allen Curtis Method for defining a Wiki page layout using a Wiki page
US8079068B2 (en) 2006-07-17 2011-12-13 Research In Motion Limited Management of multiple connections to a security token access device
US8112794B2 (en) 2006-07-17 2012-02-07 Research In Motion Limited Management of multiple connections to a security token access device
US20080011827A1 (en) 2006-07-17 2008-01-17 Research In Motion Limited Automatic management of security information for a security token access device with multiple connections
JP5054336B2 (ja) 2006-07-19 2012-10-24 クラリオン株式会社 表示装置およびナビゲーション装置
US20080017704A1 (en) 2006-07-24 2008-01-24 First Data Corporation Contactless Electronic Wallet Payment Device
KR100778367B1 (ko) 2006-08-02 2007-11-22 삼성전자주식회사 휴대 단말기 및 그의 이벤트 처리 방법
US8677257B2 (en) 2006-08-04 2014-03-18 Apple Inc. Granular graphical user interface element
US9009115B2 (en) 2006-08-04 2015-04-14 Apple Inc. Restoring electronic information
KR100834959B1 (ko) 2006-08-11 2008-06-03 삼성전자주식회사 멀티미디어 콘텐츠 재생 방법 및 장치
KR101305497B1 (ko) 2006-08-14 2013-09-05 삼성전자주식회사 클라이언트 컴퓨터 및 원격관리 시스템 및 원격관리방법
US7525424B2 (en) 2006-08-15 2009-04-28 Patented Technology Incorporated Illuminated trail marker apparatus
US9773262B2 (en) 2006-08-17 2017-09-26 Mastercard International Incorporated Purchase Integrated file structure useful in connection with apparatus and method for facilitating account restructuring in an electronic bill payment system
AU2007291927B2 (en) 2006-08-27 2008-07-17 Miwatch Holdings Limited GSM mobile watch phone
US8572169B2 (en) 2006-08-28 2013-10-29 Myspace, Llc System, apparatus and method for discovery of music within a social network
CN100591011C (zh) 2006-08-31 2010-02-17 华为技术有限公司 一种认证方法及系统
US8014760B2 (en) 2006-09-06 2011-09-06 Apple Inc. Missed telephone call management for a portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US7996792B2 (en) 2006-09-06 2011-08-09 Apple Inc. Voicemail manager for portable multifunction device
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8736557B2 (en) 2006-09-11 2014-05-27 Apple Inc. Electronic device with image based browsers
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
US8788080B1 (en) 2006-09-12 2014-07-22 Sonos, Inc. Multi-channel pairing in a media system
US9202509B2 (en) 2006-09-12 2015-12-01 Sonos, Inc. Controlling and grouping in a multi-zone media system
CN101517563A (zh) 2006-09-13 2009-08-26 微软公司 维护媒体会遇的日志
US8290820B2 (en) 2006-09-13 2012-10-16 Microsoft Corporation Methods of maintaining a journal of media encounters between co-existing portable devices
US20080091717A1 (en) 2006-09-27 2008-04-17 Zachary Adam Garbow Generation of Collaborative Playlist Based Upon Musical Preference Data from Multiple Digital Media Players
US7978177B2 (en) 2006-09-29 2011-07-12 Varia Holdings Llc Scrolling behavior-influenced algorithm selection to facilitate adaptive scrolling
US7983614B2 (en) 2006-09-29 2011-07-19 Sony Ericsson Mobile Communications Ab Handover for audio and video playback devices
US8434133B2 (en) 2006-10-06 2013-04-30 Fmr Llc Single-party, secure multi-channel authentication
US20080084400A1 (en) 2006-10-10 2008-04-10 Outland Research, Llc Touch-gesture control of video media play on handheld media players
GB0621189D0 (en) 2006-10-25 2006-12-06 Payfont Ltd Secure authentication and payment system
US8090087B2 (en) 2006-10-26 2012-01-03 Apple Inc. Method, system, and graphical user interface for making conference calls
US20080109764A1 (en) 2006-11-07 2008-05-08 Mikko Linnamaki Interface for selecting audio-video sources in a limited display environment
US20080126935A1 (en) 2006-11-08 2008-05-29 Ross James Blomgren Audio Visual Entertainment System and Method of Operation
US20080114980A1 (en) 2006-11-13 2008-05-15 Thangapandi Sridhar System, method and apparatus for using standard and extended storage devices in two-factor authentication
US20080114678A1 (en) 2006-11-15 2008-05-15 David Lawrence Bennett Method and apparatus for remote authorization
JP2010509992A (ja) 2006-11-17 2010-04-02 任天堂株式会社 ビデオゲームプログラムのダウンロードシステムおよびダウンロード方法
GB0624582D0 (en) 2006-12-08 2007-01-17 Visible Computing Ltd USB autorun devices
US20080141378A1 (en) 2006-12-12 2008-06-12 Mclean Ivan Hugh Method and apparatus for creating licenses in a mobile digital rights management network
US8706777B2 (en) 2006-12-18 2014-04-22 Microsoft Corporation Media content catalogs
AU2006252196B2 (en) 2006-12-21 2009-05-14 Canon Kabushiki Kaisha Scrolling Interface
US7656275B2 (en) 2006-12-22 2010-02-02 Research In Motion Limited System and method for controlling an alarm for an electronic device
US8943410B2 (en) 2006-12-22 2015-01-27 Apple Inc. Modified media presentation during scrubbing
US8583090B2 (en) 2006-12-29 2013-11-12 Nokia Corporation Transferring task completion to another device
US8504922B2 (en) 2006-12-29 2013-08-06 Microsoft Corporation Enhanced user navigation to previously visited areas in a media environment
US7777732B2 (en) 2007-01-03 2010-08-17 Apple Inc. Multi-event input system
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US20080168185A1 (en) 2007-01-07 2008-07-10 Robbin Jeffrey L Data Synchronization with Host Device in Accordance with Synchronization Preferences
US8060825B2 (en) 2007-01-07 2011-11-15 Apple Inc. Creating digital artwork based on content file metadata
WO2008085742A2 (en) 2007-01-07 2008-07-17 Apple Inc. Portable multifunction device, method and graphical user interface for interacting with user input elements in displayed content
US20080168395A1 (en) 2007-01-07 2008-07-10 Bas Ording Positioning a Slider Icon on a Portable Multifunction Device
US8519964B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
US7844915B2 (en) 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US8116807B2 (en) 2007-01-07 2012-02-14 Apple Inc. Airplane mode indicator on a portable multifunction device
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
US8549429B2 (en) 2007-01-25 2013-10-01 Sharp Kabushiki Kaisha Multi-window management apparatus and program, storage medium and information processing apparatus
EP2115611A4 (en) 2007-01-26 2010-02-03 Fusionone Inc SYSTEM AND METHOD FOR SAFETY STORING CONTENT ON A MOBILE DEVICE
KR100815523B1 (ko) 2007-02-08 2008-03-20 삼성전자주식회사 단말의 음악 재생 및 표시 방법과 이를 이용한 장치
US20080208762A1 (en) 2007-02-22 2008-08-28 First Data Corporation Payments using a mobile commerce device
WO2008104995A2 (en) 2007-02-28 2008-09-04 Raja Raman A method and system for close range communication using audio tones
US8362873B2 (en) 2007-03-01 2013-01-29 Deadman Technologies, Llc Control of equipment using remote display
US20080222546A1 (en) 2007-03-08 2008-09-11 Mudd Dennis M System and method for personalizing playback content through interaction with a playback device
WO2008111113A1 (ja) 2007-03-09 2008-09-18 Pioneer Corporation エフェクト装置、av処理装置およびプログラム
CN100544305C (zh) 2007-03-16 2009-09-23 钱晓东 一种基于即时通讯平台的用户信息分享及管理的方法
US20080250319A1 (en) 2007-04-05 2008-10-09 Research In Motion Limited System and method for determining media playback behaviour in a media application for a portable media device
US8280539B2 (en) 2007-04-06 2012-10-02 The Echo Nest Corporation Method and apparatus for automatically segueing between audio tracks
EP1983799B1 (en) 2007-04-17 2010-07-07 Harman Becker Automotive Systems GmbH Acoustic localization of a speaker
US8364139B2 (en) 2007-04-19 2013-01-29 Apple Inc. Personal area network systems and devices and methods for use thereof
US8868053B2 (en) 2007-04-20 2014-10-21 Raphael A. Thompson Communication delivery filter for mobile device
CN101299694B (zh) 2007-04-30 2012-04-25 华为技术有限公司 家庭网络中访客管理的方法及系统、家庭网关
US8483413B2 (en) 2007-05-04 2013-07-09 Bose Corporation System and method for directionally radiating sound
US8325936B2 (en) 2007-05-04 2012-12-04 Bose Corporation Directionally radiating sound in a vehicle
US7979809B2 (en) 2007-05-11 2011-07-12 Microsoft Corporation Gestured movement of object to display edge
US8705722B2 (en) 2007-05-22 2014-04-22 Verizon Patent And Licensing Inc. Automatic routing of communications to user endpoints
US7835988B2 (en) 2007-06-05 2010-11-16 Mastercard International, Inc. Methods and apparatus for preventing fraud in payment processing transactions
CN101321156B (zh) 2007-06-06 2011-05-04 艾威梯科技(北京)有限公司 基于第一互通协议进行第二互通协议扩展的方法和系统
US20080313257A1 (en) 2007-06-15 2008-12-18 Allen James D Method and Apparatus for Policy-Based Transfer of an Application Environment
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US20090006846A1 (en) 2007-06-27 2009-01-01 Apple Inc. Bluetooth device as security access key
US8068925B2 (en) * 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
US8763058B2 (en) 2007-06-28 2014-06-24 Apple Inc. Selective data downloading and presentation based on user interaction
US20090006958A1 (en) 2007-06-29 2009-01-01 Nokia Corporation Method, Apparatus and Computer Program Product for Providing an Object Selection Mechanism for Display Devices
US7750895B2 (en) 2007-06-29 2010-07-06 Microsoft Corporation Navigating lists using input motions
JP2009017486A (ja) 2007-07-09 2009-01-22 Victor Co Of Japan Ltd コンテンツ再生装置
CN101350938B (zh) 2007-07-17 2011-05-25 中兴通讯股份有限公司 一种无线电子广告牌系统
EP2018032A1 (en) 2007-07-20 2009-01-21 Nederlandse Organisatie voor toegepast- natuurwetenschappelijk onderzoek TNO Identification of proximate mobile devices
US8316410B2 (en) 2007-07-23 2012-11-20 At&T Intellectual Property I, Lp Apparatus and method for communicating media between communication devices
JP5340567B2 (ja) 2007-07-24 2013-11-13 株式会社エヌ・ティ・ティ・ドコモ 通信端末、情報管理装置及びプログラム
US8200681B2 (en) 2007-08-22 2012-06-12 Microsoft Corp. Collaborative media recommendation and sharing technique
US8900731B2 (en) 2007-08-24 2014-12-02 Motorola Solutions, Inc. Charger system for communication devices using a charger circuit to communicate a charge status to a portable host device
US7956848B2 (en) 2007-09-04 2011-06-07 Apple Inc. Video chapter access and license renewal
US9477395B2 (en) 2007-09-04 2016-10-25 Apple Inc. Audio file interface
US8532285B2 (en) 2007-09-05 2013-09-10 Avaya Inc. Method and apparatus for call control using motion and position information
KR20090029138A (ko) 2007-09-17 2009-03-20 삼성전자주식회사 동작에 의한 사용자 명령 입력 방법 및 이를 적용한멀티미디어 기기
EP2040146B1 (en) 2007-09-18 2020-12-09 Microsoft Technology Licensing, LLC Mobile terminal and method of controlling operation of the same
TW200915698A (en) 2007-09-29 2009-04-01 Acer Inc Device to change the efficacy of charging or discharging based on the status of battery
US8893284B2 (en) 2007-10-03 2014-11-18 Motorola Mobility Llc Method and system for providing extended authentication
US20090100383A1 (en) 2007-10-16 2009-04-16 Microsoft Corporation Predictive gesturing in graphical user interface
EP2056627A1 (en) 2007-10-30 2009-05-06 SonicEmotion AG Method and device for improved sound field rendering accuracy within a preferred listening area
US8818941B2 (en) 2007-11-11 2014-08-26 Microsoft Corporation Arrangement for synchronizing media files with portable devices
US8154608B2 (en) 2007-11-13 2012-04-10 Olympus Corporation Digital camera security
US8217906B2 (en) 2007-11-16 2012-07-10 Sony Ericsson Mobile Communications Ab User interface, apparatus, method, and computer program for viewing of content on a screen
TW200929974A (en) 2007-11-19 2009-07-01 Ibm System and method for performing electronic transactions
US9986293B2 (en) 2007-11-21 2018-05-29 Qualcomm Incorporated Device access control
CN101925916B (zh) 2007-11-21 2013-06-19 高通股份有限公司 基于媒体偏好控制电子设备的方法和系统
EP2063327A1 (fr) 2007-11-26 2009-05-27 EM Microelectronic-Marin SA Circuit électronique de gestion du fonctionnement de périphériques d'une montre
US8624809B2 (en) 2007-11-29 2014-01-07 Apple Inc. Communication using light-emitting device
US7873748B2 (en) 2007-11-30 2011-01-18 International Business Machines Corporation Synchronization of locally and remotely stored browser data
US8600457B2 (en) 2007-11-30 2013-12-03 Microsoft Corporation Sleep mode for mobile communication device
KR101419701B1 (ko) 2007-12-03 2014-07-21 삼성전자주식회사 멀티미디어 재생장치에서 멀티 터치를 이용한 재생 제어 방법
US20090146962A1 (en) 2007-12-05 2009-06-11 Nokia Corporation Mobile communication terminal and method
US8775647B2 (en) 2007-12-10 2014-07-08 Deluxe Media Inc. Method and system for use in coordinating multimedia devices
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
JP2008099330A (ja) 2007-12-18 2008-04-24 Sony Corp 情報処理装置、携帯電話機
US8849914B2 (en) 2007-12-20 2014-09-30 The Vanguard Group, Inc. System and method for synchronized co-browsing by users in different web sessions
CN101188506B (zh) 2007-12-20 2012-07-18 康佳集团股份有限公司 一种linux操作系统的媒体播放器及其实现方法
US20090164923A1 (en) 2007-12-21 2009-06-25 Nokia Corporation Method, apparatus and computer program product for providing an adaptive icon
US20090177966A1 (en) 2008-01-06 2009-07-09 Apple Inc. Content Sheet for Media Player
US8405621B2 (en) 2008-01-06 2013-03-26 Apple Inc. Variable rate media playback methods for electronic devices with touch interfaces
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
WO2009086599A1 (en) 2008-01-07 2009-07-16 Avega Systems Pty Ltd A user interface for managing the operation of networked media playback devices
US8724600B2 (en) 2008-01-07 2014-05-13 Tymphany Hong Kong Limited Systems and methods for providing a media playback in a networked environment
US8581957B2 (en) 2008-01-09 2013-11-12 Sony Corporation Video conference using an external video stream
CN101488138B (zh) 2008-01-18 2011-06-22 鹏智科技(深圳)有限公司 网络文件下载服务器及方法
US8424079B2 (en) 2008-01-25 2013-04-16 Research In Motion Limited Method, system and mobile device employing enhanced user authentication
US8344998B2 (en) 2008-02-01 2013-01-01 Wimm Labs, Inc. Gesture-based power management of a wearable portable electronic device with display
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
JP2009187146A (ja) 2008-02-04 2009-08-20 Fuji Xerox Co Ltd 情報処理システム及び情報処理プログラム
KR101503714B1 (ko) 2008-02-05 2015-03-20 삼성전자주식회사 Gui 제공방법 및 이를 적용한 멀티미디어 기기
US8151215B2 (en) 2008-02-07 2012-04-03 Sony Corporation Favorite GUI for TV
US8595757B2 (en) 2008-03-05 2013-11-26 At&T Intellectual Property I, L.P. System and method of sharing media content
US20090248737A1 (en) 2008-03-27 2009-10-01 Microsoft Corporation Computing environment representation
JP4692566B2 (ja) 2008-03-28 2011-06-01 ブラザー工業株式会社 通信装置
US8224775B2 (en) 2008-03-31 2012-07-17 Packetvideo Corp. System and method for managing, controlling and/or rendering media in a network
US8077157B2 (en) 2008-03-31 2011-12-13 Intel Corporation Device, system, and method of wireless transfer of files
US8612888B2 (en) 2008-04-01 2013-12-17 Litl, Llc Method and apparatus for managing digital media content
US8285811B2 (en) 2008-04-17 2012-10-09 Eloy Technology, Llc Aggregating media collections to provide a primary list and sorted sub-lists
US8051370B2 (en) 2008-04-23 2011-11-01 Microsoft Corporation Intelligent autocompletion
US7860936B1 (en) 2008-05-09 2010-12-28 Symantec Corporation Verifying instant messaging aliases via online parental control accounts
EP2485103B1 (en) 2008-05-11 2014-09-24 BlackBerry Limited Electronic device and method providing processing of a predetermined clock event during operation of a bedtime mode
ES2387527T3 (es) 2008-05-11 2012-09-25 Research In Motion Limited Dìspositivo electrónico y método que proporcionan una indicación mejorada de que un reloj de alarma está en un estado activado
US20090282078A1 (en) 2008-05-12 2009-11-12 Motion Limited Unified media file architecture
US9024890B2 (en) 2008-05-17 2015-05-05 David H. Chin Comparison of an applied gesture on a touch screen of a mobile device with a remotely stored security gesture
GB2460306B (en) 2008-05-29 2013-02-13 Intrasonics Sarl Data embedding system
US8830181B1 (en) 2008-06-01 2014-09-09 Cypress Semiconductor Corporation Gesture recognition system for a touch-sensing surface
US20090307616A1 (en) 2008-06-04 2009-12-10 Nokia Corporation User interface, device and method for an improved operating mode
US20090307633A1 (en) 2008-06-06 2009-12-10 Apple Inc. Acceleration navigation of media device displays
US20090304205A1 (en) 2008-06-10 2009-12-10 Sony Corporation Of Japan Techniques for personalizing audio levels
US8249660B2 (en) 2008-06-11 2012-08-21 At&T Intellectual Property I, Lp System and method for display timeout on mobile communication devices
US20090311993A1 (en) 2008-06-16 2009-12-17 Horodezky Samuel Jacob Method for indicating an active voice call using animation
US8977710B2 (en) 2008-06-18 2015-03-10 Qualcomm, Incorporated Remote selection and authorization of collected media transmission
US8909940B2 (en) 2008-06-23 2014-12-09 Intel Corporation Extensible pre-boot authentication
KR101498623B1 (ko) 2008-06-25 2015-03-04 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US8069232B2 (en) 2008-06-30 2011-11-29 Microsoft Corporation Wireless synchronization of media content and subscription content
KR101517967B1 (ko) 2008-07-07 2015-05-06 엘지전자 주식회사 휴대 단말기 및 그 제어방법
KR101524616B1 (ko) 2008-07-07 2015-06-02 엘지전자 주식회사 자이로센서를 구비한 휴대 단말기 및 그 제어방법
US8662401B2 (en) 2008-07-25 2014-03-04 First Data Corporation Mobile payment adoption by adding a dedicated payment button to mobile device form factors
KR101446521B1 (ko) 2008-08-12 2014-11-03 삼성전자주식회사 터치 스크린의 정보 스크롤 제어 방법 및 장치
US20100042835A1 (en) 2008-08-18 2010-02-18 Keep Security Inc. System and method for permission confirmation by transmitting a secure request through a central server to a mobile biometric device
CN101340274A (zh) 2008-08-21 2009-01-07 北京搜狗科技发展有限公司 一种数据同步的方法及装置
US8218790B2 (en) 2008-08-26 2012-07-10 Apple Inc. Techniques for customizing control of volume level in device playback
KR101521920B1 (ko) 2008-08-29 2015-05-20 엘지전자 주식회사 이동 단말기 및 그의 음악재생 제어방법
KR101565378B1 (ko) 2008-09-03 2015-11-03 엘지전자 주식회사 이동단말기 및 그 제어 방법
CN101359291B (zh) 2008-09-08 2012-05-23 华为终端有限公司 一种更换界面风格的方法与设备
US20100070490A1 (en) 2008-09-17 2010-03-18 Eloy Technology, Llc System and method for enhanced smart playlists with aggregated media collections
WO2010128442A2 (en) 2009-05-03 2010-11-11 Logomotion, S.R.O. A payment terminal using a mobile communication device, such as a mobile phone; a method of direct debit payment transaction
US8385822B2 (en) 2008-09-26 2013-02-26 Hewlett-Packard Development Company, L.P. Orientation and presence detection for use in configuring operations of computing devices in docked environments
US10380573B2 (en) 2008-09-30 2019-08-13 Apple Inc. Peer-to-peer financial transaction devices and methods
US8510136B2 (en) 2008-09-30 2013-08-13 Verizon Patent And Licensing Inc. Event ticket purchasing
EP2175343A1 (en) 2008-10-08 2010-04-14 Research in Motion Limited A method and handheld electronic device having a graphical user interface which arranges icons dynamically
US20100094834A1 (en) 2008-10-15 2010-04-15 Concert Technology Corporation Bridging in a media sharing system
US8624836B1 (en) 2008-10-24 2014-01-07 Google Inc. Gesture-based small device input
US8949955B2 (en) 2008-10-29 2015-02-03 Symantec Corporation Method and apparatus for mobile time-based UI for VIP
CN101409743A (zh) 2008-11-06 2009-04-15 中兴通讯股份有限公司 一种移动通信终端及其与计算机进行无线通信的方法
KR102339297B1 (ko) 2008-11-10 2021-12-14 구글 엘엘씨 멀티센서 음성 검출
KR101609162B1 (ko) 2008-11-13 2016-04-05 엘지전자 주식회사 터치 스크린을 구비한 이동 단말기 및 이를 이용한 데이터 처리 방법
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100131978A1 (en) 2008-11-26 2010-05-27 Eyecon Technologies, Inc. Visualizing media content navigation with unified media devices controlling
KR101050642B1 (ko) 2008-12-04 2011-07-19 삼성전자주식회사 와치 폰 및 상기 와치 폰에서 통화수행 방법
GB2466038A (en) 2008-12-09 2010-06-16 Alexzandre Anthony Capurro Authorisation of cashless payment using SMS
US8331992B2 (en) 2008-12-19 2012-12-11 Verizon Patent And Licensing Inc. Interactive locked state mobile communication device
USD736254S1 (en) 2008-12-26 2015-08-11 Sony Corporation Display panel or screen with an icon
US8505078B2 (en) 2008-12-28 2013-08-06 Qualcomm Incorporated Apparatus and methods for providing authorized device access
KR101467796B1 (ko) 2009-01-12 2014-12-10 엘지전자 주식회사 이동단말기 및 그 제어 방법
US20110306393A1 (en) 2010-06-15 2011-12-15 Tomasz Goldman Headset base with display and communications base
US8363866B2 (en) 2009-01-30 2013-01-29 Panasonic Automotive Systems Company Of America Audio menu navigation method
US9183881B2 (en) 2009-02-02 2015-11-10 Porto Technology, Llc System and method for semantic trick play
US10175848B2 (en) 2009-02-09 2019-01-08 Nokia Technologies Oy Displaying a display portion including an icon enabling an item to be added to a list
US20100223542A1 (en) 2009-02-27 2010-09-02 Research In Motion Limited Method, system and apparatus for providing pinned bookmarks
US20100229094A1 (en) 2009-03-04 2010-09-09 Apple Inc. Audio preview of music
US8756534B2 (en) 2009-03-16 2014-06-17 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US10705701B2 (en) 2009-03-16 2020-07-07 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US8566044B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US11076189B2 (en) 2009-03-30 2021-07-27 Time Warner Cable Enterprises Llc Personal media channel apparatus and methods
US20100250376A1 (en) 2009-03-31 2010-09-30 Srikanth Nandiraju Virtual terminal for mobile devices
CN101854278A (zh) 2009-04-01 2010-10-06 升东网络科技发展(上海)有限公司 即时通讯中的多媒体传输系统和方法
JP5275883B2 (ja) 2009-04-08 2013-08-28 株式会社エヌ・ティ・ティ・ドコモ クライアント端末連携システム、連携サーバ装置、クライアント端末、クライアント端末連携方法
US20100259482A1 (en) 2009-04-10 2010-10-14 Microsoft Corporation Keyboard gesturing
US8243949B2 (en) 2009-04-14 2012-08-14 Plantronics, Inc. Network addressible loudspeaker and audio play
US8060571B2 (en) 2009-04-15 2011-11-15 Sling Media, Inc. Sharing of audio/visual content with a selected user
JP5370744B2 (ja) 2009-04-23 2013-12-18 横河電機株式会社 測定システム
EP2247087B1 (en) 2009-04-28 2011-08-24 Research In Motion Limited Method and system for pulling a call
US20100272250A1 (en) 2009-04-28 2010-10-28 Michael Shen-Yuan Yap Method and System for Pulling a Call
CN101882409A (zh) 2009-05-06 2010-11-10 中兴通讯股份有限公司 电子广告系统及其广告播放方法
US8669945B2 (en) 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
KR101602221B1 (ko) 2009-05-19 2016-03-10 엘지전자 주식회사 이동 단말 및 그 제어 방법
JP5388114B2 (ja) 2009-05-19 2014-01-15 シャープ株式会社 情報通信システム、通信装置、通信プログラム、および通信方法
US9241062B2 (en) 2009-05-20 2016-01-19 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US20100306657A1 (en) 2009-06-01 2010-12-02 3Dlabs Inc., Ltd. Audio-Enhanced User Interface for Browsing
KR20100132705A (ko) 2009-06-10 2010-12-20 삼성전자주식회사 컨텐츠 리스트 제공방법 및 이를 적용한 멀티미디어 기기
US8281244B2 (en) 2009-06-11 2012-10-02 Apple Inc. User interface for media playback
KR101590357B1 (ko) 2009-06-16 2016-02-01 엘지전자 주식회사 휴대 단말기, 휴대 단말기 동작방법 및 휴대 단말기 싱크 시스템
US8938675B2 (en) 2009-06-16 2015-01-20 Harman International Industries, Incorporated System for automated generation of audio/video control interfaces
US8045961B2 (en) 2009-06-22 2011-10-25 Mourad Ben Ayed Systems for wireless authentication based on bluetooth proximity
US8548523B2 (en) 2009-07-01 2013-10-01 At&T Intellectual Property I, L.P. Methods, apparatus, and computer program products for changing ring method based on type of connected device
US20110016089A1 (en) 2009-07-16 2011-01-20 Apple Inc. Restoring data to a mobile device
CN101610155A (zh) 2009-07-20 2009-12-23 成都市华为赛门铁克科技有限公司 远程授权方法、装置及系统
KR20110012477A (ko) 2009-07-30 2011-02-09 삼성전자주식회사 휴대단말기에서 자바 어플리케이션을 이용한 데이터 저장 방법 및 장치
US8978130B2 (en) 2009-08-05 2015-03-10 Technology Policy Associates, Llc Method and system for child authentication
US9563350B2 (en) 2009-08-11 2017-02-07 Lg Electronics Inc. Mobile terminal and method for controlling the same
US8233272B2 (en) 2009-08-25 2012-07-31 Mindray Ds Usa, Inc. Display units for use in monitoring patients and related systems and methods
US20110054647A1 (en) 2009-08-26 2011-03-03 Nokia Corporation Network service for an audio interface unit
SE534980C2 (sv) 2009-08-26 2012-03-06 Svenska Utvecklings Entreprenoeren Susen Ab Metod för att väcka en insomnad motorfordonsförare
EP2474169B1 (en) 2009-09-01 2019-02-20 LG Electronics Inc. Method for controlling external device and remote controller thereof
TWI554076B (zh) 2009-09-04 2016-10-11 普露諾洛股份有限公司 遠距離的電話管理器
US8412185B2 (en) 2009-09-14 2013-04-02 Nokia Corporation Method and apparatus for switching devices using near field communication
JP4738520B2 (ja) 2009-09-18 2011-08-03 株式会社東芝 電子機器および通信制御方法
US8594980B2 (en) 2009-09-18 2013-11-26 Verizon Patent And Licensing Inc. Method and apparatus of template model view generation for home monitoring and control
CN101673207B (zh) 2009-09-25 2013-04-10 成都致远诺亚舟教育科技有限公司 手持式学习终端的程序更新方法
CN101673298A (zh) 2009-09-29 2010-03-17 深圳市融创天下科技发展有限公司 一种视频点播中的视频数据分布式缓存方法
US20110082902A1 (en) 2009-10-01 2011-04-07 Apple Inc. Systems and methods for providing media pools in a communications network
US8312392B2 (en) 2009-10-02 2012-11-13 Qualcomm Incorporated User interface gestures and methods for providing file sharing functionality
US8756010B2 (en) 2009-10-12 2014-06-17 Qualcomm Incorporated Method and apparatus for identification of points of interest within a predefined area
KR101663474B1 (ko) 2009-10-13 2016-10-10 삼성전자주식회사 휴대단말기, 휴대단말기의 바탕화면 표시 방법 및 저장 매체
US8924893B2 (en) 2009-10-14 2014-12-30 At&T Mobility Ii Llc Locking and unlocking of an electronic device using a sloped lock track
US20110106671A1 (en) 2009-10-30 2011-05-05 Bank Of America Corporation Financial Transaction Error Detection
US9176542B2 (en) 2009-11-06 2015-11-03 Sony Corporation Accelerometer-based touchscreen user interface
US9152318B2 (en) 2009-11-25 2015-10-06 Yahoo! Inc. Gallery application for content viewing
EP2508036B1 (en) 2009-12-01 2019-03-06 RingCentral, Inc. Universal call management platform
KR20110063297A (ko) 2009-12-02 2011-06-10 삼성전자주식회사 휴대용단말기 및 그 제어방법
JP2011118662A (ja) 2009-12-03 2011-06-16 Toshiba Corp シンクライアント型の情報処理システム
US8769428B2 (en) 2009-12-09 2014-07-01 Citrix Systems, Inc. Methods and systems for generating a combined display of taskbar button group entries generated on a local machine and on a remote machine
US20110142234A1 (en) 2009-12-15 2011-06-16 Michael Leonard Rogers Multi-Factor Authentication Using a Mobile Phone
US8411604B2 (en) 2009-12-21 2013-04-02 Research In Motion Limited Methods and apparatus for use in facilitating access to aggregator services for mobile communication devices via wireless communication networks
US8458780B1 (en) 2009-12-21 2013-06-04 Emc Corporation Pluggable login architecture and dynamic resource recognition
KR20110074024A (ko) 2009-12-24 2011-06-30 삼성전자주식회사 멀티미디어 기기
KR20110077260A (ko) 2009-12-30 2011-07-07 주식회사 아이리버 애플리케이션과 상호작용하는 컨트롤 키를 제공하는 모바일 디바이스 및 그 방법
KR101626621B1 (ko) 2009-12-30 2016-06-01 엘지전자 주식회사 원형 디스플레이부를 구비한 이동 통신 단말기의 데이터 제어 방법 및 이를 적용한 이동 통신 단말기
US10169740B2 (en) 2009-12-31 2019-01-01 International Business Machines Corporation Tag cloud buddy list for messaging contacts
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8525839B2 (en) 2010-01-06 2013-09-03 Apple Inc. Device, method, and graphical user interface for providing digital content products
JP2011141683A (ja) 2010-01-06 2011-07-21 Ricoh Co Ltd 画像処理装置、表示装置、認証システム、表示制御方法、表示制御プログラム、及びそのプログラムを記録した記録媒体
US20110163966A1 (en) 2010-01-06 2011-07-07 Imran Chaudhri Apparatus and Method Having Multiple Application Display Modes Including Mode with Display Resolution of Another Apparatus
US8301121B2 (en) 2010-01-22 2012-10-30 Sony Ericsson Mobile Communications Ab Regulating alerts generated by communication terminals responsive to sensed movement
US9338276B2 (en) 2010-01-26 2016-05-10 Apple Inc. Gating accessory connection
GB201001728D0 (en) 2010-02-03 2010-03-24 Skype Ltd Screen sharing
DE102010008622A1 (de) 2010-02-19 2011-08-25 Airbus Operations GmbH, 21129 Gehäuseloses Staufach
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US8869263B2 (en) 2010-02-26 2014-10-21 Blackberry Limited Wireless communications system providing mobile device authentication bypass based upon user-wearable security device and related methods
US20110218765A1 (en) 2010-03-02 2011-09-08 Rogers Janice L Illustrating and Displaying Time and The Expiration Thereof
US8464063B2 (en) 2010-03-10 2013-06-11 Avaya Inc. Trusted group of a plurality of devices with single sign on, secure authentication
US8614560B2 (en) 2010-03-26 2013-12-24 Nokia Corporation Method and apparatus for determining interaction mode
JP2011209786A (ja) 2010-03-29 2011-10-20 Sony Corp 情報処理装置、および情報処理方法、並びにプログラム
JP2011210138A (ja) 2010-03-30 2011-10-20 Sony Corp 電子機器、画像出力方法及びプログラム
US20110242002A1 (en) 2010-03-30 2011-10-06 Jonathan Kaplan Hand-held device with a touch screen and a touch strip
CN102209321B (zh) 2010-03-31 2013-10-09 华为终端有限公司 一种切换处理方法及通信系统以及相关设备
US8291344B2 (en) 2010-04-07 2012-10-16 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US8917632B2 (en) 2010-04-07 2014-12-23 Apple Inc. Different rate controller configurations for different cameras of a mobile device
US9413836B2 (en) 2010-04-08 2016-08-09 At&T Intellectual Property I, L.P. Communication routing based on presence in a confined wireless environment
US8380177B2 (en) 2010-04-09 2013-02-19 Paydiant, Inc. Mobile phone payment processing methods and systems
EP2559163A4 (en) 2010-04-16 2014-05-14 Nicholas J Mastandrea PORTABLE CALCULATION INTERFACE FOR MOTION DETECTION
US8638222B2 (en) 2010-04-19 2014-01-28 Microsoft Corporation Controllable device selection based on controller location
US8699674B2 (en) 2010-04-21 2014-04-15 Angel.Com Incorporated Dynamic speech resource allocation
EP2381372A1 (en) 2010-04-23 2011-10-26 Research In Motion Limited Visual shuffling of media icons
US20110271181A1 (en) 2010-04-28 2011-11-03 Acer Incorporated Screen unlocking method and electronic apparatus thereof
US9559869B2 (en) 2010-05-04 2017-01-31 Qwest Communications International Inc. Video call handling
US8494439B2 (en) 2010-05-04 2013-07-23 Robert Bosch Gmbh Application state and activity transfer between devices
JP5678468B2 (ja) 2010-05-06 2015-03-04 株式会社リコー 画像処理システム及び動作管理方法
KR101695810B1 (ko) 2010-05-07 2017-01-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
FI20105493A0 (fi) 2010-05-07 2010-05-07 Polar Electro Oy Tehonsiirto
AU2011250886A1 (en) 2010-05-10 2013-01-10 Icontrol Networks, Inc Control system user interface
JP2011238125A (ja) 2010-05-12 2011-11-24 Sony Corp 画像処理装置および方法、並びにプログラム
US20110281568A1 (en) 2010-05-13 2011-11-17 Rovi Technologies Corporation Management of incoming telephony communications in a local media network
WO2011146898A2 (en) 2010-05-21 2011-11-24 Bologh Mark J Internet system for ultra high video quality
KR101673925B1 (ko) 2010-05-26 2016-11-09 삼성전자주식회사 터치 락 상태를 가지는 단말기 및 이의 운용 방법
US20110291971A1 (en) 2010-05-28 2011-12-01 Funai Electric Co., Ltd. Highly Integrated Touch Screen Handheld Device
US20110304556A1 (en) 2010-06-09 2011-12-15 Microsoft Corporation Activate, fill, and level gestures
EP2580735A4 (en) 2010-06-10 2015-07-01 Cricket Communications Inc MOBILE DEVICE FOR MEDIA ACCESS AND PLACEMENT
US20120089951A1 (en) 2010-06-10 2012-04-12 Cricket Communications, Inc. Method and apparatus for navigation within a multi-level application
CN101873386A (zh) 2010-06-13 2010-10-27 华为终端有限公司 一种移动终端及其来电提示方法
JP4977236B2 (ja) 2010-06-16 2012-07-18 株式会社東芝 情報端末、ランチャー・プログラムおよび方法
US20110319056A1 (en) 2010-06-29 2011-12-29 Enterproid Hk Ltd Remote access to a mobile device
US9798822B2 (en) 2010-06-29 2017-10-24 Apple Inc. Location based grouping of browsing histories
KR101658087B1 (ko) 2010-07-02 2016-09-21 엘지전자 주식회사 이동단말기 및 그의 증강현실을 이용한 정보 표시 방법
DE202010010266U1 (de) 2010-07-06 2010-10-14 Holzma Plattenaufteiltechnik Gmbh Plattenaufteilanlage
US8972903B2 (en) 2010-07-08 2015-03-03 Apple Inc. Using gesture to navigate hierarchically ordered user interface screens
US8500031B2 (en) 2010-07-29 2013-08-06 Bank Of America Corporation Wearable article having point of sale payment functionality
CA2748199A1 (en) 2010-08-04 2012-02-04 Iwatchlife Inc. Method and system for making video calls
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
EP3021191B1 (en) 2010-08-13 2018-06-06 LG Electronics Inc. Mobile terminal, display device, and control method therefor
JP5510185B2 (ja) 2010-08-20 2014-06-04 ソニー株式会社 情報処理装置、プログラム及び表示制御方法
US8519834B2 (en) 2010-08-22 2013-08-27 Andrea Theresa Jersa Wrist wound vibrating device
EP2609750A4 (en) 2010-08-26 2014-10-08 Tarik Taleb SYSTEM AND METHOD FOR CREATING A CUSTOMIZED MULTIMEDIA CONTENT CHANNEL FOR A SOCIAL NETWORK
US8611559B2 (en) 2010-08-31 2013-12-17 Apple Inc. Dynamic adjustment of master and individual volume controls
US8854318B2 (en) 2010-09-01 2014-10-07 Nokia Corporation Mode switching
US10140301B2 (en) 2010-09-01 2018-11-27 Apple Inc. Device, method, and graphical user interface for selecting and using sets of media player controls
US8341142B2 (en) 2010-09-08 2012-12-25 Nuance Communications, Inc. Methods and apparatus for searching the Internet
JP5851507B2 (ja) 2010-09-08 2016-02-03 ニュアンス コミュニケーションズ,インコーポレイテッド インターネット検索に関する方法及び装置
CN101931655A (zh) 2010-09-10 2010-12-29 北京开心人信息技术有限公司 一种在线状态的提示方法与系统
US20120062470A1 (en) 2010-09-10 2012-03-15 Chang Ray L Power Management
US20120066731A1 (en) 2010-09-14 2012-03-15 Verizon Patent And Licensing Inc. Customer service contact
US8886710B2 (en) 2010-09-24 2014-11-11 Amazon Technologies, Inc. Resuming content across devices and formats
US8606948B2 (en) 2010-09-24 2013-12-10 Amazon Technologies, Inc. Cloud-based device interaction
US20120215878A1 (en) 2010-09-28 2012-08-23 Adam Kidron Content delivery platform apparatuses, methods and systems
US20120078789A1 (en) 2010-09-29 2012-03-29 Ebay Inc. Offline to online payment
US8954290B2 (en) 2010-09-30 2015-02-10 Fitbit, Inc. Motion-activated display of messages on an activity monitoring device
US9046992B2 (en) 2010-10-01 2015-06-02 Z124 Gesture controls for multi-screen user interface
US8923997B2 (en) 2010-10-13 2014-12-30 Sonos, Inc Method and apparatus for adjusting a speaker system
US8473577B2 (en) 2010-10-13 2013-06-25 Google Inc. Continuous application execution between multiple devices
US20120096386A1 (en) 2010-10-19 2012-04-19 Laurent Baumann User interface for application transfers
EP2633647B1 (en) 2010-10-27 2019-05-01 Telefonaktiebolaget LM Ericsson (publ) Authorizing an electronic device to control a media rendering unit
US9262595B2 (en) 2010-10-29 2016-02-16 Qualcomm Incorporated Methods and systems for accessing licensable items in a geographic area
CN101976171A (zh) 2010-10-29 2011-02-16 东莞宇龙通信科技有限公司 一种触摸设备的解锁方法、系统及触摸设备
US9251503B2 (en) 2010-11-01 2016-02-02 Microsoft Technology Licensing, Llc Video viewing and tagging system
US9262002B2 (en) 2010-11-03 2016-02-16 Qualcomm Incorporated Force sensing touch screen
US20120115608A1 (en) 2010-11-05 2012-05-10 Howard Pfeifer Method and apparatus for controlling an audio parameter of a plurality of wagering game machines
US8640021B2 (en) 2010-11-12 2014-01-28 Microsoft Corporation Audience-based presentation and customization of content
EP2641156A1 (en) 2010-11-18 2013-09-25 Google, Inc. Surfacing off-screen visible objects
KR101808625B1 (ko) 2010-11-23 2018-01-18 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
US9053103B2 (en) 2010-11-23 2015-06-09 Nokia Technologies Oy Method and apparatus for interacting with a plurality of media files
US20120143694A1 (en) 2010-12-03 2012-06-07 Microsoft Corporation Using behavioral data to manage computer services
WO2012078158A1 (en) 2010-12-09 2012-06-14 Utc Fire & Security Corporation Wake-up circuit for a security device
KR101830651B1 (ko) 2011-01-04 2018-02-21 엘지전자 주식회사 정보 표시 장치 및 그 방법
US20130007617A1 (en) 2011-01-05 2013-01-03 Qnx Software Systems Limited Media Player Navigation
US8655345B2 (en) 2011-01-08 2014-02-18 Steven K. Gold Proximity-enabled remote control
US10082892B2 (en) 2011-01-10 2018-09-25 Apple Inc. Button functionality
CN102065148A (zh) 2011-01-12 2011-05-18 无锡网芯科技有限公司 基于通信网络的存储系统访问授权方法
US9002420B2 (en) 2011-01-19 2015-04-07 Ram Pattikonda Watch having an interface to a mobile communications device
CN201928419U (zh) 2011-01-21 2011-08-10 青岛海信移动通信技术股份有限公司 一种耳机及配置有所述耳机的移动通信终端
US8825362B2 (en) 2011-01-27 2014-09-02 Honda Motor Co., Ltd. Calendar sharing for the vehicle environment using a connected cell phone
US9049494B2 (en) 2011-01-31 2015-06-02 Cbs Interactive, Inc. Media playback control
WO2012104288A1 (en) 2011-02-03 2012-08-09 Telefonaktiebolaget L M Ericsson (Publ) A device having a multipoint sensing surface
EP2487871A1 (en) 2011-02-11 2012-08-15 Telefónica, S.A. Method and system for transmission of application status between different devices
US20120210226A1 (en) 2011-02-11 2012-08-16 Sony Network Entertainment International Llc Method to playback a recently-played asset via a second display
US10146329B2 (en) 2011-02-25 2018-12-04 Nokia Technologies Oy Method and apparatus for providing different user interface effects for different motion gestures and motion properties
US20120222092A1 (en) 2011-02-25 2012-08-30 Qualcomm Incorporated Controlling access to media for an electronic device
US20120223959A1 (en) 2011-03-01 2012-09-06 Apple Inc. System and method for a touchscreen slider with toggle control
KR20120100433A (ko) 2011-03-04 2012-09-12 삼성에스디에스 주식회사 사용자 정보와 3차원 지아이에스 데이터를 활용한 모바일정보 제공 시스템
JP5885185B2 (ja) 2011-03-07 2016-03-15 京セラ株式会社 携帯端末装置
JP5749524B2 (ja) 2011-03-09 2015-07-15 京セラ株式会社 携帯端末、携帯端末の制御プログラムおよび携帯端末の制御方法
US8904305B2 (en) 2011-03-11 2014-12-02 Google Inc. Automatically hiding controls
US8392259B2 (en) 2011-03-17 2013-03-05 Research In Motion Limited Methods and apparatus to obtain transaction confirmation
WO2012126078A1 (en) 2011-03-23 2012-09-27 Research In Motion Limited Method for conference call prompting from a locked device
US9298287B2 (en) 2011-03-31 2016-03-29 Microsoft Technology Licensing, Llc Combined activation for natural user interface systems
US10630795B2 (en) 2011-03-31 2020-04-21 Oath Inc. Systems and methods for transferring application state between devices based on gestural input
JP5161333B2 (ja) 2011-03-31 2013-03-13 株式会社エヌ・ティ・ティ・ドコモ 情報表示サーバ、情報表示システム、及び情報表示方法
US9337999B2 (en) 2011-04-01 2016-05-10 Intel Corporation Application usage continuum across platforms
US9239605B1 (en) 2011-04-04 2016-01-19 Google Inc. Computing device power state transitions
US8938312B2 (en) 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9727124B2 (en) 2011-04-19 2017-08-08 Apple Inc. Power saving application update in a portable electronic device
US9832183B2 (en) 2011-04-19 2017-11-28 Early Warning Services, Llc Key management using quasi out of band authentication architecture
CN102750066A (zh) 2011-04-20 2012-10-24 上海三旗通信科技股份有限公司 触屏终端在锁屏状态下实现特定功能控制方式
US9493130B2 (en) 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US20120272145A1 (en) 2011-04-22 2012-10-25 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Method for using radio presets as application shortcuts
EP2702752B1 (en) 2011-04-27 2019-09-18 BlackBerry Limited System and method for automatically answering a call on a communication device
US10600139B2 (en) 2011-04-29 2020-03-24 American Greetings Corporation Systems, methods and apparatus for creating, editing, distributing and viewing electronic greeting cards
US9606643B2 (en) 2011-05-02 2017-03-28 Microsoft Technology Licensing, Llc Extended above the lock-screen experience
US10222974B2 (en) 2011-05-03 2019-03-05 Nokia Technologies Oy Method and apparatus for providing quick access to device functionality
US10402898B2 (en) 2011-05-04 2019-09-03 Paypal, Inc. Image-based financial processing
US9141616B2 (en) 2011-05-06 2015-09-22 Google Inc. Physical confirmation for network-provided content
US8171137B1 (en) 2011-05-09 2012-05-01 Google Inc. Transferring application state across devices
US8812601B2 (en) 2011-05-09 2014-08-19 Google Inc. Transferring application state across devices with checkpoints
US8224894B1 (en) 2011-05-09 2012-07-17 Google Inc. Zero-click sharing of application context across devices
US20120290943A1 (en) 2011-05-10 2012-11-15 Nokia Corporation Method and apparatus for distributively managing content between multiple users
US20120297017A1 (en) 2011-05-20 2012-11-22 Microsoft Corporation Privacy-conscious personalization
US8954177B2 (en) 2011-06-01 2015-02-10 Apple Inc. Controlling operation of a media device based upon whether a presentation device is currently being worn by a user
US9201895B2 (en) 2011-06-03 2015-12-01 Apple Inc. Management of downloads from a network-based digital data repository based on network performance
US9478251B2 (en) 2011-06-03 2016-10-25 Apple Inc. Graphical user interfaces for displaying media items
CN103582873B (zh) 2011-06-05 2017-07-14 苹果公司 用于显示从多个应用接收到的通知的系统和方法
US20120311444A1 (en) 2011-06-05 2012-12-06 Apple Inc. Portable multifunction device, method, and graphical user interface for controlling media playback using gestures
US20120324390A1 (en) 2011-06-16 2012-12-20 Richard Tao Systems and methods for a virtual watch
US9891800B2 (en) 2011-06-17 2018-02-13 Nokia Technologies Oy Method and apparatus for providing a notification mechanism
US8663018B2 (en) 2011-06-29 2014-03-04 Amazon Technologies, Inc. Data locker synchronization
TW201301118A (zh) 2011-06-30 2013-01-01 Gcca Inc 雲端通訊裝置以及使用雲端通訊裝置之智慧行動裝置
WO2013000150A1 (en) 2011-06-30 2013-01-03 Nokia Corporation Method, apparatus and computer program product for retrieval of lost or forgotten passwords
US8639706B1 (en) 2011-07-01 2014-01-28 Google Inc. Shared metadata for media files
US9582598B2 (en) 2011-07-05 2017-02-28 Visa International Service Association Hybrid applications utilizing distributed models and views apparatuses, methods and systems
US9639506B2 (en) 2011-07-07 2017-05-02 Honeywell International Inc. Interface for home energy manager
US20130191220A1 (en) 2011-07-13 2013-07-25 Research In Motion Limited Systems and Methods for Displaying Over-Scroll Regions on Electronic Devices
US20130017846A1 (en) 2011-07-14 2013-01-17 Htc Corporation Systems and Methods for Smart Texting on Mobile Devices
US8726371B2 (en) 2011-07-18 2014-05-13 Cisco Technology, Inc. Enhanced security for devices enabled for wireless communications
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
US8854299B2 (en) 2011-07-22 2014-10-07 Blackberry Limited Orientation based application launch system
US8823318B2 (en) 2011-07-25 2014-09-02 ConvenientPower HK Ltd. System and method for operating a mobile device
US20130027289A1 (en) 2011-07-27 2013-01-31 Lg Electronics Inc. Electronic device
US8837488B2 (en) 2011-07-29 2014-09-16 Blackfire Research Corporation Two tier multiple sliding window mechanism for multidestination media applications
US9438697B2 (en) 2011-08-01 2016-09-06 Quickbiz Holdings Limited, Apia User interface content state synchronization across devices
US20130041790A1 (en) 2011-08-12 2013-02-14 Sivakumar Murugesan Method and system for transferring an application state
US9864632B2 (en) 2011-08-17 2018-01-09 Open Invention Network, Llc System and method for transfer of an application state between devices
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US8789156B2 (en) 2011-08-19 2014-07-22 International Business Machines Corporation Data management with a networked mobile device
US8750677B2 (en) 2011-08-23 2014-06-10 Microsoft Corporation Method for transferring media playback from a different device
US9122311B2 (en) 2011-08-24 2015-09-01 Apple Inc. Visual feedback for tactile and non-tactile user interfaces
KR101955976B1 (ko) 2011-08-25 2019-03-08 엘지전자 주식회사 제한된 사용자 인터페이스를 가진 장치의 활성화
US9819710B2 (en) 2011-08-25 2017-11-14 Logitech Europe S.A. Easy sharing of wireless audio signals
US20130055082A1 (en) 2011-08-26 2013-02-28 Jorge Fino Device, Method, and Graphical User Interface for Navigating and Previewing Content Items
KR101419984B1 (ko) 2011-08-26 2014-07-15 주식회사 팬택 클라우드 환경에서 nfc를 이용한 콘텐츠 공유 시스템 및 방법
KR101962445B1 (ko) 2011-08-30 2019-03-26 삼성전자 주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 사용자 인터페이스 제공 방법
KR101719994B1 (ko) 2011-09-07 2017-03-27 엘지전자 주식회사 이동단말기 및 그 제어방법
US8976128B2 (en) 2011-09-12 2015-03-10 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US20130073286A1 (en) 2011-09-20 2013-03-21 Apple Inc. Consolidating Speech Recognition Results
US8769286B2 (en) 2011-09-20 2014-07-01 Daon Holdings Limited Methods and systems for increasing the security of electronic messages
US9286384B2 (en) 2011-09-21 2016-03-15 Sonos, Inc. Methods and systems to share media
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US9052810B2 (en) 2011-09-28 2015-06-09 Sonos, Inc. Methods and apparatus to manage zones of a multi-zone media playback system
US8769624B2 (en) 2011-09-29 2014-07-01 Apple Inc. Access control utilizing indirect authentication
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
CN108337380B (zh) 2011-09-30 2022-08-19 苹果公司 自动调整用户界面以用于免提交互
US8682973B2 (en) 2011-10-05 2014-03-25 Microsoft Corporation Multi-user and multi-device collaboration
CN103037064B (zh) 2011-10-08 2015-02-11 英华达(上海)科技有限公司 个性化屏幕解锁方法及其系统
US8917877B2 (en) 2011-10-12 2014-12-23 Sony Corporation Distance-based rendering of media files
KR101820734B1 (ko) 2011-10-14 2018-03-13 삼성전자 주식회사 모바일 단말기를 위한 동적 잠금 해제 방법 및 장치
US20180032997A1 (en) 2012-10-09 2018-02-01 George A. Gordon System, method, and computer program product for determining whether to prompt an action by a platform in connection with a mobile device
WO2013057048A1 (en) 2011-10-18 2013-04-25 Slyde Watch Sa A method and circuit for switching a wristwatch from a first power mode to a second power mode
KR101834995B1 (ko) 2011-10-21 2018-03-07 삼성전자주식회사 디바이스 간 컨텐츠 공유 방법 및 장치
US8718628B2 (en) 2011-10-24 2014-05-06 Verizon Patent And Licensing Inc. Intelligent call identification
JP5739303B2 (ja) 2011-10-25 2015-06-24 京セラ株式会社 携帯端末、ロック制御プログラムおよびロック制御方法
JP5908253B2 (ja) 2011-10-28 2016-04-26 シャープ株式会社 機器制御装置及び機器制御方法
US20130111579A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Electronic device mode, associated apparatus and methods
US8739070B2 (en) 2011-11-01 2014-05-27 WMODE, Inc. System, method and apparatus for providing an application carousel
US8639230B2 (en) 2011-11-04 2014-01-28 Google Inc. Transferring an active call to another device
US8225191B1 (en) 2011-11-07 2012-07-17 Google Inc. Synchronizing web browsers
US9582178B2 (en) 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US9031847B2 (en) 2011-11-15 2015-05-12 Microsoft Technology Licensing, Llc Voice-controlled camera operations
US8719734B2 (en) 2011-11-16 2014-05-06 Microsoft Corporation Two-stage swipe gesture recognition
US20130120106A1 (en) 2011-11-16 2013-05-16 Motorola Mobility, Inc. Display device, corresponding systems, and methods therefor
JP5825631B2 (ja) 2011-11-17 2015-12-02 アルパイン株式会社 電子装置
WO2013075071A1 (en) 2011-11-18 2013-05-23 Ayman Hammad Mobile wallet store and service injection platform apparatuses, methods and systems
US9661073B2 (en) 2011-11-18 2017-05-23 Google Inc. Web browser synchronization with multiple simultaneous profiles
US8655385B2 (en) 2011-11-18 2014-02-18 Blackberry Limited Social networking methods and apparatus for use in facilitating participation in user-relevant social groups
CN102508707A (zh) 2011-11-21 2012-06-20 宇龙计算机通信科技(深圳)有限公司 信息编辑方法和终端
EP2783503A1 (en) 2011-11-22 2014-10-01 BlackBerry Limited Methods and apparatus to control presentation devices
FR2983177B1 (fr) 2011-11-29 2014-06-06 Airbus Operations Sas Dispositif de dialogue interactif entre un operateur d'un aeronef et un systeme de guidage dudit aeronef.
TWI487364B (zh) 2011-12-01 2015-06-01 Amtran Technology Co Ltd 裝置間切換通話之方法及通訊電子裝置
US8392617B1 (en) 2011-12-06 2013-03-05 Google Inc. Browsing context continuation across multiple devices
CN102523213B (zh) 2011-12-13 2014-09-17 华为终端有限公司 服务器、终端鉴权方法以及服务器、终端
TW201324310A (zh) 2011-12-14 2013-06-16 Acer Inc 螢幕解鎖方法
US9245020B2 (en) 2011-12-14 2016-01-26 Microsoft Technology Licensing, Llc Collaborative media sharing
US20130162411A1 (en) 2011-12-22 2013-06-27 Qualcomm Incorporated Method and apparatus to adapt a remote control user interface
US20130305354A1 (en) 2011-12-23 2013-11-14 Microsoft Corporation Restricted execution modes
RU2600106C2 (ru) 2011-12-28 2016-10-20 Нокиа Текнолоджиз Ой Переключатель приложений
US9983771B2 (en) 2011-12-28 2018-05-29 Nokia Technologies Oy Provision of an open instance of an application
CN104137477B (zh) 2011-12-29 2019-03-15 瑞典爱立信有限公司 用于处置互连节点中状况改变的技术
US9191699B2 (en) 2011-12-29 2015-11-17 Sonos, Inc. Systems and methods for connecting an audio controller to a hidden audio network
US9247492B2 (en) 2011-12-29 2016-01-26 Sonos, Inc. Systems and methods for multi-network audio control
KR20130082190A (ko) 2012-01-11 2013-07-19 엘지전자 주식회사 단말기 및 아이콘 표시 방법
US9213822B2 (en) 2012-01-20 2015-12-15 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
US9436929B2 (en) 2012-01-24 2016-09-06 Verizon Patent And Licensing Inc. Collaborative event playlist systems and methods
CN104169932B (zh) 2012-01-26 2018-02-02 黑莓有限公司 向电子设备分发内容的方法和设备
JP5999452B2 (ja) 2012-01-26 2016-09-28 パナソニックIpマネジメント株式会社 携帯端末及び機器連携方法
US9431980B2 (en) 2012-01-30 2016-08-30 Echostar Ukraine Llc Apparatus, systems and methods for adjusting output audio volume based on user location
JP5906097B2 (ja) 2012-01-31 2016-04-20 キヤノン株式会社 電子機器、その制御方法、プログラム、及び記録媒体
US9680927B2 (en) 2012-02-05 2017-06-13 Apple Inc. Cloud tabs
JP5705888B2 (ja) 2012-02-06 2015-04-22 株式会社コナミデジタルエンタテインメント 管理サーバ、その制御方法、及びそのプログラム
US9507630B2 (en) 2012-02-09 2016-11-29 Cisco Technology, Inc. Application context transfer for distributed computing resources
US8995960B2 (en) 2012-02-10 2015-03-31 Dedo Interactive, Inc. Mobile device authentication
KR102008495B1 (ko) 2012-02-24 2019-08-08 삼성전자주식회사 데이터 공유 방법 및 이를 위한 이동 단말기
KR101849925B1 (ko) 2012-02-24 2018-04-18 삼성전자주식회사 무선 통신 네트워크에서 디바이스 탐색 방법 및 장치
US8947382B2 (en) 2012-02-28 2015-02-03 Motorola Mobility Llc Wearable display device, corresponding systems, and method for presenting output on the same
US8988349B2 (en) 2012-02-28 2015-03-24 Google Technology Holdings LLC Methods and apparatuses for operating a display in an electronic device
EP4167166A1 (en) 2012-02-29 2023-04-19 Apple Inc. Method, device and secure element for conducting a secured financial transaction on a device
US9702723B2 (en) 2012-03-01 2017-07-11 Nokia Technologies Oy Method and apparatus for receiving user estimation of navigational instructions
US9189062B2 (en) 2012-03-07 2015-11-17 Google Technology Holdings LLC Portable electronic device and method for controlling operation thereof based on user motion
US9936329B2 (en) 2012-03-09 2018-04-03 Nokia Technologies Oy Methods, apparatuses, and computer program products for operational routing between proximate devices
US8725113B2 (en) 2012-03-12 2014-05-13 Google Inc. User proximity control of devices
GB2500375A (en) 2012-03-13 2013-09-25 Nec Corp Input commands to a computer device using patterns of taps
WO2013135270A1 (en) 2012-03-13 2013-09-19 Telefonaktiebolaget L M Ericsson (Publ) An apparatus and method for navigating on a touch sensitive screen thereof
US8751577B2 (en) 2012-03-15 2014-06-10 Google Inc. Methods and systems for ordering and voting on shared media playlists
WO2013137503A1 (ko) 2012-03-16 2013-09-19 엘지전자 주식회사 자연언어처리를 이용하는 잠금 해제 수행 방법 및 그 단말기
US10469897B2 (en) 2012-03-19 2019-11-05 Sonos, Inc. Context-based user music menu systems and methods
US9934713B2 (en) 2012-03-28 2018-04-03 Qualcomm Incorporated Multifunction wristband
CA2866500C (en) 2012-04-01 2016-08-30 Authentify, Inc. Secure authentication in a multi-party system
JP2012168966A (ja) 2012-04-10 2012-09-06 Toshiba Corp 情報端末、そのプログラムおよび方法
US10142122B1 (en) 2012-04-11 2018-11-27 Google Llc User interfaces, systems and methods for configuring smart devices for interoperability with a smart hub device
GB201206564D0 (en) 2012-04-13 2012-05-30 Intrasonics Sarl Event engine synchronisation
US9507327B2 (en) 2012-04-20 2016-11-29 Liaison Home Automation, Llc Systems and methods for controlling home and commercial environments including one touch and intuitive functionality
US20130283199A1 (en) 2012-04-24 2013-10-24 Microsoft Corporation Access to an Application Directly from a Lock Screen
CN102707994B (zh) 2012-04-27 2014-08-20 西安电子科技大学 局域网络中手持移动设备控制电脑的方法
US20170372405A9 (en) 2012-05-04 2017-12-28 Kachyng, Inc. Quick transaction completion using mobile device
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
US10235014B2 (en) 2012-05-09 2019-03-19 Apple Inc. Music user interface
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9086937B2 (en) 2012-05-16 2015-07-21 Apple Inc. Cloud-based application resource files
US20130311597A1 (en) 2012-05-16 2013-11-21 Apple Inc. Locally backed cloud-based storage
AU2013262488A1 (en) 2012-05-18 2014-12-18 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US8718716B2 (en) 2012-05-23 2014-05-06 Steven Earl Kader Method of displaying images while charging a smartphone
US8850037B2 (en) 2012-05-24 2014-09-30 Fmr Llc Communication session transfer between devices
CN102737313A (zh) 2012-05-25 2012-10-17 天地融科技股份有限公司 一种给电子签名工具授权校验的方法、系统及电子签名工具
KR101959347B1 (ko) 2012-05-25 2019-03-18 삼성전자주식회사 복수의 통신 단말을 이용한 다중 디스플레이 방법, 기계로 읽을 수 있는 저장 매체 및 통신 단말
US9191988B2 (en) 2012-05-26 2015-11-17 Qualcomm Incorporated Smart pairing using bluetooth technology
CN103458215B (zh) 2012-05-29 2016-11-23 国基电子(上海)有限公司 切换视频通话的系统、手机、电子装置及切换方法
CN102750086A (zh) 2012-05-31 2012-10-24 上海必邦信息科技有限公司 电子设备间实现无线分享显示页面控制的方法
US10156455B2 (en) 2012-06-05 2018-12-18 Apple Inc. Context-aware voice guidance
US10025920B2 (en) 2012-06-07 2018-07-17 Early Warning Services, Llc Enterprise triggered 2CHK association
KR101909030B1 (ko) 2012-06-08 2018-10-17 엘지전자 주식회사 비디오 편집 방법 및 이를 위한 디지털 디바이스
WO2013185109A2 (en) 2012-06-08 2013-12-12 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US8971556B2 (en) 2012-06-10 2015-03-03 Apple Inc. Remotely controlling a hearing device
EP3379441B1 (en) 2012-06-11 2019-12-18 Samsung Electronics Co., Ltd. Mobile device and control method thereof
CN102695302B (zh) 2012-06-15 2014-12-24 吴芳 用于扩展便携终端电子设备移动通信功能的系统和方法
US9020923B2 (en) 2012-06-18 2015-04-28 Score Revolution, Llc Systems and methods to facilitate media search
US20130346068A1 (en) 2012-06-25 2013-12-26 Apple Inc. Voice-Based Image Tagging and Searching
US8880648B1 (en) 2012-06-27 2014-11-04 Audible, Inc. Automated transition of content consumption across devices
US9247068B2 (en) 2012-06-27 2016-01-26 Blackberry Limited Apparatus, system and method of call notifications to active communication devices
JP6050625B2 (ja) 2012-06-28 2016-12-21 サターン ライセンシング エルエルシーSaturn Licensing LLC 情報処理装置及び情報処理方法、コンピューター・プログラム、並びに情報通信システム
US9436687B2 (en) 2012-07-09 2016-09-06 Facebook, Inc. Acquiring structured user data using composer interface having input fields corresponding to acquired structured data
US20140026188A1 (en) 2012-07-23 2014-01-23 Justin L. Gubler Systems, methods, and devices for restricting use of electronic devices based on proximity to wireless devices
US8990343B2 (en) 2012-07-30 2015-03-24 Google Inc. Transferring a state of an application from a first computing device to a second computing device
US8995687B2 (en) 2012-08-01 2015-03-31 Sonos, Inc. Volume interactions for connected playback devices
KR101899819B1 (ko) 2012-08-03 2018-09-20 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101892233B1 (ko) 2012-08-03 2018-08-27 삼성전자주식회사 휴대용 단말기에서 상황인식을 이용한 알람 서비스 방법 및 장치
CN102902453A (zh) 2012-08-07 2013-01-30 北京小米科技有限责任公司 一种播放器控制面板显示方法及装置
US8930005B2 (en) 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
US9736265B2 (en) 2012-08-09 2017-08-15 Facebook, Inc. Handling notifications
US9024995B2 (en) 2012-08-09 2015-05-05 Samsung Electronics Co., Ltd. Video calling using a remote camera device to stream video to a local endpoint host acting as a proxy
KR101971911B1 (ko) 2012-08-16 2019-04-24 삼성전자주식회사 이미지를 디스플레이하기 위한 방법 및 그 전자 장치
KR102174437B1 (ko) 2012-08-24 2020-11-04 삼성전자주식회사 화면 상의 이미지를 이용하여 인터랙션 정보를 제공하는 장치 및 방법
JP6051681B2 (ja) 2012-08-24 2016-12-27 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
WO2014030876A1 (en) 2012-08-24 2014-02-27 Samsung Electronics Co., Ltd. Method and apparatus for determining item based on interaction environment
CN102866828B (zh) 2012-08-29 2015-11-25 腾讯科技(深圳)有限公司 一种终端控制方法和设备
US9230076B2 (en) * 2012-08-30 2016-01-05 Microsoft Technology Licensing, Llc Mobile device child share
TWI619067B (zh) 2012-08-31 2018-03-21 財團法人資訊工業策進會 Screen unlocking method with time information, unlocking system and recording medium
GB2505476B (en) 2012-08-31 2019-02-27 Metaswitch Networks Ltd Processing communication sessions
US8826415B2 (en) 2012-09-04 2014-09-02 Apple Inc. Automated device access
US9069469B2 (en) 2012-09-10 2015-06-30 Apple Inc. Sharing and synchronizing data across users of cloud computing systems
US9131332B2 (en) 2012-09-10 2015-09-08 Qualcomm Incorporated Method of providing call control information from a mobile phone to a peripheral device
US20140075311A1 (en) 2012-09-11 2014-03-13 Jesse William Boettcher Methods and apparatus for controlling audio volume on an electronic device
KR101992189B1 (ko) 2012-09-19 2019-06-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8769651B2 (en) 2012-09-19 2014-07-01 Secureauth Corporation Mobile multifactor single-sign-on authentication
US9684898B2 (en) 2012-09-25 2017-06-20 Google Inc. Securing personal identification numbers for mobile payment applications by combining with random components
US9251787B1 (en) 2012-09-26 2016-02-02 Amazon Technologies, Inc. Altering audio to improve automatic speech recognition
JP2014071835A (ja) 2012-10-01 2014-04-21 Fujitsu Ltd 電子機器及び処理制御方法
US9600552B2 (en) 2012-10-02 2017-03-21 Nextbit Systems Inc. Proximity based application state synchronization
RU2523040C2 (ru) 2012-10-02 2014-07-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Регулировка яркости экрана для мобильного устройства
TWI490773B (zh) 2012-10-09 2015-07-01 Ind Tech Res Inst 使用者介面操控方法及具有使用者介面的電子裝置以及內儲操控使用者介面的程式之程式產品
CN102905181B (zh) 2012-10-12 2015-10-21 北京奇艺世纪科技有限公司 一种实现移动终端在线播放视频的方法、装置和系统
US9392077B2 (en) 2012-10-12 2016-07-12 Citrix Systems, Inc. Coordinating a computing activity across applications and devices having multiple operation modes in an orchestration framework for connected devices
KR20140047887A (ko) 2012-10-15 2014-04-23 삼성전자주식회사 메모 기능 수행 시 모드 전환이 가능한 전자 장치 및 방법
TW201416959A (zh) 2012-10-16 2014-05-01 Yun-Heng Shiu 網頁介面
JP2014087126A (ja) 2012-10-22 2014-05-12 Sharp Corp 電力管理装置、電力管理装置の制御方法および電力管理装置の制御プログラム
US9575650B2 (en) 2012-10-26 2017-02-21 Htc Corporation Mobile communications device, non-transitory computer-readable medium and method of switching screen of mobile communications device from screen locked state to screen unlocked state
US9277017B2 (en) 2012-10-30 2016-03-01 Netiq Corporation Techniques for device independent session migration
US10057400B1 (en) * 2012-11-02 2018-08-21 Majen Tech, LLC Lock screen interface for a mobile device apparatus
CN104854552B (zh) * 2012-11-06 2019-04-30 天龙马兰士集团有限公司 选择性协调的音频播放器系统
US8994827B2 (en) 2012-11-20 2015-03-31 Samsung Electronics Co., Ltd Wearable electronic device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US9756049B2 (en) 2012-11-22 2017-09-05 8303142 Canada Inc. System and method for managing several mobile devices simultaneously
US20140149884A1 (en) 2012-11-26 2014-05-29 William Joseph Flynn, III User-Based Interactive Elements
US9606725B2 (en) 2012-11-30 2017-03-28 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Collaborative overlay of user interface elements rendered on the display of a computing device
US9549323B2 (en) 2012-12-03 2017-01-17 Samsung Electronics Co., Ltd. Method and mobile terminal for controlling screen lock
WO2014089763A1 (en) 2012-12-12 2014-06-19 Intel Corporation Single- gesture device unlock and application launch
CN103870255B (zh) 2012-12-12 2019-02-12 腾讯科技(深圳)有限公司 浮动组件显示方法及装置
US9098177B2 (en) 2012-12-13 2015-08-04 Google Technology Holdings LLC Apparatus and methods for facilitating context handoff between devices in a cloud based wireless personal area network
US9185742B2 (en) 2012-12-13 2015-11-10 Google Technology Holdings LLC System and methods for a cloud based wireless personal area network service enabling context activity handoffs between devices
US20150243163A1 (en) 2012-12-14 2015-08-27 Biscotti Inc. Audio Based Remote Control Functionality
JP5780235B2 (ja) 2012-12-18 2015-09-16 コニカミノルタ株式会社 情報処理システム、情報処理装置、プログラム及び携帯端末装置
JP5796789B2 (ja) 2012-12-20 2015-10-21 カシオ計算機株式会社 情報処理システムにおける無線端末、無線端末による携帯情報端末の起動方法
US9710628B2 (en) 2012-12-21 2017-07-18 Nokia Technologies Oy Unlocking an apparatus
US9367624B2 (en) 2012-12-21 2016-06-14 Yahoo! Inc. Identity workflow that utilizes multiple storage engines to support various lifecycles
US9294853B1 (en) 2012-12-28 2016-03-22 Google Inc. Audio control process
US10320803B2 (en) 2012-12-28 2019-06-11 Dish Technologies Llc Determining eligibility for multiple client media streaming
US10691230B2 (en) 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
EP3435220B1 (en) 2012-12-29 2020-09-16 Apple Inc. Device, method and graphical user interface for transitioning between touch input to display output relationships
CN109375853A (zh) 2012-12-29 2019-02-22 苹果公司 对用户界面分级结构导航的设备、方法和图形用户界面
US11513675B2 (en) 2012-12-29 2022-11-29 Apple Inc. User interface for manipulating user interface objects
US20150189426A1 (en) 2013-01-01 2015-07-02 Aliphcom Mobile device speaker control
US20150189425A1 (en) 2013-01-01 2015-07-02 Aliphcom Mobile device speaker control
KR102131646B1 (ko) 2013-01-03 2020-07-08 삼성전자주식회사 디스플레이장치 및 그 제어방법
US10051103B1 (en) * 2013-01-10 2018-08-14 Majen Tech, LLC Screen interface for a mobile device apparatus
US11431834B1 (en) * 2013-01-10 2022-08-30 Majen Tech, LLC Screen interface for a mobile device apparatus
KR102002420B1 (ko) 2013-01-18 2019-10-01 삼성전자주식회사 이동기기를 이용하는 스마트 홈 시스템
KR101822463B1 (ko) 2013-01-21 2018-01-26 삼성전자주식회사 복수 개의 아이콘들을 화면상에 배치하는 장치 및 이의 운용 방법
US9575632B2 (en) 2013-01-25 2017-02-21 Cable Television Laboratories, Inc. Content scrubbing
US9621562B2 (en) 2013-01-28 2017-04-11 International Business Machines Corporation Propagating authentication between terminals
CN103067625A (zh) 2013-01-29 2013-04-24 周万荣 一种呼叫及数据转移的方法及终端和系统
CN103984494A (zh) 2013-02-07 2014-08-13 上海帛茂信息科技有限公司 用于多种设备间的直觉式用户互动系统及方法
US9319019B2 (en) 2013-02-11 2016-04-19 Symphonic Audio Technologies Corp. Method for augmenting a listening experience
US9565226B2 (en) 2013-02-13 2017-02-07 Guy Ravine Message capturing and seamless message sharing and navigation
CN104126313B (zh) 2013-02-20 2018-12-07 松下电器(美国)知识产权公司 信息终端的控制方法和装置
KR20140104215A (ko) 2013-02-20 2014-08-28 삼성전자주식회사 자동 페어링 기능을 갖는 무선 네트워크 오디오 시스템 및 이를 이용한 자동 페어링 방법
JP5529358B1 (ja) 2013-02-20 2014-06-25 パナソニック株式会社 携帯情報端末の制御方法及びプログラム
EP2793481B1 (en) 2013-02-20 2016-05-18 Panasonic Intellectual Property Corporation of America Program and method for controlling portable information terminal
MY181880A (en) 2013-02-20 2021-01-12 Panasonic Ip Corp America Method for controlling information apparatus and program
EP2770708B1 (en) 2013-02-22 2017-04-05 BlackBerry Limited Device, system and method for generating application data
JP5963695B2 (ja) 2013-03-01 2016-08-03 株式会社J−WAVEi メッセージ送信プログラム、メッセージ送信装置、及びメッセージ配信システム
US9891662B2 (en) 2013-03-04 2018-02-13 Lg Electronics Inc. Double unlocking apparatus of a portable device equipped with an expandable display and controlling method thereof
US20140258292A1 (en) 2013-03-05 2014-09-11 Clip Interactive, Inc. Apparatus, system, and method for integrating content and content services
US9319149B2 (en) 2013-03-13 2016-04-19 Aliphcom Proximity-based control of media devices for media presentations
US10219093B2 (en) 2013-03-14 2019-02-26 Michael Luna Mono-spatial audio processing to provide spatial messaging
WO2014151884A2 (en) 2013-03-14 2014-09-25 Apple Inc. Device, method, and graphical user interface for a group reading environment
US9179199B2 (en) 2013-03-14 2015-11-03 Apple Inc. Media playback across multiple devices
US9866924B2 (en) 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
US20160028869A1 (en) 2013-03-15 2016-01-28 Apple Inc. Providing remote interactions with host device using a wireless device
US20170293610A1 (en) 2013-03-15 2017-10-12 Bao Tran Voice assistant
US9628414B1 (en) 2013-03-15 2017-04-18 Google Inc. User state based engagement
US9113300B2 (en) 2013-03-15 2015-08-18 Apple Inc. Proximity fence
US20160037345A1 (en) 2013-03-15 2016-02-04 Apple Inc. Controlling access to protected functionality of a host device using a wireless device
US20140282240A1 (en) 2013-03-15 2014-09-18 William Joseph Flynn, III Interactive Elements for Launching from a User Interface
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
WO2014142960A1 (en) 2013-03-15 2014-09-18 Intel Corporation Mechanisms for locking computing devices
US20140282103A1 (en) 2013-03-16 2014-09-18 Jerry Alan Crandall Data sharing
US8954611B2 (en) 2013-03-21 2015-02-10 Nextbit Systems Inc. Mechanism for sharing states of applications and devices across different user profiles
FI20135275A (fi) 2013-03-22 2014-09-23 Meontrust Oy Tapahtumien auktorisointimenetelmä ja -järjestelmä
US9565181B2 (en) 2013-03-28 2017-02-07 Wendell D. Brown Method and apparatus for automated password entry
US10027723B2 (en) 2013-04-12 2018-07-17 Provenance Asset Group Llc Method and apparatus for initiating communication and sharing of content among a plurality of devices
CN103260079A (zh) 2013-04-12 2013-08-21 深圳市龙视传媒有限公司 一种多屏互动的控制方法及控制装置
US9247363B2 (en) 2013-04-16 2016-01-26 Sonos, Inc. Playback queue transfer in a media playback system
US20150193392A1 (en) 2013-04-17 2015-07-09 Google Inc. User Interface for Quickly Checking Agenda and Creating New Events
KR102171444B1 (ko) 2013-04-22 2020-10-29 엘지전자 주식회사 스마트 워치 및 제어 방법
US9699295B2 (en) 2013-04-24 2017-07-04 Xiaomi Inc. Method for displaying an icon and terminal device thereof
US20140320387A1 (en) 2013-04-24 2014-10-30 Research In Motion Limited Device, System and Method for Generating Display Data
US9323455B2 (en) 2013-04-27 2016-04-26 Lg Electronics Inc. Mobile terminal and method of controlling an external mobile terminal
US9721175B2 (en) 2013-05-08 2017-08-01 Jpmorgan Chase Bank, N.A. Systems and methods for high fidelity multi-modal out-of-band biometric authentication through vector-based multi-profile storage
CN105474157A (zh) 2013-05-09 2016-04-06 亚马逊技术股份有限公司 移动设备界面
US9104853B2 (en) 2013-05-16 2015-08-11 Symantec Corporation Supporting proximity based security code transfer from mobile/tablet application to access device
KR20140136633A (ko) 2013-05-21 2014-12-01 삼성전자주식회사 휴대형 전자장치의 애플리케이션 실행 방법 및 그에 관한 장치
KR102010298B1 (ko) 2013-05-21 2019-10-21 엘지전자 주식회사 영상표시장치 및 영상표시장치의 동작방법
AU2013101046A4 (en) 2013-05-23 2013-09-19 Nowww.Us Pty Ltd A process for Encrypted Login to a Secure Computer Network, for the Creation of a Session of Encrypted Communications Between Computers and a Device Including a Mobile Phone Logged into a Network, for the Persistence of Encrypted Communications between Communication Devices, and for the Termination of Communications.
US9374326B2 (en) 2013-05-23 2016-06-21 Dropbox, Inc. Providing information for shared content
US9735978B2 (en) 2013-05-29 2017-08-15 Sonos, Inc. Playback queue control via a playlist on a mobile device
US9798510B2 (en) * 2013-05-29 2017-10-24 Sonos, Inc. Connected state indicator
US20140359637A1 (en) 2013-06-03 2014-12-04 Microsoft Corporation Task continuance across devices
KR102124476B1 (ko) 2013-06-03 2020-06-19 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US9497231B2 (en) 2013-06-04 2016-11-15 Echostar Technologies L.L.C. Real-time placeshifting of media content to paired devices
US9294455B2 (en) 2013-06-04 2016-03-22 Google Inc. Maintaining video conference session continuity during transfer of session to alternative device
US9654073B2 (en) 2013-06-07 2017-05-16 Sonos, Inc. Group volume control
US9979438B2 (en) 2013-06-07 2018-05-22 Apple Inc. Controlling a media device using a mobile device
KR20140143555A (ko) 2013-06-07 2014-12-17 삼성전자주식회사 휴대 장치의 잠금 화면 상에서 빠른 어플리케이션 실행 방법 및 이를 위한 휴대 장치
AU2014100584B4 (en) 2013-06-08 2015-03-05 Apple Inc. Device, method, and graphical user interface for synchronizing two or more displays
US10564813B2 (en) 2013-06-18 2020-02-18 Samsung Electronics Co., Ltd. User terminal apparatus and management method of home network thereof
CN105474580B (zh) 2013-06-18 2019-02-15 三星电子株式会社 用户终端设备及其家庭网络的管理方法
KR102318442B1 (ko) 2013-06-18 2021-10-28 삼성전자주식회사 사용자 단말 장치 및 그 홈 네트워크 관리 방법
TWI493437B (zh) 2013-06-19 2015-07-21 義隆電子股份有限公司 經由識別掃滑手勢來開啓視窗控制列的方法及觸控系統
US9389691B2 (en) 2013-06-21 2016-07-12 Blackberry Limited Devices and methods for establishing a communicative coupling in response to a gesture
WO2014204286A1 (en) 2013-06-21 2014-12-24 Samsung Electronics Co., Ltd. User terminal and driving method thereof, control device and driving method thereof, and control system of controlled device
KR102155680B1 (ko) 2013-06-21 2020-09-14 삼성전자주식회사 사용자 단말장치, 제어장치, 사용자 단말장치의 구동방법, 제어장치의 구동방법 및 제어대상장치의 제어시스템
JP6488290B2 (ja) 2013-06-28 2019-03-20 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Bluetooth(登録商標)パーティモードのためのシステム、方法、及び、装置
JP5654642B1 (ja) 2013-07-05 2015-01-14 ソフトバンクモバイル株式会社 認証システム及びプログラム
US9846879B2 (en) 2013-07-08 2017-12-19 Visa International Service Association Bank account number validation
KR102065407B1 (ko) 2013-07-11 2020-01-13 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
WO2015008409A1 (ja) 2013-07-19 2015-01-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報端末の制御方法及びプログラム
US9781077B2 (en) 2013-07-23 2017-10-03 Ericsson Ab Media distribution system with manifest-based entitlement enforcement
KR101560448B1 (ko) 2013-07-24 2015-10-16 한국과학기술원 스크린 록 환경에서 특정 어플리케이션 호출을 위한 방법
KR20150012464A (ko) 2013-07-25 2015-02-04 삼성전자주식회사 디스플레이 장치 및 개인화 서비스 제공 방법
US9912978B2 (en) 2013-07-29 2018-03-06 Apple Inc. Systems, methods, and computer-readable media for transitioning media playback between multiple electronic devices
KR102127927B1 (ko) 2013-07-30 2020-07-09 엘지전자 주식회사 이동 단말기, 스마트 워치 및 이동 단말기와 스마트 워치간 보안 인증방법
GB2516861A (en) 2013-08-01 2015-02-11 Mastercard International Inc Paired Wearable payment device
WO2015023109A1 (ko) 2013-08-12 2015-02-19 바쉔 주식회사 부가 코드를 이용한 보안 시스템, 장치, 및 그 방법
US9568891B2 (en) 2013-08-15 2017-02-14 I.Am.Plus, Llc Multi-media wireless watch
US11252213B2 (en) 2013-08-15 2022-02-15 Comcast Cable Communications, Llc Multiple flinging devices in a media fling system
KR20150021311A (ko) 2013-08-20 2015-03-02 삼성전자주식회사 단말기의 배터리 절약 방법 및 장치
US20150058744A1 (en) 2013-08-22 2015-02-26 Ashvin Dhingra Systems and methods for managing graphical user interfaces
CN104426847A (zh) 2013-08-22 2015-03-18 腾讯科技(深圳)有限公司 互联网服务安全访问和验证的方法、系统和服务器
US8914752B1 (en) 2013-08-22 2014-12-16 Snapchat, Inc. Apparatus and method for accelerated display of ephemeral messages
US9202029B2 (en) 2013-08-27 2015-12-01 Maan ALDUAIJI Computer device, a method for controlling a login status of a computer device and a server
US9100944B2 (en) 2013-08-28 2015-08-04 Qualcomm Incorporated Wireless connecting mobile devices and wearable devices
US20150066762A1 (en) 2013-08-28 2015-03-05 Geoffrey W. Chatterton Authentication system
US9798443B1 (en) 2013-09-10 2017-10-24 Amazon Technologies, Inc. Approaches for seamlessly launching applications
KR20150031010A (ko) * 2013-09-13 2015-03-23 삼성전자주식회사 잠금 화면 제공 장치 및 방법
US20150081067A1 (en) 2013-09-17 2015-03-19 Sony Corporation Synchronized exercise buddy headphones
CN105531646A (zh) 2013-09-17 2016-04-27 皇家飞利浦有限公司 手势驱动的范围和值的同时选择
CN103576902A (zh) 2013-09-18 2014-02-12 酷派软件技术(深圳)有限公司 控制终端设备的方法及系统
US20150089359A1 (en) 2013-09-25 2015-03-26 At&T Mobility Ii Llc Intelligent Adaptation of Home Screens
KR102109407B1 (ko) 2013-09-25 2020-05-12 엘지전자 주식회사 스마트 와치 및 제어 방법
US9654545B2 (en) 2013-09-30 2017-05-16 Sonos, Inc. Group coordinator device selection
US9288596B2 (en) 2013-09-30 2016-03-15 Sonos, Inc. Coordinator device for paired or consolidated players
US9977591B2 (en) 2013-10-01 2018-05-22 Ambient Consulting, LLC Image with audio conversation system and method
US9063640B2 (en) * 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
KR102169952B1 (ko) 2013-10-18 2020-10-26 엘지전자 주식회사 웨어러블 디바이스 및 그 제어 방법
US20150111559A1 (en) 2013-10-23 2015-04-23 Recurring Ventures LLC System, method and article for managing mobile devices
US20150120545A1 (en) 2013-10-28 2015-04-30 Jpmorgan Chase Bank, N.A. Non-compliant payment capture systems and methods
CN104572325B (zh) 2013-10-29 2018-07-06 腾讯科技(深圳)有限公司 一种递进式响应表单处理方法和终端
KR102091606B1 (ko) 2013-10-30 2020-03-20 엘지전자 주식회사 단말기 및 그 제어 방법
WO2015065125A1 (ko) 2013-10-31 2015-05-07 엘지전자(주) 전자 기기 및 전자 기기의 제어 방법
KR20150049977A (ko) 2013-10-31 2015-05-08 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
CN103558916A (zh) 2013-11-07 2014-02-05 百度在线网络技术(北京)有限公司 人机交互系统、方法及其装置
KR20150055275A (ko) 2013-11-13 2015-05-21 삼성전자주식회사 팜 터치를 이용한 전자장치 제어 방법 및 장치
US10454783B2 (en) 2014-02-05 2019-10-22 Apple Inc. Accessory management system using environment model
US10110932B2 (en) 2013-11-18 2018-10-23 Cable Television Laboratories, Inc. Session administration
US9111076B2 (en) 2013-11-20 2015-08-18 Lg Electronics Inc. Mobile terminal and control method thereof
AU2014353473C1 (en) 2013-11-22 2018-04-05 Apple Inc. Handsfree beam pattern configuration
WO2015083969A1 (en) 2013-12-05 2015-06-11 Lg Electronics Inc. Mobile terminal and method for controlling the same
KR102114616B1 (ko) 2013-12-06 2020-05-25 엘지전자 주식회사 스마트 와치 및 제어 방법
US8738723B1 (en) 2013-12-10 2014-05-27 Google Inc. Predictive forwarding of notification data
CN106031129A (zh) 2013-12-11 2016-10-12 霍尼韦尔国际公司 建筑物自动化控制系统
KR102061913B1 (ko) 2013-12-12 2020-01-02 삼성전자주식회사 전자 장치의 동작을 제어하기 위한 방법 및 장치
US10018470B2 (en) 2013-12-20 2018-07-10 Apple Inc. Location-based operating modes
US9319782B1 (en) 2013-12-20 2016-04-19 Amazon Technologies, Inc. Distributed speaker synchronization
TW201527631A (zh) 2013-12-20 2015-07-16 Jetdian Technology Inc 配合近場無線傳輸裝置的鎖固/解鎖方法
US9563328B2 (en) 2013-12-23 2017-02-07 Microsoft Technology Licensing, Llc Information surfacing with visual cues indicative of relevance
WO2015097829A1 (ja) 2013-12-26 2015-07-02 株式会社東芝 方法、電子機器およびプログラム
US20150186892A1 (en) 2013-12-30 2015-07-02 Tencent Technology (Shenzhen) Company Limited Methods and systems for verifying a transaction
CN105940678A (zh) 2013-12-30 2016-09-14 汤姆逊许可公司 依赖接近度的媒体回放
US20150193069A1 (en) 2014-01-03 2015-07-09 Harman International Industries, Incorporated Seamless content transfer
KR102277752B1 (ko) 2014-01-06 2021-07-16 삼성전자주식회사 웨어러블 기기를 이용한 홈 디바이스 제어 장치 및 제어 방법
US9804817B2 (en) 2014-01-06 2017-10-31 Harman International Industries, Incorporated Apparatus and method for automatic device selection for wireless media devices
US20150193196A1 (en) 2014-01-06 2015-07-09 Alpine Electronics of Silicon Valley, Inc. Intensity-based music analysis, organization, and user interface for audio reproduction devices
US8811951B1 (en) 2014-01-07 2014-08-19 Google Inc. Managing display of private information
US10433128B2 (en) 2014-01-07 2019-10-01 Visa International Service Association Methods and systems for provisioning multiple devices
KR20150082824A (ko) 2014-01-08 2015-07-16 삼성전자주식회사 장치 제어 방법 및 제어 장치
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
US9514748B2 (en) 2014-01-15 2016-12-06 Microsoft Technology Licensing, Llc Digital personal assistant interaction with impersonations and rich multimedia in responses
US20150205511A1 (en) 2014-01-17 2015-07-23 Apple Inc. Systems And Methods For An Animated Graphical User Interface
CN106415721B (zh) 2014-01-22 2019-08-16 苹果公司 音频数据传输的协调切换
US10114892B2 (en) 2014-01-22 2018-10-30 Google Llc Creating a single playlist with multiple authors
CN103793138A (zh) 2014-01-24 2014-05-14 宇龙计算机通信科技(深圳)有限公司 移动终端及后台应用程序的显示方法
US9369282B2 (en) 2014-01-29 2016-06-14 Red Hat, Inc. Mobile device user authentication for accessing protected network resources
US20150223005A1 (en) 2014-01-31 2015-08-06 Raytheon Company 3-dimensional audio projection
US10212143B2 (en) 2014-01-31 2019-02-19 Dropbox, Inc. Authorizing an untrusted client device for access on a content management system
US20150222680A1 (en) 2014-02-04 2015-08-06 Ford Global Technologies, Llc Local network media sharing
US9185117B2 (en) 2014-02-07 2015-11-10 Bank Of America Corporation User authentication by geo-location and proximity to user's close network
US9208301B2 (en) 2014-02-07 2015-12-08 Bank Of America Corporation Determining user authentication requirements based on the current location of the user in comparison to the users's normal boundary of location
US20150229782A1 (en) 2014-02-11 2015-08-13 Nxp B.V. Notification volume adjustment based on distance from paired device
CN103793075B (zh) 2014-02-14 2017-02-15 北京君正集成电路股份有限公司 一种应用在智能手表上的识别方法
EP2911149B1 (en) 2014-02-19 2019-04-17 Nokia Technologies OY Determination of an operational directive based at least in part on a spatial audio property
US10885510B2 (en) 2014-02-21 2021-01-05 Paypal, Inc. Facilitating payments using wearable devices
US9372610B2 (en) 2014-02-21 2016-06-21 Sonos, Inc. Media system controller interface
KR102166781B1 (ko) 2014-02-22 2020-10-16 삼성전자주식회사 요청 정보에 따른 장치 제어 방법 및 이를 지원하는 장치
US20150242597A1 (en) 2014-02-24 2015-08-27 Google Inc. Transferring authorization from an authenticated device to an unauthenticated device
US9408008B2 (en) 2014-02-28 2016-08-02 Sonos, Inc. Playback zone representations
US9537661B2 (en) 2014-02-28 2017-01-03 Verizon Patent And Licensing Inc. Password-less authentication service
EP2916195B1 (en) 2014-03-03 2019-09-11 LG Electronics Inc. Mobile terminal and controlling method thereof
US9679054B2 (en) 2014-03-05 2017-06-13 Sonos, Inc. Webpage media playback
KR20150104985A (ko) 2014-03-07 2015-09-16 삼성전자주식회사 사용자 단말 및 오디오 시스템, 그리고 이의 스피커 제어 방법
US20150261493A1 (en) 2014-03-11 2015-09-17 Sonos, Inc. Playback Zone Representations
CA2884709A1 (en) 2014-03-12 2015-09-12 The Toronto-Dominion Bank Systems and methods for providing populated transaction interfaces based on system-generated triggers
US9450812B2 (en) 2014-03-14 2016-09-20 Dechnia, LLC Remote system configuration via modulated audio
US9888207B2 (en) 2014-03-17 2018-02-06 Microsoft Technology Licensing, Llc Automatic camera selection
US9722962B2 (en) 2014-03-21 2017-08-01 Facebook, Inc. Providing message status notifications during electronic messaging
US9431021B1 (en) 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
US20150278799A1 (en) 2014-03-27 2015-10-01 Karthikeyan Palanisamy System incorporating wireless share process
US9661058B2 (en) 2014-08-10 2017-05-23 Belkin International Inc. Grouping of network devices
JP2014131359A (ja) 2014-04-07 2014-07-10 Dainippon Printing Co Ltd 端末装置、携帯電話機、動作管理方法及び動作管理プログラム等
US20150286694A1 (en) 2014-04-08 2015-10-08 International Business Machines Corporation Integrating a mobile payment application with other applications utilizing analytic analysis
CN105099673A (zh) 2014-04-15 2015-11-25 阿里巴巴集团控股有限公司 一种授权方法、请求授权的方法及装置
US9392104B2 (en) 2014-04-15 2016-07-12 Google Inc. Limiting user interaction with a computing device based on proximity of a user
US10444715B2 (en) 2014-05-01 2019-10-15 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
US10554439B2 (en) 2014-05-01 2020-02-04 Belkin International, Inc. Controlling settings and attributes related to operation of devices in a network
US20150302856A1 (en) 2014-04-17 2015-10-22 Qualcomm Incorporated Method and apparatus for performing function by speech input
US20150301506A1 (en) 2014-04-22 2015-10-22 Fahad Koumaiha Transparent capacitive touchscreen device overlying a mechanical component
US9680960B2 (en) 2014-04-28 2017-06-13 Sonos, Inc. Receiving media content based on media preferences of multiple users
US10129599B2 (en) 2014-04-28 2018-11-13 Sonos, Inc. Media preference database
US9666204B2 (en) 2014-04-30 2017-05-30 Qualcomm Incorporated Voice profile management and speech signal generation
US20150324552A1 (en) 2014-05-12 2015-11-12 Sonos, Inc. Share Restriction for Media Items
KR102185702B1 (ko) 2014-05-16 2020-12-02 삼성전자주식회사 컨텐츠 출력 장치, 모바일 장치 및 그 제어 방법
US9537811B2 (en) 2014-10-02 2017-01-03 Snap Inc. Ephemeral gallery of ephemeral messages
US10043185B2 (en) 2014-05-29 2018-08-07 Apple Inc. User interface for payments
US10055567B2 (en) 2014-05-30 2018-08-21 Apple Inc. Proximity unlock and lock operations for electronic devices
US9967401B2 (en) 2014-05-30 2018-05-08 Apple Inc. User interface for phone call routing among devices
EP4365725A2 (en) 2014-05-30 2024-05-08 Apple Inc. Continuity
US9185062B1 (en) 2014-05-31 2015-11-10 Apple Inc. Message user interfaces for capture and transmittal of media and location content
KR102302350B1 (ko) * 2014-06-02 2021-09-15 삼성전자 주식회사 보안 기능을 제공하는 방법 및 장치
US20150355818A1 (en) 2014-06-04 2015-12-10 Sonos, Inc. Continuous Playback Queue
US9363254B2 (en) 2014-06-04 2016-06-07 Sonos, Inc. Cloud queue access control
WO2015185123A1 (en) 2014-06-04 2015-12-10 Sonova Ag Audio device network and audio device pairing method
US20150358043A1 (en) 2014-06-05 2015-12-10 Samsung Electronics Co., Ltd. Wearable device, main unit of wearable device, fixing unit of wearable device, and control method of wearable device
US9264423B2 (en) 2014-06-12 2016-02-16 Nadapass, Inc. Password-less authentication system and method
US9715824B2 (en) 2014-06-13 2017-07-25 Huawei Technologies Co., Ltd. Method and control device for selecting controlled device
US9084003B1 (en) 2014-06-19 2015-07-14 Google Inc. Methods, systems, and media for media playback
CN110931052B (zh) 2014-06-24 2021-09-28 苹果公司 音乐正在播放用户界面
US9535986B2 (en) 2014-06-27 2017-01-03 Sonos, Inc. Application launch
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9519413B2 (en) * 2014-07-01 2016-12-13 Sonos, Inc. Lock screen media playback control
US20160004393A1 (en) 2014-07-01 2016-01-07 Google Inc. Wearable device user interface control
US10051364B2 (en) 2014-07-03 2018-08-14 Qualcomm Incorporated Single channel or multi-channel audio control interface
GB2528260A (en) 2014-07-14 2016-01-20 Mastercard International Inc System and method for loading and reloading prepaid payment cards from mobile devices
KR101698098B1 (ko) * 2014-07-23 2017-01-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US9671997B2 (en) 2014-07-23 2017-06-06 Sonos, Inc. Zone grouping
US10454913B2 (en) 2014-07-24 2019-10-22 Hewlett Packard Enterprise Development Lp Device authentication agent
US9615787B2 (en) 2014-07-24 2017-04-11 Lenovo (Singapre) Pte. Ltd. Determining whether to change a time at which an alarm is to occur based at least in part on sleep data
US9661440B2 (en) 2014-07-25 2017-05-23 Qualcomm Incorporated Methods and systems for triggering efficient application synchronization
EP3410253A1 (en) 2014-07-31 2018-12-05 Samsung Electronics Co., Ltd. Mobile communication device using a plurality of wearable devices in parallel
KR102287160B1 (ko) 2014-07-31 2021-08-06 엘지전자 주식회사 웨어러블 디바이스 및 그것의 제어방법
US20160036996A1 (en) 2014-08-02 2016-02-04 Sony Corporation Electronic device with static electric field sensor and related method
CN104166458A (zh) 2014-08-12 2014-11-26 广州华多网络科技有限公司 控制多媒体播放器的方法及装置
US10045105B2 (en) 2014-08-12 2018-08-07 Bose Corporation Wireless communication between endpoint devices
EP3862898A1 (en) 2014-08-15 2021-08-11 Apple Inc. Authenticated device used to unlock another device
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
JP6044604B2 (ja) 2014-08-18 2016-12-14 カシオ計算機株式会社 端末装置、およびプログラム
KR102418119B1 (ko) 2014-08-25 2022-07-07 삼성전자 주식회사 시계 화면 구성 방법 및 이를 구현한 웨어러블 전자장치
WO2016033400A1 (en) 2014-08-29 2016-03-03 Harman International Industries, Inc. Wireless speaker system
WO2016036481A1 (en) 2014-09-02 2016-03-10 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
EP4050467A1 (en) 2014-09-02 2022-08-31 Apple Inc. Phone user interface
US10089607B2 (en) 2014-09-02 2018-10-02 Apple Inc. Mobile merchant proximity solution for financial transactions
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
WO2016036412A1 (en) 2014-09-02 2016-03-10 Apple Inc. Remote camera user interface
WO2016036472A1 (en) 2014-09-02 2016-03-10 Apple Inc. Reduced-size interfaces for managing alerts
US9680982B2 (en) 2014-09-03 2017-06-13 Fibar Group S.A. Emergency communication device
WO2016037155A1 (en) 2014-09-04 2016-03-10 PWV Inc Speaker discovery and assignment
US20160073482A1 (en) 2014-09-05 2016-03-10 Qualcomm Incorporated Implementing a target lighting scene in an internet of things environment using a mobile light output device
US10042336B2 (en) 2014-09-09 2018-08-07 Savant Systems, Llc User-defined scenes for home automation
US20170097621A1 (en) 2014-09-10 2017-04-06 Crestron Electronics, Inc. Configuring a control sysem
KR102192419B1 (ko) * 2014-09-11 2020-12-17 삼성전자주식회사 웨어러블 장치를 사용하여 전자 장치를 제어하는 방법 및 전자 장치의 동작 방법
US9940016B2 (en) 2014-09-13 2018-04-10 Microsoft Technology Licensing, Llc Disambiguation of keyboard input
BR102014023229B1 (pt) 2014-09-18 2020-02-27 Samsung Eletrônica da Amazônia Ltda. Método para autenticação de transação de vários fatores utilizando dispositivos vestíveis
US9582296B2 (en) 2014-09-18 2017-02-28 International Business Machines Corporation Dynamic multi-user computer configuration settings
KR102258052B1 (ko) 2014-09-25 2021-05-28 삼성전자주식회사 전자 장치에서 다른 전자 장치와 컨텐츠를 공유하기 위한 장치 및 방법
US20160092665A1 (en) 2014-09-27 2016-03-31 Intel Corporation Liveness Detection for User Authentication
WO2016052876A1 (en) 2014-09-30 2016-04-07 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof
US9521212B2 (en) 2014-09-30 2016-12-13 Sonos, Inc. Service provider user accounts
US9269083B1 (en) 2014-09-30 2016-02-23 Wal-Mart Stores, Inc. Mobile device payment
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
WO2016057117A1 (en) 2014-10-10 2016-04-14 Thomson Licensing Method and apparatus for control of media content delivery
CN105631372B (zh) 2014-10-13 2020-06-12 麦克斯韦尔福瑞斯特私人有限公司 接近监测设备和方法
CN104460593B (zh) 2014-10-29 2017-10-10 小米科技有限责任公司 模式切换方法及装置
US10055094B2 (en) 2014-10-29 2018-08-21 Xiaomi Inc. Method and apparatus for dynamically displaying device list
US10346828B2 (en) 2014-11-07 2019-07-09 Paypal, Inc. Payment processing apparatus
CN105657483B (zh) 2014-11-10 2019-06-04 扬智科技股份有限公司 多媒体播放系统、多媒体文件分享方法及其控制方法
US10027667B2 (en) 2014-11-12 2018-07-17 Time Warner Cable Enterprises Llc Methods and apparatus for provisioning services which require a device to be securely associated with an account
US10713699B1 (en) 2014-11-14 2020-07-14 Andersen Corporation Generation of guide materials
KR102354763B1 (ko) 2014-11-17 2022-01-25 삼성전자주식회사 주변 기기를 식별하는 전자 기기 및 이의 주변 기기 식별 방법
EP3090606B1 (en) 2014-11-25 2018-04-25 Philips Lighting Holding B.V. Proximity based lighting control
US20160156992A1 (en) * 2014-12-01 2016-06-02 Sonos, Inc. Providing Information Associated with a Media Item
US9864570B2 (en) 2014-12-09 2018-01-09 Harman International Industries, Incorporated Proximity based temporary audio sharing
US9589264B2 (en) 2014-12-10 2017-03-07 American Express Travel Related Services Company, Inc. System and method for pre-provisioned wearable contactless payments
US10505752B2 (en) 2014-12-15 2019-12-10 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling group action
US9912758B2 (en) 2014-12-16 2018-03-06 Yahoo Holdings, Inc. Continuing an application session on a different device
KR102212212B1 (ko) 2014-12-17 2021-02-04 삼성전자주식회사 휴대 장치 및 휴대 장치의 위치 정보 제어방법
US10445055B2 (en) 2014-12-23 2019-10-15 Lg Electronics Inc. Mobile terminal, audio output device and audio output system comprising same
EP3037784B1 (en) 2014-12-23 2019-05-01 Nokia Technologies OY Causation of display of supplemental map information
KR102297193B1 (ko) 2014-12-24 2021-09-02 삼성전자 주식회사 사용자 식별 기능을 가지는 전자장치 및 사용자 인증 방법
CN104503688B (zh) 2014-12-31 2018-03-02 小米科技有限责任公司 智能硬件设备的控制实现方法及装置
US9112849B1 (en) 2014-12-31 2015-08-18 Spotify Ab Methods and systems for dynamic creation of hotspots for media control
EP3243326A4 (en) 2015-01-05 2018-06-27 PWV Inc. Discovery, control, and streaming of multi-channel audio playback with enhanced times synchronization
KR20160092363A (ko) 2015-01-27 2016-08-04 엘지전자 주식회사 이동단말기 및 그 제어방법
US10348656B2 (en) 2015-02-06 2019-07-09 Jamdeo Canada Ltd. Methods and devices for display device notifications and key handling
US9294476B1 (en) 2015-02-18 2016-03-22 Keeper Security, Inc. User-defined identity verification system
US9329831B1 (en) 2015-02-25 2016-05-03 Sonos, Inc. Playback expansion
US9779233B2 (en) 2015-03-05 2017-10-03 Ricoh Co., Ltd. Broker-based authentication system architecture and design
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9715619B2 (en) 2015-03-14 2017-07-25 Microsoft Technology Licensing, Llc Facilitating aligning a user and camera for user authentication
US10080111B2 (en) 2015-03-19 2018-09-18 Facebook, Inc. Techniques for communication using audio stickers
US9819902B2 (en) 2015-03-19 2017-11-14 Microsoft Technology Licensing, Llc Proximate resource pooling in video/audio telecommunications
CN104702792A (zh) * 2015-03-20 2015-06-10 小米科技有限责任公司 终端屏幕的状态控制方法及装置、电子设备
EP3073703A1 (en) 2015-03-23 2016-09-28 Laboratories Thomson Ltd. Method and system for sharing music and other audio content among mobile devices
US9891880B2 (en) 2015-03-31 2018-02-13 Sonos, Inc. Information display regarding playback queue subscriptions
US9483230B1 (en) 2015-04-09 2016-11-01 Sonos, Inc. Wearable device zone group control
USD765118S1 (en) 2015-04-13 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10776769B2 (en) 2015-04-27 2020-09-15 Hrb Innovations, Inc. Unified payment vehicle
US9954989B2 (en) 2015-05-06 2018-04-24 Eyespage Inc. Lock screen graphical user interface
US10097902B2 (en) 2015-05-06 2018-10-09 Blackfire Research Corporation System and method for using multiple audio input devices for synchronized and position-based audio
US11113022B2 (en) 2015-05-12 2021-09-07 D&M Holdings, Inc. Method, system and interface for controlling a subwoofer in a networked audio system
US9407624B1 (en) 2015-05-14 2016-08-02 Delphian Systems, LLC User-selectable security modes for interconnected devices
CN104853136A (zh) 2015-05-29 2015-08-19 小米科技有限责任公司 视频通信方法及装置
US20160357354A1 (en) 2015-06-04 2016-12-08 Apple Inc. Condition-based activation of a user interface
USD773510S1 (en) 2015-06-05 2016-12-06 Apple Inc. Display screen or portion thereof with graphical user interface
DK179361B1 (en) 2015-06-07 2018-05-22 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US10271084B2 (en) 2015-06-07 2019-04-23 Apple Inc. Video recording and replay
US9727749B2 (en) 2015-06-08 2017-08-08 Microsoft Technology Licensing, Llc Limited-access functionality accessible at login screen
US20160364600A1 (en) 2015-06-10 2016-12-15 Microsoft Technology Licensing, Llc Biometric Gestures
US20160366481A1 (en) 2015-06-12 2016-12-15 Samsung Electronics Co., Ltd. Method and apparatus for service oriented input and output
JP6520442B2 (ja) 2015-06-16 2019-05-29 ヤマハ株式会社 パラメータ制御装置およびパラメータ制御プログラム
US10588000B2 (en) 2015-06-19 2020-03-10 Lenovo (Singapore) Pte. Ltd. Determination of device at which to present audio of telephonic communication
KR20170006579A (ko) 2015-07-08 2017-01-18 삼성전자주식회사 전자 장치 및 전자 장치에서의 아이콘 변경 방법
KR20170008601A (ko) 2015-07-14 2017-01-24 삼성전자주식회사 어플리케이션 운용 방법 및 이를 이용하는 전자 장치
US9661117B2 (en) 2015-07-16 2017-05-23 Plantronics, Inc. Wearable devices for headset status and control
US9948980B2 (en) 2015-07-20 2018-04-17 Google Llc Synchronizing audio content to audio and video devices
US10168797B2 (en) 2015-07-29 2019-01-01 Samsung Electronics Co., Ltd. Terminal apparatus, audio system, and method for controlling sound volume of external speaker thereof
CN105187940B (zh) 2015-07-29 2018-05-29 广东欧珀移动通信有限公司 一种播放系统的播放列表切换控制方法及装置
WO2017017665A1 (en) 2015-07-30 2017-02-02 Brightgreen Pty Ltd Multiple input touch dimmer lighting control
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
JP6693066B2 (ja) 2015-08-18 2020-05-13 ヤマハ株式会社 制御装置
KR102389038B1 (ko) 2015-09-02 2022-04-21 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR20170027999A (ko) * 2015-09-03 2017-03-13 삼성전자주식회사 사용자 단말 장치, 시스템 및 그 제어 방법
US9628275B2 (en) 2015-09-04 2017-04-18 Blackberry Limited Communication device, method and system for establishing communications using the subscriber identity data of another communication device
US10120531B2 (en) 2015-09-08 2018-11-06 Apple Inc. User interfaces for navigating and playing content
US10257198B2 (en) 2015-09-11 2019-04-09 Arris Enterprises Llc Password input method for devices with limited user interface
US9710639B1 (en) 2015-09-14 2017-07-18 Google Inc. Single input unlock for computing devices
KR102538348B1 (ko) 2015-09-17 2023-05-31 삼성전자 주식회사 전자 장치 및 전자 장치의 동작 제어 방법
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
WO2017053440A1 (en) 2015-09-23 2017-03-30 Edoardo Rizzi Communication device and method
US9826083B2 (en) 2015-09-29 2017-11-21 Google Inc. Automatic delegation control for device sharing
JP6668661B2 (ja) 2015-09-30 2020-03-18 ヤマハ株式会社 パラメータ制御装置およびパラメータ制御プログラム
US9646471B2 (en) 2015-09-30 2017-05-09 Apple Inc. User interface using tactile output
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
CN108028787B (zh) 2015-09-30 2021-01-12 苹果公司 媒体回放的协调控制
KR102520402B1 (ko) 2015-10-27 2023-04-12 엘지전자 주식회사 와치 타입 이동 단말기 및 그 동작 방법
US9819674B2 (en) * 2015-10-29 2017-11-14 Ricoh Company, Ltd. System, apparatus and method for secure operation of image forming device
US10863267B2 (en) 2015-11-10 2020-12-08 Savant Systems, Inc. Volume control for audio/video devices
KR102459127B1 (ko) 2015-11-11 2022-10-27 삼성전자 주식회사 전자 장치 및 정보 제공방법
KR20170055295A (ko) 2015-11-11 2017-05-19 엘지전자 주식회사 이동 단말기 및 그 이동 단말기의 제어 방법
CN105549947B (zh) 2015-12-21 2019-03-29 联想(北京)有限公司 一种音频设备的控制方法及电子设备
US10575083B2 (en) 2015-12-22 2020-02-25 Bragi GmbH Near field based earpiece data transfer system and method
KR20170074552A (ko) 2015-12-22 2017-06-30 삼성전자주식회사 터치 디스플레이를 포함하는 스피커 장치
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
KR20170076357A (ko) 2015-12-24 2017-07-04 삼성전자주식회사 사용자 단말 장치, 이의 스피커 장치의 음량을 조절하기 위한 모드 전환 방법 및 음향 시스템
US10721508B2 (en) 2015-12-29 2020-07-21 DISH Technologies L.L.C. Methods and systems for adaptive content delivery
US10353754B2 (en) 2015-12-31 2019-07-16 Entefy Inc. Application program interface analyzer for a universal interaction platform
US10001843B2 (en) 2016-01-04 2018-06-19 Sphero, Inc. Modular sensing device implementing state machine gesture interpretation
KR102501759B1 (ko) 2016-01-05 2023-02-20 삼성전자주식회사 오디오 출력 장치 및 오디오 출력 장치의 동작 방법
US10284980B1 (en) 2016-01-05 2019-05-07 Sonos, Inc. Intelligent group identification
US10303422B1 (en) 2016-01-05 2019-05-28 Sonos, Inc. Multiple-device setup
US10182138B2 (en) 2016-01-08 2019-01-15 Qualcomm Incorporated Smart way of controlling car audio system
KR102383130B1 (ko) 2016-01-18 2022-04-08 삼성전자주식회사 기능을 제어하는 방법 및 이를 지원하는 전자 장치
US9898250B1 (en) 2016-02-12 2018-02-20 Amazon Technologies, Inc. Controlling distributed audio outputs to enable voice output
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US10097919B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Music service selection
KR20170100358A (ko) 2016-02-25 2017-09-04 삼성전자주식회사 전자 장치, 음향 출력 시스템 및 음향 출력 시스템을 위한 전자 장치 제어 방법
US20180218201A1 (en) 2016-02-26 2018-08-02 Ring Inc. Sharing Positive Information Captured Using Audio/Video Recording and Communication Devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
KR20170124933A (ko) 2016-05-03 2017-11-13 삼성전자주식회사 디스플레이 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
US20170322713A1 (en) 2016-05-03 2017-11-09 Samsung Electronics Co., Ltd. Display apparatus and method for controlling the same and computer-readable recording medium
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
CN106096349A (zh) 2016-06-07 2016-11-09 惠州Tcl移动通信有限公司 一种基于锁屏快速开启应用的方法及移动终端
US10742645B2 (en) * 2016-06-09 2020-08-11 Logmein, Inc. Proximity detection for mobile device access to protected resources
US10742648B2 (en) * 2016-06-09 2020-08-11 Logmein, Inc. Mobile device access to a protected machine
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US11003147B2 (en) 2016-06-12 2021-05-11 Apple Inc. Automatically grouping accessories
DK179593B1 (en) 2016-06-12 2019-02-25 Apple Inc. USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10511456B2 (en) 2016-06-12 2019-12-17 Apple Inc. Presenting accessory group controls
US10389987B2 (en) 2016-06-12 2019-08-20 Apple Inc. Integrated accessory control user interface
WO2017218192A1 (en) 2016-06-12 2017-12-21 Apple Inc. User interface for managing controllable external devices
DK201670616A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
US10310725B2 (en) 2016-06-12 2019-06-04 Apple Inc. Generating scenes based on accessory state
KR102304936B1 (ko) 2016-06-12 2021-09-27 애플 인크. 제어가능한 외부 디바이스들을 관리하기 위한 사용자 인터페이스
US11329942B2 (en) 2016-06-24 2022-05-10 Google Llc Methods, systems, and media for presenting messages related to notifications
JP6909990B2 (ja) 2016-07-06 2021-07-28 パナソニックIpマネジメント株式会社 表示制御システム、表示制御方法、及び表示制御プログラム
WO2018009397A1 (en) 2016-07-06 2018-01-11 Pcms Holdings, Inc. System and method for customizing smart home speech interfaces using personalized speech profiles
EP3276905B1 (en) 2016-07-25 2023-01-25 GN Audio A/S System for audio communication using lte
GB2554795A (en) 2016-08-01 2018-04-11 Zone V Ltd Smartphone accessory for visually impaired or elderly users
US10762446B2 (en) 2016-08-02 2020-09-01 Ebay Inc. Access control for a digital event
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10832684B2 (en) 2016-08-31 2020-11-10 Microsoft Technology Licensing, Llc Personalization of experiences with digital assistants in communal settings through voice and query processing
US10057698B2 (en) 2016-09-02 2018-08-21 Bose Corporation Multiple room communication system and method
US10270071B2 (en) 2016-09-02 2019-04-23 Dell Products L.P. Systems and methods for voltage regulated battery backup management
US10042595B2 (en) 2016-09-06 2018-08-07 Apple Inc. Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
US10140987B2 (en) 2016-09-16 2018-11-27 International Business Machines Corporation Aerial drone companion device and a method of operating an aerial drone companion device
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US10304463B2 (en) 2016-10-03 2019-05-28 Google Llc Multi-user personalization at a voice interface device
US10283138B2 (en) 2016-10-03 2019-05-07 Google Llc Noise mitigation for a voice interface device
CN106656689B (zh) 2016-10-17 2018-10-30 珠海格力电器股份有限公司 一种基于终端的智能家居的控制方法和终端
CN106383645A (zh) 2016-10-31 2017-02-08 维沃移动通信有限公司 一种音乐播放的控制方法及移动终端
US11310294B2 (en) 2016-10-31 2022-04-19 Microsoft Technology Licensing, Llc Companion devices for real-time collaboration in communication sessions
WO2018080542A1 (en) 2016-10-31 2018-05-03 Hewlett-Packard Development Company, L.P. Developing a non-rectangular user interface
US10783883B2 (en) 2016-11-03 2020-09-22 Google Llc Focus session at a voice interface device
SG10201609247YA (en) 2016-11-04 2018-06-28 Huawei Int Pte Ltd System and method for configuring a wireless device for wireless network access
JP7351745B2 (ja) 2016-11-10 2023-09-27 ワーナー・ブラザース・エンターテイメント・インコーポレイテッド 環境制御機能を有する社会ロボット
US10785328B2 (en) 2016-11-15 2020-09-22 International Business Machines Corporation Efficient collaborations in global enterprise environment
US10339769B2 (en) 2016-11-18 2019-07-02 Google Llc Server-provided visual output at a voice interface device
US9820323B1 (en) 2016-11-22 2017-11-14 Bose Corporation Wireless audio tethering system
US10607148B1 (en) 2016-12-21 2020-03-31 Facebook, Inc. User identification with voiceprints on online social networks
US10916243B2 (en) 2016-12-27 2021-02-09 Amazon Technologies, Inc. Messaging from a shared device
US10679608B2 (en) 2016-12-30 2020-06-09 Google Llc Conversation-aware proactive notifications for a voice interface device
US10115396B2 (en) 2017-01-03 2018-10-30 Logitech Europe, S.A. Content streaming system
KR20180085931A (ko) 2017-01-20 2018-07-30 삼성전자주식회사 음성 입력 처리 방법 및 이를 지원하는 전자 장치
US10523625B1 (en) 2017-03-09 2019-12-31 Snap Inc. Restricted group content collection
KR102291021B1 (ko) 2017-03-17 2021-08-18 삼성전자주식회사 오디오 출력을 제어하기 위한 전자 장치 및 그의 동작 방법
KR102340127B1 (ko) 2017-03-24 2021-12-16 삼성전자주식회사 복수의 외부 장치들로 오디오 데이터를 전송하는 방법 및 전자 장치
EP3602943A1 (en) 2017-03-24 2020-02-05 Intel IP Corporation Techniques to enable physical downlink control channel communications
US10581941B2 (en) 2017-04-04 2020-03-03 Roku, Inc. Time and content restrictions based on user-identification
KR102414122B1 (ko) 2017-04-19 2022-06-29 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 동작 방법
JP7050337B2 (ja) 2017-04-27 2022-04-08 インディアン インスティテュート オブ テクノロジー マドラス(アイアイティー マドラス) WC-Co切削工具における高密着性ボロンドープ傾斜ダイヤモンド層
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10200969B2 (en) 2017-05-09 2019-02-05 Qualcomm Incorporated Methods and apparatus for selectively providing alerts to paired devices
US10380852B2 (en) 2017-05-12 2019-08-13 Google Llc Systems, methods, and devices for activity monitoring via a home assistant
US10928980B2 (en) 2017-05-12 2021-02-23 Apple Inc. User interfaces for playing and managing audio items
US20180329586A1 (en) 2017-05-15 2018-11-15 Apple Inc. Displaying a set of application views
KR102089487B1 (ko) 2017-05-16 2020-03-17 애플 인크. 디지털 어시스턴트 서비스의 원거리 확장
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10395659B2 (en) 2017-05-16 2019-08-27 Apple Inc. Providing an auditory-based interface of a digital assistant
CN109287140B (zh) 2017-05-16 2020-07-28 苹果公司 计算机实现的方法、计算机可读存储介质和电子设备
EP3593538B1 (en) 2017-05-16 2021-12-08 Apple Inc. Credential delegation
EP3617863B1 (en) 2017-05-16 2021-04-28 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
JP6612442B2 (ja) 2017-05-16 2019-12-11 アップル インコーポレイテッドApple Inc. ユーザインタフェース間をナビゲートし、制御オブジェクトと対話するためのデバイス、方法及びグラフィカルユーザインタフェース
US20200186378A1 (en) 2017-05-19 2020-06-11 Curtis Wayne Six Smart hub system
US10778463B2 (en) * 2017-05-30 2020-09-15 Harman International Industries, Incorporated Displaying information for a smart-device-enabled environment
CN107219976B (zh) 2017-05-31 2020-07-28 Oppo广东移动通信有限公司 应用显示方法及相关产品
US10089983B1 (en) 2017-06-08 2018-10-02 Amazon Technologies, Inc. Third party account linking for voice user interface
EP3639630A1 (en) 2017-06-15 2020-04-22 Lutron Technology Company LLC Communicating with and controlling load control systems
US10460671B2 (en) 2017-07-04 2019-10-29 Shenzhen China Star Optoelectronics Semiconductor Display Technology Co., Lltd Scanning driving circuit and display apparatus
US10771270B2 (en) 2017-07-20 2020-09-08 Slack Technologies, Inc. Channeling messaging communications in a selected group-based communication interface
US10325602B2 (en) 2017-08-02 2019-06-18 Google Llc Neural networks for speaker verification
US10438594B2 (en) 2017-09-08 2019-10-08 Amazon Technologies, Inc. Administration of privileges by speech for voice assistant system
US10490195B1 (en) 2017-09-26 2019-11-26 Amazon Technologies, Inc. Using system command utterances to generate a speaker profile
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
AU2018351962B2 (en) 2017-10-21 2021-11-04 Apple Inc. Personal domain for a virtual assistant system on a communal device
US10567515B1 (en) 2017-10-26 2020-02-18 Amazon Technologies, Inc. Speech processing performed with respect to first and second user profiles in a dialog session
JP6766793B2 (ja) 2017-10-26 2020-10-14 京セラドキュメントソリューションズ株式会社 情報処理装置、画像形成装置、情報処理システム、及び情報処理方法
KR102490376B1 (ko) 2017-11-06 2023-01-25 삼성전자 주식회사 전자 장치 및 전자 장치 간 음성으로 기능을 실행하는 방법
US20190138951A1 (en) 2017-11-09 2019-05-09 Facebook, Inc. Systems and methods for generating multi-contributor content posts for events
KR102271308B1 (ko) 2017-11-21 2021-06-30 주식회사 하이퍼커넥트 영상통화 중에 상호작용 가능한 시각적 오브젝트를 제공하기 위한 방법, 및 이를 수행하는 상호작용 가능한 시각적 오브젝트 제공 시스템
US10524300B2 (en) 2017-12-01 2019-12-31 Bose Corporation Wireless low-latency audio content sharing
KR102044242B1 (ko) 2017-12-27 2019-11-13 주식회사 하이퍼커넥트 영상 통화 서비스를 제공하는 단말 및 서버
KR20190102509A (ko) 2018-02-26 2019-09-04 삼성전자주식회사 음성 명령을 수행하는 방법 및 시스템
US10623844B2 (en) 2018-03-29 2020-04-14 Sonos, Inc. Headphone interaction with media playback system
US10698650B2 (en) 2018-04-06 2020-06-30 Sonos, Inc. Temporary configuration of a media playback system within a place of accommodation
CN108683798B (zh) 2018-04-19 2021-04-23 维沃移动通信有限公司 一种声音输出控制方法及移动终端
KR20230048573A (ko) 2018-05-07 2023-04-11 구글 엘엘씨 다양한 연결 디바이스를 제어하기 위한 복합 그래픽 어시스턴트 인터페이스 제공
US10558546B2 (en) 2018-05-08 2020-02-11 Apple Inc. User interfaces for controlling or presenting device usage on an electronic device
US10299300B1 (en) 2018-05-16 2019-05-21 Bose Corporation Secure systems and methods for establishing wireless audio sharing connection
US11100498B2 (en) 2018-06-03 2021-08-24 Apple Inc. User interfaces for transfer accounts
JP2021525428A (ja) 2018-06-03 2021-09-24 アップル インコーポレイテッドApple Inc. 振替口座のためのユーザインタフェース
US10636425B2 (en) 2018-06-05 2020-04-28 Voicify, LLC Voice application platform
US10714085B2 (en) 2018-06-06 2020-07-14 Amazon Technologies, Inc. Temporary account association with voice-enabled devices
US10412206B1 (en) 2018-06-08 2019-09-10 Amazon Technologies, Inc. Communications for multi-mode device
KR102607666B1 (ko) 2018-08-08 2023-11-29 삼성전자 주식회사 전자 장치에서 사용자 의도 확인을 위한 피드백 제공 방법 및 장치
US11289097B2 (en) 2018-08-28 2022-03-29 Dell Products L.P. Information handling systems and methods for accurately identifying an active speaker in a communication session
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器
CN109347581B (zh) 2018-09-30 2020-11-27 Oppo广东移动通信有限公司 蓝牙耳机连接方法、装置、电子设备及存储介质
US10924446B1 (en) 2018-10-08 2021-02-16 Facebook, Inc. Digital story reply container
CN112368665A (zh) 2018-10-08 2021-02-12 谷歌有限责任公司 显示助理设备中的扬声器组件
TWI684874B (zh) 2018-10-18 2020-02-11 瑞軒科技股份有限公司 智慧型音箱及其操作方法
US20200135191A1 (en) 2018-10-30 2020-04-30 Bby Solutions, Inc. Digital Voice Butler
US10885912B2 (en) 2018-11-13 2021-01-05 Motorola Solutions, Inc. Methods and systems for providing a corrected voice command
KR20200055983A (ko) 2018-11-14 2020-05-22 삼성전자주식회사 장치로부터 방사되는 전자기 신호를 측정하기 위한 방법 및 그 전자 장치
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
KR20200074445A (ko) 2018-12-17 2020-06-25 삼성전자주식회사 Em 신호를 발생시킨 외부 전자 장치에 따라 오디오 신호의 경로를 변경하는 전자 장치 및 방법
KR102266888B1 (ko) 2018-12-31 2021-06-21 주식회사 하이퍼커넥트 영상 통화 서비스를 제공하는 단말기 및 서버
WO2020174289A2 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US11308949B2 (en) 2019-03-12 2022-04-19 International Business Machines Corporation Voice assistant response system based on a tone, keyword, language or etiquette behavioral rule
KR20200111853A (ko) 2019-03-19 2020-10-05 삼성전자주식회사 전자 장치 및 전자 장치의 음성 인식 제어 방법
CN111817943B (zh) 2019-04-12 2022-06-14 腾讯科技(深圳)有限公司 一种基于即时通讯应用的数据处理方法和装置
US20200336909A1 (en) 2019-04-18 2020-10-22 Blackberry Limited Methods and devices for delivering communications privately rather than via audible and/or visual output
EP3977380A1 (en) 2019-05-28 2022-04-06 Telefonaktiebolaget Lm Ericsson (Publ) Network nodes and methods performed therein for handling messages
KR102631541B1 (ko) 2019-05-30 2024-02-01 삼성전자주식회사 복수의 전자 장치들 사이에서 네트워크 연결을 전환하기 위한 전자 장치 및 방법
EP4231124A1 (en) 2019-05-31 2023-08-23 Apple Inc. User interfaces for audio media control
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US20200379716A1 (en) 2019-05-31 2020-12-03 Apple Inc. Audio media user interface
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US11172298B2 (en) 2019-07-08 2021-11-09 Apple Inc. Systems, methods, and user interfaces for headphone fit adjustment and audio output control
WO2021010993A1 (en) 2019-07-17 2021-01-21 Hewlett-Packard Development Company, L.P. Audio peripheral device selections
US20210064317A1 (en) 2019-08-30 2021-03-04 Sony Interactive Entertainment Inc. Operational mode-based settings for presenting notifications on a user display
US20210065134A1 (en) 2019-08-30 2021-03-04 Microsoft Technology Licensing, Llc Intelligent notification system
US11172328B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for device localization
US11152011B2 (en) 2019-11-27 2021-10-19 Summit Wireless Technologies, Inc. Voice detection with multi-channel interference cancellation
US10963145B1 (en) 2019-12-30 2021-03-30 Snap Inc. Prioritizing display of user icons associated with content
US11745585B2 (en) 2020-04-20 2023-09-05 Thinkware Corporation Vehicle infotainment apparatus using widget and operation method thereof
US20210349680A1 (en) 2020-05-11 2021-11-11 Apple Inc. User interface for audio message
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US20220116399A1 (en) 2020-10-12 2022-04-14 Apple Inc. Media service configuration
US20220129144A1 (en) 2020-10-26 2022-04-28 Apple Inc. Methods and user interfaces for handling user requests
US20220392455A1 (en) 2021-06-06 2022-12-08 Apple Inc. Methods and user interfaces for voice-based user profile management
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
US20230098814A1 (en) 2021-09-24 2023-03-30 Apple Inc. Media controls user interface

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160299669A1 (en) 2014-09-02 2016-10-13 Sonos, Inc. Location Based Playback System Control
US20160360344A1 (en) 2015-06-04 2016-12-08 Lg Electronics Inc. Location based reminder system and method for controlling the same
US20170357420A1 (en) 2016-06-12 2017-12-14 Apple Inc. Device, Method, and Graphical User Interface for Media Playback
US20180335903A1 (en) 2017-05-16 2018-11-22 Apple Inc. Methods and interfaces for home media control

Also Published As

Publication number Publication date
JP2022524658A (ja) 2022-05-09
AU2022218540C1 (en) 2024-02-22
JP7126034B1 (ja) 2022-08-25
EP4231124A1 (en) 2023-08-23
EP3948517A1 (en) 2022-02-09
US20200379730A1 (en) 2020-12-03
US11853646B2 (en) 2023-12-26
CN114168103A (zh) 2022-03-11
AU2022218540B2 (en) 2023-10-26
EP4134811A1 (en) 2023-02-15
KR102436985B1 (ko) 2022-08-29
AU2023266353A1 (en) 2023-12-07
KR20220027295A (ko) 2022-03-07
AU2020282362B2 (en) 2022-01-13
CN113748408A (zh) 2021-12-03
WO2020243691A1 (en) 2020-12-03
WO2020243691A4 (en) 2021-03-04
CN115562613A (zh) 2023-01-03
JP7075547B2 (ja) 2022-05-25
KR20230039775A (ko) 2023-03-21
US20200379729A1 (en) 2020-12-03
AU2022218540A1 (en) 2022-09-08
KR20240049648A (ko) 2024-04-16
AU2020282362A1 (en) 2021-11-25
US20230393809A1 (en) 2023-12-07
JP2022128605A (ja) 2022-09-02
CN117170620A (zh) 2023-12-05
KR20210137221A (ko) 2021-11-17
US11620103B2 (en) 2023-04-04
JP2022176955A (ja) 2022-11-30
AU2022202458B1 (en) 2022-05-19
CN114168103B (zh) 2023-12-01

Similar Documents

Publication Publication Date Title
KR102656129B1 (ko) 오디오 미디어 제어를 위한 사용자 인터페이스
US11785387B2 (en) User interfaces for managing controllable external devices
US20230041125A1 (en) User interface for audio message
US11675608B2 (en) Multi-user configuration
US20220116399A1 (en) Media service configuration
US20240069711A1 (en) User interfaces for managing accessories
US11983551B2 (en) Multi-user configuration
KR20230011455A (ko) 오디오 메시지를 위한 사용자 인터페이스

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right