KR102076252B1 - 입력 디바이스 및 사용자 인터페이스 상호작용 - Google Patents

입력 디바이스 및 사용자 인터페이스 상호작용 Download PDF

Info

Publication number
KR102076252B1
KR102076252B1 KR1020187037173A KR20187037173A KR102076252B1 KR 102076252 B1 KR102076252 B1 KR 102076252B1 KR 1020187037173 A KR1020187037173 A KR 1020187037173A KR 20187037173 A KR20187037173 A KR 20187037173A KR 102076252 B1 KR102076252 B1 KR 102076252B1
Authority
KR
South Korea
Prior art keywords
touch
function
sensitive surface
contact
input
Prior art date
Application number
KR1020187037173A
Other languages
English (en)
Other versions
KR20190000392A (ko
Inventor
마르셀 반 오스
윌리엄 엠. 바크만
엘버트 디. 첸
제프리 엘. 로빈
조 하워드
조슈아 맥그린
조나단 로크헤드
벤자민 더블유. 케이란
제니퍼 엘.씨. 폴세
린 크레스
줄리안 미시그
임란 차우드리
알레산드로 사바텔리
니콜라스 잠베티
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20190000392A publication Critical patent/KR20190000392A/ko
Application granted granted Critical
Publication of KR102076252B1 publication Critical patent/KR102076252B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0383—Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control

Abstract

일부 실시예들에서, 디바이스는 접촉이 기능 디스플레이 기준들을 충족시키는 제1 입력의 표시를 수신한 것에 응답하여 기능 정보를 디스플레이한다. 일부 실시예들에서, 디바이스는 각자의 콘텐츠 아이템에서의 상이한 위치들로부터의 이미지들 및 인접 콘텐츠 아이템의 표현을 포함하는 내비게이션 바를 포함하는 사용자 인터페이스를 생성한다. 일부 실시예들에서, 디바이스는 일원적 이동 기준들을 충족시키는 제1 입력의 표시를 수신한 것에 응답하여 사용자 인터페이스에서 선택 표시자를 사전정의된 양만큼 이동시킨다. 일부 실시예들에서, 디바이스는 사용자의 그립에 적어도 부분적으로 기초하여 입력의 접촉의 이동을 해석한다. 일부 실시예들에서, 디바이스는 텍스트 입력 필드가 문자 불명료성에 대해 관대하지 않고 제1 입력이 복수의 후보 문자들에 대응하는 경우에 복수의 문자 선택 옵션들을 디스플레이한다.

Description

입력 디바이스 및 사용자 인터페이스 상호작용{INPUT DEVICE AND USER INTERFACE INTERACTIONS}
관련 출원들에 대한 상호 참조
본 출원은 2014년 6월 24일자로 출원된 미국 가출원 제62/016,593호의 이익을 주장하며, 상기 출원의 개시 내용은 모든 목적을 위해 본 명세서에 참고로 포함된다.
기술분야
본 발명은 대체로 터치 감응형 표면들을 사용하여 상호작용이 달성되는 전자 디바이스들에 관한 것이다.
컴퓨터들 및 다른 전자 컴퓨팅 디바이스들과 같은 디바이스들과의 사용자 상호작용은 최근에 상당히 증가해 왔다. 이들 디바이스들은 컴퓨터들, 태블릿 컴퓨터들, 텔레비전들, 멀티미디어 디바이스들 등과 같은 디바이스들일 수 있고, 이들 디바이스들은 사용자들에게 사용자 인터페이스들을 제시하여 상기의 상호작용을 가능하게 할 수 있다.
상기의 디바이스들과의 상호작용은 다양한 입력 디바이스들, 예컨대 터치 스크린 디스플레이들, 터치 감응형 표면들, 원격 제어부들, 마우스들, 및 다른 입력 디바이스들을 사용하여 수행될 수 있다. 터치 감응형 표면들 및 터치 스크린 디스플레이들은, 특히, 더욱더 대중적인 입력 디바이스들이 되어 왔다. 강건한 사용자 인터페이스-입력 디바이스 상호작용을 제공하는 것은 디바이스와의 사용자들의 경험을 향상시키고, 사용자 상호작용 시간을 감소시키는데, 이는 입력 디바이스들이 배터리 작동형인 경우에 특히 중요하다.
본 명세서에 기술되는 실시예들은, 선택적으로 기능 정보를 디스플레이하고, 콘텐츠 내비게이션 바(content navigation bar)를 디스플레이하고, 특정된 입력들에 응답하여 사용자 인터페이스에서의 사전정의된 이동을 제공하고, 사용자의 디바이스 그립을 판정하고, 글자 인식 사용자 인터페이스를 디스플레이하는 하나 이상의 디바이스들, 및 상기와 관련된 디바이스들이 선택적으로 수행하는 하나 이상의 동작들에 관한 것이다. 실시예들의 충분한 설명은 도면 및 발명을 실시하기 위한 구체적인 내용에서 제공되며, 상기에 제공된 발명의 내용은 어떤 방식으로든 본 발명의 범주를 제한하지 않는다는 것이 이해된다.
다양하게 기술된 실시예들의 보다 양호한 이해를 위해, 유사한 도면 부호들이 도면 전체에 걸쳐서 대응 부분들을 나타내는 하기의 도면들과 관련하여 하기의 발명을 실시하기 위한 구체적인 내용이 참조되어야 한다.
도 1a는 일부 실시예들에 따른, 터치 감응형 디스플레이를 갖는 다기능 디바이스를 도시한 블록 다이어그램이다.
도 1b는 일부 실시예들에 따른, 이벤트 처리를 위한 예시적인 컴포넌트들을 도시한 블록 다이어그램이다.
도 2는 일부 실시예들에 따른, 터치 스크린을 갖는 다기능 디바이스를 도시한다.
도 3은 일부 실시예들에 따른, 디스플레이 및 터치 감응형 표면을 갖는 예시적인 다기능 디바이스의 블록 다이어그램이다.
도 4는 일부 실시예들에 따른, 디스플레이로부터 이격된 터치 감응형 표면을 갖는 다기능 디바이스에 대한 예시적인 사용자 인터페이스를 도시한다.
도 5는 본 발명의 일부 실시예들에 따른, 디바이스에 대한 예시적인 아키텍처의 블록 다이어그램을 도시한다.
도 6a 내지 도 6g는 본 발명의 일부 실시예들에 따른, 기능 정보가 사용자 인터페이스에서 제시되는 예시적인 방식들을 도시한다.
도 7a 내지 도 7g는 일부 실시예들에 따른, 기능 정보를 디스플레이하는 방법을 도시한 흐름도들이다.
도 8a 내지 도 8g는 본 발명의 일부 실시예들에 따른, 콘텐츠 내비게이션 바가 사용자 인터페이스에서 제시되는 예시적인 방식들을 도시한다.
도 9a 내지 도 9g는 일부 실시예들에 따른, 콘텐츠 내비게이션 바를 제시하는 방법을 도시한 흐름도들이다.
도 10a 내지 도 10d는 본 발명의 일부 실시예들에 따른, 전자 디바이스가 사용자 인터페이스에서 커서를 사전정의된 양만큼 이동시키는 예시적인 방식들을 도시한다.
도 11a 내지 도 11d는 일부 실시예들에 따른, 사용자 인터페이스에서 커서를 사전정의된 양만큼 이동시키는 방법을 도시한 흐름도들이다.
도 12a 내지 도 12e는 본 발명의 일부 실시예들에 따른, 터치 감응형 표면 상에서의 입력들이 사용자의 그립에 기초하여 해석되는 예시적인 방식들을 도시한다.
도 13a 내지 도 13c는 일부 실시예들에 따른, 사용자의 그립에 기초하여 터치 감응형 표면 상에서 검출된 입력을 해석하는 방법을 도시한 흐름도들이다.
도 14a 내지 도 14c는 본 발명의 일부 실시예들에 따른, 전자 디바이스가 육필 입력 사용자 인터페이스를 제시하는 예시적인 방식들을 도시한다.
도 15a 내지 도 15d는 일부 실시예들에 따른, 육필 입력을 검출하는 방법을 도시한 흐름도들이다.
도 16 내지 도 20은 일부 실시예들에 따른 전자 디바이스들의 기능 블록 다이어그램들이다.
실시예들의 하기의 설명에서, 본 명세서의 일부를 형성하고, 선택적으로 실시되는 특정 실시예들이 예시로서 도시되는 첨부 도면이 참조된다. 개시된 실시예들의 범주를 벗어나지 않으면서, 다른 실시예들이 선택적으로 이용되고 구조적 변경들이 선택적으로 이루어진다는 것이 이해될 것이다.
예시적인 디바이스들
전자 디바이스들, 그러한 디바이스들에 대한 사용자 인터페이스들, 및 그러한 디바이스들을 사용하기 위한 연관된 프로세스들의 실시예들이 기술된다. 일부 실시예들에서, 디바이스는 PDA 및/또는 음악 플레이어 기능들과 같은 다른 기능들을 또한 포함하는 휴대용 통신 디바이스, 예컨대 모바일 전화기이다. 휴대용 다기능 디바이스들의 예시적인 실시예들은 미국 캘리포니아주 쿠퍼티노 소재의 애플 인크.(Apple Inc.)로부터의 iPhone®, iPod Touch®, 및 iPad® 디바이스들을 제한없이 포함한다. 터치 감응형 표면들(예컨대, 터치 스크린 디스플레이들 및/또는 터치 패드들)을 갖는 랩톱들 또는 태블릿 컴퓨터들과 같은 다른 휴대용 전자 디바이스들이 선택적으로 사용된다. 일부 실시예들에서, 디바이스는 휴대용 통신 디바이스가 아니라 터치 감응형 표면(예컨대, 터치 스크린 디스플레이 및/또는 터치 패드)을 갖는 데스크톱 컴퓨터 또는 텔레비전이라는 것이 또한 이해되어야 한다. 일부 실시예들에서, 디바이스는 터치 스크린 디스플레이 및/또는 터치 패드를 갖는 것이 아니라, 오히려, 별도의 디스플레이 디바이스 상에서의 디스플레이를 위해 디스플레이 정보(예컨대, 본 발명의 사용자 인터페이스들)를 출력할 수 있고, 하나 이상의 입력 메커니즘들(예컨대, 하나 이상의 버튼들, 터치 스크린 디스플레이, 및/또는 터치 패드)을 갖는 별도의 입력 디바이스로부터 입력 정보를 수신할 수 있다. 일부 실시예들에서, 디바이스는 디스플레이를 갖지만, 하나 이상의 입력 메커니즘들(예컨대, 하나 이상의 버튼들, 터치 스크린 디스플레이, 및/또는 터치 패드)을 갖는 별도의 입력 디바이스로부터 입력 정보를 수신할 수 있다.
하기의 논의에서, 디스플레이 및 터치 감응형 표면을 포함하는 전자 디바이스가 기술된다. 그러나, 전자 디바이스가 선택적으로 하나 이상의 다른 물리적 사용자 인터페이스 디바이스들, 예컨대 물리적 키보드, 마우스, 및/또는 조이스틱을 포함한다는 것이 이해되어야 한다. 또한, 전술된 바와 같이, 기술된 전자 디바이스, 디스플레이, 및 터치 감응형 표면은, 선택적으로, 2개 이상의 디바이스들 사이에 분산되어 있다는 것이 이해되어야 한다. 따라서, 본 발명에서 사용되는 바와 같이, 전자 디바이스 상에 또는 전자 디바이스에 의해 디스플레이되는 정보는, 선택적으로, 별도의 디스플레이 디바이스(터치 감응형이든 아니든) 상에서의 디스플레이를 위해 전자 디바이스에 의해 출력되는 정보를 설명하기 위해 이용된다. 유사하게, 본 발명에서 사용되는 바와 같이, 전자 디바이스 상에 수신된 입력(예컨대, 전자 디바이스의 터치 감응형 표면 상에 수신된 터치 입력)은, 선택적으로, 전자 디바이스가 입력 정보를 수신하게 되는 별도의 입력 디바이스 상에 수신된 입력을 설명하기 위해 이용된다.
디바이스는 전형적으로 다음 중 하나 이상과 같은 다양한 애플리케이션들을 지원한다: 드로잉 애플리케이션, 프레젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 제작 애플리케이션, 디스크 저작 애플리케이션, 스프레드시트 애플리케이션, 게임 애플리케이션, 전화 애플리케이션, 화상 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 운동 지원 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 음악 플레이어 애플리케이션, 텔레비전 채널 브라우징 애플리케이션, 및/또는 디지털 비디오 플레이어 애플리케이션.
디바이스 상에서 실행되는 다양한 애플리케이션들은, 선택적으로, 터치 감응형 표면과 같은 적어도 하나의 보편적인 물리적 사용자 인터페이스 디바이스를 사용한다. 터치 감응형 표면의 하나 이상의 기능들뿐만 아니라 디바이스 상에 디스플레이되는 대응하는 정보는, 선택적으로, 하나의 애플리케이션으로부터 다음 애플리케이션으로 그리고/또는 각각의 애플리케이션 내에서 조정되고/되거나 변화된다. 이러한 방식으로, 디바이스의 (터치 감응형 표면과 같은) 보편적인 물리적 아키텍처는 사용자에게 직관적이고 명료한 사용자 인터페이스들을 이용하여, 선택적으로, 다양한 애플리케이션들을 지원한다.
터치 감응형 디스플레이들을 갖는 휴대용 또는 비휴대용 디바이스들의 실시예들이 이제 주목되지만, 디바이스들이 대체로 전술된 바와 같이 터치 감응형 디스플레이들 또는 디스플레이들을 포함할 필요는 없다. 도 1a는, 일부 실시예들에 따른, 터치 감응형 디스플레이들(112)을 갖는 휴대용 또는 비휴대용 다기능 디바이스(100)를 도시한 블록 다이어그램이다. 터치 감응형 디스플레이(112)는 때때로 편의상 "터치 스크린"이라고 지칭되고, 때때로 터치 감응형 디스플레이 시스템으로 알려져 있거나 또는 그렇게 지칭된다. 디바이스(100)는 메모리(102)(하나 이상의 컴퓨터 판독가능 저장 매체들을 선택적으로 포함함), 메모리 제어기(122), 하나 이상의 프로세싱 유닛(CPU)들(120), 주변기기 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입력/출력(I/O) 서브시스템(106), 기타 입력 또는 제어 디바이스들(116) 및 외부 포트(124)를 포함한다. 디바이스(100)는 선택적으로 하나 이상의 광 센서들(164)을 포함한다. 디바이스(100)는 디바이스(100) 상에의 접촉들의 세기를 검출하기 위한 하나 이상의 세기 센서들(165)(예컨대, 디바이스(100)의 터치 감응형 디스플레이 시스템(112)과 같은 터치 감응형 표면)을 선택적으로 포함한다. 디바이스(100)는 디바이스(100) 상에 촉각적 출력들을 생성하기 위한(예컨대, 디바이스(100)의 터치 감응형 디스플레이 시스템(112) 또는 디바이스(300)의 터치 패드(355)와 같은 터치 감응형 표면 상에 촉각적 출력들을 생성하기 위한) 하나 이상의 촉각적 출력 생성기들(167)을 선택적으로 포함한다. 이러한 컴포넌트들은, 선택적으로, 하나 이상의 통신 버스들 또는 신호 라인들(103)을 통해 통신한다.
명세서 및 청구범위에서 사용되는 바와 같이, 터치 감응형 표면 상에의 접촉의 "세기"라는 용어는 터치 감응형 표면 상에의 접촉(예컨대, 손가락 접촉)의 힘 또는 압력(단위 면적 당 힘), 또는 터치 감응형 표면 상에의 접촉의 힘 또는 압력에 대한 대체물(대용물(proxy))을 지칭한다. 접촉의 세기는, 적어도 4개의 구별되는 값들을 포함하고 더 전형적으로는 수백 개(예컨대, 적어도 256개)의 구별되는 값들을 포함하는 소정 범위의 값들을 갖는다. 접촉의 세기는 다양한 접근법들, 및 다양한 센서들 또는 센서들의 조합들을 이용하여, 선택적으로 결정(또는 측정)된다. 예를 들어, 터치 감응형 표면 아래의 또는 그에 인접한 하나 이상의 힘 센서는 터치 감응형 표면 상의 다양한 지점들에서 힘을 측정하는 데 선택적으로 사용된다. 일부 구현예들에서는, 다수의 힘 센서들로부터의 힘 측정치들이 접촉의 추정되는 힘을 판정하기 위해 조합(예컨대, 가중 평균)된다. 유사하게, 스타일러스의 압력 감응형 팁(tip)이 터치 감응형 표면 상에의 스타일러스의 압력을 판정하는 데 선택적으로 사용된다. 대안으로, 터치 감응형 표면 상에서 검출된 접촉 면적의 크기 및/또는 그에 대한 변화들, 접촉 부근의 터치 감응형 표면의 커패시턴스 및/또는 그에 대한 변화들, 및/또는 접촉 부근의 터치 감응형 표면의 저항 및/또는 그에 대한 변화들은 터치 감응형 표면 상에의 접촉의 힘 또는 압력에 대한 대체물로서 선택적으로 이용된다. 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 세기 임계치가 초과되었는지 여부를 판정하는 데 직접 이용된다(예컨대, 세기 임계치는 대체 측정치들에 대응하는 단위로 기술된다). 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 추정된 힘 또는 압력으로 변환되고, 추정된 힘 또는 압력은 세기 임계치가 초과되었는지 여부를 판정하는 데 이용된다(예컨대, 세기 임계치는 압력의 단위로 측정된 압력 임계치이다).
명세서 및 청구범위에 사용되는 바와 같이, "촉각적 출력"이라는 용어는 디바이스의 이전 위치에 대한 디바이스의 물리적 변위, 디바이스의 다른 콤포넌트(예컨대, 하우징)에 대한 디바이스의 소정 콤포넌트(예컨대, 터치 감응형 표면)의 물리적 변위, 또는 사용자의 터치감으로 사용자에 의해 검출될 디바이스의 질량 중심에 대한 콤포넌트의 변위를 지칭한다. 예를 들어, 디바이스 또는 디바이스의 콤포넌트가 터치에 민감한 사용자의 표면(예컨대, 손가락, 손바닥, 또는 사용자의 손의 기타 부위)과 접촉하는 상황에서, 물리적 변위에 의해 생성된 촉각적 출력은, 사용자에 의해, 디바이스 또는 디바이스의 콤포넌트의 물리적 특성들의 인지된 변화에 대응하는 촉감(tactile sensation)으로서 해석될 것이다. 예를 들어, 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 또는 트랙패드)의 이동은, 선택적으로, 사용자에 의해 물리적 액추에이터 버튼의 "다운 클릭(down click)" 또는 "업 클릭(up click)"으로서 해석된다. 일부 경우들에 있어서, 사용자는 사용자의 이동에 의해 물리적으로 눌리는(예컨대, 변위되는) 터치 감응형 표면과 연관된 물리적 액추에이터 버튼의 이동이 없을 때에도 "다운 클릭" 또는 "업 클릭"과 같은 촉감을 느낄 것이다. 다른 예로서, 터치 감응형 표면의 이동은 터치 감응형 표면의 평탄성에 변화가 없는 경우에도 선택적으로 터치 감응형 표면의 "거칠기(roughness)"로서 사용자에 의해 해석되거나 감지된다. 사용자에 의한 터치의 그러한 해석들이 사용자의 개별화된 감각 인지(sensory perception)들에 영향을 받기 쉬울 것이지만, 대다수의 사용자들에게 공통적인 많은 터치 감각 인지들이 존재한다. 따라서, 촉각적 출력이 사용자의 특정 감각 인지(예컨대, "업 클릭", "다운 클릭", "거칠기")에 대응하는 것으로서 설명될 때, 달리 언급되지 않는다면, 생성된 촉각적 출력은 전형적인(또는 평균적인) 사용자에 대한 설명된 감각 인지를 생성할 디바이스 또는 그의 콤포넌트의 물리적 변위에 대응한다.
디바이스(100)는 휴대용 또는 비휴대용 다기능 디바이스의 일례일 뿐이고, 디바이스(100)는, 도시된 것보다 더 많은 또는 더 적은 컴포넌트들을 선택적으로 갖거나, 선택적으로 2개 이상의 컴포넌트들을 조합하거나, 또는 선택적으로 컴포넌트들의 상이한 구성 또는 배열을 갖는다는 것이 이해되어야 한다. 도 1a에 도시된 다양한 컴포넌트들은 하나 이상의 신호 프로세싱 회로 및/또는 ASIC(application-specific integrated circuit)들을 비롯한, 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어 양측 모두의 조합으로 구현된다. 또한, 도 1a에 도시된 다양한 컴포넌트들은 선택적으로 2개 이상의 디바이스들, 예를 들어 디스플레이 디바이스 상의 디스플레이와 오디오 회로, 입력 디바이스 상의 터치 감응형 표면, 및 디바이스(100) 상의 나머지 컴포넌트들에 걸쳐서 구현된다. 그러한 실시예에서, 디바이스(100)는 본 발명에서 기술되는 바와 같이 시스템의 동작을 가능하게 하는 디스플레이 디바이스 및/또는 입력 디바이스와 선택적으로 통신하며, 디스플레이 및/또는 입력에 관련되는, 본 명세서에 기술되는 다양한 컴포넌트들은, 적절하게는, 디바이스(100)에 남아 있거나 디스플레이 및/또는 입력 디바이스에 선택적으로 포함된다.
메모리(102)는 선택적으로 고속 랜덤 액세스 메모리를 포함하고, 또한 선택적으로 하나 이상의 자기 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 다른 비휘발성 솔리드 스테이트 메모리 디바이스들과 같은 비휘발성 메모리를 포함한다. CPU(120) 및 주변기기 인터페이스(118)와 같은, 디바이스(100)의 다른 컴포넌트들에 의한 메모리(102)에의 액세스는 선택적으로 메모리 제어기(122)에 의해 제어된다.
주변기기 인터페이스(118)는 디바이스의 입력 및 출력 주변기기들을 CPU(120) 및 메모리(102)에 커플링하는 데 사용될 수 있다. 하나 이상의 프로세서들(120)은 디바이스(100)에 대한 다양한 기능들을 수행하기 위해 그리고 데이터를 프로세싱하기 위해 메모리(102)에 저장된 다양한 소프트웨어 프로그램들 및/또는 명령어들의 세트들을 구동 또는 실행시킨다.
일부 실시예들에서, 주변기기 인터페이스(118), CPU(120) 및 메모리 제어기(122)는 선택적으로 칩(104)과 같은 단일 칩 상에 구현된다. 일부 다른 실시예들에서, 이들은 선택적으로 별개의 칩들 상에 구현된다.
RF(radio frequency) 회로(108)는 전자기 신호들로도 지칭되는 RF 신호들을 수신 및 송신한다. RF 회로(108)는 전기 신호들을 전자기 신호들로/로부터 변환하고, 전자기 신호들을 통해 통신 네트워크들 및 다른 통신 디바이스들과 통신한다. RF 회로(108)는, 안테나 시스템, RF 송수신기, 하나 이상의 증폭기들, 튜너, 하나 이상의 발진기들, 디지털 신호 프로세서, CODEC 칩셋, SIM(subscriber identity module) 카드, 메모리 등을 제한 없이 포함하는, 이들 기능들을 수행하기 위한 주지의 회로를 선택적으로 포함한다. RF 회로(108)는, 선택적으로, 무선 통신에 의해 월드 와이드 웹(World Wide Web, WWW)으로도 지칭되는 인터넷, 인트라넷 및/또는 무선 네트워크, 예컨대 셀룰러 전화 네트워크, 무선 LAN(local area network) 및/또는 MAN(metropolitan area network)과 같은 네트워크들 및 다른 디바이스들과 통신한다. 무선 통신은, 선택적으로, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), HSUPA(high-speed uplink packet access), EV-DO(Evolution, Data-Only), HSPA, HSPA+, DC-HSPDA(Dual-Cell HSPA), LTE(long term evolution), NFC(near field communication), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스(Bluetooth), Wi-Fi(Wireless Fidelity)(예컨대, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 이메일용 프로토콜(예컨대, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예컨대, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service)), 및/또는 SMS(Short Message Service), 또는 본 문헌의 출원일 현재 아직 개발되어 있지 않은 통신 프로토콜을 비롯한 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 제한되지 않는 복수의 통신 표준들, 프로토콜들 및 기술들 중 임의의 것을 이용한다.
오디오 회로(110), 스피커(111) 및 마이크로폰(113)은 사용자와 디바이스(100) 사이의 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변기기 인터페이스(118)로부터 오디오 데이터를 수신하고, 그 오디오 데이터를 전기 신호로 변환하고, 그 전기 신호를 스피커(111)로 송신한다. 스피커(111)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. 오디오 회로(110)는 또한 음파로부터 마이크로폰(113)에 의해 변환된 전기 신호들을 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 프로세싱을 위해 그 오디오 데이터를 주변기기 인터페이스(118)로 송신한다. 오디오 데이터는, 선택적으로, 주변기기 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되고/되거나 메모리(102) 및/또는 RF 회로(108)로 송신된다. 일부 실시예들에서, 오디오 회로(110)는 또한 헤드셋 잭(예컨대, 도 2의 212)을 포함한다. 헤드셋 잭은 출력 전용 헤드폰들, 또는 출력(예컨대, 한쪽 또는 양쪽 귀를 위한 헤드폰) 및 입력(예컨대, 마이크로폰) 양측 모두를 갖는 헤드셋과 같은 분리가능한 오디오 입력/출력 주변기기들과 오디오 회로(110) 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 터치 스크린(112) 및 기타 입력 제어 디바이스들(116)과 같은, 디바이스(100) 상의 입력/출력 주변기기들을 주변기기 인터페이스(118)에 커플링시킨다. I/O 서브시스템(106)은 선택적으로 디스플레이 제어기(156), 광 센서 제어기(158), 세기 센서 제어기(159), 햅틱 피드백 제어기(161), 및 기타 입력 또는 제어 디바이스들을 위한 하나 이상의 입력 제어기들(160)을 포함한다. 하나 이상의 입력 제어기들(160)은 다른 입력 또는 제어 디바이스들(116)로부터/로 전기 신호들을 수신/전송한다. 기타 입력 제어 디바이스들(116)은 선택적으로 물리적 버튼들(예컨대, 푸시 버튼, 로커 버튼(rocker button) 등), 다이얼들, 슬라이더 스위치들, 조이스틱들, 클릭 휠들 등을 포함한다. 일부 대안의 실시예들에서, 입력 제어기(들)(160)는 선택적으로 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 디바이스 중 임의의 것에 커플링된다(또는 어떤 것에도 커플링되지 않는다). 하나 이상의 버튼들(예컨대, 도 2의 208)은, 선택적으로, 스피커(111) 및/또는 마이크로폰(113)의 음량 제어를 위한 업/다운 버튼을 포함한다. 하나 이상의 버튼들은 선택적으로 푸시 버튼(예컨대, 도 2의 206)을 포함한다.
터치 감응형 디스플레이(112)는 디바이스와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 전술된 바와 같이, 터치 감응형 디스플레이(112)의 터치 감응 동작 및 디스플레이 동작은 선택적으로 서로 분리되어, 디스플레이 디바이스가 디스플레이 목적들을 위해 사용되고 터치 감응형 표면(디스플레이이든 아니든)이 입력 검출 목적들을 위해 사용되게 하며, 이에 따라, 기술된 컴포넌트들 및 기능들이 수정된다. 그러나, 간소성을 위해, 하기의 설명은 터치 감응형 디스플레이를 참고로 제공된다. 디스플레이 제어기(156)는 터치 스크린(112)으로부터/으로 전기 신호들을 수신하고/하거나 송신한다. 터치 스크린(112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 선택적으로 그래픽, 텍스트, 아이콘들, 비디오, 및 이들의 임의의 조합(총칭하여 "그래픽"으로 지칭됨)을 포함한다. 일부 실시예들에서, 시각적 출력의 일부 또는 전부가 사용자 인터페이스 객체들에 대응한다.
터치 스크린(112)은 햅틱 및/또는 촉각적 접촉에 기초하여 사용자로부터의 입력을 수용하는 터치 감응형 표면, 센서 또는 센서들의 세트를 갖는다. 터치 스크린(112) 및 디스플레이 제어기(156)는 (메모리(102) 내의 임의의 연관된 모듈들 및/또는 명령어들의 세트들과 함께) 터치 스크린(112) 상에의 접촉(및 접촉의 임의의 이동 또는 중단)을 검출하고, 검출된 접촉을 터치 스크린(112) 상에 디스플레이된 사용자 인터페이스 객체들(예컨대, 하나 이상의 소프트 키들, 아이콘들, 웹페이지들 또는 이미지들)과의 상호작용으로 변환한다. 예시적인 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉 지점은 사용자의 손가락에 대응한다.
터치 스크린(112)은 선택적으로 LCD(liquid crystal display) 기술, LPD(light emitting polymer display) 기술, 또는 LED(light emitting diode) 기술을 이용하지만, 다른 실시예들에서는 다른 디스플레이 기술들이 이용된다. 터치 스크린(112) 및 디스플레이 제어기(156)는 용량성, 저항성, 적외선, 및 표면 음향파 기술들뿐만 아니라 다른 근접 센서 어레이들, 또는 터치 스크린(112)과의 하나 이상의 접촉 지점들을 판정하기 위한 다른 요소들을 포함하지만 이들로 한정되지 않는, 현재 공지되어 있거나 추후에 개발되는 복수의 터치 감지 기술들 중 임의의 것을 이용하여, 선택적으로 접촉 및 그의 임의의 이동 또는 중단을 검출한다. 예시적인 실시예에서는, 미국 캘리포니아주 쿠퍼티노 소재의 애플 인크.로부터의 iPhone®, iPod Touch®, 및 iPad®에서 발견되는 것과 같은 투영형 상호 용량 감지 기술(projected mutual capacitance sensing technology)이 이용된다.
터치 스크린(112)은, 선택적으로, 100dpi를 초과하는 비디오 해상도를 갖는다. 일부 실시예들에서, 터치 스크린은 대략 160 dpi의 비디오 해상도를 갖는다. 사용자는 스타일러스, 손가락 등과 같은 임의의 적합한 물체 또는 부속물을 이용하여, 선택적으로 터치 스크린(112)과 접촉한다. 일부 실시예들에서, 사용자 인터페이스는 주로 손가락 기반 접촉들 및 제스처들을 이용하여 동작하도록 설계되는데, 이는 터치 스크린 상에서의 손가락의 더 넓은 접촉 면적으로 인해 스타일러스 기반 입력보다 덜 정밀할 수 있다. 일부 실시예들에서, 디바이스는 대략적인 손가락 기반 입력을 사용자가 원하는 동작들을 수행하기 위한 정밀한 포인터/커서 위치 또는 커맨드(command)로 변환한다.
일부 실시예들에서, 터치 스크린 외에도, 디바이스(100)는, 선택적으로, 특정 기능들을 활성화 또는 비활성화시키기 위한 터치 패드(도시되지 않음)를 포함한다. 일부 실시예들에서, 터치 패드는, 터치 스크린과는 달리, 시각적 출력을 디스플레이하지 않는 디바이스의 터치 감응형 영역이다. 터치 패드는, 선택적으로, 터치 스크린(112)과는 별개인 터치 감응형 표면 또는 터치 스크린에 의해 형성된 터치 감응형 표면의 연장부이다.
디바이스(100)는 또한 다양한 컴포넌트들에 전력을 공급하기 위한 전력 시스템(162)을 포함한다. 전력 시스템(162)은, 선택적으로, 전력 관리 시스템, 하나 이상의 전원들(예컨대, 배터리, AC(alternating current)), 재충전 시스템, 전력 고장 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시자(예컨대, LED), 및 휴대용 또는 비휴대용 디바이스들에서의 전력의 생성, 관리 및 분배와 연관된 임의의 다른 컴포넌트들을 포함한다.
디바이스(100)는 또한 선택적으로 하나 이상의 광 센서들(164)을 포함한다. 도 1a는 I/O 서브시스템(106) 내의 광 센서 제어기(158)에 커플링된 광 센서를 도시한다. 광 센서(164)는 선택적으로 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor) 포토트랜지스터들을 포함한다. 광 센서(164)는 하나 이상의 렌즈들을 통해 투사된, 주변환경으로부터의 광을 수신하고, 그 광을 이미지를 나타내는 데이터로 변환한다. 이미징 모듈(143)(카메라 모듈로도 지칭됨)과 함께, 광 센서(164)는 선택적으로 정지 이미지들 또는 비디오를 캡처한다. 일부 실시예들에서, 광 센서는 디바이스 전면 상의 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치되어, 터치 스크린 디스플레이가 정지 및/또는 비디오 이미지 획득을 위한 뷰파인더로서 사용될 수 있게 한다. 일부 실시예들에서, 다른 광 센서가 디바이스의 전면 상에 위치되어, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자들을 보는 동안, 사용자의 이미지가 화상 회의를 위해 선택적으로 획득되게 한다.
디바이스(100)는 또한 선택적으로 하나 이상의 접촉 세기 센서(165)를 포함한다. 도 1a는 I/O 서브시스템(106) 내의 세기 센서 제어기(159)에 커플링된 접촉 세기 센서를 도시한다. 접촉 세기 센서(165)는 선택적으로 하나 이상의 압전 저항 스트레인 게이지들, 용량성 힘 센서들, 전기적 힘 센서들, 압전 힘 센서들, 광학적 힘 센서들, 용량성 터치 감응형 표면들, 또는 다른 세기 센서들(예컨대, 터치 감응형 표면 상에의 접촉의 힘(또는 압력)을 측정하는 데 사용되는 센서들)을 포함한다. 접촉 세기 센서(165)는 주변환경으로부터 접촉 세기 정보(예컨대, 압력 정보 또는 압력 정보에 대한 대용물)를 수신한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서는 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(112))과 함께 위치되거나 그에 근접한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서가 디바이스(100)의 전면 상에 위치된 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치된다.
디바이스(100)는 또한 선택적으로 하나 이상의 근접 센서들(166)을 포함한다. 도 1a는 주변기기 인터페이스(118)에 커플링된 근접 센서(166)를 도시한다. 대안으로, 근접 센서(166)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 커플링된다. 일부 실시예들에서, 근접 센서는 다기능 디바이스가 사용자의 귀 근처에 위치될 때(예를 들면, 사용자가 전화 통화를 하고 있을 때), 터치 스크린(112)을 끄고 디스에이블시킨다.
디바이스(100)는 또한 선택적으로 하나 이상의 촉각적 출력 생성기들(167)을 포함한다. 도 1a는 I/O 서브시스템(106) 내의 햅틱 피드백 제어기(161)에 커플링된 촉각적 출력 생성기를 도시한다. 촉각적 출력 생성기(167)는, 선택적으로, 스피커들 또는 다른 오디오 컴포넌트들과 같은 하나 이상의 전자음향 디바이스들, 및/또는 모터, 솔레노이드, 전기활성 폴리머, 압전 액추에이터, 정전 액추에이터, 또는 다른 촉각적 출력 생성 컴포넌트(예컨대, 전기 신호들을 디바이스 상의 촉각적 출력들로 변환하는 컴포넌트)와 같이, 에너지를 선형 모션(linear motion)으로 변환하는 전자기계 디바이스들을 포함한다. 접촉 세기 센서(165)는 햅틱 피드백 모듈(133)로부터 촉각적 피드백 생성 명령어들을 수신하고, 디바이스(100)의 사용자에 의해 감지될 수 있는 디바이스(100) 상의 촉각적 출력들을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기는 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(112))과 함께 위치되거나 그에 근접하며, 터치 감응형 표면을 수직으로(예컨대, 디바이스(100)의 표면 내/외로) 또는 측방향으로(예컨대, 디바이스(100)의 표면과 동일한 평면에서 전후로) 이동시킴으로써 선택적으로 촉각적 출력을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기 센서는 디바이스(100)의 전면 상에 위치된 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치된다.
디바이스(100)는 또한 선택적으로 하나 이상의 가속도계(168)를 포함한다. 도 1a는 주변기기 인터페이스(118)에 커플링된 가속도계(168)를 도시한다. 대안으로, 가속도계(168)는 선택적으로 I/O 서브시스템(106) 내의 입력 제어기(160)에 커플링된다. 일부 실시예들에서, 하나 이상의 가속도계들로부터 수신된 데이터의 분석에 기초하여 터치 스크린 디스플레이 상에 세로보기(portrait view) 또는 가로보기(landscape view)로 정보가 디스플레이된다. 디바이스(100)는, 선택적으로, 가속도계(들)(168) 외에도, 자력계(도시되지 않음), 및 디바이스(100)의 위치 및 배향(예컨대, 세로 또는 가로)에 관한 정보를 획득하기 위한 GPS(Global Positioning System)(또는 GLONASS 또는 다른 글로벌 내비게이션 시스템) 수신기(도시되지 않음)를 포함한다.
일부 실시예들에서, 메모리(102)에 저장된 소프트웨어 컴포넌트들은 운영 체제(126), 통신 모듈(또는 명령어들의 세트)(128), 접촉/모션 모듈(또는 명령어들의 세트)(130), 그래픽 모듈(또는 명령어들의 세트)(132), 텍스트 입력 모듈(또는 명령어들의 세트)(134), GPS 모듈(또는 명령어들의 세트)(135), 및 애플리케이션들(또는 명령어들의 세트들)(136)을 포함한다. 또한, 일부 실시예들에서, 메모리(102)는 도 1a 및 도 3에 도시된 바와 같은 디바이스/글로벌 내부 상태(157)를 저장한다. 디바이스/글로벌 내부 상태(157)는 애플리케이션들이, 존재하는 경우, 현재 활성 상태임을 나타내는 활성 애플리케이션 상태; 터치 스크린 디스플레이(112)의 다양한 영역들을 점유하는 애플리케이션들, 뷰들 또는 다른 정보가 나타내는 디스플레이 상태; 디바이스의 다양한 센서들 및 입력 제어 디바이스들(116)로부터 획득된 정보를 포함하는 센서 상태; 및 디바이스의 위치 및/또는 자세에 관한 위치 정보 중 하나 이상을 포함한다.
운영 체제(126)(예컨대, 다윈(Darwin), RTXC, 리눅스(LINUX), 유닉스(UNIX), OS X, 윈도(WINDOWS), 또는 VxWorks와 같은 내장형 운영 체제)는 일반적인 시스템 태스크들(예컨대, 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어 및 관리하기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하고, 다양한 하드웨어 및 소프트웨어 컴포넌트들 사이의 통신을 가능하게 한다.
통신 모듈(128)은 하나 이상의 외부 포트들(124)을 통한 다른 디바이스들과의 통신을 가능하게 하고, 또한 RF 회로(108) 및/또는 외부 포트(124)에 의해 수신된 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 외부 포트(124)(예컨대, 범용 직렬 버스(Universal Serial Bus, USB), 파이어와이어(FIREWIRE) 등)는 다른 디바이스들에 직접적으로 또는 네트워크(예컨대, 인터넷, 무선 LAN 등)를 통해 간접적으로 커플링하도록 구성된다. 일부 실시예들에서, 외부 포트는 iPod(애플 인크.의 상표) 디바이스들에서 사용되는 30-핀 커넥터와 동일 또는 유사하고/하거나 호환가능한 멀티-핀(예컨대, 30-핀) 커넥터이다.
접촉/모션 모듈(130)은 선택적으로 (디스플레이 제어기(156)와 함께) 터치 스크린(112), 및 다른 터치 감응형 디바이스들(예컨대, 터치 패드 또는 물리적 클릭 휠)과의 접촉을 검출한다. 접촉/모션 모듈(130)은 접촉이 발생했는지 여부를 판정하는 것(예컨대, 손가락-다운 이벤트(finger-down event)를 검출하는 것), 접촉의 세기(예컨대, 접촉의 힘 또는 압력, 또는 접촉의 힘 또는 압력에 대한 대체물)를 판정하는 것, 접촉의 이동이 있는지 여부를 판정하여 터치 감응형 표면을 가로지르는 이동을 추적하는 것(예컨대, 하나 이상의 손가락-드래깅 이벤트(finger-dragging event)들을 검출하는 것), 및 접촉이 중지되었는지 여부를 판정하는 것(예컨대, 손가락-업 이벤트(finger-up event) 또는 접촉 중단을 검출하는 것)과 같은, 접촉의 검출에 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/모션 모듈(130)은 터치 감응형 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉 지점의 이동을 판정하는 것은, 선택적으로, 접촉 지점의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향의 변화)를 판정하는 것을 포함한다. 이들 동작들은 선택적으로 단일 접촉들(예컨대, 한 손가락 접촉들)에 또는 다수의 동시 접촉들(예컨대, "다중터치"/복수의 손가락 접촉들)에 적용된다. 일부 실시예들에서, 접촉/모션 모듈(130) 및 디스플레이 제어기(156)는 터치 패드 상에의 접촉을 검출한다.
일부 실시예들에서, 접촉/모션 모듈(130)은 동작이 사용자에 의해 수행되었는지 여부를 판정하는 데(예컨대, 사용자가 아이콘 상에서 "클릭"했는지 여부를 판정하는 데) 하나 이상의 세기 임계치들의 세트를 이용한다. 일부 실시예들에서, 적어도 세기 임계치들의 서브세트가 소프트웨어 파라미터들에 따라 결정된다(예컨대, 세기 임계치들은 특정 물리적 액추에이터들의 활성화 임계치들에 의해 결정되지 않으며, 디바이스(100)의 물리적 하드웨어를 변경함이 없이 조정될 수 있다). 예를 들어, 트랙 패드 또는 터치 스크린 디스플레이의 마우스 "클릭" 임계치는 트랙 패드 또는 터치 스크린 디스플레이 하드웨어를 변경하지 않으면서 넓은 범위의 사전정의된 임계치 값들 중 임의의 것으로 설정될 수 있다. 추가로, 일부 구현예들에서, 디바이스의 사용자는 (예컨대, 개개의 세기 임계치들을 조정함으로써 그리고/또는 복수의 세기 임계치들을 시스템 레벨 클릭 "세기" 파라미터로 한꺼번에 조정함으로써) 소정 세트의 세기 임계치들 중 하나 이상을 조정하기 위한 소프트웨어 설정들을 제공받는다.
접촉/모션 모듈(130)은 선택적으로 사용자에 의한 제스처 입력을 검출한다. 터치 감응형 표면 상에서의 상이한 제스처들은 상이한 접촉 패턴들 및 세기들을 갖는다. 따라서, 제스처는 특정 접촉 패턴을 검출함으로써 선택적으로 검출된다. 예를 들어, 손가락 탭핑 제스처(finger tap gesture)를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 손가락-다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)(예컨대, 아이콘의 위치)에서 손가락-업(리프트오프(lift off)) 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 감응형 표면 상에서 손가락 스와이프 제스처(swipe gesture)를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 하나 이상의 손가락-드래깅 이벤트들을 검출하고, 그에 후속하여 손가락-업(리프트오프) 이벤트를 검출하는 것을 포함한다.
그래픽 모듈(132)은 디스플레이되는 그래픽의 시각적 효과(예컨대, 밝기, 투명도, 채도, 콘트라스트 또는 다른 시각적 속성)를 변화시키기 위한 컴포넌트들을 포함하는, 터치 스크린(112) 또는 다른 디스플레이 상에 그래픽을 렌더링 및 디스플레이하기 위한 다양한 공지된 소프트웨어 컴포넌트들을 포함한다. 본 명세서에서 사용되는 바와 같이, "그래픽"이라는 용어는, 텍스트, 웹페이지들, 아이콘들(예컨대, 소프트 키들을 포함하는 사용자 인터페이스 객체들), 디지털 이미지들, 비디오들, 애니메이션들 등을 제한 없이 포함한, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다.
일부 실시예들에서, 그래픽 모듈(132)은 사용될 그래픽을 나타내는 데이터를 저장한다. 각각의 그래픽에는 대응하는 코드가 선택적으로 할당된다. 그래픽 모듈(132)은, 필요하다면 좌표 데이터 및 다른 그래픽 속성 데이터와 함께, 디스플레이될 그래픽을 명시하는 하나 이상의 코드들을 애플리케이션들 등으로부터 수신하며, 이어서 스크린 이미지 데이터를 생성하여 디스플레이 제어기(156)로 출력한다.
햅틱 피드백 모듈(133)은 디바이스(100)와의 사용자 상호작용들에 응답하여 디바이스(100) 상의 하나 이상의 위치들에 촉각적 출력들을 생성하기 위해 촉각적 출력 생성기(들)(167)에 의해 이용되는 명령어들을 생성하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다.
선택적으로 그래픽 모듈(132)의 컴포넌트인 텍스트 입력 모듈(134)은 다양한 애플리케이션들(예컨대, 연락처(137), 이메일(140), IM(141), 브라우저(147), 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션)에 텍스트를 입력하기 위한 소프트 키보드들을 제공한다.
GPS 모듈(135)은 디바이스의 위치를 판정하고, 이러한 정보를 다양한 애플리케이션들에서의 사용을 위해 (예컨대, 위치 기반 다이얼링에서 사용하기 위해 전화(138)에, 사진/비디오 메타데이터로서 카메라(143)에, 그리고 날씨 위젯들, 지역 옐로 페이지 위젯들, 및 지도/내비게이션 위젯들과 같은 위치 기반 서비스들을 제공하는 애플리케이션들에) 제공한다.
애플리케이션들(136)은 선택적으로 하기의 모듈들(또는 명령어들의 세트들), 또는 이들의 서브세트 또는 수퍼세트를 포함한다:
Figure 112018128702979-pat00001
연락처 모듈(137)(때때로 주소록 또는 연락처 목록으로 지칭됨);
Figure 112018128702979-pat00002
전화 모듈(138);
Figure 112018128702979-pat00003
화상 회의 모듈(139);
Figure 112018128702979-pat00004
이메일 클라이언트 모듈(140);
Figure 112018128702979-pat00005
인스턴트 메시징(IM) 모듈(141);
Figure 112018128702979-pat00006
운동 지원 모듈(142);
Figure 112018128702979-pat00007
정지 및/또는 비디오 이미지들을 위한 카메라 모듈(143);
Figure 112018128702979-pat00008
이미지 관리 모듈(144);
Figure 112018128702979-pat00009
브라우저 모듈(147);
Figure 112018128702979-pat00010
캘린더 모듈(148);
Figure 112018128702979-pat00011
선택적으로 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5), 및 사용자에 의해 획득된 다른 위젯들뿐 아니라 사용자-생성 위젯들(149-6) 중 하나 이상을 포함하는 위젯 모듈들(149);
Figure 112018128702979-pat00012
사용자-생성 위젯들(149-6)을 만들기 위한 위젯 생성기 모듈(150);
Figure 112018128702979-pat00013
검색 모듈(151);
Figure 112018128702979-pat00014
선택적으로 비디오 플레이어 모듈 및 음악 플레이어 모듈로 구성된 비디오 및 음악 플레이어 모듈(152);
Figure 112018128702979-pat00015
메모 모듈(153);
Figure 112018128702979-pat00016
지도 모듈(154);
Figure 112018128702979-pat00017
온라인 비디오 모듈(155).
선택적으로 메모리(102)에 저장되는 다른 애플리케이션들(136)의 예들은 다른 워드 프로세싱 애플리케이션들, 다른 이미지 편집 애플리케이션들, 드로잉 애플리케이션들, 프레젠테이션 애플리케이션들, JAVA 인에이블형 애플리케이션들, 암호화, 디지털 권한 관리, 음성 인식 및 음성 복제를 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 연락처 모듈(137)은 주소록에 이름(들)을 추가하는 것; 주소록으로부터 이름(들)을 삭제하는 것; 전화번호(들), 이메일 주소(들), 물리적 주소(들) 또는 기타 정보를 이름과 연관시키는 것; 이미지를 이름과 연관시키는 것; 이름들을 분류 및 구분하는 것; 전화(138), 화상 회의(139), 이메일(140) 또는 IM(141)에 의한 통신을 개시하고/하거나 가능하게 하기 위해 전화번호들 또는 이메일 주소들을 제공하는 것 등을 포함하여 주소록 또는 연락처 목록(예컨대, 메모리(102) 또는 메모리(370) 내의 연락처 모듈(137)의 애플리케이션 내부 상태(192)에 저장됨)를 관리하는 데 선택적으로 사용된다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 입력 모듈(134)과 함께, 전화 모듈(138)은 전화번호에 대응하는 문자들의 시퀀스를 입력하고, 주소록(137) 내의 하나 이상의 전화번호에 액세스하고, 입력된 전화번호를 수정하고, 각자의 전화번호를 다이얼링하고, 대화를 하고, 대화가 완료된 때 접속해제하거나 끊는 데 선택적으로 사용된다. 전술된 바와 같이, 무선 통신은 선택적으로 복수의 통신 표준들, 프로토콜들 및 기술들 중 임의의 것을 이용한다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 광 센서(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 목록(137) 및 전화 모듈(138)과 함께, 화상 회의 모듈(139)은 사용자 지시들에 따라 사용자와 하나 이상의 다른 참여자들 사이의 화상 회의를 개시, 시행 및 종료하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 이메일 클라이언트 모듈(140)은 사용자 지시들에 응답하여 이메일을 작성, 전송, 수신, 및 관리하도록 하는 실행가능한 명령어들을 포함한다. 이미지 관리 모듈(144)과 함께, 이메일 클라이언트 모듈(140)은 카메라 모듈(143)로 촬영된 정지 또는 비디오 이미지들을 갖는 이메일들을 작성 및 전송하는 것을 매우 용이하게 한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 인스턴트 메시징 모듈(141)은, 인스턴트 메시지에 대응하는 문자들의 시퀀스를 입력하고, 이전에 입력된 문자들을 수정하고, (예를 들어, 전화 기반 인스턴트 메시지들을 위한 SMS(Short Message Service) 또는 MMS(Multimedia Message Service) 프로토콜을 이용하거나, 인터넷 기반 인스턴트 메시지들을 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 각자의 인스턴트 메시지를 전송하고, 인스턴트 메시지들을 수신하고, 수신된 인스턴트 메시지들을 보도록 하는 실행가능한 명령어들을 포함한다. 일부 실시예들에서, 송신 및/또는 수신된 인스턴트 메시지들은 선택적으로 그래픽, 사진들, 오디오 파일들, 비디오 파일들, 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 다른 첨부물들을 포함한다. 본 명세서에서 사용되는 바와 같이, "인스턴트 메시징"은 전화 기반 메시지들(예컨대, SMS 또는 MMS를 이용하여 전송되는 메시지들) 및 인터넷 기반 메시지들(예컨대, XMPP, SIMPLE 또는 IMPS를 이용하여 전송되는 메시지들) 양측 모두를 지칭한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 지도 모듈(154), 및 음악 플레이어 모듈(146)과 함께, 운동 지원 모듈(142)은 (예컨대, 시간, 거리, 및/또는 열량 소비 목표들과 함께) 운동들을 생성하고; 운동 센서들(스포츠 디바이스들)과 통신하고; 운동 센서 데이터를 수신하고; 운동을 모니터링하는 데 사용되는 센서들을 교정하고; 운동 동안 음악을 선택 및 재생하고; 운동 데이터를 디스플레이, 저장 및 송신하도록 하는 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 광 센서(들)(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 함께, 카메라 모듈(143)은, 정지 이미지들 또는 비디오(비디오 스트림을 포함함)를 캡처하여 이들을 메모리(102) 내에 저장하거나, 정지 이미지 또는 비디오의 특성들을 수정하거나, 또는 메모리(102)로부터 정지 이미지 또는 비디오를 삭제하도록 하는 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 함께, 이미지 관리 모듈(144)은 정지 및/또는 비디오 이미지들을 배열하거나, 수정(예컨대, 편집)하거나, 또는 다른 방식으로 조작, 레이블링, 삭제, (예컨대, 디지털 슬라이드 쇼 또는 앨범으로) 제시, 및 저장하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 브라우저 모듈(147)은 웹페이지들 또는 이들의 부분들뿐 아니라 웹페이지들에 링크된 첨부물들 및 다른 파일들을 검색, 링크, 수신 및 디스플레이하는 것을 비롯한, 사용자 지시들에 따라 인터넷을 브라우징하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 함께, 캘린더 모듈(148)은 사용자 지시들에 따라 캘린더들 및 캘린더들과 연관된 데이터(예컨대, 캘린더 엔트리들, 할 일 목록들 등)를 생성, 디스플레이, 수정, 및 저장하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 모듈들(149)은 선택적으로 사용자에 의해 다운로드되어 사용되거나(예컨대, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)) 또는 사용자에 의해 생성되는(예컨대, 사용자-생성 위젯(149-6)) 미니 애플리케이션들이다. 일부 실시예들에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파일 및 자바스크립트(JavaScript) 파일을 포함한다. 일부 실시예들에서, 위젯은 XML(Extensible Markup Language) 파일 및 자바스크립트 파일(예컨대, 야후!(Yahoo!) 위젯들)을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 생성기 모듈(150)은 사용자에 의해 위젯들을 생성(예를 들면, 웹페이지의 사용자-지정 부분을 위젯으로 변환)하는 데 선택적으로 사용된다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 검색 모듈(151)은 사용자 지시들에 따라 하나 이상의 검색 기준들(예컨대, 하나 이상의 사용자-지정 검색어들)에 매칭하는 메모리(102) 내의 텍스트, 음악, 사운드, 이미지, 비디오, 및/또는 다른 파일들을 검색하도록 하는 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108) 및 브라우저 모듈(147)과 함께, 비디오 및 음악 플레이어 모듈(152)은, 사용자가 MP3 또는 AAC 파일들과 같은 하나 이상의 파일 포맷들로 저장된 녹음된 음악 및 다른 사운드 파일들을 다운로드 및 재생할 수 있게 하는 실행가능한 명령어들, 및 비디오들을 (예컨대, 터치 스크린(112) 상에서 또는 외부 포트(124)를 통해 외부의 접속된 디스플레이 상에서) 디스플레이, 제시, 또는 다른 방식으로 재생하도록 하는 실행가능한 명령어들을 포함한다. 일부 실시예들에서, 디바이스(100)는 선택적으로 iPod(애플 인크.의 상표)과 같은 MP3 플레이어의 기능을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 메모 모듈(153)은 사용자 지시들에 따라 메모들, 할 일 목록들 등을 생성 및 관리하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 및 브라우저 모듈(147)과 함께, 지도 모듈(154)은 사용자 지시들에 따라 지도들 및 지도들과 연관된 데이터(예컨대, 운전 방향; 특정 위치에서의 또는 그 인근의 상점들 및 다른 관심 지점들에 관한 데이터; 및 다른 위치 기반 데이터)를 수신, 디스플레이, 수정, 및 저장하는 데 선택적으로 사용된다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140) 및 브라우저 모듈(147)과 함께, 온라인 비디오 모듈(155)은 사용자가 H.264와 같은 하나 이상의 파일 포맷들의 온라인 비디오들에 액세스하게 하고, 이들을 브라우징하게 하고, (예컨대, 스트리밍 및/또는 다운로드에 의해) 수신하게 하고, (예컨대, 터치 스크린 상에 또는 외부 포트(124)를 통해 외부의 접속된 디스플레이 상에) 재생하게 하고, 특정 온라인 비디오에의 링크와 함께 이메일을 전송하게 하고, 다른 방식으로 관리하게 하도록 하는 명령어들을 포함한다. 일부 실시예들에서, 특정 온라인 비디오에의 링크를 전송하기 위해 이메일 클라이언트 모듈(140)보다는 인스턴트 메시징 모듈(141)이 사용된다.
상기의 식별된 모듈들 및 애플리케이션들 각각은 전술된 하나 이상의 기능들 및 본 출원에 기술되는 방법들(예컨대, 본 명세서에 기술되는 컴퓨터 구현 방법들 및 다른 정보 프로세싱 방법들)을 수행하기 위한 소정 세트의 실행가능한 명령어들에 대응한다. 이들 모듈들(예컨대, 소정 세트들의 명령어들)은 개별 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 이에 따라 이들 모듈들의 다양한 서브세트들은, 선택적으로, 다양한 실시예들에서 조합되거나 다른 방식으로 재배열된다. 일부 실시예들에서, 메모리(102)는 선택적으로 소정 서브세트의 전술된 모듈들 및 데이터 구조들을 저장한다. 또한, 메모리(102)는, 선택적으로, 전술되지 않은 추가 모듈들 및 데이터 구조들을 저장한다.
일부 실시예들에서, 디바이스(100)는 디바이스 상의 사전정의된 세트의 기능들의 동작이 터치 스크린 및/또는 터치 패드(디바이스(100)에 포함되든, 또는 입력 디바이스와 같은 별도의 디바이스 상에 포함되든)를 통해 전용으로 수행되는 디바이스이다. 터치 스크린 및/또는 터치 패드를 디바이스(100)의 동작을 위한 주 입력 제어 디바이스로서 사용함으로써, 디바이스(100) 상의 (푸시 버튼들, 다이얼들 등과 같은) 물리적 입력 제어 디바이스들의 수가 선택적으로 감소된다.
터치 스크린 및/또는 터치 패드를 통해 전용으로 수행되는 사전정의된 세트의 기능들은 선택적으로 사용자 인터페이스들 사이에서의 내비게이션을 포함한다. 일부 실시예들에서, 터치 패드는, 사용자에 의해 터치될 때, 디바이스(100)를 디바이스(100) 상에 디스플레이되는 임의의 사용자 인터페이스로부터 메인, 홈 또는 루트 메뉴로 내비게이트한다. 일부 실시예들에서, 터치 패드를 사용하여 "메뉴 버튼"이 구현된다. 일부 다른 실시예들에서, 메뉴 버튼은 터치 패드 대신에 물리적 푸시 버튼 또는 다른 물리적 입력 제어 디바이스이다.
도 1b는, 일부 실시예들에 따른, 이벤트 처리를 위한 예시적인 컴포넌트들을 도시한 블록 다이어그램이다. 일부 실시예들에서, 메모리(도 1a의 102 또는 도 3의 370)는 (예컨대, 운영 체제(126)에서의) 이벤트 분류기(170) 및 각자의 애플리케이션(136-1)(예컨대, 전술된 애플리케이션들(137 내지 151, 155, 380 내지 390) 중 임의의 것)을 포함한다.
이벤트 분류기(170)는 이벤트 정보를 수신하며, 그 이벤트 정보를 전달할 애플리케이션(136-1), 및 애플리케이션(136-1)의 애플리케이션 뷰(191)를 결정한다. 이벤트 분류기(170)는 이벤트 모니터(171) 및 이벤트 디스패처 모듈(event dispatcher module)(174)을 포함한다. 일부 실시예들에서, 애플리케이션(136-1)은 애플리케이션이 활성 상태이거나 실행 중일 때 터치 감응형 디스플레이(112) 상에 디스플레이되는 현재 애플리케이션 뷰(들)를 나타내는 애플리케이션 내부 상태(192)를 포함한다. 일부 실시예들에서, 디바이스/글로벌 내부 상태(157)는 이벤트 분류기(170)에 의해 어느 애플리케이션(들)이 현재 활성 상태인지 판정하는 데 이용되며, 애플리케이션 내부 상태(192)는 이벤트 분류기(170)에 의해 이벤트 정보를 전달할 애플리케이션 뷰들(191)을 결정하는 데 이용된다.
일부 실시예들에서, 애플리케이션 내부 상태(192)는 애플리케이션(136-1)이 실행을 재개할 때 이용될 재개 정보, 애플리케이션(136-1)에 의해 디스플레이되고 있거나 디스플레이될 준비가 된 정보를 나타내는 사용자 인터페이스 상태 정보, 사용자가 애플리케이션(136-1)의 이전 상태 또는 뷰로 되돌아갈 수 있게 하기 위한 상태 큐(queue), 및 사용자에 의해 취해진 이전 동작들의 재실행(redo)/실행취소(undo) 큐 중 하나 이상과 같은 추가 정보를 포함한다.
이벤트 모니터(171)는 주변기기 인터페이스(118)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트(예컨대, 다중터치 제스처의 일부로서 터치 감응형 디스플레이(112) 상에서의 사용자 터치)에 관한 정보를 포함한다. 주변기기 인터페이스(118)는 I/O 서브시스템(106) 또는 센서, 예컨대 근접 센서(166), 가속도계(들)(168), 및/또는 (오디오 회로(110)를 통한) 마이크로폰(113)으로부터 수신하는 정보를 송신한다. 주변기기 인터페이스(118)가 I/O 서브시스템(106)으로부터 수신하는 정보는 터치 감응형 디스플레이(112) 또는 터치 감응형 표면으로부터의 정보를 포함한다.
일부 실시예들에서, 이벤트 모니터(171)는 요청들을 사전결정된 간격으로 주변기기 인터페이스(118)로 전송한다. 이에 응답하여, 주변기기 인터페이스(118)는 이벤트 정보를 송신한다. 다른 실시예들에서, 주변기기 인터페이스(118)는 중요한 이벤트(예컨대, 사전결정된 잡음 임계치를 초과하는 그리고/또는 사전결정된 지속기간 초과 동안의 입력을 수신하는 것)가 있을 때에만 이벤트 정보를 송신한다.
일부 실시예들에서, 이벤트 분류기(170)는 또한 히트 뷰(hit view) 판정 모듈(172) 및/또는 활성 이벤트 인식기 결정 모듈(173)을 포함한다.
히트 뷰 판정 모듈(172)은 터치 감응형 디스플레이(112)가 하나 초과의 뷰를 디스플레이할 때 하나 이상의 뷰들 내에서 서브이벤트가 발생한 곳을 판정하기 위한 소프트웨어 절차들을 제공한다. 뷰들은 사용자가 디스플레이 상에서 볼 수 있는 제어부들 및 다른 요소들로 이루어져 있다.
애플리케이션과 연관된 사용자 인터페이스의 다른 양태는 본 명세서에서 때때로 애플리케이션 뷰들 또는 사용자 인터페이스 윈도우(user interface window)들로 지칭되는 소정 세트의 뷰들이며, 여기서 정보가 디스플레이되고 터치 기반 제스처들이 발생한다. 터치가 검출되는 (각자의 애플리케이션의) 애플리케이션 뷰들은 선택적으로 애플리케이션의 프로그램 또는 뷰 계층구조 내의 프로그램 레벨들에 대응한다. 예를 들면, 터치가 검출되는 최하위 레벨의 뷰는 선택적으로 히트 뷰로 지칭되고, 적절한 입력들로서 인식되는 소정 세트의 이벤트들은 터치 기반 제스처를 시작하는 초기 터치의 히트 뷰에 적어도 부분적으로 기초하여 선택적으로 판정된다.
히트 뷰 판정 모듈(172)은 터치 기반 제스처의 서브이벤트들에 관련된 정보를 수신한다. 애플리케이션이 계층구조에서 편성된 다수의 뷰들을 가질 때, 히트 뷰 판정 모듈(172)은 히트 뷰를 서브이벤트를 처리해야 하는 계층구조에서의 최하위 뷰로서 식별한다. 대부분의 상황들에서, 히트 뷰는 개시되는 서브이벤트(즉, 이벤트 또는 잠재적 이벤트를 형성하는 서브이벤트들의 시퀀스에서의 제1 서브이벤트)가 발생하는 최하위 레벨 뷰이다. 일단 히트 뷰가 히트 뷰 판정 모듈에 의해 식별되면, 히트 뷰는, 전형적으로, 그것이 히트 뷰로서 식별되게 한 것과 동일한 터치 또는 입력 소스에 관련된 모든 서브이벤트들을 수신한다.
활성 이벤트 인식기 결정 모듈(173)은 뷰 계층구조 내에서 어느 뷰 또는 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는지 결정한다. 일부 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 히트 뷰만이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 서브이벤트의 물리적 위치를 포함하는 모든 뷰들이 적극 참여 뷰(actively involved view)들인 것으로 결정하고, 그에 따라 모든 적극 참여 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 터치 서브이벤트들이 전적으로 하나의 특정 뷰와 연관된 영역으로 한정되었더라도, 계층구조 내의 상위 뷰들은 여전히 적극 참여 뷰들로서 유지될 것이다.
이벤트 디스패처 모듈(174)은 이벤트 정보를 이벤트 인식기(예컨대, 이벤트 인식기(180))에 송달한다. 활성 이벤트 인식기 결정 모듈(173)을 포함하는 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 정보를 활성 이벤트 인식기 결정 모듈(173)에 의해 결정된 이벤트 인식기에 전달한다. 일부 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 큐 내에 이벤트 정보를 저장하는데, 이벤트 정보는 각자의 이벤트 수신기 모듈(182)에 의해 검색된다.
일부 실시예들에서, 운영 체제(126)는 이벤트 분류기(170)를 포함한다. 대안으로, 애플리케이션(136-1)은 이벤트 분류기(170)를 포함한다. 또 다른 실시예들에서, 이벤트 분류기(170)는 독립형 모듈, 또는 접촉/모션 모듈(130)과 같이 메모리(102)에 저장되는 다른 모듈의 일부이다.
일부 실시예들에서, 애플리케이션(136-1)은 복수의 이벤트 핸들러들(190) 및 하나 이상의 애플리케이션 뷰들(191)을 포함하며, 이들 각각은 애플리케이션의 사용자 인터페이스의 각자의 뷰 내에서 발생하는 터치 이벤트들을 처리하기 위한 명령어들을 포함한다. 애플리케이션(136-1)의 각각의 애플리케이션 뷰(191)는 하나 이상의 이벤트 인식기들(180)을 포함한다. 전형적으로, 각자의 애플리케이션 뷰(191)는 복수의 이벤트 인식기들(180)을 포함한다. 다른 실시예들에서, 이벤트 인식기들(180) 중 하나 이상은 사용자 인터페이스 키트(도시되지 않음) 또는 애플리케이션(136-1)이 방법들 및 다른 속성들을 이어받게 되는 상위 레벨 객체와 같은 별개의 모듈의 일부이다. 일부 실시예들에서, 각자의 이벤트 핸들러(190)는 데이터 업데이터(176), 객체 업데이터(177), GUI 업데이터(178), 및/또는 이벤트 분류기(170)로부터 수신된 이벤트 데이터(179) 중 하나 이상을 포함한다. 이벤트 핸들러(190)는 선택적으로 데이터 업데이터(176), 객체 업데이터(177) 또는 GUI 업데이터(178)를 이용 또는 호출하여 애플리케이션 내부 상태(192)를 업데이트한다. 대안으로, 애플리케이션 뷰들(191) 중 하나 이상은 하나 이상의 각자의 이벤트 핸들러(190)를 포함한다. 또한, 일부 실시예들에서, 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178) 중 하나 이상은 각자의 애플리케이션 뷰(191)에 포함된다.
각자의 이벤트 인식기(180)는 이벤트 분류기(170)로부터 이벤트 정보(예컨대, 이벤트 데이터(179))를 수신하고 이벤트 정보로부터 이벤트를 식별한다. 이벤트 인식기(180)는 이벤트 수신기(182) 및 이벤트 비교기(184)를 포함한다. 일부 실시예들에서, 이벤트 인식기(180)는 또한 적어도 메타데이터(183) 및 이벤트 전달 명령어들(188)(선택적으로 서브이벤트 전달 명령어들을 포함함)의 서브세트를 포함한다.
이벤트 수신기(182)는 이벤트 분류기(170)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트, 예를 들어 터치 또는 터치 이동에 관한 정보를 포함한다. 서브이벤트에 따라, 이벤트 정보는 또한 서브이벤트의 위치와 같은 추가 정보를 포함한다. 서브이벤트가 터치의 모션과 관련되는 경우, 이벤트 정보는 또한 선택적으로 서브이벤트의 속력 및 방향을 포함한다. 일부 실시예들에서, 이벤트들은 하나의 배향으로부터 다른 배향으로(예컨대, 세로 배향으로부터 가로 배향으로, 또는 그 반대로)의 디바이스의 회전을 포함하며, 이벤트 정보는 디바이스의 현재 배향(디바이스 자세로도 지칭됨)에 관한 대응하는 정보를 포함한다.
이벤트 비교기(184)는 이벤트 정보를 사전정의된 이벤트 또는 서브이벤트 정의들과 비교하고, 그 비교에 기초하여, 이벤트 또는 서브이벤트를 결정하거나, 이벤트 또는 서브이벤트의 상태를 결정 또는 업데이트한다. 일부 실시예들에서, 이벤트 비교기(184)는 이벤트 정의들(186)을 포함한다. 이벤트 정의들(186)은 이벤트들(예컨대, 사전정의된 시퀀스들의 서브이벤트들), 예를 들어 이벤트 1(187-1), 이벤트 2(187-2) 등의 정의들을 포함한다. 일부 실시예들에서, 이벤트(187) 내의 서브이벤트들은, 예를 들어 터치 시작, 터치 종료, 터치 이동, 터치 취소, 및 다중 터치를 포함한다. 일례에서, 이벤트 1(187-1)에 대한 정의는 디스플레이된 객체 상에의 더블 탭핑(double tap)이다. 더블 탭핑은, 예를 들어 사전결정된 페이즈(phase) 동안의 디스플레이된 객체 상에의 제1 터치(터치 시작), 사전결정된 페이즈 동안의 제1 리프트오프(터치 종료), 사전결정된 페이즈 동안의 디스플레이된 객체 상에의 제2 터치(터치 시작), 및 사전결정된 페이즈 동안의 제2 리프트오프(터치 종료)를 포함한다. 다른 예에서, 이벤트 2(187-2)에 대한 정의는 디스플레이된 객체 상의 드래깅이다. 드래깅은, 예를 들어, 사전 결정된 페이즈 동안의 디스플레이된 객체 상의 터치(또는 접촉), 터치 감응형 디스플레이(112)를 가로지르는 터치의 이동, 및 터치의 리프트오프(터치 종료)를 포함한다. 일부 실시예들에서, 이벤트는 또한 하나 이상의 연관된 이벤트 핸들러들(190)에 대한 정보를 포함한다.
일부 실시예들에서, 이벤트 정의(187)는 각자의 사용자 인터페이스 객체에 대한 이벤트의 정의를 포함한다. 일부 실시예들에서, 이벤트 비교기(184)는 어느 사용자 인터페이스 객체가 서브이벤트와 연관되어 있는지 판정하도록 히트 테스트(hit test)를 수행한다. 예를 들어, 3개의 사용자 인터페이스 객체들이 터치 감응형 디스플레이(112) 상에 디스플레이된 애플리케이션 뷰에서, 터치가 터치 감응형 디스플레이(112) 상에서 검출되는 경우, 이벤트 비교기(184)는 3개의 사용자 인터페이스 객체들 중 어느 것이 터치(서브이벤트)와 연관되어 있는지를 판정하도록 히트 테스트를 수행한다. 각각의 디스플레이된 객체가 각자의 이벤트 핸들러(190)와 연관되는 경우, 이벤트 비교기는 히트 테스트의 결과를 이용하여, 어느 이벤트 핸들러(190)가 활성화되어야 하는지 판정한다. 예를 들어, 이벤트 비교기(184)는 히트 테스트를 트리거하는 객체 및 서브이벤트와 연관되는 이벤트 핸들러를 선택한다.
일부 실시예들에서, 각자의 이벤트(187)에 대한 정의는 또한 소정 시퀀스의 서브이벤트들이 이벤트 인식기의 이벤트 타입에 대응하는지 아니면 대응하지 않는지 판정된 후까지 이벤트 정보의 전달을 지연시키는 지연된 동작들을 포함한다.
각자의 이벤트 인식기(180)가, 일련의 서브이벤트들이 이벤트 정의들(186)에서의 이벤트들 중 어느 것과도 매칭되지 않는 것으로 판정하는 경우, 각자의 이벤트 인식기(180)는 이벤트 불가능 상태, 이벤트 실패 상태, 또는 이벤트 종료 상태에 진입하는데, 그 후 각자의 이벤트 인식기는 터치 기반 제스처의 후속하는 서브이벤트들을 무시한다. 이러한 상황에서, 히트 뷰에 대해 활성 상태로 남아있는 다른 이벤트 인식기들은, 존재하는 경우, 진행 중인 터치 기반 제스처의 서브이벤트들을 계속해서 추적 및 프로세싱한다.
일부 실시예들에서, 각자의 이벤트 인식기(180)는 이벤트 전달 시스템이 적극 참여 이벤트 인식기들로의 서브이벤트 전달을 어떻게 수행해야 하는지 나타내는 구성가능한 속성들, 플래그(flag)들, 및/또는 리스트들을 갖는 메타데이터(183)를 포함한다. 일부 실시예들에서, 메타데이터(183)는 이벤트 인식기들이 어떻게 서로 상호작용하는지 또는 상호작용할 수 있게 되는지 나타내는 구성가능한 속성들, 플래그들, 및/또는 리스트들을 포함한다. 일부 실시예들에서, 메타데이터(183)는 서브이벤트들이 뷰 또는 프로그램 계층구조에서의 변화하는 레벨들에 전달되는지 여부를 나타내는 구성가능한 속성들, 플래그들, 및/또는 리스트들을 포함한다.
일부 실시예들에서, 각자의 이벤트 인식기(180)는 이벤트의 하나 이상의 특정 서브이벤트들이 인식될 때 이벤트와 연관된 이벤트 핸들러(190)를 활성화시킨다. 일부 실시예들에서, 각자의 이벤트 인식기(180)는 이벤트와 연관된 이벤트 정보를 이벤트 핸들러(190)에 전달한다. 이벤트 핸들러(190)를 활성화시키는 것은 각자의 히트 뷰에 서브이벤트들을 전송(및 지연 전송)하는 것과는 별개이다. 일부 실시예들에서, 이벤트 인식기(180)는 인식된 이벤트와 연관된 플래그를 보내고, 그 플래그와 연관된 이벤트 핸들러(190)는 그 플래그를 캐치하고 사전정의된 프로세스를 수행한다.
일부 실시예들에서, 이벤트 전달 명령어들(188)은 이벤트 핸들러를 활성화시키지 않고서 서브이벤트에 관한 이벤트 정보를 전달하는 서브이벤트 전달 명령어들을 포함한다. 대신에, 서브이벤트 전달 명령어들은 일련의 서브이벤트들과 연관된 이벤트 핸들러들에 또는 적극 참여 뷰들에 이벤트 정보를 전달한다. 일련의 서브이벤트들 또는 적극 참여 뷰들과 연관된 이벤트 핸들러들은 이벤트 정보를 수신하고 사전결정된 프로세스를 수행한다.
일부 실시예들에서, 데이터 업데이터(176)는 애플리케이션(136-1)에서 이용되는 데이터를 생성 및 업데이트한다. 예를 들어, 데이터 업데이터(176)는 연락처 모듈(137)에서 이용되는 전화번호를 업데이트하거나, 또는 비디오 플레이어 모듈(145)에서 이용되는 비디오 파일을 저장한다. 일부 실시예들에서, 객체 업데이터(177)는 애플리케이션(136-1)에서 이용되는 객체들을 생성 및 업데이트한다. 예를 들어, 객체 업데이터(176)는 새로운 사용자 인터페이스 객체를 생성하거나, 또는 사용자 인터페이스 객체의 위치를 업데이트한다. GUI 업데이터(178)는 GUI를 업데이트한다. 예를 들어, GUI 업데이터(178)는 디스플레이 정보를 준비하고, 이것을 터치 감응형 디스플레이 상에서의 디스플레이를 위해 그래픽 모듈(132)로 전송한다.
일부 실시예들에서, 이벤트 핸들러(들)(190)는 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178)를 포함하거나 이들에 액세스한다. 일부 실시예들에서, 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178)는 각자의 애플리케이션(136-1) 또는 애플리케이션 뷰(191)의 단일 모듈 내에 포함된다. 다른 실시예들에서, 이들은 2개 이상의 소프트웨어 모듈들에 포함된다.
터치 감응형 디스플레이들 및/또는 터치 패드들 상에의 사용자 터치들의 이벤트 처리에 관한 전술된 논의는 입력 디바이스들을 갖는 다기능 디바이스들(100)을 동작시키기 위한 다른 형태들의 사용자 입력들(이들 모두가 터치 스크린들 상에서 개시되는 것은 아님)에도 또한 적용된다는 것이 이해되어야 한다. 예를 들어, 단일 또는 다수의 키보드 누르기 또는 길게 누르기(hold)와 선택적으로 조화되는 마우스 이동 및 마우스 버튼 누르기; 터치 패드들 상에서의 탭핑, 드래그, 스크롤 등과 같은 접촉 이동들; 펜 스타일러스 입력들; 디바이스의 이동; 구두 지시들; 검출된 눈 이동들; 생체 측정 입력들; 및/또는 이들의 임의의 조합이, 선택적으로, 인식될 이벤트를 정의하는 서브이벤트들에 대응하는 입력들로서 이용된다.
도 2는, 일부 실시예들에 따른, 터치 스크린(112)을 갖는 휴대용 또는 비휴대용 다기능 디바이스(100)를 예시한다. 전술된 바와 같이, 다기능 디바이스(100)는 다양한 도시된 구조물들(예컨대, 터치 스크린(112), 스피커(111), 가속도계(168), 마이크로폰(113) 등)을 갖는 것으로 기술되지만, 이들 구조물들은 선택적으로 개별 디바이스들 상에 존재한다는 것이 이해된다. 예를 들어, 디스플레이 관련 구조물들(예컨대, 디스플레이, 스피커 등) 및/또는 기능들은 선택적으로 개별 디스플레이 디바이스 상에 존재하고, 입력 관련 구조물들(예컨대, 터치 감응형 표면, 마이크로폰, 가속도계 등) 및/또는 기능들은 선택적으로 개별 입력 디바이스 상에 존재하고, 나머지 구조물들 및/또는 기능들은 선택적으로 다기능 디바이스(100) 상에 존재한다.
터치 스크린(112)은 선택적으로 사용자 인터페이스(UI)(200) 내에 하나 이상의 그래픽을 디스플레이한다. 이러한 실시예에서뿐만 아니라 하기에 기술되는 다른 실시예들에서, 사용자는, 예를 들어 하나 이상의 손가락들(202)(도면에서 축척대로 도시되지는 않음) 또는 하나 이상의 스타일러스들(203)(도면에서 축척대로 도시되지는 않음)을 사용하여 그래픽 상에서 제스처를 행함으로써 그래픽들 중 하나 이상을 선택하는 것이 가능하게 된다. 일부 실시예들에서, 하나 이상의 그래픽들의 선택은 사용자가 하나 이상의 그래픽과의 접촉을 중단할 때 발생한다. 일부 실시예들에서, 제스처는, 선택적으로, 디바이스(100)와 접촉한 손가락의 하나 이상의 탭핑, (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 하나 이상의 스와이프, 및/또는 (우에서 좌로, 좌에서 우로, 위로 및/또는 아래로의) 롤링을 포함한다. 일부 구현예들 또는 상황들에서, 그래픽과 부주의하여 접촉되면 그 그래픽은 선택하지 않는다. 예를 들어, 선택에 대응하는 제스처가 탭핑일 때, 애플리케이션 아이콘 위를 지나가는 스와이프 제스처는, 선택적으로, 대응하는 애플리케이션을 선택하지 않는다.
디바이스(100)는 또한 선택적으로 "홈" 또는 메뉴 버튼(204)과 같은 하나 이상의 물리적 버튼들을 포함한다. 전술된 바와 같이, 메뉴 버튼(204)은 디바이스(100) 상에서 선택적으로 실행되는 소정 세트의 애플리케이션들 중의 임의의 애플리케이션(136)으로 내비게이트하는 데 선택적으로 사용된다. 대안으로, 일부 실시예들에서, 메뉴 버튼은 터치 스크린(112) 상에 디스플레이된 GUI에서 소프트 키로서 구현된다.
일 실시예에서, 디바이스(100)는 터치 스크린(112), 메뉴 버튼(204), 디바이스의 전원을 온/오프하고 디바이스를 잠그기 위한 푸시 버튼(206), 음량 조절 버튼(들)(208), 가입자 식별 모듈(SIM) 카드 슬롯(210), 헤드셋 잭(212), 및 도킹/충전 외부 포트(124)를 포함한다. 푸시 버튼(206)은, 선택적으로, 버튼을 누르고 버튼을 사전정의된 시간 구간 동안 누른 상태로 유지함으로써 디바이스에서 전원을 켜고/끄기 위해; 사전정의된 시간 구간이 경과하기 전에 버튼을 눌렀다가 버튼을 해제함으로써 디바이스를 잠그기 위해; 그리고/또는 디바이스를 잠금 해제하거나 잠금 해제 프로세스를 개시하기 위해 사용된다. 대안의 실시예에서, 디바이스(100)는 또한 마이크로폰(113)을 통해 일부 기능들의 활성화 또는 비활성화를 위한 구두 입력을 받는다. 디바이스(100)는 또한, 선택적으로, 터치 스크린(112) 상에의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서들(165) 및/또는 디바이스(100)의 사용자를 위해 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기들(167)을 포함한다.
도 3은, 일부 실시예들에 따른, 디스플레이 및 터치 감응형 표면을 갖는 예시적인 다기능 디바이스의 블록 다이어그램이다. 디바이스(300)는, 전술된 바와 같이, 디스플레이 및 터치 감응형 표면을 포함할 필요가 없지만, 일부 실시예들에서는, 선택적으로, 다른 디바이스들 상의 디스플레이 및 터치 감응형 표면과 통신한다. 추가로, 디바이스(300)가 휴대용일 필요는 없다. 일부 실시예들에서, 디바이스(300)는 랩톱 컴퓨터, 데스크톱 컴퓨터, 태블릿 컴퓨터, 멀티미디어 플레이어 디바이스(예컨대, 텔레비전 또는 셋톱박스), 내비게이션 디바이스, 교육용 디바이스(예컨대, 어린이 학습용 완구), 게이밍 시스템, 또는 제어 디바이스(예컨대, 가정용 또는 산업용 제어기)이다. 디바이스(300)는 전형적으로 하나 이상의 프로세싱 유닛(CPU)들(310), 하나 이상의 네트워크 또는 다른 통신 인터페이스들(360), 메모리(370), 및 이들 컴포넌트들을 상호접속시키기 위한 하나 이상의 통신 버스들(320)을 포함한다. 통신 버스들(320)은, 선택적으로, 시스템 컴포넌트들을 상호접속시키고 이들 사이의 통신을 제어하는 회로(때때로 칩셋으로 지칭됨)를 포함한다. 디바이스(300)는 전형적으로 터치 스크린 디스플레이인 디스플레이(340)를 포함하는 입력/출력(I/O) 인터페이스(330)를 포함한다. I/O 인터페이스(330)는 또한, 선택적으로, 키보드 및/또는 마우스(또는 다른 포인팅 디바이스)(350) 및 터치 패드(355), 디바이스(300) 상에 촉각적 출력들을 생성하기 위한 촉각적 출력 생성기(357)(예컨대, 도 1a를 참조하여 전술된 촉각적 출력 생성기(들)(167)와 유사함), 및 센서들(359)(예컨대, 도 1a를 참조하여 전술된 접촉 세기 센서(들)(165)와 유사한 광, 가속도, 근접, 터치 감응형, 및/또는 접촉 세기 센서들)을 포함한다. 메모리(370)는 DRAM, SRAM, DDR RAM 또는 다른 랜덤 액세스 솔리드 스테이트 메모리 디바이스들과 같은 고속 랜덤 액세스 메모리를 포함하며; 선택적으로, 하나 이상의 자기 디스크 저장 디바이스들, 광 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 다른 비휘발성 솔리드 스테이트 저장 디바이스들과 같은 비휘발성 메모리를 포함한다. 메모리(370)는, 선택적으로, CPU(들)(310)로부터 원격으로 위치된 하나 이상의 저장 디바이스들을 포함한다. 일부 실시예들에서, 메모리(370)는 휴대용 또는 비휴대용 다기능 디바이스(100)(도 1a)의 메모리(102)에 저장된 프로그램들, 모듈들, 및 데이터 구조들과 유사한 프로그램들, 모듈들, 및 데이터 구조들 또는 이들의 서브세트를 저장한다. 또한, 메모리(370)는, 선택적으로, 휴대용 또는 비휴대용 다기능 디바이스(100)의 메모리(102) 내에 존재하지 않는 추가 프로그램들, 모듈들 및 데이터 구조들을 저장한다. 예를 들어, 디바이스(300)의 메모리(370)는 드로잉 모듈(380), 프레젠테이션 모듈(382), 워드 프로세싱 모듈(384), 웹사이트 제작 모듈(386), 디스크 저작 모듈(388), 및/또는 스프레드시트 모듈(390)을 선택적으로 저장하고, 반면에 휴대용 또는 비휴대용 다기능 디바이스(100)(도 1a)의 메모리(102)는 이들 모듈들을 선택적으로 저장하지는 않는다.
도 3에서의 상기의 식별된 요소들 각각은, 선택적으로, 전술된 메모리 디바이스들 중 하나 이상에 저장된다. 상기의 식별된 모듈들 각각은 전술된 기능을 수행하기 위한 소정 세트의 명령어들에 대응한다. 상기의 식별된 모듈들 또는 프로그램들(예컨대, 소정 세트들의 명령어들)은 별개의 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요는 없으며, 따라서 다양한 실시예들에서 다양한 서브세트들의 이들 모듈들이 선택적으로 조합되거나 다른 방식으로 재배열된다. 일부 실시예들에서, 메모리(370)는 선택적으로 소정 서브세트의 전술된 모듈들 및 데이터 구조들을 저장한다. 또한, 메모리(370)는, 선택적으로, 전술되지 않은 추가 모듈들 및 데이터 구조들을 저장한다.
도 4는 디스플레이(450)(예컨대, 터치 스크린 디스플레이(112))와 별개인 터치 감응형 표면(451)(예컨대, 도 3의 태블릿 또는 터치 패드(355))을 갖는 디바이스(예컨대, 도 3의 디바이스(300)) 상의 예시적인 사용자 인터페이스를 도시한다. 디바이스(300)는 또한, 선택적으로, 터치 감응형 표면(451) 상에의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서들(예컨대, 센서들(357) 중 하나 이상) 및/또는 디바이스(300)의 사용자에 대한 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기들(359)을 포함한다.
후속하는 예들 중 일부가 (터치 감응형 표면과 디스플레이가 조합된) 터치 스크린 디스플레이(112) 상의 입력들을 참조하여 주어질 것이지만, 일부 실시예들에서, 디바이스는 도 4에 도시된 바와 같이 디스플레이와는 별개인 터치 감응형 표면 상의 입력들을 검출한다. 일부 실시예들에서, 터치 감응형 표면(예컨대, 도 4에서의 451)은 디스플레이(예컨대, 450) 상의 주축(예컨대, 도 4에서의 453)에 대응하는 주축(예컨대, 도 4에서의 452)을 갖는다. 이들 실시예들에 따르면, 디바이스는 디스플레이 상의 각자의 위치들에 대응하는 위치들에서 터치 감응형 표면(451)과의 접촉들(예컨대, 도 4에서의 460 및 462)을 검출한다(예컨대, 도 4에서, 460은 468에 대응하고, 462는 470에 대응함). 이러한 방식으로, 터치 감응형 표면(예컨대, 도 4에서의 451) 상에서 디바이스에 의해 검출된 사용자 입력들(예컨대, 접촉들(460, 462) 및 그 이동들)은 터치 감응형 표면이 디스플레이와 별개인 경우 디바이스에 의해 다기능 디바이스의 디스플레이(예컨대, 도 4에서의 450) 상의 사용자 인터페이스를 조작하는 데 사용된다. 유사한 방법들이, 선택적으로, 본 명세서에 기술된 다른 사용자 인터페이스들에 이용된다는 것이 이해되어야 한다.
추가로, 하기의 예들이 손가락 입력들(예컨대, 손가락 접촉들, 손가락 탭핑 제스처들, 손가락 스와이프 제스처들)을 주로 참조하여 주어지는 반면, 일부 실시예들에서, 손가락 입력들 중 하나 이상은 다른 입력 디바이스로부터의 입력(예컨대, 마우스 기반 입력 또는 스타일러스 입력)으로 대체된다는 것이 이해되어야 한다. 예를 들면, 스와이프 제스처가, 선택적으로, (예컨대, 접촉 대신의) 마우스 클릭 및 뒤이은 (예컨대, 접촉의 이동 대신의) 스와이프의 경로를 따른 커서의 이동으로 대체된다. 다른 예로서, (예컨대, 접촉의 검출 및 뒤이은 접촉을 검출하는 것을 중단하는 것 대신) 커서가 탭핑 제스처의 위치 위에 위치되는 동안에 탭핑 제스처가 선택적으로 마우스 클릭으로 대체된다. 유사하게, 다수의 사용자 입력들이 동시에 검출되는 경우, 다수의 컴퓨터 마우스가 선택적으로 동시에 사용되거나, 또는 마우스와 손가락 접촉들이 선택적으로 동시에 사용된다는 것이 이해되어야 한다.
본 명세서에 사용되는 바와 같이, "포커스 선택자"라는 용어는 사용자와 상호작용하는 중인 사용자 인터페이스의 현재 부분을 나타내는 입력 요소를 지칭한다. 커서 또는 다른 위치 마커를 포함하는 일부 구현예들에서, 커서는, 커서가 특정 사용자 인터페이스 요소(예컨대, 버튼, 윈도우, 슬라이더 또는 다른 사용자 인터페이스 요소) 위에 있는 동안에 입력(예컨대, 누르기 입력)이 터치 감응형 표면(예컨대, 도 3에서의 터치 패드(355) 또는 도 4에서의 터치 감응형 표면(451)) 상에서 검출될 때, 검출된 입력에 따라 특정 사용자 인터페이스 요소가 조정되도록 하는 "포커스 선택자"로서의 역할을 한다. 터치 스크린 디스플레이 상의 사용자 인터페이스 요소들과의 직접적인 상호작용을 가능하게 하는 터치 스크린 디스플레이(예컨대, 도 1a에서의 터치 감응형 디스플레이 시스템(112))를 포함하는 일부 구현예들에서, 입력(예컨대, 접촉에 의한 누르기 입력)이 특정 사용자 인터페이스 요소(예컨대, 버튼, 윈도우, 슬라이더 또는 다른 사용자 인터페이스 요소)의 위치에 있는 터치 스크린 디스플레이 상에서 검출될 때, 검출된 입력에 따라 특정 사용자 인터페이스 요소가 조정되도록, 터치 스크린 상의 검출된 접촉은 "포커스 선택자"로서의 역할을 한다. 일부 구현예들에서, (예컨대, 탭 키(tab key) 또는 화살표 키들을 사용하여 포커스를 하나의 버튼으로부터 다른 버튼으로 이동시키는 것에 의해) 터치 스크린 디스플레이 상에서의 대응하는 커서의 이동 또는 접촉의 이동 없이 포커스가 사용자 인터페이스의 하나의 영역으로부터 사용자 인터페이스의 다른 영역으로 이동되며; 이들 구현예들에서, 포커스 선택자는 사용자 인터페이스의 상이한 영역들 사이에서의 포커스의 이동에 따라 움직인다. 포커스 선택자가 가지는 특정의 형태와 무관하게, 포커스 선택자는 대체로 (예컨대, 사용자가 상호작용하고자 하는 사용자 인터페이스의 요소를 디바이스에 나타냄으로써) 사용자 인터페이스와의 사용자의 의도된 상호작용을 전달하기 위해 사용자에 의해 제어되는 사용자 인터페이스 요소(또는 터치 스크린 디스플레이 상에의 접촉)이다. 예를 들어, 터치 감응형 표면(예컨대, 터치 패드 또는 터치 스크린) 상에서 누르기 입력이 검출되는 동안 각자의 버튼 위의 포커스 선택자(예컨대, 커서, 접촉 또는 선택 상자)의 위치는 (디바이스의 디스플레이 상에 보여지는 다른 사용자 인터페이스 요소들과 달리) 사용자가 각자의 버튼을 활성화시키고자 의도하는 중임을 나타낼 것이다.
본 명세서에 기술된 일부 실시예들에서, 하나 이상의 동작들은, 각자의 누르기 입력을 포함하는 제스처를 검출하는 것에 응답하여 또는 각자의 접촉(또는 복수의 접촉들)으로 수행되는 각자의 누르기 입력을 검출하는 것에 응답하여 수행되며, 여기서 각자의 누르기 입력은 누르기 입력 세기 임계치 초과의 접촉(또는 복수의 접촉들)의 세기의 증가를 검출하는 것에 적어도 부분적으로 기초하여 검출된다. 일부 실시예들에서, 각자의 동작은, 누르기 입력 세기 임계치 초과의 각자의 접촉의 세기의 증가(예컨대, 각자의 누르기 입력의 "다운 스트로크(down stroke)")를 검출하는 것에 응답하여 수행된다. 일부 실시예들에서, 누르기 입력은 누르기 입력 세기 임계치 초과의 각자의 접촉의 세기의 증가 및 누르기 입력 세기 임계치 미만의 접촉의 세기의 후속하는 감소를 포함하며, 각자의 동작은 누르기 입력 임계치 미만의 각자의 접촉의 세기의 후속하는 감소(예컨대, 각자의 누르기 입력의 "업 스트로크(up stroke)")를 검출하는 것에 응답하여 수행된다.
일부 실시예들에서, 디바이스는 때때로 "지터(jitter)"라고 불리는 돌발적인 입력들을 회피하기 위해 세기 히스테리시스를 이용하며, 여기서 디바이스는 누르기 입력 세기 임계치에 대한 사전정의된 관계를 갖는 히스테리시스 세기 임계치(예컨대, 히스테리시스 세기 임계치는 누르기 입력 세기 임계치보다 더 낮은 X 세기 단위이거나, 히스테리시스 세기 임계치는 누르기 입력 세기 임계치의 75%, 90% 또는 어떤 적절한 비율임)를 정의하거나 선택한다. 이와 같이, 일부 실시예들에서, 누르기 입력은 누르기 입력 세기 임계치 초과의 각자의 접촉의 세기의 증가 및 누르기 입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만의 접촉의 세기의 후속하는 감소를 포함하며, 각자의 동작은 히스테리시스 세기 임계치 미만의 각자의 접촉의 세기의 후속하는 감소(예컨대, 각자의 누르기 입력의 "업 스트로크")를 검출하는 것에 응답하여 수행된다. 이와 유사하게, 일부 실시예들에서, 누르기 입력은 히스테리시스 세기 임계치 이하의 세기로부터 누르기 입력 세기 임계치 이상의 세기로의 접촉의 세기의 증가 그리고, 선택적으로, 히스테리시스 세기 이하의 세기로의 접촉의 세기의 후속하는 감소를 디바이스가 검출할 때에만 검출되며, 각자의 동작은 누르기 입력을 검출(예컨대, 상황에 따라, 접촉의 세기의 증가 또는 접촉의 세기의 감소)하는 것에 응답하여 수행된다.
설명의 편의상, 누르기 입력 세기 임계치와 연관된 누르기 입력에 응답하여 또는 누르기 입력을 포함하는 제스처에 응답하여 수행되는 동작들은, 선택적으로, 누르기 입력 세기 임계치 초과의 접촉의 세기의 증가, 히스테리시스 세기 임계치 미만의 세기로부터 누르기 입력 세기 임계치 초과의 세기로의 접촉의 세기의 증가, 누르기 입력 세기 임계치 미만의 접촉의 세기의 감소, 및/또는 누르기 입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만의 접촉의 세기의 감소 중 어느 하나를 검출한 것에 응답하여 트리거된다. 또한, 동작이 누르기 입력 세기 임계치 미만의 접촉의 세기의 감소를 검출하는 것에 응답하여 수행되는 것으로서 기술되어 있는 예들에서, 동작은, 선택적으로, 누르기 입력 세기 임계치에 대응하고 그보다 더 낮은 히스테리시스 세기 임계치 미만의 접촉의 세기의 감소를 검출한 것에 응답하여 수행된다.
도 5는 본 발명의 일부 실시예들에 따른 디바이스(500)에 대한 예시적인 아키텍처의 블록 다이어그램을 도시한다. 도 5의 실시예에서, 미디어 콘텐츠는, 선택적으로 유선 또는 무선 접속인 네트워크 인터페이스(502)를 통해 디바이스(500)에 의해 선택적으로 수신된다. 하나 이상의 프로세서들(504)은, 선택적으로, 본 명세서에 기술되는 방법들 및/또는 프로세스들 중 하나 이상을 수행하도록 하는 명령어들을 선택적으로 포함하는 메모리(506) 또는 저장소에 저장된 임의의 개수의 프로그램들을 실행시킨다.
일부 실시예들에서, 디스플레이 제어기(508)는 본 발명의 다양한 사용자 인터페이스들이 디스플레이(500) 상에 디스플레이되게 한다. 또한, 디바이스(500)에의 입력은, 선택적으로 무선 또는 유선 접속인 원격 인터페이스(512)를 통해 리모콘(510)에 의해 선택적으로 제공된다. 도 5의 실시예는 본 발명의 디바이스의 특징들을 제한하는 것으로 의도되지 않으며, 본 명세서에 기술되는 다른 특징들을 가능하게 하는 다른 컴포넌트들이 마찬가지로 도 5의 아키텍처에 선택적으로 포함된다는 것이 이해된다. 일부 실시예들에서, 디바이스(500)는 선택적으로 도 1a 및 도 2에서의 다기능 디바이스(100) 및 도 3에서의 디바이스(300) 중 하나 이상에 대응하고; 네트워크 인터페이스(502)는 선택적으로 도 1a 및 도 2에서의 RF 회로(108), 외부 포트(124) 및 주변기기 인터페이스(118), 및 도 3에서의 네트워크 통신 인터페이스(360) 중 하나 이상에 대응하고; 프로세서(504)는 선택적으로 도 1a에서의 프로세서(들)(120) 및 도 3에서의 CPU(들)(310) 중 하나 이상에 대응하고; 디스플레이 제어기(508)는 선택적으로 도 1a에서의 디스플레이 제어기(156) 및 도 3에서의 I/O 인터페이스(330) 중 하나 이상에 대응하고; 메모리(506)는 선택적으로 도 1a에서의 메모리(102) 및 도 3에서의 메모리(370) 중 하나 이상에 대응하고; 원격 인터페이스(512)는 선택적으로 도 1a에서의 주변기기 인터페이스(118), 및 I/O 서브시스템(106)(및/또는 그의 컴포넌트들), 및 도 3에서의 I/O 인터페이스(330) 중 하나 이상에 대응하고; 리모콘(510)은 선택적으로 도 1a에서의 스피커(111), 터치 감응형 디스플레이 시스템(112), 마이크로폰(113), 광 센서(들)(164), 접촉 세기 센서(들)(165), 촉각적 출력 생성기(들)(167), 기타 입력 제어 디바이스들(116), 가속도계(들)(168), 근접 센서(166) 및 I/O 서브시스템(106), 도 3에서의 키보드/마우스(350), 터치 패드(355), 촉각적 출력 생성기(들)(357) 및 접속 세기 센서(들)(359), 및 도 4에서의 터치 감응형 표면(451) 중 하나 이상에 대응하고/하거나 이들 중 하나 이상을 포함하고; 디스플레이(514)는 선택적으로 도 1a 및 도 2에서의 터치 감응형 디스플레이 시스템(112), 도 3에서의 디스플레이(340), 및 도 4에서의 디스플레이(450) 중 하나 이상에 대응한다.
사용자 인터페이스 및 연관된 프로세스
기능 정보의 디스플레이
사용자가 터치 감응형 표면과 같은 입력 디바이스를 사용하여 전자 디바이스와 상호작용하는 환경에서, 전자 디바이스가 사용자에게 입력 디바이스로부터 액세스가능할 수 있는 기능들에 관한 정보("기능 정보")를 제공하는 것은 사용자의 경험에 유익할 수 있다. 이는 입력 디바이스 자체가 그러한 기능들에 관한 어떠한 가시적 정보도 포함하지 않는 환경 - 예를 들어, 블랭크(blank)의 균일 표면을 갖는 터치 감응형 표면 - 에서 특히 사실일 수 있다. 하기에 기술되는 실시예들은 그러한 기능 정보를 제시하는 방식들을 제공한다. 디바이스와의 상호작용들을 향상시키는 것은 동작들을 수행하기 위해 사용자가 필요로 하는 시간의 양을 감소시키고, 이에 따라 디바이스의 전력 사용을 감소시키고 배터리 작동형 디바이스들에 대한 배터리 수명을 증가시킨다.
사람들이 디바이스들을 사용하는 것이 이해된다. 사람이 디바이스를 사용할 때, 그 사람은 선택적으로 디바이스의 사용자로 지칭된다. 따라서, 본 명세서에서, "사람" 또는 "사람들"이라는 언급들은 선택적으로 "사용자" 또는 "사용자들"이라는 언급들과 교환가능하고, "사용자" 또는 "사용자들"이라는 언급들은 선택적으로 "사람" 또는 "사람들"이라는 언급들과 교환가능하다.
도 6a 내지 도 6g는, 본 발명의 일부 실시예들에 따른, 기능 정보가 사용자 인터페이스에서 제시되는 예시적인 방식들을 도시한다. 이들 도면들에서의 실시예들은, 도 7a 내지 도 7g를 참조하여 기술되는 프로세스들을 포함하는, 하기에 기술되는 프로세스들을 예시하는 데 사용된다.
도 6a는 예시적인 디스플레이(450) 및 터치 감응형 표면(451)을 도시한다. 디스플레이(450)(예컨대, 텔레비전 또는 다른 디스플레이 디바이스) 및 터치 감응형 표면(451)은, 선택적으로, 도 5를 참조하여 전술된 바와 같은 디바이스(500)와 같은 디바이스 - 예를 들어, 원격 제어부 및 디스플레이 디바이스와 통신하는 셋톱박스 또는 다른 사용자 인터페이스 생성 디바이스 - 와 통합되고/되거나 달리 통신한다. 디스플레이(450)는, 선택적으로, 다양한 콘텐츠를 포함하는 하나 이상의 사용자 인터페이스들을 디스플레이한다. 터치 감응형 표면(451)은 선택적으로 복수의 사전정의된 영역들(602, 604, 606, 608, 610, 612, 614, 616, 618)을 포함한다. 일부 실시들에서, 사전정의된 영역들(602, 604, 606, 608, 610, 612, 614, 616, 618) 중 하나 이상은 각자의 사전정의된 영역과 연관된 기능을 수행하도록 선택가능하다(예컨대, 영역들 중 하나 이상은 디스플레이(450) 상에 디스플레이되는 사용자 인터페이스에서 콘텐츠 아이템과 연관된 정보를 역방향으로 스킵하는 것, 순방향으로 스킵하는 것, 리와인드하는 것, 고속 포워드하는 것, 스크럽하는 것, 및 디스플레이하는 것을 포함한 기능을 수행하도록 선택가능하다). 추가의 예시적인 기능들이 하기에 기술된다. 구체적으로, 일부 실시예들에서, 사전정의된 영역들 중 하나에서의 탭핑은 사전정의된 영역과 연관된 기능을 수행하고; 일부 실시예들에서, 사전정의된 영역에서의 클릭은 사전정의된 영역과 연관된 기능을 수행하고; 일부 실시예들에서, 사전정의된 영역에서 검출된 하나 이상의 다른 입력들은 사전정의된 영역과 연관된 기능을 수행한다. 예를 들어, 일부 실시예들에서, 영역(612)에서의 클릭(예컨대, 영역(612) 상에의 접촉, 예컨대 접촉(601) 또는 상이한 접촉을 검출하는 동안에 버튼의 클릭을 검출한 것, 또는 영역(612)에서 검출된 접촉, 예컨대 접촉(601) 또는 상이한 접촉의 세기의, 사전결정된 세기 임계치 초과의 증가를 검출한 것)은 영역(612) 상에의 접촉을 검출하는 동안에 디스플레이(450) 상에 디스플레이된 콘텐츠에 대한 고속 포워드 동작을 수행한다. 터치 감응형 표면(451)의 표면은, 선택적으로, 시각적으로 균일하고, 선택적으로, 사전정의된 영역들(602, 604, 606, 608, 610, 612, 614, 616, 618)의 존재의 시각적 표시, 및/또는 그들의 연관된 기능들을 제공하지 않는다. 따라서, 그것은 디스플레이(450) 상에 그러한 정보를 디스플레이하는 데 유익할 수 있다.
일부 실시예들에서, 터치 감응형 표면(451) 상에 검출된 접촉(601)의 표시를 수신하는 것, 및 접촉이 제1 기간보다 더 오랫동안 검출되었는지 여부를 판정하는 것(예컨대, 활동하지 않는 손가락이 적어도 임계량의 시간, 예컨대 0.1초, 0.2초, 0.5초, 또는 1초 동안 리모콘의 터치 감응형 표면 상에서 검출되었는지 여부를 판정하는 것)은 기능 정보가 선택적으로 디스플레이(450) 상에서 판정되고/되거나 디스플레이되게 하는 프로세스를 개시시킨다. 일부 실시예들에서, 접촉(601)이 제1 기간보다 더 오랫동안 검출될 필요는 없지만, 오히려, 터치 감응형 표면 상에서의 탭핑은, 선택적으로, 기능 정보가 선택적으로 디스플레이(450) 상에서 판정되고/되거나 디스플레이되게 하는 프로세스를 개시시킨다. 도 6a에 도시된 바와 같이, 일부 실시예들에서, 접촉(601)이 사전정의된 영역(610)에서 검출되었지만, 터치 감응형 표면(451) 상의 어느 곳에서든 검출된 접촉이 선택적으로 기능 정보의 판정 및/또는 디스플레이를 개시시킨다는 것이 이해된다. 일부 실시예들에서, 기능 정보는, 기능 정보를 디스플레이하기 위한 입력의 검출에 응답해서가 아니라, 디스플레이(450) 상의 사용자 인터페이스의 상태에 기초하여 하나 이상의 기능들이 터치 감응형 표면으로부터 액세스가능하다는 판정에 응답하여 판정되고/되거나 디스플레이된다 - 예를 들어, 사용자 인터페이스에서의 사용자 인터페이스 요소(예컨대, 애플리케이션 또는 채널)의 선택은, 선택적으로, 선택된 사용자 인터페이스 요소에 관련된 기능 정보(예컨대, 애플리케이션 또는 채널 바로부터의 애플리케이션 또는 채널을 삭제시키기 위한 기능 정보)의 디스플레이를 초래한다). 이어지는 논의는 기능 정보가 기능 정보를 디스플레이하기 위한 입력의 검출에 응답하여 디스플레이되는 실시예들에 포커스를 두지만, 본 발명의 범주는 전술된 바와 같이 그렇게 제한되지는 않는다는 것이 이해된다.
접촉(601)이, 접촉이 제1 기간보다 더 오랫동안 검출되었을 때 충족되는 기준을 포함하는 기능 디스플레이 기준들(예컨대, 하나 이상의 기준)을 충족시킨다는 판정에 따라, 일부 실시예들에서, 기능 정보는 디스플레이(450) 상에서의 디스플레이를 위한 사용자 인터페이스에서의 디스플레이에 대해 판정되는데, 기능 정보는 사전정의된 영역들(602, 604, 606, 608, 610, 612, 614, 616, 618)과 연관된 복수의 기능들 중 제1 기능에 관한 정보를 포함한다. 이러한 판정은, 예를 들어 디스플레이되어야 하는 기능 정보에 대한 각자의 기능을 판정하는 것, 그리고 이어서, 각자의 기능에 대응하는 사전생성된 기능 정보를 선택하거나 또는 디스플레이(450) 상에 디스플레이되어야 하는 기능 정보를 생성하는 것을 수반한다(예컨대, 터치 감응형 표면(451) 상의 어느 곳에든 손가락을 두는 것은, 선택적으로, 터치 감응형 표면으로부터 액세스가능한 하나 이상의 기능들에 관한 정보를 가져온다). 일부 실시예들에서, 기능 정보는, 디스플레이(450) 상의 사용자 인터페이스에 디스플레이되고 터치 감응형 표면의 대응하는 영역들의 기능들을 나타내는 하나 이상의 아이콘들을 포함한다. 일부 실시예들에서, 제1 기능에 관한 정보는 제1 기능을 수행하기 위한 시각적 단서(예컨대, 수행될 기능에 관한 시각적 디스플레이, 리모콘으로부터의 기능을 수행하는 방법 등)를 포함한다.
(예컨대, 접촉이 제1 기간보다 더 오랫동안 검출되지 않았기 때문에 또는 접촉이 제1 기간보다 더 오랫동안 실질적인 정지 상태가 아니었기 때문에) 접촉(601)이 기능 디스플레이 기준들을 충족시키지 않는다는 판정에 따라, 전자 디바이스는, 선택적으로, 복수의 연관된 기능들 중 제1 기능에 관한 정보를 포함한 기능 정보의 판정을 무시한다(예컨대, 제1 기간에 도달하기 전에 접촉이 종료되는 경우, 터치 감응형 표면(451)의 상이한 영역들의 기능들을 나타내는 아이콘들 또는 정보가 디스플레이되지 않는다).
일부 실시예들에서, 기능 디스플레이 기준들은 제1 기간 동안 접촉이 제1 이동 임계치 미만으로 이동했을 때 충족되는 기준을 포함한다(예컨대, 기능 정보를 디스플레이하기 위해, 일부 실시예들에서, 접촉은 실질적인 정지 상태의 접촉이어야 한다).
도 6b는 접촉(601)이 기능 디스플레이 기준들을 충족시킨다는 판정에 따라 디스플레이(450) 상의 사용자 인터페이스에 디스플레이되는 예시적인 기능 정보를 도시한다. 기능 정보(620)는, 선택적으로, 터치 감응형 표면(451)으로부터 액세스가능한 기능(예컨대, 고속 포워드)에 관한 정보, 및/또는 기능에 액세스하는 방법(예컨대, 사전정의된 영역(612)에서 클릭하기)에 관한 정보를 포함한다. 일부 실시예들에서, 기능 정보는 디스플레이(450)에 의해 디스플레이되는 사용자 인터페이스에서 이동 이미지 또는 정지 이미지 위에 디스플레이되는 오버레이를 포함한다.
도 6c는 터치 감응형 표면(451)으로부터 액세스가능한 기능의 예시적인 선택을 도시한다. 전술된 바와 같이, 기능의 선택은 기능과 연관된 사전정의된 영역 상에서 검출된 입력("제2 입력")의 표시가 수신될 때 선택적으로 달성된다. 도 6c에 도시된 바와 같이, 일부 실시예들에서, 고속 포워드 기능의 선택은, 도시된 바와 같이, 사전정의된 영역(612)에서의 클릭을 검출함으로써 달성된다. 제2 입력의 표시를 수신한 것에 응답하여, 전자 디바이스는, 선택적으로, 제2 입력이 검출된 사전정의된 영역과 연관된 기능을 수행한다.
일부 실시예들에서, 제2 입력(예컨대, 클릭)을 검출하는 것은 터치 감응형 표면(451) 상에의 접촉(예컨대, 접촉(601))과 동시에 제2 입력을 검출하는 것을 포함한다(예컨대, 사전정의된 영역(612)에서의 클릭은, 선택적으로, 접촉이 터치 감응형 표면에서 리프트오프하지 않고서, 접촉(601)이 사전정의된 영역(612)으로 이동하고 클릭 입력을 제공한 것에 응답하여 검출된다). 일부 실시예들에서, 제2 입력을 검출하는 것은 터치 감응형 표면(451)의 사전정의된 영역(612) 상에의 제2 접촉(예컨대, 탭핑, 클릭, 및 활동하지 않는 터치 중 하나 이상)을 검출하는 것을 포함한다. 일부 실시예들에서, 제2 입력을 검출하는 것은 접촉의 세기의, 제1 사전결정된 세기 임계치 초과의 증가를 검출하는 것(예컨대, 기계적 클릭 또는 힘 검출)을 포함한다.
일부 실시예들에서, 상이한 세기들을 갖는 접촉들의 검출은 디바이스가 상이한 기능들을 수행하는 것을 초래한다. 일부 실시예들에서, 전자 디바이스는, 선택적으로, 제1 기능(예컨대, 고속 포워드)과 연관된 터치 감응형 표면(451)의 제1 사전정의된 영역(예컨대, 사전정의된 영역(612)) 상에서 검출된 제3 입력의 표시를 수신하는데, 여기서 제3 입력을 검출하는 것은 접촉(예컨대, 접촉(601))의 세기의, 제1 사전결정된 세기 임계치보다 더 큰 제2 사전결정된 세기 임계치 초과의 제2 증가를 검출하는 것(예컨대, 다중 레벨 클릭)을 포함한다. 제3 입력의 표시를 수신한 것에 응답하여, 전자 디바이스는, 선택적으로, 터치 감응형 표면 상의 제1 사전정의된 영역(예컨대, 사전정의된 영역(612))과 연관된 제1 기능(예컨대, 고속 포워드)의 수행을 무시하고, 터치 감응형 표면의 제1 사전정의된 영역(예컨대, 사전정의된 영역(612))과 연관된, 제1 기능과는 상이한 제2 기능을 수행한다(예컨대, 이중-레벨 클릭이 선택적으로 단일-레벨 클릭과는 상이한 기능을 수행한다).
일부 실시예들에서, 제2 기능을 수행하기 전, 전자 디바이스는 사용자 인터페이스에서의 기능 정보(예컨대, 기능 정보(620))를 제2 기능 정보(예컨대, 제2 기능에 관한 업데이트된 기능 정보)로 대체하는데, 제2 기능 정보는 터치 감응형 표면의 제1 사전정의된 영역과 연관된 제2 기능에 관한 제2 정보를 포함한다.
일부 실시예들에서, 클릭-앤드-홀드 타입(click-and-hold-type) 입력을 검출하는 것은 클릭 타입 입력과는 상이한 기능을 수행한다. 일부 실시예들에서, 제2 입력을 검출하는 것은 제1 사전결정된 세기 임계치 초과의 접촉의 세기의 증가를 검출한 후 제2 기간보다 더 오랫동안 디바이스의 터치 감응형 표면 상에의 접촉(예컨대, 접촉(601))을 검출하는 것(예컨대, 적어도 임계량의 시간, 예컨대 0.1초, 0.2초, 0.5초, 또는 1초 동안 클릭한 채로 홀드하기)을 추가로 포함한다. 제2 입력의 표시를 수신한 것에 응답하여, 전자 디바이스는, 선택적으로, 터치 감응형 표면 상의 제1 사전정의된 영역과 연관된 제1 기능의 수행을 무시하고, 터치 감응형 표면의 제1 사전정의된 영역과 연관된, 제1 기능과는 상이한 제2 기능을 수행한다(예컨대, 클릭-앤드-홀드는 클릭만 하는 것과는 상이한 기능을 개시시킨다). 상기와 유사하게, 일부 실시예들에서, 제2 기능을 수행하기 전, 전자 디바이스는 사용자 인터페이스에서의 기능 정보를 제2 기능 정보로 대체하는데, 제2 기능 정보는 터치 감응형 표면의 제1 사전정의된 영역과 연관된 제2 기능에 관한 제2 정보를 포함한다.
일부 실시예들에서, 터치 감응형 표면(451)의 사전정의된 영역들(602, 604, 606, 608, 610, 612, 614, 616, 618)로부터 액세스가능한 기능들은 디스플레이(450) 상에 디스플레이된 사용자 인터페이스의 현재 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 콘텐츠의 종류)에 기초한다. 일부 실시예들에서, 디바이스의 터치 감응형 표면 상의 복수의 사전정의된 영역들 중 제1 사전정의된 영역(예컨대, 사전정의된 영역(612))은 제1 세트의 기능들과 연관되는데, 제1 세트의 기능들은 제1 기능을 포함한다(예컨대, 터치 감응형 표면의 중간-우측 영역은, 선택적으로, 광고를 고속 포워드하여 스킵하는 것과 연관된다). 제1 입력의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은, 선택적으로, 사용자 인터페이스의 현재 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 콘텐츠의 종류)를 판정하는 것, 및 사용자 인터페이스의 현재 콘텍스트에 기초하여 제1 세트의 기능들로부터 제1 기능을 선택하는 것을 포함한다.
일부 실시예들에서, 사용자 인터페이스의 현재 콘텍스트에 기초하여 제1 세트의 기능들로부터 제1 기능을 선택하는 것은, 현재 콘텍스트가 제1 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 광고, 사용자 인터페이스에 디스플레이된 음악의 콜렉션, 사용자 인터페이스에 디스플레이된 애플리케이션, 사용자 인터페이스에 디스플레이된 사진들의 콜렉션)라는 판정에 따르면, 제1 기능이 제1 동작(예컨대, 광고를 스킵하기, 음악의 콜렉션의 소정 페이지로 내비게이트하기, 다른 애플리케이션으로 전환하기, 사진들의 콜렉션의 소정 페이지로 내비게이트하기)에 대응하는 것, 현재 콘텍스트가 제1 콘텍스트와는 상이한 제2 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 영화, 사용자 인터페이스에 디스플레이된 텔레비전 채널, 사용자 인터페이스에 디스플레이된 콘텐츠 정보 페이지)라는 판정에 따르면, 제1 기능이 제1 동작과는 상이한 제2 동작(예컨대, 영화를 고속 포워드하기, 채널을 변경하기, 더 많은 콘텐츠 정보를 보기)에 대응하는 것을 포함한다.
일부 실시예들에서, 본 명세서에 기술되는 기능들은, 선택적으로, 기술되는 기능 정보를 먼저 디스플레이하지 않고서 액세스된다 - 일부 실시예들에서, 기능 정보의 디스플레이는, 단순히, 선택적으로 터치 감응형 표면(451)으로부터 액세스가능한 기능들에 대한 정보를 제공한다 - 는 점에 유의해야 한다.
도 6d는 디스플레이(450) 상의 사용자 인터페이스에 디스플레이된 예시적인 기능 정보를 도시한다. 일부 실시예들에서, 기능 정보(622)는 관련 기능에 대한 정보를 제공하는 아이콘 또는 다른 그래픽을 포함한다 - 도 6d에 도시된 바와 같이, 일부 실시예들에서, 아이콘은 기능이 고속 포워드 기능임을 나타낸다. 일부 실시예들에서, 아이콘(예컨대, 기능 정보(622))은 사용자 인터페이스에서의 제1 위치(예컨대, 사용자 인터페이스의 중간-우측)에서 디스플레이되는데, 제1 위치는 제1 기능과 연관된, 터치 감응형 표면 상의 제1 사전정의된 영역(예컨대, 사전정의된 영역(612))(예컨대, 선택 시, 제1 기능이 수행되게 할 터치 감응형 표면 상의 제1 영역. 예를 들어, 터치 감응형 표면의 중간-우측 영역, 예컨대 사전 정의된 영역(612))에 대응한다. 따라서, 일부 실시예들에서, 사용자 인터페이스에서의 기능 아이콘의 위치는 리모콘의 터치 감응형 표면(451) 상에서 기능 액세스의 위치에 맵핑한다. 기능의 선택은, 선택적으로, 전술된 바와 같이 달성된다. 일부 실시예들에서, 기능 정보(622)는, 선택적으로, 접촉(603)이 기능 정보에 대응하는 터치 감응형 표면(451)의 영역(예컨대, 사전정의된 영역(612))에서 검출된다는 일부 시각적 표시(예컨대, 빛남(glowing), 번쩍임(flashing) 등)를 제공한다. 이러한 시각적 표시는, 선택적으로, 사용자에게 (예컨대, 사전정의된 영역(612)에서 클릭하는 것에 의한) 사전정의된 영역(612)의 추가 선택이 사전정의된 영역(612)과 연관된 기능을 수행할 것이라는 피드백, 및 기능 정보(622)를 제공한다.
도 6e는 디스플레이(450) 상의 사용자 인터페이스에 디스플레이된 2개의 기능들에 대한 예시적인 기능 정보를 도시한다. 일부 실시예들에서, 디스플레이(450) 상에 디스플레이되는 기능 정보는 터치 감응형 표면(451)으로부터 액세스가능한 2개 이상의 기능들에 관한 정보(예컨대, 사전정의된 영역(608)으로부터의 리와인드 기능, 사전정의된 영역(612)으로부터의 고속 포워드 기능, 및 사전정의된 영역(604)으로부터의 정보 기능의 액세스가능성을 각각 나타내는 기능 정보(626, 624, 628))를 포함한다. 또한, 상기와 같이, 각각의 기능 정보는, 선택적으로, 터치 감응형 표면(451) 상의 연관된 사전정의된 영역에 대응하는 사용자 인터페이스에서의 위치에서 디스플레이된다. 사용자 인터페이스에서의 기능 정보(624)에 대한 기능 정보(626)의 상대적 포지셔닝은, 선택적으로, 사전정의된 영역(612)에 대한 사전정의된 영역(608)의 상대적 포지셔닝에 대응한다. 각자의 기능들의 선택은, 선택적으로, 전술된 바와 같이 그리고 도 6e에 도시된 바와 같이 달성된다.
일부 실시예들에서, 상기와 같이, 사전정의된 영역들로부터 액세스가능한 기능들은, 도 6f 및 도 6g에 도시된 바와 같이, 콘텍스트에 기초한다. 일부 실시예들에서, 디바이스의 터치 감응형 표면 상의 복수의 사전정의된 영역들의 제2 사전정의된 영역(예컨대, 영역(608))은 제2 세트의 기능들과 연관되는데, 제2 세트의 기능들은 제2 기능을 포함한다(예컨대, 터치 감응형 표면의 좌측-중간 영역은 제1 기능과 연관되고, 터치 감응형 표면의 우측-중간 영역은 제2 기능과 연관된다). 제1 입력(예컨대, 활동하지 않는 손가락)의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은 사용자 인터페이스의 현재 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 콘텐츠 종류)에 기초하여 제2 세트의 기능들로부터 제2 기능을 선택하는 것을 추가로 포함한다. 현재 콘텍스트가 제1 콘텍스트(예컨대, 도 6f에 도시된 사용자 인터페이스에 디스플레이된 광고)라는 판정에 따르면, 제1 기능(예컨대, 도 6f에서의 기능(630))은 제1 동작(예컨대, 광고를 스킵하기)에 대응하고, 제2 기능(예컨대, 도 6f에서의 기능(632))은 제1 동작 및 제2 동작과는 상이한 제3 동작(예컨대, 광고를 재시작하는 것)에 대응한다(예컨대, 터치 감응형 표면의 좌측-중간 영역은 광고를 재시작하고, 터치 감응형 표면의 우측-중간 영역은 광고를 스킵한다). 현재 콘텍스트가 제2 콘텍스트(예컨대, 도 6g에 도시된 사용자 인터페이스에 디스플레이된 영화)라는 판정에 따르면, 제1 기능(예컨대, 도 6g에서의 기능(624))은 제2 동작(예컨대, 영화를 고속 포워드하기)에 대응하고, 제2 기능(예컨대, 도 6g에서의 기능(626))은 제1 동작, 제2 동작, 및 제3 동작과는 상이한 제4 동작(예컨대, 영화를 리와인드하기)에 대응한다(예컨대, 터치 감응형 표면의 좌측-중간 영역은 영화를 리와인드하고, 터치 감응형 표면의 우측-중간 영역은 영화를 고속 포워드한다).
전술된 바와 같이, 임의의 개수의 기능들이 선택적으로 본 발명의 터치 감응형 표면으로부터 액세스가능하다. 일부 실시예들에서, 터치 감응형 표면으로부터 액세스가능한 복수의 연관된 기능들은 사용자 인터페이스에서 내비게이트하기 위한 내비게이션 기능들(예컨대, 디바이스의 터치 감응형 표면의 상측면, 하측면, 좌측면, 및 우측면 상을 탭핑하는 것에 의해 각각 선택 표시자를 상하좌우로 이동시키는 것; 디바이스의 터치 감응형 표면 상에서 클릭하는 것에 의해 사용자 인터페이스에서 객체를 선택하는 것; 디바이스의 터치 감응형 표면을 클릭한 채로 홀드하는 것에 의해 콘텍스트형 내비게이션 메뉴를 제시하는 것)을 포함한다.
일부 실시예들에서, 터치 감응형 표면으로부터 액세스가능한 복수의 연관된 기능들은 사용자 인터페이스에서 콘텐츠를 내비게이트하기 위한 내비게이션 기능들(예컨대, 디바이스의 터치 감응형 표면의 좌측면 및 우측면 상에서 탭핑하고/하거나 클릭하는 것에 의해 각각 이미지들 전체에 걸쳐서 좌/우로 또는 이전/다음으로 이동하는 것; 디바이스의 터치 감응형 표면 상에서 좌우로 스와이프하는 것에 의해 각각 이전/다음 이미지로 이동하는 것; 디바이스의 터치 감응형 표면의 상부 좌측 영역 및 상부 우측 영역에서 클릭하는 것에 의해 콘텐츠(예컨대, 비디오) 전체에 걸쳐서 각각 후방으로/전방으로 스킵하는 것; 디바이스의 터치 감응형 표면의 상부 좌측 영역 및 상부 우측 영역에서 클릭한 채로 홀드하는 것에 의해 콘텐츠(예컨대, 비디오) 전체에 걸쳐서 각각 후방으로/전방으로 점프하는 것; 디바이스의 터치 감응형 표면의 우측면 및 좌측면 상에서 클릭하는 것에 의해 콘텐츠(예컨대, 비디오) 전체에 걸쳐서 각각 리와인드/고속 포워드하는 것; 디바이스의 터치 감응형 표면의 좌측면 및 우측면 상에서 클릭한 채로 홀드하는 것에 의해 콘텐츠(예컨대, 음악) 전체에 걸쳐서 각각 리와인드/고속 포워드하는 것; 디바이스의 터치 감응형 표면의 좌측면 및 우측면 상에서 클릭하는 것에 의해 콘텐츠(예컨대, 음악)에서 각각 이전/다음 트랙으로 변경하는 것; 디바이스의 터치 감응형 표면의 좌측 에지 및 우측 에지로부터 센터를 향해 스와이프하는 것에 의해 각각 이전/다음 채널로 변경하는 것; 디바이스의 터치 감응형 표면의 좌측 에지로부터 센터를 향해 스와이프하는 것에 의해 마지막 채널로 스킵하는 것; 디바이스의 터치 감응형 표면의 우측 에지 또는 상부 에지로부터 센터를 향해 스와이프하는 것에 의해 하나 이상의 오버레이 애플리케이션들을 제시하는 것; 디바이스의 터치 감응형 표면의 상부 좌측 영역에서 클릭하는 것에 의해 콘텐츠 가이드(예컨대, 전자 프로그램 가이드)를 제시하는 것; 디바이스의 터치 감응형 표면의 상부 우측 영역에서 클릭하는 것에 의해 풀스크린 모드에서 콘텐츠를 제시하는 것; 디바이스의 터치 감응형 표면 상에서 클릭하는 것에 의해 콘텐츠(예컨대, 비디오)로부터의 이미지들의 필름스트립(예컨대, 스크러버 바(scrubber bar))을 제시하는 것; 디바이스의 터치 감응형 표면 상에서 상하로 스와이프하는 것에 의해 각각 콘텐츠(예컨대, 비디오) 내의 챕터들/키프레임들에 대응하는 이미지들을 필름스트립(예컨대, 스크러버 바)에 제시하는 것; 디바이스의 터치 감응형 표면 상에서 클릭하는 것에 의해 필름스트립(예컨대, 스크러버 바) 내의 현재 위치로부터 콘텐츠를 재생시키는 것; 디바이스의 터치 감응형 표면 상에서 클릭하는 것에 의해 이미지들의 콜렉션으로부터 이미지들의 사진스트립을 제시하는 것; 및 디바이스의 터치 감응형 표면 상에서 클릭하는 것에 의해 재생된 콘텐츠(예컨대, 음악) 및/또는 재생될 다가오는 콘텐츠(예컨대, 음악)의 이력을 제시하는 것)을 포함한다.
일부 실시예들에서, 터치 감응형 표면으로부터 액세스가능한 복수의 연관된 기능들은 사용자 인터페이스에서 하나 이상의 콘텐츠 바들(예컨대, 애플리케이션 또는 채널 바)을 내비게이트하기 위한 내비게이션 기능들(예컨대, 디바이스의 터치 감응형 표면의 상부면 및 하부면 상에서 탭핑하는 것에 의해 각각 다음/이전 콘텐츠 바로 이동하는 것; 디바이스의 터치 감응형 표면의 좌측면 및 우측면 상에서 탭핑하는 것에 의해 각각 현재 콘텐츠 바에서 좌측/우측으로 이동하는 것; 디바이스의 터치 감응형 표면 상에서 상하로 스와이프하는 것에 의해 각각 이전/다음 콘텐츠 바로 이동하는 것; 및 디바이스의 터치 감응형 표면 상에서 클릭하는 것에 의해 현재 콘텐츠 바 내의 객체(예컨대, 애플리케이션 또는 채널)를 선택하는 것)을 포함한다.
일부 실시예들에서, 터치 감응형 표면으로부터 액세스가능한 복수의 연관된 기능들은 사용자 인터페이스에서 콘텐츠에 관한 정보를 제시하기 위한 정보 기능들(예컨대, 디바이스의 터치 감응형 표면의 상부면 상에서 클릭하는 것에 의해 콘텐츠에 관한 정보를 제시하는 것; 및 디바이스의 터치 감응형 표면의 좌측 에지로부터 센터를 향해 스와이프하는 것에 의해 콘텐츠에 관한 정보를 제시하는 것)을 포함한다.
하기의 표는 일부 기능들을 열거한 것이며, 이러한 기능들 중 하나 이상의 기능들의 다양한 조합들은 선택적으로 본 발명의 터치 감응형 표면(TSS)으로부터 액세스가능하다:
Figure 112018128702979-pat00018
도 7a 내지 도 7g는, 일부 실시예들에 따른, 기능 정보를 디스플레이하는 방법(700)을 도시한 흐름도들이다. 방법(700)은, 선택적으로, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스를 비롯한 전자 디바이스, 예컨대 도 5를 참조하여 전술된 바와 같은 디바이스(500)에서 수행된다. 방법(700)에서의 일부 동작들은 선택적으로 조합되고/되거나 일부 동작들의 순서는 선택적으로 변경된다.
하기에 기술되는 바와 같이, 방법(700)은 디바이스가 선택적으로 사용자에게 기능 정보를 제공하는 방식들을 제공한다. 방법은 본 발명의 디바이스의 사용자 인터페이스와 상호작용할 때 사용자에 대한 인지적 부담을 감소시키며, 이에 의해 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들의 경우, 사용자 인터페이스와의 사용자 상호작용의 효율성을 증가시키는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 하나 이상의 프로세서들 및 메모리를 갖는 전자 디바이스(예컨대, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스, 예컨대 도 5에서의 디바이스(500))는 디스플레이 디바이스(예를 들어, 텔레비전 또는 다른 디스플레이 디바이스, 예컨대 도 6a에서의 디스플레이(450)) 상에서의 디스플레이를 위해 사용자 인터페이스를 생성한다(702).
일부 실시예들에서, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면) 상에서 검출된 접촉(예컨대, 손가락 접촉 또는 스타일러스 접촉)(예컨대, 도 6a에서의 터치 감응형 표면(451) 상에서 검출된 접촉(601))을 포함하는 제1 입력의 표시를 수신한다(703). 일부 실시예들에서, 터치 감응형 표면은 복수의 사전정의된 영역들(예컨대, 도 6a에서의 터치 감응형 표면(451) 상의 영역들(602, 604, 606, 608, 610, 612, 614, 616, 618))을 포함하고, 복수의 사전정의된 영역들의 각각의 사전정의된 영역은 연관된 기능을 수행하도록 선택가능하다(예컨대, 각각의 영역은 콘텐츠 아이템과 연관된 정보를 역방향 스킵하기, 순방향 스킵하기, 리와인드하기, 고속 포워드하기, 스크럽하기, 및 디스플레이하기를 포함한 기능을 수행하도록 선택가능하다)(704). 일부 실시예들에서, 터치 감응형 표면은 9개 미만의 사전정의된 영역들을 포함하는데; 예를 들어, 일부 실시예들에서, 터치 감응형 표면은, 선택적으로 9개의 사전정의된 영역들보다 더 큰 4개의 사전정의된 영역들(상부 우측, 하부 우측, 하부 좌측, 및 상부 좌측)을 포함하고, 일부 실시예들에서, 터치 감응형 표면은, 선택적으로, 9개의 사전정의된 영역들보다 더 크지만, 선택적으로, 4개의 사전정의된 영역들보다 더 작은 5개의 사전정의된 영역들(상부 우측, 하부 우측, 하부 좌측, 상부 좌측, 및 센터)을 포함한다. 일부 실시예들에서, 터치 감응형 표면 상의 사전정의된 영역들의 개수는 터치 감응형 표면으로부터 액세스가능할 필요가 있는 기능들의 개수에 기초한다(예컨대, 더 많은 기능들이 터치 감응형 표면으로부터 액세스가능할 필요가 있는 경우, 터치 감응형 표면은, 선택적으로, 더 많은 사전정의된 영역들을 포함한다). 일부 실시예들에서, 디바이스는 입력 디바이스를 포함하고, 입력 디바이스 및 디스플레이 디바이스는 개별 디바이스들이다(예컨대, 도 6a에서의 디스플레이(450) 및 터치 감응형 표면(451)은 개별 디바이스들에 포함된다)(705).
일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 내비게이트하기 위한 내비게이션 기능들을 포함한다(706). 일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 콘텐츠를 내비게이트하기 위한 내비게이션 기능들을 포함한다(707). 일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 하나 이상의 콘텐츠 바들을 내비게이트하기 위한 내비게이션 기능들을 포함한다(708). 일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 콘텐츠에 관한 정보를 제시하기 위한 정보 기능들을 포함한다(709).
일부 실시예들에서, 제1 입력(예컨대, 도 6a에서의 접촉(601))의 표시를 수신한 것에 응답하여(710), 디바이스는 접촉이 제1 기간보다 더 오랫동안 검출되었는지 여부를 판정한다(예컨대, 활동하지 않는 손가락이 적어도 임계량의 시간, 예컨대 0.1초, 0.2초, 0.5초, 또는 1초 동안 리모콘의 터치 감응형 표면 상에서 검출되었는지 여부 - 예를 들어, 도 6a에서의 접촉(601)이 임계량의 시간보다 더 오랫동안 검출되었는지 여부 - 를 판정한다)(712). 일부 실시예들에서, 접촉이, 접촉이 제1 기간보다 더 오랫동안 검출되었을 때 충족되는 기준을 포함하는 기능 디스플레이 기준들(예컨대, 하나 이상의 기준)을 충족시킨다는 판정에 따라, 디바이스는 사용자 인터페이스에의 디스플레이를 위해 기능 정보(예컨대, 도 6a에서의 기능 정보(620), 도 6d에서의 기능 정보(622), 및 도 6e에서의 기능 정보(624, 626))를 판정한다(예컨대, 디스플레이될 기능 정보에 대한 각자의 기능을 판정하고, 이어서, 각자의 기능에 대응하는 사전생성된 기능 정보를 선택하거나, 또는 디스플레이 상에 디스플레이될 기능 정보를 생성한다)(714). 일부 실시예들에서, 기능 정보는 복수의 연관된 기능들 중 제1 기능에 관한 정보를 포함한다(예컨대, 터치 감응형 표면 상의 어느 곳에든 손가락을 두는 것은 터치 감응형 표면으로부터 액세스가능한 하나 이상의 기능들에 관한 정보를 가져온다)(716). 예를 들어, 기능 정보는, 선택적으로, 사용자 인터페이스에 디스플레이되는, 터치 감응형 표면의 대응하는 영역들로부터 액세스가능한 기능들을 나타내는 하나 이상의 아이콘들(예컨대, 도 6e에서의 아이콘들(624, 626))을 포함한다. 일부 실시예들에서, 기능 정보는 사용자 인터페이스에서 이동 이미지 또는 정지 이미지 위에 디스플레이되는 오버레이를 포함한다(예컨대, 도 6d에서의 기능 정보(622)는, 선택적으로, 디스플레이(450) 상에 디스플레이된 이동 이미지 또는 정지 이미지 위에 오버레이된다)(718). 일부 실시예들에서, 기능 디스플레이 기준들은 제1 기간 동안 접촉이 제1 이동 임계치 미만으로 이동했을 때 충족되는 기준을 포함한다(예컨대, 기능 정보를 디스플레이하기 위해, 접촉(예컨대, 도 6a에서의 접촉(601))은, 선택적으로, 실질적인 정지 상태의 접촉이어야 한다)(720). 일부 실시예들에서, 제1 기능에 관한 정보는 제1 기능을 수행하기 위한 시각적 단서(예컨대, 수행될 기능에 관한 시각적 디스플레이, 리모콘으로부터의 기능을 수행하는 방법 등)(예컨대, 도 6c에서의 기능 정보(620) 및 도 6e에서의 기능 정보(624, 626))를 포함한다(722).
일부 실시예들에서, 제1 기능에 관한 정보는 사용자 인터페이스에서의 제1 위치에 디스플레이되는데, 제1 위치는 제1 기능과 연관된 터치 감응형 표면 상의 제1 사전정의된 영역(예컨대, 활성화 시, 제1 기능이 수행되게 할 터치 감응형 표면 상의 제1 사전정의된 영역)에 대응한다(724). 따라서, 일부 실시예들에서, 사용자 인터페이스 상의 기능 아이콘의 위치는 리모콘의 터치 감응형 표면 상에서 기능 액세스의 위치에 맵핑한다. 예를 들어, 디스플레이(450) 상의 기능 정보(622)의 위치는 선택적으로 도 6d에서의 터치 감응형 표면(451) 상의 영역(612)의 위치에 대응한다. 일부 실시예들에서, 기능 정보는 추가로 복수의 연관된 기능들 중 제2 기능에 관한 제2 정보를 포함한다(726). 일부 실시예들에서, 제2 정보는 사용자 인터페이스에서의 제2 위치에 디스플레이되는데, 제2 위치는 제2 기능과 연관된 터치 감응형 표면 상의 제2 사전정의된 영역(예컨대, 활성화 시, 제2 기능이 수행되게 할 터치 감응형 표면 상의 제2 영역)에 대응한다(728). 일부 실시예들에서, 사용자 인터페이스에서의 제2 위치에 대한 사용자 인터페이스에서의 제1 위치의 상대적 포지셔닝은 도 6e에 도시된 바와 같이 기능 정보(624, 626) 및 대응하는 영역들(612, 608)을 각각 갖는 터치 감응형 표면 상의 제2 사전정의된 영역에 대한 터치 감응형 표면 상의 제1 사전정의된 영역의 상대적 포지셔닝에 대응한다(730).
일부 실시예들에서, 디바이스의 터치 감응형 표면 상의 복수의 사전정의된 영역들 중 제1 사전정의된 영역은 제1 세트의 기능들과 연관되는데, 제1 세트의 기능들은 제1 기능을 포함한다(예컨대, 터치 감응형 표면의 우측 영역(예컨대, 도 6a에서의 영역(612))은, 선택적으로, 광고를 고속 포워드하여 스킵하는 것과 연관된다)(732). 일부 실시예들에서, 디바이스의 터치 감응형 표면 상의 복수의 사전정의된 영역들의 제2 사전정의된 영역은 제2 세트의 기능들과 연관되는데, 제2 세트의 기능들은 제2 기능을 포함한다(예컨대, 터치 감응형 표면의 좌측 영역(예컨대, 도 6a에서의 영역(608))은 제1 세트의 기능들과 연관되고, 터치 감응형 표면의 우측 영역은 제2 세트의 기능들과 연관된다)(734). 일부 실시예들에서, 제1 입력의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은 사용자 인터페이스의 현재 콘텍스트를 판정하는 것(예컨대, 사용자 인터페이스에 디스플레이된 콘텐츠의 종류를 판정하는 것)(738)을 포함한다(736). 일부 실시예들에서, 제1 입력의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은 사용자 인터페이스의 현재 콘텍스트에 기초하여 제1 세트의 기능들로부터 제1 기능을 선택하는 것(740)을 포함한다(736). 일부 실시예들에서, 현재 콘텍스트가 제1 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 광고, 사용자 인터페이스에 디스플레이된 음악의 콜렉션, 사용자 인터페이스에 디스플레이된 애플리케이션, 사용자 인터페이스에 디스플레이된 사진들의 콜렉션 등)라는 판정에 따르면, 제1 기능은 제1 동작(예컨대, 광고를 스킵하기, 음악의 콜렉션의 소정 페이지로 내비게이트하기, 다른 애플리케이션으로 전환하기, 사진들의 콜렉션의 소정 페이지로 내비게이트하기 등)에 대응한다(742). 일부 실시예들에서, 현재 콘텍스트가 제1 콘텍스트와는 상이한 제2 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 영화, 사용자 인터페이스에 디스플레이된 텔레비전 채널, 사용자 인터페이스에 디스플레이된 콘텐츠 정보 페이지 등)라는 판정에 따르면, 제1 기능은 제1 동작과는 상이한 제2 동작(예컨대, 영화를 고속 포워드하기, 채널을 변경하기, 더 많은 콘텐츠 정보를 보기 등)에 대응한다(744). 예를 들어, 도 6a에서의 영역(612)의 선택은, 선택적으로, 현재 콘텍스트가 제1 콘텍스트인 경우에 제1 동작을 수행하고, 현재 콘텍스트가 제2 콘텍스트인 경우에 제2 동작을 수행한다.
일부 실시예들에서, 제1 입력의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은 사용자 인터페이스의 현재 콘텍스트에 기초하여 제2 세트의 기능들로부터 제2 기능을 선택하는 것(746)을 포함한다(736). 일부 실시예들에서, 현재 콘텍스트가 제1 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 광고)라는 판정에 따르면, 제1 기능은 제1 동작(예컨대, 광고를 스킵하기)에 대응하고, 제2 기능은 제1 동작 및 제2 동작과는 상이한 제3 동작(예컨대, 광고를 재시작하기)에 대응한다(예컨대, 터치 감응형 표면의 좌측 영역은 광고를 재시작하고, 터치 감응형 표면의 우측 영역은 광고를 스킵한다)(748). 일부 실시예들에서, 현재 콘텍스트가 제2 콘텍스트(예컨대, 사용자 인터페이스에 디스플레이된 영화)라는 판정에 따르면, 제1 기능은 제2 동작(예컨대, 영화를 고속 포워드하기)에 대응하고, 제2 기능은 제1 동작, 제2 동작 및 제3 동작과는 상이한 제4 동작(예컨대, 영화를 리와인드하기)에 대응한다(예컨대, 터치 감응형 표면의 좌측 영역은 영화를 리와인드하고, 터치 감응형 표면의 우측 영역은 영화를 고속 포워드한다)(750). 따라서, 터치 감응형 표면 상의 영역들에 의해 수행되는 동작들은 선택적으로 사용자 인터페이스의 현재 콘텍스트에 기초한다.
일부 실시예들에서, (예컨대, 접촉이 제1 기간보다 더 오랫동안 검출되지 않았기 때문에) 접촉이 기능 디스플레이 기준들을 충족시키지 않는다는 판정에 따라, 디바이스는 복수의 연관된 기능들 중 제1 기능에 관한 정보(예컨대, 제1 기간에 도달하기 전에 접촉이 종료되는 경우,
터치 감응형 표면의 상이한 영역들의 기능들이, 선택적으로, 디스플레이되지 않음을 나타내는 아이콘들, 예컨대 도 6e에서의 아이콘들(624, 626))를 포함하는 기능 정보의 판정을 무시한다(752).
일부 실시예들에서, 접촉이 제1 기간 동안 제1 이동 임계치를 초과해서 이동했기 때문에 기능 디스플레이 기준들이 충족되지 않았다는 판정에 따라, 디바이스는 복수의 연관된 기능들 중 제1 기능에 관한 정보를 포함하는 기능 정보의 판정을 무시한다(754).
일부 실시예들에서, 디바이스는, 도 6c 및 도 6d에서의 접촉들(601, 603)에 의해 예시된 바와 같은, 제1 기능과 연관된 터치 감응형 표면의 제1 사전정의된 영역 상에서 검출된 제2 입력의 표시를 수신한다(756). 일부 실시예들에서, 제2 입력을 검출하는 것은 디바이스의 터치 감응형 표면 상에의 접촉과 동시에 제2 입력을 검출하는 것을 포함한다(예컨대, 터치 감응형 표면의 각자의 사전정의된 영역에서의 클릭의 검출 전에 접촉의 리프트오프가 검출될 필요가 없다)(758). 일부 실시예들에서, 제2 입력을 검출하는 것은 디바이스의 터치 감응형 표면의 제1 사전정의된 영역 상에의 제2 접촉(예컨대, 탭핑, 클릭, 및 활동하지 않는 터치 중 하나 이상)을 검출하는 것을 포함한다(760). 일부 실시예들에서, 제2 입력을 검출하는 것은 접촉의 세기의, 제1 사전결정된 세기 임계치 초과의 증가를 검출하는 것(예컨대, 기계적 클릭 또는 힘 검출)을 포함한다(762).
일부 실시예들에서, 제2 입력의 표시를 수신한 것에 응답하여, 디바이스는 제1 사전정의된 영역과 연관된 제1 기능을 수행한다(764). 예를 들어, 도 6c에서의 영역(612)에서의 접촉(601)의 표시를 수신한 것에 응답하여, 디바이스는 선택적으로 사용자 인터페이스에서의 콘텐츠를 고속 포워드한다.
일부 실시예들에서, 디바이스는 제1 기능과 연관된, 터치 감응형 표면의 제1 사전정의된 영역 상에서 검출된 제3 입력의 표시를 수신한다(766). 일부 실시예들에서, 제3 입력을 검출하는 것은 제1 사전결정된 세기 임계치보다 더 큰 제2 사전결정된 세기 임계치(예컨대, 다중 레벨 클릭) 초과의 접촉의 세기의 제2 증가를 검출하는 것을 포함한다(768). 일부 실시예들에서, 제3 입력의 표시를 수신한 것에 응답하여, 디바이스는 터치 감응형 표면 상의 제1 사전정의된 영역과 연관된 제1 기능의 수행을 무시하고, 터치 감응형 표면의 제1 사전정의된 영역과 연관된, 제1 기능과는 상이한 제2 기능을 수행한다(예컨대, 더블 레벨 클릭은 단일 레벨 클릭과는 상이한 기능을 수행한다)(770). 예를 들어, 도 6c에서의 영역(612)에서의 단일 레벨 클릭이 선택적으로 고속 포워드 동작을 수행하지만, 영역(612)에서의 더블 레벨 클릭은 선택적으로 상이한 동작(예컨대, 30s 포워드 스킵)을 수행한다.
일부 실시예들에서, 제2 기능을 수행하기 전, 전자 디바이스는 사용자 인터페이스에서의 기능 정보를 제2 기능 정보로 대체하는데, 제2 기능 정보는 터치 감응형 표면의 제1 사전정의된 영역과 연관된 제2 기능에 관한 제2 정보를 포함한다(772). 예를 들어, 디바이스는, 선택적으로, 도 6c에서의 기능 정보(620)를 더블 레벨 클릭에 응답하여 수행되는 상이한 기능에 관한 기능 정보로 대체한다.
일부 실시예들에서, 제2 입력을 검출하는 것은 제1 사전결정된 세기 임계치 초과의 접촉의 세기의 증가를 검출한 후 제2 기간보다 더 오랫동안 디바이스의 터치 감응형 표면 상에의 접촉을 검출하는 것(예컨대, 적어도 임계량의 시간, 예컨대 0.1초, 0.2초, 0.5초, 또는 1초 동안 클릭-앤드-홀드를 검출하는 것)을 추가로 포함한다(774). 일부 실시예들에서, 제2 입력의 표시를 수신한 것에 응답하여, 디바이스는 터치 감응형 표면 상의 제1 사전정의된 영역과 연관된 제1 기능의 수행을 무시하고, 터치 감응형 표면의 제1 사전정의된 영역과 연관된, 제1 기능과는 상이한 제2 기능을 수행한다(예컨대, 클릭-앤드-홀드는 1회 클릭만 하는 것과는 상이한 기능을 개시시킨다)(776). 예를 들어, 도 6c에서의 영역(612)에서의 단일 레벨 클릭이 선택적으로 고속 포워드 동작을 수행하지만, 영역(612)에서의 클릭-앤드-홀드는, 선택적으로, 상이한 동작(예컨대, 콘텐츠에서 다음 챕터로 스킵하기)을 수행한다.
일부 실시예들에서, 제2 기능을 수행하기 전, 전자 디바이스는 사용자 인터페이스에서의 기능 정보를 제2 기능 정보로 대체하는데, 제2 기능 정보는 터치 감응형 표면의 제1 사전정의된 영역과 연관된 제2 기능에 관한 제2 정보를 포함한다(778). 예를 들어, 디바이스는, 선택적으로, 도 6c에서의 기능 정보(620)를 클릭-앤드-홀드에 응답하여 수행되는 상이한 기능에 관한 기능 정보로 대체한다.
도 7a 내지 도 7g에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(900, 1100, 1300, 1500))과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 7a 내지 도 7g와 관련하여 전술된 방법(700)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다. 예를 들어, 방법(700)을 참조하여 전술된 사용자 인터페이스들, 디스플레이 디바이스들, 터치 감응형 표면들, 및 접촉들은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(900, 1100, 1300, 1500))을 참조하여 본 명세서에 기술된 사용자 인터페이스들, 디스플레이 디바이스들, 터치 감응형 표면들, 및 접촉들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
전술된 정보 프로세싱 방법들에서의 동작들은 선택적으로 (예컨대, 도 1a, 도 3, 및 도 5와 관련하여 전술된 바와 같은) 범용 프로세서들 또는 애플리케이션 특정 칩들과 같은 정보 프로세싱 장치 내의 하나 이상의 기능 모듈들을 구동시킴으로써 구현된다.
도 7a 내지 도 7g를 참조하여 전술된 동작들은, 선택적으로, 도 1a 및 도 1b에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 생성 동작(702), 수신 동작(703), 및 판정 동작들(712, 714)은 선택적으로 이벤트 분류기(170), 이벤트 인식기(180), 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각자의 이벤트 인식기(180)는 이벤트 정보를 각자의 이벤트 정의(186)와 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상에서의 객체의 선택과 같은 사전정의된 이벤트 또는 서브이벤트에 대응하는지 여부를 판정한다. 각자의 사전정의된 이벤트 또는 서브이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는, 선택적으로, 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 각자의 GUI 업데이터(178)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
콘텐츠 내비게이션 바
사용자가 디바이스에 의해 제공된 사용자 인터페이스에 디스플레이되는 콘텐츠를 쉽게 그리고 효율적으로 내비게이트할 수 있게 하는 콘텐츠 내비게이션 바를 제공하는 것은 콘텐츠 및 디바이스와의 사용자 상호작용을 향상시킬 수 있다. 하기에 기술되는 실시예들은 디바이스가 선택적으로 사용자 인터페이스에 그러한 콘텐츠 내비게이션 바를 제시하는 방식들을 제공한다. 디바이스와의 상호작용들을 향상시키는 것은 동작들을 수행하기 위해 사용자가 필요로 하는 시간의 양을 감소시키고, 이에 따라 디바이스의 전력 사용을 감소시키고 배터리 작동형 디바이스들에 대한 배터리 수명을 증가시킨다.
도 8a 내지 도 8g는, 본 발명의 일부 실시예들에 따른, 콘텐츠 내비게이션 바가 사용자 인터페이스에서 제시되는 예시적인 방식들을 도시한다. 이들 도면들에서의 실시예들은, 도 9a 내지 도 9g를 참조하여 기술되는 프로세스들을 포함하는, 하기에 기술되는 프로세스들을 예시하는 데 사용된다.
도 8a는 예시적인 시퀀스의 콘텐츠 아이템들을 도시한다. 시퀀스(802) 내의 콘텐츠 아이템들은 선택적으로 임의의 콘텐츠 아이템들, 예컨대 영화들, 텔레비전 쇼들, 및/또는 애플리케이션들이다. 일부 실시예들에서, 시퀀스(802)는 콘텐츠 아이템 1 내지 콘텐츠 아이템 N을 나타내는 엔트리들(예컨대, 엔트리들(804, 806, 808, 810))을 포함한다. 시퀀스(802)는, 선택적으로, 그 내부에서 나타내는 콘텐츠 아이템들의 순서에 관한 정보를 제공한다. 예를 들어, 콘텐츠 아이템 2(806)에 대한 엔트리가 콘텐츠 아이템 3(808)에 대한 엔트리 앞에 온다는 사실은, 선택적으로, 관련 시퀀스 또는 순서에서 콘텐츠 아이템 2가 콘텐츠 아이템 3 앞이라는 것을 나타낸다. 시퀀스(802)에서의 엔트리들(804, 806, 808, 810)의 실질적 순서에 대해 추가로 또는 대안으로, 엔트리들 자체는, 선택적으로, 관련 시퀀스 또는 순서에서 그들의 대응하는 콘텐츠 아이템들의 상대적 순서에 관한 정보를 포함한다.
시퀀스(802)에 의해 나타내지는 콘텐츠 아이템들의 시퀀스 또는 순서는, 선택적으로, 많은 콘텍스트들에서의 콘텐츠 아이템 순서를 나타낸다. 예를 들어, 관심 콘텐츠 아이템들이 텔레비전 시리즈의 에피소드들인 경우, 시퀀스(802)는, 선택적으로, 에피소드들(예컨대, 제1 에피소드, 제2 에피소드 등)의 콘텐츠에 기초하여 에피소드들의 정확한 순서를 제공한다. 예를 들어, 관심 콘텐츠 아이템들이 특정 채널 상의 텔레비전 브로드캐스트들인 경우, 시퀀스(802)는, 선택적으로, 브로드캐스트들이 방송된 시간에 기초하여 텔레비전 브로드캐스트들의 정확한 순서(예컨대, 7:00pm 브로드캐스트, 이어서 7:30 브로드캐스트, 이어서 8:00pm 브로드캐스트 등)를 제공한다. 시퀀스(802)는, 선택적으로, 임의의 콘텍스트 내의 콘텐츠 아이템들의 순서를 제공하는데, 여기서 콘텐츠 아이템들의 순서가 선택적으로 관심 대상이 된다.
그러한 콘텐츠 타입 기반 시퀀스 판정을 가능하게 하기 위해, 전자 디바이스(예컨대, 도 5에서의 디바이스(500))는 선택적으로 관심 콘텐츠 아이템("각자의 콘텐츠 아이템")의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼 등)을 판정한다. 일부 실시예들에서, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 전자 디바이스는 각자의 콘텐츠 아이템을 포함하는 제1 시퀀스의 콘텐츠 아이템들을 식별하는데, 여기서 제1 콘텐츠 아이템은 그 시퀀스의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 바로 선행하고, 제2 콘텐츠 아이템은 그 시퀀스의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 바로 후속한다(예컨대, 그 콘텐츠 타입의 각자의 콘텐츠 아이템이 텔레비전 시리즈인 경우, 각자의 콘텐츠 아이템은 선택적으로 텔레비전 시리즈의 소정 에피소드이고, 제1 콘텐츠 아이템은 선택적으로 그 텔레비전 시리즈에서의 직전 에피소드이고, 제2 콘텐츠 아이템은 선택적으로 그 텔레비전 시리즈에서의 직후 에피소드이다). 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 전자 디바이스는, 선택적으로, 각자의 콘텐츠 아이템을 포함하는, 제1 시퀀스의 콘텐츠 아이템들과는 상이한 제2 시퀀스의 콘텐츠 아이템들을 식별하는데, 여기서 제1 콘텐츠 아이템 및 제2 콘텐츠 아이템과는 상이한 제3 콘텐츠 아이템이 제2 시퀀스의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 인접한다(예컨대, 그 콘텐츠 타입의 각자의 콘텐츠 아이템이 텔레비전 브로드캐스트인 경우, 각자의 콘텐츠 아이템은 선택적으로 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이고, 제1 콘텐츠 아이템은 선택적으로 직전 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이고, 제2 콘텐츠 아이템은, 선택적으로, 직후 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이다).
도 8b는 내비게이션 바를 포함하는 예시적인 사용자 인터페이스를 도시한다. 디스플레이(450)는, 선택적으로, 영역(828) 및 내비게이션 바(830)를 포함하는 사용자 인터페이스를 디스플레이한다. 영역(828)은, 선택적으로, 각자의 콘텐츠 아이템에 현재 위치의 표현을 디스플레이(예컨대, 큰 버전의 콘텐츠가 사용자 인터페이스에서 재생됨)한다. 각자의 콘텐츠 아이템은, 선택적으로, 복수의 콘텐츠 아이템들(예컨대, 영화들, 텔레비전 쇼들, 애플리케이션들)을 포함하는, 시퀀스(802)와 같은 소정 시퀀스의 콘텐츠 아이템들로부터의 현재 선택된 콘텐츠 아이템(예컨대, 디스플레이(450) 상의 사용자에게로의 프레젠테이션을 위해 선택된 콘텐츠 아이템)이다.
일부 실시예들에서, 내비게이션 바(830)은 각자의 콘텐츠 아이템에서의 상이한 위치들에 대응하는 복수의 이미지들(814, 816, 818, 820, 822), 즉 영역(828)에 디스플레이되는 현재 위치의 표현을 포함한다. 예를 들어, 내비게이션 바(830)는, 선택적으로, 텔레비전 시리즈(각자의 콘텐츠 아이템)의 제1 에피소드에서 상이한 시점들(예컨대, 5초 또는 5분마다)로부터의 이미지들을 포함한다.
일부 실시예들에서, 사용자 인터페이스의 영역(828)에서의 각자의 콘텐츠 아이템의 표현은 사용자 인터페이스에서의 내비게이션 바(830)보다 더 크다(예컨대, 각자의 콘텐츠 아이템의 비디오가 내비게이션 바 내의 이미지들보다 더 크다). 일부 실시예들에서, 영역(828)에서의 각자의 콘텐츠 아이템의 표현은 각자의 콘텐츠 아이템으로부터의 비디오를 포함하는데, 비디오는 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)을 포함한다. 일부 실시예들에서, 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)은 각자의 콘텐츠 아이템으로부터의 복수의 정지 이미지들을 포함한다.
일부 실시예들에서, 내비게이션 바(830)는 또한 소정 시퀀스(예컨대, 시퀀스(802))의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 인접한, 복수의 콘텐츠 아이템들에서의 제1 인접 콘텐츠 아이템(824)의 표현을 포함한다. 예를 들어, 내비게이션 바(830)는, 선택적으로, 각자의 콘텐츠 아이템이 텔레비전 시리즈에서의 에피소드인 경우, 텔레비전 시리즈(제1 인접 콘텐츠 아이템(824))에서의 제2 에피소드(예컨대, 다음 에피소드)의 표현을 포함한다. 내비게이션 바(830)는, 추가로 또는 대안으로, 예를 들어, 텔레비전 시리즈에서의 이전 에피소드의 표현을 포함할 수 있다는 것이 이해된다.
도 8b에 도시된 바와 같이, 일부 실시예들에서, 내비게이션 바(830)는 2개의 인접 콘텐츠 아이템들(812, 824)(예컨대, 이전 및 다음 콘텐츠 아이템)의 표현들을 포함한다. 일부 실시예들에서, 내비게이션 바(830)는, 선택적으로, 소정 시퀀스의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 인접한, 복수의 콘텐츠 아이템들에서의 제2 인접 콘텐츠 아이템(812)(예컨대, 이전 콘텐츠 아이템)의 표현을 포함한다. 전술된 바와 같이, 제1 인접 콘텐츠 아이템은 선택적으로 소정 시퀀스의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 선행하고(예컨대, 제1 인접 콘텐츠 아이템은 텔레비전 시리즈에서의 현재 에피소드 이전의 에피소드, 또는 현재 텔레비전 프로그램 이전의 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트임), 제2 인접 콘텐츠 아이템은 선택적으로 소정 시퀀스의 콘텐츠 아이템들에서의 각자의 콘텐츠 아이템에 후속한다(예컨대, 제2 인접 콘텐츠 아이템은 텔레비전 시리즈에서의 현재 에피소드에 후속하는 에피소드, 또는 현재 텔레비전 프로그램에 후속하는 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트임).
도 8a와 관련하여 전술된 바와 같이, 일부 실시예들에서, 제1 및 제2 인접 콘텐츠 아이템들은 각자의 콘텐츠 아이템의 판정된 콘텐츠 타입에 기초한다. 예를 들어, 도 8b 및 도 8c에 도시된 바와 같이, 일부 실시예들에서, 그 콘텐츠 타입의 각자의 콘텐츠 아이템이 텔레비전 브로드캐스트(예컨대, 도 8b에서의 8:00PM 텔레비전 브로드캐스트)인 경우, 이전 인접 콘텐츠 아이템은 선택적으로 이전 타임 슬롯 동안의 텔레비전 브로드캐스트(예컨대, 도 8b에서의 7:30PM 텔레비전 브로드캐스트)이고, 다음 인접 콘텐츠 아이템은 선택적으로 다음 타임 슬롯 동안의 텔레비전 브로드캐스트(예컨대, 도 8b에서의 8:30PM 텔레비전 브로드캐스트)이다. 일부 실시예들에서, 그 콘텐츠 타입의 각자의 콘텐츠 아이템이 텔레비전 시리즈의 에피소드(예컨대, 도 8c에서의 텔레비전 시리즈의 에피소드 2)인 경우, 이전 인접 콘텐츠 아이템은 선택적으로 텔레비전 시리즈의 이전 에피소드(예컨대, 도 8c에서의 텔레비전 시리즈의 에피소드 1)이고, 다음 인접 콘텐츠 아이템은 선택적으로 텔레비전 시리즈의 다음 에피소드(예컨대, 도 8c에서의 텔레비전 시리즈의 에피소드 3)이다.
일부 실시예들에서, 내비게이션 바(830) 내의 제1 인접 콘텐츠 아이템(824) 및/또는 제2 인접 콘텐츠 아이템(812)의 표현들은 제1 및/또는 제2 인접 콘텐츠 아이템에서의 위치들로부터의 이미지들(예컨대, 텔레비전 시리즈에서의 다음 및/또는 이전 에피소드들에서의 시점들로부터의 하나 이상의 스크린샷들)을 포함한다.
일부 실시예들에서, 사용자는, 선택적으로, 이미지들(814, 816, 818, 820, 822)이 대응하는 각자의 콘텐츠 아이템에서의 위치들 사이의 시간 간격을 변경하도록 하는 입력을 제공한다. 다시 말해, 사용자는, 선택적으로, 내비게이션 바(830)에 디스플레이된 이미지들(814, 816, 818, 820, 822) 사이의 시간 간격을 변경하도록 하는 입력을 제공하여, 예를 들어 각자의 콘텐츠 아이템에서 5분만큼 이격된 시점들에 대응하는 이미지들 대신, 이미지들이, 선택적으로, 예를 들어 각자의 콘텐츠 아이템에서 10분만큼 이격된 시점들에 대응하게 한다.
따라서, 일부 실시예들에서, 내비게이션 바(830) 내의 복수의 이미지들 중 제1 이미지(예컨대, 이미지(814))는 각자의 콘텐츠 아이템에서의 제1 위치에 대응하고, 내비게이션 바(830) 내의 복수의 이미지들 중 제2 이미지(예컨대, 이미지(816))는 각자의 콘텐츠 아이템에서의 제2 위치에 대응하며, 각자의 콘텐츠 아이템에서의 제1 위치와 각자의 콘텐츠 아이템에서의 제2 위치는 제1 간격(예컨대, 소정량의 시간, 예를 들어, 5분 또는 10분)만큼 이격된다. 일부 실시예들에서, 사용자 인터페이스가 디스플레이(450) 상에 디스플레이되는 동안, 전자 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면) 상에서 검출된 접촉(예컨대, 손가락 접촉 또는 스타일러스 접촉)을 포함하는 제1 입력의 표시를 수신하는데, 여기서 접촉을 검출하는 것은 접촉의 이동(예컨대, 터치 감응형 표면 상에서의 수직방향 스와이프)을 검출하는 것을 포함한다. 접촉의 이동에 따라, 전자 디바이스는, 선택적으로, 제1 간격과는 상이한(예컨대, 제1 간격 초과인 또는 제1 간격 미만인) 제2 간격만큼 이격된, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치, 및 이들의 대응하는 제3 이미지 및 제4 이미지를 각각 선택하며, 내비게이션 바(830) 내의 제1 이미지(예컨대, 이미지(814))를 각자의 콘텐츠 아이템에서의 제3 위치에 대응하는 제3 이미지로 그리고 내비게이션 바 내의 제2 이미지(예컨대, 이미지(816))를 각자의 콘텐츠 아이템에서의 제4 위치에 대응하는 제4 이미지로 대체한다. 이러한 방식으로, 전자 디바이스는 선택적으로 내비게이션 바(830) 내의 이미지들 사이의 시간 간격을 변경한다.
일부 실시예들에서, 이미지들(814, 816, 818, 820, 822)이 대응하는 각자의 콘텐츠 아이템에서의 위치들 사이의 시간 간격을 변경하는 것은 하기의 도 8d 및 도 8e를 참조하여 기술되는 바와 유사하게 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 사용자 인터페이스의 영역(828)에 디스플레이되는 중인 콘텐츠의 타입)에 기초한다. 일부 실시예들에서, 전자 디바이스는 선택적으로 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼 등)을 판정한다. 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입(예컨대, 스포츠 이벤트)이라는 판정에 따라, 전자 디바이스는 선택적으로 시간 기반 간격이 되도록(예컨대, 5분, 10분, 또는 20분만큼 이격되도록) 각자의 콘텐츠 아이템에서의 제3 위치와 제4 위치를 이격시키는 제2 간격을 선택한다. 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입(예컨대, 영화)이라는 판정에 따라, 전자 디바이스는 선택적으로 콘텐츠 기반 간격이 되도록(예컨대, 각자의 콘텐츠 아이템의 콘텐츠, 예를 들어 장면들, 챕터들, 및/또는 광고방송들의 시작/끝에 기초하여 소정 시간량만큼 이격되도록) 각자의 콘텐츠 아이템에서의 제3 위치와 제4 위치를 이격시키는 제2 간격을 선택한다.
일부 실시예들에서, 내비게이션 바(830)는 내비게이션 바 내의 복수의 이미지들(814, 816, 818, 820, 822) 상에 오버레이되는 현재 위치 표시자(826)(예컨대, 내비게이션 바 내의 이미지들 위로 그리고 그들 사이에서 이동하는 선(line)과 같은 표시자)를 추가로 포함한다. 내비게이션 바(830) 내의 복수의 이미지들 각각에 대한 현재 위치 표시자(826)의 상대적 위치는 선택적으로 각자의 콘텐츠 아이템에서의 현재 위치에 대응한다(예컨대, 현재 위치 표시자가 내비게이션 바 내의 이미지 앞인 경우, 각자의 콘텐츠 아이템에서의 현재 위치는 그 이미지에 대응하는 위치 앞이다). 일부 실시예들에서, 내비게이션 바(830) 내의 복수의 이미지들 각각에 대한 현재 위치 표시자(826)의 상대적 위치는, 추가로 또는 대안으로, 사용자 인터페이스의 영역(828)에 디스플레이된 각자의 콘텐츠 아이템에서의 현재 위치의 표현에 대응한다(예컨대, 사용자 인터페이스의 영역(828)에 디스플레이된 각자의 콘텐츠 아이템에서의 현재 위치의 표현은 각자의 콘텐츠 아이템의 현재 위치로부터의 콘텐츠를 보여준다).
일부 실시예들에서, 전자 디바이스는, 선택적으로, 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면) 상에서 검출된 입력에 응답하여 각자의 콘텐츠 아이템에 걸쳐서 스크롤링(또는 "스크럽")한다. 일부 실시예들에서, 사용자 인터페이스가 디스플레이 디바이스(450) 상에 디스플레이되는 동안, 전자 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면) 상에서 검출된 접촉(예컨대, 손가락 접촉 또는 스타일러스 접촉)을 포함하는 제1 입력의 표시를 수신한다. 접촉을 검출하는 것은, 선택적으로, 접촉의 이동을 검출하는 것을 포함한다(예컨대, 제1 입력이 선택적으로 제스처 입력, 예컨대 터치 감응형 표면 상에서의 수평방향 스와이프이다). 전자 디바이스는 선택적으로 접촉의 이동에 따라 내비게이션 바(830)에서 현재 위치 표시자(826)를 이동시킨다(예컨대, 제1 입력이 우측으로의 스와이프인 경우, 현재 위치 표시자는 내비게이션 바에서 우측으로 이동된다). 현재 위치 표시자(826)를 이동시키는 것은, 선택적으로, 접촉의 이동에 따라 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치를 변경하는 것(예컨대, 복수의 이미지들이 정지 상태로 남아 있으므로 내비게이션 바 내의 복수의 이미지들 위로 그리고 이들에 걸쳐서 현재 위치 표시자를 이동시키는 것), 및 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치에 따라 각자의 콘텐츠 아이템에서의 현재 위치 및 각자의 콘텐츠 아이템에서의 현재 위치의 표현(예컨대, 사용자 인터페이스의 영역(828)에 디스플레이된 표현)을 업데이트하는 것(예컨대, 사용자 인터페이스의 영역(828)에 디스플레이된 각자의 콘텐츠 아이템의 비디오 및/또는 이미지(들)를 업데이트하는 것을 비롯하여, 현재 위치 표시자의 위치에 기초하여 각자의 콘텐츠 아이템에 걸쳐서 스크럽하는 것)을 포함한다.
도 8d 및 도 8e에 도시된 바와 같이, 일부 실시예들에서, 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)이 대응하는 각자의 콘텐츠 아이템에서의 위치들 사이의 시간 간격은 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼, 스포츠 이벤트 등)에 기초한다. 일부 실시예들에서, 전자 디바이스는 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼 등)을 판정한다. 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입(예컨대, 도 8d에서의 텔레비전 브로드캐스트와 같은 스포츠 이벤트의 브로드캐스트)이라는 판정에 따라, 전자 디바이스는 선택적으로, 제1 간격(예컨대, 소정 시간량)만큼 이격된, 각자의 콘텐츠 아이템에서의 제1 위치 및 제2 위치를 선택한다. 일부 실시예들에서, 제1 간격은 시간 기반 간격이고(예컨대, 내비게이션 바(830) 내의 이미지들(814, 816, 818, 820, 822)은 각자의 콘텐츠 아이템으로부터의 이미지들이고, 각자의 콘텐츠 아이템에서의 그의 위치들은 예를 들어, 도 8d에 도시된 바와 같이, 5분, 10분, 또는 20분 간격들만큼 이격됨), 내비게이션 바 내의 복수의 이미지들 중 제1 이미지(예컨대, 이미지(814))는 각자의 콘텐츠 아이템에서의 제1 위치에 대응하고, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지(예컨대, 이미지(816))는 각자의 콘텐츠 아이템에서의 제2 위치에 대응한다.
각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입(예컨대, 도 8e에서의 영화와 같은 영화)이라는 판정에 따라, 전자 디바이스는 선택적으로, 전술된 제1 간격과는 상이한 제2 간격(예컨대, 소정 시간량)만큼 이격된, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 선택한다. 일부 실시예들에서, 제2 간격은 콘텐츠 기반 간격이고(예컨대, 내비게이션 바(830) 내의 이미지들(814, 816, 818, 820, 822)은 각자의 콘텐츠 아이템으로부터의 이미지들이고, 각자의 콘텐츠 아이템에서의 그의 위치들은 도 8e에 도시된 바와 같이 영화 내의 장면들, 영화 내의 챕터들, 및/또는 광고방송들의 시작/끝과 같은 콘텐츠 기반 간격들만큼 이격됨), 내비게이션 바 내의 복수의 이미지들 중 제1 이미지(예컨대, 이미지(814))는 각자의 콘텐츠 아이템에서의 제3 위치에 대응하고, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지(예컨대, 이미지(816))는 각자의 콘텐츠 아이템에서의 제4 위치에 대응한다.
도 8f는 내비게이션 바 내의 인접 콘텐츠 아이템 내로 스크롤링하기 위한 예시적인 동작을 도시한다. 전술된 바와 같이, 전자 디바이스는, 선택적으로, 터치 감응형 표면(451) 상에서 검출된 입력에 응답하여, 내비게이션 바(830) 및 대응하는 각자의 콘텐츠 아이템에 걸쳐서 스크롤링한다. 예를 들어, 입력은, 선택적으로, 도시된 바와 같이, 접촉(801) 및 접촉의 이동을 포함한다. 도시된 예에서, 입력은 수평방향 스와이프 입력이지만, 본 발명의 범주는 그렇게 제한되지 않는다.
궁극적으로, 내비게이션 바(830)에 걸쳐서 스크롤링하는 것은, 선택적으로, 각자의 콘텐츠 아이템의 끝에 도달하는 결과를 가져오고, 따라서, 현재 위치 표시자(826)는, 선택적으로, 각자의 콘텐츠 아이템으로부터 이미지들(814, 816, 818, 820, 822)을 포함하는 내비게이션 바의 일부분의 끝에 도달한다. 입력을 추가로 스크롤링하는 것이 터치 감응형 표면(451) 상에서 검출된 경우, 현재 위치 표시자(826)는, 선택적으로, 인접 콘텐츠 아이템(824)의 표현을 포함하는 내비게이션 바(830)의 일부분 내로 그 위를 가로지른다. 이에 응답하여, 스크롤링하는 것은, 선택적으로, 하기에 기술되는 바와 같이, 인접 콘텐츠 아이템(824)의 표현에 대응하는 콘텐츠 아이템에 걸쳐서 계속된다. 따라서, 본 발명의 내비게이션 바는 사용자가 현재 콘텐츠 아이템에 걸쳐서 스크롤링하게 하고, 또한, 현재 콘텐츠 아이템에 인접한 하나 이상의 콘텐츠 아이템들(예컨대, 이전/다음 텔레비전 에피소드들) 내로 스크롤링하게 한다.
상기의 스크롤링을 가능하게 하기 위해, 일부 실시예들에서, 경계(threshold)는 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)을 내비게이션 바 내의 제1 인접 콘텐츠 아이템(824)의 표현으로부터 이격시킨다(예컨대, 복수의 이미지들과 제1 인접 콘텐츠 아이템의 표현 사이의 이격의 라인 또는 다른 시각적 표시). 전자 디바이스는, 선택적으로, 현재 위치 표시자(826)가 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)로부터 내비게이션 바 내의 제1 인접 콘텐츠 아이템(824)의 표현까지 경계를 가로지른 것(예컨대, 현재 위치 표시자는 완전히 복수의 이미지들에 걸쳐서 그리고 제1 인접 콘텐츠 아이템의 표현을 포함하는 내비게이션 바의 일부분 내로 이동한 것)으로 판정한다.
도 8g는 내비게이션 바 내의 인접 콘텐츠 아이템 내로 스크롤링하는 것으로부터 비롯된 예시적인 동작을 도시한다. 전술된 바와 같이, 현재 위치 표시자(826)가 인접 콘텐츠 아이템(824)의 표현 내로 그 위를 가로질렀을 때, 내비게이션 바(830)는, 선택적으로, 인접 콘텐츠 아이템이 이제 현재 콘텐츠 아이템이 되었다는 것을 반영하도록 재구성된다.
이러한 재구성을 달성하기 위해, 일부 실시예들에서, 현재 위치 표시자(826)가 내비게이션 바(830) 내의 복수의 이미지들(814, 816, 818, 820, 822)로부터 내비게이션 바 내의 제1 인접 콘텐츠 아이템(824)의 표현까지 경계를 가로질렀다는 판정에 따라, 전자 디바이스는, 내비게이션 바에서, 각자의 콘텐츠 아이템에서의 상이한 위치들에 대응하는 복수의 이미지들(도 8f에서의 이미지들(814, 816, 818, 820, 822))을 제1 인접 콘텐츠 아이템에서의 상이한 위치들에 대응하는 제2 복수의 이미지들(도 8g에서의 이미지(834, 836, 838, 840, 842))로 대체한다(예컨대, 제1 인접 콘텐츠 아이템은 이제 "현재 선택되어 있는" 콘텐츠 아이템이 되고, 이로부터의 이미지들이 내비게이션 바를 차지한다). 전자 디바이스는, 선택적으로, 내비게이션 바(830) 내의 제2 복수의 이미지들(834, 836, 838, 840, 842)의 각각의 이미지에 대한 현재 위치 표시자(826)의 상대적 위치를 제1 인접 콘텐츠 아이템에서의 현재 위치에 대응시키도록 설정한다(예컨대, 전자 디바이스는, 현재 위치 표시자가 이전 콘텐츠 아이템 내로 스크롤링되었는지 아니면 다음 콘텐츠 아이템 내로 스크롤링되었는지에 따라, 현재 위치 표시자를, 도 8g에 도시된 바와 같이 제1 인접 콘텐츠 아이템의 시작으로 또는 끝으로 재위치시킨다).
일부 실시예들에서, 전자 디바이스는, 내비게이션 바(830)에서, 복수의 콘텐츠 아이템들 중, 제1 인접 콘텐츠 아이템(824)(도 8f)의 표현을 제2 인접 콘텐츠 아이템(844)(도 8g)의 표현으로 대체한다 - 제1 인접 콘텐츠 아이템이 되도록 사용되는 것이 현재 콘텐츠 아이템이 되었기 때문에, 전자 디바이스는, 선택적으로, 제1 인접 콘텐츠 아이템에 인접한, 각자의 콘텐츠 아이템과는 상이한 콘텐츠 아이템을 판정할 필요가 있다. 다시 말해, 전자 디바이스는, 선택적으로, 도 8f에서, 제1 인접 콘텐츠 아이템(824)에 대한 다음 콘텐츠 아이템(예컨대, 제2 인접 콘텐츠 아이템)을 판정한다.
일부 실시예들에서, 제2 인접 콘텐츠 아이템(예컨대, 제1 인접 콘텐츠 아이템에 인접한 콘텐츠 아이템)은 각자의 콘텐츠 아이템과는 상이하고, 제2 인접 콘텐츠 아이템은 해당 시퀀스의 콘텐츠 아이템들에서 제1 인접 콘텐츠 아이템에 인접해 있다.
전자 디바이스는, 선택적으로, 사용자 인터페이스에서, 사용자 인터페이스의 영역(828)에 디스플레이되었던 각자의 콘텐츠 아이템의 현재 위치의 표현을 사용자 인터페이스의 영역(828) 내의 제1 인접 콘텐츠 아이템에서의 현재 위치의 표현으로 대체한다(예컨대, 전자 디바이스는, 선택적으로, 각자의 오리지널 콘텐츠 아이템으로부터의 이미지/비디오 대신, 제1 인접 콘텐츠 아이템에서의 현재 위치로부터의 이미지/비디오를 디스플레이하도록 사용자 인터페이스를 업데이트한다). 이러한 방식으로, 전자 디바이스는 하나의 콘텐츠 아이템으로부터 인접 콘텐츠 아이템으로 스크롤링하는 것을 가능하게 한다. 상기의 논의가 다음 콘텐츠 아이템 내로 스크롤링하는 것에 포커스를 두었지만, 상기에 개시된 동작들은 유사하게 이전 콘텐츠 아이템 내로 스크롤링하는 것에 적용되고, 그 상세사항들은 간결성을 위해 여기서는 생략된다.
도 9a 내지 도 9g는, 일부 실시예들에 따른, 콘텐츠 내비게이션 바를 제시하는 방법(900)을 도시한 흐름도들이다. 방법(900)은, 선택적으로, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스를 비롯한 전자 디바이스, 예컨대 도 5를 참조하여 전술된 바와 같은 디바이스(500)에서 수행된다. 방법(900)에서의 일부 동작들은 선택적으로 조합되고/되거나 일부 동작들의 순서는 선택적으로 변경된다.
하기에 기술되는 바와 같이, 방법(900)은 디바이스가 선택적으로 사용자 인터페이스에 콘텐츠 내비게이션 바를 제시하는 방식들을 제공한다. 방법은 디바이스 상의 사용자 인터페이스와 상호작용할 때 사용자에 대한 인지적 부담을 감소시키며, 이에 의해 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들의 경우, 사용자 인터페이스와의 사용자 상호작용의 효율성을 증가시키는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 하나 이상의 프로세서들 및 메모리를 갖는 전자 디바이스(예컨대, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스, 예컨대 도 5에서의 디바이스(500))는 복수의 콘텐츠 아이템들(예컨대, 영화들, 텔레비전 쇼들, 애플리케이션들 등)을 포함하는 콘텐츠 아이템들의 시퀀스를 식별하는 정보를 획득한다(902). 예를 들어, 전자 디바이스는, 선택적으로, 도 8a에서 N개의 콘텐츠 아이템들의 시퀀스(802)를 식별하는 정보를 획득한다. 일부 실시예들에서, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 시퀀스를 식별하는 정보를 획득하는 것은 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼 등)을 판정하는 것(906)을 포함한다(904). 일부 실시예들에서, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 시퀀스를 식별하는 정보를 획득하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 제1 시퀀스를 식별하는 것(908)을 포함한다(예컨대, 각자의 콘텐츠 아이템은 선택적으로 도 8a에서 콘텐츠 아이템 2(806)이다)(904). 일부 실시예들에서, 제1 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 바로 선행한다(예컨대, 제1 콘텐츠 아이템은 선택적으로 도 8a에서 콘텐츠 아이템 1(804)이다)(910). 일부 실시예들에서, 제2 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 바로 후속한다(예컨대, 제2 콘텐츠 아이템은 선택적으로 도 8a에서 콘텐츠 아이템 3(808)이다)(912). 예를 들어, 각자의 콘텐츠 아이템의 콘텐츠 타입이 텔레비전 시리즈인 경우, 각자의 콘텐츠 아이템은 선택적으로 텔레비전 시리즈의 에피소드이고, 제1 콘텐츠 아이템은 선택적으로 텔레비전 시리즈에서의 직전 에피소드이고, 제2 콘텐츠 아이템은 선택적으로 텔레비전 시리즈에서의 직후 에피소드이다.
일부 실시예들에서, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 시퀀스를 식별하는 정보를 획득하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 콘텐츠 아이템들의 제1 시퀀스와는 상이한, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 제2 시퀀스를 식별하는 것(914)을 포함한다(904). 일부 실시예들에서, 제1 콘텐츠 아이템 및 제2 콘텐츠 아이템과는 상이한 제3 콘텐츠 아이템은 콘텐츠 아이템들의 제2 시퀀스 내의 각자의 콘텐츠 아이템에 인접해 있다(916). 예를 들어, 각자의 콘텐츠 아이템의 콘텐츠 타입이 텔레비전 브로드캐스트인 경우, 각자의 콘텐츠 아이템은 선택적으로 소정 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이고, 제1 콘텐츠 아이템은 선택적으로 직전 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이고, 제2 콘텐츠 아이템은 선택적으로 직후 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이다.
일부 실시예들에서, 복수의 콘텐츠 아이템들로부터의 각자의 콘텐츠 아이템이 현재 선택되어 있는 콘텐츠 아이템(예컨대, 디스플레이 디바이스 상에서 사용자에게로의 프레젠테이션을 위해 선택된 콘텐츠 아이템)인 동안, 디바이스는 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성한다(918). 일부 실시예들에서, 사용자 인터페이스는 각자의 콘텐츠 아이템에서의 현재 위치의 표현(예컨대, 재생 중인 콘텐츠의 대형 버전)(922)을 포함한다(920). 각자의 콘텐츠 아이템에서의 현재 위치의 이러한 표현은, 선택적으로, 예를 들어 도 8b에서의 사용자 인터페이스의 영역(828)에서 제공된다.
일부 실시예들에서, 사용자 인터페이스는 각자의 콘텐츠 아이템에서의 상이한 위치들에 대응하는 복수의 이미지들(예컨대, 도 8b에서의 이미지들(814, 816, 818, 812, 822)) 및 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 인접해 있는 복수의 콘텐츠 아이템들 중의 제1 인접 콘텐츠 아이템의 표현(예컨대, 도 8b에서의 표현(812 또는 824))을 포함하는 내비게이션 바(예컨대, 도 8b에서의 내비게이션 바(830))(924)를 포함한다(예컨대, 내비게이션 바는 텔레비전 시리즈에서의 제2 에피소드(각자의 콘텐츠 아이템)로부터의 이미지들 및 텔레비전 시리즈에서의 제1 에피소드(제1 인접 콘텐츠 아이템)의 표현을 포함한다)(920). 일부 실시예들에서, 내비게이션 바에서의 제1 인접 콘텐츠 아이템의 표현은 제1 인접 콘텐츠 아이템에서의 위치로부터의 이미지를 포함한다(예컨대, 도 8b에서의 표현(824)은 텔레비전 시리즈에서 이전 에피소드로부터의 스크린샷을 포함한다)(926). 일부 실시예들에서, 내비게이션 바는 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 인접해 있는, 복수의 콘텐츠 아이템들 중 제2 인접 콘텐츠 아이템(예컨대, 다음 콘텐츠 아이템)의 표현을 추가로 포함하고(예컨대, 내비게이션 바는 도 8b에서의 표현들(812, 824)과 같은 이전 콘텐츠 아이템 및 다음 콘텐츠 아이템의 표현들을 포함하고), 제1 인접 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 선행하고(예컨대, 제1 인접 콘텐츠 아이템은 텔레비전 시리즈에서 현재 에피소드 이전의 에피소드, 또는 현재 텔레비전 프로그램 이전의 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이고), 제2 인접 콘테츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 후속한다(예컨대, 제2 인접 콘텐츠 아이템은 텔레비전 시리즈에서의 현재 에피소드에 후속하는 에피소드, 또는 현재 텔레비전 프로그램에 후속하는 타임 슬롯 동안의 텔레비전 프로그램 브로드캐스트이다)(928).
일부 실시예들에서, 내비게이션 바는 내비게이션 바(예컨대, 이미지들 위에 그리고 그들 사이에서 이동하는 라인) 내의 복수의 이미지들 상에 오버레이된 현재 위치 표시자(예컨대, 현재 위치 표시자(826))를 추가로 포함하고, 내비게이션 바 내의 복수의 이미지들 각각에 대한 현재 위치 표시자의 상대적 위치는 각자의 콘텐츠 아이템에서의 현재 위치(예컨대, 현재 위치 표시자가 내비게이션 바 내의 이미지 앞에 있는 경우, 각자의 콘텐츠 아이템에서의 현재 위치는 이미지에 대응하는 위치 앞에 있음)(932), 및 각자의 콘텐츠 아이템에서의 현재 위치의 표현(예컨대, 각자의 콘텐츠 아이템에서의 현재 위치의 표현은 현재 위치로부터의 콘텐츠를 보여줌)(934)에 대응한다(930).
일부 실시예들에서, 각자의 콘텐츠 아이템의 표현은 사용자 인터페이스 내의 내비게이션 바보다 더 크다(예컨대, 각자의 콘텐츠 아이템의 비디오(도 8b에서의 영역(828) 내에 보여짐)는 상대적으로 크지만, 내비게이션 바 내의 이미지들(도 8b 내의 이미지들(814, 816, 818, 820, 822))은 상대적으로 작다)(936). 일부 실시예들에서, 각자의 콘텐츠 아이템의 표현은 각자의 콘텐츠 아이템으로부터의 비디오를 포함하는데, 비디오는 내비게이션 바 내의 복수의 이미지들을 포함한다(938). 일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들은 각자의 콘텐츠 아이템으로부터의 복수의 정지 이미지들을 포함한다(940).
일부 실시예들에서, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성하는 것은 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼 등)을 판정하는 것(944)을 포함한다(942).
일부 실시예들에서, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템에서의, 제1 간격(예컨대, 소정량의 시간)만큼 이격된 제1 위치 및 제2 위치를 선택하는 것(946)을 포함한다(942). 일부 실시예들에서, 제1 간격은 시간 기반 간격이다(예컨대, 내비게이션 바 내의 이미지들(예컨대, 도 8b에서의 이미지들(814, 816, 818, 820, 822))은 각자의 콘텐츠 아이템으로부터의 이미지들이고, 각자의 콘텐츠 아이템에서의 그의 위치들은 예를 들어 5분, 10분, 또는 20분 간격만큼 이격된다)(948). 일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제1 이미지는 각자의 콘텐츠 아이템에서의 제1 위치에 대응한다(예컨대, 도 8b에서의 이미지(814)는 선택적으로 각자의 콘텐츠 아이템에서의 제1 위치에 대응한다)(950). 일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지는 각자의 콘텐츠 아이템에서의 제2 위치에 대응한다(예컨대, 도 8b에서의 이미지(816)는 선택적으로 각자의 콘텐츠 아이템에서의 제1 위치에 대응한다)(952).
일부 실시예들에서, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템에서의, 제1 간격과는 상이한 제2 간격만큼 이격된 제3 위치 및 제4 위치를 선택하는 것(954)을 포함한다(942). 일부 실시예들에서, 제2 간격은 콘텐츠 기반 간격이다(예컨대, 내비게이션 바 내의 이미지들(예컨대, 도 8b에서의 이미지들(814, 816, 818, 820, 822))은 각자의 콘텐츠 아이템으로부터의 이미지들이고, 각자의 콘텐츠 아이템에서의 그의 위치들은 장면들, 챕터들, 및/또는 광고방송들의 시작/끝과 같은 콘텐츠 기반 간격들에 의해 이격된다)(956). 일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제1 이미지는 각자의 콘텐츠 아이템에서의 제3 위치에 대응한다(958). 일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지는 각자의 콘텐츠 아이템에서의 제4 위치에 대응한다(960). 일부 실시예들에서, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성한 후, 디바이스는 디스플레이 디바이스에 사용자 인터페이스를 제공한다(962).
일부 실시예들에서, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 전자 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면) 상에서 검출된 접촉(예컨대, 손가락 접촉 또는 스타일러스 접촉)을 포함하는 제1 입력의 표시를 수신한다(964). 일부 실시예들에서, 디바이스는 입력 디바이스를 포함하고, 입력 디바이스와 디스플레이 디바이스는 별개의 디바이스들이다(966). 일부 실시예들에서, 접촉을 검출하는 것은 접촉의 이동을 검출하는 것을 포함한다(예컨대, 제1 입력은 터치 감응형 표면 상에서의 수평방향 스와이프와 같은 제스처 입력, 예컨대 도 8f에 도시된 바와 같은 접촉(801)의 이동이다)(968). 일부 실시예들에서, 디바이스는 접촉의 이동에 따라 내비게이션 바에서 현재 위치 표시자를 이동시킨다(예컨대, 제1 입력이 우측으로의 스와이프인 경우, 현재 위치 표시자는 도 8f에 도시된 바와 같이 내비게이션 바에서 우측으로 이동된다)(970).
일부 실시예들에서, 현재 위치 표시자를 이동시키는 것은 접촉의 이동에 따라 내비게이션 바 내의 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치를 변경하는 것(예컨대, 복수의 이미지들이 정지 상태로 남아 있음에 따라 내비게이션 바 내의 복수의 이미지들 위로 그리고 이들을 통과하게 현재 위치 표시자를 이동시키는 것)(974)을 포함한다(972). 일부 실시예들에서, 현재 위치 표시자를 이동시키는 것은 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치에 따라 각자의 콘텐츠 아이템에서의 현재 위치 및 각자의 콘텐츠 아이템에서의 현재 위치의 표현을 업데이트하는 것(예컨대, 예를 들어 도 8f에서 사용자 인터페이스에서의 영역(828)에 디스플레이된 각자의 콘텐츠 아이템의 비디오 및/또는 이미지를 업데이트하는 것을 비롯한, 현재 위치 표시자의 위치에 기초하여 각자의 콘텐츠 아이템에 걸쳐서 스크럽하는 것)(976)을 포함한다(972).
일부 실시예들에서, 경계는 내비게이션 바 내의 복수의 이미지들을 내비게이션 바 내의 제1 인접 콘텐츠 아이템의 표현과 이격시킨다(예컨대, 도 8f에 도시된 바와 같은, 복수의 이미지들과 제1 인접 콘텐츠 아이템의 표현 사이의 이격의 라인 또는 다른 시각적 표시)(978). 일부 실시예들에서, 디바이스는 현재 위치 표시자가 내비게이션 바 내의 복수의 이미지들로부터 내비게이션 바 내의 제1 인접 콘텐츠 아이템의 표현까지 경계를 가로지른 것(예컨대, 현재 위치 표시자는 도 8f에 도시된 바와 같이 완전히 복수의 이미지들에 걸쳐서 그리고 제1 인접 콘텐츠 아이템의 표현 상으로 이동했음)으로 판정한다(980).
일부 실시예들에서, 현재 위치 표시자가 경계를 가로질렀다는 판정에 따라(982), 디바이스는, 내비게이션 바에서, 각자의 콘텐츠 아이템에서의 상이한 위치들에 대응하는 복수의 이미지들을 제1 인접 콘텐츠 아이템에서의 상이한 위치들에 대응하는 제2 복수의 이미지들로 대체한다(예컨대, 제1 인접 콘텐츠 아이템은 이제 "현재 선택되어 있는" 콘텐츠 아이템이 되고, 이로부터의 이미지들이 내비게이션 바를 차지한다)(984). 예를 들어, 도 8f에서 현재 위치 표시자(826)가 표현(824)까지 경계를 가로지른 후, 이미지들(814, 816, 818, 820, 822)은, 선택적으로, 도 8g에 도시된 바와 같이, 표현(824)과 연관된 콘텐츠 아이템에서의 상이한 위치들로부터의 이미지들로 대체된다. 이제, 표현(832)은 선택적으로 각자의 콘텐츠 아이템과 연관되고, 이미지들(834, 836, 838, 840, 842)은 선택적으로 제1 인접 콘텐츠 아이템과 연관된다. 일부 실시예들에서, 디바이스는 내비게이션 바 내의 제2 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치를 제1 인접 콘텐츠 아이템에서의 현재 위치에 대응시키도록 설정한다(예컨대, 디바이스는, 도 8g에 도시된 바와 같이, 적절하게는, 현재 위치 표시자를 제1 인접 콘텐츠 아이템의 시작 또는 끝으로 재위치시킨다)(986).
일부 실시예들에서, 디바이스는, 내비게이션 바에서, 제1 인접 콘텐츠 아이템의 표현을 복수의 콘텐츠 아이템들 중 제2 인접 콘텐츠 아이템의 표현으로 대체한다(예컨대, 이제, 디바이스는, 예를 들어, 각자의 콘텐츠 아이템과는 상이한, 제1 인접 콘텐츠 아이템에 인접해 있는 콘텐츠 아이템을 판정하고, 도 8g에서 표현(844)으로서 내비게이션 바 내에 제2 인접 콘텐츠 아이템의 표현을 위치시킨다)(988). 일부 실시예들에서, 제2 인접 콘텐츠 아이템은 각자의 콘텐츠 아이템과는 상이하다(990). 일부 실시예들에서, 제2 인접 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 제1 인접 콘텐츠 아이템에 인접해 있다(992).
일부 실시예들에서, 디바이스는, 사용자 인터페이스에서, 각자의 콘텐츠 아이템의 현재 위치의 표현을 제1 인접 콘텐츠 아이템에서의 현재 위치의 표현으로 대체한다(예컨대, 디바이스는 사용자 인터페이스를 업데이트하여, 예를 들어, 도 8g에서의 영역(828)에, 각자의 콘텐츠 아이템으로부터의 이미지 대신, 제1 인접 콘텐츠 아이템에서의 현재 위치로부터의 이미지를 디스플레이한다)(994).
일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제1 이미지는 각자의 콘텐츠 아이템에서의 제1 위치에 대응한다(996). 일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지는 각자의 콘텐츠 아이템에서의 제2 위치에 대응하며, 각자의 콘텐츠 아이템에서의 제1 위치와 각자의 콘텐츠 아이템에서의 제2 위치는 제1 간격(예컨대, 소정량의 시간, 예를 들어, 5분 또는 10분)만큼 이격된다(998).
일부 실시예들에서, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스는 디바이스의 터치 감응형 표면 상에서 검출된 접촉을 포함하는 제1 입력의 표시를 수신하는데, 여기서 접촉을 검출하는 것은 접촉의 이동(예컨대, 터치 감응형 표면 상에서의 수직방향 스와이프)을 검출하는 것을 포함한다(998-1).
일부 실시예들에서, 접촉의 이동에 따라, 디바이스는 제1 간격과는 상이한(예컨대, 제1 간격 초과인 또는 제1 간격 미만인) 제2 간격만큼 이격된, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 선택한다(998-2). 일부 실시예들에서, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 선택하는 것은 각자의 콘텐츠 아이템의 콘텐츠 타입(예컨대, 영화, 텔레비전 쇼 등)을 판정하는 것(998-4)을 포함한다(998-3). 일부 실시예들에서, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 선택하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 시간 기반 간격이 되도록(예컨대, 5분, 10분, 또는 20분만큼 이격되도록) 각자의 콘텐츠 아이템에서의 제3 위치와 제4 위치를 이격시키는 제2 간격을 선택하는 것(998-5)을 포함한다(998-3). 일부 실시예들에서, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 선택하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 콘텐츠 기반 간격이 되도록(예컨대, 각자의 콘텐츠 아이템의 콘텐츠, 예를 들어 장면들, 챕터들, 및/또는 광고방송들의 시작/끝에 기초하여, 소정량의 시간만큼 이격되도록) 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 이격시키는 제2 간격을 선택하는 것(998-6)을 포함한다(998-3).
일부 실시예들에서, 디바이스는 내비게이션 바 내의 제1 이미지를 제3 이미지로, 그리고 내비게이션 바 내의 제2 이미지를 제4 이미지로 대체한다(998-8).
도 9a 내지 도 9g에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 1100, 1300, 1500))과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 9a 내지 도 9g와 관련하여 전술된 방법(900)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다. 예를 들어, 방법(900)을 참조하여 전술된 사용자 인터페이스, 디스플레이 디바이스, 및 콘텐츠 아이템들은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 1100, 1300, 1500))을 참조하여 본 명세서에 기술된 사용자 인터페이스들, 디스플레이 디바이스들, 및 콘텐츠 아이템들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
전술된 정보 프로세싱 방법들에서의 동작들은 선택적으로 (예컨대, 도 1a, 도 3, 및 도 5와 관련하여 전술된 바와 같은) 범용 프로세서들 또는 애플리케이션 특정 칩들과 같은 정보 프로세싱 장치 내의 하나 이상의 기능 모듈들을 구동시킴으로써 구현된다.
도 9a 내지 도 9g를 참조하여 전술된 동작들은, 선택적으로, 도 1a 및 도 1b에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 획득 동작(902), 생성 동작(918), 및 제공 동작 (962)이, 선택적으로, 이벤트 분류기(170), 이벤트 인식기(180), 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각자의 이벤트 인식기(180)는 이벤트 정보를 각자의 이벤트 정의(186)와 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상에서의 객체의 선택과 같은 사전정의된 이벤트 또는 서브이벤트에 대응하는지 여부를 판정한다. 각자의 사전정의된 이벤트 또는 서브이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는, 선택적으로, 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 개별 GUI 업데이터(178)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
사용자 인터페이스에서의 사전정의된 이동
전자 디바이스에 의해 제시된 사용자 인터페이스와 상호작용할 때, 사용자는 때때로, 예를 들어 사용자 인터페이스에서 소정량만큼 커서를 이동시키도록 의도할 수 있지만, 우발적으로, 예를 들어 터치 감응형 표면 상의 사용자의 입력 부정확성으로 인해 커서를 그보다 더 또는 그보다 덜 이동시킬 수 있다. 따라서, 전자 디바이스가, 디바이스와의 사용자 경험을 향상시키기 위해 입력 디바이스(예컨대, 터치 감응형 표면) 상에서 검출된 소정 입력들에 응답하여 사전정의된 양만큼(예컨대, 사용자 인터페이스 내의 단일 요소에 의해) 사용자 인터페이스에서 커서를 이동시키기 위한 메커니즘들을 제공하는 것이 유익할 수 있다. 하기에 기술되는 실시예들은 그러한 커서 이동을 허용하도록 하는 방식들을 제공한다. 디바이스와의 상호작용들을 향상시키는 것은 동작들을 수행하기 위해 사용자가 필요로 하는 시간의 양을 감소시키고, 이에 따라 디바이스의 전력 사용을 감소시키고 배터리 작동형 디바이스들에 대한 배터리 수명을 증가시킨다.
도 10a 내지 도 10d는, 본 발명의 일부 실시예들에 따른, 전자 디바이스가 사용자 인터페이스에서 커서를 사전정의된 양만큼 이동시키는 예시적인 방식들을 도시한다. 이들 도면들에서의 실시예들은, 도 11a 내지 도 11d를 참조하여 기술되는 프로세스들을 포함하는, 하기에 기술되는 프로세스들을 예시하는 데 사용된다.
도 10a는 예시적인 사용자 인터페이스를 도시한다. 디스플레이(450)는, 선택적으로, 다양한 사용자 인터페이스 요소들(1002, 1004, 1006)을 포함하는 사용자 인터페이스를 디스플레이한다. 사용자 인터페이스는, 또한, 선택적으로, 복수의 사용자 인터페이스 요소들(예컨대, 요소들(1002, 1004, 1006)) 중 현재 선택된 사용자 인터페이스 요소(예컨대, 요소(1002))의 표시를 제공하는 선택 표시자(1008)를 포함한다. 선택 표시자(1008)는, 사용자 인터페이스 내의 시각적으로 별개인 객체로서 도시되어 있지만, 선택적으로, 현재 선택된 사용자 인터페이스 요소 주위에서의 빛남, 현재 선택된 사용자 인터페이스 요소 주위의 하이라이트, 또는 현재 선택된 사용자 인터페이스 요소 주위의 외곽선과 같은, 현재 선택된 사용자 인터페이스 요소의 표시를 제공하는 무엇이다.
전술된 바와 같이, 일부 환경에서, 사용자는 선택 표시자(1008)를 요소(1002)로부터 다른 요소(예컨대, 요소(1004))로 이동시키기를 원한다. 그렇게 하기 위해, 하기에 기술되는 바와 같이, 사용자는, 선택적으로, 터치 감응형 표면(451) 상에 입력을 제공한다.
도 10b는 터치 감응형 표면(451) 상에서 검출된 입력에 응답하여 선택 표시자(1008)의 예시적인 이동을 도시한다. 선택 표시자(1008)의 이동은, 선택적으로, 터치 감응형 표면(451) 상에서 검출되는 접촉(1001)을 포함하는 입력에 응답하여 수행된다. 도 10b에 도시된 바와 같이, 일부 실시예들에서, 터치 감응형 표면(451) 상에서 검출된 입력은 수평방향 스와이프이다. 입력은, 선택적으로, 이동 메트릭 - 메트릭은 터치 감응형 표면(451) 상에서 검출된 접촉(1001)이 얼마나 많이 이동하는지에 기초하여 사용자 인터페이스에서 선택 표시자(1008)가 얼마나 많이 이동해야 하는지 표현함 - 에 대한 각자의 값에 대응한다. 일부 실시예들에서, 이동 메트릭은, 선택적으로, 선택 표시자(1008) 이동에 대한 접촉(1001) 이동의 관계에 기초한 메트릭이다. 도 10b에 도시된 바와 같이, 일부 실시예들에서, 터치 감응형 표면(451) 상에서 검출된 접촉(1001)의 이동은 선택 표시자(1008)를 도시된 양만큼 (예컨대, 요소들(1004, 1006) 사이의 사용자 인터페이스에서의 위치로) 이동시키기 위한 이동 메트릭에 대응한다.
그러나, 일부 경우들에 있어서, 터치 감응형 표면(451) 상에서 검출된 입력은, 선택적으로, 선택 표시자(1008)를 이동 메트릭에 의해(예컨대, 단일 사용자 인터페이스 요소에 의해 - 예를 들어, 요소(1002)로부터 요소(1004)로) 특정된 양 이외의 양만큼 이동시키도록 의도되었다. 그러한 경우들을 다루기 위해, 전자 디바이스는, 선택적으로, 특정된 입력들 및/또는 제스처들을 검출한 것에 응답하여, 선택 표시자(1008)를 사전정의된 양만큼 (예컨대, 단일 사용자 인터페이스 요소에 의해) 이동시키도록 하는 능력을 제공한다.
도 10c는 터치 감응형 표면(451) 상에서 입력을 검출한 것에 응답하여 선택 표시자(1008)를 사전정의된 양만큼 이동시키기 위한 예시적인 방식을 도시한다. 터치 감응형 표면(451) 상에서 검출된 입력은, 선택적으로, 도 10b에서 기술된 바와 동일한 입력이지만; 이러한 경우에 있어서, 선택 표시자(1008)는, 선택적으로, 입력의 검출에 응답하여 사전정의된 양만큼 (예컨대, 요소(1002)로부터 요소(1004)로) 이동된다. 일부 실시예들에서, 도시된 바와 같이, 사용자 인터페이스에서 선택 표시자(1008)를 사전정의된 양만큼 이동시키는 것은 복수의 사용자 인터페이스 요소들(예컨대, 요소들(1002, 1004, 1006)) 중 인접 사용자 인터페이스 요소(예컨대, 요소(1004))의 선택을 나타내도록 선택 표시자를 이동시키는 것을 포함한다.
선택 표시자(1008)의 그러한 사전정의된 이동을 가능하게 하기 위해, 제1 입력(예컨대, 터치 감응형 표면(451) 상에서 검출된 입력)의 표시를 수신한 것에 응답하여, 전자 디바이스는, 선택적으로, 제1 입력이 일원적 이동 기준들(예컨대, 충족 시, 사용자 인터페이스에서의 선택 표시자가 사전정의된 양만큼, 예컨대 단일 사용자 인터페이스 요소에 의해, 이동하게 하는 기준들)을 충족시키는지 여부를 판정한다. 제1 입력이 일원적 이동 기준들을 충족시킨다는 판정에 따라, 전자 디바이스는, 선택적으로, 사용자 인터페이스에서 선택 표시자(1008)를 사전정의된 양(예컨대, 선택 표시자 이동 메트릭에 대한 각자의 값에 기초하지 않은 사전정의된 양으로서, 일부 실시예들에서, 이동 메트릭에 대한 각자의 값은, 선택적으로, 사용자 인터페이스에서의 선택 표시자가 사전정의된 양만큼 이동되게 할 값 미만이거나, 또는 사용자 인터페이스에서의 선택 표시자가 사전정의된 양만큼 이동되게 할 값 초과임)만큼 이동시킨다. 제1 입력이 일원적 이동 기준들을 충족시키지 않는다는 판정에 따라, 전자 디바이스는, 선택적으로, 제1 입력과 연관된 이동 메트릭의 각자의 값에 따라 선택 표시자(1008)를 이동시킨다(예컨대, 전자 디바이스는, 도 10b를 참조하여 기술된 바와 같이, 사용자 인터페이스에서의 선택 표시자를 터치 감응형 표면 상에의 접촉의 이동 크기에 의해 정의되는 양만큼 이동시킨다. 일부 실시예들에서, 이는, 선택적으로, 제1 입력이 일원적 이동 기준들을 충족시키는 경우에 선택 표시자가 이동할 사전정의된 양보다 더 많거나, 또는 제1 입력이 일원적 이동 기준들을 충족시키는 경우에 선택 표시자가 이동할 사전정의된 양보다 더 적다).
일부 실시예들에서, 사전정의된 양만큼의 선택 표시자(1008)의 이동은 터치 감응형 표면(451) 상에서 검출된 입력이 "퀵 스와이프" 타입 입력인 경우에 발생한다. 다시 말해, 일부 실시예들에서, 일원적 이동 기준들은, 접촉(1001)의 리프트오프가 접촉의 터치다운의 제1 기간(예컨대, 0.2초, 0.4초, 또는 1초) 내에 검출될 때, 그리고 접촉의 이동이 제1 이동 임계치(예컨대, 0.1 cm, 0.2 cm 또는 0.5 cm) 초과이지만 제2 이동 임계치(예컨대, 1 cm 또는 2 cm) 미만일 때 충족되는 기준을 포함한다. 일부 실시예들에서, 제1 이동 임계치 및 제2 이동 임계치는 사용자 인터페이스 내의 단일 UI 요소에 의해 선택 표시자(1008)를 이동시키기 위해 터치 감응형 표면(451) 상에서 요구되는 접촉 이동에 관하여 정의된다(예컨대, 선택 표시자를 제1 UI 요소로부터 제1 UI 요소에 인접한 제2 UI 요소로 이동시키는 데 터치 감응형 표면 상에서의 접촉의 이동의 1 cm가 요구되는 경우, 제1 이동 임계치는 선택적으로 1 cm의 제1 퍼센티지(예컨대, 1 cm의 10%)이고, 제2 이동 임계치는 선택적으로 1 cm의 제2 퍼센티지(예컨대, 1 cm의 100%)이다).
일부 실시예들에서, 선택 표시자(1008)를 사전정의된 양만큼 이동시키는 것, 및 이동 메트릭의 각자의 값에 따라 선택 표시자를 이동시키는 것, 그리고 이들 양측 모두는 터치 감응형 표면(451) 상에서의 접촉(1001)의 이동 방향에 따라 선택 표시자를 이동시키는 것을 포함한다(예컨대, 터치 감응형 표면 상에서 우측으로의 접촉 이동은, 선택적으로, 사전정의된 양만큼이든 또는 이동 메트릭의 각자의 값만큼이든 선택 표시자를 우측으로 이동시킨다 - 선택적으로, 터치 감응형 표면 상에서의 접촉 이동의 임의의 방향에 대해서도 동일한 사항이 적용된다).
일부 실시예들에서, 복수의 사용자 인터페이스 요소들(1002, 1004, 1006)은 복수의 내비게이션 컬럼들(예컨대, 서로 인접한 복수의 내비게이션 컬럼들로서, 각각의 컬럼은 복수의 수직으로 배열된 선택가능 아이템들, 예컨대 주시할 콘텐츠 아이템들, 론칭할 애플리케이션들 등을 포함함)을 포함하고, 선택 표시자(1008)를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 내비게이션 컬럼으로부터 제1 내비게이션 컬럼에 인접한 제2 내비게이션 컬럼으로 이동시키는 것을 포함한다.
일부 실시예들에서, 복수의 사용자 인터페이스 요소들(1002, 1004, 1006)은 복수의 이미지들을 포함하고, 선택 표시자(1008)를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 이미지로부터 제1 이미지에 인접한 제2 이미지로 이동시키는 것을 포함한다.
일부 실시예들에서, 복수의 사용자 인터페이스 요소들(1002, 1004, 1006)은 복수의 콘텐츠 아이템들(예컨대, 격자형으로 배열되고 각자의 콘텐츠 아이템들에 액세스하도록 선택가능한 영화들, 텔레비전 쇼들, 애플리케이션들, 게임들 등)을 격자형 배열로 포함하고, 선택 표시자(1008)를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 콘텐츠 아이템으로부터 제1 콘텐츠 아이템에 인접한 제2 콘텐츠 아이템으로 이동시키는 것을 포함한다.
도 10d는 터치 감응형 표면(451) 상에서 입력을 검출한 것에 응답하여 선택 표시자(1008)를 사전정의된 양만큼 이동시키기 위한 다른 예시적인 방식을 도시한다. 도 10d에 도시된 바와 같이, 일부 실시예들에서, 선택 표시자(1008)는 터치 감응형 표면(451)의 에지 영역들(1010, 1012, 1014, 1016) 중 하나에서 탭핑 입력(1003)을 검출한 것에 응답하여 사전정의된 양만큼 (예컨대, 단일 사용자 인터페이스 요소에 의해) 이동된다. 예를 들어, 에지 영역(1012)에서 검출된 탭핑은, 선택적으로, 하나의 사용자 인터페이스 요소에 의해 선택 표시자(1008)를 우측으로 이동시킨다. 에지 영역들(1010, 1014, 1016)에서 검출된 탭핑은, 선택적으로, 하나의 사용자 인터페이스 요소에 의해 선택 표시자(1008)를 각각 상측으로, 하측으로, 그리고 좌측으로 이동시키게 된다.
일부 실시예들에서, 일원적 이동 기준들은, 선택적으로, 터치 감응형 표면(451)의 복수의 에지 영역들(예컨대, 영역들(1010, 1012, 1014, 1016))(예컨대, 터치 감응형 표면의 5%, 10%, 또는 20% 상측, 하측, 우측, 및/또는 좌측 외곽면) 중 제1 에지 영역(예컨대, 영역(1012))에서 접촉(1003)이 검출되고, 접촉(예컨대, 탭핑)의 터치다운의 제1 기간(예컨대, 0.1초, 0.3초, 또는 0.5초) 내에 접촉의 리프트오프가 검출되고, 그리고 접촉의 이동이 이동 임계치 미만(예컨대, 0.1 cm, 0.3 cm 또는 0.5 cm 미만)일 때 충족되는 기준을 포함한다. 일부 실시예들에서, 선택 표시자(1008)를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 접촉(1003)이 검출되었던 터치 감응형 표면(451)의 제1 에지 영역(예컨대, 영역(1012))에 대응하는 방향으로 이동시키는 것을 포함한다(예컨대, 터치 감응형 표면의 우측 에지 영역에서의 탭핑은 선택적으로 UI에서 선택 표시자를 사전정의된 양만큼 우측으로 이동시킨다).
도 11a 내지 도 11d는, 일부 실시예들에 따른, 사용자 인터페이스에서 커서를 사전정의된 양만큼 이동시키는 방법(1100)을 도시한 흐름도들이다. 방법(1100)은, 선택적으로, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스를 비롯한 전자 디바이스, 예컨대 도 5를 참조하여 전술된 바와 같은 디바이스(500)에서 수행된다. 방법(1100)에서의 일부 동작들은 선택적으로 조합되고/되거나 일부 동작들의 순서는 선택적으로 변경된다.
하기에 기술되는 바와 같이, 방법(1100)은 특정된 입력들에 응답하여 디바이스가 선택적으로 사용자 인터페이스에서 커서를 사전정의된 양만큼 이동시키는 방식들을 제공한다. 방법은 디바이스 상의 사용자 인터페이스와 상호작용할 때 사용자에 대한 인지적 부담을 감소시키며, 이에 의해 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들의 경우, 사용자 인터페이스와의 사용자 상호작용의 효율성을 증가시키는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 하나 이상의 프로세서들을 갖는 전자 디바이스(예컨대, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스, 예컨대 도 5에서의 디바이스(500))는 디스플레이 디바이스(예컨대, 텔레비전 또는 다른 디스플레이 디바이스) 상에서의 디스플레이를 위해 사용자 인터페이스를 생성한다(1102). 일부 실시예들에서, 사용자 인터페이스는 복수의 사용자 인터페이스 요소들(예컨대, 도 10a에서의 사용자 인터페이스 요소들(1002, 1004, 1006)) 중 현재 선택되어 있는 사용자 인터페이스 요소를 나타내는 선택 표시자(예컨대, 현재 선택되어 있는 사용자 인터페이스 요소 주위의 빛남, 하이라이트, 또는 윤곽선, 예컨대 도 10a에서의 표시자(1008))를 포함한다(1104). 일부 실시예들에서, 복수의 사용자 인터페이스 요소들은 복수의 내비게이션 컬럼들(예컨대, 서로 인접한 복수의 내비게이션 컬럼들로서, 각각의 컬럼은 복수의 수직으로 배열된 선택가능 아이템들, 예컨대 주시할 콘텐츠 아이템들, 론칭할 애플리케이션들 등을 포함함)을 포함한다(1106). 일부 실시예들에서, 복수의 사용자 인터페이스 요소들은 복수의 이미지들을 포함한다(1108). 일부 실시예들에서, 복수의 사용자 인터페이스 요소들은 복수의 콘텐츠 아이템들(예컨대, 격자형으로 배열되고 각자의 콘텐츠 아이템들에 액세스하도록 선택가능한 영화들, 텔레비전 쇼들, 게임들 등)을 격자형 배열로 포함한다(1110).
일부 실시예들에서, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면, 예컨대 터치 감응형 표면(451)) 상에서 검출된 접촉(예컨대, 도 10b에서의 접촉(1001))을 포함하는 제1 입력의 표시를 수신한다(1112). 일부 실시예들에서, 제1 입력은 이동 메트릭(예컨대, 터치 감응형 표면 상에서 접촉이 얼마나 많이 이동하는지에 기초하여 사용자 인터페이스에서 선택 표시자가 얼마나 많이 이동해야 하는지 표현하는 메트릭으로서, 다시 말해, 선택 표시자 이동에 대한 접촉 이동의 관계에 기초한 매트릭)에 대한 각자의 값에 대응한다(1114). 예를 들어, 도 10b에서 터치 감응형 표면(451) 상에서의 접촉(1001)의 이동은, 선택적으로, 사용자 인터페이스에서 선택 표시자(1008)를 이동시키기 위한 이동 메트릭에 대한 값에 대응한다.
일부 실시예들에서, 제1 입력(예컨대, 도 10b에서의 접촉(1001)의 이동에 의해 정의되는 입력)의 표시를 수신한 것에 응답하여(1116), 디바이스는 제1 입력이 일원적 이동 기준들(예컨대, 충족 시, 사용자 인터페이스에서의 선택 표시자(예컨대, 도 10b에서의 표시자(1008))가 사전정의된 양만큼, 예컨대 단일 사용자 인터페이스 요소에 의해, 이동하게 하는 기준)을 충족시키는지 여부를 판정한다(1118). 일부 실시예들에서, 일원적 이동 기준들은, 접촉(예컨대, 도 10b에서의 접촉(1001))의 리프트오프가 접촉의 터치다운의 제1 기간(예컨대, 0.2초, 0.4초, 또는 1초) 내에 검출되고, 그리고 접촉의 이동이 제1 이동 임계치(예컨대, 0.1 cm, 0.2 cm 또는 0.5 cm) 초과이지만 제2 이동 임계치(예컨대, 1 cm 또는 2cm) 미만일 때 충족되는 기준을 포함한다(1120). 일부 실시예들에서, 제1 이동 임계치 및 제2 이동 임계치는 사용자 인터페이스 내의 단일 UI 요소에 의해 선택 표시자를 이동시키기 위해 터치 감응형 표면 상에서 요구되는 접촉 이동에 관하여 정의된다(예컨대, 선택 표시자를 제1 UI 객체(예컨대, 사용자 인터페이스 요소(1002))로부터 제1 UI 객체에 인접한 제2 UI 객체(예컨대, 사용자 인터페이스 요소(1004))로 이동시키는 데 터치 감응형 표면 상의 접촉의 이동의 1 cm가 요구되는 경우, 제1 이동 임계치는 선택적으로 1 cm의 제1 퍼센티지(예컨대, 1 cm의 10%)이고, 제2 이동 임계치는 선택적으로 1 cm의 제2 퍼센티지(예컨대, 1 cm의 100%)이다)(1122).
일부 실시예들에서, 일원적 이동 기준들은, 터치 감응형 표면의 복수의 에지 영역들(예컨대, 도 10d에 도시된 바와 같은, 터치 감응형 표면의 5%, 10%, 또는 20% 상측, 하측, 우측, 및/또는 좌측 외곽면) 중 제1 에지 영역(예컨대, 도 10d에서의 영역(1012))에서 접촉(예컨대, 도 10d에서의 접촉(1003))이 검출되고, 접촉(예컨대, 탭핑)의 터치다운의 제1 기간(예컨대, 0.1초, 0.3초 또는 0.5초) 내에 접촉의 리프트오프가 검출되고, 그리고 접촉의 이동이 이동 임계치 미만(예컨대, 0.1 cm, 0.3 cm 또는 0.5 cm 미만)일 때 충족되는 기준을 포함한다(1124).
일부 실시예들에서, 제1 입력이 일원적 이동 기준들을 충족시킨다는 판정에 따라, 디바이스는 사용자 인터페이스에서 선택 표시자를 사전정의된 양(예컨대, 선택 표시자 이동 메트릭에 대한 각자의 값에 기초하지 않은 사전정의된 양으로서, 일부 실시예들에서, 이동 메트릭에 대한 각자의 값은, 사용자 인터페이스에서의 선택 표시자가 하나의 단위만큼 이동되게 할 값 미만일 수 있거나, 또는 사용자 인터페이스에서의 선택 표시자가 하나의 단위만큼 이동되게 할 값 초과일 수 있음)만큼 이동시킨다(1126). 일부 실시예들에서, 사용자 인터페이스에서 선택 표시자를 사전정의된 양만큼 이동시키는 것은 (예컨대, 도 10c 및 도 10d에 도시된 바와 같이) 복수의 사용자 인터페이스 요소들에서의 인접 사용자 인터페이스 요소의 선택을 나타내도록 선택 표시자를 이동시키는 것을 포함한다(1128). 일부 실시예들에서, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 터치 감응형 표면 상에서의 접촉의 이동 방향에 따라 선택 표시자를 이동시키는 것을 포함한다(예컨대, 도 10c에 도시된 바와 같이, 터치 감응형 표면 상에서 우측으로의 접촉 이동은 선택 표시자를 우측으로 이동시킬 것이다)(1130). 일부 실시예들에서, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 접촉이 검출되었던 터치 감응형 표면의 제1 에지 영역에 대응하는 방향으로 이동시키는 것을 포함한다(예컨대, 터치 감응형 표면의 우측 에지 영역에서의 탭핑은 도 10d에 도시된 바와 같이 UI에서의 선택 표시자를 사전정의된 양만큼 우측으로 이동시킬 것이다)(1132). 일부 실시예들에서, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 내비게이션 컬럼으로부터 제1 내비게이션 컬럼에 인접한 제2 내비게이션 컬럼으로 이동시키는 것을 포함한다(1134). 일부 실시예들에서, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 이미지로부터 제1 이미지에 인접한 제2 이미지로 이동시키는 것을 포함한다(1136). 일부 실시예들에서, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 콘텐츠 아이템으로부터 제1 콘텐츠 아이템에 인접한 제2 콘텐츠 아이템으로 이동시키는 것을 포함한다(1138).
일부 실시예들에서, 제1 입력이 일원적 이동 기준들을 충족시키지 않는다는 판정에 따라, 디바이스는 제1 입력과 연관된 이동 메트릭의 각자의 값에 따라 선택 표시자를 이동시킨다(예컨대, 사용자 인터페이스에서의 선택 표시자를 터치 감응형 표면 상에서의 접촉의 이동 크기에 의해 정의되는 양만큼 이동시킨다. 일부 실시예들에서, 이는, 선택적으로, 제1 입력이 일원적 이동 기준들을 충족시키는 경우에 선택 표시자가 이동할 사전정의된 양을 초과한다)(1140). 제1 입력과 연관된 이동 메트릭의 각자의 값에 따른 선택 표시자의 그러한 이동은 도 10b에 예시되어 있다. 일부 실시예들에서, 이동 메트릭의 각자의 값에 따라 선택 표시자를 이동시키는 것은 터치 감응형 표면 상에서의 접촉의 이동 방향에 따라 선택 표시자를 이동시키는 것을 포함한다(예컨대, 도 10b에 도시된 바와 같이, 터치 감응형 표면 상에서 우측으로의 접촉 이동은 선택 표시자를 우측으로 이동시킬 것이다)(1142).
도 11a 내지 도 11d에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 900, 1300, 1500))과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 11a 내지 도 11d와 관련하여 전술된 방법(1100)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다. 예를 들어, 방법(1100)을 참조하여 전술된 사용자 인터페이스, 디스플레이 디바이스, 및 터치 감응형 표면은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 900, 1300, 1500))을 참조하여 본 명세서에 기술된 사용자 인터페이스들, 디스플레이 디바이스들, 및 터치 감응형 표면들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
전술된 정보 프로세싱 방법들에서의 동작들은 선택적으로 (예컨대, 도 1a, 도 3, 및 도 5와 관련하여 전술된 바와 같은) 범용 프로세서들 또는 애플리케이션 특정 칩들과 같은 정보 프로세싱 장치 내의 하나 이상의 기능 모듈들을 구동시킴으로써 구현된다.
도 11a 내지 도 11d를 참조하여 전술된 동작들은, 선택적으로, 도 1a 및 도 1b에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 생성 동작(1102), 수신 동작(1112), 판정 동작(1118), 및 이동 동작들(1126, 1140)은 선택적으로 이벤트 분류기(170), 이벤트 인식기(180), 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각자의 이벤트 인식기(180)는 이벤트 정보를 각자의 이벤트 정의(186)와 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상에서의 객체의 선택과 같은 사전정의된 이벤트 또는 서브이벤트에 대응하는지 여부를 판정한다. 각자의 사전정의된 이벤트 또는 서브이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는, 선택적으로, 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 각자의 GUI 업데이터(178)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
그립 인식
터치 감응형 표면을 갖는 디바이스(예컨대, 터치 감응형 표면을 갖는 원격 제어부)는 전자 디바이스와 상호작용하는 데 사용될 수 있다. 전자 디바이스와 상호작용하도록 하는 디바이스(예컨대, 리모콘)를 사용하는 일부 사람들은 디바이스를 사용하는 다른 사람들과는 상이하게 디바이스를 보유할 수 있다. 그립 면에서의 이러한 차이점은 사용자들이, 동일한 입력인 것으로 의도되지만 디바이스의 그립(예컨대, 사용자가 디바이스를 사용자의 오른손에 보유하고 있는지 아니면 사용자의 왼손에 보유하고 있는지, 그리고 사용자가 사용자의 오른손을 사용하여 터치 감응형 표면에의 입력을 제공하고 있는지 아니면 사용자의 왼손을 사용하여 터치 감응형 표면에의 입력을 제공하고 있는지)에 기초하여 약간 상이하게 보이는 입력을 터치 감응형 표면에 제공하는 결과를 초래할 수 있다. 따라서, 그것은 (예컨대, 제스처를 검출하는 동안에 사용자의 그립에 기초하여 제스처에 대한 사용자 의도를 더 정확하게 판정함으로써) 사용자의 그립에 기초하여 터치 감응형 표면에의 입력들을 해석하여 제스처 검출의 정확도를 개선하는 데 유익할 수 있다. 하기에 기술되는 실시예들은 전자 디바이스에 의한 그러한 입력 해석을 허용하도록 하는 방식들을 제공한다. 이러한 방식으로 디바이스와의 상호작용들을 향상시키는 것은 동작들을 수행하기 위해 사용자가 필요로 하는 시간의 양을 감소시키고, 이에 따라 디바이스의 전력 사용을 감소시키고 배터리 작동형 디바이스들에 대한 배터리 수명을 증가시킨다.
도 12a 내지 도 12e는 본 발명의 일부 실시예들에 따른, 터치 감응형 표면 상에서의 입력들이 사용자의 그립에 기초하여 해석되는 예시적인 방법들을 도시한다. 이들 도면들에서의 실시예들은, 도 13a 내지 도 13c를 참조하여 기술되는 프로세스들을 포함하는, 하기에 기술되는 프로세스들을 예시하는 데 사용된다.
도 12a는 디바이스의 터치 감응형 표면(451) 상에서 검출된 예시적인 입력을 도시한다. 터치 감응형 표면(451)은 선택적으로 디바이스(예컨대, 도 5에서의 리모콘(510)과 같은, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면)에 포함된다. 디바이스는, 선택적으로, 도 5에서의 디바이스(500)와 같은 전자 디바이스와 상호작용하는 데 사용된다. 또한, 디바이스는, 선택적으로, 한쪽 손에 보유되는 디바이스이고, 사용자는, 선택적으로, 사용자가 디바이스를 보유하고 있는 동일한 손의 손가락을 사용하여 터치 감응형 표면(451)에의 입력을 제공할 수 있다. 예를 들어, 디바이스는, 선택적으로, 터치 감응형 표면(451)을 갖는 원격 제어부이다. 원격 제어부는, 선택적으로, 사용자의 오른손 또는 왼손 중 어느 하나에 보유되고, 원격 제어부 상의 터치 감응형 표면(451)에의 입력은, 선택적으로, 예를 들어 사용자가 원격 제어부를 보유하고 있는 손의 엄지손가락에 의해 제공된다.
터치 감응형 표면(451) 상에서 검출된 입력은, 선택적으로, 도시된 바와 같이, 접촉(1201)(예컨대, 손가락 접촉 또는 스타일러스 접촉)의 이동을 포함한다. 일부 실시예들에서, 접촉(1201)은, 선택적으로, 전술된 바와 같이, 엄지손가락 접촉에 대응한다.
전술된 바와 같이, 그것은 터치 감응형 표면(451)을 포함하는 디바이스를 보유하는 사용자의 판정된 그립에 기초하여 접촉(1201)의 이동을 해석하는 데 유익할 수 있는데, 이는 사용자의 그립이 선택적으로 접촉의 이동의 형상에 영향을 주기 때문이다. 예를 들어, 좌측으로부터 우측으로의 수평방향 스와이프는, 도 12a에 도시된 바와 같이, 사용자가 사용자의 오른손에 터치 감응형 표면(451)을 포함하는 디바이스를 보유하고 있는 경우에 사용자의 오른손 엄지손가락에 의해 입력되었을 때 접촉(1201)의 이동처럼 보일 수 있다. 그러한 환경에서, 터치 감응형 표면(451)을 갖는 디바이스(예컨대, 도 5에서의 리모콘(510))가 상호작용하는 전자 디바이스(예컨대, 도 5에서의 디바이스(500))는, 선택적으로, 접촉의 이동의 시작이 상향 궤적을 갖는다는 사실에도 불구하고, 사용자의 그립에 대한 지식을 이용하여 접촉(1201)의 이동을 좌측으로부터 우측으로의 수평방향 스와이프인 것으로 해석한다. 대조적으로, 전자 디바이스가, 사용자가 사용자의 왼손에 터치 감응형 표면(451)을 포함하는 디바이스를 보유하고 있다는 지식을 갖고 있는 경우, 전자 디바이스는, 선택적으로, 접촉(1201)의 이동을 좌측으로부터 우측으로의 수평방향 스와이프 이상의 것으로 해석하는데, 이는, 예를 들어 사용자의 왼손에 디바이스를 보유하고 있는 동안 사용자의 왼손 엄지손가락에 의해 입력된 좌측으로부터 우측으로의 수평방향 스와이프가, 선택적으로, 도 12a에 도시된 바와 같이, 접촉(1201)의 이동처럼 보이지 않기 때문이다.
입력들의 그러한 그립 특정 해석들을 가능하게 하기 위해, 일부 실시예들에서, 전자 디바이스는 디바이스를 사용하는 사용자의 그립을 판정한다(예컨대, 터치 감응형 표면(451)을 포함하는 디바이스가 사용자의 오른손에 보유되어 있는 중인지 아니면 사용자의 왼손에 보유되어 있는 중인지 판정한다). 전자 디바이스는, 선택적으로, 사용자의 그립에 적어도 부분적으로 기초하여, 터치 감응형 표면 상에서의 접촉(예컨대, 터치 감응형 표면(451) 상에서의 접촉(1201))의 이동을 해석한다. 예를 들어, 전자 디바이스는, 선택적으로, 그립이 오른손이 사용된 것으로 판정되는 경우에는 접촉의 이동을 제1 제스처(예컨대, 수평방향 스와이프)로 해석하고, 그립이 왼손이 사용된 것으로 판정되는 경우에는 접촉의 이동을 제2 제스처(예컨대, 수직방향 스와이프 + 수평방향 스와이프)로 해석한다.
일부 실시예들에서, 디바이스를 사용하는 사용자의 그립을 판정하는 것은 디바이스의 배향에 적어도 부분적으로 기초하여 디바이스를 사용하는 사용자의 그립을 판정하는 것을 포함한다. 일부 실시예들에서, 디바이스를 사용하는 사용자의 그립을 판정하는 것은 가장 최근의 사전결정된 기간(예컨대, 30초, 90초, 또는 180초)에 걸친 디바이스의 평균 배향에 기초하여 디바이스를 사용하는 사용자의 그립을 판정하는 것을 포함한다. 일부 실시예들에서, 디바이스의 배향은 디바이스 내의 가속도계 또는 다른 배향 센서에 기초하여 판정된다.
전자 디바이스가 선택적으로 사용자의 판정된 그립에 기초하여 접촉의 이동을 상이하게 해석하기 때문에, 접촉의 이동에 기인한 동작들은, 또한, 선택적으로, 도 12b 및 도 12c에 도시된 바와 같이, 사용자의 그립에 기초하여도 상이하다. 따라서, 일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동(예컨대, 터치 감응형 표면(451) 상에서의 접촉(1201)의 이동)을 해석하는 것은, 그립이 제1 그립(예컨대, 도 12b에 도시된 바와 같이, 오른손이 사용된 그립)이라는 판정에 따라, 제1 입력에 응답하여 제1 동작을 판정하는 것, 및 그립이 제2 그립(예컨대, 도 12c에 도시된 바와 같이, 왼손이 사용된 그립)이라는 판정에 따라, 제1 입력에 응답하여 제1 동작과는 상이한 제2 동작을 수행하는 것을 포함한다. 도 12a에 도시된 입력에 대해, 일부 실시예들에서, 제1 동작은, 선택적으로, 사용자 인터페이스에서의 커서(1210)의 순 수평방향 이동(예컨대, 접촉(1201)의 상향 및 우향 이동에 응답하는 도 12b에서의 커서의 순 수평방향 이동)이고; 제2 동작은, 선택적으로, 사용자 인터페이스에서의 커서의 수직방향 이동에 뒤이은 사용자 인터페이스에서의 커서의 수평방향 이동(접촉(1201)의 상향 및 우향 이동에 응답하여 도 12c에서의 커서(1210)의 상향 및 우향 이동과 같은 터치 감응형 표면(451) 상에서의 접촉(1201)의 이동을 미러링함)이다. 따라서, 도 12b 및 도 12c에 도시된 바와 같이, 터치 감응형 표면(451) 상에서의 접촉(1201)의 동일한 이동은 선택적으로 사용자의 판정된 그립에 따라 상이한 동작들을 생성한다.
일부 실시예들에서, 전자 디바이스는 디스플레이 디바이스(예컨대, 텔레비전 또는 다른 디스플레이 디바이스) 상에서의 디스플레이를 위해 피드백 정보를 제공하는데, 피드백 정보는 디바이스를 사용한 사용자의 판정된 그립에 관한 정보, 및 터치 감응형 표면(451) 상에서의 접촉(1201)의 이동의 해석을 포함한다(예컨대, 전자 디바이스는 접촉의 이동을 해석한 후 피드백을 디스플레이하여, 사용자에게 검출된 그립/제스처를 통지하여, 가능하게는 사용자가 그립 판정 또는 접촉 이동 해석을 정정하게 한다).
일부 실시예들에서, 전자 디바이스는, 선택적으로, 하기에 더 상세히 기술되는 바와 같이, 사용자의 판정된 그립에 따라 접촉(1201)의 이동의 상이한 부분들을 무시한다.
도 12d는 전자 디바이스가 접촉(1201)의 이동의 제1 부분을 무시하는 예시적인 시나리오를 도시한다. 일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면(451) 상에서의 접촉(1201)의 이동을 해석하는 것은, 그립이 제1 그립(예컨대, 오른손이 사용된 그립)이라는 판정에 따라, 접촉의 이동의 제1 부분(1202)을 무시하는 것을 포함한다. 일부 실시예들에서, 전자 디바이스는, 선택적으로, 접촉(1201)의 이동의 부분(1202)을 무시하고, 접촉의 이동을 해석하는 데 있어서 접촉의 이동의 부분(1204)에만 의존한다.
일부 실시예들에서, 제1 그립은 오른손이 사용된 그립을 포함하고, 접촉(1201)의 이동의 제1 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 우측으로부터 좌측으로라는 판정에 따라, 접촉의 이동의 끝을 무시하는 것을 포함한다. 일부 실시예들에서, 접촉의 이동의 제1 부분을 무시하는 것은, 접촉의 이동이 (도 12d에 도시된 바와 같이) 터치 감응형 표면 상에서 좌측으로부터 우측으로라는 판정에 따라, 접촉의 이동의 시작(예컨대, 부분(1202))을 무시하는 것을 포함한다. 예를 들어, 그립이 오른손이 사용된 경우, 접촉을 제공하는 손가락(예컨대, 엄지손가락)의 조인트는 선택적으로 디바이스 상의 터치 감응형 표면의 우측에 있을 것이다. 조인트로부터 멀리 있는 터치 감응형 표면 상의 소정 위치에서 검출된 제1 입력의 하나 이상의 부분들(예컨대, 도 12d에서의 부분(1202))은, 선택적으로, 손가락의 연장 한계에 도달하는 것으로 인해 왜곡된다 - 이들 부분들은 선택적으로 무시된다.
도 12e는 전자 디바이스가 접촉(1201)의 이동의 제2 부분을 무시하는 예시적인 시나리오를 도시한다. 일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면(451) 상에서의 접촉(1201)의 이동을 해석하는 것은, 그립이 제1 그립과는 상이한 제2 그립(예컨대, 왼손이 사용된 그립)이라는 판정에 따라, 접촉의 이동의 제1 부분(1202)과는 상이한 접촉(1201)의 이동의 제2 부분(1208)을 무시하는 것을 포함한다. 일부 실시예들에서, 전자 디바이스는, 선택적으로, 접촉(1201)의 이동의 부분(1208)을 무시하고, 접촉의 이동을 해석하는 데 있어서 접촉의 이동의 부분(1206)에만 의존한다.
일부 실시예들에서, 제2 그립은 왼손이 사용된 그립을 포함하고, 접촉(1201)의 이동의 제2 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 우측으로부터 좌측으로라는 판정에 따라, 접촉의 이동의 시작을 무시하는 것을 포함한다. 일부 실시예들에서, 접촉의 이동의 제2 부분을 무시하는 것은, 접촉의 이동이 (도 12e에 도시된 바와 같이) 터치 감응형 표면 상에서 좌측으로부터 우측으로라는 판정에 따라, 접촉의 이동의 끝(예컨대, 부분(1208))을 무시하는 것을 포함한다. 예를 들어, 그립이 왼손이 사용된 경우, 접촉을 제공하는 손가락(예컨대, 엄지손가락)의 조인트는 선택적으로 디바이스 상의 터치 감응형 표면의 좌측에 있을 것이다. 조인트로부터 멀리 있는 터치 감응형 표면 상의 소정 위치에서 검출된 제1 입력의 하나 이상의 부분들(예컨대, 도 12e에서의 부분(1208))은, 선택적으로, 손가락의 연장 한계에 도달하는 것으로 인해 왜곡된다 - 이들 부분들은 선택적으로 무시된다.
도 13a 내지 도 13c는, 일부 실시예들에 따른, 사용자의 그립에 기초하여 터치 감응형 표면 상에서 검출된 입력을 해석하는 방법(1300)을 도시한 흐름도들이다. 방법(1300)은, 선택적으로, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스를 비롯한 전자 디바이스, 예컨대 도 5를 참조하여 전술된 바와 같은 디바이스(500)에서 수행된다. 방법(1300)에서의 일부 동작들은 선택적으로 조합되고/되거나 일부 동작들의 순서는 선택적으로 변경된다.
하기에 기술되는 바와 같이, 방법(1300)은 터치 감응형 표면 상에의 입력들이, 선택적으로, 사용자의 그립에 기초하여 해석되는 방식들을 제공한다. 방법은 디바이스 상의 사용자 인터페이스와 상호작용할 때 사용자에 대한 인지적 부담을 감소시키며, 이에 의해 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들의 경우, 사용자 인터페이스와의 사용자 상호작용의 효율성을 증가시키는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 하나 이상의 프로세서들을 갖는 전자 디바이스(예컨대, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스, 예컨대 도 5에서의 디바이스(500))는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면, 예컨대 도 12a에서의 터치 감응형 표면(451)) 상에서 검출된 접촉(예컨대, 도 12a에서의 접촉(1201)과 같은 손가락 접촉 또는 스타일러스 접촉으로서, 일부 실시예들에서, 접촉은 선택적으로 엄지손가락 접촉에 대응함)의 이동을 포함하는 제1 입력의 표시를 수신한다(1302).
일부 실시예들에서, 디바이스는 디바이스를 사용하는 사용자의 그립을 판정한다(예컨대, 디바이스는 디바이스가 사용자의 오른손에 보유되는 중인지 아니면 사용자의 왼손에 보유되는 중인지 판정한다)(1304). 일부 실시예들에서, 디바이스를 사용하는 사용자의 그립을 판정하는 것은 디바이스의 배향에 적어도 부분적으로 기초하여 디바이스를 사용하는 사용자의 그립을 판정하는 것을 포함한다(1306). 일부 실시예들에서, 디바이스를 사용하는 사용자의 그립을 판정하는 것은 가장 최근의 사전결정된 기간(예컨대, 30초, 90초, 또는 180초)에 걸친 디바이스의 평균 배향에 기초하여 디바이스를 사용하는 사용자의 그립을 판정하는 것을 포함한다(1308). 일부 실시예들에서, 디바이스의 배향은 디바이스 내의 가속도계 또는 다른 배향 센서에 기초하여 판정된다(1310).
일부 실시예들에서, 디바이스는 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉(예컨대, 도 12a에서의 접촉(1201))의 이동을 해석한다(예컨대, 디바이스는 그립이 오른손이 사용된 것으로 판정되는 경우에 접촉의 이동을 제1 제스처(예컨대, 수평방향 스와이프)로 해석하고, 그립이 왼손이 사용된 것으로 판정되는 경우에 접촉의 이동을 제2 제스처(예컨대, 수직방향 스와이프 + 수평방향 스와이프)로 해석한다)(1312). 일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 해석하는 것은, 그립이 제1 그립(예컨대, 오른손이 사용된 그립)이라는 판정에 따라, 제1 입력에 응답하여 제1 동작을 수행하는 것(1316)을 포함한다(1314). 일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 해석하는 것은, 그립이 제1 그립과는 상이한 제2 그립(예컨대, 왼손이 사용된 그립)이라는 판정에 따라, 제1 입력에 응답하여 제1 동작과는 상이한 제2 동작을 수행하는 것(1318)을 포함한다(1314). 예를 들어, 도 12a에 도시된 접촉(1201)의 이동은, 선택적으로, 사용자의 그립이 오른손이 사용된 것으로 판정되는 경우에 제1 동작의 수행을 초래하고, 사용자의 그립이 왼손이 사용된 것으로 판정되는 경우에 제2 동작의 수행을 초래한다.
일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 해석하는 것은, 그립이 제1 그립(예컨대, 오른손이 사용된 그립)이라는 판정에 따라, 접촉의 이동의 제1 부분(예컨대, 도 12d에서의 부분(1202))을 무시하는 것(1322)을 포함한다(1320). 일부 실시예들에서, 제1 그립은 오른손이 사용된 그립을 포함한다(1324). 일부 실시예들에서, 접촉의 이동의 제1 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 우측으로부터 좌측으로라는 판정에 따라, 접촉의 이동의 끝을 무시하는 것(1328)을 포함한다(1326). 일부 실시예들에서, 접촉의 이동의 제1 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 좌측으로부터 우측으로라는 판정에 따라, 접촉의 이동의 시작(예컨대, 도 12d에서의 부분(1202))을 무시하는 것(1330)을 포함한다(예컨대, 그립이 오른손이 사용된 경우, 접촉을 제공하는 손가락(예컨대, 엄지손가락)의 조인트는 선택적으로 디바이스 상의 터치 감응형 표면의 우측에 있다. 조인트로부터 멀리 있는 터치 감응형 표면 상의 소정 위치에서 검출된 제1 입력의 부분들(예컨대, 도 12d에서의 부분(1202))은, 선택적으로, 손가락의 연장 한계에 도달하는 것으로 인해 왜곡된다. 이들 부분들은 선택적으로 무시된다)(1326). 제1 입력의 나머지 부분들(예컨대, 도 12d에서의 부분(1204))은 선택적으로 무시되지 않는다.
일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 해석하는 것은, 그립이 제1 그립과는 상이한 제2 그립(예컨대, 왼손이 사용된 그립)이라는 판정에 따라, 접촉의 이동의 제1 부분과는 상이한 접촉의 이동의 제2 부분(예컨대, 도 12e에서의 부분(1208))을 무시하는 것(1332)을 포함한다(1320). 일부 실시예들에서, 제2 그립은 왼손이 사용된 그립을 포함한다(1334). 일부 실시예들에서, 접촉의 이동의 제2 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 우측으로부터 좌측으로라는 판정에 따라, 접촉의 이동의 시작을 무시하는 것(1338)을 포함한다(1336). 일부 실시예들에서, 접촉의 이동의 제2 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 좌측으로부터 우측으로라는 판정에 따라, 접촉의 이동의 끝(예컨대, 도 12e에서의 부분(1208))을 무시하는 것(1340)을 포함한다(1336). 예를 들어, 그립이 왼손이 사용된 경우, 접촉을 제공하는 손가락(예컨대, 엄지손가락)의 조인트는 선택적으로 디바이스 상의 터치 감응형 표면의 좌측에 있다. 조인트로부터 멀리 있는 터치 감응형 표면 상의 소정 위치에서 검출된 제1 입력의 부분들은, 선택적으로, 손가락의 연장 한계에 도달하는 것으로 인해 왜곡된다. 이들 부분들은 선택적으로 무시된다. 제1 입력의 나머지 부분들(예컨대, 도 12e에서의 부분(1206))은 선택적으로 무시되지 않는다.
일부 실시예들에서, 디바이스는 디스플레이 디바이스(예컨대, 텔레비전 또는 다른 디스플레이 디바이스) 상에서의 디스플레이를 위해 피드백 정보를 제공하는데, 피드백 정보는 디바이스를 사용한 사용자의 판정된 그립에 관한 정보, 및 터치 감응형 표면 상에서의 접촉의 이동의 해석을 포함한다(예컨대, 전자 디바이스는 접촉의 이동을 해석한 후 피드백을 디스플레이하여, 사용자에게 검출된 그립/제스처를 통지하여, 가능하게는 사용자가 그립 판정 또는 접촉 이동 해석을 정정하게 한다)(1342).
도 13a 내지 도 13c에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 900, 1100, 1500))과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 13a 내지 도 13c와 관련하여 전술된 방법(1300)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다. 예를 들어, 방법(1300)을 참조하여 전술된 터치 감응형 표면은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 900, 1100, 1500))을 참조하여 본 명세서에 기술된 터치 감응형 표면들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
전술된 정보 프로세싱 방법들에서의 동작들은 선택적으로 (예컨대, 도 1a, 도 3, 및 도 5와 관련하여 전술된 바와 같은) 범용 프로세서들 또는 애플리케이션 특정 칩들과 같은 정보 프로세싱 장치 내의 하나 이상의 기능 모듈들을 구동시킴으로써 구현된다.
도 13a 내지 도 13c를 참조하여 전술된 동작들은, 선택적으로, 도 1a 및 도 1b에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 수신 동작(1302), 판정 동작(1304), 및 해석 동작(1312)은 선택적으로 이벤트 분류기(170), 이벤트 인식기(180) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각자의 이벤트 인식기(180)는 이벤트 정보를 각자의 이벤트 정의(186)와 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상에서의 객체의 선택과 같은 사전정의된 이벤트 또는 서브이벤트에 대응하는지 여부를 판정한다. 각자의 사전정의된 이벤트 또는 서브이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는, 선택적으로, 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 각자의 GUI 업데이터(178)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
문자 인식
사용자가 전자 디바이스에 텍스트 입력을 제공하기를(예컨대, 사용자명 또는 패스워드를 제공하기를) 원하는 많은 경우들이 있다. 육필 입력을 사용하여 그러한 텍스트 입력을 제공하는 것은, 종종, 스크린상 키보드를 사용해야 하는 것보다 사용자에게 더 간단한다. 따라서, 전자 디바이스가 전자 디바이스와의 사용자 상호작용이 향상되도록 강건한 육필 입력 사용자 인터페이스를 제공하는 것이 유익할 수 있다. 하기에 기술된 실시예들은 그러한 육필 입력 사용자 인터페이스를 제공하기 위한 방식들을 제공한다. 이러한 방식으로 디바이스와의 상호작용들을 향상시키는 것은 동작들을 수행하기 위해 사용자가 필요로 하는 시간의 양을 감소시키고, 이에 따라 디바이스의 전력 사용을 감소시키고 배터리 작동형 디바이스들에 대한 배터리 수명을 증가시킨다.
도 14a 내지 도 14c는, 본 발명의 일부 실시예들에 따른, 전자 디바이스가 육필 입력 사용자 인터페이스를 제시하는 예시적인 방식들을 도시한다. 이들 도면들에서의 실시예들은, 도 15a 내지 도 15d를 참조하여 기술되는 프로세스들을 포함하는, 하기에 기술되는 프로세스들을 예시하는 데 사용된다.
도 14a는 디스플레이(450) 상에 디스플레이된 예시적인 육필 입력 사용자 인터페이스를 도시한다. 사용자 인터페이스는 선택적으로 텍스트 입력 필드(1402)를 포함한다. 텍스트 입력 필드(1402)는, 선택적으로, 텍스트가 입력될 사용자 인터페이스의 임의의 영역, 예컨대 검색 필드, 웹 어드레스 필드, 및/또는 사용자명/패스워드 필드이다. 텍스트(예컨대, 글자들, 숫자들, 단어들, 기호들 등)는, 선택적으로, 터치 감응형 표면(451) 상에 육필 입력을 제공함으로써 텍스트 입력 필드(1402) 내에 입력된다.
일부 실시예들에서, 터치 감응형 표면(451) 상에 제공되는 육필 입력은 선택적으로 하나 초과의 문자(예컨대, 글자, 숫자, 기호 등)에 대응한다. 예를 들어, 터치 감응형 표면(451) 상의 접촉(1401)의 이동은, 선택적으로, 소문자 "c" 및 대문자 "C"에 대응하는데, 이는 소문자 "c" 및 대문자 "C" 양측 모두가 선택적으로 터치 감응형 표면 상에서의 동일한 또는 유사한 접촉 이동과 연관되기 때문이다. 접촉(1401)의 이동은, 또한, 선택적으로, "O" 및 "0"에 대응하는데, 그 이유는 이동이 선택적으로 "O"라는 문자 및 "0"라는 문자의 각자의 부분들에 대응하기 때문이다. 그러한 환경에서, 전자 디바이스는, 선택적으로, 접촉(1401)의 이동이 텍스트 입력 필드(1402) 내로의 입력에 대응하는 복수의 문자들 중 어느 문자인지 판정할 필요가 있다. 일부 실시예들에서, 이러한 판정은, 선택적으로, 텍스트 입력 필드(1402)가 문자 불명료성(ambiguity)에 대해 관대한지 여부에 의존한다.
일부 실시예들에서, 텍스트 입력 필드(1402)는 선택적으로 문자 불명료성에 대해 관대하다. 다시 말해, 텍스트 입력 필드(1402)는, 선택적으로, 텍스트 입력 필드 내에 입력된 문자들에 관한 일부 불명료성이 허용가능한 텍스트 입력 필드이다. 예를 들어, 텍스트 입력 필드(1402)가 웹 어드레스 필드(예컨대, URL(Uniform Resource Locator) 필드)인 경우, 예를 들어 텍스트 입력 필드 내에 입력된 문자들의 대소문자(case)들은 선택적으로 중요하지 않다. 그러한 환경에서, 텍스트 입력 필드(1402)에 "www.xyz.com"을 입력하는 것은, 선택적으로, 텍스트 입력 필드에 "www.xYz.com"을 입력하는 것과 동일하게 허용가능한데, 그 이유는 URL 어드레스를 분석할 때 URL 어드레스에서의 문자들의 대소문자들이 선택적으로 무시되기 때문이다. 상기의 논의는, 선택적으로, 문자의 대소문자의 불명료성 외에도 다른 종류들의 문자 불명료성, 예컨대 문자가 글자인지 아니면 숫자인지(예컨대, O 대 0)에 대한 불명료성에 유사하게 적용된다.
텍스트 입력 필드(1402)가 문자 불명료성에 대해 관대한 환경에서, 복수의 후보 문자들에 선택적으로 대응하는 입력(예컨대, 소문자 "c" 및 대문자 "C"에 선택적으로 대응하는 접촉(1401)의 이동)을 수신한 것에 응답하여, 전자 디바이스는 선택적으로 텍스트 입력 필드에 최상측 후보 문자(예컨대, 전자 디바이스가 육필 입력에 대해 최상의 매칭인 것으로 판정한 후보 문자)를 디스플레이한다. 도 14a에 도시된 바와 같이, 일부 실시예들에서, 전자 디바이스는 터치 감응형 표면(451) 상에 수신된 입력에 응답하여 텍스트 입력 필드(1402)에 대문자 "C"(1404)를 디스플레이하고 있다. 일부 실시예들에서, 텍스트 입력 필드(1402)가 문자 불명료성에 대해 관대한지 여부에 대한 판정은 터치 감응형 표면(451) 상에 수신된 입력의 끝의 표시를 수신한 후에 이루어진다.
그러나, 일부 환경에서, 사용자 인터페이스 내의 텍스트 입력 필드는 선택적으로 문자 불명료성에 대해 관대하지 않다.
도 14b는, 사용자 인터페이스 내의 텍스트 입력 필드가 문자 불명료성에 대해 관대하지 않을 때 디스플레이(450) 상에 디스플레이된 예시적인 육필 입력 사용자 인터페이스를 도시한다. 사용자 인터페이스는 선택적으로 텍스트 입력 필드(1410)를 포함한다. 텍스트 입력 필드(1410)는, 선택적으로, 전술된 바와 같이, 텍스트가 입력될 사용자 인터페이스의 임의의 영역, 예컨대 검색 필드, 웹 어드레스 필드, 및/또는 사용자명/패스워드 필드이다. 텍스트(예컨대, 글자들, 숫자들, 단어들, 기호들 등)는, 선택적으로, 전술된 바와 같이, 터치 감응형 표면(451)을 사용하여 육필 입력을 제공함으로써 텍스트 입력 필드(1410) 내에 입력된다.
일부 실시예들에서, 텍스트 입력 필드(1410)는 선택적으로 문자 불명료성에 대해 관대하지 않다. 다시 말해, 텍스트 입력 필드(1410)는, 선택적으로, 텍스트 입력 필드 내에 입력된 문자들에 관한 불명료성이 허용가능하지 않은 텍스트 입력 필드이다. 예를 들어, 텍스트 입력 필드(1410)가 패스워드 입력 필드인 경우, 예를 들어 텍스트 입력 필드 내에 입력된 문자들의 대소문자들은 선택적으로 중요하다. 그러한 환경에서, 텍스트 입력 필드(1410)에 "xyz"를 입력하는 것은, 선택적으로, 텍스트 입력 필드에 "xYz"를 입력하는 것과 동일하게 허용가능하지는 않은데, 그 이유는 패스워드 내의 문자들의 대소문자들이, 선택적으로, 패스워드가 정확한 패스워드인지 여부를 판정할 때 무시되지 않기 때문이다. 상기의 논의는, 선택적으로, 문자의 대소문자의 불명료성 외에도 다른 종류들의 문자 불명료성, 예컨대 문자가 글자인지 아니면 숫자인지(예컨대, O 대 0)에 대한 불명료성에 유사하게 적용된다.
텍스트 입력 필드(1410)가 문자 불명료성에 대해 관대하지 않은 환경에서, 복수의 후보 문자들에 선택적으로 대응하는 입력(예컨대, 소문자 "c" 및 대문자 "C"에 선택적으로 대응하는 접촉(1401)의 이동)을 수신한 것에 응답하여, 전자 디바이스는, 선택적으로, 복수의 후보 문자들 중 적어도 2개의 후보 문자에 대응하는 적어도 2개의 후보 선택 옵션들(1406)을 디스플레이한다. 이들 문자 선택 옵션들(1406)은, 선택적으로, 사용자가 문자 선택 옵션들 중에서 텍스트 입력 필드(1410)에 입력되어야 하는 문자 선택 옵션을 나타내게 한다. 도 14b에 도시된 바와 같이, 일부 실시예들에서, 전자 디바이스는 터치 감응형 표면(451) 상에 수신된 입력에 응답하여 대문자 "C", 소문자 "c", "O", 및 "0"을 포함하는 문자 선택 옵션들(1406)을 디스플레이하고 있다. 일부 실시예들에서, 텍스트 입력 필드(1410)가 문자 불명료성에 대해 관대한지 여부에 대한 판정은 터치 감응형 표면(451) 상에 수신된 입력의 끝의 표시를 수신한 후에 이루어진다. 일부 실시예들에서, 문자 선택 옵션들(1406) 중 하나는, 선택적으로, 텍스트 입력 필드(1410) 내에 선택된 문자 옵션을 입력하도록 선택된다.
도 14c는 문자 선택 옵션이 선택 입력에 응답하여 선택될 때 디스플레이(450) 상에 디스플레이되는 예시적인 육필 입력 사용자 인터페이스를 도시한다. 전술된 바와 같이, 문자 선택 옵션들(1406) 중 하나는, 선택적으로, 텍스트 입력 필드(1410) 내에 그 선택된 문자 옵션을 입력하도록 선택된다. 문자 선택 옵션들(1406) 중 하나의 문자 선택 옵션의 선택은 선택적으로 임의의 적절한 방식으로 달성된다. 도 14c에 도시된 바와 같이, 일부 실시예들에서, 문자 선택 옵션의 선택은 문자 선택 옵션에 대응하는 터치 감응형 표면(451)의 영역에서 입력을 검출한 것에 응답한다.
구체적으로, 문자 선택 옵션들(1406)은, 선택적으로, 터치 감응형 표면(451)의 레이아웃과 유사한 레이아웃에 디스플레이된다. 도 14c에 도시된 바와 같이, 일부 실시예들에서, 문자 선택 옵션들(1406)은 2×2 격자형으로 디스플레이되고, 터치 감응형 표면(451)은 2×2 격자형의 영역들을 갖는다. 터치 감응형 표면(451)의 영역들 중 하나의 영역에서의 입력(예컨대, 탭핑 또는 클릭)의 검출은, 선택적으로, 입력이 검출된 터치 감응형 표면 상의 영역에 대응하는 격자형 영역 내에 있는 문자 선택 옵션의 선택을 초래한다. 예를 들어, 터치 감응형 표면(451)의 상부 좌측 영역에서의 입력의 검출은 선택적으로 문자 선택 옵션 "C"의 선택을 초래하고, 터치 감응형 표면(451)의 하부 좌측 영역에서의 입력의 검출은 선택적으로 문자 선택 옵션 "O"의 선택을 초래하고, 터치 감응형 표면(451)의 하부 우측 영역에서의 입력의 검출은 선택적으로 문자 선택 옵션 "0"의 선택을 초래하고, 터치 감응형 표면(451)의 상부 우측 영역에서의 입력의 검출은 선택적으로 문자 선택 옵션 "c"의 선택을 초래한다. 도 14c에 도시된 바와 같이, 일부 실시예들에서, 접촉(1403)은 터치 감응형 표면(451)의 상부 우측 영역에서 검출되었고, 그 결과, 소문자 "c"(1408)가 선택되었고 텍스트 입력 필드(1410) 내에 입력되었다. 이와 같이, 전자 디바이스는 육필 문자에 대한 불명료성이 존재할 때 사용자가 디바이스에 입력하기 원하는 문자를 사용자가 지정하게 한다.
일부 실시예들에서, 터치 감응형 표면(451) 상에 입력되는 문자에 대한 불명료성은, 선택적으로, 가능성있는 문자들을 단일의 가장 개연성있는 문자로 추가로 좁히기 위해 추가 육필 입력을 사용함으로써, 추가 육필 입력이 검출되는 것에 응답하여 디바이스에 의해 해결된다. 예를 들어, 육필 입력의 제1 부분은 선택적으로 문자의 대문자 버전 및 소문자 버전(예컨대, 소문자 "l" 및 대문자 "L"의 하향 스트로크(downward stroke))에 대응한다. 그러나, 육필 입력의 제2 부분(예컨대, 대문자 "L"의 수평방향 스트로크)이 검출됨에 따라, 육필 입력의 제1 부분과 제2 부분이 선택적으로 문자의 대소문자를 함께 정의한다. 그러한 환경에서, 문자 선택 옵션들(예컨대, 문자 선택 옵션들(1406))은, 전술된 바와 같이, 선택적으로, 육필 입력의 제1 부분을 검출한 것에 응답하여 디스플레이되고, 선택적으로, 입력되는 문자의 불명료성을 선택적으로 해결하는 육필 입력의 제2 부분을 검출한 것에 응답하여 더 이상 디스플레이되지 않는다. 일부 실시예들에서, 문자 불명료성이 해결되는데, 그 이유는 육필 입력의 제1 및 제2 부분이 불명료한 대소문자를 갖지 않는 상이한 문자를 함께 정의하기 때문이다(예컨대, 육필 입력의 제1 부분은 선택적으로 상기와 같은 소문자 "l" 및 대문자 "L"에 대응하고, 육필 입력의 제2 부분은 선택적으로 문자를 "l" 또는 "L"이라기 보다는 "D"인 것으로 정의한다). 일부 실시예들에서, 육필 입력의 제1 및 제2 부분은 글자 대신에 숫자를 함께 정의하고, 따라서, 문자 불명료성이 해결된다 - 예를 들어, 육필 입력의 제1 부분은 선택적으로 상기와 같이 소문자 "l" 및 대문자 "L"에 대응하고, 육필 입력의 제2 부분은 선택적으로 문자를 "4"인 것으로 정의한다).
도 15a 내지 도 15d는, 일부 실시예들에 따른, 육필 입력을 검출하는 방법(1500)을 도시한 흐름도들이다. 방법(1500)은, 선택적으로, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스를 비롯한 전자 디바이스, 예컨대 도 5를 참조하여 전술된 바와 같은 디바이스(500)에서 수행된다. 방법(1500)에서의 일부 동작들은 선택적으로 조합되고/되거나 일부 동작들의 순서는 선택적으로 변경된다.
하기에 기술되는 바와 같이, 방법(1500)은 디바이스가 복수의 후보 문자들에 대응하는 입력의 표시를 수신한 것에 선택적으로 응답하는 방식들을 제공한다. 방법은 디바이스 상의 사용자 인터페이스와 상호작용할 때 사용자에 대한 인지적 부담을 감소시키며, 사용자가 디바이스와 물리적으로 상호작용할 필요성을 감소시켜, 이에 의해 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들의 경우, 사용자 인터페이스와의 사용자 상호작용의 효율성을 증가시키는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 하나 이상의 프로세서들을 갖는 전자 디바이스(예컨대, 원격 제어부 및 디스플레이 디바이스와 통신하는 다른 사용자 인터페이스 생성 디바이스 또는 셋톱박스, 예컨대 도 5에서의 디바이스(500))는 디스플레이 디바이스(예를 들어, 텔레비전 또는 다른 디스플레이 디바이스, 예컨대 도 14a에서의 디스플레이(450)) 상에서의 디스플레이를 위해 사용자 인터페이스를 생성한다(1502). 일부 실시예들에서, 사용자 인터페이스는 텍스트 입력 필드(예컨대, 검색 필드, 웹 어드레스 필드, 사용자명/패스워드 필드들 등, 예컨대 도 14a 내지 도 14c에서의 텍스트 입력 필드들(1402, 1410))를 포함한다(1504).
일부 실시예들에서, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면, 예컨대 도 14a 및 도 14b에서의 터치 감응형 표면(451)) 상에서 검출된 접촉(예컨대, 손가락 접촉 또는 스타일러스 접촉, 예컨대 도 14a 및 도 14b에서의 접촉(1401))의 이동을 포함하는 제1 입력의 표시를 수신한다(1506). 일부 실시예들에서, 접촉의 이동은 복수의 후보 문자들(예컨대, 도 14a 및 도 14b를 참조하여 기술된 것과 같은 글자, 숫자, 단어, 기호 등)에 대응한다(1508).
일부 실시예들에서, 제1 입력의 표시를 수신한 것에 응답하여(1510), 텍스트 입력 필드(예컨대, 검색 필드; 즉, 예를 들어 도 14a에서의 텍스트 입력 필드(1402)와 같은 대문자 대 소문자 입력이 문제가 되지 않는 텍스트 입력 필드)가 문자 불명료성에 대해 관대하다는 판정에 따라, 디바이스는 텍스트 입력 필드에 복수의 후보 문자들 중 최상측 후보 문자를 디스플레이한다(예컨대, 디바이스는, 선택적으로, 대소문자가 문제가 되지 않는 경우 최상측 후보, 예컨대 도 14a에서의 문자(1404)를 자동으로 선택한다)(1512). 일부 실시예들에서, 문자 불명료성은 텍스트 입력 필드 내에 입력된 문자의 대소문자(예컨대, s 대 S)에 대한 불명료성을 포함한다(1514). 일부 실시예들에서, 문자 불명료성은 텍스트 입력 필드 내에 입력된 문자가 글자인지 아니면 숫자인지(예컨대, O 대 0)에 대한 불명료성을 포함한다(1516). 일부 실시예들에서, 텍스트 입력 필드의 문자 불명료성 관대성에 대한 판정은 제1 입력의 끝의 표시를 수신한 후에 이루어진다(1518).
일부 실시예들에서, 제1 입력의 표시를 수신한 것에 응답하여(1510), 텍스트 입력 필드(예컨대, 사용자명 또는 패스워드 필드, 예컨대 도 14b에서의 텍스트 입력 필드(1410))가 문자 불명료성에 대해 관대하지 않다는 판정에 따라, 디바이스는 복수의 후보 문자들 중 적어도 2개의 후보 문자에 대응하는 복수의 문자 선택 옵션들(예컨대, 도 14b에서의 문자 선택 옵션들(1406))을 디스플레이한다(예컨대, 디바이스는 문자의 소문자 버전 및 대문자 버전을 디스플레이한다. 일부 실시예들에서, 텍스트 입력 필드 내에 선택된 문자를 입력하도록 희망 문자가 선택적으로 선택된다)(1520). 일부 실시예들에서, 문자 불명료성은 텍스트 입력 필드 내에 입력된 문자의 대소문자에 대한 불명료성을 포함한다(1522). 일부 실시예들에서, 문자 불명료성은 텍스트 입력 필드 내에 입력된 문자가 글자인지 아니면 숫자인지에 대한 불명료성을 포함한다(1524). 일부 실시예들에서, 텍스트 입력 필드는 텍스트 입력 필드가 패스워드 입력 필드인 경우에 문자 불명료성에 대해 관대하지 않은 텍스트 입력 필드인 것으로 판정된다(1526). 일부 실시예들에서, 텍스트 입력 필드의 문자 불명료성 관대성에 대한 판정은 제1 입력의 끝의 표시를 수신한 후에 이루어진다(1528). 일부 실시예들에서, 복수의 문자 선택 옵션들은 (도 14b에 도시된 바와 같이) 문자의 대문자 버전 및 소문자 버전을 포함한다(1530).
일부 실시예들에서, 디바이스는 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면) 상에서 검출된 제2 입력(예컨대, 도 14c에서의 접촉(1403))의 표시를 수신한다(1532). 일부 실시예들에서, 제2 입력의 표시를 수신한 것에 응답하여(1534), 제2 입력(예컨대, 문자의 소문자 버전과 연관된 디바이스의 터치 감응형 표면의 특정 영역에서의 탭핑, 또는 문자의 소문자 버전과 연관된 특정 제스처. 예를 들어, 도 14c에서, 터치 감응형 표면(451)의 상부 우측 영역에서 검출된 접촉(1403))이 문자의 소문자 버전에 대응한다는 판정에 따라, 디바이스는 텍스트 입력 필드 내에 문자의 소문자 버전(예컨대, 도 14c에서 텍스트 입력 필드(1410) 내에의 소문자 "c"(1408))을 입력한다(1536). 일부 실시예들에서, 제2 입력의 표시를 수신한 것에 응답하여(1534), 제2 입력(예컨대, 문자의 대문자 버전과 연관된 디바이스의 터치 감응형 표면의 특정 영역에서의 탭핑, 또는 문자의 대문자 버전과 연관된 특정 제스처. 예를 들어, 도 14c에서, 터치 감응형 표면(451)의 상부 좌측 영역에서 검출된 접촉)이 문자의 대문자 버전에 대응한다는 판정에 따라, 디바이스는 텍스트 입력 필드 내에 문자의 대문자 버전을 입력한다(1538).
일부 실시예들에서, 디바이스의 터치 감응형 표면(예컨대, 터치 스크린 디스플레이를 갖는 휴대용 다기능 디바이스 또는 원격 제어부의 터치 감응형 표면)의 제1 영역은 복수의 후보 문자들 중 제1 후보 문자와 연관되고(예컨대, 도 14c에서 터치 감응형 표면(451)의 상부 우측 영역이 문자 선택 옵션들(1406)에서의 소문자 "c"와 연관됨), 제1 영역과는 상이한, 디바이스의 터치 감응형 표면의 제2 영역은 복수의 후보 문자들 중 제2 후보 문자와 연관된다(예컨대, 도 14c에서 터치 감응형 표면(451)의 상부 좌측 영역이 문자 선택 옵션들(1406)에서의 대문자 "C"와 연관됨)(1540). 일부 실시예들에서, 터치 감응형 표면 상의 제2 영역에 대한 터치 감응형 표면 상의 제1 영역의 상대적 위치는 사용자 인터페이스에서의 제2 후보 문자에 대한 제1 후보 문자의 상대적 위치와 동일하다. 즉, 복수의 문자 선택 옵션들은 디바이스의 터치 감응형 표면의 레이아웃과 유사한 레이아웃에 디스플레이된다. 일부 실시예들에서, 디바이스는 디바이스의 터치 감응형 표면 상에서 검출된 제2 입력(예컨대, 탭핑 또는 탭핑-앤드-클릭)의 표시를 수신한다(1542). 일부 실시예들에서, 제2 입력의 표시를 수신한 것에 응답하여(1544), 제2 입력이 디바이스의 터치 감응형 표면의 제1 영역 상에서 검출되었다는 판정에 따라, 디바이스는 텍스트 입력 필드 내에 제1 후보 문자를 입력한다(1546). 일부 실시예들에서, 제2 입력의 표시를 수신한 것에 응답하여(1544), 제2 입력이 디바이스의 터치 감응형 표면의 제2 영역 상에서 검출되었다는 판정에 따라, 디바이스는 텍스트 입력 필드 내에 제2 후보 문자를 입력한다(1548). 예를 들어, 복수의 문자 선택 옵션들은 선택적으로 (도 14c에 도시된 바와 같이) 상부 좌측에 제1 문자, 상부 우측에 제2 문자, 하부 우측에 제3 문자, 및 하부 좌측에 제4 문자가 있는 2×2 격자형으로 사용자 인터페이스에 디스플레이된다. 문자들 중 각자의 문자의 선택은, 선택적으로, 도 14c에 도시된 바와 같이, 각자의 문자가 디스플레이되는 격자형의 배열의 영역에 대응하는 터치 감응형 표면 상의 영역(상부 좌측, 상부 우측, 하부 우측, 하부 좌측)에서 탭핑함으로써 달성된다.
도 15a 내지 도 15d에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 900, 1100, 1300))과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 15a 내지 도 15d와 관련하여 전술된 방법(1500)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다. 예를 들어, 방법(1500)을 참조하여 전술된 사용자 인터페이스, 디스플레이 디바이스, 및 터치 감응형 표면은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 900, 1100, 1300))을 참조하여 본 명세서에 기술된 사용자 인터페이스들, 디스플레이 디바이스들, 및 터치 감응형 표면들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
전술된 정보 프로세싱 방법들에서의 동작들은 선택적으로 (예컨대, 도 1a, 도 3, 및 도 5와 관련하여 전술된 바와 같은) 범용 프로세서들 또는 애플리케이션 특정 칩들과 같은 정보 프로세싱 장치 내의 하나 이상의 기능 모듈들을 구동시킴으로써 구현된다.
도 15a 내지 도 15d를 참조하여 전술된 동작들은, 선택적으로, 도 1a 및 도 1b에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 생성 동작(1502), 수신 동작(1506), 및 디스플레이 동작들(1512, 1520)은 선택적으로 이벤트 분류기(170), 이벤트 인식기(180), 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각자의 이벤트 인식기(180)는 이벤트 정보를 각자의 이벤트 정의(186)와 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상에서의 객체의 선택과 같은 사전정의된 이벤트 또는 서브이벤트에 대응하는지 여부를 판정한다. 각자의 사전정의된 이벤트 또는 서브이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는, 선택적으로, 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 각자의 GUI 업데이터(178)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
일부 실시예들에 따르면, 도 16은 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1600)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 16에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리될 수 있음이 당업자에 의해 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능성있는 조합 또는 분리 또는 추가 정의를 지원한다.
도 16에 도시된 바와 같이, 전자 디바이스(1600)는, 선택적으로, 입력들을 수신하도록 구성된 수신 유닛(1602), 및 수신 유닛(1602)에 커플링된 프로세싱 유닛(1604)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1604)은 디스플레이 인에이블링 유닛(1606), 판정 유닛(1608), 수행 유닛(1610), 및 검출 유닛(1612)을 포함한다.
일부 실시예들에서, 수신 유닛(1602)은 디바이스의 터치 감응형 표면 상에서 검출된 접촉을 포함하는 제1 입력의 표시를 수신하도록 구성되고, 여기서 터치 감응형 표면은 복수의 사전정의된 영역들을 포함하고, 복수의 사전정의된 영역들의 각각의 사전정의된 영역은 연관된 기능을 수행하도록 선택가능하다. 일부 실시예들에서, 프로세싱 유닛(1604)은 (예컨대, 디스플레이 인에이블링 유닛(1606)에 의해) 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성하도록, 제1 입력의 표시를 수신한 것에 응답하여, 접촉이 제1 기간보다 더 오랫동안 검출되었는지 여부를 (예컨대, 판정 유닛(1608)에 의해) 판정하도록, 그리고 접촉이, 접촉이 제1 기간보다 더 오랫동안 검출되었을 때 충족되는 기준을 포함하는 기능 디스플레이 기준들을 충족시킨다는 판정에 따라, 사용자 인터페이스에서의 디스플레이를 위해 복수의 연관된 기능들 중 제1 기능에 관한 정보를 포함하는 기능 정보를 (예컨대, 판정 유닛(1608)에 의해) 판정하도록 구성된다.
일부 실시예들에서, 프로세싱 유닛(1604)은, 접촉이 기능 디스플레이 기준들을 충족시키지 않는다는 판정에 따라, 복수의 연관된 기능들 중 제1 기능에 관한 정보를 포함하는 기능 정보의 (예컨대, 판정 유닛(1608)에 의한) 판정을 무시하도록 추가로 구성된다.
일부 실시예들에서, 기능 정보는 사용자 인터페이스에서 이동 이미지 또는 정지 이미지 위에 디스플레이되는 오버레이를 포함한다. 일부 실시예들에서, 기능 디스플레이 기준들은 접촉이 제1 기간 동안에 제1 이동 임계치 미만으로 이동했을 때 충족되는 기준을 포함한다.
일부 실시예들에서, 프로세싱 유닛은, 접촉이 제1 기간 동안 제1 이동 임계치를 초과해서 이동했기 때문에 기능 디스플레이 기준들이 충족되지 않았다는 판정에 따라, 복수의 연관된 기능들 중 제1 기능에 관한 정보를 포함하는 기능 정보의 (예컨대, 판정 유닛(1608)에 의한) 판정을 무시하도록 추가로 구성된다.
일부 실시예들에서, 제1 기능에 관한 정보는 제1 기능을 수행하기 위한 시각적 단서를 포함한다. 일부 실시예들에서, 제1 기능에 관한 정보는 사용자 인터페이스에서의 제1 위치에 디스플레이되는데, 제1 위치는 제1 기능과 연관된 터치 감응형 표면 상의 제1 사전정의된 영역에 대응한다. 일부 실시예들에서, 기능 정보는 복수의 연관된 기능들 중 제2 기능에 관한 제2 정보를 추가로 포함하고, 제2 정보는 사용자 인터페이스에서의 제2 위치에 디스플레이되는데, 제2 위치는 제2 기능과 연관된 터치 감응형 표면 상의 제2 사전정의된 영역에 대응하고, 사용자 인터페이스에서의 제2 위치에 대한 사용자 인터페이스에서의 제1 위치의 상대적 포지셔닝은 터치 감응형 표면 상의 제2 사전정의된 영역에 대한 터치 감응형 표면 상의 제1 사전정의된 영역의 상대적 포지셔닝에 대응한다.
일부 실시예들에서, 수신 유닛(1602)은 제1 기능과 연관된 터치 감응형 표면의 제1 사전정의된 영역 상에서 검출된 제2 입력의 표시를 수신하도록 추가로 구성되고, 프로세싱 유닛(1604)은, 제2 입력의 표시를 수신한 것에 응답하여, 제1 사전정의된 영역과 연관된 제1 기능을 (예컨대, 수행 유닛(1610)에 의해) 수행하도록 추가로 구성된다.
일부 실시예들에서, 제2 입력을 검출하는 것은 디바이스의 터치 감응형 표면 상에의 접촉과 동시에 제2 입력을 검출하는 것을 포함한다. 일부 실시예들에서, 제2 입력을 검출하는 것은 디바이스의 터치 감응형 표면의 제1 사전정의된 영역 상에의 제2 접촉을 검출하는 것을 포함한다. 일부 실시예들에서, 제2 입력을 검출하는 것은 접촉의 세기의, 제1 사전결정된 세기 임계치 초과의 증가를 검출하는 것을 포함한다.
일부 실시예들에서, 수신 유닛(1602)은 제1 기능과 연관된 터치 감응형 표면의 제1 사전정의된 영역 상에서 검출된 제3 입력의 표시를 수신하도록 추가로 구성되고, 제3 입력을 검출하는 것은 제1 사전결정된 세기 임계치를 초과하는 제2 사전결정된 세기 임계치 초과의 접촉의 세기의 제2 증가를 검출하는 것을 포함하고, 프로세싱 유닛(1604)은, 제3 입력의 표시를 수신한 것에 응답하여, 터치 감응형 표면 상의 제1 사전정의된 영역과 연관된 제1 기능의 (예컨대, 수행 유닛(1610)에 의한) 수행을 무시하도록, 그리고 터치 감응형 표면의 제1 사전정의된 영역과 연관된, 제1 기능과는 상이한 제2 기능을 (예컨대, 수행 유닛(1610)에 의해) 수행하도록 추가로 구성된다.
일부 실시예들에서, 프로세싱 유닛(1604)은, 제2 기능을 수행하기 전, 사용자 인터페이스에서의 기능 정보를 터치 감응형 표면의 제1 사전정의된 영역과 연관된 제2 기능에 관한 제2 정보를 포함하는 제2 기능 정보로 (예컨대, 디스플레이 인에이블링 유닛(1606)에 의해) 대체하도록 추가로 구성된다.
일부 실시예들에서, 제2 입력을 검출하는 것은 제1 사전결정된 세기 임계치 초과의 접촉의 세기의 증가를 검출한 후 제2 기간보다 더 오랫동안 디바이스의 터치 감응형 표면 상에의 접촉을 검출하는 것을 추가로 포함하고, 프로세싱 유닛(1604)은, 제2 입력의 표시를 수신한 것에 응답하여, 터치 감응형 표면 상의 제1 사전정의된 영역과 연관된 제1 기능의 (예컨대, 수행 유닛(1610)에 의한) 수행을 무시하도록, 그리고 터치 감응형 표면의 제1 사전정의된 영역과 연관된, 제1 기능과는 상이한 제2 기능을 (예컨대, 수행 유닛(1610)에 의해) 수행하도록 추가로 구성된다.
일부 실시예들에서, 프로세싱 유닛은, 제2 기능을 수행하기 전, 사용자 인터페이스에서의 기능 정보를 터치 감응형 표면의 제1 사전정의된 영역과 연관된 제2 기능에 관한 제2 정보를 포함하는 제2 기능 정보로 (예컨대, 디스플레이 인에이블링 유닛(1606)에 의해) 대체하도록 추가로 구성된다. 일부 실시예들에서, 디바이스는 입력 디바이스를 포함하고, 입력 디바이스와 디스플레이 디바이스는 별개의 디바이스들이다.
일부 실시예들에서, 디바이스의 터치 감응형 표면 상의 복수의 사전정의된 영역들 중 제1 사전정의된 영역은 제1 기능을 포함하는 제1 세트의 기능들과 연관되고, 제1 입력의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은 사용자 인터페이스의 현재 콘텍스트를 판정하는 것, 및 사용자 인터페이스의 현재 콘텍스트에 기초하여 제1 세트의 기능들로부터 제1 기능을 선택하는 것을 포함한다. 일부 실시예들에서, 사용자 인터페이스의 현재 콘텍스트에 기초하여 제1 세트의 기능들로부터 제1 기능을 선택하는 것은, 현재 콘텍스트가 제1 콘텍스트라는 판정에 따라, 제1 기능은 제1 동작에 대응하는 것, 및 현재 콘텍스트가 제2 콘텍스트라는 판정에 따라, 제1 기능은 제1 동작과는 상이한 제2 동작에 대응하는 것을 포함한다.
일부 실시예들에서, 디바이스의 터치 감응형 표면 상의 복수의 사전정의된 영역들 중 제2 사전정의된 영역은 제2 기능을 포함하는 제2 세트의 기능들과 연관되고; 제1 입력의 표시를 수신한 것에 응답하여 디스플레이를 위해 기능 정보를 판정하는 것은, 사용자 인터페이스의 현재 콘텍스트에 기초하여 제2 세트의 기능들로부터 제2 기능을 선택하는 것을 추가로 포함하고, 현재 콘텍스트가 제1 콘텍스트라는 판정에 따라, 제1 기능은 제1 동작에 대응하고, 제2 기능은 제1 동작 및 제2 동작과는 상이한 제3 동작에 대응하고, 현재 콘텍스트가 제2 콘텍스트라는 판정에 따라, 제1 기능은 제2 동작에 대응하고, 제2 기능은 제1 동작, 제2 동작, 및 제3 동작과는 상이한 제4 동작에 대응한다.
일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 내비게이트하기 위한 내비게이션 기능들을 포함한다. 일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 콘텐츠를 내비게이트하기 위한 내비게이션 기능들을 포함한다. 일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 하나 이상의 콘텐츠 바들을 내비게이트하기 위한 내비게이션 기능들을 포함한다. 일부 실시예들에서, 복수의 연관된 기능들은 사용자 인터페이스에서 콘텐츠에 관한 정보를 제시하기 위한 정보 기능들을 포함한다.
일부 실시예들에 따르면, 도 17은 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1700)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 17에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리될 수 있음이 당업자에 의해 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능성있는 조합 또는 분리 또는 추가 정의를 지원한다.
도 17에 도시된 바와 같이, 전자 디바이스(1700)는, 선택적으로, 입력들을 수신하도록 구성된 수신 유닛(1702), 및 수신 유닛(1702)에 커플링된 프로세싱 유닛(1704)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1704)은 획득 유닛(1706), 디스플레이 인에이블링 유닛(1708), 이동 유닛(1710), 및 판정 유닛(1712)을 포함한다.
일부 실시예들에서, 프로세싱 유닛(1704)은 복수의 콘텐츠 아이템들을 포함하는 콘텐츠 아이템들의 시퀀스를 식별하는 정보를 (예컨대, 획득 유닛(1706)에 의해) 획득하도록; 복수의 콘텐츠 아이템들로부터의 각자의 콘텐츠 아이템이 현재 선택된 콘텐츠 아이템인 동안, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스 - 사용자 인터페이스는 각자의 콘텐츠 아이템에서의 현재 위치의 표현, 및 각자의 콘텐츠 아이템에서의 상이한 위치들에 대응하는 복수의 이미지들 및 콘텐츠 아이템들의 시퀀스에서의 각자의 콘텐츠 아이템에 인접한 복수의 콘텐츠 아이템들에서의 제1 인접 콘텐츠 아이템의 표현을 포함하는 내비게이션 바를 포함함 - 를 (예컨대, 디스플레이 인에이블링 유닛(1708)에 의해) 생성하도록; 그리고 디스플레이 디바이스에 사용자 인터페이스를 (예컨대, 디스플레이 인에이블링 유닛(1708)에 의해) 제공하도록 구성된다.
일부 실시예들에서, 내비게이션 바에서의 제1 인접 콘텐츠 아이템의 표현은 제1 인접 콘텐츠 아이템에서의 위치로부터의 이미지를 포함한다. 일부 실시예들에서, 내비게이션 바는 콘텐츠 아이템들의 시퀀스에서의 각자의 콘텐츠 아이템에 인접한 복수의 콘텐츠 아이템들에서의 제2 인접 콘텐츠 아이템의 표현을 추가로 포함하고, 제1 인접 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스에서의 각자의 콘텐츠 아이템에 선행하고, 제2 인접 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스에서의 각자의 콘텐츠 아이템에 후속한다.
일부 실시예들에서, 내비게이션 바는 내비게이션 바 내의 복수의 이미지들 상에 오버레이되는 현재 위치 표시자를 추가로 포함하고, 내비게이션 바 내의 복수의 이미지들 각각에 대한 현재 위치 표시자의 상대적 위치는 각자의 콘텐츠 아이템에서의 현재 위치 및 각자의 콘텐츠 아이템에서의 현재 위치의 표현에 대응한다. 일부 실시예들에서, 수신 유닛(1702)은, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스의 터치 감응형 표면 상에서 검출된 접촉을 포함하는 제1 입력의 표시를 수신하도록 구성되고 - 접촉을 검출하는 것은 접촉의 이동을 검출하는 것을 포함함 -, 프로세싱 유닛(1704)은 접촉의 이동에 따라 내비게이션 바 내의 현재 위치 표시자를 (예컨대, 이동 유닛(1710)에 의해) 이동시키도록 추가로 구성되는데, 현재 위치 표시자를 이동시키는 것은, 접촉의 이동에 따라 내비게이션 바 내의 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치를 변경하는 것; 및 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치에 따라 각자의 콘텐츠 아이템에서의 현재 위치 및 각자의 콘텐츠 아이템에서의 현재 위치의 표현을 업데이트하는 것을 포함한다.
일부 실시예들에서, 경계는 내비게이션 바 내의 복수의 이미지들을 내비게이션 바 내의 제1 인접 콘텐츠 아이템의 표현으로부터 이격시키고, 프로세싱 유닛(1704)은, 현재 위치 표시자가 경계를 내비게이션 바 내의 복수의 이미지들로부터 내비게이션 바 내의 제1 인접 콘텐츠 아이템의 표현으로 경계 위를 가로지른 것으로 (예컨대, 판정 유닛(1712)에 의해) 판정하도록; 그리고 그 판정에 따라, 내비게이션 바에서, 각자의 콘텐츠 아이템에서의 상이한 위치들에 대응하는 복수의 이미지들을 제1 인접 콘텐츠 아이템에서의 상이한 위치들에 대응하는 제2 복수의 이미지들로 (예컨대, 디스플레이 인에이블링 유닛(1708)에 의해) 대체하도록; 제1 인접 콘텐츠 아이템에서의 현재 위치에 대응시키기 위해 내비게이션 바 내의 제2 복수의 이미지들의 각각의 이미지에 대한 현재 위치 표시자의 상대적 위치를 (예컨대, 디스플레이 인에이블링 유닛(1708)에 의해) 설정하도록; 내비게이션 바에서, 제1 인접 콘텐츠 아이템의 표현을 복수의 콘텐츠 아이템들 내의 제2 인접 콘텐츠 아이템의 표현으로 (예컨대, 디스플레이 인에이블링 유닛(1708)에 의해) 대체하도록 - 제2 인접 콘텐츠 아이템은 각자의 콘텐츠 아이템과는 상이하고, 제2 인접 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스에서의 제1 인접 콘텐츠 아이템에 인접함 -; 그리고 사용자 인터페이스에서, 각자의 콘텐츠 아이템의 현재 위치의 표현을 제1 인접 콘텐츠 아이템에서의 현재 위치의 표현으로 (예컨대, 디스플레이 인에이블링 유닛(1708)에 의해) 대체하도록 추가로 구성된다.
일부 실시예들에서, 디바이스는 입력 디바이스를 포함하고, 입력 디바이스와 디스플레이 디바이스는 별개의 디바이스들이다. 일부 실시예들에서, 각자의 콘텐츠 아이템의 표현은 사용자 인터페이스에서의 내비게이션 바보다 더 크고, 각자의 콘텐츠 아이템의 표현은 각자의 콘텐츠 아이템으로부터의 비디오를 포함하고, 비디오는 내비게이션 바 내의 복수의 이미지들을 포함하고, 내비게이션 바 내의 복수의 이미지들은 각자의 콘텐츠 아이템으로부터의 복수의 정지 이미지들을 포함한다.
일부 실시예들에서, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입을 판정하는 것; 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템에서 제1 간격만큼 이격된 제1 위치 및 제2 위치를 선택하는 것 - 제1 간격은 시간 기반 간격이고, 내비게이션 바 내의 복수의 이미지들 중 제1 이미지는 각자의 콘텐츠 아이템에서의 제1 위치에 대응하고, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지는 각자의 콘텐츠 아이템에서의 제2 위치에 대응함 -; 및 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템에서 제1 간격과는 상이한 제2 간격만큼 이격된 제3 위치 및 제4 위치를 선택하는 것 - 제2 간격은 콘텐츠 기반 간격이고, 내비게이션 바 내의 복수의 이미지들 중 제1 이미지는 각자의 콘텐츠 아이템에서의 제3 위치에 대응하고, 내비게이션 바 내의 복수의 이미지들 중 제2 이미지는 각자의 콘텐츠 아이템에서의 제4 위치에 대응함 - 을 포함한다.
일부 실시예들에서, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 시퀀스를 식별하는 정보를 획득하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입을 판정하는 것; 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템을 포함하는 콘텐츠 아이템들의 제1 시퀀스를 식별하는 것 - 제1 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 바로 선행하고, 제2 콘텐츠 아이템은 콘텐츠 아이템들의 시퀀스 내의 각자의 콘텐츠 아이템에 바로 후속함 -; 및 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템을 포함하는, 콘텐츠 아이템들의 제1 시퀀스와는 상이한 콘텐츠 아이템들의 제2 시퀀스를 식별하는 것 - 제3 콘텐츠 아이템은 콘텐츠 아이템들의 제2 시퀀스 내의 각자의 콘텐츠 아이템에 인접하고, 제3 콘텐츠 아이템은 제1 콘텐츠 아이템 및 제2 콘텐츠 아이템과는 상이함 - 을 포함한다.
일부 실시예들에서, 내비게이션 바 내의 복수의 이미지들 중 제1 이미지는 각자의 콘텐츠 아이템에서의 제1 위치에 대응하고 내비게이션 바 내의 복수의 이미지들 중 제2 이미지는 각자의 콘텐츠 아이템에서의 제2 위치에 대응하고 - 각자의 콘텐츠 아이템에서의 제1 위치와 각자의 콘텐츠 아이템에서의 제2 위치는 제1 간격만큼 이격됨 -, 수신 유닛(1702)은, 사용자 인터페이스가 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스의 터치 감응형 표면 상에서 검출된 접촉을 포함하는 제1 입력의 표시를 수신하도록 추가로 구성되고, 접촉을 검출하는 것은 접촉의 이동을 검출하는 것을 포함하고, 프로세싱 유닛(1704)은, 접촉의 이동에 따라, 제1 간격과는 상이한 제2 간격만큼 이격된, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 (예컨대, 판정 유닛(1712)에 의해) 선택하도록; 그리고 내비게이션 바 내의 제1 이미지를 각자의 콘텐츠 아이템에서의 제3 위치에 대응하는 제3 이미지로 그리고 내비게이션 바 내의 제2 이미지를 각자의 콘텐츠 아이템에서의 제4 위치에 대응하는 제4 이미지로 (예컨대, 디스플레이 인에이블링 유닛(1706)에 의해) 대체하도록 추가로 구성된다.
일부 실시예들에서, 각자의 콘텐츠 아이템에서의 제3 위치 및 제4 위치를 선택하는 것은, 각자의 콘텐츠 아이템의 콘텐츠 타입을 판정하는 것; 각자의 콘텐츠 아이템의 콘텐츠 타입이 제1 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템에서의 제3 위치와 제4 위치를 이격시키는 제2 간격을 시간 기반 간격이 되도록 선택하는 것; 및 각자의 콘텐츠 아이템의 콘텐츠 타입이 제2 콘텐츠 타입이라는 판정에 따라, 각자의 콘텐츠 아이템에서의 제3 위치와 제4 위치를 이격시키는 제2 간격을 콘텐츠 기반 간격이 되도록 선택하는 것을 포함한다.
일부 실시예들에 따르면, 도 18은 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1800)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 18에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리될 수 있음이 당업자에 의해 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능성있는 조합 또는 분리 또는 추가 정의를 지원한다.
도 18에 도시된 바와 같이, 전자 디바이스(1800)는, 선택적으로, 입력들을 수신하도록 구성된 수신 유닛(1802), 및 수신 유닛(1802)에 커플링된 프로세싱 유닛(1804)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1804)은 디스플레이 인에이블링 유닛(1806), 판정 유닛(1808), 및 이동 유닛(1810)을 포함한다.
일부 실시예들에서, 수신 유닛(1802)은 디바이스의 터치 감응형 표면 상에서 검출된 접촉을 포함하는 제1 입력의 표시를 수신하도록 구성되고, 제1 입력은 이동 메트릭에 대한 각자의 값에 대응하고, 프로세싱 유닛(1804)은, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 (예컨대, 디스플레이 인에이블링 유닛(1806)에 의해) 생성하도록 - 사용자 인터페이스는 복수의 사용자 인터페이스 요소들 중 현재 선택된 사용자 인터페이스 요소를 나타내는 선택 표시자를 포함함 -; 제1 입력의 표시를 수신한 것에 응답하여, 제1 입력이 일원적 이동 기준들을 충족시키는지 여부를 (예컨대, 판정 유닛(1808)에 의해) 판정하도록; 제1 입력이 일원적 이동 기준들을 충족시킨다는 판정에 따라, 사용자 인터페이스에서 선택 표시자를 사전정의된 양만큼 (예컨대, 이동 유닛(1810)에 의해) 이동시키도록; 그리고 제1 입력이 일원적 이동 기준들을 충족시키지 않는다는 판정에 따라, 제1 입력과 연관된 이동 메트릭의 각자의 값에 따라 선택 표시자를 (예컨대, 이동 유닛(1810)에 의해) 이동시키도록 구성된다.
일부 실시예들에서, 사용자 인터페이스에서 선택 표시자를 사전정의된 양만큼 이동시키는 것은 복수의 사용자 인터페이스 요소들에서의 인접 사용자 인터페이스 요소의 선택을 나타내도록 선택 표시자를 이동시키는 것을 포함한다. 일부 실시예들에서, 일원적 이동 기준들은, 접촉의 리프트오프가 접촉의 터치다운의 제1 기간 내에 검출되고, 그리고 접촉의 이동이 제1 이동 임계치 초과이지만 제2 이동 임계치 미만일 때 충족되는 기준을 포함한다. 일부 실시예들에서, 제1 이동 임계치 및 제2 이동 임계치는 사용자 인터페이스 내의 단일 UI 요소에 의해 선택 표시자를 이동시키기 위해 터치 감응형 표면 상에서 요구되는 접촉 이동에 관해서 정의된다.
일부 실시예들에서, 선택 표시자를 사전정의된 양만큼 이동시키는 것, 및 이동 메트릭의 각자의 값에 따라 선택 표시자를 이동시키는 것 양측 모두는 터치 감응형 표면 상에서의 접촉의 이동 방향에 따라 선택 표시자를 이동시키는 것을 포함한다. 일부 실시예들에서, 일원적 이동 기준들은, 접촉이 터치 감응형 표면의 복수의 에지 영역들 중 제1 에지 영역에서 검출되고, 접촉의 리프트오프가 접촉의 터치다운의 제1 기간 내에 검출되고, 접촉의 이동이 이동 임계치 미만일 때 충족되는 기준을 포함하고, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 접촉이 검출된 터치 감응형 표면의 제1 에지 영역에 대응하는 방향으로 이동시키는 것을 포함한다.
일부 실시예들에서, 복수의 사용자 인터페이스 요소들은 복수의 내비게이션 컬럼들을 포함하고, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 내비게이션 컬럼으로부터 제1 내비게이션 컬럼에 인접한 제2 내비게이션 컬럼으로 이동시키는 것을 포함한다. 일부 실시예들에서, 복수의 사용자 인터페이스 요소들은 복수의 이미지들을 포함하고, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 이미지로부터 제1 이미지에 인접한 제2 이미지로 이동시키는 것을 포함한다. 일부 실시예들에서, 복수의 사용자 인터페이스 요소들은 복수의 콘텐츠 아이템들을 격자형 배열로 포함하고, 선택 표시자를 사전정의된 양만큼 이동시키는 것은 선택 표시자를 제1 콘텐츠 아이템으로부터 제1 콘텐츠 아이템에 인접한 제2 콘텐츠 아이템으로 이동시키는 것을 포함한다.
일부 실시예들에 따르면, 도 19는 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1900)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 19에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리될 수 있음이 당업자에 의해 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능성있는 조합 또는 분리 또는 추가 정의를 지원한다.
도 19에 도시된 바와 같이, 전자 디바이스(1900)는, 선택적으로, 입력들을 수신하도록 구성된 수신 유닛(1902), 수신 유닛에 커플링되고 디바이스의 배향을 검출하도록 구성된 배향 유닛(1904), 및 수신 유닛(1902) 및 배향 유닛(1904)에 커플링된 프로세싱 유닛(1906)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1906)은 판정 유닛(1908), 해석 유닛(1910), 수행 유닛(1912), 및 디스플레이 인에이블링 유닛(1914)을 포함한다.
일부 실시예들에서, 수신 유닛(1902)은 디바이스의 터치 감응형 표면 상에서 검출된 접촉의 이동을 포함하는 제1 입력의 표시를 수신하도록 구성되고; 프로세싱 유닛(1906)은, 디바이스를 사용하는 사용자의 그립을 (예컨대, 판정 유닛(1908)에 의해) 판정하도록; 그리고 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 (예컨대, 해석 유닛(1910)에 의해) 해석하도록 구성된다. 일부 실시예들에서, 디바이스를 사용하는 사용자의 그립을 판정하는 것은 디바이스의 배향에 적어도 부분적으로 기초하여 디바이스를 사용하는 사용자의 그립을 판정하는 것을 포함한다. 일부 실시예들에서, 디바이스를 사용하는 사용자의 그립을 판정하는 것은 가장 최근의 사전결정된 기간에 걸친 디바이스의 평균 배향에 기초하여 디바이스를 사용하는 사용자의 그립을 판정하는 것을 포함한다. 일부 실시예들에서, 디바이스의 배향은 디바이스 내의 가속도계 또는 다른 배향 유닛(1904)에 기초하여 판정된다.
일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 해석하는 것은, 그립이 제1 그립이라는 판정에 따라, 제1 입력에 응답하여 제1 동작을 (예컨대, 수행 유닛(1912)에 의해) 수행하는 것; 및 그립이 제1 그립과는 상이한 제2 그립이라는 판정에 따라, 제1 입력에 응답하여 제1 동작과는 상이한 제2 동작을 (예컨대, 수행 유닛(1912)에 의해) 수행하는 것을 포함한다. 일부 실시예들에서, 사용자의 그립에 적어도 부분적으로 기초하여 터치 감응형 표면 상에서의 접촉의 이동을 해석하는 것은, 그립이 제1 그립이라는 판정에 따라, 접촉의 이동의 제1 부분을 무시하는 것; 및 그립이 제1 그립과는 상이한 제2 그립이라는 판정에 따라, 접촉의 이동의 제1 부분과는 상이한 접촉의 이동의 제2 부분을 무시하는 것을 포함한다.
일부 실시예들에서, 제1 그립은 오른손이 사용된 그립을 포함하고, 접촉의 이동의 제1 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 우측으로부터 좌측으로라는 판정에 따라, 접촉의 이동의 끝을 무시하는 것; 및 접촉의 이동이 터치 감응형 표면 상에서 좌측으로부터 우측으로라는 판정에 따라, 접촉의 이동의 시작을 무시하는 것을 포함한다. 일부 실시예들에서, 제2 그립은 왼손이 사용된 그립을 포함하고, 접촉의 이동의 제2 부분을 무시하는 것은, 접촉의 이동이 터치 감응형 표면 상에서 우측으로부터 좌측으로라는 판정에 따라, 접촉의 이동의 시작을 무시하는 것; 및 접촉의 이동이 터치 감응형 표면 상에서 좌측으로부터 우측으로라는 판정에 따라, 접촉의 이동의 끝을 무시하는 것을 포함한다.
일부 실시예들에서, 프로세싱 유닛(1906)은, 디스플레이 디바이스 상에서의 디스플레이를 위해 피드백 정보를 (예컨대, 디스플레이 인에이블링 유닛(1914)에 의해) 제공하도록 추가로 구성되고, 피드백 정보는 디바이스를 사용하는 사용자의 판정된 그립에 관한 정보 및 터치 감응형 표면 상에서의 접촉의 이동의 해석을 포함한다.
일부 실시예들에 따르면, 도 20은 다양하게 기술된 실시예들의 원리들에 따라 구성된 제1 디바이스(2000)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 20에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리될 수 있음이 당업자에 의해 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능성있는 조합 또는 분리 또는 추가 정의를 지원한다.
도 20에 도시된 바와 같이, 전자 디바이스(2000)는, 선택적으로, 입력들을 수신하도록 구성된 수신 유닛(2002), 및 수신 유닛(2002)에 커플링된 프로세싱 유닛(2004)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(2004)은 디스플레이 인에이블링 유닛(2006), 판정 유닛(2008), 및 입력 유닛(2010)을 포함한다.
일부 실시예들에서, 수신 유닛(2002)은, 디바이스의 터치 감응형 표면 상에서 검출된 접촉의 이동 - 접촉의 이동은 복수의 후보 문자들에 대응함 - 을 포함하는 제1 입력의 표시를 수신하도록 구성되고; 프로세싱 유닛(2004)은, 디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스 - 사용자 인터페이스는 텍스트 입력 필드를 포함함 - 를 (예컨대, 디스플레이 인에이블링 유닛(2006)에 의해) 생성하도록; 제1 입력의 표시를 수신한 것에 응답하여, 텍스트 입력 필드가 문자 불명료성에 대해 관대하다는 (예컨대, 판정 유닛(2008)에 의한) 판정에 따라, 텍스트 입력 필드에 복수의 후보 문자들 중 최상측 후보 문자를 (예컨대, 디스플레이 인에이블링 유닛(2006)에 의해) 디스플레이하도록; 그리고 텍스트 입력 필드가 문자 불명료성에 대해 관대하지 않다는 (예컨대, 판정 유닛(2008)에 의한) 판정에 따라, 복수의 후보 문자들 중 적어도 2개의 후보 문자에 대응하는 복수의 문자 선택 옵션들을 (예컨대, 디스플레이 인에이블링 유닛(2006)에 의해) 디스플레이하도록 구성된다. 일부 실시예들에서, 문자 불명료성은 텍스트 입력 필드 내에 입력된 문자의 대소문자에 대한 불명료성을 포함한다. 일부 실시예들에서, 문자 불명료성은 텍스트 입력 필드 내에 입력된 문자가 글자인지 아니면 숫자인지에 대한 불명료성을 포함한다. 일부 실시예들에서, 텍스트 입력 필드는 텍스트 입력 필드가 패스워드 입력 필드인 경우에 문자 불명료성에 대해 관대하지 않은 텍스트 입력 필드인 것으로 판정된다. 일부 실시예들에서, 텍스트 입력 필드의 문자 불명료성 관대성에 대한 판정은 제1 입력의 끝의 표시를 수신한 후에 이루어진다.
일부 실시예들에서, 복수의 문자 선택 옵션들은 문자의 대문자 버전 및 소문자 버전을 포함하고, 수신 유닛은 디바이스의 터치 감응형 표면 상에서 검출된 제2 입력의 표시를 수신하도록 추가로 구성되고, 프로세싱 유닛(2004)은, 제2 입력의 표시를 수신한 것에 응답하여, 제2 입력이 문자의 소문자 버전에 대응한다는 (예컨대, 판정 유닛(2008)에 의한) 판정에 따라, 텍스트 입력 필드 내에 문자의 소문자 버전을 (예컨대, 입력 유닛(2010)에 의해) 입력하도록; 그리고 제2 입력이 문자의 대문자 버전에 대응한다는 (예컨대, 판정 유닛(2008)에 의한) 판정에 따라, 텍스트 입력 필드 내에 문자의 대문자 버전을 (예컨대, 입력 유닛(2010)에 의해) 입력하도록 추가로 구성된다. 일부 실시예들에서, 디바이스의 터치 감응형 표면의 제1 영역은 복수의 후보 문자들 중 제1 후보 문자와 연관되고, 제1 영역과는 상이한 디바이스의 터치 감응형 표면의 제2 영역은 복수의 후보 문자들 중 제2 후보 문자와 연관되고, 수신 유닛(2002)은 디바이스의 터치 감응형 표면 상에서 검출된 제2 입력의 표시를 수신하도록 추가로 구성되고, 프로세싱 유닛(2004)은, 제2 입력의 표시를 수신한 것에 응답하여, 제2 입력이 디바이스의 터치 감응형 표면의 제1 영역 상에서 검출되었다는 (예컨대, 판정 유닛(2008)에 의한) 판정에 따라, 텍스트 입력 필드 내에 제1 후보 문자를 (예컨대, 입력 유닛(2010)에 의해) 입력하도록; 그리고 제2 입력이 디바이스의 터치 감응형 표면의 제2 영역 상에서 검출되었다는 (예컨대, 판정 유닛(2008)에 의한) 판정에 따라, 텍스트 입력 필드 내에 제2 후보 문자를 (예컨대, 입력 유닛(2010)에 의해) 입력하도록 추가로 구성된다.
도 7a 내지 도 7g, 도 9a 내지 도 9g, 도 11a 내지 도 11d, 도 13a 내지 도 13c, 및 도 15a 내지 도 15d를 참조하여 전술된 동작들은, 선택적으로, 도 1a, 도 1b, 도 16, 도 17, 도 18, 도 19, 또는 도 20에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 판정 동작들(712, 906, 1118, 1304)은 선택적으로 이벤트 분류기(170), 이벤트 인식기(180) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각자의 이벤트 인식기(180)는 이벤트 정보를 각자의 이벤트 정의(186)와 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상에서의 객체의 선택과 같은 사전정의된 이벤트 또는 서브이벤트에 대응하는지 여부를 판정한다. 각자의 사전정의된 이벤트 또는 서브이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는, 선택적으로, 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 각자의 GUI 업데이터(178)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 1a, 도 1b, 도 16, 도 17, 도 18, 도 19, 또는 도 20에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
전술한 설명은, 설명의 목적을 위해, 특정 실시예들을 참조하여 기술되었다. 그러나, 상기의 예시적인 논의들은 본 발명을 개시된 정확한 형태들로 규명하거나 제한하려는 의도는 아니다. 많은 수정들 및 변형들이 상기 교시 내용들의 관점에서 가능하다. 본 발명의 원리 및 그의 실제적인 응용을 가장 잘 설명하여 다른 당업자들이 본 발명 및 다양하게 기술된 실시예를 고려되는 특정 용도에 적합한 바와 같은 다양한 변형과 함께 가장 잘 사용하는 것을 가능하게 하도록 실시예들이 선택 및 설명되었다.

Claims (20)

  1. 방법으로서,
    하나 이상의 프로세서들 및 메모리를 갖는 전자 디바이스에서,
    디스플레이 디바이스 상에서의 디스플레이를 위해 사용자 인터페이스를 생성하는 단계;
    상기 사용자 인터페이스가 상기 디스플레이 디바이스 상에 디스플레이되는 동안, 디바이스의 터치 감응형 표면 상에서 검출된 접촉을 포함하는 제1 입력의 표시를 수신하는 단계 - 상기 터치 감응형 표면은 복수의 사전정의된 영역을 포함하고, 상기 복수의 사전정의된 영역의 각각의 사전정의된 영역은 연관된 기능을 수행하도록 선택 가능함 -;
    상기 제1 입력의 상기 표시를 수신한 것에 응답하여:
    상기 복수의 사전정의된 영역 중 상기 접촉이 검출된 곳을 판정하는 단계; 및
    상기 복수의 사전정의된 영역 중 제1 사전정의된 영역에서 상기 접촉이 검출된다는 판정에 따라, 상기 사용자 인터페이스에서의 디스플레이를 위해 제1 시각적 표시를 판정하는 단계 - 상기 제1 시각적 표시는, 상기 제1 사전정의된 영역의 추가 선택이 상기 복수의 연관된 기능 중 상기 제1 사전정의된 영역과 연관된 제1 기능의 수행을 야기할 것임을 나타냄 -;
    상기 복수의 사전정의된 영역 중, 상기 제1 사전정의된 영역과 상이한 제2 사전정의된 영역에서 상기 접촉이 검출된다는 판정에 따라, 상기 사용자 인터페이스에서의 디스플레이를 위해 제2 시각적 표시를 판정하는 단계 - 상기 제2 시각적 표시는, 상기 제2 사전정의된 영역의 추가 선택이 상기 복수의 연관된 기능 중 상기 제2 사전정의된 영역과 연관되며 상기 제1 기능과 상이한 제2 기능의 수행을 야기할 것임을 나타냄 -;
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 복수의 사전정의된 영역 중 제1 사전정의된 영역에서 상기 접촉이 검출된다는 판정에 따라, 상기 제2 시각적 표시는 디스플레이되지 않고 상기 제1 시각적 표시가 디스플레이되며,
    상기 복수의 사전정의된 영역 중 제2 사전정의된 영역에서 상기 접촉이 검출된다는 판정에 따라, 상기 제1 시각적 표시는 디스플레이되지 않고 상기 제2 시각적 표시가 디스플레이되는, 방법.
  3. 제1항에 있어서,
    상기 제1 시각적 표시는 상기 사용자 인터페이스에서 이동 이미지 또는 정지 이미지 위에 디스플레이되는 오버레이를 포함하며, 상기 제2 시각적 표시는 상기 사용자 인터페이스에서 상기 이동 이미지 또는 상기 정지 이미지 위에 디스플레이되는 오버레이를 포함하는, 방법.
  4. 제1항에 있어서,
    상기 복수의 사전정의된 영역 중 상기 접촉이 검출된 곳을 판정하는 단계 이전에:
    상기 접촉이 제1 시간 기간 동안 제1 이동 임계치 미만으로 이동했다는 판정에 따라, 상기 사용자 인터페이스에서의 디스플레이를 위한 기능 정보를 판정하는 단계 - 상기 기능 정보는 상기 제1 기능에 관한 정보를 포함함 -
    를 더 포함하는 방법.
  5. 제4항에 있어서,
    상기 복수의 사전정의된 영역 중 상기 접촉이 검출된 곳을 판정하는 단계 이전에:
    상기 접촉이 상기 제1 시간 기간 동안 상기 제1 이동 임계치를 초과하여 이동했다는 판정에 따라, 상기 복수의 연관된 기능 중 상기 제1 기능에 관한 정보를 포함하는 상기 기능 정보의 판정을 무시하는 단계
    를 더 포함하는 방법.
  6. 제1항에 있어서,
    상기 제1 시각적 표시는 상기 제1 기능을 수행하기 위한 제1 시각적 단서(cue)를 포함하고,
    상기 제2 시각적 표시는 상기 제2 기능을 수행하기 위한, 상기 제1 시각적 단서와 상이한 제2 시각적 단서를 포함하는, 방법.
  7. 제1항에 있어서,
    상기 제1 시각적 표시는 상기 사용자 인터페이스에서 제1 위치에 디스플레이되고, 상기 제1 위치는 상기 제1 기능과 연관된 상기 터치 감응형 표면 상의 상기 제1 사전정의된 영역에 대응하는, 방법.
  8. 제7항에 있어서,
    상기 제2 시각적 표시는 상기 사용자 인터페이스에서 제2 위치에 디스플레이되고, 상기 제2 위치는 상기 제2 기능과 연관된 상기 터치 감응형 표면 상의 상기 제2 사전정의된 영역에 대응하며,
    상기 사용자 인터페이스에서의 상기 제2 위치에 대한 상기 사용자 인터페이스에서의 상기 제1 위치의 상대적인 포지셔닝은, 상기 터치 감응형 표면 상에서의 상기 제2 사전정의된 영역에 대한 상기 터치 감응형 표면 상에서의 상기 제1 사전정의된 영역의 상대적인 포지셔닝에 대응하는, 방법.
  9. 제1항에 있어서,
    상기 제1 사전정의된 영역의 추가 선택은 상기 제1 기능과 연관된 상기 터치 감응형 표면의 상기 제1 사전정의된 영역 상에서 검출된 제2 입력의 표시를 수신하는 것을 포함하고,
    상기 제2 사전정의된 영역의 추가 선택은 상기 제2 기능과 연관된 상기 터치 감응형 표면의 상기 제2 사전정의된 영역 상에서 검출된 제3 입력의 표시를 수신하는 것을 포함하며,
    상기 방법은,
    상기 제2 입력의 상기 표시를 수신한 것에 응답하여, 상기 제1 사전정의된 영역과 연관된 상기 제1 기능을 수행하는 단계; 및
    상기 제3 입력의 상기 표시를 수신한 것에 응답하여, 상기 제2 사전정의된 영역과 연관된 상기 제2 기능을 수행하는 단계
    를 더 포함하는 방법.
  10. 제9항에 있어서,
    상기 제2 입력을 검출하는 것은 상기 디바이스의 상기 터치 감응형 표면 상의 상기 접촉과 동시에 상기 제2 입력을 검출하는 것을 포함하고,
    상기 제3 입력을 검출하는 것은 상기 디바이스의 상기 터치 감응형 표면 상의 상기 접촉과 동시에 상기 제3 입력을 검출하는 것을 포함하는, 방법.
  11. 제9항에 있어서,
    상기 제2 입력을 검출하는 것은 상기 디바이스의 상기 터치 감응형 표면의 상기 제1 사전정의된 영역 상의 제2 접촉을 검출하는 것을 포함하고,
    상기 제3 입력을 검출하는 것은 상기 디바이스의 상기 터치 감응형 표면의 상기 제2 사전정의된 영역 상의 제3 접촉을 검출하는 것을 포함하는, 방법.
  12. 제9항에 있어서,
    상기 제1 사전정의된 영역 또는 상기 제2 사전정의된 영역의 상기 추가 선택은, 제1 사전결정된 세기 임계치를 초과하는 상기 접촉의 세기의 증가를 검출하는 것을 포함하는, 방법.
  13. 제12항에 있어서,
    상기 제1 기능과 연관된 상기 터치 감응형 표면의 상기 제1 사전결정된 영역 상에서 검출된 제4 입력의 표시를 수신하는 단계 - 상기 제4 입력을 검출하는 것은, 제2 사전결정된 세기 임계치를 초과하는 상기 접촉의 세기의 제2 증가를 검출하는 것을 포함하고, 상기 제2 사전결정된 세기 임계치는 상기 제1 사전결정된 세기 임계치보다 큼 -;
    상기 제4 입력의 상기 표시를 수신한 것에 응답하여, 상기 터치 감응형 표면 상의 상기 제1 사전정의된 영역과 연관된 상기 제1 기능의 수행을 무시하는 단계, 및 상기 터치 감응형 표면의 상기 제1 사전정의된 영역과 연관된 제3 기능을 수행하는 단계 - 상기 제3 기능은 상기 제1 기능과 상이함 -;
    상기 제2 기능과 연관된 상기 터치 감응형 표면의 상기 제2 사전결정된 영역 상에서 검출된 제5 입력의 표시를 수신하는 단계 - 상기 제5 입력을 검출하는 것은, 상기 제2 사전결정된 세기 임계치를 초과하는 상기 접촉의 세기의 상기 제2 증가를 검출하는 것을 포함하고, 상기 제2 사전결정된 세기 임계치는 상기 제1 사전결정된 세기 임계치보다 큼 -; 및
    상기 제5 입력의 상기 표시를 수신한 것에 응답하여, 상기 터치 감응형 표면 상의 상기 제2 사전정의된 영역과 연관된 상기 제2 기능의 수행을 무시하는 단계, 및 상기 터치 감응형 표면의 상기 제2 사전정의된 영역과 연관된 제4 기능을 수행하는 단계 - 상기 제4 기능은 상기 제2 기능과 상이함 -
    를 더 포함하는 방법.
  14. 제12항에 있어서,
    상기 제1 사전정의된 영역의 상기 추가 선택을 검출하는 것은, 상기 제1 사전결정된 세기 임계치를 초과하는 상기 접촉의 세기의 상기 증가를 검출한 후 제2 시간 기간보다 더 오래 상기 디바이스의 상기 터치 감응형 표면의 상기 제1 사전정의된 영역 상에서의 상기 접촉을 검출하는 것을 포함하고,
    상기 제2 사전정의된 영역의 상기 추가 선택을 검출하는 것은, 상기 제1 사전결정된 세기 임계치를 초과하는 상기 접촉의 세기의 상기 증가를 검출한 후 상기 제2 시간 기간보다 더 오래 상기 디바이스의 상기 터치 감응형 표면의 상기 제2 사전정의된 영역 상에서의 상기 접촉을 검출하는 것을 포함하며,
    상기 방법은:
    상기 제1 사전정의된 영역의 상기 추가 선택을 검출한 것에 응답하여, 상기 터치 감응형 표면 상의 상기 제1 사전정의된 영역과 연관된 상기 제1 기능의 수행을 무시하는 단계, 및 상기 터치 감응형 표면의 상기 제1 사전정의된 영역과 연관된 제3 기능을 수행하는 단계 - 상기 제3 기능은 상기 제1 기능과 상이함 -; 및
    상기 제2 사전정의된 영역의 상기 추가 선택을 검출한 것에 응답하여, 상기 터치 감응형 표면 상의 상기 제2 사전정의된 영역과 연관된 상기 제2 기능의 수행을 무시하는 단계, 및 상기 터치 감응형 표면의 상기 제2 사전정의된 영역과 연관된 제4 기능을 수행하는 단계 - 상기 제4 기능은 상기 제2 기능과 상이함 -;
    를 더 포함하는 방법.
  15. 제1항에 있어서,
    상기 디바이스는 입력 디바이스를 포함하고, 상기 입력 디바이스, 상기 전자 디바이스, 및 상기 디스플레이 디바이스는 별개의 디바이스들인, 방법.
  16. 제1항에 있어서,
    상기 디바이스의 상기 터치 감응형 표면 상의 상기 복수의 사전정의된 영역 중 상기 제1 사전정의된 영역은 제1 세트의 기능들과 연관되고, 상기 제1 세트의 기능들은 상기 제1 기능을 포함하며,
    상기 디바이스의 상기 터치 감응형 표면 상의 상기 복수의 사전정의된 영역 중 상기 제2 사전정의된 영역은 제2 세트의 기능들과 연관되고, 상기 제2 세트의 기능들은 상기 제2 기능을 포함하며,
    상기 방법은:
    상기 제1 기능을 판정하는 단계; 및
    상기 제2 기능을 판정하는 단계
    를 더 포함하고,
    상기 제1 기능을 판정하는 단계는:
    상기 사용자 인터페이스의 현재 콘텍스트를 판정하는 단계; 및
    상기 사용자 인터페이스의 상기 현재 콘텍스트에 기초하여 상기 제1 세트의 기능들로부터 상기 제1 기능을 선택하는 단계를 포함하고,
    상기 제2 기능을 판정하는 단계는:
    상기 사용자 인터페이스의 현재 콘텍스트를 판정하는 단계; 및
    상기 사용자 인터페이스의 상기 현재 콘텍스트에 기초하여 상기 제2 세트의 기능들로부터 상기 제2 기능을 선택하는 단계를 포함하는, 방법.
  17. 제16항에 있어서,
    상기 사용자 인터페이스의 상기 현재 콘텍스트에 기초하여 상기 제1 세트의 기능들로부터 상기 제1 기능을 선택하는 단계는:
    상기 현재 콘텍스트가 제1 콘텍스트라는 판정에 따라, 상기 제1 기능이 제1 동작에 대응하고,
    상기 현재 콘텍스트가 상기 제1 콘텍스트와 상이한 제2 콘텍스트라는 판정에 따라, 상기 제1 기능이 상기 제1 동작과 상이한 제2 동작에 대응하는 것을 포함하고,
    상기 사용자 인터페이스의 상기 현재 콘텍스트에 기초하여 상기 제2 세트의 기능들로부터 상기 제2 기능을 선택하는 단계는:
    상기 현재 콘텍스트가 제3 콘텍스트라는 판정에 따라, 상기 제2 기능이 제3 동작에 대응하고,
    상기 현재 콘텍스트가 상기 제3 콘텍스트와 상이한 제4 콘텍스트라는 판정에 따라, 상기 제2 기능이 상기 제3 동작과 상이한 제4 동작에 대응하는 것을 포함하는, 방법.
  18. 제1항에 있어서,
    상기 접촉의 세기가 제1 사전결정된 세기 임계치 미만이라는 판정에 따라, 상기 제1 기능 또는 상기 제2 기능을 각각 수행하지 않고 디스플레이를 위해 상기 제1 시각적 표시 또는 상기 제2 시각적 표시를 판정하는 단계; 및
    상기 접촉의 세기가 제1 사전결정된 세기 임계치 초과라는 판정에 따라:
    디스플레이를 위해 상기 제1 시각적 표시 또는 상기 제2 시각적 표시를 판정하는 단계; 및
    상기 제1 기능 또는 상기 제2 기능을 각각 수행하는 단계
    를 더 포함하는 방법.
  19. 전자 디바이스로서,
    하나 이상의 프로세서들;
    메모리; 및
    하나 이상의 프로그램들을 포함하고, 상기 하나 이상의 프로그램들은 상기 메모리에 저장되며 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되고, 상기 하나 이상의 프로그램들은 제1항 내지 제18항의 방법들 중 어느 하나의 방법을 수행하기 위한 명령어들을 포함하는, 전자 디바이스.
  20. 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서,
    상기 하나 이상의 프로그램들은, 하나 이상의 프로세서들 및 메모리를 갖는 전자 디바이스에 의해 실행되는 경우, 상기 디바이스로 하여금 제1항 내지 제18항의 방법들 중 어느 하나의 방법을 수행하도록 하는 명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
KR1020187037173A 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용 KR102076252B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462016593P 2014-06-24 2014-06-24
US62/016,593 2014-06-24
PCT/US2015/037520 WO2015200537A2 (en) 2014-06-24 2015-06-24 Input device and user interface interactions

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020167033227A Division KR101933201B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020207003470A Division KR102242348B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용

Publications (2)

Publication Number Publication Date
KR20190000392A KR20190000392A (ko) 2019-01-02
KR102076252B1 true KR102076252B1 (ko) 2020-02-11

Family

ID=53539943

Family Applications (7)

Application Number Title Priority Date Filing Date
KR1020227015835A KR102516282B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020207003470A KR102242348B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020187037173A KR102076252B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020237010562A KR102608294B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020237040858A KR20230165879A (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020217011059A KR102398394B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020167033227A KR101933201B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020227015835A KR102516282B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020207003470A KR102242348B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용

Family Applications After (4)

Application Number Title Priority Date Filing Date
KR1020237010562A KR102608294B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020237040858A KR20230165879A (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020217011059A KR102398394B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용
KR1020167033227A KR101933201B1 (ko) 2014-06-24 2015-06-24 입력 디바이스 및 사용자 인터페이스 상호작용

Country Status (8)

Country Link
US (6) US9792018B2 (ko)
EP (2) EP3126952B1 (ko)
JP (4) JP6496752B2 (ko)
KR (7) KR102516282B1 (ko)
CN (8) CN111104040B (ko)
AU (5) AU2015279949B2 (ko)
TW (1) TWI585673B (ko)
WO (1) WO2015200537A2 (ko)

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
JP2016508007A (ja) 2013-02-07 2016-03-10 アップル インコーポレイテッド デジタルアシスタントのためのボイストリガ
US9871991B2 (en) * 2014-03-31 2018-01-16 Jamdeo Canada Ltd. System and method for display device configuration
US10789642B2 (en) 2014-05-30 2020-09-29 Apple Inc. Family accounts for an online content storage sharing service
CN106415475A (zh) 2014-06-24 2017-02-15 苹果公司 用于在用户界面中导航的列界面
WO2015200228A1 (en) 2014-06-24 2015-12-30 Apple Inc. Character recognition on a computing device
CN111104040B (zh) 2014-06-24 2023-10-24 苹果公司 输入设备和用户界面交互
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9916077B1 (en) * 2014-11-03 2018-03-13 Google Llc Systems and methods for controlling network usage during content presentation
US9875346B2 (en) 2015-02-06 2018-01-23 Apple Inc. Setting and terminating restricted mode operation on electronic devices
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US9857596B2 (en) * 2015-11-10 2018-01-02 Oculus Vr, Llc Strap assembly with flex circuit for a head mounted display
US20170177203A1 (en) * 2015-12-18 2017-06-22 Facebook, Inc. Systems and methods for identifying dominant hands for users based on usage patterns
US10397632B2 (en) * 2016-02-16 2019-08-27 Google Llc Touch gesture control of video playback
CN108475157B (zh) * 2016-03-25 2022-04-22 华为技术有限公司 字符输入方法、装置及终端
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
US11435888B1 (en) * 2016-09-21 2022-09-06 Apple Inc. System with position-sensitive electronic device interface
EP4044613A1 (en) 2016-10-26 2022-08-17 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
US10860857B2 (en) * 2016-10-31 2020-12-08 Huawei Technologies Co., Ltd. Method for generating video thumbnail on electronic device, and electronic device
US10514844B2 (en) * 2016-11-16 2019-12-24 Dell Products L.P. Automatically modifying an input area based on a proximity to one or more edges
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770411A1 (en) * 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US10783320B2 (en) * 2017-05-16 2020-09-22 Apple Inc. Device, method, and graphical user interface for editing screenshot images
US11221823B2 (en) 2017-05-22 2022-01-11 Samsung Electronics Co., Ltd. System and method for context-based interaction for electronic devices
US10691329B2 (en) * 2017-06-19 2020-06-23 Simple Design Ltd. User interface of media player application for controlling media content display
US11402981B2 (en) * 2017-08-11 2022-08-02 Samsung Electronics Co., Ltd. Display device for visualizing contents as the display is rotated and control method thereof
EP3454207B1 (en) * 2017-09-07 2022-07-06 Siemens Aktiengesellschaft Dynamic preview generation in a product lifecycle management environment
EP3757807A4 (en) * 2018-02-23 2021-04-21 Sony Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
CN110456948B (zh) * 2018-05-07 2023-04-18 苹果公司 用于推荐和消费电子设备上的内容的用户界面
CN110471581A (zh) * 2018-05-08 2019-11-19 苹果公司 用于控制或呈现电子设备上的设备使用的用户界面
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. SETUP PROCEDURES FOR AN ELECTRONIC DEVICE
CN112262366B (zh) * 2018-08-15 2023-07-28 华为技术有限公司 显示方法及装置
US10838541B2 (en) 2018-09-03 2020-11-17 Htc Corporation Method for operating handheld device, handheld device and computer-readable recording medium thereof
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
CN113906419A (zh) 2019-03-24 2022-01-07 苹果公司 用于媒体浏览应用程序的用户界面
CN114115676A (zh) 2019-03-24 2022-03-01 苹果公司 包括内容项的可选表示的用户界面
CN113940088A (zh) 2019-03-24 2022-01-14 苹果公司 用于查看和访问电子设备上的内容的用户界面
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
CN113348438A (zh) * 2019-03-28 2021-09-03 苹果公司 远程控制设备上的内容的输出
EP3977245A1 (en) 2019-05-31 2022-04-06 Apple Inc. User interfaces for a podcast browsing and playback application
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11074408B2 (en) * 2019-06-01 2021-07-27 Apple Inc. Mail application features
CN114730580A (zh) 2019-11-11 2022-07-08 苹果公司 基于时间段的精选播放列表的用户界面
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11843574B2 (en) * 2020-05-21 2023-12-12 Snap Inc. Featured content collection interface
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
US20220394346A1 (en) * 2021-06-06 2022-12-08 Apple Inc. User interfaces and associated systems and processes for controlling playback of content
EP4187376A1 (en) 2021-11-30 2023-05-31 Société Civile "GALILEO 2011" Creating a computer macro

Family Cites Families (451)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4672677A (en) 1984-11-19 1987-06-09 Canon Kabushiki Kaisha Character and figure processing apparatus
US5029223A (en) 1990-02-02 1991-07-02 International Business Machines Corporation Constraint driven-on line recognition of handwritten characters and symbols
US5483261A (en) 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5488204A (en) 1992-06-08 1996-01-30 Synaptics, Incorporated Paintbrush stylus for capacitive touch sensor pad
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
JPH06139229A (ja) 1992-10-22 1994-05-20 Go Corp ペン型スタイラスおよびコンピュータを使用するかな文字−漢字変換方法
US5491758A (en) 1993-01-27 1996-02-13 International Business Machines Corporation Automatic handwriting recognition using both static and dynamic parameters
US6011865A (en) 1993-05-12 2000-01-04 International Business Machines Corporation Hybrid on-line handwriting recognition and optical character recognition system
US5621456A (en) 1993-06-22 1997-04-15 Apple Computer, Inc. Methods and apparatus for audio-visual interface for the display of multiple program categories
JP3855282B2 (ja) 1995-02-06 2006-12-06 ソニー株式会社 受信装置および受信方法
EP2265019B1 (en) 1995-04-24 2013-12-11 United Video Properties, Inc. Electronic television program guide schedule system and method with remote product ordering
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
US5835079A (en) 1996-06-13 1998-11-10 International Business Machines Corporation Virtual pointing device for touchscreens
US20030093790A1 (en) * 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6021320A (en) 1997-06-27 2000-02-01 Delco Electronics Corporation Broadcast receiver providing selectable categories of available broadcast signals
US6310610B1 (en) 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
KR100595912B1 (ko) 1998-01-26 2006-07-07 웨인 웨스터만 수동 입력 통합 방법 및 장치
US6188391B1 (en) 1998-07-09 2001-02-13 Synaptics, Inc. Two-layer capacitive touchpad and method of making same
US6731309B1 (en) 1998-08-28 2004-05-04 Corel Corporation Real time preview
JP2000112977A (ja) 1998-10-05 2000-04-21 Hitachi Ltd マルチメディア情報機器の情報表示方法、情報処理方法、及び、情報処理装置
JP4542637B2 (ja) 1998-11-25 2010-09-15 セイコーエプソン株式会社 携帯情報機器及び情報記憶媒体
US6628304B2 (en) 1998-12-09 2003-09-30 Cisco Technology, Inc. Method and apparatus providing a graphical user interface for representing and navigating hierarchical networks
US6369830B1 (en) 1999-05-10 2002-04-09 Apple Computer, Inc. Rendering translucent layers in a display system
AU5299700A (en) * 1999-05-27 2000-12-18 America Online, Inc. Keyboard system with automatic correction
US7030863B2 (en) * 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
CN1119051C (zh) * 1999-11-03 2003-08-20 摩托罗拉公司 用于在便携式电子设备上选择用户界面选项的装置和方法
JP4550198B2 (ja) * 2000-01-14 2010-09-22 富士フイルム株式会社 画像再生装置、画像再生方法、画像記録再生方法及びデジタルカメラ
US6421067B1 (en) 2000-01-16 2002-07-16 Isurftv Electronic programming guide
US8413185B2 (en) 2000-02-01 2013-04-02 United Video Properties, Inc. Interactive television application with navigable cells and regions
US7187947B1 (en) 2000-03-28 2007-03-06 Affinity Labs, Llc System and method for communicating selected information to an electronic device
US6917373B2 (en) 2000-12-28 2005-07-12 Microsoft Corporation Context sensitive labels for an electronic device
JP2002027381A (ja) * 2000-07-07 2002-01-25 Toshiba Corp 録画再生装置
US7213255B2 (en) 2000-08-25 2007-05-01 Intellocity Usa, Inc. Set-top preview program
US7103906B1 (en) 2000-09-29 2006-09-05 International Business Machines Corporation User controlled multi-device media-on-demand system
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
JP2004511974A (ja) 2000-10-11 2004-04-15 ユナイテッド　ビデオ　プロパティーズ，　インコーポレイテッド オンデマンドメディアを補充するためのシステムおよび方法。
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
KR100453539B1 (ko) 2001-02-06 2004-10-22 (주)비즈텍 인터넷을 통한 스포츠 생중계 디지탈 시스템, 이를 이용한스포츠 생중계 방법 및 이를 구현할 수 있는 프로그램이수록된 컴퓨터로 읽을 수 있는 기록매체
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
JP3800984B2 (ja) 2001-05-21 2006-07-26 ソニー株式会社 ユーザ入力装置
US8910203B2 (en) 2001-06-19 2014-12-09 Jlb Ventures Llc Method for displaying channel listings in an electronic program guide and an electronic program guide implementing the method
US7039879B2 (en) 2001-06-28 2006-05-02 Nokia Corporation Method and apparatus for scrollable cross-point navigation in a user interface
US20030013483A1 (en) 2001-07-06 2003-01-16 Ausems Michiel R. User interface for handheld communication device
US20030006959A1 (en) 2001-07-09 2003-01-09 Marcelo Varanda Method of operating a handheld device for directional input
US7650569B1 (en) 2001-08-29 2010-01-19 Allen Paul G System and method for focused navigation within a user interface
JP2003099452A (ja) 2001-09-21 2003-04-04 Nippon Telegr & Teleph Corp <Ntt> コンテンツ検索システム、コンテンツ検索プログラム及び該プログラムを記録した媒体
JP2003173237A (ja) 2001-09-28 2003-06-20 Ricoh Co Ltd 情報入出力システム、プログラム及び記憶媒体
TW550507B (en) * 2001-10-16 2003-09-01 Ulead Systems Inc System and method for establishing interactive video disk playing menu
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
JP4403575B2 (ja) * 2002-01-30 2010-01-27 シユトイブリ・アクチエンゲゼルシヤフト・プフアツフイコーン 糸層から糸を分離するための装置
US7293275B1 (en) 2002-02-08 2007-11-06 Microsoft Corporation Enhanced video content information associated with video programs
US20050162398A1 (en) 2002-03-13 2005-07-28 Eliasson Jonas O.P. Touch pad, a stylus for use with the touch pad, and a method of operating the touch pad
US20030177075A1 (en) 2002-03-18 2003-09-18 Burke Paul E. Installing advertising material in the form of a desktop HTML page and/or a screen saver
JP2003308480A (ja) 2002-04-16 2003-10-31 Fujitsu Ltd オンライン手書き文字パターン認識編集装置及び方法並びに当該方法を実現するコンピュータ実行可能なプログラム
US8370744B2 (en) 2002-06-19 2013-02-05 Microsoft Corporation User interface for operating a computer from a distance
US8583440B2 (en) * 2002-06-20 2013-11-12 Tegic Communications, Inc. Apparatus and method for providing visual indication of character ambiguity during text entry
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
WO2008080192A1 (en) * 2007-01-03 2008-07-10 Kannuu Pty Ltd Process and apparatus for selecting an item from a database
US7002560B2 (en) 2002-10-04 2006-02-21 Human Interface Technologies Inc. Method of combining data entry of handwritten symbols with displayed character data
US8416217B1 (en) 2002-11-04 2013-04-09 Neonode Inc. Light-based finger gesture user interface
US7134089B2 (en) 2002-11-13 2006-11-07 Microsoft Corporation Directional focus navigation
US8086093B2 (en) 2002-12-05 2011-12-27 At&T Ip I, Lp DSL video service with memory manager
US8601396B2 (en) 2003-05-08 2013-12-03 Hillcrest Laboratories, Inc. Systems and methods for node tracking and notification in a control framework including a zoomable graphical user interface
EP1620785A4 (en) 2003-05-08 2011-09-07 Hillcrest Lab Inc CONTROL ARRANGEMENT OF A ZOOMABLE USER INTERFACE FOR ORGANIZING, SELECTING AND LAUNCHING MEDIA ENTITIES
DK1629624T3 (da) 2003-05-30 2013-06-24 Privaris Inc In-circuit sikkerhedssystem og fremgangsmåder til at styre adgang til og anvendelse af følsomme data
US7512622B2 (en) 2003-06-11 2009-03-31 Yahoo! Inc. Method and apparatus for organizing and playing data
US20050071761A1 (en) 2003-09-25 2005-03-31 Nokia Corporation User interface on a portable electronic device
US7712051B2 (en) 2003-09-30 2010-05-04 Sap Ag Keyboard navigation in hierarchical user interfaces
US20050091254A1 (en) 2003-10-23 2005-04-28 Stabb Charles W. Shell browser preview display
EP1538536A1 (en) * 2003-12-05 2005-06-08 Sony International (Europe) GmbH Visualization and control techniques for multimedia digital content
US20050162402A1 (en) 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
JP2005292975A (ja) 2004-03-31 2005-10-20 Alpine Electronics Inc ボタン処理方法及びデータ処理装置
US8418202B2 (en) 2004-04-14 2013-04-09 Comcast Cable Holdings, Llc Method and system for providing on-demand viewing
JP2006031219A (ja) 2004-07-14 2006-02-02 Sony Corp コンテンツ利用システム、コンテンツ利用端末、参照サーバ、コンテンツ利用プログラム、及び、参照プログラム
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US20060031872A1 (en) 2004-08-03 2006-02-09 Eric Hsiao System and method for real-time displaying of blocked and locked out status of programs in electronic program guides
US9713342B2 (en) 2004-08-25 2017-07-25 Decopac, Inc. Online decorating system for edible products
US7764837B2 (en) 2004-09-01 2010-07-27 Hewlett-Packard Development Company, L.P. System, method, and apparatus for continuous character recognition
US7636897B2 (en) 2004-11-19 2009-12-22 Microsoft Corporation System and method for property-based focus navigation in a user interface
US7631278B2 (en) 2004-11-19 2009-12-08 Microsoft Corporation System and method for directional focus navigation
TWI252698B (en) 2004-11-25 2006-04-01 Esity Technology Co Ltd Video program menu system and menu control device of menu system
US7619616B2 (en) * 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
US7818350B2 (en) 2005-02-28 2010-10-19 Yahoo! Inc. System and method for creating a collaborative playlist
JP5009906B2 (ja) 2005-06-09 2012-08-29 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ コンテンツのためのプレビューモード
US20060294545A1 (en) 2005-06-23 2006-12-28 Microsoft Corporation Dynamic media guide listings
US7542967B2 (en) 2005-06-30 2009-06-02 Microsoft Corporation Searching an index of media content
US8542196B2 (en) * 2005-07-22 2013-09-24 Move Mobile Systems, Inc. System and method for a thumb-optimized touch-screen user interface
US7810043B2 (en) 2005-07-27 2010-10-05 Microsoft Corporation Media user interface left/right navigation
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US8769408B2 (en) 2005-10-07 2014-07-01 Apple Inc. Intelligent media navigation
US20070233880A1 (en) 2005-10-20 2007-10-04 The Trustees Of Columbia University In The City Of New York Methods, media and systems for enabling a consistent web browsing session on different digital processing devices
US8145617B1 (en) 2005-11-18 2012-03-27 Google Inc. Generation of document snippets based on queries and search results
JP2007140910A (ja) 2005-11-18 2007-06-07 Sammy Networks Co Ltd コンテンツ表示システム
US20070150802A1 (en) 2005-12-12 2007-06-28 Canon Information Systems Research Australia Pty. Ltd. Document annotation and interface
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7649526B2 (en) 2005-12-23 2010-01-19 Apple Inc. Soft key interaction indicator
US9015736B2 (en) 2005-12-29 2015-04-21 Rovi Guides, Inc. Systems and methods for episode tracking in an interactive media environment
US20070154163A1 (en) 2005-12-29 2007-07-05 United Video Properties, Inc. Systems and methods for creating aggregations of episodes of series programming in order
US7956846B2 (en) 2006-01-05 2011-06-07 Apple Inc. Portable electronic device with content-dependent touch sensitivity
US7596761B2 (en) 2006-01-05 2009-09-29 Apple Inc. Application user interface with navigation bar showing current and prior application contexts
US8424048B1 (en) 2006-02-18 2013-04-16 Philip Scott Lyren Portable electronic device for receiving and playing feature length movies
CN101395559A (zh) 2006-03-01 2009-03-25 Tivo有限公司 推荐的记录和下载引导
JP4779882B2 (ja) 2006-03-27 2011-09-28 ソニー株式会社 コンテンツリスト表示方法、コンテンツリスト表示装置、コンテンツ選択処理方法およびコンテンツ選択処理装置
US8054294B2 (en) 2006-03-31 2011-11-08 Sony Corporation Touch screen remote control system for use in controlling one or more devices
US20070244902A1 (en) 2006-04-17 2007-10-18 Microsoft Corporation Internet search-based television
US8683362B2 (en) 2008-05-23 2014-03-25 Qualcomm Incorporated Card metaphor for activities in a computing device
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
US7890490B1 (en) 2006-06-30 2011-02-15 United Video Properties, Inc. Systems and methods for providing advanced information searching in an interactive media guidance application
US7985134B2 (en) 2006-07-31 2011-07-26 Rovi Guides, Inc. Systems and methods for providing enhanced sports watching media guidance
US20080222675A1 (en) 2006-08-29 2008-09-11 Hillcrest Laboratories, Inc. Pointing capability and associated user interface elements for television user interfaces
WO2008030565A2 (en) 2006-09-07 2008-03-13 Opentv, Inc. Method and system to navigate viewable content
US7930650B2 (en) 2006-09-11 2011-04-19 Apple Inc. User interface with menu abstractions and content abstractions
US20080111822A1 (en) 2006-09-22 2008-05-15 Yahoo, Inc.! Method and system for presenting video
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US7908219B2 (en) 2006-11-03 2011-03-15 Microsoft Corporation Inbox management
US20080120668A1 (en) 2006-11-18 2008-05-22 Frank Chuen-Foo Yau Integrated IPTV display set and methods
JP2008135911A (ja) 2006-11-28 2008-06-12 Victor Co Of Japan Ltd 番組録画再生装置
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
JP5546865B2 (ja) 2006-12-13 2014-07-09 ジョンソン コントロールズ テクノロジー カンパニー メディアシステムのソースコンテンツプレビュー
US7836475B2 (en) * 2006-12-20 2010-11-16 Verizon Patent And Licensing Inc. Video access
AU2006252191B2 (en) 2006-12-21 2009-03-26 Canon Kabushiki Kaisha Scrolling Interface
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
US8082523B2 (en) 2007-01-07 2011-12-20 Apple Inc. Portable electronic device with graphical user interface supporting application switching
US20080235588A1 (en) 2007-03-20 2008-09-25 Yahoo! Inc. Media player playlist creation and editing within a browser interpretable document
US8560398B1 (en) 2007-03-29 2013-10-15 Amazon Technologies, Inc. Method and system for providing item recommendations
US7743059B2 (en) 2007-03-30 2010-06-22 Amazon Technologies, Inc. Cluster-based management of collections of items
US7966638B2 (en) 2007-03-30 2011-06-21 Google Inc. Interactive media display across devices
MX2009011047A (es) 2007-04-13 2010-03-30 Sezmi Corp Interfaz del visualizador para un sistema de distribucion de contenido.
US7743116B2 (en) 2007-05-28 2010-06-22 Apple Inc. Method and user interface for accessing groups of media assets
US20090049045A1 (en) 2007-06-01 2009-02-19 Concert Technology Corporation Method and system for sorting media items in a playlist on a media device
US20080301579A1 (en) 2007-06-04 2008-12-04 Yahoo! Inc. Interactive interface for navigating, previewing, and accessing multimedia content
US20080307017A1 (en) 2007-06-08 2008-12-11 Apple Inc. Searching and Restoring of Backups
KR100904015B1 (ko) 2007-06-12 2009-06-22 주식회사 알티캐스트 멀티동영상컨텐츠 탐색 서비스 제공 시스템 및 그 방법
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8407737B1 (en) 2007-07-11 2013-03-26 Rovi Guides, Inc. Systems and methods for providing a scan transport bar
WO2009016607A2 (en) 2007-08-01 2009-02-05 Nokia Corporation Apparatus, methods, and computer program products providing context-dependent gesture recognition
US8386588B1 (en) 2007-08-10 2013-02-26 Adobe Systems Incorporated Serial subscriptions
US8275764B2 (en) 2007-08-24 2012-09-25 Google Inc. Recommending media programs based on media program popularity
US8619038B2 (en) * 2007-09-04 2013-12-31 Apple Inc. Editing interface
US8560950B2 (en) 2007-09-04 2013-10-15 Apple Inc. Advanced playlist creation
CN100592249C (zh) * 2007-09-21 2010-02-24 上海汉翔信息技术有限公司 快速输入相关词的方法
JP4909856B2 (ja) 2007-09-27 2012-04-04 株式会社東芝 電子機器および表示方法
US8555330B2 (en) 2007-10-03 2013-10-08 At&T Intellectual Property I, L.P. System for managing media services
CN101436110B (zh) 2007-11-14 2013-02-20 北京三星通信技术研究有限公司 执行表意文字和表音文字输入的方法和装置
US8365235B2 (en) 2007-12-18 2013-01-29 Netflix, Inc. Trick play of streaming media
US8863219B2 (en) 2007-12-31 2014-10-14 Robotarmy Corporation On screen television input management
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US20160165307A1 (en) 2008-01-15 2016-06-09 British Broadcasting Corporation Accessing broadcast media
US20090228491A1 (en) 2008-03-06 2009-09-10 At&T Delaware Intellectual Property, Inc. Method, computer program product, and apparatus for rule-based release of distributed electronic content
JP2009260947A (ja) 2008-03-17 2009-11-05 Sharp Corp Ｖｏｄコンテンツ選択再生装置
US9503562B2 (en) 2008-03-19 2016-11-22 Universal Electronics Inc. System and method for appliance control via a personal communication or entertainment device
KR20090106104A (ko) 2008-04-04 2009-10-08 브로드밴드미디어주식회사 Ｖｏｄ 서비스와 실시간 스트리밍 서비스가 동시 구현가능한 ｉｐｔｖ 방송 서비스 시스템 및 방법
US20090259957A1 (en) 2008-04-09 2009-10-15 The Directv Group, Inc. Configurable icons for content presentation
US20090256807A1 (en) 2008-04-14 2009-10-15 Nokia Corporation User interface
US8094132B1 (en) * 2008-04-21 2012-01-10 Cagle, L.L.C. Image display touch control
US20090313100A1 (en) 2008-06-11 2009-12-17 Yahoo! Inc. System and method for previewing search results
JP2010056595A (ja) 2008-08-26 2010-03-11 Canon Inc 放送受信装置、シリーズ番組の配信通知方法
JP2010054762A (ja) 2008-08-28 2010-03-11 Sony Corp 情報処理装置および方法、並びにプログラム
CN101662615B (zh) 2008-08-28 2011-11-09 鸿富锦精密工业（深圳）有限公司 具喜好频道预览及快捷播放的电子相框及方法
US8266660B2 (en) 2008-09-05 2012-09-11 Verizon Patent And Licensing Inc. Portal for future episode information
KR20100039194A (ko) * 2008-10-06 2010-04-15 삼성전자주식회사 사용자 접촉 패턴에 따른 ＧＵＩ(Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ) 표시 방법 및 이를 구비하는 장치
US8280223B2 (en) 2008-10-29 2012-10-02 Disney Enterprises, Inc. Playback of episodic content recorded on a packaged media set
US20100205628A1 (en) 2009-02-12 2010-08-12 Davis Bruce L Media processing methods and arrangements
US8584031B2 (en) * 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
EP2368170B1 (en) 2008-11-26 2017-11-01 BlackBerry Limited Touch-sensitive display method and apparatus
US8862691B2 (en) 2008-12-22 2014-10-14 Microsoft Corporation Media aggregation and presentation
CN102342096B (zh) 2009-01-06 2015-07-08 Lg电子株式会社 处理图像的设备及其方法
US11076189B2 (en) 2009-03-30 2021-07-27 Time Warner Cable Enterprises Llc Personal media channel apparatus and methods
CN101860447A (zh) 2009-04-07 2010-10-13 华为技术有限公司 媒体呈现方法及系统、服务器和终端
CN101867800A (zh) * 2009-04-15 2010-10-20 华为技术有限公司 节目推荐方法、终端设备及网络系统
US20100269145A1 (en) 2009-04-17 2010-10-21 Apple Inc. Accessing radio content from a non-radio source
US8742885B2 (en) 2009-05-01 2014-06-03 Apple Inc. Directional touch remote
EP2430833A4 (en) 2009-05-13 2014-01-22 Coincident Tv Inc REPRODUCTION AND PROCESSING OF LINKED AND COMMENTED AUDIOVISUAL WORKS
US8661075B2 (en) 2009-06-04 2014-02-25 Qualcomm Incorporated Method and apparatus for serving episodic secondary content
US9241136B2 (en) 2009-06-29 2016-01-19 Verizon Patent And Licensing Inc. Method and apparatus for creating a personalized programming guide
JP5515507B2 (ja) 2009-08-18 2014-06-11 ソニー株式会社 表示装置及び表示方法
KR20110024125A (ko) * 2009-09-01 2011-03-09 엘지전자 주식회사 영상표시장치 및 그 동작방법
US8560100B2 (en) 2009-09-01 2013-10-15 George Sarkis Combination multimedia, brain wave and subliminal affirmation media player and recorder
US8782066B2 (en) 2009-09-04 2014-07-15 Tanya Ward English Media transcription, synchronization and search
US8429109B2 (en) 2009-09-18 2013-04-23 Apple Inc. Segmented graphical representations for recommending elements
US10002192B2 (en) 2009-09-21 2018-06-19 Voicebase, Inc. Systems and methods for organizing and analyzing audio content derived from media files
GB2474231A (en) 2009-09-25 2011-04-13 Sony Europ Apparatus and method for producing an EPG
US20110087992A1 (en) 2009-10-13 2011-04-14 Microsoft Corporation Thumbnail image substitution
KR20110041342A (ko) 2009-10-15 2011-04-21 삼성전자주식회사 콘텐츠 추천 장치 및 방법
US20110209177A1 (en) 2009-10-16 2011-08-25 Meir Sela Smartphone To Control Internet TV System
CN101719125A (zh) 2009-11-06 2010-06-02 冯强 手持通讯终端及其网页浏览方法
US8843849B2 (en) 2009-11-09 2014-09-23 Blackberry Limited Directional navigation of page content
US20110218948A1 (en) 2009-12-15 2011-09-08 Fabricio Benevenuto De Souza Methods for detecting spammers and content promoters in online video social networks
KR20110069476A (ko) * 2009-12-17 2011-06-23 주식회사 아이리버 사용자 그립 상태를 반영하여 조작가능한 핸드헬드 전자기기 및 조작방법
US9026906B2 (en) 2009-12-18 2015-05-05 Sap Se Output preview for a user interface
US8988356B2 (en) 2009-12-31 2015-03-24 Google Inc. Touch sensor and touchscreen user input combination
US8698762B2 (en) * 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8386965B2 (en) * 2010-01-15 2013-02-26 Apple Inc. Techniques and systems for enhancing touch screen device accessibility through virtual containers and virtually enlarged boundaries
JP5495813B2 (ja) * 2010-01-26 2014-05-21 キヤノン株式会社 表示制御装置、表示制御方法、及びプログラム、並びに記憶媒体
US8769443B2 (en) * 2010-02-11 2014-07-01 Apple Inc. Touch inputs interacting with user interface items
CA2731708A1 (en) 2010-02-15 2011-08-15 Research In Motion Limited Electronic device including touch-sensitive display and actuator for providing tactile feedback
GB2497624B8 (en) 2010-03-22 2015-01-14 Mobitv Inc Tile based media content selection
JP2011205562A (ja) * 2010-03-26 2011-10-13 Sony Corp 画像表示装置および画像表示方法
WO2011121375A1 (en) 2010-03-31 2011-10-06 Nokia Corporation Apparatuses, methods and computer programs for a virtual stylus
US8781420B2 (en) * 2010-04-13 2014-07-15 Apple Inc. Adjustable wireless circuitry with antenna-based proximity detector
US8584256B2 (en) 2010-04-21 2013-11-12 Fox Entertainment Group, Inc. Digital delivery system and user interface for enabling the digital delivery of media content
KR101517638B1 (ko) 2010-04-22 2015-05-15 엘지전자 주식회사 콘텐츠 제공 방법 및 그를 이용한 디스플레이장치
US8310461B2 (en) 2010-05-13 2012-11-13 Nuance Communications Inc. Method and apparatus for on-top writing
US20110283333A1 (en) 2010-05-14 2011-11-17 Rovi Technologies Corporation Systems and methods for sending media content to a user device from a network of set-top cells
US20110289458A1 (en) 2010-05-18 2011-11-24 Rovi Technologies Corporation User interface animation for a content system
US8375208B2 (en) 2010-05-20 2013-02-12 Verizon Patent And Licensing Inc. Method and apparatus for providing content aggregation in support of virtual channels
US8291452B1 (en) 2011-05-20 2012-10-16 Google Inc. Interface for watching a stream of videos
CN103069376B (zh) * 2010-05-25 2016-11-09 索尼移动通信株式会社 用于电子设备上的触敏显示器的用户接口
US9542091B2 (en) * 2010-06-04 2017-01-10 Apple Inc. Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
US8370874B1 (en) 2010-06-07 2013-02-05 Purplecomm Inc. Subscription and channel management technology
JP5075943B2 (ja) 2010-06-08 2012-11-21 株式会社ソニー・コンピュータエンタテインメント 情報提供装置および情報提供方法
US20120059910A1 (en) 2010-06-10 2012-03-08 Cricket Communications, Inc. Unlimited media access over wireless infrastructure
US8713592B2 (en) 2010-06-29 2014-04-29 Google Inc. Self-service channel marketplace
EP2609752A4 (en) 2010-08-27 2015-04-08 Intel Corp REMOTE CONTROL DEVICE
US20120054178A1 (en) 2010-08-27 2012-03-01 Samsung Electronics Co., Ltd. Context-aware media interaction
US8904311B2 (en) 2010-09-01 2014-12-02 Nokia Corporation Method, apparatus, and computer program product for implementing a variable content movable control
US9032293B2 (en) 2010-09-08 2015-05-12 Sony Corporation Dynamic iconic setting indicator
WO2012050927A2 (en) 2010-09-28 2012-04-19 Beyond Oblivion Inc. Content discovery and delivery platform apparatuses, methods and systems
WO2012057509A2 (ko) 2010-10-25 2012-05-03 삼성전자 주식회사 소셜 네트워크 기반의 tv 방송 컨텐트 공유 방법 및 tv 방송 컨텐트 공유 서버, 소셜 네트워크 기반의 tv 방송 컨텐트 공유 서비스를 수신하는 방법 및 tv 디바이스
US8863165B2 (en) 2010-11-01 2014-10-14 Gracenote, Inc. Method and system for presenting additional content at a media system
US20120105367A1 (en) * 2010-11-01 2012-05-03 Impress Inc. Methods of using tactile force sensing for intuitive user interface
US20150195624A1 (en) 2010-11-03 2015-07-09 Google Inc. Media-Related Trends
US8963847B2 (en) 2010-12-06 2015-02-24 Netflix, Inc. User interface for a remote control device
JP5691464B2 (ja) * 2010-12-09 2015-04-01 ソニー株式会社 情報処理装置
US20120158524A1 (en) 2010-12-16 2012-06-21 Viacom International Inc. Integration of a Video Player Pushdown Advertising Unit and Digital Media Content
US9244545B2 (en) * 2010-12-17 2016-01-26 Microsoft Technology Licensing, Llc Touch and stylus discrimination and rejection for contact sensitive computing devices
EP3301996A1 (en) * 2010-12-28 2018-04-04 Huawei Device (Dongguan) Co., Ltd. Method and mobile terminal for processing contacts
KR101832757B1 (ko) * 2010-12-29 2018-02-27 엘지전자 주식회사 전자 장치 및 메뉴 자동 구성 방법
US8683349B2 (en) 2010-12-31 2014-03-25 Verizon Patent And Licensing Inc. Media content user interface systems and methods
US8863185B2 (en) 2011-01-04 2014-10-14 Verizon Patent And Licensing Inc. Social television
US8730190B2 (en) 2011-01-13 2014-05-20 Qualcomm Incorporated Detect motion generated from gestures used to execute functionality associated with a computer system
US9271022B2 (en) 2011-02-11 2016-02-23 Sony Corporation Internet content subscription service via multiple devices
US20120216113A1 (en) 2011-02-18 2012-08-23 Google Inc. Touch gestures for text-entry operations
CA2829484A1 (en) 2011-03-08 2012-09-13 Tivo Inc. Multi source and destination media discovery and management platform
JP5462828B2 (ja) 2011-03-29 2014-04-02 株式会社コナミデジタルエンタテインメント 選択装置、選択方法、ならびに、プログラム
US20120260287A1 (en) 2011-04-07 2012-10-11 Sony Corporation Personalized user interface for audio video display device such as tv
GB201107273D0 (en) 2011-04-28 2011-06-15 Inq Entpr Ltd Application control in electronic devices
US8782704B2 (en) 2011-05-03 2014-07-15 Verizon Patent And Licensing Inc. Program guide interface systems and methods
US9135371B2 (en) 2011-05-09 2015-09-15 Google Inc. Contextual video browsing
US8977964B2 (en) 2011-05-17 2015-03-10 Next Issue Media Media content device, system and method
US8952987B2 (en) 2011-05-19 2015-02-10 Qualcomm Incorporated User interface elements augmented with force detection
US9032338B2 (en) * 2011-05-30 2015-05-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating and editing text
US20120311443A1 (en) 2011-06-03 2012-12-06 Apple Inc. Displaying menu options for media items
US8977059B2 (en) 2011-06-03 2015-03-10 Apple Inc. Integrating feature extraction via local sequential embedding for automatic handwriting recognition
KR101824388B1 (ko) * 2011-06-10 2018-02-01 삼성전자주식회사 사용자의 신체특성을 고려한 동적 사용자 인터페이스 제공 장치 및 방법
US8935279B2 (en) 2011-06-13 2015-01-13 Opus Deli, Inc. Venue-related multi-media management, streaming, online ticketing, and electronic commerce techniques implemented via computer networks and mobile devices
EP3522075A1 (en) 2011-06-13 2019-08-07 Google LLC Character recognition for overlapping textual user input
JP6074170B2 (ja) 2011-06-23 2017-02-01 インテル・コーポレーション 近距離動作のトラッキングのシステムおよび方法
US20120331506A1 (en) 2011-06-24 2012-12-27 Sony Network Entertainment International Llc User interface and content integration
US9720587B2 (en) * 2011-07-11 2017-08-01 Kddi Corporation User interface device enabling input motions by finger touch in different modes, and method and program for recognizing input motion
US20130031585A1 (en) 2011-07-29 2013-01-31 Hitachi Consumer Electronics Co., Ltd. Portable terminal, system, information processing method and program
KR101316713B1 (ko) * 2011-07-29 2013-10-15 주식회사 우리은행 다국어뱅킹시스템 및 그 제어방법
US9973800B2 (en) 2011-08-08 2018-05-15 Netflix, Inc. Merchandising streaming video content
WO2013023063A1 (en) 2011-08-09 2013-02-14 Path 36 Llc Digital media editing
US20130067366A1 (en) 2011-09-14 2013-03-14 Microsoft Corporation Establishing content navigation direction based on directional user gestures
US9173090B2 (en) 2011-09-15 2015-10-27 Teletech Holdings, Inc. Method for activating services associated with a product via a service center supporting a variety of products
CN102325144B (zh) 2011-09-29 2014-07-30 Tcl集团股份有限公司 一种媒体设备间互联互通的方法、系统及多媒体设备
CN103037265A (zh) 2011-09-30 2013-04-10 深圳市龙视传媒有限公司 第一终端控制第二终端的方法、系统及智能终端
US8527904B2 (en) * 2011-09-30 2013-09-03 Oracle International Corporation Quick data entry lanes for touch screen mobile devices
US9652448B2 (en) * 2011-11-10 2017-05-16 Blackberry Limited Methods and systems for removing or replacing on-keyboard prediction candidates
US9111579B2 (en) 2011-11-14 2015-08-18 Apple Inc. Media editing with multi-camera media clips
EP2595405B1 (en) 2011-11-15 2020-02-26 LG Electronics Inc. Electronic device and method for providing contents recommendation service
US8930839B2 (en) 2011-11-22 2015-01-06 Yahoo! Inc. Automatically arranging of icons on a user interface
US20140340358A1 (en) 2011-12-08 2014-11-20 Exo U Inc. Method for improving an interaction with a user interface displayed on a 3d touch screen display
WO2013085699A1 (en) 2011-12-09 2013-06-13 Chegg, Inc. Time based data visualization
US9361942B2 (en) 2011-12-22 2016-06-07 Apple Inc. Playlist configuration and preview
US20130179812A1 (en) * 2012-01-10 2013-07-11 Gilles Serge BianRosa System and method for navigating a user interface using a touch-enabled input device
US9552147B2 (en) 2012-02-01 2017-01-24 Facebook, Inc. Hierarchical user interface
JP5308580B1 (ja) 2012-02-21 2013-10-09 パナソニック株式会社 コンテンツ表示システム
EP2631760A1 (en) * 2012-02-24 2013-08-28 Research In Motion Limited Method and apparatus for providing a user interface on a device enabling selection of operations to be performed in relation to content
US9817442B2 (en) * 2012-02-28 2017-11-14 Razer (Asia-Pacific) Pte. Ltd. Systems and methods for presenting visual interface content
TW201337717A (zh) 2012-03-01 2013-09-16 Acer Inc 可觸控式電子裝置
US20130247105A1 (en) 2012-03-16 2013-09-19 Google Inc. Smart subscribe button on watch
US8977721B2 (en) 2012-03-27 2015-03-10 Roku, Inc. Method and apparatus for dynamic prioritization of content listings
US9137578B2 (en) 2012-03-27 2015-09-15 Roku, Inc. Method and apparatus for sharing content
US8938755B2 (en) 2012-03-27 2015-01-20 Roku, Inc. Method and apparatus for recurring content searches and viewing window notification
JP5367191B2 (ja) 2012-04-17 2013-12-11 シャープ株式会社 メニュー表示装置、メニュー表示方法、メニュー表示プログラム、メニュー表示装置を備えたテレビジョン受像機、及び、記録媒体
JP5369214B2 (ja) 2012-04-17 2013-12-18 シャープ株式会社 コンテンツ推薦装置、テレビジョン受像機、コンテンツ推薦装置の制御方法、プログラム、記録媒体
US8726313B2 (en) 2012-04-23 2014-05-13 Verizon Patent And Licensing Inc. Previously aired episode retrieval based on series DVR scheduling
US20130283318A1 (en) 2012-04-23 2013-10-24 Comcast Cable Communications, LLC. Dynamic Mosaic for Creation of Video Rich User Interfaces
US20130290848A1 (en) 2012-04-27 2013-10-31 Mobitv, Inc. Connected multi-screen video
DE112013002387T5 (de) 2012-05-09 2015-02-12 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Bereitstellung taktiler Rückkopplung für Operationen in einer Benutzerschnittstelle
DE112013002412T5 (de) * 2012-05-09 2015-02-19 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche zum Bereitstellen von Rückmeldung für das Wechseln von Aktivierungszuständen eines Benutzerschnittstellenobjekts
AU2013259630B2 (en) * 2012-05-09 2016-07-07 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to gesture
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
CN103425301B (zh) 2012-05-16 2016-10-05 宸鸿科技(厦门)有限公司 触控面板及其制作方法
TW201349090A (zh) * 2012-05-31 2013-12-01 Pegatron Corp 使用者介面、使用者介面顯示方法及電子裝置
US20130326499A1 (en) 2012-05-31 2013-12-05 Microsoft Corporation Automatically installing and removing recommended applications
KR101969348B1 (ko) * 2012-06-08 2019-04-16 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
WO2014028074A1 (en) 2012-08-17 2014-02-20 Flextronics Ap, Llc Intelligent television
TW201351261A (zh) 2012-06-15 2013-12-16 Interactive Sensing Ltd 可攜式無線感測裝置的操作方法
JP5634442B2 (ja) * 2012-06-26 2014-12-03 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
US20140012859A1 (en) 2012-07-03 2014-01-09 AGOGO Amalgamated, Inc. Personalized dynamic content delivery system
EP2688263A1 (en) 2012-07-17 2014-01-22 Tele2 Sverige AB System and method for delegated authentication and authorization
US9141200B2 (en) * 2012-08-01 2015-09-22 Apple Inc. Device, method, and graphical user interface for entering characters
WO2014021914A1 (en) 2012-08-01 2014-02-06 Whisper Innovations, Llc System and method for providing and managing multiple content feeds and supplemental content by information provider using an on-screen interactive interface
US20140075394A1 (en) 2012-09-07 2014-03-13 Samsung Electronics Co., Ltd. Method and apparatus to facilitate interoperability of applications in a device
US9558278B2 (en) 2012-09-11 2017-01-31 Apple Inc. Integrated content recommendation
US20140075316A1 (en) 2012-09-11 2014-03-13 Eric Li Method and apparatus for creating a customizable media program queue
US9275604B2 (en) 2012-09-12 2016-03-01 Htc Corporation Constant speed display method of mobile device
CN102890615B (zh) 2012-09-21 2015-10-07 百度在线网络技术（北京）有限公司 一种基于触摸屏的拼音输入方法和装置
US9377933B2 (en) 2012-09-24 2016-06-28 Facebook, Inc. Displaying social networking system entity information via a timeline interface
US8855605B2 (en) 2012-09-25 2014-10-07 Dropbox Inc. Associating a particular account configuration during the out of box experience for a mobile device
US20140101608A1 (en) 2012-10-05 2014-04-10 Google Inc. User Interfaces for Head-Mountable Devices
JP6025493B2 (ja) * 2012-10-15 2016-11-16 キヤノン株式会社 表示処理装置、制御方法およびコンピュータプログラム
JP5458161B1 (ja) 2012-10-23 2014-04-02 株式会社東芝 電子機器および方法
EP2725531A1 (en) 2012-10-24 2014-04-30 Sony Corporation User interface for accessing books
US20140123006A1 (en) 2012-10-25 2014-05-01 Apple Inc. User interface for streaming media stations with flexible station creation
GB2507547A (en) 2012-11-02 2014-05-07 Sony Corp Selection and display of previously aired television programs obtained from multiple different sources
US9081410B2 (en) 2012-11-14 2015-07-14 Facebook, Inc. Loading content on electronic device
US9235321B2 (en) 2012-11-14 2016-01-12 Facebook, Inc. Animation sequence associated with content item
JP2014102660A (ja) * 2012-11-19 2014-06-05 Aisin Aw Co Ltd 操作支援システム、操作支援方法及びコンピュータプログラム
US9755995B2 (en) * 2012-11-20 2017-09-05 Dropbox, Inc. System and method for applying gesture input to digital content
US9762944B2 (en) 2012-11-28 2017-09-12 Rovi Guides, Inc. Systems and methods for presenting content simultaneously in different forms based on parental control settings
US9292160B2 (en) 2012-11-30 2016-03-22 Verizon and Redbox Digital Entertainment Services, LLC Systems and methods for presenting media program accessibility information
US10282088B2 (en) 2012-12-06 2019-05-07 Samsung Electronics Co., Ltd. Configuration of application execution spaces and sub-spaces for sharing data on a mobile tough screen device
SG11201407413WA (en) 2012-12-07 2014-12-30 Yota Devices Ipr Ltd Display surface contains a cut out region reformatting display data
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9253520B2 (en) 2012-12-14 2016-02-02 Biscotti Inc. Video capture, processing and distribution system
US9846536B2 (en) 2012-12-17 2017-12-19 Microsoft Technology Licensing, Llc Composition of handwritten messages on mobile computing devices
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
CN104903834B (zh) 2012-12-29 2019-07-05 苹果公司 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
GB201300031D0 (en) 2013-01-02 2013-02-13 Canonical Ltd Ubuntu UX innovations
US20140196064A1 (en) 2013-01-04 2014-07-10 Comcast Cable Communications, Llc Content Marketplace And Customization Of Content Acquisition
US9244600B2 (en) 2013-02-05 2016-01-26 Alc Holdings, Inc. Video preview creation with audio
CA2901957C (en) 2013-02-25 2021-06-15 Savant Systems, Llc Video tiling
US9261985B2 (en) 2013-03-11 2016-02-16 Barnes & Noble College Booksellers, Llc Stylus-based touch-sensitive area for UI control of computing device
US20140282677A1 (en) 2013-03-12 2014-09-18 Cbs Interactive Inc. Second screen application linked to media content delivery
WO2014144908A1 (en) 2013-03-15 2014-09-18 Fuhu Holdings, Inc. Tablet computer
WO2014177929A2 (en) 2013-03-15 2014-11-06 Kuautli Media Investment Zrt Graphical user interface
US9658740B2 (en) 2013-03-15 2017-05-23 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
TWI616833B (zh) 2013-03-21 2018-03-01 緯創資通股份有限公司 媒體導覽與播放方法、媒體導覽與播放裝置、以及電腦可讀取媒體
CN103546816A (zh) 2013-05-02 2014-01-29 乐视网信息技术（北京）股份有限公司 用户界面处理及视频播放方法及用户界面系统
US10079872B1 (en) 2013-05-07 2018-09-18 Google Llc Subscription levels in an internet-based content platform
US8850490B1 (en) 2013-05-07 2014-09-30 Google Inc. Consuming paid media in an internet-based content platform
US10394410B2 (en) 2013-05-09 2019-08-27 Amazon Technologies, Inc. Mobile device interfaces
US9239723B2 (en) 2013-05-13 2016-01-19 Lenovo (Singapore) Pte. Ltd. Configuring a device based on proximity to other devices
US9779182B2 (en) 2013-06-07 2017-10-03 Microsoft Technology Licensing, Llc Semantic grouping in search
US9336068B2 (en) 2013-06-07 2016-05-10 Apple Inc. Throttling of application access to resources
US10481769B2 (en) * 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
EP3843020A1 (en) 2013-06-09 2021-06-30 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
US10282083B2 (en) * 2013-06-09 2019-05-07 Apple Inc. Device, method, and graphical user interface for transitioning between user interfaces
JP2015050655A (ja) 2013-09-02 2015-03-16 ソニー株式会社 情報表示装置及び情報表示方法、並びにコンピューター・プログラム
US20150067724A1 (en) 2013-09-02 2015-03-05 Netflix, Inc. Recommending media items using social networks
US20150067582A1 (en) 2013-09-05 2015-03-05 Storehouse Media, Inc. Content navigation structure and transition mechanism
US10168871B2 (en) 2013-09-16 2019-01-01 Rovi Guides, Inc. Methods and systems for presenting direction-specific media assets
KR20150037014A (ko) 2013-09-30 2015-04-08 삼성전자주식회사 전자장치 및 전자장치의 사용자 인터페이스 제공방법
US9244916B2 (en) 2013-10-01 2016-01-26 Penthera Partners, Inc. Downloading media objects
US20150113429A1 (en) 2013-10-21 2015-04-23 NQ Mobile Inc. Real-time dynamic content display layer and system
US9552395B2 (en) 2013-11-13 2017-01-24 Google Inc. Methods, systems, and media for presenting recommended media content items
EP2879398B1 (en) 2013-11-27 2020-05-20 LG Electronics, Inc. Digital device and method of processing a service thereof
US10254920B2 (en) 2013-12-01 2019-04-09 Upskill, Inc. Systems and methods for accessing a nested menu
US9256652B2 (en) 2013-12-13 2016-02-09 Rovi Guides, Inc. Systems and methods for combining media recommendations from multiple recommendation engines
US9881224B2 (en) 2013-12-17 2018-01-30 Microsoft Technology Licensing, Llc User interface for overlapping handwritten text input
JP5942978B2 (ja) 2013-12-26 2016-06-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
CN103686418B (zh) * 2013-12-27 2017-11-28 联想(北京)有限公司 一种信息处理的方法及电子设备
US9456237B2 (en) 2013-12-31 2016-09-27 Google Inc. Methods, systems, and media for presenting supplemental information corresponding to on-demand media content
US20170132659A1 (en) 2014-01-13 2017-05-11 Google Inc. Potential Revenue of Video Views
CN111488112B (zh) 2014-01-23 2024-03-08 苹果公司 虚拟计算机键盘
US9740766B2 (en) 2014-02-05 2017-08-22 Disney Enterprises, Inc. Methods and systems of playing multi-source media content
US9602566B1 (en) 2014-02-13 2017-03-21 Google Inc. Providing selectable content creator controls in conjunction with sponsored media content items
US9661058B2 (en) 2014-08-10 2017-05-23 Belkin International Inc. Grouping of network devices
US10466876B2 (en) 2014-04-17 2019-11-05 Facebook, Inc. Assisting a user of a software application
EP3138056A1 (en) 2014-04-30 2017-03-08 Twitter, Inc. Software development kit platform
KR20150130048A (ko) 2014-05-13 2015-11-23 삼성전자주식회사 디스플레이장치 및 그 제어방법
US9648062B2 (en) 2014-06-12 2017-05-09 Apple Inc. Systems and methods for multitasking on an electronic device with a touch-sensitive display
US9727161B2 (en) * 2014-06-12 2017-08-08 Microsoft Technology Licensing, Llc Sensor correlation for pen and touch-sensitive computing device interaction
US9560399B2 (en) 2014-06-13 2017-01-31 Hulu, LLC Personalized generation of watch list of shows in a video delivery system
US9838759B2 (en) 2014-06-20 2017-12-05 Google Inc. Displaying information related to content playing on a device
US11553251B2 (en) 2014-06-20 2023-01-10 Comcast Cable Communications, Llc Content viewing tracking
WO2015200228A1 (en) 2014-06-24 2015-12-30 Apple Inc. Character recognition on a computing device
CN111104040B (zh) 2014-06-24 2023-10-24 苹果公司 输入设备和用户界面交互
CN106415475A (zh) 2014-06-24 2017-02-15 苹果公司 用于在用户界面中导航的列界面
US9081421B1 (en) 2014-06-30 2015-07-14 Linkedin Corporation User interface for presenting heterogeneous content
US10601808B1 (en) 2014-06-30 2020-03-24 Cox Communications, Inc Single sign-in across links/URLs while watching programs
WO2016004391A1 (en) 2014-07-03 2016-01-07 Syncbak, Inc. Real-time regional media syndication and delivery system
US20160041702A1 (en) 2014-07-08 2016-02-11 Nan Wang Pull and Swipe Navigation
EP3158425A1 (en) 2014-08-02 2017-04-26 Apple Inc. Context-specific user interfaces
US9380343B2 (en) 2014-08-29 2016-06-28 Verizon Patent And Licensing Inc. Watch next service
US9467743B2 (en) 2014-09-15 2016-10-11 Verizon Patent And Licensing Inc. Personalized content aggregation platform
KR101539182B1 (ko) 2014-09-29 2015-07-29 케이티하이텔 주식회사 셋톱박스의 id별 시청이력을 이용한 tv 데이터방송 홈쇼핑에서의 상품 추천 방법
US10088978B2 (en) 2014-09-30 2018-10-02 Pandora Media, Inc. Country-specific content recommendations in view of sparse country data
US10642880B2 (en) 2014-10-05 2020-05-05 Vudu, Inc. System and method for improved video streaming
US9600594B2 (en) 2014-10-09 2017-03-21 Wrap Media, LLC Card based package for distributing electronic media and services
US11115704B2 (en) 2014-10-30 2021-09-07 Verizon Patent And Licensing Inc. Media channel navigation user interface systems and methods
US20160133230A1 (en) 2014-11-11 2016-05-12 Bent Image Lab, Llc Real-time shared augmented reality experience
US10284916B2 (en) 2014-11-19 2019-05-07 Comcast Cable Communications, Llc Personalized menus and media content interface
CN107111648A (zh) 2015-01-09 2017-08-29 索尼公司 信息处理系统、信息处理装置、控制方法和程序
KR20160097867A (ko) 2015-02-10 2016-08-18 삼성전자주식회사 영상 표시 장치 및 영상 표시 방법
CN105989085B (zh) 2015-02-11 2021-01-12 腾讯科技（深圳）有限公司 访问应用程序页面的方法和装置
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US10552470B2 (en) 2015-04-06 2020-02-04 Netflix, Inc. Global recommendation systems for overlapping media catalogs
US10275148B2 (en) 2015-04-21 2019-04-30 Facebook, Inc. Methods and systems for transitioning between native content and web content
CN105992068A (zh) 2015-05-19 2016-10-05 乐视移动智能信息技术（北京）有限公司 一种视频文件预览方法及装置
US10430039B2 (en) 2015-06-02 2019-10-01 Facebook, Inc. Methods and systems for providing user feedback
US10474320B2 (en) 2015-06-07 2019-11-12 Apple Inc. Document channel selection for document viewing application
US9652125B2 (en) 2015-06-18 2017-05-16 Apple Inc. Device, method, and graphical user interface for navigating media content
US20170046339A1 (en) 2015-08-14 2017-02-16 Airwatch Llc Multimedia searching
US9928029B2 (en) 2015-09-08 2018-03-27 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback
US10120531B2 (en) 2015-09-08 2018-11-06 Apple Inc. User interfaces for navigating and playing content
WO2017059307A1 (en) 2015-09-30 2017-04-06 Sonifi Solutions, Inc. Methods and systems for enabling communications between devices
US20170094360A1 (en) 2015-09-30 2017-03-30 Apple Inc. User interfaces for navigating and playing channel-based content
US11182068B2 (en) 2015-10-27 2021-11-23 Verizon Patent And Licensing Inc. Method and system for interacting with a touch screen
US10510098B2 (en) 2015-10-29 2019-12-17 Verizon Patent And Licensing Inc. Promotion of web services through an IVR
US10453240B2 (en) 2015-11-05 2019-10-22 Adobe Inc. Method for displaying and animating sectioned content that retains fidelity across desktop and mobile devices
US10945048B2 (en) 2015-12-29 2021-03-09 DISH Technologies L.L.C. Methods and apparatus for presenting advertisements during playback of recorded television content
US20170192642A1 (en) 2015-12-31 2017-07-06 Opentv, Inc. Systems and methods for enabling transitions between items of content based on swipe gestures
US10303422B1 (en) 2016-01-05 2019-05-28 Sonos, Inc. Multiple-device setup
WO2017124116A1 (en) 2016-01-15 2017-07-20 Bao Sheng Searching, supplementing and navigating media
US10671653B2 (en) 2016-02-18 2020-06-02 Adobe Inc. Analyzing search queries to provide potential search query modifications via interactive user-interfaces
US10511957B2 (en) 2016-02-22 2019-12-17 Google Llc Methods and systems of configuring electronic devices
CN105955607B (zh) 2016-04-22 2020-06-19 北京小米移动软件有限公司 内容分享方法和装置
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
DK201670616A1 (en) * 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
US20180011580A1 (en) 2016-07-06 2018-01-11 Facebook, Inc. Systems and methods for previewing and scrubbing through media content items
US11042906B2 (en) 2016-08-15 2021-06-22 Yieldmo, Inc. Method for serving interactive content to a user
BR112019004339A2 (pt) 2016-09-02 2019-05-28 Opentv Inc exibição de conteúdo não atrelado ao tempo
KR102609363B1 (ko) 2016-10-18 2023-12-04 삼성전자주식회사 전자 장치 및 전자 장치의 멀티미디어 콘텐트 재생 방법
EP4044613A1 (en) 2016-10-26 2022-08-17 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
AU2017101431B4 (en) 2016-10-26 2018-05-17 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
US10917703B2 (en) 2016-11-28 2021-02-09 Rovi Guides, Inc. System and method for generating a custom summary of unconsumed portions of a series of media assets
US20180302680A1 (en) 2016-12-16 2018-10-18 Google Inc. On-Demand Video Surfing
WO2018128728A1 (en) 2017-01-03 2018-07-12 Rovi Guides, Inc. Systems and methods for predicting viewing behavior
US10685489B2 (en) 2017-03-02 2020-06-16 Daqri, Llc System and method for authoring and sharing content in augmented reality
US9754397B1 (en) 2017-04-07 2017-09-05 Mirage Worlds, Inc. Systems and methods for contextual augmented reality sharing and performance
US10178423B1 (en) 2017-06-14 2019-01-08 Mobitv, Inc. System and method for smooth transition of live and replay program guide displays
US10564823B1 (en) 2017-10-03 2020-02-18 Sprint Communications Company L.P. Mobile device transparent screen overlay
US10963127B2 (en) 2017-11-03 2021-03-30 Salesforce.Com, Inc. Single tap control for adding and managing favorites
US10341735B2 (en) 2017-11-06 2019-07-02 Rovi Guides, Inc. Systems and methods for sharing content service provider subscriptions
US20190258373A1 (en) 2018-02-21 2019-08-22 Apple Inc. Scrollable set of content items with locking feature
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. SETUP PROCEDURES FOR AN ELECTRONIC DEVICE
US10778786B2 (en) 2018-10-29 2020-09-15 International Business Machines Corporation Intelligent multi-device user interaction
CN114115676A (zh) 2019-03-24 2022-03-01 苹果公司 包括内容项的可选表示的用户界面
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
CN113940088A (zh) 2019-03-24 2022-01-14 苹果公司 用于查看和访问电子设备上的内容的用户界面
CN113906419A (zh) 2019-03-24 2022-01-07 苹果公司 用于媒体浏览应用程序的用户界面
EP3977245A1 (en) 2019-05-31 2022-04-06 Apple Inc. User interfaces for a podcast browsing and playback application
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device

Also Published As

Publication number Publication date
KR102398394B1 (ko) 2022-05-16
KR102242348B1 (ko) 2021-04-20
JP2021180049A (ja) 2021-11-18
KR20220065100A (ko) 2022-05-19
CN111104040A (zh) 2020-05-05
TWI585673B (zh) 2017-06-01
WO2015200537A2 (en) 2015-12-30
KR20210043755A (ko) 2021-04-21
JP2023101551A (ja) 2023-07-21
CN111078110B (zh) 2023-10-24
AU2021277703A1 (en) 2021-12-23
US10303348B2 (en) 2019-05-28
KR102608294B1 (ko) 2023-11-30
CN106415476A (zh) 2017-02-15
AU2021277703B2 (en) 2023-04-13
US10019142B2 (en) 2018-07-10
US11520467B2 (en) 2022-12-06
AU2015279949A1 (en) 2016-10-13
CN111078109B (zh) 2024-01-09
CN117331481A (zh) 2024-01-02
EP4242814A3 (en) 2023-10-18
KR20160147012A (ko) 2016-12-21
CN117573019A (zh) 2024-02-20
EP4242814A2 (en) 2023-09-13
JP2019096357A (ja) 2019-06-20
CN110297594A (zh) 2019-10-01
KR102516282B1 (ko) 2023-03-30
JP6496752B2 (ja) 2019-04-03
US20180275855A1 (en) 2018-09-27
JP2017517074A (ja) 2017-06-22
US20230096458A1 (en) 2023-03-30
CN111078109A (zh) 2020-04-28
KR20230165879A (ko) 2023-12-05
EP3126952A2 (en) 2017-02-08
WO2015200537A3 (en) 2016-04-21
AU2018204351A1 (en) 2018-07-05
AU2023204666A1 (en) 2023-08-03
US10732807B2 (en) 2020-08-04
US20200363934A1 (en) 2020-11-19
TW201614473A (en) 2016-04-16
CN110297594B (zh) 2022-09-06
CN117331482A (zh) 2024-01-02
US9792018B2 (en) 2017-10-17
AU2019253905B2 (en) 2021-09-09
US20150370455A1 (en) 2015-12-24
AU2019253905A1 (en) 2019-11-14
EP3126952B1 (en) 2023-07-12
KR101933201B1 (ko) 2018-12-27
CN111078110A (zh) 2020-04-28
KR20190000392A (ko) 2019-01-02
KR20200015849A (ko) 2020-02-12
CN111104040B (zh) 2023-10-24
JP7357027B2 (ja) 2023-10-05
US20190354264A1 (en) 2019-11-21
AU2015279949B2 (en) 2018-05-10
KR20230044566A (ko) 2023-04-04
AU2018204351B2 (en) 2019-08-15
US20170364246A1 (en) 2017-12-21

Similar Documents

Publication Publication Date Title
US11520467B2 (en) Input device and user interface interactions

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant