KR20120113252A - 다수의 뷰잉 영역을 통해 내비게이션하기 위한 장치, 방법 및 그래픽 사용자 인터페이스 - Google Patents

다수의 뷰잉 영역을 통해 내비게이션하기 위한 장치, 방법 및 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR20120113252A
KR20120113252A KR1020127020548A KR20127020548A KR20120113252A KR 20120113252 A KR20120113252 A KR 20120113252A KR 1020127020548 A KR1020127020548 A KR 1020127020548A KR 20127020548 A KR20127020548 A KR 20127020548A KR 20120113252 A KR20120113252 A KR 20120113252A
Authority
KR
South Korea
Prior art keywords
viewing area
display
sensitive surface
touch sensitive
display unit
Prior art date
Application number
KR1020127020548A
Other languages
English (en)
Other versions
KR101450415B1 (ko
Inventor
엘리자베스 캐롤라인 퍼체스 크란필
스티븐 오. 르메이
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20120113252A publication Critical patent/KR20120113252A/ko
Application granted granted Critical
Publication of KR101450415B1 publication Critical patent/KR101450415B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces

Abstract

디스플레이 및 터치 감지 표면을 갖는 다기능 장치는 제1 뷰잉 영역을 표시하며, 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함한다. 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다. 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함한다. 장치는 또한 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -; 제1 뷰잉 영역의 일부 상에 오버레이된 제2 뷰잉 영역의 일부를 표시하고; 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다.

Description

다수의 뷰잉 영역을 통해 내비게이션하기 위한 장치, 방법 및 그래픽 사용자 인터페이스{DEVICE, METHOD, AND GRAPHICAL USER INTERFACE FOR NAVIGATING THROUGH MULTIPLE VIEWING AREAS}
본 발명은 일반적으로 다수의 윈도 또는 기타 뷰잉 영역을 통해 내비게이션하는 전자 정보 장치들을 포함하지만 이에 한정되지 않는 전자 정보 장치들에 관한 것이다.
그래픽 사용자 인터페이스들에서 정보를 표시하기 위한 뷰잉 영역들(예를 들어, 윈도들)의 사용이 확산되어 왔다. 사용자들은 종종 대량의 데이터에서 정보를 검색하기 위해 다수의 뷰잉 영역을 통해 내비게이션하는 것이 필요하다. 일부 애플리케이션들에서, 사용자는 소정 콘텐츠를 발견할 수 있고, 이어서 관련 정보를 검색하기 위해 추가적인 뷰잉 영역들을 통해 내비게이션하는 것이 필요할 수 있다. 사용자는 웹 브라우저(예로서, 캘리포니아, 쿠퍼티노의 애플사로부터의 Safari) 또는 디지털 콘텐츠(예로서, 비디오 및 음악) 관리 애플리케이션(캘리포니아, 쿠퍼티노의 애플사로부터의 iTunes)과 같은 많은 상이한 애플리케이션에서 이러한 작업들을 수행하는 것이 필요할 수 있다.
그러나, 다수의 뷰잉 영역을 통해 내비게이션하기 위한 기존의 방법들은 성가시고 비효율적이다. 예컨대, 전통적인 웹 브라우저를 이용하여 다수의 뷰잉 영역을 통해 내비게이션하는 것은 지루하며, 사용자에게 상당한 인식 부담을 준다. 특히, 사람은 제한된 단기 기억 및 작업 기억 용량을 갖는 것으로 알려져 있다(M. Daneman and P. Carpenter, "Individual differences in working memory and reading", Journal of Verbal Learning & Verbal Behavior, 19(4): 450-66 (1980); G. A. Miller, "The magical number seven, plus or minus two: Some limits on our capacity for processing information", Psychological Review, 63, 81-97 (1956)을 참고한다). 이러한 제한된 기억 용량으로 인해, 사용자들은 다수의 뷰를 통해 내비게이션하는 동안에 그들이 검색 중인 곳 또는 그들이 검색을 시작했던 곳을 쉽게 잊을 수 있다. 이러한 문제는 사용자 효율 및 생산성을 줄일 수 있다.
게다가, 다수의 뷰잉 영역을 통해 내비게이션하기 위한 기존의 방법들은 필요 이상으로 오래 걸려서, 에너지를 낭비한다. 이러한 후자의 사항은 배터리로 작동되는 장치들에서 특히 중요하다.
따라서, (예를 들어, 키보드, 마우스, 트랙 패드 또는 터치 감지 디스플레이를 통한) 사용자 입력들에 응답하여 다수의 뷰잉 영역을 통해 내비게이션하기 위한 더 효율적인 방법들 및 인터페이스들을 갖는 장치들이 필요하다. 그러한 방법들 및 인터페이스들은 다수의 뷰잉 영역을 통해 내비게이션하기 위한 전통적인 방법들을 보완 또는 대체할 수 있다. 그러한 방법들 및 인터페이스들은 사용자의 인식 부담을 줄이며, 더 효율적인 사람-기계 인터페이스를 생성한다. 배터리로 작동되는 컴퓨팅 장치들에 대해, 그러한 방법들 및 인터페이스들은 전력을 보존하고, 배터리 충전들 간의 시간을 늘린다.
터치 감지 표면들을 갖는 컴퓨팅 장치들에 대한 사용자 인터페이스들과 관련된 위의 결함들 및 다른 문제들은 개시되는 장치들에 의해 줄거나 제거된다. 일부 실시예들에서, 장치는 데스크탑 컴퓨터이다. 일부 실시예들에서, 장치는 휴대용(예를 들어, 노트북 컴퓨터, 태블릿 컴퓨터 또는 핸드헬드 장치)이다. 일부 실시예들에서, 장치는 터치패드를 갖는다. 일부 실시예들에서, 장치는 ("터치 스크린" 또는 "터치 스크린 디스플레이"로도 알려진) 터치 감지 디스플레이를 구비한다. 일부 실시예들에서, 장치는 그래픽 사용자 인터페이스(GUI), 하나 이상의 프로세서들, 메모리 및 다수의 기능들을 수행하기 위해 메모리에 저장된 하나 이상의 모듈들, 프로그램들 또는 명령어 세트들을 구비한다. 일부 실시예들에서, 사용자는 주로 터치 감지 표면 상에서의 손가락 접촉들 및 제스처들을 통해 GUI와 상호작용한다. 일부 실시예들에서, 기능들은 이미지 편집, 제도, 프레젠테이션, 워드 프로세싱, 웹사이트 생성, 디스크 저작, 스프레드시트 작성, 게임 실행, 통화, 비디오 회의, 이메일링, 인스턴트 메시징, 연습 지원, 디지털 사진 촬영, 디지털 비디오 촬영, 웹 브라우징, 디지털 음악 재생 및/또는 디지털 비디오 재생을 포함할 수 있다. 이러한 기능들을 수행하기 위한 실행 가능한 명령어들은 하나 이상의 프로세서들에 의한 실행을 위해 구성된 컴퓨터 판독 가능 저장 매체 또는 기타 컴퓨터 프로그램 제품에 포함될 수 있다.
일부 실시예들에 따르면, 디스플레이 및 터치 감지 표면을 갖는 다기능 장치에서 방법이 수행된다. 이 방법은 제1 뷰잉 영역을 표시하는 단계를 포함한다. 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함한다. 상기 방법은 또한 상기 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계; 및 상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이(overlay)하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계를 포함한다. 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함한다. 상기 방법은 또한 상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계; 및 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하는 단계를 포함한다. 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함한다. 상기 방법은 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 오버레이된 상기 제2 뷰잉 영역의 일부를 표시하는 단계; 및 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계를 더 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치 감지 표면을 갖는 다기능 장치에서 방법이 수행된다. 이 방법은 제1 뷰잉 영역을 표시하는 단계를 포함한다. 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함한다. 상기 방법은 또한 상기 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계; 및 상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계를 포함한다. 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함한다. 상기 방법은 또한 상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계; 및 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하는 단계를 포함한다. 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함한다. 상기 방법은 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계를 더 포함한다. 상기 방법은 상기 제3 뷰잉 영역을 표시하는 동안, 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여: 상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫는 단계; 및 상기 제1 뷰잉 영역 전체를 표시하는 단계를 더 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치 감지 표면을 갖는 다기능 장치에서 방법이 수행된다. 이 방법은 제1 뷰잉 영역을 표시하는 단계를 포함한다. 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함한다. 상기 방법은 또한 복수의 뷰잉 영역 내의 복수의 선택 가능 객체의 활성화들을 검출하는 단계; 및 각각의 뷰잉 영역 내의 각각의 선택 가능 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 상기 각각의 선택 가능 객체에 대응하는 다른 뷰잉 영역을 오버레이하고, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계를 포함한다. 상기 방법은 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역 상에 오버레이된 모든 뷰잉 영역들을 닫는 단계; 및 상기 제1 뷰잉 영역 전체를 표시하는 단계를 더 포함한다.
일부 실시예들에 따르면, 다기능 장치는 디스플레이, 터치 감지 표면, 하나 이상의 프로세서들, 메모리 및 하나 이상의 프로그램들을 포함하고, 상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 상기 하나 이상의 프로그램들은 전술한 임의의 방법의 동작들을 수행하기 위한 명령어들을 포함한다. 일부 실시예들에 따르면, 디스플레이, 터치 감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램들을 실행하기 위한 하나 이상의 프로세서들을 구비한 다기능 장치 상의 그래픽 사용자 인터페이스는 전술한 임의의 방법에서 표시되는 요소들 중 하나 이상을 포함하고, 이 요소들은 전술한 임의 방법에서 설명된 바와 같이 입력들에 응답하여 갱신된다. 일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 디스플레이 및 터치 감지 표면을 구비한 다기능 장치에 의해 실행될 때 상기 장치로 하여금 전술한 임의의 방법의 동작들을 수행하게 하는 명령어들을 그 안에 저장하고 있다. 일부 실시예들에 따르면, 다기능 장치는 디스플레이; 터치 감지 표면; 및 전술한 임의 방법의 동작들을 수행하기 위한 수단을 포함한다. 일부 실시예들에 따르면, 디스플레이 및 터치 감지 표면을 구비한 다기능 장치에서 사용하기 위한 정보 처리 장치는 전술한 임의의 방법의 동작들을 수행하기 위한 수단을 포함한다.
일부 실시예에 따르면, 다기능 장치는 제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -; 터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛; 및 상기 디스플레이 유닛 및 상기 터치 감지 표면 유닛에 결합된 처리 유닛을 포함한다. 일부 실시예들에서, 상기 처리 유닛은 상기 제1 복수의 선택 가능 객체 내에서 상기 터치 감지 표면 유닛을 통해 입력된 객체의 활성화를 검출하고; 상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고 - 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -; 상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고; 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여: 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -; 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 오버레이된 상기 제2 뷰잉 영역의 일부의 표시를 가능하게 하고; 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 구성된다.
일부 실시예들에 따르면, 다기능 장치는 제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -; 터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛; 및 상기 디스플레이 유닛 및 상기 터치 감지 표면 유닛에 결합된 처리 유닛을 포함한다. 일부 실시예들에서, 상기 처리 유닛은 상기 제1 복수의 선택 가능 객체 내에서 상기 터치 감지 표면 유닛을 통해 입력된 객체의 활성화를 검출하고; 상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고 - 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -; 상기 제2 복수의 선택 가능 객체 내에서 상기 터치 감지 표면 유닛을 통해 입력된 객체의 활성화를 검출하고; 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여: 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -; 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고; 상기 제3 뷰잉 영역을 표시하는 동안: 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고; 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여: 상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫고; 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 구성된다.
일부 실시예들에 따르면, 다기능 장치는 제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -; 터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛; 및 상기 디스플레이 유닛 및 상기 터치 감지 표면 유닛에 결합된 처리 유닛을 포함한다. 일부 실시예들에서, 상기 처리 유닛은 복수의 뷰잉 영역 내에서 상기 터치 감지 표면 유닛을 통해 입력된 복수의 선택 가능 객체의 활성화들을 검출하고; 각각의 뷰잉 영역 내의 각각의 선택 가능 객체의 활성화를 검출하는 것에 응답하여: 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 상기 각각의 선택 가능 객체에 대응하는 다른 뷰잉 영역을 오버레이하고; 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고; 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고; 상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여: 상기 제1 뷰잉 영역 상에 오버레이된 모든 뷰잉 영역들을 닫고; 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 구성된다.
따라서, 디스플레이들 및 터치 감지 표면들을 갖는 다기능 장치들은 다수의 뷰잉 영역을 통해 내비게이션함으로써, 그러한 장치들의 유효성, 효율 및 사용자 만족도를 향상시키기 위한 더 빠르고 더 효율적인 방법들 및 인터페이스들을 구비한다. 그러한 방법들 및 인터페이스들은 다수의 뷰잉 영역을 통해 내비게이션하기 위한 전통적인 방법들을 보완 또는 대체할 수 있다.
본 발명의 상기 실시예 및 추가적인 실시예에 대한 더 양호한 이해를 위하여, 첨부된 도면과 함께 이하의 실시예들의 설명이 참조되어야 하며, 동일한 참조 번호들은 도면 전체에 걸쳐 대응 요소들을 지칭한다.
도 1a 및 1b는 일부 실시예들에 따른 터치-감지 디스플레이를 구비한 휴대용 다기능 장치를 도시하는 블록도이다.
도 1c는 일부 실시예들에 따른 이벤트 처리를 위한 예시적인 컴포넌트들을 나타내는 블록도이다.
도 2는 일부 실시예들에 따른 터치 스크린을 가진 휴대용 다기능 장치를 도시한다.
도 3은 일부 실시예들에 따른 디스플레이 및 터치 감지 표면을 갖는 예시적인 다기능 장치의 블록도이다.
도 4a 및 4b는 일부 실시예들에 따른 휴대용 다기능 장치 상의 애플리케이션들의 메뉴를 위한 예시적인 사용자 인터페이스들을 도시한다.
도 4c는 일부 실시예들에 따른 디스플레이로부터 분리된 터치 감지 표면을 갖는 다기능 장치를 위한 예시적인 사용자 인터페이스를 나타낸다.
도 5a-5jjj는 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션하기 위한 예시적인 사용자 인터페이스들을 나타낸다.
도 6a-6e는 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션하는 방법을 나타내는 흐름도들이다.
도 7은 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀하는 방법을 나타내는 흐름도이다.
도 8은 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀하는 방법을 나타내는 흐름도이다.
도 9는 일부 실시예들에 따른 전자 장치의 기능 블록도이다.
이하, 첨부된 도면에 그 예가 도시된 실시예들에 대해 상세하게 언급할 것이다. 이하의 상세한 설명에서, 본 발명의 철저한 이해를 제공하기 위하여 다수의 특정 세부사항이 상술된다. 그러나, 이러한 특정 세부사항 없이도 본 발명이 실시될 수 있음은 당업자에게 자명할 것이다. 한편, 실시예의 양태를 불필요하게 모호하게 하지 않도록, 공지된 방법, 절차, 컴포넌트, 회로 및 네트워크에 대해서는 상세하게 설명하지 않았다.
또한, 본 명세서에 제1, 제2 등의 용어가 다양한 구성요소를 설명하기 위해 사용될 수 있지만, 이들 구성요소는 이러한 용어에 의해 한정되지 않아야 한다. 이러한 용어는 구성요소 간의 구별을 위해서 사용될 뿐이다. 예컨대, 본 발명의 기술적 사상으로부터 벗어나지 않고, 제1 접촉은 제2 접촉이라고 지칭될 수 있고, 유사하게 제2 접촉은 제1 접촉이라고 지칭될 수 있다. 제1 접촉 및 제2 접촉은 모두 접촉이지만, 이들은 동일한 접촉은 아니다.
본 발명의 명세서에 사용된 용어는 특정 실시예를 설명하기 위한 것일 뿐이며 본 발명을 제한하는 것으로 의도된 것이 아니다. 본 발명의 명세서 및 첨부된 특허청구범위에 사용된, "일", "하나의" 및 "상기"라는 단수형은 문맥상 명확하게 달리 지적하지 않은 이상 복수형도 포함하는 것으로 의도된 것이다. 또한, 본 명세서에 사용된 "및/또는"이라는 용어는 열거된 관련 아이템들 중 하나 이상의 아이템의 가능한 모든 조합을 지칭하고 포함하는 것임을 이해할 것이다. "구비한다", "구비하는", "포함한다" 및/또는 "포함하는"이라는 용어는, 본 명세서에서 사용되는 경우, 언급된 특징, 정수, 단계, 동작, 구성요소 및/또는 컴포넌트의 존재를 나타내지만, 하나 이상의 다른 특징, 정수, 단계, 동작, 구성요소, 컴포넌트 및/또는 이들의 그룹의 존재 또는 추가를 배제하지 않음을 더 이해할 것이다.
본 명세서에 사용되는 "~인 경우"이란 용어는 상황에 따라 "~인 때" 또는 "~와 동시에" 또는 "판단에 응답하여" 또는 "감지에 응답하여"를 의미하는 것으로 해석될 수 있다. 유사하게, "판단되는 경우" 또는 "[언급된 조건 또는 이벤트가] 감지되는 경우"이란 구문은 문맥에 따라 "판단되면" 또는 "판단에 응답하여" 또는 "[언급된 조건 또는 이벤트가] 감지되면" 또는 "[언급된 조건 또는 이벤트의] 감지에 응답하여"를 의미하는 것으로 해석되어야 한다.
컴퓨팅 장치들, 그러한 장치들을 위한 사용자 인터페이스들, 그리고 그러한 장치들을 사용하기 위한 관련 프로세스들의 실시예들이 기술된다. 일부 실시예들에서, 컴퓨팅 장치는 PDA 및/또는 음악 플레이어 기능들 등의 다른 기능들을 더 포함하는 이동 전화와 같은 휴대용 통신 장치이다. 휴대용 다기능 장치들의 예시적인 실시예들은 캘리포니아, 쿠퍼티노의 애플사로부터의 iPhone® 및 iPod Touch® 장치들을 포함하지만 이에 한정되지 않는다. 터치 감지 표면들(예로서, 터치 스크린 디스플레이들 및/또는 터치 패드들)을 갖는 랩탑들 또는 태블릿 컴퓨터들과 같은 다른 휴대용 장치들도 사용될 수 있다. 일부 실시예들에서, 장치들은 휴대용 통신 장치가 아니라, 터치 감지 표면(예로서, 터치 스크린 디스플레이 및/또는 터치 패드)을 갖는 데스크탑 컴퓨터라는 것도 이해해야 한다.
아래의 설명에서는 디스플레이 및 터치 감지 표면을 포함하는 컴퓨팅 장치가 설명된다. 그러나, 컴퓨팅 장치는 물리 키보드, 마우스 및/또는 조이스틱과 같은 하나 이상의 다른 물리적 사용자 인터페이스 장치들을 포함할 수 있다는 것을 이해해야 한다.
장치는, 제도 애플리케이션, 프레젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 생성 애플리케이션, 디스크 저작 애플리케이션, 스프레드시트 애플리케이션, 게이밍 애플리케이션, 통화 애플리케이션, 비디오 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 연습 지원 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 음악 플레이어 애플리케이션 및/또는 디지털 비디오 플레이어 애플리케이션 중 하나 이상의 애플리케이션과 같은 다양한 애플리케이션을 지원한다.
장치 상에서 실행될 수 있는 다양한 애플리케이션은 터치 감지 표면 등의 적어도 하나의 공통의 물리적 사용자 인터페이스를 사용할 수 있다. 터치 감지 표면의 하나 이상의 기능뿐만 아니라 장치 상에 표시되는 대응 정보가 애플리케이션별로 그리고/또는 각 애플리케이션 내에서 조정 및/또는 변경될 수 있다. 이러한 방식으로, 장치의 (터치 감지 표면 등의) 공통의 물리적 아키텍처는 직관적이고 사용자에게 투명한 사용자 인터페이스들을 갖는 다양한 애플리케이션을 지원할 수 있다.
사용자 인터페이스는 하나 이상의 소프트 키보드 실시예를 포함할 수 있다. 소프트 키보드 실시예는, 그 내용 전체가 본 명세서에 참조문헌으로서 포함되는 2006년 7월 24일 출원된 미국 특허출원 제11/459,606호, "Keyboards For Portable Electronic Devices" 및 2006년 7월 24일 출원된 미국 특허출원 제11/459,615호, "Touch Screen Keyboards For Portable Electronic Devices"에 기술된 것과 같은, 키보드의 표시된 아이콘 상에 표준 구성(QWERTY) 및/또는 비표준 구성의 심볼을 포함할 수 있다. 키보드 실시예는 타자기를 위한 것과 같은 기존 물리적 키보드의 키 개수보다 적은 수의 아이콘(또는 소프트 키)을 포함할 수 있다. 이를 통해 사용자가 키보드의 하나 이상의 아이콘을 선택하고 그에 따라 하나 이상의 해당 심볼을 선택하는 것이 용이해질 수 있다. 키보드 실시예는 적응적일 수 있다. 예컨대, 표시된 아이콘은 하나 이상의 아이콘의 선택 및/또는 하나 이상의 해당 심볼의 선택과 같은 사용자 액션에 따라 수정될 수 있다. 휴대용 장치 상의 하나 이상의 애플리케이션은 공통의 키보드 실시예 및/또는 상이한 키보드 실시예를 이용할 수 있다. 따라서, 사용되는 키보드 실시예는 애플리케이션 중 적어도 일부에 대해 맞춤화될(tailored) 수 있다. 일부 실시예들에서, 하나 이상의 키보드 실시예는 각 사용자에 대해 맞춤화될 수 있다. 예컨대, 하나 이상의 키보드 실시예는 각 사용자의 단어 사용 기록(사전 편찬법, 속어, 개별 사용량)에 기초하여 각 사용자에 대해 맞춤화될 수 있다. 키보드 실시예 중 일부는 소프트 키보드 실시예를 사용하는 경우 하나 이상의 아이콘을 선택하고 그에 따라 하나 이상의 심볼을 선택할 때 사용자가 실수할 확률을 줄이도록 조정될 수 있다.
이하, 터치 감지 디스플레이를 갖는 휴대용 장치의 실시예에 대하여 논한다. 도 1a 및 1b는 일부 실시예들에 따른 터치-감지 디스플레이(112)를 구비한 휴대용 다기능 장치(100)를 도시하는 블록도이다. 터치-감지 디스플레이(112)는 편의상 "터치 스크린"이라 지칭되고, 터치-감지 디스플레이 시스템으로도 알려지거나 지칭될 수 있다. 장치(100)는 (하나 이상의 컴퓨터 판독가능 저장 매체를 포함할 수 있는) 메모리(102), 메모리 컨트롤러(122), 하나 이상의 처리 장치(CPU)(120), 주변장치 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입출력(I/O) 서브시스템(106), 기타 입력 또는 출력 장치(116) 및 외부 포트(124)를 포함할 수 있다. 장치(100)는 하나 이상의 광센서(164)를 포함할 수 있다. 이러한 컴포넌트들은 하나 이상의 통신 버스 또는 신호선(103)을 통해 통신할 수 있다.
장치(100)가 휴대용 다기능 장치의 일례일 뿐이고 장치(100)가 도시된 것보다 많거나 적은 컴포넌트를 구비하거나, 2개 이상의 컴포넌트를 결합시키거나, 상이한 컴포넌트 구성 또는 배치를 가질 수 있음이 인정되어야 한다. 도 1a 및 1b에 도시된 다양한 컴포넌트는, 하나 이상의 신호 처리 및/또는 애플리케이션 특화된 집적 회로를 포함하는, 하드웨어, 소프트웨어, 또는 하드웨어 및 소프트웨어 양자의 조합으로 구현될 수 있다.
메모리(102)는 고속 랜덤 액세스 메모리(high-speed random access memory)를 포함할 수 있고, 또한 하나 이상의 자기 디스크 저장 장치, 플래시 메모리 장치 또는 기타 비휘발성 고체 상태 메모리 장치(non-volatile solid-state memory device) 등의 비휘발성 메모리를 포함할 수 있다. CPU(120) 및 주변장치 인터페이스(118)와 같은 장치(100)의 다른 컴포넌트에 의한 메모리(102)에 대한 액세스는 메모리 컨트롤러(122)에 의해 제어될 수 있다.
주변장치 인터페이스(118)는 장치의 입력 및 출력 주변장치를 CPU(120) 및 메모리(102)에 결합하는 데 사용될 수 있다. 하나 이상의 프로세서(120)는 메모리(102)에 저장된 다양한 소프트웨어 프로그램 및/또는 명령어 집합을 실행하여 장치(100)를 위한 다양한 기능을 수행하고 데이터를 처리할 수 있다.
일부 실시예들에서, 주변장치 인터페이스(118), CPU(120) 및 메모리 컨트롤러(122)는 칩(104)과 같은 단일 칩 상에 구현될 수 있다. 일부 다른 실시예에서, 이들은 개별 칩 상에 구현될 수 있다.
RF(라디오 주파수) 회로(108)는 전자기 신호(electromagnetic signal)라고도 알려진 RF 신호를 송수신한다. RF 회로(108)는 전기 신호를 전자기 신호로 변환하거나 전자기 신호로부터 전기 신호로 변환하고, 전자기 신호를 통해 통신 네트워크 및 다른 통신 장치와 통신한다. RF 회로(108)는 이러한 기능을 수행하기 위한 공지된 회로를 포함할 수 있는데, 이러한 회로는 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기(oscillator), 디지털 신호 처리기, CODEC 칩셋, 가입자 식별 모듈(SIM) 카드, 메모리 등을 포함하지만 이들로 한정되지 않는다. RF 회로(108)는, 셀룰러 전화 네트워크, 무선 LAN(local area network) 및/또는 MAN(metropolitan area network) 등의 무선 네트워크, 인트라넷, 및/또는 월드 와이드 웹(WWW)이라고도 불리는 인터넷과 같은 네트워크 및 기타 장치와 무선 통신에 의해 통신할 수 있다. 이러한 무선 통신에는, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스(Bluetooth), (IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n 등의) Wi-Fi(Wireless Fidelity), VoIP(voice over Internet Protocol), Wi-MAX, (IMAP(Internet message access protocol) 및/또는 POP(post office protocol) 등의) 이메일용 프로토콜, (XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service), 및/또는 SMS(Short Message Service) 등의) 인스턴트 메시징, 또는 본원의 제출일 당시에 개발되지 않은 통신 프로토콜을 포함하는 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 한정되지 않는 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것이 사용될 수 있다.
오디오 회로(110), 스피커(111) 및 마이크로폰(113)은 사용자와 장치(100) 사이의 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변장치 인터페이스(118)로부터 오디오 데이터를 수신하고, 오디오 데이터를 전기 신호로 변환하며, 전기 신호를 스피커(111)로 송신한다. 스피커(111)는 전기 신호를 가청 음파(human-audible sound wave)로 변환한다. 오디오 회로(110)는 또한 마이크로폰(113)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 처리를 위해 오디오 데이터를 주변장치 인터페이스(118)에 송신한다. 오디오 데이터는 주변장치 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되거나 그들로 송신될 수 있다. 일부 실시예들에서, 오디오 회로(110)는 (도 2의 212와 같은) 헤드셋 잭(headset jack)을 더 포함한다. 헤드셋 잭은 (한쪽귀용 또는 양쪽귀용 헤드폰 등의) 출력과 (마이크로폰 등의) 입력을 모두 구비한 헤드셋 또는 출력-전용 헤드폰과 같은 이동식 오디오 입/출력 주변장치와 오디오 회로(110) 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 터치 스크린(112) 및 기타 입력/제어 장치(116)와 같은 장치(100) 상의 입/출력 주변장치를 주변장치 인터페이스(118)에 결합시킨다. I/O 서브시스템(106)은 디스플레이 컨트롤러(156) 및 기타 입력 또는 제어 장치를 위한 하나 이상의 입력 컨트롤러(160)를 포함할 수 있다. 하나 이상의 입력 컨트롤러(160)는 기타 입력 또는 제어 장치(116)로부터 전기 신호를 수신하거나 그것으로 송신할 수 있다. 기타 입력/제어 장치(116)는 (푸시 버튼, 락커 버튼 등의) 물리적 버튼, 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함할 수 있다. 일부 다른 실시예에서, 입력 컨트롤러(들)(160)는 키보드, 적외선 포트, USB 포트 및 마우스 등 포인터 장치 중 임의의 것과 결합될 수 있다(또는 이들 중 아무것과도 결합되지 않을 수 있다). (도 2의 208과 같은) 하나 이상의 버튼은 스피커(111) 및/또는 마이크로폰(113)의 볼륨 제어를 위한 업/다운 버튼을 포함할 수 있다. 하나 이상의 버튼은 (도 2의 206과 같은) 푸시 버튼을 포함할 수 있다. 본 명세서에 참조문헌으로서 포함되는 2005년 12월 23일 출원된 미국 특허출원 제11/322,549호, "Unlocking a Device by Performing Gestures on an Unlock Image"에 기술된 바와 같이, 푸시 버튼을 짧게 누르면, 터치 스크린(112)이 잠금해제되거나, 터치 스크린 상의 제스처를 사용하여 장치를 잠금해제하는 프로세스가 개시될 수 있다. (206 등의) 푸시 버튼을 길게 누르면, 장치(100)에 대한 전원을 턴온 또는 턴오프할 수 있다. 사용자는 버튼들 중 하나 이상의 버튼의 기능성을 맞춤화하는 것이 가능할 수 있다. 터치 스크린(112)은 가상 버튼이나 소프트 버튼 및 하나 이상의 소프트 키보드를 구현하는데 사용된다.
터치-감지 디스플레이(112)는 장치와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 컨트롤러(156)는 터치 스크린(112)으로부터 전기 신호를 수신하거나, 터치 스크린(112)으로 전기 신호를 송신하거나, 송수신을 모두 행할 수 있다. 터치 스크린(112)은 사용자에 대한 시각적 출력을 표시한다. 시각적 출력은 그래픽, 텍스트, 아이콘, 비디오 및 이들의 임의의 조합(총괄하여 "그래픽"이라고 지칭됨)을 포함할 수 있다. 일부 실시예들에서, 시각적 출력의 일부 또는 전부는 사용자-인터페이스 객체들(user-interface object)에 대응할 수 있다.
터치 스크린(112)은 햅틱 접촉(haptic contact) 및/또는 택틸(tactile) 접촉에 기초하여 사용자로부터의 입력을 받아들이는 터치-감지 표면, 센서 또는 센서 집합을 구비한다. 터치 스크린(112) 및 디스플레이 컨트롤러(156)는 (메모리(102)의 임의의 관련 모듈 및/또는 명령어 집합과 함께) 터치 스크린(112) 상의 접촉(및 접촉의 임의의 움직임(movement)이나 해제)을 감지하고 감지된 접촉을 터치 스크린(112) 상에 표시된 (하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지 등의) 사용자-인터페이스 객체와의 상호 작용으로 변환한다. 예시적인 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉점은 사용자의 손가락에 대응한다.
터치 스크린(112)에는 LCD(액정 디스플레이) 기술 또는 LPD(발광 중합체 디스플레이) 기술 또는 LED(발광 다이오드) 기술이 사용될 수 있지만, 기타 디스플레이 기술이 다른 실시예에서 사용될 수 있다. 터치 스크린(112) 및 디스플레이 컨트롤러(156)는, 용량식(capacitive), 저항식(resistive), 적외선(infrared) 및 표면 음파(surface acoustic wave) 기술들을 포함하지만 이들로 한정되지 않는, 이미 공지되었거나 추후 개발될 복수의 터치 감지 기술 중 임의의 것을 이용하는 동시에, 다른 근접 센서 배열(proximity sensor array) 또는 터치 스크린(112)과의 하나 이상의 접촉점을 판단하기 위한 기타 구성요소를 이용하여 접촉 및 그것의 임의의 움직임이나 해제를 감지할 수 있다. 예시적인 실시예에서는, 캘리포니아, 쿠퍼티노의 애플사로부터의 iPhone® 및 iPod Touch®에서 발견되는 것과 같은 투영 상호 용량 감지 기술이 이용된다.
터치 스크린(112)의 일부 실시예들에서의 터치-감지 디스플레이는, 본 명세서에 그 전체가 각각 참조문헌으로 포함되는 미국 특허 제6,323,846호(Westerman 외), 제6,570,557호(Westerman 외) 및/또는 제6,677,932호(Westerman), 및/또는 미국 특허공개공보 제2002/0015024A1호에 설명된 멀티-터치 감지 터치패드와 유사할 수 있다. 그러나, 터치 스크린(112)은 휴대용 장치(100)로부터의 시각적 출력을 표시하는 반면, 터치 감지 터치패드는 시각적 출력을 제공하지 않는다.
터치 스크린(112)의 일부 실시예들에서의 터치-감지 디스플레이는 ⑴ 2006년 5월 2일 출원된 미국 특허출원 제11/381,313호, "Multipoint Touch Surface Controller", ⑵ 2004년 5월 6일 출원된 미국 특허출원 제10/840,862호, "Multipoint Touchscreen", ⑶ 2004년 7월 30일 출원된 미국 특허출원 10/903,964호, "Gestures For Touch Sensitive Input Devices", ⑷ 2005년 1월 31일 출원된 미국 특허출원 제11/048,264호, "Gestures For Touch Sensitive Input Devices", ⑸ 2005년 1월 18일 출원된 미국 특허출원 제11/038,590호, "Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices", ⑹ 2005년 9월 16일 출원된 미국 특허출원 제11/228,758호, "Virtual Input Device Placement On A Touch Screen User Interface", ⑺ 2005년 9월 16일 출원된 미국 특허출원 제11/228,700호, "Operation Of A Computer With A Touch Screen Interface", ⑻ 2005년 9월 16일 출원된 미국 특허출원 제11/228,737호, "Activating Virtual Keys Of A Touch-Screen Virtual Keyboard", ⑼ 2006년 3월 3일 출원된 미국 특허출원 제11/367,749호, "Multi-Functional Hand-Held Device"에 설명된 것과 같을 수 있다. 위 출원 모두는 그 전체가 본 명세서에 참조문헌으로 포함된다.
터치 스크린(112)은 100dpi를 넘는 비디오 해상도를 가질 수 있다. 일부 실시예에서, 터치 스크린은 대략 160dpi의 비디오 해상도를 가질 수 있다. 사용자는 스타일러스, 손가락 등과 같은 임의의 적합한 물체 또는 부속물(appendage)을 사용하여 터치 스크린(112)과 접촉할 수 있다. 일부 실시예들에서, 사용자 인터페이스는 주로 손가락-기반 접촉 및 제스처를 이용하여 동작하도록 설계되는데, 이러한 손가락-기반 접촉 및 제스처는 스타일러스-기반의 입력에 비해 터치 스크린 상에서의 손가락의 접촉 면적이 보다 넓기 때문에 덜 정확하다. 일부 실시예들에서, 장치는 개략적인(rough) 손가락-기반 입력을 사용자가 원하는 액션을 수행하기 위한 정확한 포인터/커서 위치 또는 명령으로 번역한다.
일부 실시예들에서, 장치(100)는 터치 스크린 외에도 특정 기능을 활성화하거나 비활성화하기 위한 터치패드(도시 생략)를 포함할 수 있다. 일부 실시예들에서, 터치패드는 터치 스크린과 달리 시각적 출력을 표시하지 않는, 장치의 터치-감지 영역이다. 터치패드는 터치 스크린(112)으로부터 분리된 터치-감지 표면이거나, 터치 스크린에 의해 형성된 터치-감지 표면의 연장일 수 있다.
일부 실시예들에서, 장치(100)는 입력 제어 장치(116)로서 물리적 혹은 가상 휠(예를 들면, 클릭 휠)을 포함할 수 있다. 사용자는 클릭 휠을 돌리거나 (예컨대, 접촉점의 움직임 량이 클릭 휠의 중심점에 대한 접촉점의 각 변위에 의해 측정되는 경우에는) 클릭 휠과의 접촉점을 움직임으로써, 터치 스크린(112)에 표시된 하나 이상의 그래픽 객체(예를 들면, 아이콘)를 내비게이션하고 그것들과 상호 작용할 수 있다. 클릭 휠은 또한 표시된 아이콘들 중 하나 이상의 아이콘을 선택하는데 사용될 수 있다. 예컨대, 사용자는 관련 버튼 또는 클릭 휠의 적어도 일부분을 누를 수 있다. 클릭 휠을 통해 사용자에 의해 제공되는 사용자 명령 및 내비게이션 명령은 입력 컨트롤러(160)뿐만 아니라 메모리(102)의 명령어 집합 및/또는 모듈들 중 하나 이상에 의해 처리될 수 있다. 가상 클릭 휠의 경우, 클릭 휠 및 클릭 휠 컨트롤러는 각각 터치 스크린(112) 및 디스플레이 컨트롤러(156)의 일부일 수 있다. 가상 클릭 휠의 경우, 클릭 휠은 장치와의 사용자의 상호 작용에 응답하여 터치 스크린 디스플레이상에 나타나고 사라지는 불투명하거나 반투명한 객체일 수 있다. 일부 실시예들에서, 가상 클릭 휠은 휴대용 다기능 장치의 터치 스크린 상에 표시되고 터치 스크린과의 사용자 접촉에 의해 동작된다.
장치(100)는 또한 다양한 컴포넌트에 전력을 공급하는 전력 시스템(162)을 포함한다. 전력 시스템(162)은 전력 관리 시스템, (배터리, 교류(AC) 등의) 하나 이상의 전원, 충전 시스템, 전력 실패 감지 회로(power failure detection circuit), 전력 변환기 또는 인버터, (발광 다이오드(LED) 등의) 전력 상태 표시자 및 휴대용 장치의 전력 생성, 관리 및 분배와 연관된 임의의 다른 컴포넌트를 포함할 수 있다.
장치(100)는 또한 하나 이상의 광센서(164)를 포함할 수 있다. 도 1a 및 1b는 I/O 서브시스템(106)의 광센서 컨트롤러(158)에 결합된 광센서를 도시한다. 광센서(164)는 전하 결합 소자(CCD) 또는 상보형 금속 산화막 반도체(CMOS) 포토트랜지스터를 포함할 수 있다. 광센서(164)는 하나 이상의 렌즈를 통해 투사되는, 환경으로부터의 광을 수신하고 그 광을 이미지를 나타내는 데이터로 변환한다. (카메라 모듈이라고도 지칭되는) 이미징 모듈(143)과 함께, 광센서(164)는 정지 이미지 또는 비디오를 캡처할 수 있다. 일부 실시예들에서, 터치 스크린 디스플레이가 정지 및/또는 비디오 이미지 획득 중 어느 하나를 위한 뷰파인더로서 사용될 수 있도록, 장치의 전면 상의 터치 스크린 디스플레이(112)에 대향하여, 광센서가 장치(100)의 후면에 배치된다. 일부 실시예들에서, 사용자가 터치 스크린 디스플레이 상에서 다른 비디오 회의 참가자를 보는 동안 사용자의 이미지가 비디오 회의를 위해 획득될 수 있도록, 광센서가 장치의 전면에 배치된다. 일부 실시예들에서, 하나의 광센서(164)가 비디오 회의 및 정지 및/또는 비디오 이미지 획득 양자 모두에 대해 터치 스크린 디스플레이와 함께 사용될 수 있도록, 사용자가 (예컨대, 장치 하우징의 렌즈 및 센서를 회전시킴으로써) 광센서(164)의 위치를 변경할 수 있다.
장치(100)는 또한 하나 이상의 근접 센서(proximity sensor; 166)를 포함할 수 있다. 도 1a 및 1b는 주변장치 인터페이스(118)에 결합된 근접 센서(166)를 도시한다. 또는, 근접 센서(166)는 I/O 서브시스템(106)의 입력 컨트롤러(160)에 결합될 수 있다. 근접 센서(166)는, 본 명세서에 그 전체가 참조문헌으로 포함되는 미국 특허출원 제11/241,839호, "Proximity Detector In Handheld Device"; 제11/240,788호, "Proximity Detector In Handheld Device"; 제11/602,702호, "Using Ambient Light Sensor To Augment Proximity Sensor Output"; 제11/586,862호, "Automated Response To And Sensing Of User Activity In Portable Devices"; 및 제11/638,251호, "Methods And Systems For Automatic Configuration Of Peripherals"에 설명된 바와 같이 동작할 수 있다. 일부 실시예들에서, (예컨대, 사용자가 전화 통화 중인 경우와 같이) 다기능 장치가 사용자의 귀에 인접하여 놓이는 경우, 근접 센서는 터치 스크린(112)을 턴오프하고 디스에이블링한다.
장치(100)는 또한 하나 이상의 가속도계(accelerometers; 168)를 포함할 수 있다. 도 1a 및 1b는 주변장치 인터페이스(118)에 결합된 가속도계(168)를 도시한다. 또는, 가속도계(168)는 I/O 서브시스템(106)의 입력 컨트롤러(160)에 결합될 수 있다. 가속도계(168)는, 그 전체가 각각 모두 본 명세서에 참조문헌으로 포함되는 미국 특허공개공보 제20050190059호, "Acceleration-based Theft Detection System for Portable Electronic Devices" 및 미국 특허공개공보 제20060017692호, "Methods and Apparatuses For Operating A Portable Device Based On An Accelerometer"에 설명된 바와 같이 동작할 수 있다. 일부 실시예들에서, 정보가 하나 이상의 가속도계로부터 수신된 데이터에 대한 분석에 기초하여 세로 뷰 또는 가로 뷰로 터치 스크린 디스플레이 상에 표시된다.
일부 실시예들에서, 메모리(102)에 저장된 소프트웨어 컴포넌트에는, 운영 체제(126), 통신 모듈(또는 명령어 집합)(128), 접촉/운동 모듈(또는 명령어 집합)(130), 그래픽 모듈(또는 명령어 집합)(132), 텍스트 입력 모듈(또는 명령어 집합)(134), GPS 모듈(또는 명령어 집합)(135) 및 애플리케이션(또는 명령어 집합)(136)이 포함될 수 있다. 더구나, 일부 실시예들에서, 메모리(102)는 도 1a, 1b 및 3에 도시된 바와 같이 장치/글로벌 내부 상태(157)를 저장한다. 장치/글로벌 내부 상태(157)는 존재할 경우에 어느 애플리케이션이 현재 활성인지를 지시하는 활성 애플리케이션 상태; 어떤 애플리케이션들, 뷰들 또는 다른 정보가 터치 스크린 디스플레이(112)의 다양한 영역들을 점유하는지를 지시하는 디스플레이 상태; 장치의 다양한 센서들 및 입력 제어 장치들(116)로부터 얻어진 정보를 포함하는 센서 상태; 및 장치의 위치 및/또는 자세에 관한 위치 정보 중 하나 이상을 포함한다.
(다윈, RTXC, 리눅스, 유닉스, OS X, 윈도우즈, 또는 VxWorks 등의 임베디드 운영 체제와 같은) 운영 체제(126)는 (메모리 관리, 저장 장치 제어, 전력 관리 등의) 일반적인 시스템 태스크를 제어하고 관리하기 위한 다양한 소프트웨어 컴포넌트 및/또는 드라이버를 포함하고 다양한 하드웨어 및 소프트웨어 컴포넌트 사이의 통신을 가능하게 한다.
통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 장치와의 통신을 가능하게 하며, RF 회로(108) 및/또는 외부 포트(124)에 의해 수신된 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트를 또한 포함한다. (USB, 파이어와이어 등의) 외부 포트(124)는 다른 장치에 직접 결합하거나 (인터넷, 무선 LAN 등의) 네트워크를 통해 간접적으로 결합하도록 적응된다. 일부 실시예들에서, 외부 포트는 (애플 컴퓨터사의 상표인) iPod 상에서 사용되는 30핀 커넥터와 동일, 유사 및/또는 호환가능한 (예컨대 30핀의) 다중 핀 커넥터이다.
접촉/운동 모듈(130)은 (디스플레이 컨트롤러(156)와 함께) 터치 스크린(112) 및 (터치패드 또는 물리적 클릭 휠 등의) 기타 터치 감지 장치와의 접촉을 감지할 수 있다. 접촉/운동 모듈(130)은, 접촉 발생 여부를 판단하는 동작(예를 들어, 손가락 다운 이벤트의 감지), 접촉의 움직임이 있는지 여부를 판단하고 그 움직임을 터치 스크린을 따라 추적하는 동작(예를 들어, 하나 이상의 손가락 드래깅 이벤트들의 감지), 그리고 접촉 중단 여부를 판단하는 동작(예를 들어, 손가락 업 이벤트 또는 접촉 분리의 감지)과 같은, 접촉 감지와 관련된 다양한 동작을 수행하기 위한 다양한 소프트웨어 컴포넌트를 포함한다. 접촉/운동 모듈(130)은 터치 감지 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉점의 움직임을 판단하는 동작은 접촉점의 속력(크기), 속도(크기 및 방향) 및/또는 가속도(크기 및/또는 방향의 변화)를 판단하는 동작을 포함할 수 있다. 이러한 동작은 (하나의 손가락 접촉 등의) 단일 접촉에 적용되거나 ("멀티터치"/다수의 손가락 접촉 등의) 다중 동시 접촉에 적용될 수 있다. 일부 실시예들에서, 접촉/운동 모듈(130) 및 디스플레이 컨트롤러(156)는 또한 터치패드 상의 접촉을 감지한다. 일부 실시예들에서, 접촉/운동 모듈(130) 및 컨트롤러(160)는 클릭 휠 상의 접촉을 감지한다.
접촉/운동 모듈(130)은 사용자에 의한 제스처 입력을 감지할 수 있다. 터치 감지 표면 상의 상이한 제스처들은 상이한 접촉 패턴들을 갖는다. 따라서, 특정 접촉 패턴을 감지함으로써 제스처를 감지할 수 있다. 예를 들어, 손가락 탭 제스처의 감지는 손가락 다운 이벤트를 감지한 후에 (예를 들어, 아이콘의 위치에서의) 손가락 다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)에서의 손가락 업(리프트 오프) 이벤트를 감지하는 것을 포함한다. 다른 예로서, 터치 감지 표면 상에서의 손가락 스와이프 제스처의 감지는 손가락 다운 이벤트를 감지한 후에 하나 이상의 손가락 드래깅 이벤트들을 감지하고, 이어서 손가락 업(리프트 오프) 이벤트를 감지하는 것을 포함한다.
그래픽 모듈(132)은 표시된 그래픽의 밝기를 변경하기 위한 컴포넌트를 포함하는, 터치 스크린(112) 또는 기타 디스플레이 상의 그래픽을 렌더링하고 표시하기 위한 다양한 알려진 소프트웨어 컴포넌트를 포함한다. 본 명세서에 사용되는 "그래픽"이라는 용어는, 텍스트, 웹 페이지, (소프트 키를 포함하는 사용자-인터페이스 객체 등의) 아이콘, 디지털 이미지, 비디오 및 애니메이션 등을 포함하지만 이들로 한정되지 않는, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다.
일부 실시예들에서, 그래픽 모듈(132)은 사용될 그래픽을 나타내는 데이터를 저장한다. 각각의 그래픽은 대응 코드를 할당받을 수 있다. 그래픽 모듈(132)은 필요한 경우에 좌표 데이터 및 다른 그래픽 특성 데이터와 함께 표시될 그래픽을 지정하는 하나 이상의 코드들을 애플리케이션 등으로부터 수신한 후에, 디스플레이 컨트롤러(156)로 출력할 스크린 이미지 데이터를 생성한다.
그래픽 모듈(132)의 컴포넌트일 수 있는 텍스트 입력 모듈(134)은 (연락처(137), 이메일(140), IM(141), 브라우저(147) 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션 등의) 다양한 애플리케이션에 텍스트를 입력하기 위한 소프트 키보드를 제공한다.
GPS 모듈(135)은 장치의 위치를 판단하고 이 정보를 다양한 애플리케이션에서 사용할 수 있도록 제공한다(예컨대, 위치-기반 다이얼링에 사용하도록 전화(138)에 제공하고, 픽처/비디오 메타데이터로서 카메라(143)에 제공하며, 날씨 위젯, 지역 전화번호부 위젯 및 지도/내비게이션 위젯 등의 위치-기반 서비스를 제공하는 애플리케이션 등에 제공한다).
애플리케이션(136)은 이하의 모듈(또는 명령어 집합), 또는 이들의 서브세트(subset)나 수퍼세트(superset)을 포함할 수 있다.
● 연락처 모듈(137) (주로 주소록 또는 연락처 목록이라고 지칭됨);
● 전화 모듈(138);
● 비디오 회의 모듈(139);
● 이메일 클라이언트 모듈(140);
● 인스턴트 메시징(IM) 모듈(141);
● 연습 지원 모듈(142);
● 정지 및/또는 비디오 이미지를 위한 카메라 모듈(143);
● 이미지 관리 모듈(144);
● 비디오 플레이어 모듈(145);
● 음악 플레이어 모듈(146);
● 브라우저 모듈(147);
● 달력 모듈(148);
● 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5) 및 사용자가 획득한 기타 위젯, 그리고 사용자-생성 위젯(149-6) 중 하나 이상을 포함할 수 있는 위젯 모듈(149);
● 사용자-생성 위젯(149-6)을 작성하기 위한 위젯 생성기 모듈(150);
● 검색 모듈(151);
● 비디오 플레이어 모듈(145) 및 음악 플레이어 모듈(146)을 통합한 비디오 및 음악 플레이어 모듈(152);
● 노트 모듈(153);
● 지도 모듈(154); 및/또는
● 온라인 비디오 모듈(155).
메모리(102)에 저장될 수 있는 다른 애플리케이션(136)의 예로서, 기타 워드 프로세싱 애플리케이션, 기타 이미지 편집 애플리케이션, 제도 애플리케이션, 프레젠테이션 애플리케이션, JAVA-작동식 애플리케이션, 암호화, 디지털 권한 관리, 음성 인식(voice recognition) 및 음성 복제(voice replication)가 포함된다.
연락처 모듈(137)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께 주소록 또는 연락처 목록(예로서, 메모리(102) 또는 메모리(370) 내의 연락처 모듈(137)의 애플리케이션 내부 상태(192)에 저장됨)의 관리에 사용될 수 있는데, 이러한 관리에는 주소록에 이름(들)을 추가하고, 주소록으로부터 이름(들)을 삭제하며, 전화번호(들), 이메일 주소(들), 물리 주소(들) 또는 기타 정보를 이름과 연관시키고, 이름과 이미지를 연관시키며, 이름을 분류 및 정렬하고, 전화(138), 비디오 회의(139), 이메일(140) 또는 IM(141)에 의한 통신을 개시 및/또는 가능하게 하기 위한 전화번호 또는 이메일주소를 제공하는 것 등이 포함된다.
전화 모듈(138)은 RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 전화번호에 대응하는 문자열을 입력하고, 주소록(137)의 하나 이상의 전화번호를 액세스하며, 입력된 전화번호를 수정하고, 각각의 전화번호를 다이얼링하며, 대화를 수행하고, 대화 완료시 접속해제하거나 전화를 끊는데 사용될 수 있다. 이미 언급된 바와 같이, 무선 통신에는 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것이 사용될 수 있다.
비디오 회의 모듈(139)은 RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 컨트롤러(156), 광센서(164), 광센서 컨트롤러(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 목록(137) 및 전화 모듈(138)과 함께 사용자 명령에 따라 사용자와 한 명 이상의 다른 참여자 사이의 비디오 회의를 개시하고 수행하며 종료하기 실행 가능 명령어들을 포함한다.
이메일 클라이언트 모듈(140)은 RF 회로(108), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께 사용자 명령에 응답하여 이메일을 생성하고 송수신하며 관리하기 위한 실행 가능 명령어들을 포함한다. 이메일 모듈(140)은 이미지 관리 모듈(144)과 함께 카메라 모듈(143)로 획득한 정지 또는 비디오 이미지를 포함하는 이메일을 생성하고 송신하는 것을 매우 용이하게 한다.
인스턴트 메시징 모듈(141)은 RF 회로(108), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 인스턴트 메시지에 대응하는 문자열을 입력하고, 이미 입력된 문자를 수정하며, (예컨대, 전화-기반 인스턴트 메시지를 위한 SMS 또는 MMS(Multimedia Message Service) 프로토콜을 이용하거나, 인터넷-기반 인스턴트 메시지를 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 각각의 인스턴트 메시지를 송신하고, 인스턴트 메시지를 수신하며, 수신된 인스턴트 메시지를 보기 위한 실행 가능 명령어들을 포함한다. 일부 실시예들에서, 송신 및/또는 수신된 인스턴트 메시지는 그래픽, 사진, 오디오 파일, 비디오 파일, 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 기타 첨부물을 포함할 수 있다. 본 명세서에 사용되는 "인스턴트 메시징(instant messaging)"은 (SMS 또는 MMS를 사용해 송신된 메시지와 같은) 전화-기반 메시지 및 (XMPP, SIMPLE 또는 IMPS를 사용해 송신된 메시지와 같은) 인터넷-기반 메시지 양자 모두를 지칭한다.
연습 지원 모듈(142)은 RF 회로(108), 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 지도 모듈(154) 및 음악 플레이어 모듈(146)과 함께, (예로서, 시간, 거리 및/또는 칼로리 연소 목표를 갖는) 연습들을 생성하고; 연습 센서들(스포츠 장치들)과 통신하고; 연습 센서 데이터를 수신하고; 연습을 모니터링하는 데 사용되는 센서들을 조정하고; 연습을 위한 음악을 선택 및 재생하고; 연습 데이터를 표시, 저장 및 전송하기 위한 실행 가능 명령어들을 포함한다.
카메라 모듈(143)은 터치 스크린(112), 디스플레이 컨트롤러(156), 광센서(들)(164), 광센서 컨트롤러(158), 접촉 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 함께, 정지 이미지 또는 (비디오 스트림을 포함하는) 비디오를 캡처하고 이들을 메모리(102)에 저장하거나, 정지 이미지 또는 비디오의 특성을 수정하거나, 정지 이미지 또는 비디오를 메모리(102)로부터 삭제하기 위한 실행 가능 명령어들을 포함한다.
이미지 관리 모듈(144)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 함께, 정지 및/또는 비디오 이미지를 배열하고 수정(예를 들면, 편집) 또는 조작하며 라벨링하고 삭제하며 (디지털 슬라이드 쇼 또는 앨범 형태 등으로) 표시하고 저장하기 위한 실행 가능 명령어들을 포함한다.
비디오 플레이어 모듈(145)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110) 및 스피커(111)와 함께, (예컨대, 터치 스크린(112), 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에) 비디오를 표시하고 표시 또는 재생하기 위한 실행 가능 명령어들을 포함한다.
음악 플레이어 모듈(146)은 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108) 및 브라우저 모듈(147)과 함께, 사용자가 MP3 또는 AAC 파일 등의 하나 이상의 파일 포맷으로 저장된 녹음된 음악 및 기타 사운드 파일을 다운로드하고 재생할 수 있게 하기 위한 실행 가능 명령어들을 포함한다. 일부 실시예들에서, 장치(100)는 (애플 컴퓨터사의 상표인) iPod과 같은 MP3 플레이어의 기능성을 포함할 수 있다.
브라우저 모듈(147)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 웹 페이지나 그 일부 및 웹 페이지에 링크된 첨부물 및 기타 파일에 대한 검색, 링크, 수신 및 디스플레이를 포함하여, 사용자 명령에 따라 인터넷을 브라우징하기 위한 실행 가능 명령어들을 포함한다.
달력 모듈(148)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140) 및 브라우저 모듈(147)과 함께, 사용자 명령에 따라 달력 및 달력과 연관된 데이터(달력 엔트리, 할일 목록 등)를 생성하고 표시하며 저장하기 위한 실행 가능 명령어들을 포함한다.
위젯 모듈(149)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, (날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)과 같이) 사용자에 의해 다운로드되고 사용될 수 있거나, (사용자-생성 위젯(149-6)과 같이) 사용자에 의해 생성될 수 있는 미니 애플리케이션이다. 일부 실시예들에서, 위젯은 HTML 파일, CSS 파일 및 자바 스크립트 파일을 포함한다. 일부 실시예들에서, 위젯(예컨대, 야후! 위젯)은 XML 파일 및 자바 스크립트 파일을 포함한다.
위젯 생성기 모듈(150)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께 (예컨대, 웹 페이지의 사용자-지정 부분을 위젯으로 바꾸는 등으로) 위젯을 생성하는데 사용자에 의해 이용될 수 있다.
검색 모듈(151)은 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 사용자 명령에 따라 (하나 이상의 사용자-지정 검색 용어 등의) 하나 이상의 검색 조건과 매칭되는 메모리(102)의 텍스트, 음악, 사운드, 이미지, 비디오 및/또는 기타 파일을 검색하기 위한 실행 가능 명령어들을 포함한다.
노트 모듈(153)은 터치 스크린(112), 디스플레이 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 사용자 명령에 따라 노트, 할일 목록 등을 생성하고 관리하기 위한 실행 가능 명령어들을 포함한다.
지도 모듈(154)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135) 및 브라우저 모듈(147)과 함께, 사용자 명령에 따라 (예컨대, 운전 방향, 특정 위치의 또는 인접한 가게 및 기타 관련 지점에 대한 데이터, 및 기타 위치-기반 데이터 등의) 지도 관련 데이터 및 지도를 수신하고 표시하며 수정하고 저장하는데 사용될 수 있다.
온라인 비디오 모듈(155)은 터치 스크린(112), 디스플레이 시스템 컨트롤러(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140) 및 브라우저 모듈(147)과 함께, 사용자로 하여금 특정 온라인 비디오로의 링크를 갖는 이메일을 액세스하고 브라우징하며 (예컨대, 스트리밍 및/또는 다운로드를 통해) 수신하고 (예컨대, 터치 스크린, 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에서) 재생하며 송신할 수 있게 하거나, H.264 등의 하나 이상의 파일 포맷의 온라인 비디오를 관리할 수 있게 하기 위한 명령어들을 포함한다. 일부 실시예들에서, 이메일 클라이언트 모듈(140)이 아닌 인스턴트 메시징 모듈(141)이 특정 온라인 비디오에 대한 링크를 송신하는데 사용된다. 온라인 비디오 애플리케이션에 대한 부가적인 설명은, 그 내용 전체가 본 명세서에 참조문헌으로 포함되는 2007년 6월 20일 출원된 미국 특허 가출원 제60/936,562호, "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos", 및 2007년 12월 31일자로 출원된 미국 특허 출원 제11/968,067호, "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos"에서 찾아볼 수 있다.
이상 언급된 모듈 및 애플리케이션 각각은 지금까지 설명된 하나 이상의 기능 및 본원에서 설명되는 방법들(예로서, 본 명세서에서 설명되는 컴퓨터 구현 방법들 및 다른 정보 처리 방법들)을 수행하기 위한 실행 가능 명령어 집합에 대응한다. 이러한 모듈(즉, 명령어 집합)은 개별 소프트웨어 프로그램, 절차 또는 모듈로서 구현될 필요는 없으며, 다양한 실시예에서 이러한 모듈들의 다양한 서브세트가 통합되거나 재배치될 수 있다. 예컨대, 비디오 플레이어 모듈(145)은 음악 플레이어 모듈(146)과 (예컨대, 도 1b의 비디오 및 음악 플레이어 모듈(152)와 같은) 단일 모듈로 결합될 수 있다. 일부 실시예들에서, 메모리(102)는 이상 언급된 모듈 및 데이터 구조의 서브세트를 저장할 수 있다. 나아가, 메모리(102)는 지금까지 언급되지 않은 추가적인 모듈 및 데이터 구조를 저장할 수 있다.
일부 실시예들에서, 장치(100)는 터치 스크린 및/또는 터치패드를 통해서만 장치 상에서의 소정의 기능 집합의 동작이 수행되는 장치이다. 장치(100)의 동작을 위한 기본적인 입력/제어 장치로서 터치 스크린 및/또는 터치패드를 사용함으로써, 장치(100) 상의 (푸시 버튼, 다이얼 등의) 물리적 입력/제어 장치의 개수가 감소될 수 있다.
터치 스크린 및/또는 터치패드를 통해서만 수행될 수 있는 소정의 기능 집합에는 사용자 인터페이스 간의 내비게이션이 포함된다. 일부 실시예들에서, 터치패드는, 사용자가 터치하면, 장치(100) 상에 디스플레이될 수 있는 임의의 사용자 인터페이스로부터 메인 메뉴, 홈 메뉴 또는 루트 메뉴로 장치(100)를 내비게이션한다. 이러한 실시예에서, 터치패드는 "메뉴 버튼"이라고 지칭될 수 있다. 일부 다른 실시예에서, 메뉴 버튼은 터치패드 대신에 물리적 푸시 버튼 또는 기타 물리적 입력/제어 장치일 수 있다.
도 1c는 일부 실시예들에 따른 이벤트 처리를 위한 예시적인 컴포넌트들을 나타내는 블록도이다. 일부 실시예들에서, (도 1a 및 1b의) 메모리(102) 또는 (도 3의) 메모리(370)는 (예로서, 운영 체제(126) 내의) 이벤트 분류기(170) 및 각각의 애플리케이션(136-1)(예를 들어, 전술한 애플리케이션들(137-151, 155, 380-390) 중 임의 애플리케이션)을 포함한다.
이벤트 분류기(170)는 이벤트 정보를 수신하고, 이벤트 정보를 전송할 애플리케이션(136-1) 및 애플리케이션(136-1)의 애플리케이션 뷰(191)를 결정한다. 이벤트 분류기(170)는 이벤트 모니터(171) 및 이벤트 디스패처 모듈(174)을 포함한다. 일부 실시예들에서, 애플리케이션(136-1)은 애플리케이션이 활성이거나 실행되고 있을 때 터치 감지 디스플레이(112) 상에 표시된 현재 애플리케이션 뷰(들)를 지시하는 애플리케이션 내부 상태(192)를 포함한다. 일부 실시예들에서, 이벤트 분류기(170)는 장치/글로벌 내부 상태(157)를 이용하여, 어느 애플리케이션(들)이 현재 활성인지를 결정하며, 이벤트 분류기(170)는 애플리케이션 내부 상태(192)를 이용하여, 이벤트 정보를 전송할 애플리케이션 뷰들(191)을 결정한다.
일부 실시예들에서, 애플리케이션 내부 상태(192)는 애플리케이션(136-1)이 실행을 재개할 때 사용될 재개 정보, 표시되고 있는 정보를 지시하거나 애플리케이션(136-1)에 의한 표시를 위해 준비된 사용자 인터페이스 상태 정보, 사용자가 애플리케이션(136-1)의 이전 상태 또는 뷰로 돌아갈 수 있게 하기 위한 상태 큐, 및 사용자에 의해 취해진 이전 액션들의 재실행/취소 큐 중 하나 이상과 같은 추가적인 정보를 포함한다.
이벤트 모니터(171)는 주변 장치 인터페이스(118)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트(예로서, 멀티 터치 제스처의 일부인 터치 감지 디스플레이(112) 상의 사용자 터치)에 대한 정보를 포함한다. 주변 장치 인터페이스(118)는 근접 센서(166), 가속도계(들)(168) 및/또는 마이크로폰(113)(오디오 회로(110)를 통해)과 같은 I/O 서브시스템(106) 또는 센서로부터 수신하는 정보를 전송한다. 주변 장치 인터페이스(118)가 I/O 서브시스템(106)으로부터 수신하는 정보는 터치 감지 디스플레이(112) 또는 터치 감지 표면으로부터의 정보를 포함한다.
일부 실시예들에서, 이벤트 모니터(171)는 요청들을 사전 결정된 간격으로 주변 장치 인터페이스(118)로 전송한다. 이에 응답하여, 주변 장치 인터페이스(118)는 이벤트 정보를 전송한다. 다른 실시예들에서, 주변 장치 인터페이스(118)는 (예를 들어, 사전 결정된 잡음 임계치를 초과하는 그리고/또는 사전 결정된 지속 기간보다 긴 기간 동안 입력을 수신하는) 중요한 이벤트가 존재할 때만 이벤트 정보를 전송한다.
일부 실시예들에서, 이벤트 분류기(170)는 히트 뷰 결정 모듈(172) 및/또는 활성 이벤트 인식기 결정 모듈(173)도 포함한다.
히트 뷰 결정 모듈(172)은 터치 감지 디스플레이(112)가 둘 이상의 뷰를 표시할 때 하나 이상의 뷰들 내에서 서브이벤트가 어느 곳에서 발생했는지를 결정하기 위한 소프트웨어 절차들을 제공한다. 뷰들은 사용자가 디스플레이 상에서 볼 수 있는 컨트롤들 및 다른 요소들로 구성된다.
애플리케이션과 관련된 사용자 인터페이스의 다른 양태는 정보가 표시되고 터치 기반 제스처들이 발생하는, 본 명세서에서 때때로 애플리케이션 뷰들 또는 사용자 인터페이스 윈도들이라고 하는 한 세트의 뷰들이다. 터치가 감지되는 (각각의 애플리케이션)의 애플리케이션 뷰들은 애플리케이션의 프로그램 또는 뷰 계층 구조 내의 프로그램 레벨들에 대응할 수 있다. 예를 들어, 터치가 감지되는 최저 레벨 뷰는 히트 뷰로 지칭될 수 있으며, 적절한 입력들로서 인식되는 이벤트들의 세트는 터치 기반 제스처를 시작하는 최초 터치의 히트 뷰에 적어도 부분적으로 기초하여 결정될 수 있다.
히트 뷰 결정 모듈(172)은 터치 기반 제스처의 서브이벤트들에 관련된 정보를 수신한다. 애플리케이션이 계층 구조로 구성된 다수의 뷰를 가질 때, 히트 뷰 결정 모듈(172)은 히트 뷰를, 서브이벤트를 처리해야 하는 계층 구조 내의 최하위 뷰로서 식별한다. 대부분의 상황들에서, 히트 뷰는 개시 서브이벤트(즉, 이벤트 또는 잠재적 이벤트를 형성하는 서브이벤트들의 시퀀스 내의 제1 서브이벤트)가 발생하는 최저 레벨 뷰이다. 히트 뷰 결정 모듈에 의해 히트 뷰가 식별되면, 통상적으로 히트 뷰는 그가 히트 뷰로서 식별된 동일 터치 또는 입력 소스에 관련된 모든 서브이벤트들을 수신한다.
활성 이벤트 인식기 결정 모듈(173)은 뷰 계층 구조 내의 어느 뷰 또는 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는지를 결정한다. 일부 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 히트 뷰만이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 서브이벤트의 물리 위치를 포함하는 모든 뷰들이 유효하게 관련된 뷰들인 것으로 결정하고, 따라서 모든 유효하게 관련된 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 터치 서브이벤트들이 하나의 특정 뷰와 관련된 영역으로 완전히 제한되는 경우에도, 계층 구조 내의 상위 뷰들은 여전히 유효하게 관련된 뷰들로 남을 것이다.
이벤트 디스패처 모듈(174)은 이벤트 정보를 이벤트 인식기(예로서, 이벤트 인식기(180))로 디스패치한다. 활성 이벤트 인식기 결정 모듈(173)을 포함하는 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 정보를 활성 이벤트 인식기 결정 모듈(173)에 의해 결정된 이벤트 인식기로 전송한다. 일부 실시예들에서, 이벤트 디스패처 모듈(174)은 각각의 이벤트 수신기 모듈(182)에 의해 검색된 이벤트 정보를 이벤트 큐에 저장한다.
일부 실시예들에서, 운영 체제(126)는 이벤트 분류기(170)를 포함한다. 대안으로서, 애플리케이션(136-1)이 이벤트 분류기(170)를 포함한다. 또 다른 실시예들에서, 이벤트 분류기(170)는 독립 모듈이거나, 접촉/운동 모듈(130)과 같은, 메모리(102)에 저장된 다른 모듈의 일부이다.
일부 실시예들에서, 애플리케이션(136-1)은 복수의 이벤트 핸들러(190) 및 하나 이상의 애플리케이션 뷰들(191)을 포함하며, 애플리케이션 뷰들 각각은 애플리케이션의 사용자 인터페이스의 각각의 뷰 내에서 발생하는 터치 이벤트들을 처리하기 위한 명령어들을 포함한다. 애플리케이션(136-1)의 각각의 애플리케이션 뷰(191)는 하나 이상의 이벤트 인식기들(180)을 포함한다. 통상적으로, 각각의 애플리케이션 뷰(191)는 복수의 이벤트 인식기(180)를 포함한다. 다른 실시예들에서, 이벤트 인식기들(180) 중 하나 이상은 사용자 인터페이스 키트(도시되지 않음) 또는 애플리케이션(136-1)이 메소드들 및 다른 특성들을 상속받는 상위 레벨 객체와 같은 개별 모듈의 일부이다. 일부 실시예들에서, 각각의 이벤트 핸들러(190)는 데이터 갱신기(176), 객체 갱신기(177), GUI 갱신기(178), 및/또는 이벤트 분류기(170)로부터 수신된 이벤트 데이터(179) 중 하나 이상을 포함한다. 이벤트 핸들러(190)는 데이터 갱신기(176), 객체 갱신기(177) 또는 GUI 갱신기(178)를 이용하거나 호출하여 애플리케이션 내부 상태(192)를 갱신할 수 있다. 대안으로서, 애플리케이션 뷰들(191) 중 하나 이상은 하나 이상의 각각의 이벤트 핸들러들(190)을 포함한다. 또한, 일부 실시예들에서, 데이터 갱신기(176), 객체 갱신기(177) 및 GUI 갱신기(178) 중 하나 이상은 각각의 애플리케이션 뷰(191) 내에 포함된다.
각각의 이벤트 인식기(180)는 이벤트 분류기(170)로부터 이벤트 정보(예로서, 이벤트 데이터(179))를 수신하고, 이벤트 정보로부터 이벤트를 식별한다. 이벤트 인식기(180)는 이벤트 수신기(182) 및 이벤트 비교기(184)를 포함한다. 일부 실시예들에서, 이벤트 인식기(180)는 또한 메타데이터(183) 및 (서브이벤트 전송 명령어들을 포함할 수 있는) 이벤트 전송 명령어들(188)의 적어도 서브세트를 포함한다.
이벤트 수신기(182)는 이벤트 분류기(170)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트, 예컨대 터치 또는 터치 움직임에 대한 정보를 포함한다. 서브이벤트에 따라서는, 이벤트 정보는 서브이벤트의 위치와 같은 추가적인 정보도 포함한다. 서브이벤트가 터치의 움직임과 관련될 때, 이벤트 정보는 서브이벤트의 속력 및 방향도 포함할 수 있다. 일부 실시예들에서, 이벤트들은 하나의 배향으로부터 다른 배향으로의(예로서, 세로 배향으로부터 가로 배향으로의 또는 그 반대의) 장치의 회전을 포함하며, 이벤트 정보는 장치의 (장치 자세라고도 하는) 현재 배향에 대한 대응 정보를 포함한다.
이벤트 비교기(184)는 이벤트 정보를 사전 정의된 이벤트 또는 서브이벤트 정의들과 비교하고, 비교에 기초하여, 이벤트 또는 서브이벤트를 결정하거나, 이벤트 또는 서브이벤트의 상태를 결정 또는 갱신한다. 일부 실시예들에서, 이벤트 비교기(184)는 이벤트 정의들(186)을 포함한다. 이벤트 정의들(186)은 이벤트들(예로서, 사전 정의된 서브이벤트들의 시퀀스들), 예로서 이벤트 1(187-1), 이벤트 2(187-2) 등의 정의들을 포함한다. 일부 실시예들에서, 이벤트(187) 내의 서브이벤트들은 예를 들어 터치 시작, 터치 종료, 터치 움직임, 터치 취소 및 다수의 터칭을 포함한다. 일례에서, 이벤트 1(187-1)에 대한 정의는 표시된 객체 상의 더블 탭이다. 더블 탭은 예를 들어 사전 결정된 단계 동안의 표시 객체 상의 제1 터치(터치 시작), 사전 결정된 단계 동안의 제1 리프트-오프(터치 종료), 사전 결정된 단계 동안의 표시 객체 상의 제2 터치(터치 시작) 및 사전 결정된 단계 동안의 제2 리프트 오프(터치 종료)를 포함한다. 다른 예에서, 이벤트 2(187-2)에 대한 정의는 표시 객체 상에서의 드래깅이다. 드래깅은 예를 들어 사전 결정된 단계 동안의 표시 객체 상의 터치(또는 접촉), 터치 감지 디스플레이(112)를 가로지르는 터치의 이동, 및 터치의 리프트 오프(터치 종료)를 포함한다. 일부 실시예들에서, 이벤트는 하나 이상의 관련 이벤트 핸들러들(190)에 대한 정보도 포함한다.
일부 실시예들에서, 이벤트 정의(187)는 각각의 사용자 인터페이스 객체에 대한 이벤트의 정의를 포함한다. 일부 실시예들에서, 이벤트 비교기(184)는 히트 테스트를 수행하여, 어느 사용자 인터페이스 객체가 서브이벤트와 관련되는지를 결정한다. 예를 들어, 터치 감지 디스플레이(112) 상에 3개의 사용자 인터페이스 객체가 표시되는 애플리케이션 뷰에서, 터치 감지 디스플레이(112) 상에서 터치가 감지될 때, 이벤트 비교기(184)는 히트 테스트를 수행하여, 3개의 사용자 인터페이스 객체 중 어느 것이 터치(서브이벤트)와 관련되는지를 결정한다. 각각의 표시 객체가 각각의 핸들러 이벤트(190)와 관련되는 경우, 이벤트 비교기는 히트 테스트의 결과를 이용하여, 어느 이벤트 핸들러(190)가 활성화되어야 하는지를 결정한다. 예를 들어, 이벤트 비교기(184)는 히트 테스트를 트리거링하는 서브이벤트 및 객체와 관련된 이벤트 핸들러를 선택한다.
일부 실시예들에서, 각각의 이벤트(187)에 대한 정의는 서브이벤트들의 시퀀스가 이벤트 인식기의 이벤트 타입에 대응하는지의 여부가 결정된 후까지 이벤트 정보의 전송을 지연시키는 지연된 액션들도 포함한다.
각각의 이벤트 인식기(180)가 일련의 서브이벤트가 이벤트 정의들(186) 내의 이벤트들 중 어느 것과도 매칭되지 않는 것으로 결정할 때, 각각의 이벤트 인식기(180)는 이벤트 불가능, 이벤트 실패 또는 이벤트 종료 상태에 들어가고, 이어서 터치 기반 제스처의 후속 서브이벤트들을 무시한다. 이러한 상황에서, 존재할 경우, 히트 뷰에 대해 활성 상태를 유지하는 다른 이벤트 인식기들은 진행중인 터치 기반 제스처의 서브이벤트들을 계속 추적하고 처리한다.
일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트 전송 시스템이 어떻게 유효하게 관련된 이벤트 인식기들로의 서브이벤트 전송을 수행해야 하는지를 지시하는 구성 가능한 특성들, 플래그들 및/또는 목록들을 갖는 메타데이터(183)를 포함한다. 일부 실시예들에서, 메타데이터(183)는 이벤트 인식기들이 어떻게 서로 상호작용할 수 있는지를 지시하는 구성 가능한 특성들, 플래그들 및/또는 목록들을 포함한다. 일부 실시예들에서, 메타데이터(183)는 서브이벤트들이 뷰 또는 프로그램 계층 구조 내의 다양한 레벨들로 전송되는지의 여부를 지시하는 구성 가능한 특성들, 플래그들 및/또는 목록들을 포함한다.
일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트의 하나 이상의 특정 서브이벤트들이 인식될 때 이벤트와 관련된 이벤트 핸들러(190)를 활성화한다. 일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트와 관련된 이벤트 정보를 이벤트 핸들러(190)로 전송한다. 이벤트 핸들러(190)의 활성화는 서브이벤트들의 각각의 히트 뷰로의 전송(및 디폴트 전송)과 다르다. 일부 실시예들에서, 이벤트 인식기(180)는 인식된 이벤트와 관련된 플래그를 던지며, 플래그와 관련된 이벤트 핸들러(190)는 플래그를 받아서, 사전 정의된 프로세스를 수행한다.
일부 실시예들에서, 이벤트 전송 명령어들(188)은 이벤트 핸들러를 활성화하지 않고 서브이벤트에 대한 이벤트 정보를 전송하는 서브이벤트 전송 명령어들을 포함한다. 대신에, 서브이벤트 전송 명령어들은 이벤트 정보를 일련의 서브이벤트들과 관련되거나 유효하게 관련된 뷰들과 관련된 이벤트 핸들러들로 전송한다. 일련의 서브이벤트들과 또는 유효하게 관련된 뷰들과 관련된 이벤트 핸들러들은 이벤트 정보를 수신하고, 사전 결정된 프로세스를 수행한다.
일부 실시예들에서, 데이터 갱신기(176)는 애플리케이션(136-1)에서 사용되는 데이터를 생성하고 갱신한다. 예컨대, 데이터 갱신기(176)는 연락처 모듈(137)에서 사용되는 전화 번호를 갱신하거나, 비디오 플레이어 모듈(145)에서 사용되는 비디오 파일을 저장한다. 일부 실시예들에서, 객체 갱신기(177)는 애플리케이션(136-1)에서 사용되는 객체들을 생성하고 갱신한다. 예컨대, 객체 갱신기(176)는 새로운 사용자 인터페이스 객체를 생성하거나, 사용자 인터페이스 객체의 위치를 갱신한다. GUI 갱신기(178)는 GUI를 갱신한다. 예를 들어, GUI 갱신기(178)는 디스플레이 정보를 준비하고, 이를 터치 감지 디스플레이 상의 표시를 위해 그래픽 모듈(132)로 전송한다.
일부 실시예들에서, 이벤트 핸들러(들)(190)는 데이터 갱신기(176), 객체 갱신기(177) 및 GUI 갱신기(178)를 포함하거나, 이들에 대한 액세스를 갖는다. 일부 실시예들에서, 데이터 갱신기(176), 객체 갱신기(177) 및 GUI 갱신기(178)는 각각의 애플리케이션(136-1) 또는 애플리케이션 뷰(191)의 단일 모듈 내에 포함된다. 다른 실시예들에서, 이들은 2개 이상의 소프트웨어 모듈 내에 포함된다.
터치 감지 디스플레이들 상의 사용자 터치들의 이벤트 처리에 관한 위의 설명은 입력 장치들을 갖는 다기능 장치들(100)을 조작하기 위한 다른 형태의 사용자 입력들에도 적용된다는 것을 이해해야 하고, 이러한 사용자 입력들은 그 모두가 터치 스크린들 상에서 개시되는 것은 아니며, 이들은 예를 들어 단일 또는 다수의 키보드 누름 또는 유지가 있거나 없는 상태에서의 마우스 움직임 및 마우스 버튼 누름의 조정, 터치패드들 상에서의 사용자 움직임 탭, 드래그, 스크롤 등, 펜 스타일러스 입력, 장치의 움직임, 구두 명령, 눈 움직임 감지, 생체학적 입력 및/또는 이들의 조합을 포함하며, 인식될 이벤트를 정의하는 서브이벤트들에 대응하는 입력들로서 사용될 수 있다.
도 2는 일부 실시예들에 따른 터치 스크린(112)을 구비한 휴대용 다기능 장치(100)를 도시한다. 터치 스크린은 사용자 인터페이스(UI)(200) 내에 하나 이상의 그래픽을 표시할 수 있다. 본 실시예 및 이하 기술되는 다른 실시예에서, 사용자는 예컨대 하나 이상의 손가락(202)(도면에는 축척에 맞게 도시되지 않음) 또는 하나 이상의 스타일러스(203)(도면에는 축척에 맞게 도시되지 않음)를 이용해 그래픽을 터치하거나 접촉함으로써 그래픽들 중 하나 이상을 선택할 수 있다. 일부 실시예들에서, 사용자가 하나 이상의 그래픽과의 접촉을 해제하면 그 하나 이상의 그래픽에 대한 선택이 이루어진다. 일부 실시예들에서, 접촉은 장치(100)와 접촉된 손가락의 (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 롤링(rolling), (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 하나 이상의 스와이프(swipe) 및/또는 하나 이상의 탭(tap)과 같은 제스처를 포함할 수 있다. 일부 실시예들에서, 그래픽과의 우연한 접촉에 의해서는 그 그래픽이 선택되지 않을 수 있다. 예컨대, 선택에 대응하는 제스처가 탭일 경우 애플리케이션 아이콘 상을 지나가는 스와이프 제스처에 의해서는 해당 애플리케이션이 선택되지 않을 수 있다.
장치(100)는 또한 "홈" 또는 메뉴 버튼(204) 등의 하나 이상의 물리적 버튼을 포함할 수 있다. 이미 설명된 바와 같이, 메뉴 버튼(204)은 장치(100) 상에서 실행될 수 있는 애플리케이션 집합 중 임의의 애플리케이션(136)으로 내비게이션하는데 사용될 수 있다. 또는, 일부 실시예들에서, 메뉴 버튼은 터치 스크린(112)의 GUI의 소프트 키로서 구현된다.
일 실시예에서, 장치(100)는 터치 스크린(112), 메뉴 버튼(204), 장치의 전원을 온/오프하고 장치를 잠그기 위한 푸시 버튼(206), 볼륨 조정 버튼(208), 가입자 식별 모듈(SIM) 카드 슬롯(210), 헤드셋 잭(212) 및 도킹/충전용 외부 포트(124)를 포함한다. 푸시 버튼(206)은, 버튼을 눌러 소정의 시간 동안 버튼을 눌러진 상태로 유지시키는 것을 통한 장치 상의 전원의 턴온/턴오프; 버튼을 눌러 소정의 시간이 경과하기 전에 버튼을 릴리즈하는 것을 통한 장치 잠금; 및/또는 잠금해제 프로세스의 개시나 장치 잠금해제에 사용될 수 있다. 다른 실시예에서, 장치(100)는 또한 마이크로폰(113)을 통하여 일부 기능의 활성화 또는 비활성화를 위한 구두 입력(verbal input)을 받아들일 수 있다.
도 3은 일부 실시예들에 따른 디스플레이 및 터치 감지 표면을 갖는 예시적인 다기능 장치의 블록도이다. 장치(300)는 휴대용일 필요는 없다. 일부 실시예들에서, 장치(300)는 랩탑 컴퓨터, 데스크탑 컴퓨터, 태블릿 컴퓨터, 멀티미디어 플레이어 장치, 내비게이션 장치, 교육용 장치(어린이 학습 완구 등), 게이밍 시스템 또는 제어 장치(예로서, 홈 또는 산업용 컨트롤러)이다. 통상적으로, 장치(300)는 하나 이상의 처리 유닛(CPU)(310), 하나 이상의 네트워크 또는 기타 통신 인터페이스(360), 메모리(370), 및 이러한 컴포넌트들을 상호접속하기 위한 하나 이상의 통신 버스(320)를 포함한다. 통신 버스들(320)은 시스템 컴포넌트들을 상호접속하고 이들 간의 통신을 제어하는 회로(때로는 칩셋이라 한다)를 포함할 수 있다. 장치(300)는 통상적으로 터치 스크린 디스플레이인 디스플레이(340)를 포함하는 입출력(I/O) 인터페이스(330)를 포함한다. I/O 인터페이스(330)는 키보드 및/또는 마우스(또는 다른 포인팅 장치)(350) 및 터치패드(355)도 포함할 수 있다. 메모리(370)는 DRAM, SRAM, DDR RAM 또는 다른 랜덤 액세스 반도체 메모리 장치들과 같은 고속 랜덤 액세스 메모리를 포함하며, 하나 이상의 자기 디스크 저장 장치, 광 디스크 저장 장치, 플래시 메모리 장치 또는 다른 비휘발성 반도체 저장 장치들과 같은 비휘발성 메모리를 포함할 수 있다. 메모리(370)는 옵션으로서 CPU(들)(310)로부터 원격 위치하는 하나 이상의 저장 장치를 포함할 수 있다. 일부 실시예들에서, 메모리(370)는 휴대용 다기능 장치(100)(도 1)의 메모리(102)에 저장된 프로그램들, 모듈들 및 데이터 구조들과 유사한 프로그램들, 모듈들 및 데이터 구조들 또는 이들의 서브세트를 저장한다. 더구나, 메모리(370)는 휴대용 다기능 장치(100)의 메모리(102) 내에 존재하지 않는 추가적인 프로그램들, 모듈들 및 데이터 구조들을 저장할 수 있다. 예를 들어, 장치(300)의 메모리(370)는 제도 모듈(380), 프레젠테이션 모듈(382), 워드 프로세싱 모듈(384), 웹사이트 생성 모듈(386), 디스크 저작 모듈(388) 및/또는 스프레드시트 모듈(390)을 저장할 수 있는 반면, 휴대용 다기능 장치(100)(도 1)의 메모리(102)는 이러한 모듈들을 저장하지 않을 수 있다.
도 3의 전술한 요소들 각각은 전술한 하나 이상의 메모리 장치들에 저장될 수 있다. 전술한 모듈들 각각은 전술한 기능을 수행하기 위한 명령어들의 세트에 대응한다. 전술한 모듈들 또는 프로그램들(즉, 명령어 세트들)은 개별 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요는 없으며, 따라서 다양한 실시예들에서는 이러한 모듈들의 다양한 서브세트들이 결합되거나 재배열될 수 있다. 일부 실시예들에서, 메모리(370)는 전술한 모듈들 및 데이터 구조들의 서브세트를 저장할 수 있다. 더구나, 메모리(370)는 전술한 추가적인 모듈들 및 데이터 구조들을 저장할 수 있다.
이하, 휴대용 다기능 장치(100) 상에 구현될 수 있는 사용자 인터페이스(UI)의 실시예에 대하여 설명한다.
도 4a 및 4b는 일부 실시예들에 따른 휴대용 다기능 장치(100) 상의 애플리케이션 메뉴를 위한 예시적인 사용자 인터페이스를 도시한다. 유사한 사용자 인터페이스들이 장치(300) 상에 구현될 수 있다. 일부 실시예들에서, 사용자 인터페이스(400A)는 이하의 구성요소, 또는 이들의 서브세트나 수퍼세트를 포함할 수 있다.
● 셀룰러 신호 및 Wi-Fi 신호 등의 무선 통신을 위한 신호 강도 표시자(402);
● 시간(404);
● 블루투스 표시자(405);
● 배터리 상태 표시자(406);
● 이하의 애플리케이션들과 같은 자주 사용되는 애플리케이션을 위한 아이콘을 포함한 트레이(408); 및
○ 부재중 전화 또는 음성메일 메시지 개수에 대한 표시자(414)를 포함할 수 있는 전화(138),
○ 읽지 않은 이메일 개수에 대한 표시자(410)를 포함할 수 있는 이메일 클라이언트(140),
○ 브라우저(147), 및
○ 음악 플레이어(146)
● 이하의 애플리케이션들과 같은 다른 애플리케이션을 위한 아이콘
○ IM(141),
○ 이미지 관리(144),
○ 카메라(143),
○ 비디오 플레이어(145),
○ 날씨(149-1),
○ 주식(149-2),
○ 연습 지원(142),
○ 달력(148),
○ 계산기(149-3),
○ 알람 시계(149-4),
○ 사전(149-5), 및
○ 사용자-생성 위젯(149-6).
일부 실시예들에서, 사용자 인터페이스(400B)는 이하의 구성요소, 또는 이들의 서브세트나 수퍼세트를 포함할 수 있다.
● 상기 언급된 것과 같은 구성요소들(402, 404, 405, 406, 141, 148, 144, 143, 149-3, 149-2, 149-1, 149-4, 410, 414, 138, 140 및 147);
● 지도(154);
● 노트(153);
● 추후 상세히 설명되는 바와 같이, 장치(100) 및 그것의 다양한 애플리케이션(136)을 위한 설정에 대한 액세스를 제공하는 설정(412);
● (애플 컴퓨터사의 상표인) iPod 모듈(152)이라고도 지칭되는 비디오 및 음악 플레이어 모듈(152); 및
● (구글사의 상표인) YouTube 모듈(155)이라고도 지칭되는 온라인 비디오 모듈(155).
도 4c는 디스플레이(450)(예로서, 터치 스크린 디스플레이(112))와 분리된 터치 감지 표면(451)(예로서, 태블릿 또는 터치패드(355), 도 3)을 갖는 장치(예로서, 장치(300), 도 3) 상의 예시적인 사용자 인터페이스를 나타낸다. 이어지는 예들 중 다수가 (터치 감지 표면과 디스플레이를 결합한) 터치 스크린 디스플레이(112) 상에서의 입력들과 관련하여 주어지지만, 일부 실시예들에서, 장치는 도 4c에 도시된 바와 같이 디스플레이로부터 떨어진 터치 감지 표면 상의 입력들을 감지한다. 일부 실시예들에서, 터치 감지 표면(예로서, 도 4c의 451)은 디스플레이(예로서, 450) 상의 주축(예로서 도 4c의 453)에 대응하는 주축(예로서, 도 4c의 452)을 갖는다. 이러한 실시예들에 따르면, 장치는 디스플레이 상의 각각의 위치들에 대응하는 위치들(예로서, 도 4c에서 460은 468에 대응하고, 462는 470에 대응함)에서 터치 감지 표면(451)과의 접촉들(예로서, 도 4c의 460, 462)을 감지한다. 이러한 방식으로, 터치 감지 표면(예로서, 도 4c의 451) 상에서 장치에 의해 감지된 사용자 입력들(예로서, 접촉들(460, 462) 및 그의 이동들)은 터치 감지 표면이 디스플레이로부터 떨어져 있을 때 다기능 장치의 디스플레이(예로서, 도 4c의 450) 상의 사용자 인터페이스를 조작하기 위해 장치에 의해 사용된다. 본 명세서에서 설명되는 다른 사용자 인터페이스들에 대해 유사한 방법들이 이용될 수 있다는 것을 이해해야 한다.
게다가, 아래의 예들은 주로 손가락 입력들(예로서, 손가락 접촉들, 손가락 탭 제스처들, 손가락 스와이프 제스처들)과 관련하여 주어지지만, 일부 실시예들에서는 손가락 입력들 중 하나 이상이 다른 입력 장치로부터의 입력(예로서, 마우스 기반 입력 또는 스타일러스 입력)으로 대체된다는 것을 이해해야 한다. 예를 들어, 스와이프 제스처는 (예를 들어, 접촉 대신에) 마우스 클릭에 이어지는 (예를 들어, 접촉의 이동 대신에) 스와이프의 경로를 따르는 커서의 이동으로 대체될 수 있다. 다른 예로서, 탭 제스처는 (예를 들어, 접촉의 검출에 이어지는 접촉 검출의 중단 대신에) 탭 제스처의 위치 위에 커서를 배치한 동안의 마우스 클릭으로 대체될 수 있다. 유사하게, 다수의 사용자 입력이 동시에 검출될 때, 다수의 컴퓨터 마우스가 동시에 사용될 수 있거나, 키보드 또는 손가락 접촉들이 동시에 사용될 수 있다는 것을 이해해야 한다.
아래에 제공되는 설명에서, "접촉"이라는 용어는 (연락처 목록, 주소록 등에서의 엔트리를 설명하는 데 사용될 때를 제외하고) "터치 제스처"에 대한 속기 용어로서 사용되며, 따라서 아래에 언급되거나 설명되는 각각의 접촉은 터치 감지 디스플레이 또는 다른 터치 감지 표면의 센서(또는 센서들의 세트)에 의해 감지되는 임의의 적절한 터치 제스처일 수 있다. 유사하게, 아래에서 언급되거나 설명되는 각각의 "손가락 탭"은 임의의 적절한 터치 제스처일 수 있다. 더구나, 일부 실시예들에서, "터치 제스처들"은 터치 감지 스크린(112) 또는 다른 터치 감지 표면과 물리적으로 접촉하는 하나 이상의 손가락 또는 하나 이상의 스타일러스에 의해 이루어지는 제스처들만이 아니라, 터치 감지 스크린(112) 또는 다른 터치 감지 표면에 충분히 가까운 곳에서 전체적으로 또는 부분적으로 발생하는 제스처들도 포함하며, 따라서 터치 감지 스크린(112) 또는 다른 터치 감지 표면의 하나 이상의 센서들은 그러한 제스처들을 감지할 수 있다.
이제, 장치(300) 또는 휴대용 다기능 장치(100)와 같이 디스플레이 및 터치 감지 표면을 갖는 다기능 장치 상에서 구현될 수 있는 사용자 인터페이스들("UI") 및 관련 프로세스들의 실시예들을 설명한다.
아래의 사용자 인터페이스들은 주로 디지털 콘텐츠 관리 애플리케이션(예로서, iTunes)에 대해 예시되지만, 다수의 뷰잉 영역을 포함하거나 이들로부터 이익을 얻을 수 있는 다른 애플리케이션들에서 유사한 사용자 인터페이스들이 구현될 수 있다는 것을 이해해야 한다. 예를 들어, 그러한 애플리케이션들은 웹 브라우저(예로서, Safari); 파일 관리 프로그램(예로서, 캘리포니아, 쿠퍼티노의 애플사로부터의 Finder); 이미지 관리 애플리케이션(예로서, 캘리포니아, 쿠퍼티노의 애플사로부터의 Aperture 또는 iPhoto); 프레젠테이션 애플리케이션((예로서, 캘리포니아, 쿠퍼티노의 애플사로부터의 Keynote); 또는 전자 문서 판독기 애플리케이션(예로서, PDF(portable document format) 파일 판독기)을 포함한다.
도 5a-5jjj는 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션하기 위한 예시적인 사용자 인터페이스들을 나타낸다. 이 도면들 내의 사용자 인터페이스들은 도 6a-6e, 7 및 8의 프로세스들을 포함하는 후술하는 프로세스들을 설명하는 데 사용된다.
도 5a-5jjj에서, 일부 손가락 접촉 이동 크기들은 예시의 목적으로 과장될 수 있다. 손가락 접촉 이동들에 관한 도면들 내의 어떠한 묘사도 본 명세서에서 개시되는 방법 및 장치들과 관련된 크기들 및 스케일을 이해하기 위한 요구 또는 제한으로 간주되지 않아야 한다.
도 5a는 다기능 장치(100)의 터치 스크린(112) 상에 디지털 콘텐츠 관리 애플리케이션(예로서, iTunes; 도 3의 디지털 콘텐츠 관리 애플리케이션(390))에 대한 제1 뷰잉 영역(520)을 표시하는 예시적인 사용자 인터페이스를 나타낸다. 이 예에서, 제1 뷰잉 영역(520)은 영화들을 위한 온라인 멀티미디어 스토어를 포함한다. 제1 뷰잉 영역(520)은 다음의 요소들 또는 이들의 서브세트 또는 수퍼세트를 포함할 수 있다.
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 멀티미디어 콘텐츠(예로서, 영화들)의 각각의 장르에 대한 메뉴 아이템들의 표시를 개시하는 장르 메뉴(508);
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 특집 멀티미디어 콘텐츠(예로서, 영화들)의 표시를 개시하는 특집 메뉴(510);
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 가장 인기 있는 멀티미디어 콘텐츠(예로서, 영화들)의 표시를 개시하는 톱 차트 메뉴(512);
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 멀티미디어 콘텐츠 검색을 위한 검색 용어들의 수신을 개시하는 검색 용어 입력 영역(514)(예를 들어, 음악의 경우, 예시적인 검색 용어들은 노래 제목, 앨범 제목, 아티스트 또는 그룹 멤버들 등이고; 영화의 경우, 예시적인 검색 용어들은 영화 제목, 배역, 감독, 시놉시스 내의 키워드들 등일 수 있다);
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 다른 제2 뷰잉 영역 내에 영화 제목에 대한 추가 정보의 표시를 개시하는 영화 제목(516); 영화 제목(516)은 사전 정의된 기준들에 기초하여 선택된 멀티미디어 콘텐츠의 제목을 포함하고; 옵션으로서, 영화 제목(516)은 선택된 멀티미디어 콘텐츠와 관련된 이미지, 음악 파일 또는 영화 파일(예로서, QuickTime 파일)을 포함하고; 일부 실시예들에서, 사전 정의된 기준들은 장르, 특집 멀티미디어 콘텐츠 및 인기도를 포함하고; 다른 실시예들에서, 사전 정의된 기준들은 검색 용어 입력 영역(514)에서 수신된 검색 용어들을 포함함;
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 다른 뷰잉 영역에 각각의 영화에 대한 추가 정보의 표시를 개시하는 영화 제목 아이콘들(518-1, 518-2, 518-3, 518-4, 518-5, 518-6); 영화 제목 아이콘들(518)은 사전 정의된 기준들에 기초하여 선택된 멀티미디어 콘텐츠의 제목들을 포함함;
● (예로서, 아이콘 상의 손가락 탭에 의해) 활성화될 때, 제1 뷰잉 영역(520)에 멀티미디어의 각각의 타입을 위한 온라인 멀티미디어 스토어의 표시를 개시하는 멀티미디어 타입 아이콘들(530)(예로서, 음악(530-1), 영화(530-2), tv 쇼(530-3), 책(530-4), 라디오(530-5), iTunes U와 같은 교육 콘텐츠(530-6), 팟캐스트(530-7)); 예를 들어, 음악(530-1)이 활성화될 때, 제1 뷰잉 영역(520)은 음악을 위한 온라인 멀티미디어 스토어를 표시하고, 유사하게 책(530-4)이 활성화될 때, 제1 뷰잉 영역(520)은 책을 위한 온라인 멀티미디어 스토어를 표시함;
● 사용자들이 영화 제목들을 통해 스크롤링할 수 있게 하는 스크롤 버튼들(544, 546, 548, 550). 좌측 스크롤 버튼들(544, 546)은 영화 제목 아이콘들(518)의 어레이를 통해 좌측으로 스크롤링하는 데 사용된다. 우측 스크롤 버튼들(548, 550)은 영화 제목 아이콘들(518)의 어레이를 통해 우측으로 스크롤링하는 데 사용된다.
도 5a에 도시된 예시적인 사용자 인터페이스는 또한 (Wi-Fi, EDGE 또는 3G에 대한 신호와 같은 무선 통신 신호의 강도를 지시하는) 신호 강도(502), 현재 시간(504) 및 배터리 전력 지시자(506)를 포함한다.
도 5a는 또한 터치 스크린(112) 상의 접촉(505)의 검출을 나타낸다. 이 예에서는, 영화 제목 아이콘(518-2)의 위치에 대응하는 터치 스크린(112) 상의 위치(505-A)에서 접촉(505)이 검출된다.
도 5b는 제1 뷰잉 영역(520)의 일부 위에 제2 뷰잉 영역(552-1)을 오버레이하는 한편, 제1 뷰잉 영역(520)의 나머지 부분을 표시하는 것을 나타낸다. 일부 실시예들에서, 제2 뷰잉 영역(552-1)은 애니메이션과 함께 터치 스크린(112) 상에 나타난다. 일부 실시예들에서, 애니메이션은 제2 뷰잉 영역(552-1)의 동시적인 줌인 및 플립핑(flipping) 동작을 포함한다.
도 5b에서, 제1 뷰잉 영역(520)의 나머지 부분은 반강조(deemphasizing)된다. 이 예에서, 제1 뷰잉 영역(520)의 나머지 부분은 쉐이딩(shading), 페이딩(fading), 그레이잉 아웃(graying-out) 및/또는 디밍(dimming)에 의해 반강조된다.
도 5b에서, 제2 뷰잉 영역(552-1)은 정적 콘텐츠, 선택 가능 객체들 및 스크롤링 가능 서브뷰(558-1)를 포함한다. 정적 콘텐츠는 선택 가능하지도 스크롤링 가능하지도 않다. 이 예에서, 정적 콘텐츠는 (영화와 관련된 이미지를 포함할 수 있는) 정보 박스(556-1) 및 영화 제목(554-1)을 포함한다. 영화 제목(554-1)은 영화 제목 아이콘(518-2)(도 5a)에 대응한다. 일부 실시예들에서, 정보 박스(556-1) 및 영화 제목(554-1)은 선택 가능 객체들이다. 이 예에서, 스크롤링 가능 서브뷰(558-1)는 줄거리 요약 및 영화 크레디트를 포함한다. 일부 실시예들에서, 스크롤링 가능 서브뷰(558-1)는 정적 콘텐츠 및/또는 선택 가능 객체들을 포함할 수 있다.
도 5b는 또한 스크롤링 가능 서브뷰(558-1) 상의 접촉(507-A) 및 터치 스크린(112)을 가로지르는 접촉(507-A)의 이동의 검출을 나타낸다.
도 5c는 접촉(507)이 터치 스크린(112) 상의 위치(507-B)로 이동하였음을 나타낸다. 도 5c는 또한 스크롤링 가능 서브뷰(558-1)가 접촉(507)의 이동에 따라 스크롤링되는 것을 나타낸다. 스크롤 동안, 스크롤링 가능 서브뷰(558-1)는 스크롤링 가능 서브뷰(558-1) 내에 표시될 수 있는 전체 콘텐츠 내의 표시된 콘텐츠의 상대적 위치를 나타내기 위한 스크롤 지시자(560-1)를 포함한다. 스크롤링 후, 스크롤링 가능 서브뷰(558-1)는 고객 평점 및 논평, 및 관련 영화 제목들(562-1, 562-2, 562-3, 562-4, 562-5)(예를 들어, 다른 뷰어들도 구매한 영화 제목들)에 대한 아이콘들을 포함하는 추가 정보를 표시한다.
도 5d는 접촉(507)의 리프트-오프(lift-off) 후의 제2 뷰잉 영역(552-1)을 나타낸다. 접촉(507)의 리프트 오프의 검출에 응답하여, 스크롤링 가능 서브뷰(558-1)는 스크롤링을 중단하고, (도 5c에서) 스크롤 지시자(560-1)의 표시가 중단된다.
도 5e에서, 영화 제목 아이콘(562-3)에 대응하는 위치에서 접촉(509)이 검출된다.
도 5f-5h는 제1 뷰잉 영역(520)의 일부 위에 제3 뷰잉 영역(552-2)을 오버레이하는 것을 나타낸다. 제3 뷰잉 영역(552-2)은 터치 스크린(112)의 우측 에지로부터 슬라이드 인(slide in)된다. 제3 뷰잉 영역(552-2)이 슬라이드 인되는 동안, 제2 뷰잉 영역(552-1)은 터치 스크린(112)의 좌측 에지로 슬라이드된다. 제1 뷰잉 영역(520)의 나머지 부분의 표시가 유지된다.
도 5g에서, 제2 및 제3 뷰잉 영역들(552-1 및 552-2 각각)은 애니메이션 동안 계속 슬라이드된다. 도 5h는 슬라이딩 애니메이션의 완료를 나타낸다. 슬라이딩 애니메이션의 완료 후, 제2 뷰잉 영역(552-1)의 일부는 터치 스크린(112) 밖으로 이동하였고, 제2 뷰잉 영역(552-1)의 일부는 터치 스크린(112) 상에 유지된다.
도 5i는 제1 뷰잉 영역(520)의 일부 위에 제3 뷰잉 영역(552-2)을 오버레이하는 한편, 제1 뷰잉 영역(520)의 나머지 부분을 표시하는 것을 나타낸다. 도 5b와 관련하여 설명된 바와 같이, 제1 뷰잉 영역(520)의 나머지 부분은 반강조된다. 도 5b의 제2 뷰잉 영역(552-1)과 같이, 제3 뷰잉 영역(552-2)도 정적 콘텐츠, 선택 가능 객체들 및 스크롤링 가능 서브뷰(558-2)를 포함한다. 정보 박스(556-2) 및 영화 제목(554-2)은 (도 5e의) 영화 제목 아이콘(562-3)에 대응한다.
도 5i는 또한 스크롤링 가능 서브뷰(558-2) 상의 접촉(511-A) 및 터치 스크린(112)을 가로지르는 접촉(511-A)의 이동의 검출을 나타낸다.
도 5j는 접촉(511)이 터치 스크린(112) 상의 위치(511-B)로 이동한 것을 나타낸다. 도 5j에서, 스크롤링 가능 서브뷰(558-2)는 도 5b 및 5c를 참조하여 전술한 바와 같은 서브뷰(558-1)와 유사한 방식으로 스크롤링된다. 스크롤링 후, 스크롤링 가능 서브뷰(558-2)는 관련 영화 제목들에 대한 아이콘들(562-6, 562-7, 562-8, 562-9, 562-10)을 포함하는 추가 정보를 표시한다.
도 5k에서, 영화 제목 아이콘(562-9)에 대응하는 위치에서 접촉(513)이 검출된다.
도 5l-5n은 제1 뷰잉 영역(520)의 일부 위에 제4 뷰잉 영역(552-3)을 오버레이하는 것을 나타낸다. 제4 뷰잉 영역(552-3)은 터치 스크린(112)의 우측 에지로부터 슬라이드 인한다. 제4 뷰잉 영역(552-3)이 슬라이드 인하는 동안, 제3 뷰잉 영역(552-2)은 터치 스크린(112)의 좌측 에지로 슬라이드한다. 제2 뷰잉 영역(552-1)은 터치 스크린(112)의 좌측 에지 밖으로 슬라이드하고, 표시가 중단된다. 제1 뷰잉 영역(520)의 나머지 부분의 표시는 유지된다.
도 5m에서, 제3 및 제4 뷰잉 영역들(552-2, 552-3)은 애니메이션 동안 계속 슬라이드한다. 도 5n은 슬라이딩 애니메이션의 완료를 나타낸다. 슬라이딩 애니메이션의 완료 후, 제3 뷰잉 영역(552-2)의 일부는 터치 스크린(112) 밖으로 이동하였고, 제3 뷰잉 영역(552-2)의 일부는 터치 스크린(112) 상에 남는다.
도 5o-5r은 일부 실시예들에 따른 역방향 추적 동작을 나타낸다. 도 5o는 디스플레이(112) 상에 남은 제3 뷰잉 영역(552-2)의 일부에 대응하는 위치에서의 접촉(515-A)의 검출을 나타낸다. 일부 실시예들에서, 제3 뷰잉 영역(552-2)에 대응하는 위치에서 스와이프 제스처(515-A')가 검출된다.
도 5p에서, 접촉(515-A) 또는 스와이프 제스처(515-A')의 검출에 응답하여, 제3 및 제4 뷰잉 영역들(552-2 및 552-3 각각)은 터치 스크린(112)의 우측 에지를 향해 슬라이드한다. 도 5q는 일부 실시예들에 따른 슬라이딩 애니메이션의 완료를 나타낸다. 도 5q에서, 제4 뷰잉 영역(552-3)은 터치 스크린(112)의 우측 에지 밖으로 이동하고, 표시가 중단된다. 제2 뷰잉 영역(552-1)의 일부가 터치 스크린(112)의 좌측 에지로부터 슬라이드 인된다. 도 5r은 대안 실시예들에 따른 슬라이딩 애니메이션의 완료를 나타낸다. 도 5r에서, 제4 뷰잉 영역(552-3)의 일부가 터치 스크린(112)의 밖으로 이동하였고, 제4 뷰잉 영역(552-3)의 일부가 터치 스크린(112) 상에 남는다.
도 5s-5u는 일부 실시예들에 따른 순방향 추적 동작을 나타낸다. 도 5s는 디스플레이(112) 상에 남은 제4 뷰잉 영역(552-3)의 일부에 대응하는 위치에서의 접촉(517-A)의 검출을 나타낸다. 일부 실시예들에서, 제4 뷰잉 영역(552-3)에 대응하는 위치에서 스와이프 제스처(517-A')가 검출된다.
도 5t에서, 접촉(517-A) 또는 스와이프 제스처(517-A')의 검출에 응답하여, 제3 및 제4 뷰잉 영역들(552-2, 552-3)은 터치 스크린(112)의 좌측 에지를 향해 슬라이드한다. 제2 뷰잉 영역(552-1)은 터치 스크린(112)의 좌측 에지 밖으로 슬라이드하였고, 표시가 중단된다. 도 5u는 일부 실시예들에 따른 슬라이딩 애니메이션의 완료를 나타낸다. 도 5u에서, 슬라이딩 애니메이션의 완료 후에, 터치 스크린(112)의 우측 에지 상에서 뷰잉 영역이 표시되지 않는다.
도 5v-5y는 다수의 뷰잉 영역의 오버레이의 종료를 나타낸다. 도 5v-5x에서, 제1 뷰잉 영역(520)의 나머지 부분에 대응하는 위치에서 접촉(519)이 검출된다. 제1 뷰잉 영역(520) 상에 오버레이된 표시된 뷰잉 영역들의 수에 관계없이, 도 5y는 접촉(519)의 검출에 응답하여 제1 뷰잉 영역(520) 상에 오버레이된 모든 뷰잉 영역들(552)(예로서, 552-1, 552-2, 552-3)의 표시가 중단되는 것을 나타낸다. 일부 실시예들에서, 제1 뷰잉 영역(520) 상에 오버레이된 모든 뷰잉 영역들(552)(예를 들어, 552-1, 552-2, 552-3)이 닫힌다. 도 5y는 또한 제1 뷰잉 영역(520)의 반강조가 중단되는 것을 나타낸다.
도 5z-5jjj는 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션하기 위한 추가적인 예시적인 사용자 인터페이스들을 나타낸다. 전술한 사용자 인터페이스들의 상세들(예로서, 도 5a-5y)은 또한 후술하는 도면들에 유사한 방식으로 적용될 수 있다는 점에 유의한다. 간략화를 위해, 이러한 상세들은 아래에서 반복되지 않는다.
도 5z-5dd는 제3 뷰잉 영역의 오버레이와 관련된 예시적인 사용자 인터페이스들을 나타낸다. 도 5z에서, 영화 제목 아이콘(518-2)에 대응하는 터치 스크린(112) 상의 위치에서 접촉(523)이 검출된다. 도 5aa는 제1 뷰잉 영역(520)의 일부 위에 제2 뷰잉 영역(552-1)을 오버레이하는 것을 나타낸다. 도 5aa에서, 영화 제목 아이콘(562-3)의 위치에 대응하는 터치 스크린(112) 상의 위치에서 접촉(525)이 검출된다. 도 5bb-5dd는 제1 뷰잉 영역(520)의 일부 위에 제3 뷰잉 영역(552-2)을 오버레이하는 애니메이션을 나타낸다.
도 5ee-5ii는 스와이프 제스처들과 관련된 예시적인 사용자 인터페이스들을 나타낸다. 도 5ee에서, 제3 뷰잉 영역(552-2)에 대응하는 터치 스크린(112) 상의 위치에서 수평 스와이프 제스처(527-A)가 검출된다. 도 5ff-5gg는 역방향 추적 동작을 나타내며, 따라서 전체 제2 뷰잉 영역(552-1)을 표시한다. 도 5hh에서, 제3 뷰잉 영역(552-2)에 대응하는 터치 스크린(112) 상의 위치에서 수직 스와이프 제스처(529-A)가 검출된다. 도 5hh-5ii는 제3 뷰잉 영역(552-2)의 일부(예로서, 558-2)가 스크롤링되는 것을 나타낸다.
도 5jj-5ll에는, 일부 실시예들에 따른 역방향 추적 동작이 도시된다. 도 5jj는 제2 뷰잉 영역(552-1)의 일부에 대응하는 위치에서의 접촉(531-A)의 검출을 나타낸다. 일부 실시예들에서, 제2 뷰잉 영역(552-1)의 일부에 대응하는 위치에서 스와이프 제스처(531-A')가 검출된다. 도 5kk-5ll은 제2 및 제3 뷰잉 영역들(552-1, 552-2)의 슬라이딩 애니메이션을 나타낸다. 도 5ll에서, 제3 뷰잉 영역(552-2)의 표시가 중단된다. 일부 실시예들에서, 제3 뷰잉 영역(552-2)이 닫힌다.
도 5mm-5oo에는, 일부 실시예들에 따른 역방향 추적 동작이 도시된다. 도 5mm은 제2 뷰잉 영역(552-1)의 일부에 대응하는 위치에서의 접촉(533-A)의 검출을 나타낸다. 일부 실시예들에서, 제2 뷰잉 영역(552-1)의 일부에 대응하는 위치에서 스와이프 제스처(533-A')가 검출된다. 도 5nn-5oo는 제2 및 제3 뷰잉 영역들(552-1, 552-2)의 슬라이딩 애니메이션을 나타낸다. 도 5oo에서, 제3 뷰잉 영역(552-2)의 일부가 디스플레이 상에 남는다.
도 5pp-5qq는 제1 뷰잉 영역으로의 복귀와 관련된 예시적인 사용자 인터페이스들을 나타낸다. 도 5pp에서, 제1 뷰잉 영역(520)의 일부에 대응하는 터치 스크린(112) 상의 위치에서 접촉(535)이 검출된다. 도 5qq에서, 제2 뷰잉 영역(552-1) 및 제3 뷰잉 영역(552-2)이 닫히고, 제1 뷰잉 영역(520) 전체가 표시된다.
도 5rr-5uu는 제4 뷰잉 영역의 오버레이와 관련된 예시적인 사용자 인터페이스들을 나타낸다. 도 5rr에서, 제3 뷰잉 영역(552-2) 상의 영화 제목 아이콘(562-9)에 대응하는 터치 스크린(112) 상의 위치에서 접촉(537)이 검출된다. 도 5ss-5uu는 제1 뷰잉 영역(520)의 일부 위에 제4 뷰잉 영역(552-3)을 오버레이하는 애니메이션을 나타낸다.
도 5vv-ww는 제1 뷰잉 영역으로의 복귀와 관련된 예시적인 사용자 인터페이스들을 나타낸다. 도 5vv에서, 제1 뷰잉 영역(520)의 일부에 대응하는 터치 스크린(112) 상의 위치에서 접촉(539)이 검출된다. 도 5ww에서, 제3 뷰잉 영역(552-2) 및 제4 뷰잉 영역(552-3)이 닫히고, 제1 뷰잉 영역(520) 전체가 표시된다.
도 5xx-5zz에는, 일부 실시예들에 따른 역방향 추적 동작이 도시된다. 도 5xx는 제3 뷰잉 영역(552-2)의 일부에 대응하는 위치에서의 접촉(541-A)의 검출을 나타낸다. 일부 실시예들에서, 제3 뷰잉 영역(552-2)의 일부에 대응하는 위치에서 스와이프 제스처(541-A')가 검출된다. 도 5yy-5zz는 제3 및 제4 뷰잉 영역들(552-2, 552-3)의 슬라이딩 애니메이션을 나타낸다. 도 5zz에서, 제4 뷰잉 영역(552-3)의 표시가 중단된다. 일부 실시예들에서, 제4 뷰잉 영역(552-3)이 닫힌다.
도 5aaa-5ccc에는, 일부 실시예들에 따른 역방향 추적 동작이 도시된다. 도 5aaa는 제3 뷰잉 영역(552-2)의 일부에 대응하는 위치에서의 접촉(543-A)의 검출을 나타낸다. 일부 실시예들에서, 제3 뷰잉 영역(552-2)의 일부에 대응하는 위치에서 스와이프 제스처(543-A')가 검출된다. 도 5bbb-5ccc는 제3 및 제4 뷰잉 영역들(552-2, 552-3)의 슬라이딩 애니메이션을 나타낸다. 도 5ccc에서, 제4 뷰잉 영역(552-3)의 일부가 디스플레이 상에 남는다.
도 5ddd-5jjj는 제3 뷰잉 영역을 표시하고 닫는 것과 관련된 예시적인 사용자 인터페이스들을 나타낸다. 도 5ddd에서, 영화 제목 아이콘(518-2)의 위치에 대응하는 터치 스크린(112) 상의 위치에서 접촉(545)이 검출된다. 도 5eee는 제1 뷰잉 영역(520)의 일부 위에 제2 뷰잉 영역(552-1)을 오버레이하는 것을 나타낸다. 도 5eee에서, 영화 제목 아이콘(562-3)의 위치에 대응하는 터치 스크린(112) 상의 위치에서 접촉(547)이 검출된다. 도 5fff-5hhh는 제1 뷰잉 영역(520)의 일부 위에 제3 뷰잉 영역(552-2)을 오버레이하는 애니메이션을 나타낸다. 도 5iii에서, 제1 뷰잉 영역(520)의 일부에 대응하는 터치 스크린(112) 상의 위치에서 접촉(549)이 검출된다. 도 5jjj에서, 제2 뷰잉 영역(552-1) 및 제3 뷰잉 영역(552-2)이 닫히고, 제1 뷰잉 영역(520) 전체가 표시된다.
도 6a-6e는 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션하는 방법(600)을 나타내는 흐름도들이다. 방법(600)은 디스플레이 및 터치 감지 표면을 갖는 다기능 장치(예로서, 도 3의 장치(300) 또는 도 1의 휴대용 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이고, 터치 감지 표면은 디스플레이 상에 위치한다. 일부 실시예들에서, 디스플레이는 터치 감지 표면과 분리된다. 방법(600)의 일부 동작들은 결합될 수 있으며, 그리고/또는 일부 동작들의 순서는 변경될 수 있다.
후술하는 바와 같이, 방법(600)은 다수의 뷰잉 영역을 통해 내비게이션하는 직관적인 방법을 제공한다. 이러한 방법은 다수의 뷰잉 영역을 통해 내비게이션할 때 사용자의 인식 부담을 줄이며, 따라서 더 효율적인 사람-기계 인터페이스를 생성한다. 배터리에 의해 작동되는 컴퓨팅 장치들에 대해, 사용자가 더 빠르고 더 효율적으로 다수의 뷰잉 영역을 통해 내비게이션할 수 있게 하는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 늘린다.
장치는 제1 뷰잉 영역을 표시한다(602). 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함한다. 일부 실시예들에서, 제1 뷰잉 영역은 활성화 가능 아이콘들 또는 링크들과 같은 선택 가능 객체들을 포함하는 윈도 또는 다른 사전 정의된 뷰잉 영역이다(예를 들어, 도 5a의 제1 뷰잉 영역(520)은 아이콘들(516, 518)을 포함하는 복수의 선택 가능 객체를 포함한다).
제1 뷰잉 영역을 표시하는 동안, 장치는 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출한다(604). 일부 실시예들에서, 장치는 터치 스크린 디스플레이 상의 객체 상의 탭 또는 다른 제스처(예를 들어, 도 5z의 아이콘(518-2) 상의 접촉(523))를 검출함으로써 또는 커서가 객체에 위치하는 동안에 마우스 클릭을 검출함으로써 객체의 활성화를 검출한다.
제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(606). 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함한다. 예를 들어, 장치(100)는 제1 뷰잉 영역(520)의 일부 위에 제2 뷰잉 영역(552-1)을 오버레이한다(도 5aa). 제2 뷰잉 영역(552-1)은 복수의 선택 가능 객체(예를 들어, 도 5aa의 아이콘들(562-1, 562-2, 562-3, 562-4, 562-5))를 포함한다.
일부 실시예들에서, 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 나머지 부분을 시각적으로 반강조한다(608). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분을 시각적으로 반강조하는 것은 제1 영역(예로서, 도 5aa의 제1 뷰잉 영역(520))의 나머지 부분을 디밍, 쉐이딩, 그레이잉 아웃 또는 반강조함으로써 제2 뷰잉 영역의 표시 전에 제1 영역의 표시에 비해 제1 영역의 나머지 부분을 줄이는 것을 포함한다.
제2 뷰잉 영역을 오버레이한 후에, 장치는 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출한다(610). 전술한 바와 같이, 일부 실시예들에서, 장치는 터치 스크린 디스플레이 상의 객체 상의 탭 또는 다른 제스처(예를 들어, 도 5aa의 아이콘(562-3) 상의 접촉(525))를 검출함으로써 또는 커서가 객체에 위치하는 동안에 마우스 클릭을 검출함으로써 객체의 활성화를 검출한다.
제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고, 제1 뷰잉 영역의 일부 상에 오버레이된 제2 뷰잉 영역의 일부를 표시하고, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(612). 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함한다. 예를 들어, 장치(100)는 제1 뷰잉 영역(520)의 일부 상에 제3 뷰잉 영역(552-2)을 오버레이하고, 제1 뷰잉 영역(520)의 일부 상에 오버레이된 제2 뷰잉 영역(552-1)의 일부를 표시하고, 제1 뷰잉 영역(520)의 나머지 부분의 표시를 유지한다(도 5dd). 제3 뷰잉 영역(552-2)은 복수의 선택 가능 객체(예로서, 도 5ii의 아이콘들(562-6, 562-7, 562-8, 562-9, 562-10))를 포함한다.
일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분(예로서, 도 5dd의 제1 뷰잉 영역(520)의 나머지 부분)은 디밍되거나 시각적으로 반강조된다.
일부 실시예들에서, 제3 뷰잉 영역은 제2 뷰잉 영역이 이전에 표시되었던 곳에, 예를 들어 디스플레이 상의 중앙 위치에 표시된다(예컨대, 도 5aa 및 5dd가 비교될 때, 제3 뷰잉 영역(552-2)은 제2 뷰잉 영역(552-1)이 이전에 표시되었던 터치 스크린(112) 상의 위치에 표시된다).
일부 실시예들에서, 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제2 뷰잉 영역의 일부가 디스플레이 밖으로 이동하고 제2 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 상에 남도록 제2 뷰잉 영역을 이동시킨다(614)(예를 들어, 도 5bb-5dd에서, 제2 뷰잉 영역(552-1)의 일부는 디스플레이 밖으로 이동하며, 제2 뷰잉 영역(552-1)의 일부는 제1 뷰잉 영역(520)의 일부 상에 오버레이되어 터치 스크린(112) 상에 남는다).
일부 실시예들에서, 제1 뷰잉 영역, 제2 뷰잉 영역 및 제3 뷰잉 영역은 단일 애플리케이션의 일부이다(616). 예를 들어, 도 5z-5jjj에서, 제1 뷰잉 영역(520), 제2 뷰잉 영역(552-1) 및 제3 뷰잉 영역(552-2)은 디지털 콘텐츠 관리 애플리케이션의 일부이다. 일부 실시예들에서, 제1 뷰잉 영역, 제2 뷰잉 영역 및 제3 뷰잉 영역은 개별적인 각각의 애플리케이션들 내에 위치한다. 예를 들어, 디지털 콘텐츠 관리 애플리케이션의 일부인 도 5z의 제1 뷰잉 영역(520)은 활성화시에 브라우저 애플리케이션의 일부인 제2 뷰잉 영역 내에 웹 콘텐츠의 표시를 개시하는 하이퍼링크를 포함할 수 있다. 유사하게, 제2 뷰잉 영역은 전자 문서 판독기 애플리케이션의 일부인 제3 뷰잉 영역 내에 표시될 수 있는 전자 문서에 대한 링크를 포함할 수 있다.
일부 실시예들에서, 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 표시하는 동안, 장치는 터치 감지 표면 상의 스와이프 제스처를 검출한다(618). 일부 실시예들에서, 스와이프 제스처는 제3 뷰잉 영역에 대응하는 터치 감지 표면 상의 위치에서 검출된다(예로서, 도 5ee의 스와이프 제스처(527-A)). 터치 감지 표면 상의 스와이프 제스처를 검출하는 것에 응답하여, 스와이프 제스처가 제1 방향(예로서, 도 5ee의 스와이프 제스처(527-A)와 같이 터치 감지 표면 상의 수평 방향)에서 발생할 때, 장치는 제3 뷰잉 영역(예로서, 도 5ff-5gg의 뷰잉 영역(552-2))의 표시를 중단하고(또는 닫고); 제2 뷰잉 영역 전체가 다시 표시되도록 제2 뷰잉 영역을 이동시키고(예로서, 도 5ff-5gg의 뷰잉 영역(552-1)); 제1 뷰잉 영역(예로서, 도 5gg의 뷰잉 영역(520))의 나머지 부분의 표시를 유지한다. 일부 실시예들에서, 제2 뷰잉 영역은 디스플레이 상의 중앙 위치에서 제3 뷰잉 영역을 대체한다(예로서, 도 5ee-5gg에서, 제2 뷰잉 영역(552-1)은 디스플레이(112)의 중앙 위치에서 제3 뷰잉 영역(552-2)을 대체한다). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5gg의 제1 뷰잉 영역(520)). 스와이프 제스처가 제1 방향에 수직인 제2 방향(예로서, 도 5hh의 접촉(529-A)의 이동과 같이 터치 감지 표면 상의 수직 방향)에서 발생할 때, 장치는 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부의 표시를 유지하며, 제3 뷰잉 영역의 적어도 일부를 스크롤링한다(예로서, 도 5hh-5ii에서, 장치는 제3 뷰잉 영역(552-2), 및 제2 뷰잉 영역(552-1)의 일부의 표시를 유지하며, 제3 뷰잉 영역(552-2)의 일부를 스크롤링한다).
일부 실시예들에서, 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 표시하는 동안, 장치는 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 또는 스와이프 제스처)(예로서, 도 5jj의 제2 뷰잉 영역(552-1)의 일부 상의 접촉(531-A))를 검출한다(620). 일부 실시예들에서, 제2 또는 제3 뷰잉 영역에 대응하는 터치 감지 표면 상의 위치에서 스와이프 제스처(예로서, 수평 스와이프 제스처)를 검출하는 것은 또한 다음의 응답을 개시할 것이다(예로서, 도 5jj의 제2 뷰잉 영역(552-1)의 일부 상의 스와이프 제스처(531-A')). 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제3 뷰잉 영역의 표시를 중단하고(또는 닫고), 제2 뷰잉 영역 전체가 다시 표시되도록 제2 뷰잉 영역을 이동시키고, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(예로서, 도 5kk-5ll). 일부 실시예들에서, 제2 뷰잉 영역은 디스플레이 상의 중앙 위치에서 제3 뷰잉 영역을 대체한다(예로서, 도 5jj-5ll에서, 제2 뷰잉 영역(552-1)은 디스플레이(112) 상의 중앙 위치에서 제3 뷰잉 영역(552-2)을 대체한다). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5ll의 제1 뷰잉 영역(520)).
일부 실시예들에서, 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 표시하는 동안, 장치는 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 또는 스와이프 제스처)를 검출한다(622)(예로서, 도 5mm의 제2 뷰잉 영역(552-1)의 일부 상의 접촉(533-A)). 일부 실시예들에서, 제2 또는 제3 뷰잉 영역에 대응하는 터치 감지 표면 상의 위치에서 스와이프 제스처(예로서, 수평 스와이프 제스처)를 검출하는 것은 또한 다음의 응답을 개시할 것이다(예로서, 도 5mm의 제2 뷰잉 영역(552-1)의 일부 상의 스와이프 제스처(533-A')). 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제3 뷰잉 영역의 일부가 디스플레이 밖으로 이동하고 제3 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 상에 남도록 제3 뷰잉 영역을 이동시키고, 제2 뷰잉 영역 전체가 다시 표시되도록 제2 뷰잉 영역을 이동시키며, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(예로서, 도 5mm-5oo에서, 장치는 제3 뷰잉 영역(552-2)의 일부가 디스플레이 밖으로 이동하고 제3 뷰잉 영역(552-2)의 일부가 디스플레이 상에 남도록 제3 뷰잉 영역(552-2)을 이동시키고, 제2 뷰잉 영역(552-1) 전체가 다시 표시되도록 제2 뷰잉 영역(552-1)을 이동시키며, 제1 뷰잉 영역(520)의 나머지 부분의 표시를 유지한다). 일부 실시예들에서, 제2 뷰잉 영역은 디스플레이 상의 중앙 위치에서 제3 뷰잉 영역을 대체한다(예로서, 도 5mm-5oo에서, 제2 뷰잉 영역(552-1)은 디스플레이(112) 상의 중앙 위치에서 제3 뷰잉 영역(552-2)을 대체한다). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5oo에서, 제1 뷰잉 영역(520)의 나머지 부분은 시각적으로 반강조된다).
일부 실시예들에서, 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 표시하는 동안, 장치는 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 제스처)를 검출한다(624). 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제2 뷰잉 영역 및 제3 뷰잉 영역을 닫고, 제1 뷰잉 영역 전체를 표시한다. 예를 들어, 도 5pp의 접촉(535)에 응답하여, 장치(100)는 제1 뷰잉 영역(520) 상에 오버레이된 모든 뷰잉 영역들(예로서, 552-1, 552-2)을 닫고, 도 5qq에서 제1 뷰잉 영역(520) 전체를 표시한다. 제1 뷰잉 영역 상에 이전에 오버레이되었던 뷰잉 영역들(예로서, 제2 뷰잉 영역 및 제3 뷰잉 영역)은 제1 뷰잉 영역 전체의 재표시에 의해 단지 숨져지는 것이 아니라 닫힌다. 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분이 디밍되거나 시각적으로 반강조될 때, 디밍은 제1 뷰잉 영역 전체가 다시 표시될 때 중단된다(예로서, 도 5qq의 제1 뷰잉 영역(520)).
일부 실시예들에서, 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 표시하는 동안, 장치는 제3 복수의 선택 가능 객체 내의 객체의 활성화를 검출한다(626)(예로서, 도 5rr의 접촉(537)). 제3 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 제4 뷰잉 영역을 오버레이한다(626)(예로서, 도 5uu의 뷰잉 영역(552-3)). 제4 뷰잉 영역은 제4 복수의 선택 가능 객체(예로서, 도 5uu의 아이콘들(562))를 포함한다. 일부 실시예들에서, 제4 뷰잉 영역은 제2 및 제3 뷰잉 영역들이 이전에 표시되었던 곳에, 예를 들어 디스플레이 상의 중앙 위치에 표시된다(예를 들어, 도 5uu의 제4 뷰잉 영역(552-3) 및 도 5rr의 제3 뷰잉 영역(552-2)의 위치들을 비교한다). 또한, 제3 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제3 뷰잉 영역의 일부가 디스플레이 밖으로 이동하고 제3 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 상에 남도록 제3 뷰잉 영역을 이동시키고(예로서, 도 5uu의 제3 뷰잉 영역(552-2)), 제2 뷰잉 영역의 표시를 중단하고(예로서, 제2 뷰잉 영역(552-1)은 디스플레이(112) 밖으로 완전히 이동한다), 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(626)(예로서, 도 5uu의 제1 뷰잉 영역(520)). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5uu의 제1 뷰잉 영역(520)).
일부 실시예들에서, 제4 뷰잉 영역, 및 제3 뷰잉 영역의 일부를 표시하는 동안, 장치는 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 제스처)를 검출한다(628)(예로서, 도 5vv의 접촉(539)). 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제4 뷰잉 영역 및 제3 뷰잉 영역을 닫고, 제1 뷰잉 영역 전체를 표시한다(예로서, 도 5ww)). 제1 뷰잉 영역 상에 이전에 오버레이된 모든 뷰잉 영역들은 제1 전체 영역 전체의 재표시에 의해 단지 숨겨지는 것이 아니라 닫힌다. 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분이 디밍되거나 시각적으로 반강조될 때, 디밍은 제1 뷰잉 영역 전체가 재표시될 때 중단된다(예로서, 도 5ww의 제1 뷰잉 영역(520)).
일부 실시예들에서, 제4 뷰잉 영역, 및 제3 뷰잉 영역의 일부를 표시하는 동안, 장치는 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 또는 스와이프 제스처)를 검출한다(630)(예로서, 도 5xx의 접촉(541-A). 일부 실시예들에서, 제3 또는 제4 뷰잉 영역에 대응하는 터치 감지 표면 상의 위치에서 스와이프 제스처(예로서, 수평 스와이프 제스처)를 검출하는 것은 또한 다음의 응답을 개시할 것이다(예로서, 도 5xx의 스와이프 제스처(541-A')). 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제4 뷰잉 영역의 표시를 중단하고(또는 닫고), 제3 뷰잉 영역 전체가 재표시되도록 제3 뷰잉 영역을 이동시키고, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(예로서, 도 5yy-5zz). 일부 실시예들에서, 제3 뷰잉 영역은 디스플레이 상의 중앙 위치에서 제4 뷰잉 영역을 대체한다(예로서, 도 5xx-5zz에서, 제3 뷰잉 영역(552-2)은 디스플레이(112)의 중앙 위치에서 제4 뷰잉 영역(552-3)을 대체한다). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5zz의 제1 뷰잉 영역(520)).
일부 실시예들에서, 제4 뷰잉 영역, 및 제3 뷰잉 영역의 일부를 표시하는 동안, 장치는 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 또는 스와이프 제스처)를 검출한다(632)(예로서, 도 5aaa의 접촉(543-A)). 일부 실시예들에서, 제3 또는 제4 뷰잉 영역에 대응하는 터치 감지 표면 상의 위치에서 스와이프 제스처(예로서, 수평 스와이프 제스처)를 검출하는 것은 또한 다음의 응답을 개시할 것이다(예로서, 도 5aaa의 스와이프 제스처(543-A')). 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제4 뷰잉 영역의 일부가 디스플레이 밖으로 이동하고 제4 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 상에 남도록 제4 뷰잉 영역을 이동시키고, 제3 뷰잉 영역 전체가 재표시되도록 제3 뷰잉 영역을 이동시키며, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(예로서, 도 5aaa-5ccc). 일부 실시예들에서, 제3 뷰잉 영역은 디스플레이 상의 중앙 위치에서 제4 뷰잉 영역을 대체한다(예로서, 도 5aaa-5ccc에서, 제3 뷰잉 영역(552-2)은 디스플레이(112) 상의 중앙 위치에서 제4 뷰잉 영역(552-3)을 대체한다). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5ccc의 제1 뷰잉 영역(520)). 일부 실시예들에서, 장치는 또한 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역의 일부를 오버레이한다(예로서, 도 5ccc의 제2 뷰잉 영역(552-1)).
방법(600)과 관련하여 전술한 프로세스들의 상세들(예로서, 도 6a-6e 및 도 5a-5ccc)은 또한 후술하는 방법들에 대해 유사한 방식으로 적용될 수 있다는 점에 유의한다. 예를 들어, 방법들(700, 800)은 방법(600)과 관련하여 전술한 제4 뷰잉 영역을 포함하는 다양한 방법들의 특성들 중 하나 이상을 포함할 수 있다. 간략화를 위해, 이러한 상세들은 아래에서 반복되지 않는다.
도 7은 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀하는 방법(700)을 나타내는 흐름도이다. 방법(700)은 디스플레이 및 터치 감지 표면을 갖는 다기능 장치(예로서, 도 3의 장치(300) 또는 도 1의 휴대용 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이고, 터치 감지 표면은 디스플레이 상에 위치한다. 일부 실시예들에서, 디스플레이는 터치 감지 표면과 분리된다. 방법(700)의 일부 동작들은 결합될 수 있으며, 그리고/또는 일부 동작들의 순서는 변경될 수 있다.
후술하는 바와 같이, 방법(700)은 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀하는 직관적인 방법을 제공한다. 이러한 방법은 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀할 때 사용자의 인식 부담을 줄이며, 따라서 더 효율적인 사람-기계 인터페이스를 생성한다. 배터리에 의해 작동되는 컴퓨팅 장치들에 대해, 사용자가 더 빠르고 더 효율적으로 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀할 수 있게 하는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 늘린다.
장치는 제1 뷰잉 영역을 표시하며 - 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -(702)(예로서, 활성화 가능 아이콘들 또는 링크들과 같은 선택 가능 객체들을 포함하는 윈도 또는 다른 사전 정의된 뷰잉 영역; 도 5ddd의 제1 뷰잉 영역(520)은 아이콘들(516, 518)을 포함하는 복수의 선택 가능 객체를 포함한다), (예를 들어, 도 5ddd의 아이콘(518-2) 상의 접촉(545)과 같은 터치 스크린 디스플레이 상의 객체 상의 탭 또는 다른 제스처를 검출하거나, 커서가 객체에 위치할 때 마우스 클릭을 검출함으로써) 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출한다(704).
제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(706)(예로서, 도 5eee의 제2 뷰잉 영역(552-1). 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함한다(예로서, 도 5eee의 아이콘들(562)).
장치는 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출한다(708)(예로서, 도 5eee의 접촉(547)). 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(710)(예로서, 도 5eee-5hhh). 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함한다(710)(예로서, 도 5iii의 아이콘들(562)). 일부 실시예들에서, 제3 뷰잉 영역은 제2 뷰잉 영역이 이전에 표시된 곳에, 예를 들어 디스플레이 상의 중앙 위치에 표시된다(예로서, 도 5eee의 제2 뷰잉 영역(552-1) 및 도 5hhh의 제3 뷰잉 영역(552-2)의 위치들을 비교한다). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분은 디밍되거나 시각적으로 반강조된다(예로서, 도 5hhh의 제1 뷰잉 영역(520)).
제3 뷰잉 영역을 표시하는 동안, 장치는 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 제스처)를 검출한다(712)(예로서, 도 5iii의 접촉(549)). 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제2 뷰잉 영역 및 제3 뷰잉 영역을 닫고, 제1 뷰잉 영역 전체를 표시한다(712)(예로서, 도 5jjj). 제1 뷰잉 영역 상에 이전에 오버레이된 뷰잉 영역들(예로서, 제2 뷰잉 영역 및 제3 뷰잉 영역)은 제1 뷰잉 영역 전체의 재표시에 의해 단지 숨겨지는 것이 아니라 닫힌다. 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분이 디밍되거나 시각적으로 반강조될 때, 디밍은 제1 뷰잉 영역 전체가 재표시될 때 중단된다(예로서, 도 5jjj).
도 8은 일부 실시예들에 따른 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀하는 방법(800)을 나타내는 흐름도이다. 방법(800)은 디스플레이 및 터치 감지 표면을 갖는 다기능 장치(예로서, 도 3의 장치(300) 또는 도 1의 휴대용 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이고, 터치 감지 표면은 디스플레이 상에 위치한다. 일부 실시예들에서, 디스플레이는 터치 감지 표면과 분리된다. 방법(800)의 일부 동작들은 결합될 수 있으며, 그리고/또는 일부 동작들의 순서는 변경될 수 있다.
후술하는 바와 같이, 방법(800)은 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀하는 직관적인 방법을 제공한다. 이러한 방법은 다수의 뷰잉 영역을 통해 내비게이션한 후에 제1 뷰잉 영역으로 복귀할 때 사용자의 인식 부담을 줄이며, 따라서 더 효율적인 사람-기계 인터페이스를 생성한다. 배터리에 의해 작동되는 컴퓨팅 장치들에 대해, 사용자가 더 빠르고 더 효율적으로 복수의 뷰잉 영역 내의 복수의 선택 가능 객체를 사용할 수 있게 하는 것은 전력을 보존하고, 배터리 충전들 사이의 시간을 늘린다.
장치는 제1 뷰잉 영역을 표시하며 - 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -(802)(예로서, 활성화 가능 아이콘들 또는 링크들과 같은 선택 가능 객체들을 포함하는 윈도 또는 다른 사전 정의된 뷰잉 영역; 도 5ddd의 제1 뷰잉 영역(520)은 아이콘들(516, 518)을 포함하는 복수의 선택 가능 객체를 포함한다), 제1 복수의 뷰잉 영역 내의 복수의 선택 가능 객체의 활성화들을 검출한다(804)(예로서, 도 5ddd의 아이콘(518-2) 상의 접촉(545); 및 도 5eee의 아이콘(562-3) 상의 접촉(547)). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분이 디밍되거나 시각적으로 반강조될 때, 디밍은 제1 뷰잉 영역 전체가 재표시될 때 중단된다. 각각의 뷰잉 영역 내의 각각의 선택 가능 객체의 활성화를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역의 일부 상에 각각의 선택 가능 객체에 대응하는 다른 뷰잉 영역을 오버레이하고, 제1 뷰잉 영역의 나머지 부분의 표시를 유지한다(806)(예로서, 도 5eee에서, 제2 뷰잉 영역(552-1)은 제1 뷰잉 영역(520)의 일부 상에 오버레이되고, 제2 뷰잉 영역(552-1)은 각각의 선택 가능 객체, 도 5ddd의 아이콘(518-2)에 대응한다).
장치는 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처(예로서, 탭 제스처)를 검출한다(808)(예로서, 도 5iii의 접촉(549)). 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 상의 위치에서 제스처를 검출하는 것에 응답하여, 장치는 제1 뷰잉 영역 상에 오버레이된 모든 뷰잉 영역들을 닫고, 제1 뷰잉 영역 전체를 표시한다(810)(예로서, 도 5jjj). 제1 뷰잉 영역 상에 이전에 오버레이된 모든 뷰잉 영역들은 제1 뷰잉 영역 전체의 재표시에 의해 단지 숨겨지는 것이 아니라 닫힌다. 일부 실시예들에서, 제1 뷰잉 영역의 나머지 부분이 디밍되거나 시각적으로 반강조될 때, 디밍은 제1 뷰잉 영역 전체가 재표시될 때 중단된다(예로서, 도 5jjj의 제1 뷰잉 영역(520)).
일부 실시예들에 따르면, 도 9는 전술한 바와 같은 본 발명의 원리들에 따라 구성된 다기능 장치(900)의 기능 블록도를 나타낸다. 장치의 기능 블록들은 본 발명의 원리들을 실행하도록 하드웨어, 소프트웨어 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수 있다. 도 9에 설명된 기능 블록들은 전술한 바와 같은 본 발명의 원리들을 구현하기 위해 조합되거나 서브블록들로 분리될 수 있다는 것을 이 분야의 기술자들은 이해한다. 따라서, 본 명세서에서의 설명은 본 명세서에서 설명되는 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가적인 정의를 지원할 수 있다.
도 9에 도시된 바와 같이, 다기능 장치(900)는 제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛(902) - 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -; 터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛(904); 및 디스플레이 유닛(902) 및 터치 감지 표면 유닛(904)에 결합된 처리 유닛(906)을 포함한다. 일부 실시예들에서, 처리 유닛(906)은 검출 유닛(908), 오버레이잉 유닛(910), 반강조 유닛(912), 이동 유닛(912), 중단 유닛(916), 스크롤링 유닛(918) 및 폐쇄 유닛(920)을 포함한다.
일부 실시예들에서, 처리 유닛(906)은 (예로서, 검출 유닛(908)을 이용하여) 제1 복수의 선택 가능 객체 내에서 터치 감지 표면 유닛(904)을 통해 입력된 객체의 활성화를 검출하고; (예로서, 오버레이잉 유닛(910)을 이용하여) 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고 - 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -; (예로서, 검출 유닛(908)을 이용하여) 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고; 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여: (예로서, 오버레이잉 유닛(910)을 이용하여) 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 오버레이된 제2 뷰잉 영역의 일부의 표시를 가능하게 하고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 구성된다.
일부 실시예들에서, 제1 뷰잉 영역, 제2 뷰잉 영역 및 제3 뷰잉 영역은 단일 애플리케이션의 일부이다.
일부 실시예들에서, 처리 유닛(906)은 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, (예를 들어, 반강조 유닛(912)을 이용하여) 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분을 시각적으로 반강조하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, (예를 들어, 이동 유닛(914)을 이용하여) 제2 뷰잉 영역의 일부가 디스플레이 유닛(902) 밖으로 이동하고 제2 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 유닛(902) 상에 남도록 제2 뷰잉 영역을 이동시키도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 터치 감지 표면 유닛(904) 상에서 터치 감지 표면 유닛(904)을 통해 입력된 스와이프 제스처를 검출하고; 터치 감지 표면 유닛(904) 상에서 스와이프 제스처를 검출하는 것에 응답하여: 스와이프 제스처가 제1 방향에서 발생할 때: (예를 들어, 중단 유닛(916)을 이용하여) 디스플레이 유닛(902) 상에서의 제3 뷰잉 영역의 표시를 중단하고; (예로서, 이동 유닛(914)을 이용하여) 제2 뷰잉 영역 전체가 디스플레이 유닛(902) 상에 재표시되도록 제2 뷰잉 영역을 이동시키고; 디스플레이 유닛(902) 상에 제1 뷰잉 영역의 나머지 부분의 표시를 유지하며, 스와이프 제스처가 제1 방향에 수직인 제2 방향에서 발생할 때: 디스플레이 유닛(902) 상에 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부의 표시를 유지하고; (예로서, 스크롤링 유닛(918)을 이용하여) 디스플레이 유닛(902) 상에서 제3 뷰잉 영역의 적어도 일부를 스크롤링하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 터치 감지 표면 유닛(904)을 통해 입력된 제스처를 검출하고; 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여, (예로서, 중단 유닛(916)을 이용하여) 디스플레이 유닛(902) 상에서 제3 뷰잉 영역의 표시를 중단하고; (예로서, 이동 유닛(914)을 이용하여) 디스플레이 유닛(902) 상에서 제2 뷰잉 영역 전체가 재표시되도록 제2 뷰잉 영역을 이동시키고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 터치 감지 표면 유닛(904)을 통해 입력된 제스처를 검출하고; 제2 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여, (예로서, 이동 유닛(914)을 이용하여) 제3 뷰잉 영역의 일부가 디스플레이 유닛(902) 밖으로 이동하고 제3 뷰잉 영역의 일부가 제1 뷰잉 영역 상에 오버레이되어 디스플레이 유닛(902) 상에 남도록 제3 뷰잉 영역을 이동시키고; (예로서, 이동 유닛(914)을 이용하여) 제2 뷰잉 영역 전체가 디스플레이 유닛(902) 상에 재표시되도록 제2 뷰잉 영역을 이동시키고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 터치 감지 표면 유닛(904)을 통해 입력된 제스처를 검출하고; 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여, (예로서, 폐쇄 유닛(920)을 이용하여) 제2 뷰잉 영역 및 제3 뷰잉 영역을 닫고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제3 뷰잉 영역, 및 제2 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제3 복수의 선택 가능 객체 내에서 터치 감지 표면 유닛(904)을 통해 입력된 객체의 활성화를 검출하고; 제3 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, (예로서, 오버레이잉 유닛(910)을 이용하여) 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 제4 뷰잉 영역을 오버레이하고 -제4 뷰잉 영역은 제4 복수의 선택 가능 객체를 포함함 -; (예로서, 이동 유닛(914)을 이용하여) 제3 뷰잉 영역의 일부가 디스플레이 유닛(902) 밖으로 이동하고 제3 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 유닛(902) 상에 남도록 제3 뷰잉 영역을 이동시키고; (예로서, 중단 유닛(916)을 이용하여) 디스플레이 유닛(902) 상에서 제2 뷰잉 영역의 표시를 중단하고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제4 뷰잉 영역, 및 제3 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 터치 감지 표면 유닛(904)을 통해 입력된 제스처를 검출하고; 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여, (예로서, 폐쇄 유닛(920)을 이용하여) 제4 뷰잉 영역 및 제3 뷰잉 영역을 닫고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제4 뷰잉 영역, 및 제3 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 터치 감지 표면 유닛(904)을 통해 입력된 제스처를 검출하고; 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여, (예로서, 중단 유닛(916)을 이용하여) 디스플레이 유닛(902) 상에서 제4 뷰잉 영역의 표시를 중단하고; (예로서, 이동 유닛(914)을 이용하여) 제3 뷰잉 영역 전체가 디스플레이 유닛(902) 상에 재표시되도록 제3 뷰잉 영역을 이동시키고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 제4 뷰잉 영역, 및 제3 뷰잉 영역의 일부를 디스플레이 유닛(902) 상에 표시하는 동안, (예로서, 검출 유닛(908)을 이용하여) 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 터치 감지 표면 유닛(904)을 통해 입력된 제스처를 검출하고; 제3 뷰잉 영역의 일부에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여, (예로서, 이동 유닛(914)을 이용하여) 제4 뷰잉 영역의 일부가 디스플레이 유닛(902) 밖으로 이동하고 제4 뷰잉 영역의 일부가 제1 뷰잉 영역의 일부 상에 오버레이되어 디스플레이 유닛(902) 상에 남도록 제4 뷰잉 영역을 이동시키고; (예로서, 이동 유닛(914)을 이용하여) 제3 뷰잉 영역 전체가 디스플레이 유닛(902) 상에 재표시되도록 제3 뷰잉 영역을 이동시키고; 디스플레이 유닛(902) 상에 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성된다.
일부 실시예들에서, 처리 유닛(906)은 (예로서, 검출 유닛(908)을 이용하여) 제1 복수의 선택 가능 객체 내에서 터치 감지 표면 유닛(904)을 통해 입력된 객체의 활성화를 검출하고; 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여, (오버레이잉 유닛(910)을 이용하여) 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고 - 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -; (예로서, 검출 유닛(908)을 이용하여) 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고; 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 것에 응답하여: (예로서, 오버레이잉 유닛(910)을 이용하여) 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고; 제3 뷰잉 영역을 표시하는 동안: (예로서, 검출 유닛(908)을 이용하여) 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하고; 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하는 것에 응답하여: (예로서, 폐쇄 유닛(920)을 이용하여) 제2 뷰잉 영역 및 제3 뷰잉 영역을 닫고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 구성된다.
일부 실시예들에서, 처리 유닛(906)은 (예로서, 검출 유닛(908)을 이용하여) 복수의 뷰잉 영역 내에서 터치 감지 표면 유닛(904)을 통해 입력된 복수의 선택 가능 객체의 활성화들을 검출하고; 각각의 뷰잉 영역 내의 각각의 선택 가능 객체의 활성화를 검출하는 것에 응답하여, (예로서, 오버레이잉 유닛(910)을 이용하여) 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 일부 상에 각각의 선택 가능 객체에 대응하는 다른 뷰잉 영역을 오버레이하고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고; (예로서, 검출 유닛(908)을 이용하여) 제1 뷰잉 영역의 나머지 부분에 대응하는 터치 감지 표면 유닛(904) 상의 위치에서 제스처를 검출하고; 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면(904) 유닛 상의 위치에서 제스처를 검출하는 것에 응답하여: (예로서, 폐쇄 유닛(920)을 이용하여) 제1 뷰잉 영역 상에 오버레이된 모든 뷰잉 영역들을 닫고; 디스플레이 유닛(902) 상에서 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 구성된다.
전술한 정보 처리 방법들에서의 동작들은 범용 프로세서들 또는 주문형 칩들과 같은 정보 처리 장치 내의 하나 이상의 기능 모듈들을 실행함으로써 구현될 수 있다. 이러한 모듈들, 이러한 모듈들의 조합들 및/또는 이들의 (예로서, 도 1a, 1b 및 3과 관련하여 전술한 바와 같은) 범용 하드웨어와의 조합은 본 발명의 보호 범위 내에 포함된다.
도 6a-6e, 7 및 8과 관련하여 전술한 동작들은 도 1a-1c에서 도시된 컴포넌트들에 의해 구현될 수 있다. 예를 들어, 검출 동작(604), 오버레이잉 동작(606) 및 시각적 반강조 동작(608)은 이벤트 분류기(170), 이벤트 인식기(180) 및 이벤트 핸들러(190)에 의해 구현될 수 있다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감지 디스플레이(112) 상의 접촉을 감지하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)으로 보낸다. 애플리케이션(136-1)의 각각의 이벤트 인식기(180)는 이벤트 정보를 각각의 이벤트 정의들(186)과 비교하고, 터치 감지 표면 상의 제1 위치에서의 제1 접촉(또는 장치의 회전)이 사용자 인터페이스 상의 객체의 선택 또는 하나의 배향에서 다른 배향으로의 장치의 회전과 같은 사전 정의된 이벤트 또는 서브이벤트에 대응하는지를 결정한다. 각각의 사전 정의된 이벤트 또는 서브이벤트가 감지될 때, 이벤트 인식기(180)는 이벤트 또는 서브이벤트의 감지와 관련된 이벤트 핸들러(190)를 활성화한다. 이벤트 핸들러(190)는 데이터 갱신기(176) 또는 객체 갱신기(177)를 이용하거나 호출하여 애플리케이션(136-1) 내부 상태 데이터를 갱신할 수 있다. 일부 실시예들에서, 이벤트 핸들러(190)는 각각의 GUI 갱신기(178)에 액세스하여 애플리케이션에 의해 표시되는 것을 갱신한다. 유사하게, 이 분야의 통상의 기술자에게는 도 1a-1c에 도시된 컴포넌트들에 기초하여 어떻게 다른 프로세스들이 구현될 수 있는지가 명확할 것이다.
설명의 목적을 위해 위의 설명은 특정 실시예들을 참조하여 설명되었다. 그러나, 위의 예시적인 설명들은 포괄적인 것을 의도하지 않거나 본 발명을 개시된 바로 그 형태들로 한정하는 것을 의도하지 않는다. 위의 가르침에 비추어 많은 변경 및 변형이 가능하다. 실시예들은 본 발명의 원리들 및 그 실제 응용들을 가장 잘 설명함으로써 이 분야의 다른 기술자들이 고려되는 특정 용도에 적합한 바와 같은 다양한 변경들과 더불어 본 발명 및 다양한 실시예들을 최상으로 이용할 수 있게 하기 위해 선택되고 설명되었다.

Claims (32)

  1. 디스플레이 및 터치 감지 표면을 갖는 다기능 장치에서:
    제1 뷰잉 영역(viewing area)을 표시하는 단계 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -;
    상기 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계;
    상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이(overlay)하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계 - 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -;
    상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계;
    상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여:
    상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하는 단계 - 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -;
    상기 제1 뷰잉 영역의 일부 상에 오버레이된 상기 제2 뷰잉 영역의 일부를 표시하는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서, 상기 제1 뷰잉 영역, 상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역은 단일 애플리케이션의 일부인 방법.
  3. 제1항에 있어서, 상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 상기 나머지 부분을 시각적으로 반강조(deemphasizing)하는 단계를 포함하는 방법.
  4. 제1항에 있어서, 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제2 뷰잉 영역의 일부가 상기 디스플레이 밖으로 이동하고 상기 제2 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 상에 남도록 상기 제2 뷰잉 영역을 이동시키는 단계를 포함하는 방법.
  5. 제1항에 있어서,
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 터치 감지 표면 상에서 스와이프 제스처를 검출하는 단계;
    상기 터치 감지 표면 상에서 상기 스와이프 제스처를 검출하는 것에 응답하여:
    상기 스와이프 제스처가 제1 방향에서 발생할 때:
    상기 제3 뷰잉 영역의 표시를 중단하는 단계;
    상기 제2 뷰잉 영역 전체가 재표시되도록 상기 제2 뷰잉 영역을 이동시키는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계; 및
    상기 스와이프 제스처가 상기 제1 방향에 수직인 제2 방향에서 발생할 때:
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부의 표시를 유지하는 단계; 및
    상기 제3 뷰잉 영역의 적어도 일부를 스크롤링하는 단계
    를 포함하는 방법.
  6. 제1항에 있어서,
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제3 뷰잉 영역의 표시를 중단하는 단계;
    상기 제2 뷰잉 영역 전체가 재표시되도록 상기 제2 뷰잉 영역을 이동시키는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계
    를 포함하는 방법.
  7. 제1항에 있어서,
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계;
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제3 뷰잉 영역의 일부가 상기 디스플레이 밖으로 이동하고 상기 제3 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 상에 남도록 상기 제3 뷰잉 영역을 이동시키는 단계;
    상기 제2 뷰잉 영역 전체가 재표시되도록 상기 제2 뷰잉 영역을 이동시키는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계
    를 포함하는 방법.
  8. 제1항에 있어서,
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫는 단계; 및
    상기 제1 뷰잉 영역 전체를 표시하는 단계
    를 포함하는 방법.
  9. 제1항에 있어서,
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제3 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계; 및
    상기 제3 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여:
    상기 제1 뷰잉 영역의 일부 상에 제4 뷰잉 영역을 오버레이하는 단계 - 상기 제4 뷰잉 영역은 제4 복수의 선택 가능 객체를 포함함 -;
    상기 제3 뷰잉 영역의 일부가 상기 디스플레이 밖으로 이동하고 상기 제3 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 상에 남도록 상기 제3 뷰잉 영역을 이동시키는 단계;
    상기 제2 뷰잉 영역의 표시를 중단하는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계
    를 포함하는 방법.
  10. 제9항에 있어서,
    상기 제4 뷰잉 영역, 및 상기 제3 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제4 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫는 단계; 및
    상기 제1 뷰잉 영역 전체를 표시하는 단계
    를 포함하는 방법.
  11. 제9항에 있어서,
    상기 제4 뷰잉 영역, 및 상기 제3 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제4 뷰잉 영역의 표시를 중단하는 단계;
    상기 제3 뷰잉 영역 전체가 재표시되도록 상기 제3 뷰잉 영역을 이동시키는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계
    를 포함하는 방법.
  12. 제9항에 있어서,
    상기 제4 뷰잉 영역, 및 상기 제3 뷰잉 영역의 상기 일부를 표시하는 동안:
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제4 뷰잉 영역의 일부가 상기 디스플레이 밖으로 이동하고 상기 제4 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 상에 남도록 상기 제4 뷰잉 영역을 이동시키는 단계;
    상기 제3 뷰잉 영역 전체가 재표시되도록 상기 제3 뷰잉 영역을 이동시키는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계
    를 포함하는 방법.
  13. 디스플레이 및 터치 감지 표면을 갖는 다기능 장치에서:
    제1 뷰잉 영역을 표시하는 단계 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -;
    상기 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계;
    상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계 - 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -;
    상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하는 단계;
    상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여:
    상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하는 단계 - 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계;
    상기 제3 뷰잉 영역을 표시하는 동안:
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫는 단계; 및
    상기 제1 뷰잉 영역 전체를 표시하는 단계
    를 포함하는 방법.
  14. 디스플레이 및 터치 감지 표면을 갖는 다기능 장치에서,
    제1 뷰잉 영역을 표시하는 단계 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -;
    복수의 뷰잉 영역 내의 복수의 선택 가능 객체의 활성화들을 검출하는 단계;
    각각의 뷰잉 영역 내의 각각의 선택 가능 객체의 활성화를 검출하는 것에 응답하여:
    상기 제1 뷰잉 영역의 일부 상에 상기 각각의 선택 가능 객체에 대응하는 다른 뷰잉 영역을 오버레이하는 단계; 및
    상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하는 단계;
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 위치에서 제스처를 검출하는 단계; 및
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제1 뷰잉 영역 상에 오버레이된 모든 뷰잉 영역들을 닫는 단계; 및
    상기 제1 뷰잉 영역 전체를 표시하는 단계
    를 포함하는 방법.
  15. 디스플레이 및 터치 감지 표면을 구비한 다기능 장치로서, 제1항 내지 제14항 중 어느 한 항의 방법을 구현하도록 적응되는 다기능 장치.
  16. 하나 이상의 프로그램들을 저장한 컴퓨터 판독 가능 저장 매체로서, 상기 하나 이상의 프로그램들은 디스플레이 및 터치 감지 표면을 구비한 다기능 장치에 의해 실행될 때 상기 장치로 하여금 제1항 내지 제14항 중 어느 한 항의 방법을 수행하게 하는 명령어들을 포함하는 컴퓨터 판독 가능 저장 매체.
  17. 다기능 장치로서,
    디스플레이;
    터치 감지 표면; 및
    제1항 내지 제14항 중 어느 한 항의 방법을 수행하기 위한 수단
    을 포함하는 다기능 장치.
  18. 디스플레이 및 터치 감지 표면을 구비한 다기능 장치에서 사용하기 위한 정보 처리 장치로서,
    제1항 내지 제14항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는 정보 처리 장치.
  19. 다기능 장치로서,
    제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -;
    터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛; 및
    상기 디스플레이 유닛 및 상기 터치 감지 표면 유닛에 결합된 처리 유닛
    을 포함하고,
    상기 처리 유닛은
    상기 터치 감지 표면 유닛을 통해 입력된 상기 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고;
    상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고 - 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -;
    상기 터치 감지 표면 유닛을 통해 입력된 상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고;
    상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여:
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 오버레이된 상기 제2 뷰잉 영역의 일부의 표시를 가능하게 하고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 구성되는 다기능 장치.
  20. 제19항에 있어서, 상기 제1 뷰잉 영역, 상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역은 단일 애플리케이션의 일부인 다기능 장치.
  21. 제19항에 있어서,
    상기 처리 유닛은 상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 상기 나머지 부분을 시각적으로 반강조하도록 더 구성되는 다기능 장치.
  22. 제19항에 있어서,
    상기 처리 유닛은 상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 제2 뷰잉 영역의 일부가 상기 디스플레이 유닛 밖으로 이동하고 상기 제2 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 유닛 상에 남도록 상기 제2 뷰잉 영역을 이동시키도록 더 구성되는 다기능 장치.
  23. 제19항에 있어서,
    상기 처리 유닛은
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 터치 감지 표면 유닛 상에서 스와이프 제스처를 검출하고;
    상기 터치 감지 표면 유닛 상에서 상기 스와이프 제스처를 검출하는 것에 응답하여:
    상기 스와이프 제스처가 제1 방향에서 발생할 때:
    상기 디스플레이 유닛 상에서 상기 제3 뷰잉 영역의 표시를 중단하고;
    상기 제2 뷰잉 영역 전체가 상기 디스플레이 유닛 상에 재표시되도록 상기 제2 뷰잉 영역을 이동시키고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하며;
    상기 스와이프 제스처가 상기 제1 방향에 수직인 제2 방향에서 발생할 때:
    상기 디스플레이 유닛 상에서 상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부의 표시를 유지하고;
    상기 디스플레이 유닛 상에서 상기 제3 뷰잉 영역의 적어도 일부를 스크롤링하도록 더 구성되는 다기능 장치.
  24. 제19항에 있어서,
    상기 처리 유닛은
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 디스플레이 유닛 상에서 상기 제3 뷰잉 영역의 표시를 중단하고;
    상기 제2 뷰잉 영역 전체가 상기 디스플레이 유닛 상에 재표시되도록 상기 제2 뷰잉 영역을 이동시키고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성되는 다기능 장치.
  25. 제19항에 있어서,
    상기 처리 유닛은
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제2 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제3 뷰잉 영역의 일부가 상기 디스플레이 유닛 밖으로 이동하고 상기 제3 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 유닛 상에 남도록 상기 제3 뷰잉 영역을 이동시키고;
    상기 제2 뷰잉 영역 전체가 상기 디스플레이 유닛 상에 재표시되도록 상기 제2 뷰잉 영역을 이동시키고;
    상기 디스플레이 유닛 상에 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성되는 다기능 장치.
  26. 제19항에 있어서,
    상기 처리 유닛은
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 더 구성되는 다기능 장치.
  27. 제19항에 있어서,
    상기 처리 유닛은
    상기 제3 뷰잉 영역, 및 상기 제2 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 터치 감지 표면 유닛을 통해 입력된 상기 제3 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고;
    상기 제3 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여:
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제4 뷰잉 영역을 오버레이하고 - 상기 제4 뷰잉 영역은 제4 복수의 선택 가능 객체를 포함함 -;
    상기 제3 뷰잉 영역의 일부가 상기 디스플레이 유닛 밖으로 이동하고 상기 제3 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 유닛 상에 남도록 상기 제3 뷰잉 영역을 이동시키고;
    상기 디스플레이 유닛 상에서 상기 제2 뷰잉 영역의 표시를 중단하고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성되는 다기능 장치.
  28. 제27항에 있어서,
    상기 처리 유닛은
    상기 제4 뷰잉 영역, 및 상기 제3 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제4 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 더 구성되는 다기능 장치.
  29. 제27항에 있어서,
    상기 처리 유닛은
    상기 제4 뷰잉 영역, 및 상기 제3 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 디스플레이 유닛 상에서 상기 제4 뷰잉 영역의 표시를 중단하고;
    상기 제3 뷰잉 영역 전체가 상기 디스플레이 유닛 상에 재표시되도록 상기 제3 뷰잉 영역을 이동시키고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성되는 다기능 장치.
  30. 제27항에 있어서,
    상기 처리 유닛은
    상기 제4 뷰잉 영역, 및 상기 제3 뷰잉 영역의 상기 일부를 상기 디스플레이 유닛 상에 표시하는 동안:
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제3 뷰잉 영역의 상기 일부에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제4 뷰잉 영역의 일부가 상기 디스플레이 유닛 밖으로 이동하고 상기 제4 뷰잉 영역의 일부가 상기 제1 뷰잉 영역의 일부 상에 오버레이되어 상기 디스플레이 유닛 상에 남도록 상기 제4 뷰잉 영역을 이동시키고;
    상기 제3 뷰잉 영역 전체가 상기 디스플레이 유닛 상에 재표시되도록 상기 제3 뷰잉 영역을 이동시키고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하도록 더 구성되는 다기능 장치.
  31. 다기능 장치로서,
    제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -;
    터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛; 및
    상기 디스플레이 유닛 및 상기 터치 감지 표면 유닛에 결합된 처리 유닛
    을 포함하고,
    상기 처리 유닛은
    상기 터치 감지 표면 유닛을 통해 입력된 상기 제1 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고;
    상기 제1 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여, 상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제2 뷰잉 영역을 오버레이하는 한편, 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고 - 상기 제2 뷰잉 영역은 제2 복수의 선택 가능 객체를 포함함 -;
    상기 터치 감지 표면 유닛을 통해 입력된 상기 제2 복수의 선택 가능 객체 내의 객체의 활성화를 검출하고;
    상기 제2 복수의 선택 가능 객체 내의 상기 객체의 활성화를 검출하는 것에 응답하여:
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 제3 뷰잉 영역을 오버레이하고 - 상기 제3 뷰잉 영역은 제3 복수의 선택 가능 객체를 포함함 -;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고;
    상기 제3 뷰잉 영역을 표시하는 동안:
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제2 뷰잉 영역 및 상기 제3 뷰잉 영역을 닫고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 구성되는 다기능 장치.
  32. 다기능 장치로서,
    제1 뷰잉 영역을 표시하도록 구성된 디스플레이 유닛 - 상기 제1 뷰잉 영역은 제1 복수의 선택 가능 객체를 포함함 -;
    터치 감지 입력을 수집하도록 구성된 터치 감지 표면 유닛; 및
    상기 디스플레이 유닛 및 상기 터치 감지 표면 유닛에 결합된 처리 유닛
    을 포함하고,
    상기 처리 유닛은
    상기 터치 감지 표면 유닛을 통해 입력된 복수의 뷰잉 영역 내의 복수의 선택 가능 객체의 활성화들을 검출하고;
    각각의 뷰잉 영역 내의 각각의 선택 가능 객체의 활성화를 검출하는 것에 응답하여:
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 일부 상에 상기 각각의 선택 가능 객체에 대응하는 다른 뷰잉 영역을 오버레이하고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역의 나머지 부분의 표시를 유지하고;
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 위치에서 상기 터치 감지 표면 유닛을 통해 입력된 제스처를 검출하고;
    상기 제1 뷰잉 영역의 상기 나머지 부분에 대응하는 상기 터치 감지 표면 유닛 상의 상기 위치에서 상기 제스처를 검출하는 것에 응답하여:
    상기 제1 뷰잉 영역 상에 오버레이된 모든 뷰잉 영역들을 닫고;
    상기 디스플레이 유닛 상에서 상기 제1 뷰잉 영역 전체의 표시를 가능하게 하도록 구성되는 다기능 장치.
KR1020127020548A 2010-01-06 2010-12-29 다수의 뷰잉 영역을 통해 내비게이션하기 위한 장치, 방법 및 그래픽 사용자 인터페이스 KR101450415B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US29278510P 2010-01-06 2010-01-06
US61/292,785 2010-01-06
US12/789,436 2010-05-27
US12/789,436 US8438504B2 (en) 2010-01-06 2010-05-27 Device, method, and graphical user interface for navigating through multiple viewing areas
PCT/US2010/062314 WO2011084860A2 (en) 2010-01-06 2010-12-29 Device, method, and graphical user interface for navigating through multiple viewing areas

Publications (2)

Publication Number Publication Date
KR20120113252A true KR20120113252A (ko) 2012-10-12
KR101450415B1 KR101450415B1 (ko) 2014-10-14

Family

ID=44225432

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127020548A KR101450415B1 (ko) 2010-01-06 2010-12-29 다수의 뷰잉 영역을 통해 내비게이션하기 위한 장치, 방법 및 그래픽 사용자 인터페이스

Country Status (6)

Country Link
US (1) US8438504B2 (ko)
EP (1) EP2510427B1 (ko)
KR (1) KR101450415B1 (ko)
CN (1) CN102763065B (ko)
AU (1) AU2010339636B2 (ko)
WO (1) WO2011084860A2 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220124285A (ko) * 2018-05-07 2022-09-13 애플 인크. 크리에이티브 카메라
US11962889B2 (en) 2016-06-12 2024-04-16 Apple Inc. User interface for camera effects

Families Citing this family (97)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US8698845B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface with interactive popup views
US8756522B2 (en) 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
US9513801B2 (en) 2010-04-07 2016-12-06 Apple Inc. Accessing electronic notifications and settings icons with gestures
US20110252376A1 (en) 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications
US9823831B2 (en) 2010-04-07 2017-11-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
EP2600231A4 (en) * 2010-07-30 2016-04-27 Sony Computer Entertainment Inc ELECTRONIC DEVICE, DISPLAYED OBJECT DISPLAY METHOD, AND SEARCH METHOD
JP5199325B2 (ja) * 2010-10-14 2013-05-15 シャープ株式会社 情報入力装置及び画像形成装置
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US20120159395A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Application-launching interface for multiple modes
US20120159383A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Customization of an immersive environment
US8612874B2 (en) 2010-12-23 2013-12-17 Microsoft Corporation Presenting an application change through a tile
US8689123B2 (en) 2010-12-23 2014-04-01 Microsoft Corporation Application reporting in an application-selectable user interface
US20120179960A1 (en) * 2011-01-07 2012-07-12 Cok Ronald S Image layout adjustment aparatus
US8972267B2 (en) * 2011-04-07 2015-03-03 Sony Corporation Controlling audio video display device (AVDD) tuning using channel name
US9229489B2 (en) * 2011-05-03 2016-01-05 Facebook, Inc. Adjusting mobile device state based on user intentions and/or identity
US9158445B2 (en) 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US8893033B2 (en) 2011-05-27 2014-11-18 Microsoft Corporation Application notifications
US20120304132A1 (en) 2011-05-27 2012-11-29 Chaitanya Dev Sareen Switching back to a previously-interacted-with application
US20120304107A1 (en) * 2011-05-27 2012-11-29 Jennifer Nan Edge gesture
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US20130055164A1 (en) * 2011-08-24 2013-02-28 Sony Ericsson Mobile Communications Ab System and Method for Selecting Objects on a Touch-Sensitive Display of a Mobile Communications Device
US8806369B2 (en) 2011-08-26 2014-08-12 Apple Inc. Device, method, and graphical user interface for managing and interacting with concurrently open software applications
US10133439B1 (en) * 2011-08-29 2018-11-20 Twitter, Inc. User interface based on viewable area of a display
US20130057587A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Arranging tiles
US8933952B2 (en) 2011-09-10 2015-01-13 Microsoft Corporation Pre-rendering new content for an application-selectable user interface
US9146670B2 (en) 2011-09-10 2015-09-29 Microsoft Technology Licensing, Llc Progressively indicating new content in an application-selectable user interface
US8863014B2 (en) * 2011-10-19 2014-10-14 New Commerce Solutions Inc. User interface for product comparison
US10389766B2 (en) * 2011-12-16 2019-08-20 Techexcel Inc. Method and system for information sharing
US9223472B2 (en) 2011-12-22 2015-12-29 Microsoft Technology Licensing, Llc Closing applications
US10108737B2 (en) * 2012-01-25 2018-10-23 Microsoft Technology Licensing, Llc Presenting data driven forms
US9645724B2 (en) 2012-02-01 2017-05-09 Facebook, Inc. Timeline based content organization
US9557876B2 (en) 2012-02-01 2017-01-31 Facebook, Inc. Hierarchical user interface
US9235318B2 (en) 2012-02-01 2016-01-12 Facebook, Inc. Transitions among hierarchical user-interface layers
US9128605B2 (en) 2012-02-16 2015-09-08 Microsoft Technology Licensing, Llc Thumbnail-image selection of applications
USD737834S1 (en) * 2012-03-23 2015-09-01 Fronius International Gmbh Display screen with graphical user interface
EP2847657B1 (en) 2012-05-09 2016-08-10 Apple Inc. Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN108241465B (zh) 2012-05-09 2021-03-09 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
AU2013259614B2 (en) 2012-05-09 2016-08-25 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169882A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving and dropping a user interface object
US20140095999A1 (en) * 2012-09-28 2014-04-03 Target Brands, Inc. Search and parental control features for digital entertainment services
US9633363B2 (en) 2012-11-08 2017-04-25 Thnx, Llc System and method of incentivized advertising
AU2013368443B2 (en) 2012-12-29 2016-03-24 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
EP3467634B1 (en) 2012-12-29 2020-09-23 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
AU2013368445B8 (en) 2012-12-29 2017-02-09 Apple Inc. Device, method, and graphical user interface for determining whether to scroll or select contents
US9658740B2 (en) 2013-03-15 2017-05-23 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9477404B2 (en) 2013-03-15 2016-10-25 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US20140282240A1 (en) * 2013-03-15 2014-09-18 William Joseph Flynn, III Interactive Elements for Launching from a User Interface
WO2014197354A1 (en) 2013-06-05 2014-12-11 Snakt, Inc. Methods and systems for creating, combining, and sharing time-constrained videos
CN103440107A (zh) * 2013-09-04 2013-12-11 北京奇虎科技有限公司 电子设备触摸操作处理的方法和装置
US9658734B2 (en) 2014-02-17 2017-05-23 Beijing Lenovo Software Ltd. Information processing method and electronic device
CN108052254B (zh) * 2014-02-24 2021-03-19 联想(北京)有限公司 一种信息处理方法及电子设备
KR102298602B1 (ko) 2014-04-04 2021-09-03 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 확장가능한 애플리케이션 표시
WO2015154273A1 (en) 2014-04-10 2015-10-15 Microsoft Technology Licensing, Llc Collapsible shell cover for computing device
EP3129847A4 (en) 2014-04-10 2017-04-19 Microsoft Technology Licensing, LLC Slider cover for computing device
US20170192730A1 (en) 2014-05-30 2017-07-06 Apple Inc. Continuity
USD754169S1 (en) * 2014-06-23 2016-04-19 Google Inc. Portion of a display panel with an animated computer icon
US10254942B2 (en) 2014-07-31 2019-04-09 Microsoft Technology Licensing, Llc Adaptive sizing and positioning of application windows
US10592080B2 (en) 2014-07-31 2020-03-17 Microsoft Technology Licensing, Llc Assisted presentation of application windows
US10678412B2 (en) 2014-07-31 2020-06-09 Microsoft Technology Licensing, Llc Dynamic joint dividers for application windows
CN106662891B (zh) 2014-10-30 2019-10-11 微软技术许可有限责任公司 多配置输入设备
USD769306S1 (en) * 2015-01-20 2016-10-18 Microsoft Corporation Display screen with animated graphical user interface
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
CN104834469A (zh) * 2015-05-04 2015-08-12 广东欧珀移动通信有限公司 一种移动终端的显示控制方法及装置
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
USD769907S1 (en) * 2015-07-28 2016-10-25 Microsoft Corporation Display screen with animated graphical user interface
USD848458S1 (en) * 2015-08-03 2019-05-14 Google Llc Display screen with animated graphical user interface
USD849027S1 (en) * 2015-08-03 2019-05-21 Google Llc Display screen with animated graphical user interface
US10289296B1 (en) 2015-08-21 2019-05-14 Google Llc Systems and methods for dynamically appending supplemental content to an information resource responsive to scroll activity
US9880730B2 (en) * 2015-10-16 2018-01-30 Google Llc Touchscreen user interface for presenting media
US10585576B2 (en) * 2015-10-26 2020-03-10 Google Llc Systems and methods for attributing a scroll event in an infinite scroll graphical user interface
USD886133S1 (en) * 2016-01-29 2020-06-02 Kyphon SÀRL Display screen with animated graphical user interface
KR102480462B1 (ko) * 2016-02-05 2022-12-23 삼성전자주식회사 복수의 디스플레이들을 포함하는 전자 장치 및 그 동작 방법
US10637986B2 (en) 2016-06-10 2020-04-28 Apple Inc. Displaying and updating a set of application views
WO2018001993A1 (en) * 2016-06-30 2018-01-04 Gambro Lundia Ab An extracorporeal blood treatment system and method including user-interactable settings
WO2018112928A1 (zh) * 2016-12-23 2018-06-28 北京金山安全软件有限公司 一种信息展示方法、装置及终端设备
CN111596812B (zh) * 2019-02-21 2023-04-18 阿里巴巴集团控股有限公司 信息显示方法、设备及存储介质
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11928303B2 (en) 2021-05-15 2024-03-12 Apple Inc. Shared-content session user interfaces
CN117453085A (zh) * 2023-12-22 2024-01-26 荣耀终端有限公司 显示方法、电子设备及存储介质

Family Cites Families (179)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4313108A (en) * 1978-12-07 1982-01-26 Casio Computer Co., Ltd. Electric apparatus for displaying a plurality of key symbols on a single passive display
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US5119079A (en) 1990-09-17 1992-06-02 Xerox Corporation Touch screen user interface with expanding touch locations for a reprographic machine
US5177936A (en) * 1991-11-14 1993-01-12 Alpha Enterprises, Inc. Machine and method for loading a cassette into a security package
US5610653A (en) 1992-02-07 1997-03-11 Abecassis; Max Method and system for automatically tracking a zoomed video image
US5570109A (en) 1992-05-27 1996-10-29 Apple Computer, Inc. Schedule and to-do list for a pen-based computer system
US5446882A (en) 1992-10-02 1995-08-29 Apple Computer, Inc. Interface for a computerized database having card and list views
US5612719A (en) * 1992-12-03 1997-03-18 Apple Computer, Inc. Gesture sensitive buttons for graphical user interfaces
US6262732B1 (en) * 1993-10-25 2001-07-17 Scansoft, Inc. Method and apparatus for managing and navigating within stacks of document pages
JP2602001B2 (ja) 1993-11-01 1997-04-23 インターナショナル・ビジネス・マシーンズ・コーポレイション 縮小可能キーボード付パーソナル通信機
US5446682A (en) * 1994-03-21 1995-08-29 Square D Company System for calibrating a line isolation monitor
US5689669A (en) 1994-04-29 1997-11-18 General Magic Graphical user interface for navigating between levels displaying hallway and room metaphors
EP0701220B1 (en) 1994-09-12 2001-07-04 Adobe Systems Inc. Method and apparatus for viewing electronic documents
US5541697A (en) 1994-11-29 1996-07-30 Eastman Kodak Company Camera with orientation indicator
US5760773A (en) * 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
JPH08336069A (ja) 1995-04-13 1996-12-17 Eastman Kodak Co 電子スチルカメラ
GB2301217B (en) 1995-05-26 1999-12-15 Nokia Mobile Phones Ltd Display driver
US6496182B1 (en) 1995-06-07 2002-12-17 Microsoft Corporation Method and system for providing touch-sensitive screens for the visually impaired
US6199082B1 (en) * 1995-07-17 2001-03-06 Microsoft Corporation Method for delivering separate design and content in a multimedia publishing system
US6486895B1 (en) * 1995-09-08 2002-11-26 Xerox Corporation Display system for displaying lists of linked documents
US6011585A (en) * 1996-01-19 2000-01-04 Apple Computer, Inc. Apparatus and method for rotating the display orientation of a captured image
US5659805A (en) 1996-02-16 1997-08-19 Eastman Kodak Company Camera for indicating camera orientations on photographic film
JP2957507B2 (ja) 1997-02-24 1999-10-04 インターナショナル・ビジネス・マシーンズ・コーポレイション 小型情報処理機器
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US6326970B1 (en) * 1997-05-16 2001-12-04 Liberate Technologies TV centric layout
GB9722766D0 (en) 1997-10-28 1997-12-24 British Telecomm Portable computers
US6025842A (en) * 1997-11-04 2000-02-15 International Business Machines Corporation System and method for window queues and white space activation for toggling windows
US6613100B2 (en) 1997-11-26 2003-09-02 Intel Corporation Method and apparatus for displaying miniaturized graphical representations of documents for alternative viewing selection
WO1999038149A1 (en) 1998-01-26 1999-07-29 Wayne Westerman Method and apparatus for integrating manual input
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US6211856B1 (en) 1998-04-17 2001-04-03 Sung M. Choi Graphical user interface touch screen with an auto zoom feature
US6919879B2 (en) * 1998-06-26 2005-07-19 Research In Motion Limited Hand-held electronic device with a keyboard optimized for use with the thumbs
US6243080B1 (en) 1998-07-14 2001-06-05 Ericsson Inc. Touch-sensitive panel with selector
US6177936B1 (en) 1998-08-20 2001-01-23 International Business Machines Corporation Browser hierarchical contextual information for web pages
US6489975B1 (en) 1998-12-14 2002-12-03 International Business Machines Corporation System and method for improved navigation between open windows in an application program using window tabs
JP2000181436A (ja) 1998-12-14 2000-06-30 Sharp Corp 文書表示装置
JP2000214988A (ja) 1999-01-06 2000-08-04 Motorola Inc 動作パタ―ンを利用して無線通信装置への情報を入力する方法
US6388877B1 (en) * 1999-02-04 2002-05-14 Palm, Inc. Handheld computer with open accessory slot
US6590594B2 (en) 1999-03-25 2003-07-08 International Business Machines Corporation Window scroll-bar
US20050166232A1 (en) 1999-04-21 2005-07-28 Lamkin Allan B... Presentation of media content from multiple media sources
JP2000312360A (ja) 1999-04-27 2000-11-07 Matsushita Electric Ind Co Ltd 情報提供装置
US6359615B1 (en) 1999-05-11 2002-03-19 Ericsson Inc. Movable magnification icons for electronic device display screens
US6411283B1 (en) 1999-05-20 2002-06-25 Micron Technology, Inc. Computer touch screen adapted to facilitate selection of features at edge of screen
US6639584B1 (en) * 1999-07-06 2003-10-28 Chuang Li Methods and apparatus for controlling a portable electronic device using a touchpad
US6771250B1 (en) 1999-07-27 2004-08-03 Samsung Electronics Co., Ltd. Portable computer system having application program launcher for low power consumption and method of operating the same
US6349410B1 (en) 1999-08-04 2002-02-19 Intel Corporation Integrating broadcast television pause and web browsing
US6704007B1 (en) 1999-09-27 2004-03-09 Intel Corporation Controlling displays for processor-based systems
US6466198B1 (en) 1999-11-05 2002-10-15 Innoventions, Inc. View navigation and magnification of a hand-held device with a display
JP2001175386A (ja) 1999-12-21 2001-06-29 Fujitsu Ltd 表示装置及び表示方法並びに記憶媒体
US6313855B1 (en) 2000-02-04 2001-11-06 Browse3D Corporation System and method for web browsing
US6859909B1 (en) 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
US20040049737A1 (en) 2000-04-26 2004-03-11 Novarra, Inc. System and method for displaying information content with selective horizontal scrolling
US7007241B2 (en) * 2000-05-12 2006-02-28 Lenovo (Singapore) Pte. Ltd. Display device with a focus buoy facility
US7210099B2 (en) 2000-06-12 2007-04-24 Softview Llc Resolution independent vector display of internet content
US7149549B1 (en) 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
US7289102B2 (en) 2000-07-17 2007-10-30 Microsoft Corporation Method and apparatus using multiple sensors in a device with a display
US20050204385A1 (en) 2000-07-24 2005-09-15 Vivcom, Inc. Processing and presentation of infomercials for audio-visual programs
AU2001283004A1 (en) 2000-07-24 2002-02-05 Vivcom, Inc. System and method for indexing, searching, identifying, and editing portions of electronic multimedia files
US20020015064A1 (en) 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
TW466415B (en) 2000-08-28 2001-12-01 Compal Electronics Inc Hand-held device with zooming display function
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6590568B1 (en) 2000-11-20 2003-07-08 Nokia Corporation Touch screen drag and drop input technique
WO2002046903A1 (de) 2000-12-07 2002-06-13 Siemens Aktiengesellschaft Verfahren zum auswählen und aktivieren einer funktion aus einem bedienungsmenü und bedienungsorgan zum durchführen des verfahrens
US7139982B2 (en) 2000-12-21 2006-11-21 Xerox Corporation Navigation methods, systems, and computer program products for virtual three-dimensional books
US20020093531A1 (en) 2001-01-17 2002-07-18 John Barile Adaptive display for video conferences
US6928461B2 (en) * 2001-01-24 2005-08-09 Raja Singh Tuli Portable high speed internet access device with encryption
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US20050183017A1 (en) 2001-01-31 2005-08-18 Microsoft Corporation Seekbar in taskbar player visualization mode
US7030861B1 (en) * 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
JP2002244635A (ja) 2001-02-20 2002-08-30 Fujitsu General Ltd 画像表示装置
US6834249B2 (en) 2001-03-29 2004-12-21 Arraycomm, Inc. Method and apparatus for controlling a computing system
DE10117457A1 (de) 2001-04-06 2002-10-17 T Mobile Deutschland Gmbh Verfahren zur Anzeige von standardisierten großformatigen Internet-Seiten mit beispielsweise HTML-Protokoll in Einhandendgeräten mit Mobilfunkanschluss
US7039643B2 (en) 2001-04-10 2006-05-02 Adobe Systems Incorporated System, method and apparatus for converting and integrating media files
US6901585B2 (en) 2001-04-12 2005-05-31 International Business Machines Corporation Active ALT tag in HTML documents to increase the accessibility to users with visual, audio impairment
AU2002305392A1 (en) 2001-05-02 2002-11-11 Bitstream, Inc. Methods, systems, and programming for producing and displaying subpixel-optimized images and digital content including such images
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US20030013483A1 (en) 2001-07-06 2003-01-16 Ausems Michiel R. User interface for handheld communication device
US20030117427A1 (en) 2001-07-13 2003-06-26 Universal Electronics Inc. System and method for interacting with a program guide displayed on a portable electronic device
US20030025676A1 (en) 2001-08-02 2003-02-06 Koninklijke Philips Electronics N.V. Sensor-based menu for a touch screen panel
JP2003091347A (ja) 2001-09-18 2003-03-28 Sony Corp 情報処理装置、並びに画面表示方法、画面表示プログラム及び画面表示プログラムが記録された記録媒体
US20040205496A1 (en) 2001-10-11 2004-10-14 International Business Machines Corporation Displaying subheadings and hyperlinks in a scrollable long document
US6970200B2 (en) 2001-10-26 2005-11-29 Hewlett-Packard Development Company, L.P. System and method for a simplified digital camera interface for viewing images and controlling camera operation
US7714880B2 (en) 2001-11-16 2010-05-11 Honeywell International Inc. Method and apparatus for displaying images on a display
AUPR947701A0 (en) 2001-12-14 2002-01-24 Activesky, Inc. Digital multimedia publishing system for wireless devices
US7346855B2 (en) 2001-12-21 2008-03-18 Microsoft Corporation Method and system for switching between multiple computer applications
EP1469375B1 (en) 2002-01-22 2011-07-13 Fujitsu Limited Menu element selecting device and method
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
US6907576B2 (en) 2002-03-04 2005-06-14 Microsoft Corporation Legibility of selected content
US9715500B2 (en) 2004-04-27 2017-07-25 Apple Inc. Method and system for sharing playlists
US7171625B1 (en) 2002-06-18 2007-01-30 Actify, Inc. Double-clicking a point-and-click user interface apparatus to enable a new interaction with content represented by an active visual display element
US7020710B2 (en) 2002-06-21 2006-03-28 Thomson Licensing Streaming media delivery on multicast networks for network and server bandwidth minimization and enhanced personalization
US8116889B2 (en) * 2002-06-27 2012-02-14 Openpeak Inc. Method, system, and computer program product for managing controlled residential or non-residential environments
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US7166791B2 (en) 2002-07-30 2007-01-23 Apple Computer, Inc. Graphical user interface and methods of use thereof in a multimedia player
US7065718B2 (en) 2002-08-08 2006-06-20 International Business Machines Corporation System and method for configuring time related settings using a graphical interface
FI115255B (fi) 2002-09-02 2005-03-31 Myorigo Oy Kannettavan päätelaitteen näytön ohjausmenetelmä ja kannettava päätelaite
US7124125B2 (en) 2002-11-01 2006-10-17 Loudeye Corp. System and method for providing media samples on-line in response to media related searches on the internet
US7203901B2 (en) 2002-11-27 2007-04-10 Microsoft Corporation Small form factor web browsing
FI20022282A0 (fi) 2002-12-30 2002-12-30 Nokia Corp Menetelmä vuorovaikutuksen mahdollistamiseksi elektronisessa laitteessa ja elektroninen laite
US7054965B2 (en) 2003-03-18 2006-05-30 Oqo Incorporated Component for use as a portable computing device and pointing device
US20040201595A1 (en) 2003-04-11 2004-10-14 Microsoft Corporation Self-orienting display
JP4046000B2 (ja) 2003-04-16 2008-02-13 日本電信電話株式会社 構造化文書の抽出方法及び装置及びプログラム
US9406068B2 (en) 2003-04-25 2016-08-02 Apple Inc. Method and system for submitting media for network-based purchase and distribution
US20050044509A1 (en) 2003-05-07 2005-02-24 Hunleth Frank A. Item selection using helical menus
JP2004363892A (ja) 2003-06-04 2004-12-24 Canon Inc 携帯機器
JP2005018229A (ja) 2003-06-24 2005-01-20 Seiko Epson Corp 文書閲覧端末、文書表示制御方法及び文書表示制御プログラム
US20040268400A1 (en) 2003-06-26 2004-12-30 Microsoft Corporation Quick starting video content
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
US7594194B2 (en) 2003-09-24 2009-09-22 Nokia Corporation Portrayal of navigation objects
US20050071736A1 (en) 2003-09-26 2005-03-31 Fuji Xerox Co., Ltd. Comprehensive and intuitive media collection and management tool
US20050071778A1 (en) 2003-09-26 2005-03-31 Nokia Corporation Method for dynamic key size prediction with touch displays and an electronic device using the method
US7290006B2 (en) 2003-09-30 2007-10-30 Microsoft Corporation Document representation for scalable structure
US7231231B2 (en) 2003-10-14 2007-06-12 Nokia Corporation Method and apparatus for locking a mobile telephone touch screen
FR2861206B1 (fr) 2003-10-16 2006-11-24 Michel Rissons Procede et dispositif d'adaptation automatique d'affichage
KR100537280B1 (ko) 2003-10-29 2005-12-16 삼성전자주식회사 휴대용 단말기에서 터치스크린을 이용한 문자 입력 장치및 방법
US7814419B2 (en) 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
US7085590B2 (en) 2003-12-31 2006-08-01 Sony Ericsson Mobile Communications Ab Mobile terminal with ergonomic imaging functions
US20070113200A1 (en) 2004-01-29 2007-05-17 Koninklijke Philips Electronics N.V. On-screen control of a video playback device
US7551187B2 (en) 2004-02-10 2009-06-23 Microsoft Corporation Systems and methods that utilize a dynamic digital zooming interface in connection with digital inking
US7437005B2 (en) 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
JP4438448B2 (ja) 2004-02-26 2010-03-24 セイコーエプソン株式会社 構造化文書表示処理装置、構造化文書表示方法、構造化文書表示プログラム
US7788583B1 (en) 2004-03-04 2010-08-31 Google Inc. In-page full screen internet video method
JP2005267049A (ja) 2004-03-17 2005-09-29 Sharp Corp 携帯情報機器、その制御方法、および、その制御プログラム
US7546554B2 (en) 2004-03-31 2009-06-09 Fuji Xerox Co., Ltd. Systems and methods for browsing multimedia content on small mobile devices
EP1752880A4 (en) 2004-04-30 2008-10-22 Access Co Ltd DYNAMIC IMAGE ENHANCEMENT / REDUCTION PROCEDURE FOR THE BROWSEN, ENDING DEVICE AND PROGRAM DISPLAY
US7330178B2 (en) 2004-04-30 2008-02-12 Motorola, Inc. Display-input apparatus for a multi-configuration portable device
JP4063246B2 (ja) 2004-05-11 2008-03-19 日本電気株式会社 ページ情報表示装置
JP4148187B2 (ja) 2004-06-03 2008-09-10 ソニー株式会社 携帯型電子機器、入力操作制御方法及びそのプログラム
US7222307B2 (en) 2004-06-16 2007-05-22 Scenera Technologies, Llc Multipurpose navigation keys for an electronic imaging device
US20050285880A1 (en) 2004-06-23 2005-12-29 Inventec Appliances Corporation Method of magnifying a portion of display
EP1763732A2 (en) 2004-06-29 2007-03-21 Koninklijke Philips Electronics N.V. Discontinuous zoom
EP1774427A2 (en) 2004-07-30 2007-04-18 Apple Computer, Inc. Mode-based graphical user interfaces for touch sensitive input devices
JP4763695B2 (ja) 2004-07-30 2011-08-31 アップル インコーポレイテッド タッチ・センシティブ入力デバイスのためのモード・ベースのグラフィカル・ユーザ・インタフェース
US7724242B2 (en) * 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US8560972B2 (en) 2004-08-10 2013-10-15 Microsoft Corporation Surface UI for gesture-based interaction
US7721197B2 (en) 2004-08-12 2010-05-18 Microsoft Corporation System and method of displaying content on small screen computing devices
US7071939B2 (en) 2004-08-12 2006-07-04 Broadcom Corporation Unique method for performing zoom-in and zoom-out operations with horizontal and vertical video decimation within a wireless device having a video display
JP4366695B2 (ja) 2004-09-13 2009-11-18 日本ビクター株式会社 メニュー画像表示方法及び電子情報機器
US20060064647A1 (en) 2004-09-23 2006-03-23 Tapuska David F Web browser graphical user interface and method for implementing same
US7345688B2 (en) 2004-10-18 2008-03-18 Microsoft Corporation Semantic thumbnails
US8169410B2 (en) 2004-10-20 2012-05-01 Nintendo Co., Ltd. Gesture inputs for a portable display device
WO2006048028A1 (en) 2004-10-29 2006-05-11 Wacom Corporation Limited A hand-held electronic appliance and method of displaying a tool-tip
EP1677182B1 (en) 2004-12-28 2014-04-23 Sony Mobile Communications Japan, Inc. Display method, portable terminal device, and display program
TW200622661A (en) 2004-12-30 2006-07-01 Tatung Co Ltd Method of zooming out a display image for a portable electrical device
KR101085447B1 (ko) 2004-12-31 2011-11-21 삼성전자주식회사 터치 위치 검출 장치 및 이의 터치 위치 검출 방법과,이를 구비한 터치 스크린 표시 장치
US20060246955A1 (en) 2005-05-02 2006-11-02 Mikko Nirhamo Mobile communication device and method therefor
US7587671B2 (en) 2005-05-17 2009-09-08 Palm, Inc. Image repositioning, storage and retrieval
US20070024646A1 (en) 2005-05-23 2007-02-01 Kalle Saarinen Portable electronic apparatus and associated method
US20060277588A1 (en) 2005-06-01 2006-12-07 Madison Software Inc. Method for making a Web-DVD
US9098597B2 (en) 2005-06-03 2015-08-04 Apple Inc. Presenting and managing clipped content
US7676767B2 (en) * 2005-06-15 2010-03-09 Microsoft Corporation Peel back user interface to show hidden functions
US20070004451A1 (en) 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
US20070067738A1 (en) 2005-09-16 2007-03-22 Microsoft Corporation Extensible, filtered lists for mobile device user interface
AU2006332488A1 (en) 2005-12-30 2007-07-12 Apple Inc. Portable electronic device with multi-touch input
US20070157228A1 (en) 2005-12-30 2007-07-05 Jason Bayer Advertising with video ad creatives
US7860536B2 (en) 2006-01-05 2010-12-28 Apple Inc. Telephone interface for a portable communication device
JP2007257336A (ja) * 2006-03-23 2007-10-04 Sony Corp 情報処理装置、情報処理方法及びそのプログラム
JP2007280019A (ja) * 2006-04-06 2007-10-25 Alps Electric Co Ltd 入力装置およびこの入力装置を使用したコンピュータシステム
TWI315840B (en) 2006-04-07 2009-10-11 High Tech Comp Corp Intuitive image navigator and electrical equipment with the same
US8683362B2 (en) * 2008-05-23 2014-03-25 Qualcomm Incorporated Card metaphor for activities in a computing device
US7791594B2 (en) 2006-08-30 2010-09-07 Sony Ericsson Mobile Communications Ab Orientation based multiple mode mechanically vibrated touch screen display
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
US20080062137A1 (en) 2006-09-11 2008-03-13 Apple Computer, Inc. Touch actuation controller for multi-state media presentation
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
KR100881952B1 (ko) * 2007-01-20 2009-02-06 엘지전자 주식회사 터치스크린을 구비하는 이동통신 단말기 및 그 동작제어방법
US8259153B1 (en) * 2007-05-04 2012-09-04 Mira Comunique, Inc. Video phone kiosk with attractor and proximity sensing
KR20090077480A (ko) 2008-01-11 2009-07-15 삼성전자주식회사 조작 가이드를 표시하는 ｕｉ 제공방법 및 이를 적용한멀티미디어 기기
EP2318897B1 (en) * 2008-05-28 2018-05-16 Google LLC Motion-controlled views on mobile computing devices
US8294105B2 (en) * 2009-05-22 2012-10-23 Motorola Mobility Llc Electronic device with sensing assembly and method for interpreting offset gestures
US20110029864A1 (en) * 2009-07-30 2011-02-03 Aaron Michael Stewart Touch-Optimized Approach for Controlling Computer Function Using Touch Sensitive Tiles
US9152317B2 (en) * 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11962889B2 (en) 2016-06-12 2024-04-16 Apple Inc. User interface for camera effects
KR20220124285A (ko) * 2018-05-07 2022-09-13 애플 인크. 크리에이티브 카메라

Also Published As

Publication number Publication date
WO2011084860A2 (en) 2011-07-14
AU2010339636A1 (en) 2012-08-09
CN102763065A (zh) 2012-10-31
US20110167341A1 (en) 2011-07-07
US8438504B2 (en) 2013-05-07
EP2510427A2 (en) 2012-10-17
AU2010339636B2 (en) 2014-07-17
CN102763065B (zh) 2015-11-25
KR101450415B1 (ko) 2014-10-14
WO2011084860A3 (en) 2011-09-01
EP2510427B1 (en) 2017-09-27

Similar Documents

Publication Publication Date Title
US11709560B2 (en) Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
US20220027039A1 (en) Device, method, and graphical user interface for navigating and displaying content in context
KR101450415B1 (ko) 다수의 뷰잉 영역을 통해 내비게이션하기 위한 장치, 방법 및 그래픽 사용자 인터페이스
US9626098B2 (en) Device, method, and graphical user interface for copying formatting attributes
US10101879B2 (en) Device, method, and graphical user interface for managing concurrently open software applications using a three-dimensional stack of images of open applications
US8826164B2 (en) Device, method, and graphical user interface for creating a new folder
US9098182B2 (en) Device, method, and graphical user interface for copying user interface objects between content regions
US9733812B2 (en) Device, method, and graphical user interface with content display modes and display rotation heuristics
US9483175B2 (en) Device, method, and graphical user interface for navigating through a hierarchy
US8839122B2 (en) Device, method, and graphical user interface for navigation of multiple applications
US8786639B2 (en) Device, method, and graphical user interface for manipulating a collection of objects
KR101607365B1 (ko) 전자 문서의 페이지들을 변경하기 위한 장치, 방법 및 그래픽 사용자 인터페이스
US20110167339A1 (en) Device, Method, and Graphical User Interface for Attachment Viewing and Editing
AU2015201237B2 (en) Device, method, and graphical user interface for changing pages in an electronic document

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170919

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180918

Year of fee payment: 5