KR20220002739A - 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들 - Google Patents

터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들 Download PDF

Info

Publication number
KR20220002739A
KR20220002739A KR1020217042875A KR20217042875A KR20220002739A KR 20220002739 A KR20220002739 A KR 20220002739A KR 1020217042875 A KR1020217042875 A KR 1020217042875A KR 20217042875 A KR20217042875 A KR 20217042875A KR 20220002739 A KR20220002739 A KR 20220002739A
Authority
KR
South Korea
Prior art keywords
display
user
touch
input
user interface
Prior art date
Application number
KR1020217042875A
Other languages
English (en)
Other versions
KR102490421B1 (ko
Inventor
레이몬드 에스. 세풀베다
춘 킨 마이너 웡
패트릭 엘. 코프만
딜란 알. 에드워즈
에릭 랜스 윌슨
그레그 에스. 스즈키
크리스토퍼 아이. 윌슨
로렌스 와이. 양
안드레 소우자 도스 산토스
제프리 티. 번스타인
던칸 알. 커르
존 비. 모렐
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Priority to KR1020237001774A priority Critical patent/KR20230014873A/ko
Publication of KR20220002739A publication Critical patent/KR20220002739A/ko
Application granted granted Critical
Publication of KR102490421B1 publication Critical patent/KR102490421B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1647—Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Digital Computer Display Output (AREA)

Abstract

터치 감응형 이차 디스플레이를 동적으로 업데이트하기 위한 시스템들, 디바이스들, 및 방법들이 본 명세서에 개시된다. 예시적인 방법은 애플리케이션을 열라는 요청을 수신하는 단계, 및 이에 응답하여, (i) 일차 디스플레이 상에, 애플리케이션과 연관된 복수의 사용자 인터페이스(UI) 객체들을 디스플레이하는 단계 - 복수는 연관된 콘텐츠와 함께 디스플레이되는 제1 UI 객체 및 연관된 콘텐츠 없이 디스플레이되는 다른 UI 객체들을 포함함 -; 및 (ii) 터치 감응형 이차 디스플레이 상에, 복수의 UI 객체들을 표현하는 어포던스들의 세트를 디스플레이하는 단계를 포함한다. 방법은, 또한, 터치 감응형 이차 디스플레이를 통해, 제1 어포던스로부터 제2 어포던스를 향하는 방향으로의 스와이프 제스처를 검출하는 단계를 포함하며, 제1 어포던스는 제1 UI 객체를 표현하고 제2 어포던스는 별개의 제2 UI 객체를 표현한다. 스와이프 제스처를 검출한 것에 응답하여, 방법은 제2 UI 객체에 대한 연관된 콘텐츠를 디스플레이하도록 일차 디스플레이를 업데이트하는 단계를 포함한다.

Description

터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들{SYSTEMS, DEVICES, AND METHODS FOR DYNAMICALLY PROVIDING USER INTERFACE CONTROLS AT A TOUCH-SENSITIVE SECONDARY DISPLAY}
개시된 실시예들은 키보드에 관한 것이고, 더 구체적으로는, 동적 입출력(I/O) 디바이스를 통해 입력을 수신하기 위한 개선된 기술에 관한 것이다.
종래의 키보드는 정보(예컨대, 글자들)를 컴퓨팅 디바이스 내에 입력하기 위한 임의의 수의 물리적 키들을 포함한다. 전형적으로, 사용자는 키를 누르거나 다른 방식으로 이동가능하게 작동시켜서, 키에 대응하는 입력을 제공한다. 글자들에 대한 입력들을 제공하는 것 외에도, 키보드는 기능 입력들에 관련되는 이동가능하게 작동되는 키들을 포함할 수 있다. 예를 들어, 키보드는 "이스케이프(escape)" 또는 "esc" 키를 포함하여, 사용자가 이스케이프를 활성화시키거나 기능을 벗어나게 할 수 있다. 많은 키보드들에서, 기능 입력들을 위한 기능 키들의 세트는 "기능 열(function row)"에 위치된다. 전형적으로, 문자숫자식 글자들을 위한 키들의 세트는 키보드에서 사용자에게 가장 가까운 부분에 위치되며, 기능 열은 키보드에서 사용자로부터 한층 더 멀리 떨어져 있지만 문자숫자식 글자들에 인접한 부분에 위치된다. 키보드는 또한 전술된 기능 열의 일부분이 아닌 기능 키들을 포함할 수 있다.
랩톱 컴퓨터와 같은 휴대용 컴퓨팅 디바이스의 출현 및 인기와 더불어, 전용 키보드에 의해 소비되는 영역은 디스플레이의 대응하는 크기에 의해 제한될 수 있다. 데스크톱 컴퓨터용 주변기기 키보드와 비교하면, 휴대용 컴퓨팅 디바이스의 컴포넌트인 전용 키보드는 더 적은 키들, 더 작은 키들, 또는 함께 더 밀집되어 휴대용 컴퓨팅 디바이스의 전체 크기를 더 작게 하는 키들을 가질 수 있다.
종래의 전용 키보드는 디스플레이 상에서의 변화와는 무관하게 정적이고, 시간적으로 고정되어 있다. 또한, 스크린 상에 디스플레이되는 소프트웨어 애플리케이션의 기능들은, 전형적으로, 사용자가 마우스를 사용함으로써 상호작용하게 되는 툴바(toolbar)들 및 메뉴들을 통해 액세스된다. 이는, 주기적으로, 사용자가 모드들을 스위칭하고 그의/그녀의 양손의 위치를 키보드와 마우스 사이에서 움직일 것을 요구한다. 대안으로, 애플리케이션의 기능들은 기억 및 실시를 요구하는 복잡한 키 조합들을 통해 액세스된다. 이와 같이, 종래의 시스템들의 단점들을 다루는 I/O 디바이스(및 I/O 디바이스를 위한 방법)를 제공하는 것이 바람직하다.
본 명세서에 기술되는 실시예들은 동적 및 공간 효율적 I/O 디바이스들 및 방법들을 제공함으로써 상기의 단점들을 다룬다. 그러한 디바이스들 및 방법들은, 선택적으로, 종래의 입력 디바이스들 및 방법들을 보완하거나 대체한다. 그러한 디바이스들 및 방법들은, 또한, 사용자에게 요구되는 모드 스위칭(예컨대, 키보드와 마우스 사이에서의 사람의 양손을 이동시키는 것, 및 또한, 키보드로부터 디스플레이로 사람의 양눈을 이동시키는 것)의 양을 감소시키고, 이에 의해, 원하는 기능을 활성화시키기 위해 필요한 입력들의 수를 감소시킨다(예컨대, 하기에서 더 상세히 설명되는 바와 같이, 메뉴 옵션들을 선택하는 데 필요한 입력들의 수는 감소됨). 그러한 디바이스들 및 방법들은, 또한, 더 많은 정보가 제한된 스크린 상에서 이용가능하게 된다(예컨대, 터치 감응형 이차 디스플레이는 사용자에게 더 많은 정보를 제공하는 데 사용되고, 이러한 정보는 제한된 스크린 공간을 사용하여 효율적으로 제시됨). 그러한 디바이스들 및 방법들은, 또한, 예컨대 터치 감응형 이차 디스플레이(104) 상에서 정보가 더 구별가능하게 되도록 강조 효과들을 제공함으로써, 터치 감응형 이차 디스플레이 또는 일차 디스플레이 중 어느 하나로 지향되는 사용자로부터의 연속적인 입력들이 디바이스가 출력들 - 출력들은 이어서 사용자로부터의 추가 입력들을 가능하게 하기 위해 사용됨 - 을 제공하게 하도록, 지속되는 상호작용들을 제공함으로써(예컨대, 하기에서 논의되는 바와 같이, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써, 사용자들이 일차 디스플레이 상에서 정보가 어떻게 렌더링될 것인지를 빠르게 미리보게 하는 색상 선택자가 제공됨), 그리고 원하는 결과들을 달성하기 위해 사용자들로부터의 필요한 더 적은 상호작용들에 의해(예컨대, 하기에서 논의되는 바와 같이, 단일 생체 측정 입력을 이용하여, 사용자들이 그들의 디바이스들에 로그인하게 함) 개선된 사람-기계 인터페이스들을 제공한다. 이러한 이유들 및 하기에서 논의되는 것들로 인해, 본 명세서에 기술되는 디바이스들 및 방법들은 전자 디바이스들의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
(A1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, "터치 스크린 디스플레이"로도 지칭되는 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 컴퓨팅 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 주변기기 입력 메커니즘(222)(즉, 독립형 디스플레이)의 일부로서 포함되거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은 일차 디스플레이 상에 제1 사용자 인터페이스를 디스플레이하는 단계 - 제1 사용자 인터페이스는 하나 이상의 사용자 인터페이스 요소들을 포함함 -; 하나 이상의 사용자 인터페이스 요소들 중에서 일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 식별하는 단계; 일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소가 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관되는지의 여부를 판정하는 단계; 및, 일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소가 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관된다는 판정에 따라, 터치 스크린 디스플레이 상에 제2 사용자 인터페이스를 디스플레이하는 단계를 포함하며, 제2 사용자 인터페이스는 하기를 포함한다:(A) 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트; 및(B) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스.
일차 디스플레이 상에서 이루어진 포커스의 변경들에 응답하여 터치 감응형 이차 디스플레이에 애플리케이션 특정 및 시스템 레벨 어포던스들을 디스플레이하는 것은 사용자에게 터치 감응형 이차 디스플레이를 통해 직접적으로 이용가능한 액세스가능한 어포던스들을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 직접적으로 액세스가능하게 통하는 액세스가능한 어포던스들을 제공하는 것은 (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 마찬가지로, 터치 감응형 이차 디스플레이 상의 애플리케이션 특정 어포던스들의 디스플레이는 일차 디스플레이 상에 현재 포커스를 두고 있는 애플리케이션과 연관된 어포던스들을 제공함으로써 디바이스의 내부 상태를 나타낸다.
(A2) A1의 방법의 일부 실시예들에서, 컴퓨팅 시스템은, (i) 일차 디스플레이, 프로세서, 메모리, 및 일차 컴퓨팅 디바이스 통신 회로부를 포함하는 일차 컴퓨팅 디바이스; 및 (ii) 하우징, 터치 스크린 디스플레이, 물리적 입력 메커니즘, 및 일차 컴퓨팅 디바이스 통신 회로부와 통신하기 위한 입력 디바이스 통신 회로부를 포함하는 입력 디바이스 - 입력 디바이스는 일차 컴퓨팅 디바이스와는 별개이고 그로부터 분리되어 있음 - 를 추가로 포함한다.
(A3) A1 또는 A2의 방법의 일부 실시예들에서, 물리적 입력 메커니즘은 복수의 물리적 키들을 포함한다.
(A4) A1 내지 A3 중 어느 하나의 방법의 일부 실시예들에서, 물리적 입력 메커니즘은 터치패드를 포함한다.
(A5) A1 내지 A4 중 어느 하나의 방법의 일부 실시예들에서, 애플리케이션은 제1 사용자 인터페이스의 전경에서 프로세서에 의해 실행된다.
(A6) A1 내지 A5 중 어느 하나의 방법의 일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는, 선택 시, 터치 스크린 디스플레이 상에서의, 시스템 레벨 기능들에 대응하는 복수의 시스템 레벨 어포던스들의 디스플레이를 야기하도록 구성된다.
(A7) A1 내지 A3 중 어느 하나의 방법의 일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는 전력 제어부 또는 이스케이프 제어부 중 하나에 대응한다.
(A8) A1 내지 A7 중 어느 하나의 방법의 일부 실시예들에서, 제2 사용자 인터페이스 상에 디스플레이된 어포던스들 중 적어도 하나는 다기능 어포던스이다.
(A9) A8의 방법의 일부 실시예들에서, 방법은, 다기능 어포던스를 선택하는 사용자 터치 입력을 검출하는 단계; 사용자 터치 입력이 제1 타입에 대응한다는 판정에 따라, 다기능 어포던스와 연관된 제1 기능을 수행하는 단계; 및 사용자 터치 입력이 제1 타입과는 별개인 제2 타입에 대응한다는 판정에 따라, 다기능 어포던스와 연관된 제2 기능을 수행하는 단계를 추가로 포함한다.
(A10) A1 내지 A9 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 활성 상태 사용자 인터페이스 요소가 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관되지 않는다는 판정에 따라, 터치 스크린 디스플레이 상에 제3 사용자 인터페이스를 디스플레이하는 단계를 추가로 포함하고,
제3 사용자 인터페이스는 하기를 포함한다: (C) 컴퓨팅 시스템의 운영 체제 제어부들에 대응하고, 하나 이상의 어포던스들의 제1 세트와는 별개인 하나 이상의 어포던스들의 제2 세트.
(A11) A10의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는, (B) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하는 운영 체제 제어부들의 확장된 세트이다.
(A12) A1 내지 A11 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 어포던스들의 제1 세트의 하나의 어포던스를 선택하는 사용자 터치 입력을 검출하는 단계; 및 사용자 터치 입력을 검출한 것에 응답하여, 애플리케이션의 기능들에 대응하는 어포던스들의 상이한 세트를 디스플레이하는 단계; 및 적어도 하나의 시스템 레벨 어포던스의 디스플레이를 유지하는 단계를 추가로 포함한다.
(A13) A12의 방법의 일부 실시예들에서, 방법은, 적어도 하나의 시스템 레벨 어포던스를 선택하는 후속의 사용자 터치 입력을 검출하는 단계; 및 후속의 사용자 터치 입력을 검출한 것에 응답하여, 시스템 레벨 기능들에 대응하는 복수의 시스템 레벨 어포던스들 및 애플리케이션에 대응하는 적어도 하나의 애플리케이션 레벨 어포던스를 디스플레이하는 단계를 추가로 포함한다.
(A14) A1 내지 A13 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 터치 스크린 디스플레이 상에 제2 사용자 인터페이스를 디스플레이한 후, 하나 이상의 사용자 인터페이스 요소들 중에서 일차 디스플레이 상에 포커스를 두고 있는 제2 활성 상태 사용자 인터페이스 요소를 식별하는 단계; 제2 활성 상태 사용자 인터페이스 요소가 컴퓨팅 디바이스에 의해 실행되는 상이한 애플리케이션에 대응하는지의 여부를 판정하는 단계; 및 제2 활성 상태 사용자 인터페이스 요소가 상이한 애플리케이션에 대응한다는 판정에 따라, 터치 스크린 디스플레이 상에 제4 사용자 인터페이스를 디스플레이하는 단계를 추가로 포함하고, 제4 사용자 인터페이스는 하기를 포함한다: (D) 상이한 애플리케이션에 대응하는 하나 이상의 어포던스들의 제3 세트; 및 (E) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스.
(A15) A1 내지 A14 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 제2 활성 상태 사용자 인터페이스 요소를 식별한 후, 상이한 애플리케이션과 연관되지 않는 미디어 아이템이 컴퓨팅 시스템에 의해 재생되는 중인지의 여부를 판정하는 단계; 및 미디어 아이템이 컴퓨팅 시스템에 의해 재생되는 중이라는 판정에 따라, 터치 스크린 디스플레이 상에 미디어 아이템을 제어하기 위한 적어도 하나의 지속적 어포던스를 디스플레이하는 단계를 추가로 포함한다.
(A16) A15의 방법의 일부 실시예들에서, 적어도 하나의 지속적 어포던스는 미디어 아이템에 대응하는 피드백을 디스플레이한다.
(A17) A1 내지 A16 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 오버라이드(override) 키에 대응하는 사용자 입력을 검출하는 단계; 및 사용자 입력을 검출한 것에 응답하여, 터치 스크린 디스플레이 상에 제2 사용자 인터페이스의 하나 이상의 어포던스들의 적어도 제1 세트를 디스플레이하는 것을 중지하는 단계; 및 디폴트 기능 키들의 제1 세트를 디스플레이하는 단계를 추가로 포함한다.
(A18) A17의 방법의 일부 실시예들에서, 방법은, 디폴트 기능 키들의 제1 세트를 디스플레이한 후, 터치 스크린 디스플레이 상에서 터치 스크린 디스플레이의 주축에 실질적으로 평행인 방향으로의 스와이프 제스처를 검출하는 단계; 및 스와이프 제스처를 검출한 것에 응답하여, 적어도 하나의 별개의 기능 키와 함께 디폴트 기능 키들의 제2 세트를 디스플레이하는 단계를 추가로 포함한다.
(A19) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 A1 내지 A18의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(A20) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 A1 내지 A18의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(A21) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 A1 내지 A18의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(A22) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 A1 내지 A18의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(B1) 일부 실시예들에 따르면, 입력 디바이스가 제공된다. 입력 디바이스는 복수의 컴포넌트들을 적어도 부분적으로 봉입하는 하우징을 포함하고, 복수의 컴포넌트들은: (i) (예컨대, 도 1a의 키보드(106) 상의) 복수의 물리적 키들 - 복수의 물리적 키들은 적어도 알파벳의 각각의 문자에 대한 분리된 키들을 포함함 -; (ii) 복수의 물리적 키들에 인접하게 배치된 터치 감응형 이차 디스플레이("터치 스크린 디스플레이"로도 지칭됨); 및 (iii) 입력 디바이스에 인접하게 배치된 컴퓨팅 디바이스(예컨대, 컴퓨팅 시스템(100 또는 200))과 통신하도록 구성된 단거리 통신 회로부를 포함하고, 컴퓨팅 디바이스는 컴퓨팅 디바이스 디스플레이, 프로세서, 및 메모리를 포함하고, 단거리 통신 회로부는, 복수의 물리적 키들 중 임의의 물리적 키의 키 누르기 및 터치 스크린 디스플레이 상에서의 터치 입력들을 컴퓨팅 디바이스로 송신하도록; 그리고 컴퓨팅 디바이스 디스플레이 상의 현재 포커스에 기초하여 터치 스크린 디스플레이 상에서의 어포던스들의 디스플레이를 변경하기 위한 명령어들을 수신하도록 구성된다. 일부 실시예들에서, 애플리케이션이 컴퓨팅 디바이스 디스플레이 상에 포커스를 두고 있는 경우, 터치 스크린 디스플레이는 하기를 디스플레이하도록 구성된다: (A) 포커스를 두고 있는 애플리케이션에 대응하는 하나 이상의 어포던스들; 및 (B) 선택 시, 시스템 레벨 기능들에 대응하는 복수의 어포던스들의 디스플레이를 야기하도록 구성된 적어도 하나의 시스템 레벨 어포던스.
일차 디스플레이 상에서 이루어진 포커스의 변경들에 응답하여 터치 감응형 이차 디스플레이에 애플리케이션 특정 및 시스템 레벨 어포던스들을 디스플레이하는 것은 사용자에게 터치 감응형 이차 디스플레이를 통해 직접적으로 이용가능한 액세스가능한 어포던스들을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 직접적으로 액세스가능하게 통하는 액세스가능한 어포던스들을 제공하는 것은 (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 더욱이, 일차 디스플레이에서의 포커스의 변경들에 기초하여 터치 감응형 이차 디스플레이에 디스플레이되는 어포던스들을 동적으로 업데이트함으로써, 터치 감응형 이차 디스플레이는 제한된 스크린 상에서 더 많은 정보가 이용가능하게 되게 할 수 있으며, 원하는 옵션들이 필요할 때 바로 사용자들에게 그러한 옵션들이 제공됨을 보장하는 것을 돕는다(이에 의해, 전력 사용량을 감소시키고 배터리 수명을 연장할 수 있는데, 그 이유는 사용자들이 그러한 원하는 옵션들을 찾아내기 위해 계층구조적 메뉴들을 통해 검색하는 데 전력 및 배터리 수명을 낭비할 필요가 없기 때문임).
(B2) B1의 입력 디바이스의 일부 실시예들에서, 애플리케이션이 컴퓨팅 디바이스 디스플레이 상에 포커스를 두고 있는 경우, 터치 스크린 디스플레이는 전력 제어 어포던스 및 이스케이프 어포던스 중 적어도 하나의 어포던스를 디스플레이하도록 추가로 구성된다.
(B3) B1 또는 B2의 입력 디바이스의 일부 실시예들에서, 입력 디바이스는 키보드이다.
(B4) B3의 입력 디바이스의 일부 실시예들에서, 컴퓨팅 디바이스는 키보드를 포함하는 랩톱 컴퓨터이다.
(B5) B3의 입력 디바이스의 일부 실시예들에서, 컴퓨팅 디바이스는 데스크톱 컴퓨터이고 키보드는 데스크톱 컴퓨터와는 별개이다.
(B6) B1 내지 B5 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 입력 디바이스는 랩톱 컴퓨터에 통합된다.
(B7) B1 내지 B6 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 복수의 물리적 키들은 QWERTY 키보드를 포함한다.
(B8) B1 내지 B7 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 알파벳은 라틴 알파벳에 대응한다.
(B9) B1 내지 B8 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 입력 디바이스는 터치패드를 포함한다.
(B10) B1 내지 B9 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 입력 디바이스는 길이가 18 인치 이상인 주요 치수를 갖는다.
(B11) B1 내지 B10 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 단거리 통신 회로부는 컴퓨팅 디바이스에 15 피트 미만에서 통신하도록 구성된다.
(B12) B1 내지 B11 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 단거리 통신 회로부는 컴퓨팅 디바이스에 대한 유선 또는 무선 접속에 대응한다.
(B13) B1 내지 B12 중 어느 하나의 입력 디바이스의 일부 실시예들에서, 입력 디바이스는 터치 스크린 디스플레이에 임베드된 지문 센서를 포함한다.
(C1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, "터치 스크린 디스플레이"로도 지칭되는 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은, 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스를 디스플레이하는 단계; 터치 스크린 디스플레이 상에 제2 사용자 인터페이스 - 제2 사용자 인터페이스는 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트를 포함하고, 하나 이상의 어포던스들의 제1 세트는 애플리케이션의 제1 부분에 대응함 - 를 디스플레이하는 단계; 터치 스크린 디스플레이 상에서 스와이프 제스처를 검출하는 단계; 스와이프 제스처가 제1 방향으로 수행되었다는 판정에 따라, 터치 스크린 디스플레이 상에 애플리케이션에 대응하는 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트의 적어도 하나의 어포던스는 하나 이상의 어포던스들의 제1 세트와는 별개이고, 하나 이상의 어포던스들의 제2 세트는 또한 애플리케이션의 제1 부분에 대응함 - 를 디스플레이하는 단계; 및 스와이프 제스처가 제1 방향에 대해 실질적으로 수직인 제2 방향으로 수행되었다는 판정에 따라, 터치 스크린 디스플레이 상에 애플리케이션에 대응하는 하나 이상의 어포던스들의 제3 세트 - 하나 이상의 어포던스들의 제3 세트는 하나 이상의 어포던스들의 제2 세트와는 별개이고, 하나 이상의 어포던스들의 제3 세트는 애플리케이션의 제1 부분과는 별개인 애플리케이션의 제2 부분에 대응함 - 를 디스플레이하는 단계를 포함한다.
스와이프 제스처들에 응답하여 사용자가 터치 감응형 이차 디스플레이에서 애플리케이션 특정 어포던스들을 빠르게 내비게이팅하게 하는 것은 사용자에게 터치 감응형 이차 디스플레이를 통해 스크롤하고 원하는 기능을 빠르게 찾아내기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 스크롤하고 원하는 기능을 빠르게 찾아내기 위한 편리한 방식을 제공하는 것은 (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이, 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 더욱이, 이차 디스플레이에서의 스와이프 제스처들에 응답하여 터치 감응형 이차 디스플레이에 디스플레이되는 어포던스들을 동적으로 업데이트함으로써, 이차 디스플레이는 제한된 스크린 상에서 더 많은 정보가 이용가능하게 되게 할 수 있으며, 원하는 옵션들이 필요할 때 바로 사용자들에게 그러한 옵션들이 제공됨을 보장하는 것을 돕는다(이에 의해, 전력 사용량을 감소시키고 배터리 수명을 연장할 수 있는데, 그 이유는 사용자들이 그러한 원하는 옵션들을 찾아내기 위해 계층구조적 메뉴들을 통해 검색하는 데 전력 및 배터리 수명을 낭비할 필요가 없기 때문임).
(C2) C1의 방법의 일부 실시예들에서, 제2 부분은 스와이프 제스처를 검출하기 전에 일차 디스플레이 상에서 제1 사용자 인터페이스 내의 콤팩트 뷰에 디스플레이되고, 방법은, 스와이프 제스처가 제1 방향에 실질적으로 수직인 제2 방향으로 수행되었다는 판정에 따라, 일차 디스플레이 상에서 제1 사용자 인터페이스 내의 확장된 뷰에 제2 부분을 디스플레이하는 단계를 포함한다.
(C3) C1의 방법의 일부 실시예들에서, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스는 풀스크린 모드에서 일차 디스플레이 상에 디스플레이되고, 터치 스크린 디스플레이 상에 디스플레이된 하나 이상의 어포던스들의 제1 세트는 풀스크린 모드에 대응하는 제어부들을 포함한다.
(C4) C1 내지 C3 중 어느 하나의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트 및 하나 이상의 어포던스들의 제3 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함한다.
(C5) C1 내지 C4 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 터치 스크린 디스플레이 상에 하나 이상의 어포던스들의 제3 세트를 디스플레이한 후, 제1 사용자 인터페이스 상의 제1 부분을 선택하는 사용자 입력을 검출하는 단계; 및 사용자 입력을 검출한 것에 응답하여, 터치 스크린 디스플레이 상에 애플리케이션의 제2 부분에 대응하는 하나 이상의 어포던스들의 제3 세트를 디스플레이하는 것을 중지하는 단계; 및 애플리케이션의 제1 부분에 대응하는 하나 이상의 어포던스들의 제2 세트를 디스플레이하는 단계를 포함한다.
(C6) C1 내지 C5 중 어느 하나의 방법의 일부 실시예들에서, 제1 방향은 터치 스크린 디스플레이의 주요 치수에 실질적으로 평행하다.
(C7) C1 내지 C5 중 어느 하나의 방법의 일부 실시예들에서, 제1 방향은 터치 스크린 디스플레이의 주요 치수에 실질적으로 수직이다.
(C8) C1 내지 C7 중 어느 하나의 방법의 일부 실시예들에서, 제1 부분은 애플리케이션의 메뉴, 탭, 폴더, 툴 세트, 또는 툴바 중 하나이고, 제2 부분은 애플리케이션의 메뉴, 탭, 폴더, 툴 세트, 또는 툴바 중 하나이다.
(C9) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드, 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 C1 내지 C8의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(C10) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 C1 내지 C8의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(C11) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 C1 내지 C8의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(C12) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 C1 내지 C8의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(D1) 일부 실시예들에 따르면, 풀스크린 모드에 있는 동안에 애플리케이션의 기능을 유지하는 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, "터치 스크린 디스플레이"로도 지칭되는 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은, 표준 모드에서 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 포함함 - 를 디스플레이하는 단계; 일차 디스플레이 상에 풀스크린 모드에서 애플리케이션에 대한 제1 사용자 인터페이스의 적어도 일부분을 디스플레이하기 위한 사용자 입력을 검출하는 단계; 및 사용자 입력을 검출한 것에 응답하여, 일차 디스플레이 상에 제1 사용자 인터페이스 내의 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 디스플레이하는 것을 중지하는 단계; 풀스크린 모드에서 일차 디스플레이 상에, 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 디스플레이하는 단계; 및인간의 개입 없이, 터치 스크린 디스플레이 상에, 애플리케이션을 제어하기 위한 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트에 대응함 - 를 자동으로 디스플레이하는 단계를 포함한다.
애플리케이션의 일부분이 일차 디스플레이 상에 풀스크린 모드에서 디스플레이되는 동안에 터치 감응형 이차 디스플레이를 통해 애플리케이션을 제어하기 위한 어포던스들을 제공하는 것은 사용자들이 일차 디스플레이 상에 더 이상 직접 디스플레이되지 않을 수도 있는 기능들에 계속해서 액세스하게 한다. 사용자들이 일차 디스플레이 상에 더 이상 직접적으로 디스플레이되지 않을 수도 있는 기능들에 계속해서 액세스하게 하는 것은 사용자에게 일차 디스플레이 상에 매립되었을 수 있는 기능들에 액세스하기 위한 빠르고 편리한 방식을 제공하며, (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이, 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 이에 의해, 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 따라서, 콘텐츠가 풀스크린 모드에서 (방해 없이) 제시될 수 있음을 보장하기 위해 메뉴 옵션들을 일차 디스플레이로부터 그리고 터치 감응형 이차 디스플레이로 시프트시킴으로써, 사용자들은 디바이스와의 상호작용들을 지속할 수 있고, 그들의 작업흐름은 풀스크린 모드로 시프트할 때 중단되지 않는다. 추가로, 풀스크린 콘텐츠를 보는 동안에 메뉴 옵션들에 액세스하기 위해 더 적은 상호작용들이 요구되는데, 이는 일차 디스플레이 상의 콘텐츠 뒤에 매립되었을 수 있는 메뉴 옵션들이 쉽고 빠른 액세스를 위해 (그리고 풀스크린 모드를 나가고 이어서 메뉴 옵션들을 이리저리 찾을 필요 없이) 터치 감응형 이차 디스플레이 상에 제시되기 때문이며, 이에 의해, 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
(D2) D1의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트이다.
(D3) D1 또는 D2의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 풀스크린 모드에 대응하는 제어부들을 포함한다.
(D4) D1 내지 D3 중 어느 하나의 방법의 일부 실시예들에서, 방법은 터치 스크린 디스플레이 상에 디스플레이된 어포던스들의 제2 세트의 하나의 어포던스를 선택하는 사용자 터치 입력을 검출하는 단계; 및 사용자 터치 입력을 검출한 것에 응답하여, 어포던스들의 제2 세트의 선택된 하나의 어포던스에 따라 풀스크린 모드에서 일차 디스플레이 상에 디스플레이되고 있는 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 변경하는 단계를 포함한다.
(D5) D1 내지 D4 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 풀스크린 모드에서 일차 디스플레이 상에 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 디스플레이한 후, 풀스크린 모드를 나가기 위한 후속의 사용자 입력을 검출하는 단계; 및 후속의 사용자 입력을 검출한 것에 응답하여, 표준 모드에서 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 포함함 - 를 디스플레이하는 단계; 및 터치 스크린 디스플레이 상에서 애플리케이션을 제어하기 위한 하나 이상의 어포던스들의 제2 세트의 적어도 서브세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트에 대응함 - 의 디스플레이를 유지하는 단계를 포함한다.
(D6) D1 내지 D5 중 어느 하나의 방법의 일부 실시예들에서, 풀스크린 모드에서 일차 디스플레이 상에 애플리케이션에 대한 제1 사용자 인터페이스의 적어도 일부분을 디스플레이하기 위한 사용자 입력은 터치 스크린 디스플레이 상에서 검출된 터치 입력 및 일차 디스플레이 상의 제1 사용자 인터페이스 내에서 선택된 제어부 중 적어도 하나이다.
(D7) D1 내지 D6 중 어느 하나의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함한다.
(D8) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 D1 내지 D7의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(D9) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 D1 내지 D7의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(D10) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 D1 내지 D7의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(D11) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 D1 내지 D7의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(E1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, "터치 스크린 디스플레이"로도 지칭되는 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은, 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스를 디스플레이하는 단계; 터치 스크린 디스플레이 상에, 제2 사용자 인터페이스 - 제2 사용자 인터페이스는 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트를 포함함 - 를 디스플레이하는 단계; 통지를 검출하는 단계; 및통지를 검출한 것에 응답하여, 제2 사용자 인터페이스에서, 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트 및 터치 스크린 디스플레이 상의 검출된 통지 - 검출된 통지는 일차 디스플레이 상에 디스플레이되지 않음 - 의 적어도 일부분을 동시에 디스플레이하는 단계를 포함한다.
터치 감응형 이차 디스플레이에 수신된 통지들을 디스플레이하는 것은 사용자들이 일차 디스플레이 상에서 중단되지 않은 방식으로 그들의 작업을 계속하게 하고, 그들이 터치 감응형 이차 디스플레이를 통해 수신된 통지들과 상호작용하게 한다. 사용자들이 일차 디스플레이 상에서 중단되지 않은 방식으로 그들의 작업을 계속하게 하는 것, 및 그들이 터치 감응형 이차 디스플레이를 통해 수신된 통지들과 상호작용하게 하는 것은 (예컨대, 사용자가 터치 감응형 이차 디스플레이를 통해 직접적으로, 그리고 수신된 통지를 다루기 위해 그들의 작업흐름을 중단할 필요 없이, 수신된 통지들에 편리하게 액세스하는 것을 도움으로써) 사용자들에게 수신된 통지들을 리뷰하고 그들과 상호작용하기 위한 빠르고 편리한 방식을 제공하고, 이에 의해, 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 한다. 더욱이, 터치 감응형 이차 디스플레이에서 통지들을 수신한 것을 디스플레이하는 것은, 수신된 통지가, 일부 실시예들에서, 터치 감응형 이차 디스플레이에서 다른 어포던스들에 오버레이된 것으로 디스플레이됨에 따라, 터치 감응형 이차 디스플레이에서의 수신된 통지들에 대한 강조 효과를 제공하여, 이에 따라, 수신된 통지가 터치 감응형 이차 디스플레이에서 가시적이고 용이하게 액세스가능함을 보장한다.
(E2) E1의 방법의 일부 실시예들에서, 방법은, 통지를 검출하기 전, 터치 스크린 디스플레이 상에 통지를 디스플레이하기 위해 그리고 일차 디스플레이 상에 통지를 디스플레이하지 않기 위해 통지 설정을 선택하는 사용자 입력을 검출하는 단계를 포함한다.
(E2) E1 또는 E2의 방법의 일부 실시예들에서, 방법은, 터치 스크린 디스플레이 상에서 검출된 통지의 일부분에 대응하는 사용자 터치 입력을 검출하는 단계; 사용자 터치 입력이 제1 타입에 대응한다는 판정에 따라, 터치 스크린 디스플레이 상에서 제2 사용자 인터페이스에 검출된 통지의 일부분을 디스플레이하는 것을 중지하는 단계; 및 사용자 터치 입력이 제1 타입과는 별개인 제2 타입에 대응한다는 판정에 따라, 검출된 통지와 연관된 액션을 수행하는 단계를 포함한다.
(E4) E1 내지 E3 중 어느 하나의 방법의 일부 실시예들에서, 터치 스크린 디스플레이 상에 디스플레이되는 통지의 일부분은 컴퓨팅 시스템의 사용자에게 검출된 통지에 응답하기 위한 복수의 옵션들 중 하나의 옵션을 선택할 것을 프롬프트한다.
(E5) E1 내지 E4 중 어느 하나의 방법의 일부 실시예들에서, 터치 스크린 디스플레이 상에 디스플레이되는 통지의 일부분은 검출된 통지에 대한 하나 이상의 제안 응답들을 포함한다.
(E6) E1 내지 E5 중 어느 하나의 방법의 일부 실시예들에서, 통지는 착신 인스턴트 메시지, SMS, 이메일, 음성 호출, 또는 영상 호출 중 적어도 하나에 대응한다.
(E6) E1 내지 E5 중 어느 하나의 방법의 일부 실시예들에서, 통지는, 애플리케이션을 닫거나 애플리케이션 내에서 액션을 수행하는 사용자 입력에 응답하여, 컴퓨팅 시스템의 프로세서에 의해 실행되고 있는 애플리케이션에 의해 발행되는 모드 경고에 대응한다.
(E7) E1 내지 E7 중 어느 하나의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하고, 통지는 입력 메커니즘의 하나 이상의 부분들 또는 시스템 레벨 어포던스 중 적어도 하나의 어포던스를 선택하는 사용자 입력에 대응한다.
(E8) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 E1 내지 E7의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(E9) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 E1 내지 E7의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(E10) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 E1 내지 E7의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(E11) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 E1 내지 E7의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(F1) 일부 실시예들에 따르면, 사용자 인터페이스 부분들을 이동시키는 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은, 일차 디스플레이 상에, 사용자 인터페이스 - 사용자 인터페이스는 하나 이상의 사용자 인터페이스 요소들을 포함함 - 를 디스플레이하는 단계; 일차 디스플레이 상에 포커스를 두고 있는 하나 이상의 사용자 인터페이스 요소들 중 활성 상태 사용자 인터페이스 요소 - 활성 상태 사용자 인터페이스 요소는 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관됨 - 를 식별하는 단계; 활성 상태 사용자 인터페이스 요소를 식별한 것에 응답하여, 터치 스크린 디스플레이 상에, 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트를 디스플레이하는 단계; 사용자 인터페이스의 개개의 부분을 이동시키는 사용자 입력을 검출하는 단계; 및 사용자 입력을 검출한 것에 응답하여, 그리고 사용자 입력이 사전정의된 액션 기준들을 만족시킨다는 판정에 따라, 일차 디스플레이 상에 사용자 인터페이스의 개개의 부분을 디스플레이하는 것을 중지하는 단계; 터치 스크린 디스플레이 상에 하나 이상의 어포던스들의 세트의 적어도 서브세트를 디스플레이하는 것을 중지하는 단계; 및터치 스크린 디스플레이 상에, 사용자 인터페이스의 개개의 부분의 표현을 디스플레이하는 단계를 포함한다.
사용자가 일차 디스플레이로부터 그리고 터치 감응형 이차 디스플레이로 사용자 인터페이스 부분들(예컨대, 메뉴들, 통지들 등)을 빠르게 이동시키게 하는 것은 사용자에게 사용자 인터페이스 부분들에 액세스하기 위한 편리하고 커스텀화된 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 사용자 인터페이스 부분들에 액세스하기 위한 편리하고 커스텀화된 방식을 제공하는 것은 (예컨대, 사용자가, 더 적은 상호작용들로, 그리고 이전에 보인(그리고 가능하게는 매립된) 사용자 인터페이스 부분을 찾는 데 시간을 낭비할 필요 없이, 터치 감응형 이차 디스플레이를 통해 직접적으로 사용자 인터페이스 부분들에 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 사용자 인터페이스 부분들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 더욱이, 사용자 입력에 응답하여 터치 감응형 이차 디스플레이에서 사용자 인터페이스 부분들을 디스플레이하는 것은 개개의 사용자 인터페이스 부분들이, 일부 실시예들에서, 터치 감응형 이차 디스플레이에서 다른 어포던스들에 오버레이된 것으로 디스플레이됨에 따라 터치 감응형 이차 디스플레이에서의 사용자 인터페이스 부분들에 대한 강조 효과를 제공하여, 이에 따라, 개개의 사용자 인터페이스 부분이 터치 감응형 이차 디스플레이에서 가시적이고 용이하게 액세스가능함을 보장한다.
(F2) F1의 방법의 일부 실시예들에서, 사용자 인터페이스의 개개의 부분은 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대응하는 메뉴이다.
(F3) F1 또는 F2의 방법의 일부 실시예들에서, 사용자 인터페이스의 개개의 부분은 통지 및 모드 경고 중 하나이다.
(F4) F1 내지 F3 중 어느 하나의 방법의 일부 실시예들에서, 사전정의된 액션 기준들은 사용자 입력이 사용자 인터페이스의 개개의 부분을 일차 디스플레이의 사전정의된 위치로 드래깅하는 드래깅 제스처인 경우에 만족된다.
(F5) F1 내지 F3 중 어느 하나의 방법의 일부 실시예들에서, 사전정의된 액션 기준들은 사용자 입력이 사용자 인터페이스의 개개의 부분을 터치 스크린 디스플레이로 이동시키는 것에 대응하는 사전결정된 입력인 경우에 만족된다.
(F6) F1 내지 F5 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 사용자 입력을 검출한 것에 응답하여, 그리고 사용자 입력이 사전정의된 액션 기준들을 만족시키지 않는다는 판정에 따라, 일차 디스플레이 상에서 사용자 인터페이스의 개개의 부분의 디스플레이를 유지하는 단계; 및 터치 스크린 디스플레이 상에서 하나 이상의 어포던스들의 세트의 디스플레이를 유지하는 단계를 포함한다.
(F7) F1 내지 F6 중 어느 하나의 방법의 일부 실시예들에서, 하나 이상의 어포던스들의 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하고, 방법은, 터치 스크린 디스플레이 상에 사용자 인터페이스의 개개의 부분의 표현을 디스플레이한 후, 터치 스크린 디스플레이 상에서 적어도 하나의 시스템 레벨 어포던스의 디스플레이를 유지하는 단계를 포함한다.
(F8) F1 내지 F7 중 어느 하나의 방법의 일부 실시예들에서, 사용자 인터페이스의 개개의 부분의 표현은 터치 스크린 디스플레이 상에서 하나 이상의 어포던스들의 세트 상에 오버레이된다.
(F9) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 F1 내지 F8의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(F10) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 F1 내지 F8의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(F11) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 F1 내지 F8의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(F12) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 F1 내지 F8의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(G1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은 애플리케이션을 열라는 요청을 수신하는 단계를 포함한다. 요청을 수신한 것에 응답하여, 방법은, (i) 일차 디스플레이 상에서, 컴퓨팅 시스템 상에서 실행되는 애플리케이션과 연관된 복수의 사용자 인터페이스 객체들(예컨대, 복수의 사용자 인터페이스 객체들은 Safari 내의 탭들, 사진 브라우징 애플리케이션 내의 개별 사진들, 비디오 편집 애플리케이션 내의 비디오의 개별 프레임들 등에 대응함)을 디스플레이하는 단계 - 복수는 그의 연관된 콘텐츠와 함께 디스플레이되는 제1 사용자 인터페이스 객체 및 그들의 연관된 콘텐츠 없이 디스플레이되는 다른 사용자 인터페이스 객체들을 포함함 -; 및 (ii) 터치 감응형 이차 디스플레이 상에, 복수의 사용자 인터페이스 객체들 중 하나의 사용자 인터페이스 객체를 각각 표현하는(즉, 그에 대응하는) 어포던스들의 세트를 디스플레이하는 단계를 포함한다. 방법은, 또한, 터치 감응형 이차 디스플레이를 통해, 어포던스들의 세트의 제1 어포던스로부터 어포던스들의 세트의 제2 어포던스를 향하는 방향으로의 스와이프 제스처를 검출하는 단계를 포함한다. 일부 실시예들에서, 제1 어포던스는 제1 사용자 인터페이스 객체를 표현하고, 제2 어포던스는 제1 사용자 인터페이스 객체와는 별개인 제2 사용자 인터페이스 객체를 표현한다. 스와이프 제스처를 검출한 것에 응답하여, 방법은, 제1 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하는 것을 중지하고 제2 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하도록 (예컨대, 스와이프 제스처 동안) 일차 디스플레이를 업데이트하는 단계를 포함한다.
터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 사용자가 일차 디스플레이 상의 사용자 인터페이스 객체들(예컨대, 브라우저 탭들)을 통해 빠르게 내비게이팅하게 하는 것은 사용자에게 사용자 인터페이스 객체들을 통해 신속하게 내비게이팅하기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 사용자 인터페이스 객체들을 통해 빠르게 내비게이팅하기 위한 편리한 방식을 제공하는 것(및 사용자 인터페이스 객체들을 통해 내비게이팅하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 사용자 인터페이스 객체들을 통해 내비게이팅하는 데 더 적은 상호작용들을 필요로 하는 것)은, (예컨대, 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 내비게이팅하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-기계 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 더 빠르고 효율적으로 내비게이팅할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 게다가, 사용자들이 터치 감응형 디스플레이에서 입력(예컨대, 스와이프 제스처)을 제공하여 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 내비게이팅함에 따라, 터치 감응형 디스플레이에서의 각각의 접촉된 어포던스(사용자 인터페이스 객체들 중 하나에 대응함)는 다른 어포던스들로부터 시각적으로 구별되어(예컨대, 개개의 접촉된 어포던스는 확대되고 경계부가 하이라이트될 수 있음), 이에 따라, 터치 감응형 이차 디스플레이 상에 디스플레이된 정보가 사용자에게 더 구별가능해지게 한다.
(G2) G1의 방법의 일부 실시예들에서, 방법은, 터치 감응형 이차 디스플레이를 가로지르는 스와이프 제스처의 연속적인 이동 - 스와이프 제스처가 제3 사용자 인터페이스 객체를 표현하는 제3 어포던스와 접촉함 - 을 검출하는 단계를 포함한다. 스와이프 제스처가 제3 어포던스와 접촉하는 것을 검출한 것에 응답하여, 방법은 제3 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하도록 일차 디스플레이를 업데이트하는 단계를 포함한다.
(G3) G1 또는 G2의 방법의 일부 실시예들에서, 어포던스의 세트 내의 각각의 어포던스는 복수 중 개개의 사용자 인터페이스 객체에 대한 개개의 연관된 콘텐츠의 표현을 포함한다.
(G4) G1 내지 G3 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 스와이프 제스처를 검출하기 전, 제1 어포던스 위에서의 터치 감응형 이차 디스플레이와의 초기 접촉을 검출하는 단계를 포함한다. 초기 접촉을 검출한 것에 응답하여, 방법은 제1 어포던스의 확대 레벨(또는 디스플레이 크기)을 증가시키는 단계를 포함한다.
(G5) G1 내지 G4 중 어느 하나의 방법의 일부 실시예들에서, 애플리케이션은 웹 브라우징 애플리케이션이고, 복수의 사용자 인터페이스 객체들 각각은 웹 브라우징 탭들에 대응한다.
(G6) G6의 방법의 일부 실시예들에서, 방법은 일차 디스플레이 상에서 웹 브라우징 애플리케이션의 URL 입력 부분에서의 입력을 검출하는 단계를 포함한다. 입력을 검출한 것에 응답하여, 방법은 즐겨찾기 URL들의 표현들을 포함하도록 터치 감응형 이차 디스플레이를 업데이트하는 단계를 포함한다.
(G7) G1 내지 G4 중 어느 하나의 방법의 일부 실시예들에서, 애플리케이션은 사진 브라우징 애플리케이션이고, 복수의 사용자 인터페이스 객체들 각각은 개별 사진들에 대응한다.
(G8) G1 내지 G4 중 어느 하나의 방법의 일부 실시예들에서, 애플리케이션은 비디오 편집 애플리케이션이고, 복수의 사용자 인터페이스 객체는 각각 개개의 비디오 내의 개별 프레임들에 대응한다.
(G9) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 G1 내지 G8의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(G10) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 G1 내지 G8의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(G11) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 G1 내지 G8의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(G12) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 G1 내지 G8의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(H1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은 컴퓨팅 디바이스의 일차 디스플레이 상에 디스플레이된 콘텐츠 내에서 검색하라는 요청을 수신하는 단계를 포함한다(예컨대, 요청은 디스플레이된 웹 페이지 콘텐츠 내의 텍스트를 검색하라는 요청에 대응함). 요청을 수신한 것에 응답하여, 방법은 (i) 일차 디스플레이 상에, 검색에 응답하여 복수의 검색 결과들을 디스플레이하는 단계 - 포커스는 복수의 검색 결과들 중 제1 검색 결과에 있음 -; 및 (ii) 터치 감응형 이차 디스플레이 상에, 복수의 검색 결과들 중 개개의 검색 결과에 각각 대응하는 개개의 표현들을 디스플레이하는 단계를 포함한다. 방법은, 또한, 터치 감응형 이차 디스플레이를 통해, 개개의 표현들 중 한 표현을 선택하는 터치 입력(예컨대, 탭핑 또는 스와이프)을 검출하는 단계 - 표현은 제1 검색 결과와는 별개인, 복수의 검색 결과들 중 제2 검색 결과에 대응함 - 를 포함한다. 입력을 검출한 것에 응답하여, 방법은 일차 디스플레이 상의 포커스를 제2 검색 결과로 변경하는 단계를 포함한다.
터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 사용자가 일차 디스플레이 상의 검색 결과들을 통해 빠르게 내비게이팅하게 하는 것은 사용자에게 검색 결과들을 통해 신속하게 내비게이팅하기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 검색 결과들을 통해 빠르게 내비게이팅하기 위한 편리한 방식을 제공하는 것(및 검색 결과들을 통해 내비게이팅하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 많은 검색 결과들을 통해 빠르게 브라우징하는 데 사용자로부터의 더 적은 상호작용들을 필요로 하는 것)은, (예컨대, 일차 디스플레이 상의 많은 검색 결과들을 통해 내비게이팅하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-기계 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 일차 디스플레이 상의 검색 결과들을 통해 더 빠르고 효율적으로 내비게이팅할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 게다가, 사용자들이 터치 감응형 디스플레이에서 입력(예컨대, 스와이프 제스처)을 제공하여 일차 디스플레이 상의 검색을 통해 내비게이팅함에 따라, 터치 감응형 디스플레이에서의 각각의 접촉된 어포던스(검색 결과들 중 하나에 대응함)는 다른 어포던스들로부터 시각적으로 구별되어(예컨대, 개개의 접촉된 어포던스는 확대되고 경계부가 하이라이트될 수 있음), 이에 따라, 터치 감응형 이차 디스플레이 상에 디스플레이된 정보가 사용자에게 더 구별가능해지게 한다.
(H2) H1의 방법의 일부 실시예들에서, 포커스를 변경하는 것은, 일차 디스플레이 상에서, 특정 검색 결과의 시각적 특성을 수정하는 것(예컨대, 더 큰 폰트 크기를 갖는 특정 검색 결과를 디스플레이하는 것)을 포함한다.
(H3) H1 또는 H2의 방법의 일부 실시예들에서, 방법은 터치 감응형 이차 디스플레이 상의 개개의 표현들 중 적어도 2개를 가로질러 이동하는 제스처를 검출하는 단계를 포함한다. 제스처를 검출한 것에 응답하여, 방법은, 스와이프 제스처들이 개개의 표현들 중 적어도 2개의 표현들을 가로질러 이동함에 따라, 일차 디스플레이 상의 포커스를, 개개의 표현들 중 적어도 2개의 표현들에 대응하는 개개의 검색 결과들로 변경하는 단계를 포함한다.
(H4) H3의 방법의 일부 실시예들에서, 방법은, 제스처의 속력이 임계치 속력을 초과한다는 판정에 따라, 일차 디스플레이 상의 포커스를 개개의 표현들 중 적어도 2개의 표현들에 대응하는 것들(예컨대, 임계 속도를 초과하는 경우, 스와이프 동안에 접촉된 것들에 더하여 더 많은 검색 결과들을 통해 순환함)에 더하여 개개의 검색 결과들로 변경하는 단계를 포함한다.
(H5) H3 또는 H4의 방법의 일부 실시예들에서, 제스처는 스와이프 제스처이다.
(H6) H3 또는 H4의 방법의 일부 실시예들에서, 제스처는 플릭(flick) 제스처이다.
(H7) H1 내지 H6 중 어느 하나의 방법의 일부 실시예들에서, 표현들은 검색 결과들 중 개개의 검색 결과들에 각각 대응하는 틱 마크(tick mark)들이다.
(H8) H7의 방법의 일부 실시예들에서, 틱 마크들은 일차 디스플레이 상의 검색 결과들의 순서에 대응하는 순서로 터치 감응형 이차 디스플레이 상에 일렬로 디스플레이된다.
(H9) H1 내지 H8 중 어느 하나의 방법의 일부 실시예들에서, 콘텐츠 내에서 검색하라는 요청은 콘텐츠 내에서 검색 문자열을 찾아내라는 요청이고, 복수의 검색 결과들은 각각 적어도 검색 문자열을 포함한다.
(H9) H8의 방법의 일부 실시예들에서, 복수의 검색 결과들을 디스플레이하는 것은 복수의 검색 결과들 각각에 대한 검색 문자열을 하이라이트하는 것을 포함한다.
(H10) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 H1 내지 H9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(H11) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 H1 내지 H9의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(H12) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 H1 내지 H9의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(H13) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 H1 내지 H9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(I1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은 일차 디스플레이 상에 캘린더 애플리케이션을 디스플레이하는 단계를 포함한다. 방법은, 또한, 캘린더 애플리케이션과 연관되는 이벤트에 관한 정보를 디스플레이하라는 요청을 수신하는 단계를 포함한다(예를 들어, 요청은 일차 디스플레이 상의 캘린더 애플리케이션 내에 디스플레이되는 이벤트의 선택에 대응함). 요청을 수신한 것에 응답하여, 방법은, (i) 일차 디스플레이 상에, 제1 이벤트에 대한 이벤트 세부사항들을 디스플레이하는 단계 - 이벤트 세부사항들은 이벤트에 대한 시작 시간 및 종료 시간을 포함함 -; 및 (ii) 터치 감응형 이차 디스플레이 상에, 적어도 시작 시간 및 종료 시간을 포함하는 시간 범위를 나타내는 어포던스(예컨대, 사용자 인터페이스 제어부)를 디스플레이하는 단계를 포함한다.
사용자가 터치 감응형 이차 디스플레이에서 이벤트 세부사항들을 빠르고 용이하게 편집하게 하는 것은 사용자에게 여분의 입력들을 수행할 필요 없이(예컨대, 이벤트 상세들을 수정하기 위해 키보드를 사용하는 것과 트랙패드를 사용하는 것 사이에서 전후로 점프할 필요 없이) 이벤트 세부사항들을 빠르게 편집하기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 이벤트 세부사항들을 빠르게 편집하기 위한 편리한 방식을 제공하는 것(및 이벤트 세부사항들을 편집하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 이벤트 세부사항들을 편집한 원하는 결과를 달성하기 위해 더 적은 상호작용들을 필요로 하는 것)은 (예컨대, 특정 이벤트 세부사항들을 빠르게 편집하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 이벤트 세부사항들을 더 빠르고 효율적으로 편집할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 추가로, (예컨대, 이벤트에 대한 업데이트된 시작 및 종료 시간들을 보여주기 위해) 터치 감응형 이차 디스플레이에서의 입력들에 응답하여 일차 디스플레이를 업데이트함으로써, 사용자는, 이벤트를 수정하고 이어서 일차 디스플레이 상에 반영된 그러한 수정들을 즉각적으로 봄으로써 효율적인 방식으로 디바이스와의 상호작용들을 지속할 수 있어서, 사용자가 이어서 추가 입력을 제공할지의 여부를 결정할 수 있게 한다.
(I2) I1의 방법의 일부 실시예들에서, 방법은 터치 감응형 이차 디스플레이를 통해, 시간 범위를 수정하는 사용자 인터페이스 제어부에서의 입력을 검출하는 단계를 포함한다. 입력을 검출한 것에 응답하여, (i) 입력에 따라 이벤트에 대한 시작 시간 및 종료 시간 중 적어도 하나를 수정하는 단계; 및 (ii) 일차 디스플레이 상에서, 입력에 따른 이벤트에 대한 수정된 시간 범위를 디스플레이하는 단계를 포함한다.
(I3) I2의 방법의 일부 실시예들에서, 방법은 컴퓨팅 시스템의 메모리에 수정된 시작 및/또는 종료 시간과 함께 이벤트를 저장하는 단계를 포함한다.
(I4) I1 내지 I3 중 어느 하나의 방법의 일부 실시예들에서, 시간 범위를 수정하는 입력은, 임계량 초과의 시간 동안 어포던스와 접촉한 상태로 유지되고 이어서 터치 감응형 이차 디스플레이 상의 어포던스의 적어도 일부분을 이동시키는 누르기 입력이다.
(I5) I1 내지 I3 중 어느 하나의 방법의 일부 실시예들에서, 시간 범위를 수정하는 입력은, 터치 감응형 이차 디스플레이를 가로질러 이동하고 컴퓨팅 시스템이 이벤트에 대한 새로운 시작 시간 및 새로운 종료 시간을 선택하게 하는 스와이프 제스처이고, 새로운 시작 및 종료 시간들은 시작 및 종료 시간들에 의해 커버되는 동일한 지속기간을 갖는 시간 슬롯에 대응한다.
(I6) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 I1 내지 I5의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(I7) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 I1 내지 I5의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(I8) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 I1 내지 I5의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(I9) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 I1 내지 I5의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(J1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은, 컴퓨팅 시스템과 컴퓨팅 시스템과는 별개인 외부 장치 사이의 새로운 접속을 검출하는 단계(예컨대, 새로운 모니터를 접속시키고, 블루투스 또는 헤드폰 잭 등을 통해 헤드폰을 접속시키고, 등)를 포함한다. 새로운 접속을 검출한 것에 응답하여, 방법은, 터치 감응형 이차 디스플레이 상에, 외부 디바이스를 통해 이용가능한 기능들에 대응하는 복수의 어포던스들을 디스플레이하는 단계를 포함한다.
사용자가 터치 감응형 이차 디스플레이를 통해 외부 디바이스들을 효율적으로 활용하게 하는 것은 사용자에게 메뉴에 달리 매립될 수 있는 기능들에 액세스하기 위한 편리한 방식을 제공한다. 사용자에게 메뉴들에 달리 매립될 수 있는 외부 디바이스들에 대한 기능들에 액세스하기 위한 편리한 방식을 제공하는 것(및, 따라서, 기능들에 액세스하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 외부 디바이스들을 사용하기 위해 더 적은 상호작용들을 필요로 하는 것)은, (예컨대, 외부 디바이스에 대한 특정 기능을 수행하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 외부 디바이스들과 더 빠르고 효율적으로 상호작용할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 이러한 방식으로, 터치 감응형 이차 디스플레이는 또한 (디바이스와 외부 디바이스 사이의 접속 상태를 반영하고, 사용자들이 외부 디바이스와 용이하게 상호작용하게 함으로써) 디바이스의 내부 상태에 관한 정보를 전달한다.
(J2) J1의 방법의 일부 실시예들에서, 방법은, 터치 감응형 이차 디스플레이를 통해, 외부 디바이스를 통해 이용가능한 제1 기능에 대응하는 제1 어포던스의 선택을 수신하는 단계를 포함한다. 선택을 수신한 것에 응답하여, 방법은 제1 기능의 수행을 개시하는 단계를 포함한다.
(J3) J1 또는 J2의 방법의 일부 실시예들에서, 외부 디바이스는 일차 디스플레이 및 터치 감응형 디스플레이와는 별개인 추가 디스플레이이다.
(J4) J3의 방법의 일부 실시예들에서, 복수의 어포던스들은, 선택될 때, 컴퓨팅 시스템이 추가 디스플레이를 통해 디스플레이 미러링 기능의 수행을 개시하게 하는 제1 어포던스를 포함한다.
(J5) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 J1 내지 J4의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(J6) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 J1 내지 J4의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(J7) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 J1 내지 J4의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(J8) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 J1 내지 J4의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(K1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은, 일차 디스플레이 상에, 컴퓨팅 시스템 상에서 실행되고 있는 애플리케이션에 대한 사용자 인터페이스를 디스플레이하는 단계; 및 사용자 인터페이스 내의 특정 위치에서 제1 입력을 검출하는 단계를 포함한다. 제1 입력을 검출한 것에 응답하여, 방법은, 터치 감응형 이차 디스플레이 상에, 별개의 글자들에 각각 대응하는 어포던스들의 세트를 디스플레이하는 단계를 포함한다.
터치 감응형 이차 디스플레이에서 직관적 입력을 제공함으로써 사용자가 일차 디스플레이 상의 애플리케이션 내에서 글자들이 어떻게 보일지를 빠르고 용이하게 미리보기하게 하는 것은 사용자에게 애플리케이션 내에서 글자들이 어떻게 보일지를 빠르게 미리보기하게 하기 위한 편리한 방식을 제공한다. 사용자에게 애플리케이션 내에서 글자들이 어떻게 보일지를 빠르게 미리보기하게 하기 위한 편리한 방식을 제공하는 것은, (예컨대, 글자들이 어떻게 보일지를 빠르기 미리보기하게 하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 하여, 이에 따라, 일차 디스플레이 상에서 이러한 글자들이 어떻게 보일지를 미리보기하게 하기 위해 더 적은 상호작용들을 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 글자들을 더 빠르고 효율적으로 미리보기할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 이러한 방식으로, 사용자들에게 글자들을 계속해서 미리보기하는 것, 및 이어서 원하는 글자를 찾을 때까지 입력들을 계속해서 제공하는 것이 허용됨에 따라, 사용자들에게는 그들의 디바이스들과의 효율적이고 지속적인 상호작용들이 제공된다.
(K2) K1의 방법의 일부 실시예들에서, 방법은, 터치 감응형 이차 디스플레이를 통해, 별개의 글자들 중 제1 글자에 대응하는 제1 어포던스 위에서의 제2 입력을 검출하는 단계를 포함한다. 제2 입력을 검출한 것에 응답하여, 방법은, 입력이 제1 어포던스와 접촉한 상태로 유지되는 동안, 일차 디스플레이 상에, 특정 위치에서의 제1 글자의 미리보기를 디스플레이하는 단계를 포함한다.
(K3) K2의 방법의 일부 실시예들에서, 방법은, 터치 감응형 이차 디스플레이를 통해, 제1 어포던스로부터, 그리고 별개의 글자들 중 제2 글자에 대응하는 제2 어포던스로의 제2 입력의 이동을 검출하는 단계를 포함한다. 제1 어포던스로부터 그리고 제2 어포던스로의 제2 입력의 이동을 검출한 것에 응답하여, 방법은, 제1 글자의 미리보기를 제2 글자의 미리보기로 대체하는 단계를 포함한다.
(K4) K1 내지 K3 중 어느 하나의 방법의 일부 실시예들에서, 방법은 사용자 인터페이스에 포함된 텍스트 콘텐츠에 적어도 부분적으로 기초하여 어포던스들의 세트에 포함시킬 어포던스들을 결정하는 단계를 포함한다.
(K5) K4의 방법의 일부 실시예들에서, 결정하는 단계는 사용자가 사용자 인터페이스에 포함된 텍스트 콘텐츠를 수정했음을 검출한 것에 응답하여 이행된다.
(K6) K1 내지 K5 중 어느 하나의 방법의 일부 실시예들에서, 방법은 제2 입력이 제2 어포던스와 접촉하는 동안, 제2 입력의 리프트오프를 검출하는 단계를 포함한다. 리프트오프를 검출한 것에 응답하여, 방법은, 제2 사용자 인터페이스 요소를 포함하도록 사용자 인터페이스를 업데이트하는 단계를 포함한다.
(K7) K1 내지 K5 중 어느 하나의 방법의 일부 실시예들에서, 방법은 제2 입력이 제2 어포던스와 접촉하는 동안 추가 입력을 검출하는 단계를 포함한다. 추가 입력을 검출한 것에 응답하여, 방법은, 제2 사용자 인터페이스 요소를 포함하도록 사용자 인터페이스를 업데이트하는 단계를 포함한다.
(K8) K1 내지 K7 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 제2 입력이 터치 감응형 이차 디스플레이를 가로질러 계속해서 이동함에 따라, 어포던스들의 세트 내의 대응하는 어포던스들이 제2 입력에 의해 접촉될 때 별개의 글자들 중 개개의 글자들에 대한 미리보기들을 디스플레이하는 단계를 포함한다.
(K9) K1 내지 K8 중 어느 하나의 방법의 일부 실시예들에서, 제2 글자의 미리보기는 입력이 제2 어포던스와 접촉한 상태로 유지되는 동안에 일차 디스플레이 상에 디스플레이된 상태로 유지된다.
(K10) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 K1 내지 K9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(K11) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 K1 내지 K9의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(K12) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 K1 내지 K9의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(K13) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 K1 내지 K9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(L1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 방법은 콘텐츠 편집 애플리케이션(문서들, 도면들, 사진들 등을 작성 및 편집하기 위한 애플리케이션)을 열라는 요청을 수신하는 단계를 포함한다. 요청을 수신한 것에 응답하여, 방법은 (i) 일차 디스플레이 상에, 콘텐츠 편집 애플리케이션을 디스플레이하는 단계; 및 (ii) 터치 감응형 이차 디스플레이 상에, 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 이용되는 적어도 하나의 시각적 특성을 수정하기 위한 사용자 인터페이스 제어부(예컨대, 콘텐츠 편집 애플리케이션 내에 디스플레이되는 콘텐츠에 대한 색상들을 선택하는 데 사용되는 색상 값들의 슬라이딩 스케일(sliding scale)을 포함하는 색상 선택자)를 디스플레이하는 단계를 포함한다.
따라서, 사용자들에게 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성들을 수정하기 위한 직관적 방식이 제공된다. 사용자들에게 이러한 방식으로 시각적 특성들을 수정하기 위한 직관적 방식을 제공하는 것은, (예컨대, 일차 디스플레이 상에 콘텐츠를 렌더링하는 데 이용될 때 특정 시각적 특성들이 어떻게 보일지를 빠르게 미리보기하게 하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자들이 시각적 특성들에 대한 변경들을 더 빠르고 더 효율적인 방식으로 미리보기할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 이러한 방식으로, 사용자들에게 일차 디스플레이 상에서 시각적 특성에 대한 수정들이 어떻게 보일지를 계속해서 미리보기하고 이어서 시각적 특성에 대한 원하는 수정을 찾을 때까지 입력들을 계속해서 제공하는 것이 허용됨에 따라, 사용자들에게는 그들의 디바이스들과의 효율적이고 지속적인 상호작용들이 제공된다.
(L2) L1의 방법의 일부 실시예들에서, 방법은, 터치 감응형 이차 디스플레이를 통해, 적어도 하나의 시각적 특성에 대한 제1 값을 선택하는, 사용자 인터페이스 제어부에서의 입력을 검출하는 단계를 포함한다. 입력을 검출한 후, 방법은, 적어도 하나의 시각적 특성에 대한 제1 값을 사용하여 콘텐츠 편집 애플리케이션에서 콘텐츠를 렌더링하는 단계를 포함한다(예컨대, 콘텐츠 편집 애플리케이션에 추가된 모든 새로운 콘텐츠는 제1 값을 사용하여 렌더링되고/되거나 현재 선택된 콘텐츠는 제1 값을 사용하여 렌더링됨).
(L3) L1 또는 L2의 방법의 일부 실시예들에서, 사용자 인터페이스 제어부는, 값들의 슬라이딩 스케일을 따라 적어도 하나의 시각적 특성에 대한 개개의 값에 각각 대응하는 개개의 제어부들을 포함한다.
(L4) L3의 방법의 일부 실시예들에서, 값들의 슬라이딩 스케일은 색상의 별개의 음영들을 표현한다.
(L5) L4의 방법의 일부 실시예들에서, 제1 값은 제1 색상의 제1 음영에 대응하고, 방법은, 입력이 사전결정된 기준들을 만족시킨다(임계량 초과의 시간 동안 접촉 상태로 유지됨)는 판정에 따라, 제1 색상의 제1 음영과는 별개인, 제1 색상의 다른 음영들을 선택하기 위한 옵션들을 포함하도록 터치 감응형 이차 디스플레이 상의 사용자 인터페이스 제어부를 수정하는 단계를 포함한다.
(L6) L1 내지 L5 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 콘텐츠를 렌더링하기 전, 콘텐츠의 선택을 수신하는 단계를 포함하고, 콘텐츠를 렌더링하는 단계는 적어도 하나의 시각적 특성에 대한 제1 값을 사용하여 콘텐츠의 미리보기를 제시하는 단계를 포함한다.
(L7) L6의 방법의 일부 실시예들에서, 미리보기는 입력이 터치 감응형 이차 디스플레이와 접촉한 상태로 유지되는 동안에 제시된다.
(L8) L7의 방법의 일부 실시예들에서, 방법은, 입력의 리프트오프를 검출한 것에 응답하여, 미리보기를 디스플레이하는 것을 중지하는 단계를 포함한다.
(L9) L8의 방법의 일부 실시예들에서, 방법은, 입력의 리프트오프를 검출한 것에 응답하여, 적어도 하나의 시각적 특성에 대한 수정된 값을 갖는 편집가능 콘텐츠의 일부분을 디스플레이하는 단계를 포함한다.
(L10) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템이 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 L1 내지 L9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(L11) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 L1 내지 L9의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(L12) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 입력 메커니즘 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 갖는 컴퓨팅 시스템 상의 그래픽 사용자 인터페이스는 청구항 L1 내지 L9의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(L13) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 일차 디스플레이를 포함하는 제1 하우징, 물리적 키보드 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징, 및 청구항 L1 내지 L9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(M1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, "디스플레이"로도 지칭되는 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 전자 디바이스(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 일부 실시예들에서, 전자 디바이스는, 또한, 터치 감응형 이차 디스플레이와 통합되거나, 또는 제2 하우징 내의 터치 감응형 이차 디스플레이에 인접하게 위치되는 분리된 컴포넌트인 생체 측정 센서를 포함한다. 방법은, 디바이스가 잠금된 상태에 있는 동안(예컨대, 잠금된 상태는 디바이스의 하나 이상의 특징부들이 디스에이블되고 민감한 정보에의 액세스 또는 정보를 변경 또는 삭제하는 능력이 금지된 상태임), 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들에 로그인하는 것과 연관된 개개의 로그인 사용자 인터페이스를 디스플레이하는 단계를 포함한다. 로그인 사용자 인터페이스를 디스플레이하는 동안, 방법은 사용자에 관한 생체 측정 정보를 수신하는 단계를 포함한다. 생체 측정 정보를 수신한 것에 응답하여, 방법은, (i) 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다는 판정에 따라, 디스플레이 상에, 제1 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 단계; 및 (ii) 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다는 판정에 따라, 디스플레이 상에, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 단계를 포함한다.
따라서, 사용자들에게는 생체 측정 센서에서 단일 입력을 제공함으로써 사용자 특정 로그인 페이지에 액세스하기 위한 직관적인 방식이 제공된다. 사용자들에게 이러한 방식으로 사용자 특정 로그인 페이지에 액세스하기 위한 직관적 방식을 제공하는 것은 (예컨대, 적절한 사용자 특정 로그인 페이지에 빠르게 액세스하기 위해 생체 측정 센서에서 단일 입력 또는 제스처를 필요로 하여, 이에 따라, 사용자 특정 로그인 페이지에 도달하는 데 더 적은 상호작용들이 필요하게 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 단일 입력을 통해 로그인 페이지에 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
(M2) M1의 방법의 일부 실시예들에서, 방법은, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖는다는 판정에 따라, (예컨대, 추가 사용자 입력을 필요로 하지 않고서) 제1 사용자 계정에 대해 디바이스를 잠금해제하는 단계를 포함한다.
(M3) M1 또는 M2의 방법의 일부 실시예들에서, 방법은, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖는다는 판정에 따라, (예컨대, 추가 사용자 입력을 필요로 하지 않고서) 제2 사용자 계정에 대해 디바이스를 잠금해제하는 단계를 포함한다.
(M4) M1 내지 M3 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 디바이스의 임의의 사용자 계정에 대한 생체 측정 정보와 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지하는 단계를 포함한다.
(M5) M1 내지 M4 중 어느 하나의 방법의 일부 실시예들에서, 로그인 사용자 인터페이스는 복수의 사용자 계정들에 대응하는 복수의 선택가능한 어포던스들을 포함한다.
(M6) M1 내지 M5 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 제1 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 동안, 로그인 크리덴셜의 입력을 수신하는 단계를 포함한다. 로그인 크리덴셜의 입력을 수신한 것에 응답하여, 방법은, (i) 로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치한다는 판정에 따라, 제1 사용자 계정에 대해 디바이스를 잠금해제하는 단계; 및 (ii) 로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지시키는 단계를 포함한다.
(M7) M1 내지 M6 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 동안, 로그인 크리덴셜의 입력을 수신하는 단계를 포함한다. 로그인 크리덴셜의 입력을 수신한 것에 응답하여, (i) 로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치한다는 판정에 따라, 제1 사용자 계정에 대해 디바이스를 잠금해제하는 단계; 및 (ii) 로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지시키는 단계를 포함한다.
(M8) M1 내지 M7 중 어느 하나의 방법의 일부 실시예들에서, 로그인 사용자 인터페이스는 생체 측정 정보를 제공하라는 명령어들을 포함한다.
(M9) M1 내지 M8 중 어느 하나의 방법의 일부 실시예들에서, 디바이스는 생체 측정 센서에 인접한 이차 디스플레이(예컨대, 터치 감응형 이차 디스플레이)를 포함하고; 방법은, 디바이스의 디스플레이 상에 로그인 사용자 인터페이스를 디스플레이하는 동안, 이차 디스플레이에서, 생체 측정 센서를 통해 생체 측정 정보를 제공하라는 명령어들을 디스플레이하는 단계를 포함한다.
(M10) M1 내지 M9 중 어느 하나의 방법의 일부 실시예들에서, 생체 측정 센서는 지문 센서이다.
(M11) M1 내지 M9 중 어느 하나의 방법의 일부 실시예들에서, 생체 측정 센서는 얼굴 검출 센서이다.
(M12) M1 내지 M9 중 어느 하나의 방법의 일부 실시예들에서, 생체 측정 센서는 망막 스캐너이다.
(M13) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 디스플레이, 및 생체 측정 센서를 포함하는 전자 디바이스가 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 M1 내지 M12의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(M14) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 디스플레이 및 생체 측정 센서를 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 M1 내지 M12의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(M15) 다른 태양에서, 그래픽 사용자 인터페이스는 하나 이상의 프로세서들, 메모리, 디스플레이, 및 생체 측정 센서를 갖는 컴퓨팅 시스템 상에 제공되며, 그래픽 사용자 인터페이스는 청구항 M1 내지 M12의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(M16) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 디스플레이 및 생체 측정 센서, 및 청구항 M1 내지 M12의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
(N1) 일부 실시예들에 따르면, 방법은 하나 이상의 프로세서들, 메모리, 일차 디스플레이를 포함하는 제1 하우징(예컨대, "디스플레이"로도 지칭되는 디스플레이(102)를 포함하는 하우징(110) 또는 디스플레이(102)를 포함하는 하우징(204)), 및 물리적 키보드(예컨대, 도 1a의 키보드(106)) 및 터치 감응형 이차 디스플레이(예컨대, 도 1a의 동적 기능 열(104))를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 전자 디바이스(예컨대, 도 1a 내지 도 2d의 시스템(100) 또는 시스템(200))에서 수행된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 물리적 키보드와는 분리되어 있다(예컨대, 터치 감응형 이차 디스플레이는 독립형 디스플레이(222)이거나, 또는 터치 감응형 디스플레이는 도 2c의 터치패드(108)와 같은 다른 디바이스와 통합됨). 일부 실시예들에서, 전자 디바이스는, 또한, 터치 감응형 이차 디스플레이와 통합되거나, 또는 제2 하우징 내의 터치 감응형 이차 디스플레이에 인접하게 위치되는 분리된 컴포넌트인 생체 측정 센서를 포함한다. 방법은, 디바이스가 제1 사용자 계정에 로그인되어 있는 동안, 제1 사용자 계정과 연관된 사용자 인터페이스(예를 들어, 제1 사용자 계정에 대한 홈 스크린 또는 데스크톱)를 디스플레이하는 단계를 포함한다. 디바이스는 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들과 연관되고, 제2 사용자 계정은 제2 사용자 계정에 로그인하는 것을 가능하게 하는 생체 측정 정보와 연관된다. 제1 사용자 계정과 연관된 사용자 인터페이스를 디스플레이하는 동안, 방법은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신하는 단계를 포함한다. 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 방법은, 입력이 제2 사용자 스위칭 기준들을 충족시키는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제2 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, (i) 제2 사용자 계정에 대해 디바이스를 잠금해제하는 단계; (ii) 제1 사용자 계정에 대해 디바이스를 잠금하는 단계; 및 (iii) 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제2 사용자 계정과 연관된 사용자 인터페이스로 대체하는 단계를 포함한다.
따라서, 사용자들에게는 생체 측정 센서에서 단일 입력을 제공함으로써 전자 디바이스 상의 활성 사용자 특정 세션에 액세스하기 위한 직관적인 방식이 제공된다. 사용자들에게 이러한 방식으로 활성 사용자 특정 세션에 액세스하기 위한 직관적 방식을 제공하는 것은 (예컨대, 활성 세션에의 즉각적 액세스를 얻기 위해 생체 측정 센서에서 단일 입력 또는 제스처를 필요로 하여, 그에 따라, 사용자 계정들을 스위칭하고 디바이스에 로그인하는 데 더 적은 상호작용들을 필요로 함으로써) 전자 디바이스의 조작성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 단일 입력을 통해 활성 세션에 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
(N2) N1의 방법의 일부 실시예들에서, 방법은, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제2 사용자 스위칭 기준들을 충족시키는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다 - 제2 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디스플레이 상에, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 단계를 포함한다.
(N3) N1 또는 N2의 방법의 일부 실시예들에서, 방법은, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제3 사용자 스위칭 기준들을 충족시키는 한편 제3 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제3 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, (i) 제3 사용자 계정에 대해 디바이스를 잠금해제하는 단계; (ii) 제1 사용자 계정에 대해 디바이스를 잠금하는 단계; 및 (iii) 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제3 사용자 계정과 연관된 사용자 인터페이스로 대체하는 단계를 포함한다.
(N4) N1 내지 N3 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제3 사용자 스위칭 기준들을 충족시키는 한편 제3 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다 - 제3 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디스플레이 상에, 제3 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 단계를 포함한다.
(N5) N1 또는 N2의 방법의 일부 실시예들에서, 입력 요소는 버튼이고, 일체형 생체 측정 센서를 갖는 입력 요소를 통한 입력은 버튼을 통한 누르기 입력을 검출하는 것을 포함한다.
(N6) N5의 방법의 일부 실시예들에서, 제2 사용자 스위칭 기준들은 누르기 입력이 제1 임계량 미만의 시간 동안 지속된다는 기준을 포함하고; 방법은, 일체형 생체 측정 센서를 갖는 입력 요소를 통한 누르기 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제1 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스를 저전력 모드(예컨대, 저전력 모드는 디스플레이가 턴오프된 전자 디바이스의 보류(suspend) 상태에 대응함)에 두는 단계를 포함한다.
(N7) N5의 방법의 일부 실시예들에서, 제2 사용자 스위칭 기준들은 버튼이 제1 임계량 미만의 시간 동안 눌린다는 기준을 포함하고; 방법은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, (i) 버튼을 사용한 누르기 입력이 제1 임계량의 시간보다 오래 그리고 제2 임계량의 시간보다 덜 지속된다는 판정에 따라, 디바이스를 저전력 모드(예컨대, 저전력 모드는 디스플레이가 턴오프된 전자 디바이스의 슬립/보류 상태에 대응하고 이러한 저전력 모드는 누르기 입력의 종료 시에 진입됨)에 두는 단계; 및 (ii) 버튼을 사용한 누르기 입력이 제2 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스의 상태를 변경하기 위한 옵션들의 메뉴(예컨대, 옵션들의 메뉴는, 선택될 때, 각각 디바이스를 셧다운, 재시작, 또는 슬립/보류하는 셧다운, 재시작, 슬립/보류 옵션들을 포함함)를 디스플레이하는 단계를 포함한다.
(N8) N7의 방법의 일부 실시예들에서, 방법은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제2 임계량의 시간을 초과하는 제3 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스를 재시작시키는 단계를 포함한다.
(N9) N1 내지 N8 중 어느 하나의 방법의 일부 실시예들에서, 방법은, 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제2 사용자 계정과 연관된 사용자 인터페이스로 대체한 후, 제2 사용자 계정과 연관된 사용자 인터페이스를 디스플레이하는 동안, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 제2 입력을 수신하는 단계를 포함한다. 일체형 생체 측정 센서를 갖는 입력 요소를 통해 제2 입력을 수신한 것에 응답하여, 제2 입력이 제1 사용자 스위칭 기준들을 충족시키는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제1 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, (i) 제1 사용자 계정에 대해 디바이스를 잠금해제하는 단계; (ii) 제2 사용자 계정에 대해 디바이스를 잠금하는 단계; 및 (iii) 제2 계정과 연관된 사용자 인터페이스의 디스플레이를 제1 사용자 계정과 연관된 사용자 인터페이스로 대체하는 단계를 포함한다.
(N10) 다른 태양에서, 하나 이상의 프로세서들, 메모리, 디스플레이, 및 생체 측정 센서를 포함하는 전자 디바이스가 제공된다. 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 N1 내지 N9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 명령어들을 포함한다.
(N11) 추가 태양에서, 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체가 제공되고, 하나 이상의 프로그램들은, 디스플레이 및 생체 측정 센서를 갖는 컴퓨팅 시스템의 하나 이상의 프로세서들에 의해 실행될 때, 컴퓨팅 시스템으로 하여금 N1 내지 N9의 방법들 중 어느 하나의 방법을 수행하게 하거나 그의 수행을 야기하는 명령어들을 포함한다.
(N12) 다른 태양에서, 그래픽 사용자 인터페이스는 하나 이상의 프로세서들, 메모리, 디스플레이, 및 생체 측정 센서를 갖는 컴퓨팅 시스템 상에 제공되며, 그래픽 사용자 인터페이스는 청구항 N1 내지 N9의 방법들 중 어느 하나의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다.
(N13) 또 다른 태양에서, 컴퓨팅 디바이스가 제공된다. 컴퓨팅 디바이스는 디스플레이 및 생체 측정 센서, 및 청구항 N1 내지 N9의 방법들 중 어느 하나의 방법을 수행하거나 그의 수행을 야기하기 위한 수단을 포함한다.
다양하게 기술된 실시예들의 보다 양호한 이해를 위해, 유사한 도면 부호들이 도면 전체에 걸쳐서 대응 부분들을 나타내는 하기의 도면들과 관련하여 하기의 발명을 실시하기 위한 구체적인 내용이 참조되어야 한다.
도 1a는 일부 실시예들에 따른, 휴대용 컴퓨팅 시스템(예컨대, 랩톱 컴퓨터)의 예시적인 다이어그램이다.
도 1b는 일부 실시예들에 따른, 도 1a에서의 휴대용 컴퓨팅 시스템의 본체 부분의 예시적인 다이어그램이다.
도 2a는 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템의 제1 구현예의 예시적인 다이어그램이다.
도 2b는 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템의 제2 구현예의 예시적인 다이어그램이다.
도 2c는 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템의 제3 구현예의 예시적인 다이어그램이다.
도 2d는 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템의 제4 구현예의 예시적인 다이어그램이다.
도 3a는 일부 실시예들에 따른, 전자 디바이스의 블록 다이어그램이다.
도 3b는 일부 실시예들에 따른, 도 3a의 이벤트 핸들링을 위한 컴포넌트들의 블록 다이어그램이다.
도 3c 내지 도 3e는 일부 실시예들에 따른 동적 세기 임계치들의 예들을 예시한다.
도 4는 일부 실시예들에 따른, 주변기기 전자 디바이스의 블록 다이어그램이다.
도 5a 내지 도 5e, 도 6a 내지 도 6f, 도 7a 내지 도 7d, 도 8a 내지 도 8h, 도 9, 도 10a 내지 도 10h, 도 11a 내지 도 11h, 도 12a 내지 도 12h, 도 13a 내지 도 13c, 도 14a 내지 도 14e, 도 15a 내지 도 15h, 도 16a 내지 도 16t, 도 17a 내지 도 17g, 도 18a 내지 도 18i, 도 19a 내지 도 19k, 도 20a 내지 도 20g, 도 21a 내지 도 21j, 도 22a 내지 도 22c, 도 23a 및 도 23b, 도 24a 내지 도 24n, 도 25a 내지 도 25c, 도 26a 내지 도 26e, 도 27a 내지 도 27o, 도 28a 내지 도 28p, 도 29a 내지 도 29t, 도 30a 내지 도 30f, 도 31a 및 도 31b, 도 32a 내지 도 32e, 도 33a 내지 도 33k, 도 34a 내지 도 34c, 도 35a 및 도 35b, 도 36a 내지 도 36w, 도 37a 내지 도 37m, 도 38a 내지 도 38j, 도 39, 도 40, 도 41a 내지 도 41e, 도 42a 및 도 42b, 및 도 43a 내지 도 43d는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 예시적인 사용자 인터페이스들을 예시한다.
도 44a 내지 도 44d는 일부 실시예들에 따른, 동적 입출력 디바이스를 업데이트하는 방법의 흐름도이다.
도 45a 내지 도 45c는 일부 실시예들에 따른, 동적 입출력 디바이스를 업데이트하는 방법의 흐름도이다.
도 46a 및 도 46b는 일부 실시예들에 따른, 풀스크린 모드에 있는 동안에 애플리케이션의 기능을 유지하는 방법의 흐름도이다.
도 47a 및 도 47b는 일부 실시예들에 따른, 터치 스크린 디스플레이 상에 통지들을 디스플레이하는 방법의 흐름도이다.
도 48a 내지 도 48c는 일부 실시예들에 따른, 사용자 인터페이스 부분들을 이동시키는 방법의 흐름도이다.
도 49는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 브라우징하는 방법의 흐름도이다.
도 50은 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 검색 결과들을 통해 브라우징하는 방법의 흐름도이다.
도 51은 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상에 디스플레이되는 이벤트에 대한 세부사항들을 수정하는 방법의 흐름도이다.
도 52는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이를 포함하는 컴퓨팅 시스템과 접속된 외부 디바이스들에 관한 액션가능 정보를 터치 감응형 이차 디스플레이에서 제시하는 방법의 흐름도이다.
도 53은 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 애플리케이션 내에 디스플레이되는 글자들을 미리보기하는 방법의 흐름도이다.
도 54는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성들을 수정하는 방법의 흐름도이다.
도 55 내지 도 65는 일부 실시예들에 따른 전자 디바이스의 기능 블록 다이어그램들을 도시한다.
도 66은 일부 실시예들에 따른, 효율적인 로그인을 가능하게 하기 위해 생체 측정 센서를 사용하는 방법의 흐름도이다.
도 67은 일부 실시예들에 따른, 로그인된 사용자 계정들 사이에서의 효율적인 고속 스위칭을 가능하게 하기 위해 생체 측정 센서를 사용하는 방법의 흐름도이다.
도 68 및 도 69는 일부 실시예들에 따른 전자 디바이스의 기능 블록 다이어그램들을 도시한다.
도 70a 및 도 70b는 일부 실시예들에 따른, 지도 애플리케이션과 함께 사용하기 위한 터치 감응형 이차 디스플레이에서의 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이 및 일차 디스플레이의 개략도들이다. 도 70c 및 도 70d는 일부 실시예들에 따른, 지도 애플리케이션과 함께 사용하기 위한 터치 감응형 이차 디스플레이에서의 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이의 개략도들이다.
도 71a 및 도 71b는 일부 실시예들에 따른, 비디오 편집 애플리케이션과 함께 사용하기 위한 터치 감응형 이차 디스플레이에서의 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이 및 일차 디스플레이의 개략도들이다. 도 71c 내지 도 71m은 일부 실시예들에 따른, 비디오 편집 애플리케이션과 함께 사용하기 위한 터치 감응형 이차 디스플레이에서의 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이의 개략도들이다.
도 72a는 일부 실시예들에 따른, 비디오 편집 애플리케이션과 함께 사용하기 위한 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이 및 일차 디스플레이의 개략도이다. 도 72b 내지 도 72k는 일부 실시예들에 따른, 비디오 편집 애플리케이션과 함께 사용하기 위한 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이의 개략도들이다.
도 73a 내지 도 73n은 일부 실시예들에 따른, 비디오 편집 애플리케이션과 함께 사용하기 위한 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이의 개략도들이다.
도 74a 내지 도 74h는 일부 실시예들에 따른, 비디오 편집 애플리케이션과 함께 사용하기 위한 제어부들을 동적으로 제공하기 위한 사용자 인터페이스들을 예시하는 데 사용되는 터치 감응형 이차 디스플레이의 개략도들이다.
도 75는 일부 실시예들에 따른, 다양한 비디오 편집 애플리케이션들과 함께 사용하기 위한, 터치 감응형 이차 디스플레이에서 디스플레이될 수 있는 예시적인 글리프(glyph)들을 도시한 개략도이다.
도 1a, 도 1b, 도 2a 내지 도 2d, 도 3a 내지 도 3e, 및 도 4는 예시적인 디바이스들의 설명을 제공한다. 도 5a 내지 도 14e는 동적 입출력 디바이스를 업데이트하기 위한 예시적인 사용자 인터페이스들을 도시한다. 도 44a 내지 도 44d는 동적 입출력 디바이스를 업데이트하는 방법(600)의 흐름도이다. 도 45a 내지 도 45c는 동적 입출력 디바이스를 업데이트하는 방법(700)의 흐름도이다. 도 46a 및 도 46b는 풀스크린 모드에 있는 동안에 애플리케이션의 기능을 유지시키는 방법(800)의 흐름도이다. 도 47a 및 도 47b는 터치 스크린 디스플레이 상에 통지를 디스플레이하는 방법(900)의 흐름도이다. 도 48a 내지 도 48c는 사용자 인터페이스 부분들을 이동시키는 방법(1000)의 흐름도이다. 도 5a 내지 도 14e에서의 사용자 인터페이스들은 도 44a 내지 도 44d, 도 45a 내지 도 45c, 도 46a, 도 46b, 도 47a, 도 47b, 및 도 48a 내지 도 48c에서의 방법들 및/또는 프로세스들을 예시하는 데 사용된다.
도 49 내지 도 54, 도 66, 및 도 67은 컴퓨팅 시스템에서의 효율적인 상호작용을 가능하게 하기 위해 터치 감응형 이차 디스플레이를 활용하는 방법들의 흐름도들을 포함한다. 도 15a 내지 도 43d에서의 사용자 인터페이스들은 도 49 내지 도 54, 도 66, 및 도 67에서의 방법들 및/또는 프로세스들을 예시하는 데 사용된다.
예시적인 디바이스들 및 시스템들
이제, 실시예들이 상세하게 참조될 것이며, 그 실시예들의 예들이 첨부 도면들에 예시된다. 하기의 상세한 설명에서, 많은 구체적인 세부사항들이 다양하게 기술된 실시예들의 완전한 이해를 제공하기 위해 기재된다. 그러나, 다양하게 기술된 실시예들이 이들 구체적인 세부사항들 없이 실시될 수 있다는 것은 당업자에게 명백할 것이다. 다른 예들에서, 잘 알려진 방법들, 절차들, 컴포넌트들, 회로들, 및 네트워크들은 실시예들의 양태들을 불필요하게 모호하게 하지 않기 위해 상세히 기술되지 않았다.
일부 예들에서, 용어들, 제1, 제2 등이 본 명세서에서 다양한 요소들을 기술하는 데 사용되지만, 이들 요소들은 이들 용어들에 의해 제한되어서는 안 된다는 것이 또한 이해될 것이다. 이들 용어들은 하나의 요소를 다른 요소와 구별하는 데에만 사용된다. 예를 들면, 다양하게 기술된 실시예들의 범주로부터 벗어남이 없이, 제1 접촉이 제2 접촉으로 지칭될 수 있고, 유사하게, 제2 접촉이 제1 접촉으로 지칭될 수 있다. 제1 접촉 및 제2 접촉은 둘 다 접촉이지만, 그들이 동일한 접촉인 것은 아니다.
본 명세서에서 다양하게 기술된 실시예들의 설명에 사용되는 용어는 특정 실시예들을 기술하는 목적만을 위한 것이고, 제한하려는 의도는 아니다. 다양한 기술된 실시예들의 설명 및 첨부된 청구범위에 사용되는 바와 같이, 단수의 형태("a", "an", 및 "the")는 문맥상 명백히 달리 나타내지 않는다면 복수의 형태도 마찬가지로 포함하려는 것으로 의도된다. 또한, 본 명세서에서 사용되는 바와 같은 "및/또는"이라는 용어는 열거되는 연관된 항목들 중 하나 이상의 항목의 임의의 및 모든 가능한 조합들을 나타내고 그들을 포괄하는 것임이 이해될 것이다. 용어들 "포함한다(include)", "포함하는(including)", "포함한다(comprise)", 및/또는 "포함하는(comprising)"은, 본 명세서에서 사용될 때, 언급된 특징들, 정수들, 단계들, 동작들, 요소들, 및/또는 컴포넌트들의 존재를 특정하지만, 하나 이상의 다른 특징들, 정수들, 단계들, 동작들, 요소들, 컴포넌트들, 및/또는 이들의 그룹들의 존재 또는 추가를 배제하지 않음이 추가로 이해될 것이다.
본 명세서에서 사용되는 바와 같이, "~는 경우(if)"라는 용어는, 선택적으로, 문맥에 따라 "~할 때(when)" 또는 "~ 시(upon)" 또는 "결정한 것에 응답하여(in response to determining)" 또는 "검출한 것에 응답하여(in response to detecting)"를 의미하는 것으로 해석된다. 유사하게, 구문 "판정된 경우" 또는 "[진술된 상태 또는 이벤트가] 검출된 경우"는, 선택적으로, 문맥에 따라 "판정 시" 또는 "판정한 것에 응답하여" 또는 "[진술된 상태 또는 이벤트] 검출 시" 또는 "[진술된 상태 또는 이벤트를] 검출한 것에 응답하여"를 의미하는 것으로 해석된다.
도 1a는, 일부 실시예들에 따른, 휴대용 컴퓨팅 시스템(100)의 예시적인 다이어그램이다. 휴대용 컴퓨팅 시스템(100)은, 예를 들어, MACBOOK® 디바이스와 같은 랩톱 컴퓨터, 또는 임의의 다른 휴대용 컴퓨팅 디바이스일 수 있다. 휴대용 컴퓨팅 시스템(100)은 하기를 포함한다: (A) 일차 디스플레이(102)를 갖는 디스플레이 부분(110)(본 명세서에서, 제1 하우징(110) 또는 하우징(110)으로도 지칭됨); 및 (B) 동적 기능 열(104), 물리적 (즉, 이동가능하게 작동되는) 키들의 세트(106), 및 동일한 하우징 내에 부분적으로 포함된 터치패드(108)를 갖는 본체 부분(120)(제2 하우징(120) 또는 하우징(120)으로도 지칭됨). 디스플레이 부분(110)은, 전형적으로, 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)과 기계적으로, 전기적으로, 그리고 통신가능하게 커플링된다. 예를 들어, 휴대용 컴퓨팅 시스템(100)은 힌지(hinge)를 포함하여, 디스플레이 부분(110)이 본체 부분(120)에 대해 회전되게 할 수 있다. 휴대용 컴퓨팅 시스템(100)은 하나 이상의 프로세서들, 및 하나 이상의 프로세서들에 의해 실행되어 본 명세서에 기술되는 실시예들 중 임의의 것을 수행하는 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 일부 실시예들에서, 도 1b를 참조하여 더 상세히 기술되는 동적 기능 열(104)은 저항성 감지, 음향 감지, 용량성 감지, 광 감지, 적외선 감지 등을 이용하여 사용자 터치 입력들 및 선택들을 검출하는 터치 스크린 디스플레이이다. 일부 실시예들에서, 디스플레이 부분(110)의 일차 디스플레이(102)는 또한 터치 스크린 디스플레이이다.
도 1b는 일부 실시예들에 따른, 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)의 예시적인 다이어그램이다. 본체 부분(120)은 물리적 키들의 세트(106)(본 명세서에서, "물리적 키들(106)" 및 "키보드(106)"로도 지칭됨), 동적 기능 열(104), 및 동일한 하우징 내에 부분적으로 포함되는 터치패드(108)를 포함한다. 일부 실시예들에서, 터치 스크린인 동적 기능 열(104)은 물리적 키들의 세트(106)의 기능 열을 대체하여, 물리적 키들의 세트(106)에 의해 소비되는 공간이 감소되게 하거나, 더 작은 전체적 본체 부분(120)을 허용하거나, 또는 다른 부분들, 예컨대 터치패드(108)가 더 커지게 한다. 일부 실시예들에서, 동적 기능 열(104)은 물리적 키들의 세트(106)의 주요 치수에 대해 길이가 대략 18 인치이다. 설명의 편의를 위해 "열"로 지칭되고 있지만, 일부 다른 실시예들에서, 도 1a에서의 동적 기능 열(104)을 포함하는 터치 스크린은 정사각형, 원형, 복수의 열들, 행(column), 복수의 행들, 복수의 분리된 섹터들 등과 같은 임의의 다른 형태를 취할 수 있다. 도 1a 및 도 1b가 물리적 키들의 세트(106)의 기능 열을 대체하는 동적 기능 열(104)을 도시하고 있지만, 일부 다른 실시예들에서, 동적 기능 열(104)은 추가적으로 그리고/또는 대안으로 물리적 키들의 세트(106)의 숫자패드 섹션, 편집/기능 섹션 등을 대체할 수 있다.
물리적 키들의 세트(106)의 각각의 물리적 키는 적어도 하나의 연관된 입력을 갖는다. 입력은 프린트가능 글자, 프린트불가능 글자, 기능, 또는 기타 입력일 수 있다. 물리적 키와 연관된 입력은 로마자, 아라비아 글자, 한자, 또는 임의의 다른 스크립트로 키의 표면 상에 보이는(예컨대, 프린트되는) 문자, 단어, 심볼, 또는 기타 표시(indicia)로 보여질 수 있다. 예를 들어, 138에 나타낸 특정한 물리적 키는 키 상에 보여진 문자 z로 나타낸 바와 같은 알파벳 글자 "z"와 연관된다. 다른 예에서, "command"라는 단어로 라벨링된 물리적 키는 커맨드 기능과 연관될 수 있다. 예를 들어, 물리적 키들의 세트(106)는 ISO/IEC 9995, ANSI-INCITS 154-1988, JIS × 6002-1980, 또는 기타 유사한 표준들에 따라서 QWERTY, Dvorak, 또는 문자숫자, 숫자, 및/또는 편집/기능 섹션들(예컨대, 표준형, 확장형, 또는 콤팩트형)을 갖는 기타 키보드 레이아웃들과 연관된다.
물리적 키와 연관된 입력에 대응하는 신호는 키가 사용자에 의해 활성화되었을 때 휴대용 컴퓨팅 시스템(100)(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202) 또는 도 2a 및 도 2b에서의 주변기기 키보드(206))의 프로세서에 의해 수신될 수 있다. 예시적인 예에서, 물리적 키들의 세트(106)의 각각의 키는 2개의 플레이트들 및 스프링을 포함한다. 사용자는 키를 누름으로써 - 키를 누르는 것은 스프링을 압축시킴 - 키를 활성화시킬 수 있다. 스프링이 압축될 때, 2개의 플레이트들은 접촉하게 되어, 전기 전류가 접속된 플레이트들을 통해서 흐르게 할 수 있다. 키에 대응하는 입력은 접속된 플레이트들을 통한 전류의 흐름에 응답하여 프로세서에 제공될 수 있다. 예를 들어, 도 2c에서의 주변기기 키보드(206)의 키들의 세트(106)의 하나의 키의 활성화에 응답하여, 활성화된 키에 대응하는 입력이 컴퓨팅 디바이스(202)에 제공된다. 이동가능하게 작동되는 키들에 대한 다른 시스템들이 사용될 수 있다는 것이 인식될 것이다.
일부 실시예들에서, 동적 기능 열(104)은 하나 이상의 사용자 선택가능 심볼들(142)(때때로, 본 명세서에서, "사용자 인터페이스 요소들", "사용자 인터페이스 컴포넌트들", "어포던스들", "버튼들", 또는 "소프트 키들"로도 지칭됨)을 디스플레이하는 터치 스크린 디스플레이(본 명세서에서, 터치 감응형 이차 디스플레이로도 지칭됨)이다. 예를 들어, 동적 기능 열(104)은 전형적인 키보드 상의 기능 열 키들을 대체한다. 사용자는 하나 이상의 사용자 선택가능 심볼들(142) 중 특정한 하나의 심볼에 대응하는 터치 스크린 디스플레이 상의 위치를 터치함으로써 하나 이상의 사용자 선택가능 심볼들(142) 중 그 특정한 하나의 심볼을 선택할 수 있다. 예를 들어, 사용자는 동적 기능 열(104)을 탭핑하여 사용자의 손가락이 확대경 표시자(214)의 위치에서 동적 기능 열(104)과 접촉하게 함으로써 확대경 심볼(144)로 나타낸 사용자 선택가능 심볼을 선택할 수 있다. 일부 실시예들에서, 탭핑 접촉 또는 탭핑 제스처는 사전결정된 양의 시간(예컨대, 250ms 등) 내에 접촉의 터치다운(touch-down) 및 접촉의 리프트오프(lift-off)를 포함한다. 일부 실시예들에서, 동적 기능 열(104)의 터치 스크린 디스플레이는 저항성 감지, 음향 감지, 용량성 감지, 광 감지, 적외선 감지 등을 이용하여 사용자 입력들 및 선택들을 검출하도록 구현된다.
사용자가 하나 이상의 사용자 선택가능 심볼들(142) 중 특정한 하나의 심볼을 선택하는 경우, 하나 이상의 사용자 선택가능 심볼들(142) 중 그 특정한 하나의 심볼에 대응하는 신호가 동적 기능 열(104)에 의해 생성된다. 예를 들어, 사용자가 동적 기능 열(104) 상의 "esc"를 탭핑하는 경우, 동적 기능 열(104)은 이스케이프 기능에 대응하는 사용자 입력을 나타내는 신호를 휴대용 컴퓨팅 시스템(100)의 프로세서(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202), 또는 도 2a 및 도 2b에서의 주변기기 키보드(206)의 프로세서, 또는 도 2c의 제1 입력 메커니즘(212)의 프로세서 또는 도 2d의 주변기기 입력 메커니즘(222)의 프로세서)로 송신한다.
일부 실시예들에서, 하나 이상의 사용자 선택가능 심볼들(142) 중 특정한 하나의 심볼이 선택되는 경우, 동적 기능 열(104)은 하나 이상의 사용자 선택가능 심볼들(142) 중 그 특정한 하나의 심볼이 디스플레이되는 터치 스크린 디스플레이 상의 위치에 대응하는 신호를 휴대용 컴퓨팅 시스템(100)의 프로세서(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202), 또는 도 2a 및 도 2b에서의 주변기기 키보드(206)의 프로세서, 또는 도 2c의 제1 입력 메커니즘(212)의 프로세서 또는 도 2d의 주변기기 입력 메커니즘(222)의 프로세서)로 송신한다. 예를 들어, 동적 기능 열(104)은 선택된 하나 이상의 사용자 선택가능 심볼들(142) 중 특정한 하나의 심볼의, 터치 스크린 디스플레이 상의 위치에 따라 위치 값(0 내지 20)을 포함하는 신호를 송신할 수 있다. 도 1b의 예시적인 예에서, "esc" 심볼은 0의 위치 값을 가질 수 있고, 확대경 심볼(144)은 16의 위치 값을 가질 수 있고, 등이다. 휴대용 컴퓨팅 시스템(100)의 프로세서(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202), 또는 도 2a 및 도 2b에서의 주변기기 키보드(206)의 프로세서, 또는 도 2c의 제1 입력 메커니즘(212)의 프로세서 또는 도 2d의 주변기기 입력 메커니즘(222)의 프로세서)는 선택된 사용자 선택가능 심볼의 위치 값을 나타내는 신호를 수신할 수 있으며, 현재 활성 상태이거나 포커스를 두고 있는 디스플레이 부분(110)(또는 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204))의 일차 디스플레이(102) 상에 디스플레이된 그래픽 사용자 인터페이스의 요소와 같은 콘텍스트 정보를 이용하여 위치 값을 해석할 수 있다.
하나 이상의 사용자 선택가능 심볼들(142) 각각은 심볼(예컨대, 144로 도시된 바와 같은 확대경 심볼), 축약어(예컨대, "esc"), 비축약어, 글자, 이미지, 애니메이션화된 이미지, 비디오 등과 같은 표시자를 포함할 수 있다. 일부 실시예들에서, 하나 이상의 사용자 선택가능 심볼들(142)의 개개의 심볼은 사용자 입력(들)을 수신할 수 있다.
입력은 하나 이상의 사용자 선택가능 심볼들(142) 각각과 연관될 수 있다. 입력은 기능, 글자, 수치 값 등일 수 있다. 하나 이상의 사용자 선택가능 심볼들(142)의 개개의 심볼은 하나 이상의 사용자 선택가능 심볼들(142) 중 그 개개의 심볼에 대한 입력에 대응하는 표시자를 포함할 수 있다. 예를 들어, 도 1b에서, 축약어 "esc"를 갖는 사용자 선택가능 심볼은 사용자에게 이스케이프 기능이 사용자 선택가능 심볼과 연관된다는 것을 나타낸다. 하나 이상의 사용자 선택가능 심볼들(142)과 연관된 기능은 사용자가 사용자 선택가능 심볼을 선택하는 경우에 활성화될 수 있다. 예를 들어, 이스케이프 기능은 사용자가 표시자 "esc"를 갖는 사용자 선택가능 심볼을 선택하는 경우에 활성화될 수 있다. 기능의 활성화는 휴대용 컴퓨팅 시스템(100)(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202))의 현재 상태에 따라서 상이한 효과들을 가질 수 있다. 예를 들어, 다이얼로그 박스가 디스플레이 부분(110)(또는 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204))의 일차 디스플레이(102) 상에서 열려 있는 경우, 동적 기능 열(104) 상의 이스케이프 기능을 활성화시키는 것은 다이얼로그 박스를 닫을 수 있다. 다른 예에서, 게임 애플리케이션이 휴대용 컴퓨팅 시스템(100)(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202))의 프로세서에 의해 실행되고 있는 경우, 동적 기능 열(104) 상의 이스케이프 기능을 활성화시키는 것은 게임을 일시정지시킬 수 있다.
일부 실시예들에서, 기능들은 이동가능하게 작동되는 키들 및/또는 사용자 선택가능 심볼들의 조합들과 연관될 수 있다. 예를 들어, 커맨드 키와 "c" 키의 동시 작동(즉, 커맨드 + c)은 "복사하기" 기능과 연관될 수 있다. 다른 예에서, 커맨드 키와 표시자 "esc"를 갖는 사용자 선택가능 심볼의 선택의 동시 작동(즉, 커맨드 + esc)은 미디어 플레이어 애플리케이션과 같은 특정한 애플리케이션을 여는 기능을 활성화시킬 수 있다. 또 다른 예에서, 2개의 사용자 선택가능 심볼들(예컨대, 표시자 "esc"를 갖는 사용자 선택가능 심볼, 및 확대경 표시자를 갖는 사용자 선택가능 심볼(144))의 동시 선택은 특화된 검색 기능과 같은 기능의 활성화를 초래할 수 있다.
일부 실시예들에서, 동적 기능 열(104)의 하나 이상의 사용자 선택가능 심볼들(142)의 제1 서브세트(146)는 하나의 그룹의 기능들과 연관될 수 있고, 동적 기능 열(104)의 하나 이상의 사용자 선택가능 심볼들(142)의 제2 서브세트(148)는 제2 그룹의 기능들과 연관될 수 있다. 예를 들어, 제1 서브세트(146) 내의 사용자 선택가능 심볼들은 범용 기능들(예컨대, 시스템 레벨 기능들 또는 어포던스들)일 수 있고, 제2 서브세트(148) 내의 사용자 선택가능 심볼들은 애플리케이션 특정 기능들일 수 있다. 이와 같이, 제2 서브세트(148) 내의 사용자 선택가능 심볼들은 포커스가 일차 디스플레이(102) 상에 디스플레이된 그래픽 사용자 인터페이스의 제1 요소(예컨대, 인터넷 브라우저 애플리케이션에 대응하는 제1 윈도우)로부터 그래픽 사용자 인터페이스의 제2 요소(예컨대, 이메일 애플리케이션에 대응하는 제2 윈도우)로 시프트하는 경우에 변화한다. 반대로, 제1 서브세트(146) 내의 사용자 선택가능 심볼들은 포커스가 그래픽 사용자 인터페이스의 제1 요소로부터 그래픽 사용자 인터페이스의 제2 요소로 시프트하는 경우에 유지된다.
일부 실시예들에서, 제2 서브세트(148) 내의 사용자 선택가능 심볼들은 포커스를 두고 있는 일차 디스플레이(102) 상의 활성 상태 사용자 인터페이스 요소 디스플레이에 기초하여 판정된다. 일부 실시예들에서, "포커스를 두고 있는"이라는 용어는, 현재 전경 내에 있고, 활성 상태로 구동 중이거나, 또는 컴퓨팅 시스템의 사용자로부터 수신된 입력, 예컨대 키 누름, 마우스 클릭, 음성 커맨드, 제스처 모션 등에 의해 제어가능한 사용자 인터페이스의 활성 상태의 요소(예컨대, 애플리케이션과 연관된 윈도우, 애플리케이션과 연관된 특정한 툴바 또는 메뉴, 또는 운영 체제)를 지칭할 수 있다.
일부 실시예들에서, 범용 사용자 선택가능 심볼들에 대응하는 하나 이상의 사용자 선택가능 심볼들(142)의 제1 서브세트(146)는 동적 기능 열(104)의 제1 영역(예컨대, 동적 기능 열(104)의 좌반부)을 차지하고, 하나 이상의 사용자 선택가능 심볼들(142)의 제2 서브세트(148)는 동적 기능 열(104)의 제2 영역(예컨대, 동적 기능 열(104)의 우반부)을 차지한다. 동적 기능 열(104)의 다른 부분들이 제1 서브세트(146) 및 제2 서브세트(148)에 할당될 수 있다는 것이 인식될 것이다. 일부 실시예들에서, 어떠한 애플리케이션도 포커스를 두지 않는 경우, 동적 기능 열(104)의 제2 영역은 어떠한 사용자 선택가능 심볼들도 포함하지 않을 수 있다. 일부 실시예들에서, 동적 기능 열(104)은 사용자 선택가능 심볼들의 3개 이상의 서브세트들을 포함한다. 일부 실시예들에서, 동적 기능 열(104)은 서브세트들로 분할되지 않는 사용자 선택가능 심볼들의 단일 세트를 포함한다. 도 1b에서 동적 기능 열(104) 내에 단일 열의 사용자 선택가능 심볼들이 도시되어 있지만, 동적 기능 열(104)은 다수의 열들의 사용자 선택가능 심볼들을 포함할 수 있다는 것이 인식될 것이다.
일부 실시예들에서, 포커스의 변경은 디스플레이 부분(110)(또는 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204))의 일차 디스플레이(102) 상에 디스플레이된 그래픽 사용자 인터페이스의 활성 상태가 되는 요소 및 사용자 입력을 수신할 요소를 변화시킨다. 사용자 입력은 키보드, 마우스, 터치패드, 또는 다른 사용자 입력 디바이스로부터 수신될 수 있다. 추가적으로 그리고/또는 대안으로, 일부 실시예들에서, 포커스의 변경은 디스플레이 부분(110)(또는 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204))의 일차 디스플레이(102) 상에 디스플레이된 그래픽 사용자 인터페이스의 전경에서 보이는 요소를 변화시킨다.
일부 실시예들에서, 포커스의 변경은, 사용자 입력에 응답하여, 예를 들어, 디스플레이 부분(110)(또는 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204))의 일차 디스플레이(102) 상에 디스플레이된 그래픽 사용자 인터페이스의 요소(예컨대, 상이한 윈도우)의 사용자 선택에 응답하여, 또는 사용자 선택가능 심볼(예컨대, 동적 기능 열(104) 상에 디스플레이된 어포던스들/심볼들 중 하나)의 사용자 선택에 응답하여 발생한다. 사용자 선택은 키 스트로크, 마우스 클릭, 마우스 오버(mouse over), 커맨드 + tab 입력 등일 수 있다. 일부 실시예들에서, 포커스의 변경은 휴대용 시스템(100)(또는 도 2a 내지 도 2d에서의 컴퓨팅 디바이스(202))의 운영 체제에 의한 판정에 응답하여 발생한다. 예를 들어, 사용자가 포커스를 두고 있는 애플리케이션 윈도우를 닫는 경우, 운영 체제는 닫힌 애플리케이션 윈도우에 앞서 포커스를 두었던 애플리케이션과 같은 상이한 애플리케이션에 포커스를 둘 수 있다. 다른 예에서, 사용자가 포커스를 두고 있는 애플리케이션을 닫는 경우, 운영 체제는 사용자에게 애플리케이션을 통해 문서에 대해 행해진 변경들을 저장할 것을 프롬프트하는 다이얼로그 박스에 포커스를 둘 수 있다.
일부 실시예들에서, 포커스의 변경은 애플리케이션과 연관된 하나의 요소로부터 동일한 애플리케이션과 연관된 다른 요소로의(예컨대, 이메일 애플리케이션의 이메일 작성 윈도우로부터 이메일 애플리케이션의 받은 편지함 목록 윈도우로의 또는 인터넷 브라우저 애플리케이션의 하나의 탭(tab)으로부터 인터넷 브라우저 애플리케이션의 다른 탭으로의) 변경일 수 있다. 일부 실시예들에서, 포커스의 변경은 하나의 애플리케이션과 연관된 요소로부터 다른 애플리케이션과 연관된 요소로의(예컨대, 인터넷 브라우저 윈도우로부터 이메일 애플리케이션 윈도우로의) 변화일 수 있다. 또한, 일부 실시예들에서, 포커스의 변경은 애플리케이션과 연관된 요소로부터, 운영 체제와 연관된 요소, 예컨대 시스템 다이얼로그 박스, 시스템 설정 제어부(예컨대, 볼륨 제어부), 파일/폴더 내비게이션 애플리케이션(예컨대, Apple Inc.의 FINDER 애플리케이션)과 연관된 윈도우 등으로의 변경일 수 있다. 게다가, 포커스는, 또한, 다이얼로그 박스, 파일 디렉토리, 설정 제어부(예컨대, 볼륨 제어부), 또는 정보가 사용자에게 제시될 수 있고/있거나 사용자 입력이 수신될 수 있는 그래픽 사용자 인터페이스의 임의의 다른 요소로 지향될 수 있다.
도 2a는, 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템(200)의 제1 구현예의 예시적인 다이어그램이다. 데스크톱 컴퓨팅 시스템(200)은 컴퓨팅 디바이스(202), 일차 디스플레이(102)를 갖는 주변기기 디스플레이 디바이스(204), 주변기기 키보드(206), 및 주변기기 마우스(208)를 포함한다. 컴퓨팅 디바이스(202)는 하나 이상의 프로세서들, 및 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 일부 실시예들에서, 주변기기 디스플레이 디바이스(204)는 iMAC® 디바이스와 같은 컴퓨팅 디바이스(202)와 일체화될 수 있다. 일부 실시예들에서, 주변기기 디스플레이 디바이스(204)의 일차 디스플레이(102)는 터치 스크린 디스플레이이다. 도 2a에서, 주변기기 디스플레이 디바이스(204)(본 명세서에서, 제1 하우징(204) 또는 하우징(204)으로도 지칭됨), 주변기기 키보드(206), 및 주변기기 마우스(208)는 USB(Universal Serial Bus) 또는 PS/2와 같은 유선 접속을 통해, 또는 블루투스, Wi-Fi 등과 같은 통신 프로토콜을 이용한 무선 통신 링크를 통해, 컴퓨팅 디바이스(202)에 통신가능하게 커플링된다. 예를 들어, 주변기기 키보드(206)(본 명세서에서, 제2 하우징(206) 또는 하우징(206)으로도 지칭됨)는 컴퓨팅 디바이스(202)로부터 15 피트 이하에 있다(예컨대, 대략 3 피트 떨어져 있다). 도 2a에서, 주변기기 키보드(206)는 동일한 하우징 내에 적어도 부분적으로 포함되는 동적 기능 열(104) 및 물리적 키들의 세트(106)를 포함한다. 일부 실시예들에서, 도 1b를 참조하여 더 상세히 기술되는 동적 기능 열(104)은 터치 스크린 디스플레이이다. 일부 실시예들에서, 주변기기 키보드(206)는 하나 이상의 프로세서들, 및 주변기기 키보드(206)의 하나 이상의 프로세서들에 의해 실행되어 본 명세서에 기술되는 실시예들 중 임의의 것을 수행할 수 있는 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 일부 실시예들에서, 주변기기 키보드(206)는 사용자 입력들(예컨대, 키 스트로크들, 및 동적 기능 열(104)에 의해 디스플레이되는 사용자 선택가능 심볼들/어포던스들의 선택들)을 나타내는 신호들을 컴퓨팅 디바이스(202)로 중계한다.
도 2b는, 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템(200)의 제2 구현예의 예시적인 다이어그램이다. 도 2b에서, 데스크톱 컴퓨팅 시스템(200)은 컴퓨팅 디바이스(202), 일차 디스플레이(102)를 갖는 주변기기 디스플레이 디바이스(204), 및 주변기기 키보드(206)를 포함한다. 도 2b에서, 주변기기 디스플레이 디바이스(204) 및 주변기기 키보드(206)는 USB 또는 PS/2와 같은 유선 접속을 통해, 또는 블루투스, Wi-Fi 등과 같은 통신 프로토콜을 이용한 무선 통신 링크를 통해, 컴퓨팅 디바이스(202)에 통신가능하게 커플링된다. 도 2b에서, 주변기기 키보드(206)는 동일한 하우징 내에 적어도 부분적으로 포함되는 동적 기능 열(104), 물리적 키들의 세트(106), 및 터치패드(108)를 포함한다. 일부 실시예들에서, 도 1b를 참조하여 더 상세히 기술되는 동적 기능 열(104)은 터치 스크린 디스플레이이다. 일부 실시예들에서, 주변기기 키보드(206)는 하나 이상의 프로세서들, 및 주변기기 키보드(206)의 하나 이상의 프로세서들에 의해 실행되어 본 명세서에 기술되는 실시예들 중 임의의 것을 수행할 수 있는 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 일부 실시예들에서, 주변기기 키보드(206)는 사용자 입력들(예컨대, 키 스트로크들, 터치패드(108)와의 사용자 상호작용들, 및 동적 기능 열(104)에 의해 디스플레이되는 사용자 선택가능 심볼들/어포던스들의 선택들)을 나타내는 신호들을 컴퓨팅 디바이스(202)로 중계한다.
도 2c는, 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템(200)의 제3 구현예의 예시적인 다이어그램이다. 도 2c에서, 데스크톱 컴퓨팅 시스템(200)은 컴퓨팅 디바이스(202), 일차 디스플레이(102)를 갖는 주변기기 디스플레이 디바이스(204), 주변기기 키보드(206), 및 제1 주변기기 입력 메커니즘(212)을 포함한다. 도 2c에서, 주변기기 디스플레이 디바이스(204), 주변기기 키보드(206), 및 제1 주변기기 입력 메커니즘(212)은 USB 또는 PS/2와 같은 유선 접속을 통해, 또는 블루투스, Wi-Fi 등과 같은 통신 프로토콜을 이용한 무선 통신 링크를 통해, 컴퓨팅 디바이스(202)에 통신가능하게 커플링된다. 도 2c에서, 주변기기 키보드(206)는 물리적 키들의 세트(106)를 포함하고, 제1 주변기기 입력 메커니즘(212)은 동일한 하우징 내에 적어도 부분적으로 포함되는 동적 기능 열(104) 및 터치패드(108)를 포함한다. 일부 실시예들에서, 도 1b를 참조하여 더 상세히 기술되는 동적 기능 열(104)은 터치 스크린 디스플레이이다. 일부 실시예들에서, 제1 주변기기 입력 메커니즘(212)은 하나 이상의 프로세서들, 및 제1 주변기기 입력 메커니즘(212)의 하나 이상의 프로세서들에 의해 실행되어 본 명세서에 기술되는 실시예들 중 임의의 것을 수행할 수 있는 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 일부 실시예들에서, 제1 주변기기 입력 메커니즘(212)은 사용자 입력들(예컨대, 터치패드(108)와의 사용자 상호작용들, 및 동적 기능 열(104)에 의해 디스플레이되는 사용자 선택가능 심볼들/어포던스들의 사용자 선택들)을 나타내는 신호들을 컴퓨팅 디바이스(202)로 중계한다.
도 2d는, 일부 실시예들에 따른, 데스크톱 컴퓨팅 시스템(200)의 제4 구현예의 예시적인 다이어그램이다. 도 2d에서, 데스크톱 컴퓨팅 시스템(200)은 컴퓨팅 디바이스(202), 일차 디스플레이(102)를 갖는 주변기기 디스플레이 디바이스(204), 주변기기 키보드(206), 주변기기 마우스(208), 및 제2 주변기기 입력 메커니즘(222)을 포함한다. 도 2d에서, 주변기기 디스플레이 디바이스(204), 주변기기 키보드(206), 주변기기 마우스(208), 및 제2 주변기기 입력 메커니즘(222)은 USB 또는 PS/2와 같은 유선 접속을 통해, 또는 블루투스, Wi-Fi 등과 같은 통신 프로토콜을 이용한 무선 통신 링크를 통해, 컴퓨팅 디바이스(202)에 통신가능하게 커플링된다. 도 2a에서, 주변기기 키보드(206)는 동적 기능 열(104) 및 물리적 키들의 세트(106)를 포함한다. 도 2d에서, 주변기기 키보드(206)는 물리적 키들의 세트(106)를 포함하고, 제2 주변기기 입력 메커니즘(222)은 제2 주변기기 입력 메커니즘(222)의 하우징 내에 적어도 부분적으로 포함되는 동적 기능 열(104)을 포함한다. 일부 실시예들에서, 도 1b를 참조하여 더 상세히 기술되는 동적 기능 열(104)은 터치 스크린 디스플레이이다. 일부 실시예들에서, 제2 주변기기 입력 메커니즘(222)은 하나 이상의 프로세서들, 및 제2 주변기기 입력 메커니즘(222)의 하나 이상의 프로세서들에 의해 실행되어 본 명세서에 기술되는 실시예들 중 임의의 것을 수행할 수 있는 하나 이상의 프로그램들을 저장하는 메모리를 포함한다. 일부 실시예들에서, 제2 주변기기 입력 메커니즘(222)은 사용자 입력들(예컨대, 동적 기능 열(104)에 의해 디스플레이되는 사용자 선택가능 심볼들/어포던스들의 사용자 선택들)을 나타내는 신호들을 컴퓨팅 디바이스(202)로 중계한다.
도 3a는, 일부 실시예들에 따른, 전자 디바이스(300)의 블록 다이어그램이다. 일부 실시예들에서, 전자 디바이스(300)는 랩톱과 같은 휴대용 전자 디바이스(예컨대, 도 1a의 휴대용 컴퓨팅 시스템(100))이다. 일부 실시예들에서, 전자 디바이스(300)는 휴대용 디바이스가 아니라 데스크톱 컴퓨터(예컨대, 도 2a 내지 도 2d의 데스크톱 컴퓨팅 시스템(200)의 컴퓨팅 디바이스(202))인데, 이는 주변기기 디스플레이 시스템(예컨대, 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204)), 및 선택적으로, 주변기기 터치 감응형 표면(예컨대, 도 2b 및 도 2c의 터치패드(108), 및/또는 터치 감응형 디스플레이, 예컨대 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204), 및/또는 도 2a 내지 도 2d의 동적 기능 열(104))과 통신가능하게 커플링된다.
전자 디바이스(300)는 전형적으로 드로잉 애플리케이션, 프레젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 제작 애플리케이션, 디스크 저작 애플리케이션, 스프레드시트 애플리케이션, 게이밍 애플리케이션, 화상 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 이미지 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우저 애플리케이션, 및/또는 미디어 플레이어 애플리케이션 중 하나 이상과 같은 다양한 애플리케이션들을 지원한다.
전자 디바이스(300) 상에서 실행되는 다양한 애플리케이션들은, 선택적으로, 터치 감응형 표면과 같은 적어도 하나의 보편적인 물리적 사용자 인터페이스 디바이스를 사용한다. 터치 감응형 표면의 하나 이상의 기능들뿐만 아니라 전자 디바이스(300)에 의해 디스플레이되는 대응하는 정보는, 선택적으로, 하나의 애플리케이션으로부터 다음 애플리케이션으로 그리고/또는 소정 애플리케이션 내에서 조정되고/되거나 변화된다. 이러한 방식으로, 전자 디바이스(300)의 보편적인 물리적 아키텍처(예컨대, 터치 감응형 표면)는, 선택적으로, 사용자에게 직관적이고 투명한 사용자 인터페이스들로 다양한 애플리케이션들을 지원한다.
전자 디바이스(300)는 메모리(302)(선택적으로, 하나 이상의 컴퓨터 판독가능 저장 매체들을 포함함), 메모리 제어기(322), 하나 이상의 프로세싱 유닛들(CPU(들))(320), 주변기기 인터페이스(318), RF(radio frequency) 회로부(308), 오디오 회로부(310), 스피커(311), 마이크로폰(313), 입출력(I/O) 서브시스템(306), 기타 입력 또는 제어 디바이스들(316), 및 외부 포트(324)를 포함한다. 전자 디바이스(300)는, 선택적으로, 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102) 및/또는 도 1a 및 도 1b의 동적 기능 열(104))을 포함하는데, 이는 터치 감응형 디스플레이(때때로, 본 명세서에서, "터치 스크린" 또는 "터치 스크린 디스플레이"로도 지칭됨)일 수 있다. 전자 디바이스(300)는 선택적으로 하나 이상의 광 센서들(364)을 포함한다. 전자 디바이스(300)는, 선택적으로, 터치 감응형 디스플레이 또는 터치패드와 같은 터치 감응형 표면 상에의 접촉들의 세기를 검출하기 위한 하나 이상의 세기 센서들(365)을 포함한다. 전자 디바이스(300)는, 선택적으로, 터치 감응형 디스플레이 또는 터치패드(예컨대, 도 1a 및 도 1b의 터치패드(108))와 같은 터치 감응형 표면 상에 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기들(367)을 포함한다. 이들 컴포넌트들은 선택적으로 하나 이상의 통신 버스들 또는 신호 라인(303)들을 통해 통신한다.
명세서에서 사용되는 바와 같이, 터치 감응형 표면 상에의 접촉의 "세기"라는 용어는 터치 감응형 표면 상에의 접촉(예컨대, 손가락 접촉)의 힘 또는 압력(단위 면적 당 힘), 또는 터치 감응형 표면 상에의 접촉의 힘 또는 압력에 대한 대체물(대용물(proxy))을 지칭한다. 접촉의 세기는, 적어도 4개의 구별되는 값들을 포함하고 더 전형적으로는 수백 개(예컨대, 적어도 256개)의 구별되는 값들을 포함하는 일정 범위의 값들을 갖는다. 접촉의 세기는 다양한 접근법들, 및 다양한 센서들 또는 센서들의 조합들을 이용하여 선택적으로 판정(또는 측정)된다. 예를 들어, 터치 감응형 표면 아래의 또는 그에 인접한 하나 이상의 힘 센서들은 터치 감응형 표면 상의 다양한 지점들에서 힘을 측정하는 데 선택적으로 사용된다. 일부 구현예들에서는, 다수의 힘 센서들로부터의 힘 측정치들이 접촉의 추정되는 힘을 판정하기 위해 조합(예컨대, 가중 평균)된다. 유사하게, 스타일러스의 압력 감응형 팁(tip)이 터치 감응형 표면 상의 스타일러스의 압력을 판정하는 데 선택적으로 사용된다. 대안으로, 터치 감응형 표면 상에서 검출된 접촉 면적의 크기 및/또는 그에 대한 변화들, 접촉 부근의 터치 감응형 표면의 용량 및/또는 그에 대한 변화들, 및/또는 접촉 부근의 터치 감응형 표면의 저항 및/또는 그에 대한 변화들은 터치 감응형 표면 상의 접촉의 힘 또는 압력에 대한 대체물로서 선택적으로 이용된다. 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 세기 임계치가 초과되었는지의 여부를 판정하는 데 직접 이용된다(예컨대, 세기 임계치는 대체 측정치들에 대응하는 단위로 기술된다). 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 추정된 힘 또는 압력으로 변환되고, 추정된 힘 또는 압력은 세기 임계치가 초과되었는지의 여부를 판정하기 위해 이용된다(예컨대, 세기 임계치는 압력의 단위로 측정된 압력 임계치이다).
명세서 및 청구범위에 사용되는 바와 같이, "촉각적 출력"이라는 용어는 디바이스의 이전 위치에 대한 디바이스의 물리적 변위, 디바이스의 다른 컴포넌트(예컨대, 하우징)에 대한 디바이스의 컴포넌트(예컨대, 터치 감응형 표면)의 물리적 변위, 또는 사용자의 촉각을 이용하여 사용자에 의해 검출될 디바이스의 질량 중심에 대한 컴포넌트의 변위를 지칭한다. 예컨대, 디바이스 또는 디바이스의 컴포넌트가 터치에 민감한 사용자의 표면(예컨대, 사용자의 손의 손가락, 손바닥, 또는 다른 부위)과 접촉하는 상황에서, 물리적 변위에 의해 생성된 촉각적 출력은 사용자에 의해 디바이스 또는 디바이스의 컴포넌트의 물리적 특성들의 인지된 변화에 대응하는 촉감(tactile sensation)으로서 해석될 것이다. 예를 들어, 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 또는 터치/트랙 패드)의 이동은, 선택적으로, 사용자에 의해, 물리적 액추에이터 버튼의 "다운 클릭(down click)" 또는 "업 클릭(up click)"으로서 해석된다. 일부 경우들에 있어서, 사용자는 사용자의 이동에 의해 물리적으로 눌리는(예컨대, 변위되는) 터치 감응형 표면과 연관된 물리적 액추에이터 버튼의 이동이 없는 경우에도 "다운 클릭" 또는 "업 클릭"과 같은 촉감을 느낄 것이다. 다른 예로서, 터치 감응형 표면의 이동은, 터치 감응형 표면의 평활도(smoothness)의 변화가 없는 경우에도, 선택적으로, 사용자에 의해 터치 감응형 표면의 "조도(roughness)"로서 해석 또는 감지된다. 사용자에 의한 터치의 이러한 해석들이 사용자의 개별화된 감각 인지(sensory perception)에 영향을 받기 쉬울 것이지만, 대다수의 사용자들에게 보편적인 많은 터치 감각 인지가 있다. 따라서, 촉각적 출력이 사용자의 특정 감각 인지(예컨대, "업 클릭", "다운 클릭", "조도")에 대응하는 것으로서 기술될 때, 달리 언급되지 않는다면, 생성된 촉각적 출력은 전형적인(또는 평균적인) 사용자에 대한 기술된 감각 인지를 생성할 디바이스 또는 그의 컴포넌트의 물리적 변위에 대응한다.
전자 디바이스(300)는 단지 일례이며, 전자 디바이스(300)는, 선택적으로, 도시된 것보다 더 많은 또는 더 적은 컴포넌트들을 갖거나, 선택적으로, 2개 이상의 컴포넌트들을 조합하거나, 또는 선택적으로, 컴포넌트들의 상이한 구성 또는 배열을 갖는다는 것이 이해되어야 한다. 도 3a에 도시된 다양한 컴포넌트들은, 하나 이상의 신호 프로세싱 및/또는 주문형 집적 회로(application specific integrated circuit)들을 비롯한, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합으로 구현된다.
메모리(302)는, 선택적으로, 고속 랜덤 액세스 메모리를 포함하고, 또한 선택적으로, 하나 이상의 자기 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 다른 비휘발성 솔리드 스테이트 메모리 디바이스(non-volatile solid-state memory device)들과 같은 비휘발성 메모리를 포함한다. 전자 디바이스(300)의 다른 컴포넌트들, 예컨대 CPU(들)(320) 및 주변기기 인터페이스(318)에 의한 메모리(302)에의 액세스는 선택적으로 메모리 제어기(322)에 의해 제어된다. 주변기기 인터페이스(318)는 입력 및 출력 주변기기들을 CPU(들)(320) 및 메모리(302)에 커플링시키는 데 사용될 수 있다. 하나 이상의 프로세싱 유닛들(320)은 메모리(302)에 저장되어 전자 디바이스(300)에 대한 다양한 기능들을 수행하고 데이터를 프로세싱하게 하는 다양한 소프트웨어 프로그램들 및/또는 명령어들의 세트들을 구동하거나 실행시킨다. 일부 실시예들에서, 주변기기 인터페이스(318), CPU(들)(320) 및 메모리 제어기(322)는, 선택적으로, 칩(304)과 같은 단일 칩 상에서 구현된다. 일부 다른 실시예들에서, 이들은 선택적으로 별개의 칩들 상에서 구현된다.
RF 회로부(308)는 전자기 신호들이라고도 지칭되는 RF 신호들을 수신 및 전송한다. RF 회로부(308)는 전기 신호들을 전자기 신호들로/로부터 변환하고, 전자기 신호들을 통해 통신 네트워크들 및 다른 통신 디바이스들과 통신한다. RF 회로부(308)는, 선택적으로, 안테나 시스템, RF 송수신기, 하나 이상의 증폭기들, 튜너, 하나 이상의 발진기들, 디지털 신호 프로세서, CODEC 칩셋, SIM(subscriber identity module) 카드, 메모리 등을 포함하지만 이들로 제한되지 않는, 이러한 기능들을 수행하기 위한 잘 알려진 회로부를 포함한다. RF 회로부(308)는, 선택적으로, 네트워크들, 예컨대 월드 와이드 웹(WWW)으로도 지칭되는 인터넷, 인트라넷, 및/또는 무선 네트워크, 예컨대 셀룰러 전화 네트워크, 무선 근거리 통신망(LAN) 및/또는 도시권 통신망(MAN), 및 다른 디바이스들과 무선 통신에 의해 통신한다. 무선 통신은, 선택적으로, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), HSUPA(high-speed uplink packet access), EV-DO(Evolution, Data-Only), HSPA, HSPA+, DC-HSPDA(Dual-Cell HSPA), LTE(long term evolution), NFC(near field communication), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스, Wi-Fi(Wireless Fidelity)(예컨대, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 이메일용 프로토콜(예컨대, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예컨대, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service)), 및/또는 SMS(Short Message Service), 또는 본 명세서의 출원일 현재 아직 개발되지 않은 통신 프로토콜들을 포함하는 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 제한되지 않는 복수의 통신 표준들, 프로토콜들 및 기술들 중 임의의 것을 이용한다.
오디오 회로부(310), 스피커(311), 및 마이크로폰(313)은 사용자와 전자 디바이스(300) 사이에 오디오 인터페이스를 제공한다. 오디오 회로부(310)는 주변기기 인터페이스(318)로부터 오디오 데이터를 수신하고, 그 오디오 데이터를 전기 신호로 변환하고, 그 전기 신호를 스피커(311)로 송신한다. 스피커(311)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. 오디오 회로부(310)는 또한 마이크로폰(313)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로부(310)는 전기 신호를 오디오 데이터로 변환하고, 프로세싱을 위해 오디오 데이터를 주변기기 인터페이스(318)로 송신한다. 오디오 데이터는, 선택적으로, 주변기기 인터페이스(318)에 의해 메모리(302) 및/또는 RF 회로부(308)로부터 인출되고/되거나 그로 송신된다. 일부 실시예들에서, 오디오 회로부(310)는 또한 헤드셋 잭을 포함한다. 헤드셋 잭은 출력-전용 헤드폰들, 또는 출력부(예컨대, 한쪽 또는 양쪽 귀용 헤드폰) 및 입력부(예컨대, 마이크로폰) 양쪽 모두를 갖는 헤드셋과 같은 착탈가능한 오디오 입출력 주변기기들과 오디오 회로부(310) 사이의 인터페이스를 제공한다.
I/O 서브시스템(306)은 전자 디바이스(300)의 입력/출력 주변기기들, 예컨대 디스플레이 시스템(312) 및 기타 입력 또는 제어 디바이스들(316)을 주변기기 인터페이스(318)에 커플링시킨다. I/O 서브시스템(306)은, 선택적으로, 디스플레이 제어기(356), 광 센서 제어기(358), 세기 센서 제어기(359), 햅틱 피드백 제어기(361), 및 기타 입력 또는 제어 디바이스들을 위한 하나 이상의 기타 입력 제어기들(360)을 포함한다. 하나 이상의 기타 입력 제어기들(360)은 전기 신호들을 기타 입력 또는 제어 디바이스들(316)로부터/로 수신/전송한다. 기타 입력 또는 제어 디바이스들(316)은 선택적으로 물리적 버튼(예컨대, 푸시 버튼, 로커 버튼(rocker button) 등), 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함한다. 일부 대안의 실시예들에서, 기타 입력 제어기(들)(360)는, 선택적으로, 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 디바이스 중 임의의 것과 커플링된다(또는 어떤 것과도 커플링되지 않는다). 하나 이상의 물리적 버튼들은, 선택적으로, 스피커(311) 및/또는 마이크로폰(313)의 볼륨 제어를 위한 업/다운 버튼을 포함한다.
디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102) 및/또는 도 1a 및 도 1b의 동적 기능 열(104))은 전자 디바이스(300)와 사용자 사이에 출력 인터페이스(및, 선택적으로, 그것이 터치 감응형 디스플레이인 경우에 입력 인터페이스)를 제공한다. 디스플레이 제어기(356)는 전기 신호들을 디스플레이 시스템(312)으로부터/으로 수신 및/또는 전송한다. 디스플레이 시스템(312)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 선택적으로 그래픽들, 텍스트, 아이콘들, 비디오 및 이들의 임의의 조합(총칭하여 "그래픽들"로 지칭됨)을 포함한다. 일부 실시예들에서, 시각적 출력 중 일부 또는 전부가 사용자 인터페이스 객체들/요소들에 대응한다.
일부 실시예들에서, 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104))은 햅틱 및/또는 촉각적 접촉에 기초하여 사용자로부터의 입력을 수용하는 터치 감응형 표면, 센서 또는 센서들의 세트를 갖는 터치 감응형 디스플레이이다. 이와 같이, 디스플레이 시스템(312) 및 디스플레이 제어기(356)는 (임의의 연관된 모듈들 및/또는 메모리(302) 내의 명령어들의 세트들과 함께) 디스플레이 시스템(312) 상에의 접촉(및, 접촉의 임의의 이동 또는 중단)을 검출하며, 검출된 접촉을 디스플레이 시스템(312) 상에 디스플레이된 사용자 인터페이스 객체들(예컨대, 하나 이상의 소프트 키, 아이콘, 웹 페이지, 또는 이미지)과의 상호작용으로 변환한다. 하나의 예시적인 실시예에서, 디스플레이 시스템(312)과 사용자 사이의 접촉 지점은 사용자의 손가락 아래의 영역에 대응한다.
디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104))은, 선택적으로, LCD(liquid crystal display) 기술, LPD(light emitting polymer display) 기술, LED(light emitting diode) 기술, 또는 OLED(organic light emitting diode) 기술을 이용하지만, 다른 디스플레이 기술들이 다른 실시예들에서 이용된다. 일부 실시예들에서, 디스플레이 시스템(312)이 터치 감응형 디스플레이인 경우, 디스플레이 시스템(312) 및 디스플레이 제어기(356)는, 선택적으로, 용량성, 저항성, 적외선 및 표면 음향파 기술들뿐만 아니라 다른 근접 센서 어레이들, 또는 디스플레이 시스템(312)과의 하나 이상의 접촉 지점들을 판정하기 위한 다른 요소들을 포함하지만 이들로 한정되지 않는, 현재 알려져 있거나 추후에 개발되는 복수의 터치 감지 기술들 중 임의의 것을 이용하여, 접촉 및 그의 임의의 이동 또는 중단을 검출한다. 하나의 예시적인 실시예에서, 미국 캘리포니아주 쿠퍼티노 소재의 Apple Inc.로부터의 iPHONE®, iPODTOUCH®, 및 iPAD®에서 발견되는 것과 같은 투영형 상호 용량 감지(projected mutual capacitance sensing) 기술이 이용된다.
디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104))은, 선택적으로, 400 dpi 초과(예컨대, 500 dpi, 800 dpi, 또는 그 초과)의 비디오 해상도를 갖는다. 일부 실시예들에서, 디스플레이 시스템(312)은 사용자가 선택적으로 스타일러스, 손가락 등을 이용하여 접촉하는 터치 감응형 디스플레이이다. 일부 실시예들에서, 사용자 인터페이스는, 주로 손가락 기반 접촉들 및 제스처들과 협업하도록 설계된다. 일부 실시예들에서, 전자 디바이스(300)는 대략적인 손가락 기반 입력을 사용자가 원하는 액션들을 수행하기 위한 정밀한 포인터/커서 위치 또는 커맨드로 변환한다.
일부 실시예들에서, 디스플레이 시스템(312) 외에도, 전자 디바이스(300)는, 선택적으로, 특정한 기능들을 활성화 또는 비활성화시키기 위한 터치패드(예컨대, 도 1a 및 도 1b의 터치패드(108))를 포함한다. 일부 실시예들에서, 터치패드는, 디스플레이 시스템(312)과는 달리, 시각적 출력을 디스플레이하지 않는 전자 디바이스(300)의 터치 감응형 영역이다. 일부 실시예들에서, 디스플레이 시스템(312)이 터치 감응형 디스플레이인 경우, 터치패드는, 선택적으로, 디스플레이 시스템(312)과는 분리된 터치 감응형 표면, 또는 디스플레이 시스템(312)에 의해 형성된 터치 감응형 표면의 연장부이다.
전자 디바이스(300)는. 또한. 다양한 컴포넌트들에 전력을 공급하기 위한 전력 시스템(362)을 포함한다. 전력 시스템(362)은, 선택적으로, 전력 관리 시스템, 하나 이상의 전원들(예컨대, 배터리, 교류 전류(alternating current, AC) 등), 재충전 시스템, 전력 고장 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시자(예컨대, LED), 및 휴대용 디바이스들 내에서의 전력의 생성, 관리 및 분배와 연관된 임의의 다른 컴포넌트들을 포함한다.
전자 디바이스(300)는, 선택적으로, 또한, I/O 서브시스템(306) 내의 광 센서 제어기(358)와 커플링되는 하나 이상의 광 센서들(364)을 포함한다. 광 센서(들)(364)는, 선택적으로, CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor) 포토트랜지스터들을 포함한다. 광 센서(들)(364)는 하나 이상의 렌즈를 통해 투영된 주변환경으로부터의 광을 수신하고, 그 광을 이미지를 나타내는 데이터로 변환한다. 이미징 모듈(343)과 결합하여, 광 센서(들)(364)는, 선택적으로, 정지 이미지 또는 비디오를 캡처한다. 일부 실시예들에서, 사용자가 디스플레이 시스템(312) 상에서 다른 화상 회의 참가자들을 보는 동안, 사용자의 이미지가 선택적으로 화상 회의를 위해 획득되도록 광 센서가 전자 디바이스(300)의 전면 상에 위치된다.
전자 디바이스(300)는, 선택적으로, 또한, I/O 서브시스템(306) 내의 세기 센서 제어기(359)와 커플링되는 하나 이상의 접촉 세기 센서(들)(365)를 포함한다. 접촉 세기 센서(들)(365)는, 선택적으로, 하나 이상의 압전 저항 스트레인 게이지, 용량성 힘 센서, 전기적 힘 센서, 압전 힘 센서, 광학적 힘 센서, 용량성 터치 감응형 표면, 또는 다른 세기 센서(예컨대, 터치 감응형 표면 상에의 접촉 힘(또는 압력)을 측정하는 데 사용되는 센서)를 포함한다. 접촉 세기 센서(들)(365)는 환경으로부터 접촉 세기 정보(예컨대, 압력 정보 또는 압력 정보에 대한 대용물)를 수신한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서는 터치 감응형 표면(예컨대, 도 1a 및 도 1b의 터치패드(108), 또는 터치 감응형 디스플레이인 경우의 디스플레이 시스템(312))과 동위치되거나 그에 근접해 있다.
전자 디바이스(300)는, 선택적으로, 또한, I/O 서브시스템(306) 내의 햅틱 피드백 제어기(361)와 커플링되는 하나 이상의 촉각적 출력 생성기들(367)을 포함한다. 촉각적 출력 생성기(들)(367)는, 선택적으로, 스피커 또는 다른 오디오 컴포넌트와 같은 하나 이상의 전자음향 디바이스들, 및/또는 모터, 솔레노이드, 전기활성 폴리머, 압전 액추에이터, 정전 액추에이터, 또는 기타 촉각적 출력 생성 컴포넌트(예컨대, 전기 신호들을 디바이스 상의 촉각적 출력들로 변환하는 컴포넌트)와 같은, 에너지를 선형 모션(linear motion)으로 변환하는 전기기계 디바이스들을 포함한다. 접촉 세기 센서(들)(365)는 햅틱 피드백 모듈(333)로부터 촉각적 피드백 생성 명령어들을 수신하며, 전자 디바이스(300)의 사용자에 의해 감지될 수 있는 촉각적 출력들을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기가 터치 감응형 표면(예컨대, 도 1a 및 도 1b의 터치패드(108), 또는 터치 감응형 디스플레이인 경우의 디스플레이 시스템(312))과 동위치되거나 그에 근접해 있으며, 선택적으로, 터치 감응형 표면을 수직으로(예컨대, 전자 디바이스(300)의 표면의 내부/외부로) 또는 횡방향으로(예컨대, 전자 디바이스(300)의 표면과 동일한 평면에서 전후로) 이동시킴으로써 촉각적 출력을 생성한다.
전자 디바이스(300)는, 선택적으로, 또한, 주변기기 인터페이스(318)와 커플링되는 하나 이상의 근접 센서들(366)을 포함한다. 대안으로, 근접 센서(들)(366)는 I/O 서브시스템(306) 내의 기타 입력 제어기(들)(360)와 커플링된다. 전자 디바이스(300)는, 선택적으로, 또한, 주변기기 인터페이스(318)와 커플링되는 하나 이상의 가속도계들(368)을 포함한다. 대안으로, 가속도계(들)(368)는 I/O 서브시스템(306) 내의 기타 입력 제어기(들)(360)와 커플링된다.
일부 실시예들에서, 메모리(302)에 저장된 소프트웨어 컴포넌트는 운영 체제(326), 통신 모듈(328)(또는 명령어들의 세트), 접촉/모션 모듈(330)(또는 명령어들의 세트), 그래픽 모듈(332)(또는 명령어들의 세트), 애플리케이션들(340)(또는 명령어들의 세트들), 및 동적 기능 열 모듈(350)(또는 명령어들의 세트들)을 포함한다. 또한, 일부 실시예들에서, 메모리(302)는, 도 3a에 도시된 바와 같이, 디바이스/글로벌 내부 상태(357)(또는 명령어들의 세트들)를 저장한다. 디바이스/글로벌 내부 상태(357)는 하기 중 하나 이상을 포함한다: 존재하는 경우, 어느 애플리케이션들이 현재 활성 상태이고/이거나 포커스에 있는지를 나타내는 활성 애플리케이션 상태; 어떤 애플리케이션들, 뷰들, 또는 다른 정보가 디스플레이 시스템(312)의 다양한 영역들(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102) 및/또는 도 1a 및 도 1b의 동적 기능 열(104)) 및/또는 주변기기 디스플레이 시스템(예컨대, 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204)의 일차 디스플레이(102) 및/또는 도 2a 내지 도 2d의 동적 기능 열(104))을 점유하는지를 나타내는 디스플레이 상태; 전자 디바이스(300)의 다양한 센서들 및 입력 또는 제어 디바이스들(316)로부터 획득된 정보를 포함한 센서 상태; 및 전자 디바이스(300)의 위치 및/또는 자세에 관한 위치 정보 중 하나 이상.
운영 체제(326)(예컨대, DARWIN, RTXC, LINUX, UNIX, OS X, WINDOWS, 또는 VxWorks와 같은 임베디드 운영 체제)는 일반적인 시스템 태스크들(예컨대, 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어 및 관리하기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하고, 다양한 하드웨어 및 소프트웨어 컴포넌트들 사이의 통신을 가능하게 한다.
통신 모듈(328)은 하나 이상의 외부 포트들(324) 및/또는 RF 회로부(308)를 통한 다른 디바이스들(예컨대, 도 2a 내지 도 2d의 컴퓨팅 디바이스(202); 도 2a 및 도 2d의 주변기기 마우스(208); 도 2a 및 도 2b의 주변기기 키보드(206); 도 2c의 제1 주변기기 입력 메커니즘(212); 및/또는 도 2d의 제2 주변기기 입력 메커니즘(222)과의 통신을 가능하게 하고, 또한, RF 회로부(308) 및/또는 외부 포트(324)를 통해 데이터를 전송/수신하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 외부 포트(324)(예컨대, USB, 파이어와이어(FIREWIRE) 등)는 다른 디바이스들에 직접적으로 또는 네트워크(예컨대, 인터넷, 무선 LAN 등)를 통해 간접적으로 커플링시키도록 구성된다. 일부 실시예들에서, 외부 포트(324)는 iPod® 디바이스들 상에서 사용되는 30-핀 커넥터와 동일하거나, 유사하거나, 그리고/또는 호환가능한 다중 핀(예컨대, 30-핀) 커넥터이다.
접촉/모션 모듈(330)은, 선택적으로, 그것이 (디스플레이 제어기(356)와 결합한) 터치 감응형 디스플레이 및 다른 접촉 감응형 디바이스들(예컨대, 터치패드 또는 물리적 클릭 휠)인 경우에 디스플레이 시스템(312)과의 접촉을 검출한다. 접촉/모션 모듈(330)은 접촉이 발생했는지의 여부를 판정하는 것(예컨대, 손가락-다운 이벤트(finger-down event)를 검출하는 것), 접촉의 세기(예컨대, 접촉의 힘 또는 압력, 또는 접촉의 힘 또는 압력에 대한 대체물)를 판정하는 것, 접촉의 이동이 있는지의 여부를 판정하고 터치 감응형 표면을 가로지르는 이동을 추적하는 것(예컨대, 하나 이상의 손가락-드래그 이벤트(finger-dragging event)를 검출하는 것), 및 접촉이 중단되었는지의 여부를 판정하는 것(예컨대, 손가락-업 이벤트(finger-up event) 또는 접촉 중단을 검출하는 것)과 같은, 접촉의 검출에 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/모션 모듈(330)은 터치 감응형 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉 지점의 이동을 판정하는 것은, 선택적으로, 접촉 지점의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향의 변화)를 판정하는 것을 포함한다. 이 동작들은, 선택적으로, 단일 접촉들(예컨대, 한 손가락 접촉들)에 또는 다수의 동시 접촉들(예컨대, "멀티터치"/다수의 손가락 접촉들)에 적용된다. 일부 실시예들에서, 접촉/모션 모듈(330)은 또한 터치패드(예컨대, 도 1a 및 도 1b의 터치패드(108)) 상에의 접촉을 검출한다.
일부 실시예들에서, 접촉/모션 모듈(330)은 하나 이상의 세기 임계치들의 세트를 이용하여, 동작이 사용자에 의해 수행되었는지의 여부를 판정한다(예컨대, 사용자가 어포던스를 선택했거나 그 위를 "클릭"했는지의 여부를 판정한다). 일부 실시예들에서, 적어도 세기 임계치들의 서브세트가 소프트웨어 파라미터들에 따라 판정된다(예컨대, 세기 임계치들은 특정한 물리적 액추에이터들의 활성화 임계치들에 의해 판정되지 않으며, 전자 디바이스(300)의 물리적 하드웨어를 변경하지 않으면서 조정될 수 있다). 예를 들면, 트랙패드 또는 터치 스크린 디스플레이의 마우스 "클릭" 임계치는 트랙패드 또는 터치 스크린 디스플레이 하드웨어를 변경함이 없이 넓은 범위의 사전정의된 임계치 값들 중 임의의 것으로 설정될 수 있다. 추가로, 일부 구현예들에서, 디바이스의 사용자는 (예컨대, 개별적인 세기 임계치들을 조정함으로써 그리고/또는 복수의 세기 임계치들을 시스템 레벨 클릭 "세기" 파라미터로 한꺼번에 조정함으로써) 세기 임계치들의 세트의 하나 이상의 세기 임계치를 조정하기 위한 소프트웨어 설정들을 제공받는다.
접촉/모션 모듈(330)은, 선택적으로, 사용자에 의한 제스처 입력을 검출한다. 터치 감응형 표면 상에서의 상이한 제스처들은 상이한 접촉 패턴들(예컨대, 상이한 모션들, 타이밍들, 및/또는 검출된 접촉들의 세기들)을 갖는다. 따라서, 제스처는, 선택적으로, 특정 접촉 패턴을 검출함으로써 검출된다. 예를 들어, 손가락 탭핑 접촉을 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 (예컨대, 아이콘의 위치에서의) 손가락-다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)에서 손가락-업(리프트오프) 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 감응형 표면 상에서 손가락 스와이프 제스처를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 하나 이상의 손가락-드래깅 이벤트들을 검출하는 것, 및 일부 실시예들에서, 또한, 그에 후속하여 손가락-업(리프트오프) 이벤트를 검출하는 것을 포함한다.
그래픽 모듈(332)은, 디스플레이되는 그래픽의 시각적 효과(예컨대, 명도, 투명도, 채도, 콘트라스트, 또는 다른 시각적 속성)를 변화시키기 위한 컴포넌트들을 포함한, 일차 디스플레이(102)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102) 또는 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204)의 일차 디스플레이(102)) 또는 다른 디스플레이 상에 그래픽을 렌더링하고 그의 디스플레이를 야기하기 위한 다양한 공지된 소프트웨어 컴포넌트들을 포함한다. 본 명세서에서 사용되는 바와 같이, "그래픽"이라는 용어는, 텍스트, 웹 페이지들, 아이콘들(예컨대, 소프트 키들을 포함하는 사용자 인터페이스 객체들), 디지털 이미지들, 비디오들, 애니메이션들 등을 제한 없이 포함하는, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다. 일부 실시예들에서, 그래픽 모듈(332)은 사용될 그래픽을 표현하는 데이터를 저장한다. 각각의 그래픽에는, 선택적으로, 대응하는 코드가 할당된다. 그래픽 모듈(332)은, 필요한 경우 좌표 데이터 및 다른 그래픽 속성 데이터와 함께, 디스플레이될 그래픽을 특정하는 하나 이상의 코드들을 애플리케이션들 등으로부터 수신하며, 이어서 스크린 이미지 데이터를 생성하여 디스플레이 제어기(356)에 출력한다.
햅틱 피드백 모듈(333)은, 전자 디바이스(300)와의 사용자 상호작용들에 응답하여 촉각적 출력 생성기(들)(367)에 의해 이용되어 전자 디바이스(300) 상의 하나 이상의 위치들에 촉각적 출력들을 생성하게 하는 명령어들을 생성하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다.
애플리케이션들(340)은, 선택적으로, 하기의 모듈들(또는 명령어들의 세트들), 또는 이들의 서브세트 또는 수퍼세트(superset)를 포함한다:
Figure pat00001
이메일들을 수신, 전송, 작성, 및 뷰잉하기 위한 이메일 클라이언트 모듈(341)(때때로, 본 명세서에서, "메일 앱" 또는 "이메일 앱"으로도 지칭됨);
Figure pat00002
정지 이미지 및/또는 비디오 이미지를 캡처하기 위한 이미징 모듈(342);
Figure pat00003
정지 이미지 및/또는 비디오 이미지를 편집 및 뷰잉하기 위한 이미지 관리 모듈(343)(때때로, 본 명세서에서, "사진 앱"으로도 지칭됨);
Figure pat00004
오디오 및/또는 비디오의 재생을 위한 미디어 플레이어 모듈(344)(때때로, 본 명세서에서, "미디어 플레이어 앱"으로도 지칭됨); 및
Figure pat00005
인터넷에 접속하고 이를 브라우징하기 위한 웹 브라우징 모듈(345)(때때로, 본 명세서에서, "웹 브라우저"로도 지칭됨).
선택적으로 메모리(302)에 저장되는 다른 애플리케이션들(340)의 예들은 메시징 및 통신 애플리케이션, 워드 프로세싱 애플리케이션, 다른 이미지 편집 애플리케이션, 드로잉 애플리케이션, 프레젠테이션 애플리케이션, JAVA-인에이블형 애플리케이션, 암호화 애플리케이션, 디지털 저작권 관리 애플리케이션, 음성 인식 애플리케이션, 및 음성 복제 애플리케이션을 포함한다.
RF 회로부(308), 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)), 디스플레이 제어기(356), 접촉 모듈(330), 및 그래픽 모듈(332) 중 하나 이상과 결합하여, 이메일 클라이언트 모듈(341)은 사용자 지시들에 응답하여 이메일을 생성, 전송, 수신, 및 관리하게 하는 실행가능 명령어들을 포함한다. 이미지 관리 모듈(343)과 결합하여, 이메일 클라이언트 모듈(341)은 이미징 모듈(342)로 취한 정지 이미지 또는 비디오 이미지를 갖는 이메일들을 생성 및 전송하는 것이 매우 쉬워지게 한다.
디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)), 디스플레이 제어기(356), 광 센서(들)(364), 광 센서 제어기(358), 접촉 모듈(330), 그래픽 모듈(332), 및 이미지 관리 모듈(343) 중 하나 이상과 결합하여, 이미징 모듈(342)은 정지 이미지 또는 비디오(비디오 스트림을 포함함)를 캡처하여 이들을 메모리(302) 내에 저장하게 하거나 정지 이미지 또는 비디오의 특성들을 수정하게 하거나 또는 메모리(302)로부터 정지 이미지 또는 비디오를 삭제하게 하는 실행가능 명령어들을 포함한다.
디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)), 디스플레이 제어기(356), 접촉 모듈(330), 그래픽 모듈(332), 및 이미징 모듈(342) 중 하나 이상과 결합하여, 이미지 관리 모듈(343)은 정지 이미지 및/또는 비디오 이미지를 배열, 수정(예컨대, 편집), 또는 다른 방식으로 조작, 라벨링, 삭제, (예컨대, 디지털 슬라이드 쇼 또는 앨범으로) 제시, 및 저장하게 하는 실행가능 명령어들을 포함한다.
디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)), 디스플레이 제어기(356), 접촉 모듈(330), 그래픽 모듈(332), 오디오 회로부(310), 스피커(311), RF 회로부(308), 및 웹 브라우징 모듈(345) 중 하나 이상과 결합하여, 미디어 플레이어 모듈(344)은 사용자가 MP3 또는 AAC 파일들과 같은 하나 이상의 파일 포맷들로 저장된 레코딩된 음악 및 다른 사운드 파일들을 다운로드 및 재생하게 하는 실행가능 명령어들, 및 비디오들을 (예컨대, 외부 포트(324)를 통해 접속되는, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102) 또는 도 2a 및 도 2b의 주변기기 디스플레이 디바이스(2014)의 일차 디스플레이(102) 상에) 디스플레이, 제시, 또는 다른 방식으로 재생하게 하는 실행가능 명령어들을 포함한다.
RF 회로부(308), 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)), 디스플레이 제어기(356), 접촉 모듈(330), 및 그래픽 모듈(332) 중 하나 이상과 결합하여, 웹 브라우징 모듈(345)은, 웹 페이지들 또는 그의 일부분들뿐만 아니라 웹 페이지들에 링크되는 첨부물들 및 다른 파일들을 검색하고, 이들에 링크하고, 이들을 수신 및 디스플레이하는 것을 비롯한, 사용자 지시들에 따라 인터넷을 브라우징하게 하는 실행가능 명령어들을 포함한다.
동적 기능 열(DFR) 모듈(350)은 포커스 판정 모듈(351), DFR 판정 모듈(352), 및 DFR 제시 모듈(353)을 포함한다. 일부 실시예들에서, 포커스 판정 모듈(351)은 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102)) 또는 주변기기 디스플레이 시스템(예컨대, 도 2a 내지 도 2d의 주변기기 디스플레이 디바이스(204))에 의해 디스플레이되는 그래픽 사용자 인터페이스 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 판정하도록 구성된다. 일부 실시예들에서, DFR 판정 모듈(352)은 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소에 기초하여 그래픽(예컨대, 하나 이상의 어포던스들의 세트)을 판정하도록 구성된다. 일부 실시예들에서, DFR 제시 모듈(353)은 디스플레이 시스템(312)(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 상에 DFR 판정 모듈(352)에 의해 판정된 그래픽을 렌더링하도록 구성된다. DFR 제시 모듈(353)은, 디스플레이되는 그래픽의 시각적 효과(예컨대, 명도, 투명도, 채도, 콘트라스트, 또는 다른 시각적 속성)를 변화시키기 위한 컴포넌트들을 포함한, 디스플레이 시스템(312)(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 상에 그래픽을 렌더링하고 그의 디스플레이를 야기하기 위한 다양한 공지된 소프트웨어 컴포넌트들을 포함한다. 본 명세서에서 사용되는 바와 같이, "그래픽"이라는 용어는, 텍스트, 웹 페이지, 아이콘(예컨대, 소프트 키를 포함한 사용자 인터페이스 객체), 디지털 이미지, 비디오, 애니메이션 등을 제한 없이 포함하는, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다. 일부 실시예들에서, DFR 모듈(350)은 동적 기능 열(104)의 감도를 조정하기; 동적 기능 열(104)에 의해 제공되는 가청 및/또는 햅틱 피드백을 조정하기; 동적 기능 열(104)에 의해 디스플레이되는 어포던스들 및 정보의 설정(예컨대, 크기, 명도, 폰트, 언어 등)을 조정하기; 동적 기능 열(104)의 현재 전력 모드(예컨대, 정상 모드 및 저전력 모드)를 조정하기; 등을 위한 다른 모듈들을 포함한다.
일부 실시예들에서, 동적 기능 열 모듈(350)은 예측된/사전행동적/제안된 콘텐츠 항목들(예측된 수신자들, 제안된 텍스트 완성 문자열들, 사전행동적으로 제안된 애플리케이션들 등을 포함함)을 제공하는 것을 허용하는 컴포넌트들과 인터페이싱한다. 콘텐츠 아이템들을 사전행동적으로 제안하는 것은 미국 출원 제15/167,713호에 더 상세히 논의되어 있으며, 이는 이로써 전체가 참고로 포함된다.
상기 식별된 모듈들 및 애플리케이션들 각각은 전술된 하나 이상의 기능들 및 본 출원에 기술되는 방법들(예컨대, 컴퓨터 구현 방법들 및 본 명세서에 설명되는 다른 정보 프로세싱 방법들)을 수행하기 위한 실행가능한 명령어들의 세트에 대응한다. 이러한 모듈들(즉, 명령어들의 세트들)은 개별적인 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 이에 따라 이러한 모듈들의 다양한 서브세트들은, 선택적으로, 다양한 실시예들에서 조합되거나 다른 방식으로 재배열된다. 일부 실시예들에서, 메모리(302)는 선택적으로, 상기에서 식별된 모듈들 및 데이터 구조들의 서브세트를 저장한다. 또한, 메모리(302)는, 선택적으로, 상기에서 기술되지 않은 추가 모듈들 및 데이터 구조들을 저장한다.
도 3b는 일부 실시예들에 따른, 도 3a의 이벤트 핸들링을 위한 컴포넌트들의 블록 다이어그램이다. 일부 실시예들에서, 메모리(302)(도 3a)는 (예컨대, 운영 체제(326)에서의) 이벤트 분류기(370) 및 애플리케이션(340-1)(예컨대, 전술된 애플리케이션들(341, 342, 343, 344, 또는 345) 중 임의의 것)을 포함한다.
이벤트 분류기(370)는 이벤트 정보를 수신하고, 이벤트 정보를 전달할 애플리케이션(340-1), 및 애플리케이션(340-1)의 애플리케이션 뷰(391)를 결정한다. 이벤트 분류기(370)는 이벤트 모니터(371) 및 이벤트 디스패처 모듈(event dispatcher module)(374)을 포함한다. 일부 실시예들에서, 애플리케이션(340-1)은, 애플리케이션이 활성 상태이거나 실행 중일 때, 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)) 상에 디스플레이된 현재 애플리케이션 뷰(들)를 나타내는 애플리케이션 내부 상태(392)를 포함한다. 일부 실시예들에서, 디바이스/글로벌 내부 상태(357)는, 이벤트 분류기(370)에 의해, 현재 활성 상태이거나 포커스를 두고 있는 애플리케이션(들)을 판정하는 데 이용되며, 애플리케이션 내부 상태(392)는, 이벤트 분류기(370)에 의해, 이벤트 정보를 전달할 애플리케이션 뷰들(391)을 결정하는 데 이용된다.
일부 실시예들에서, 애플리케이션 내부 상태(392)는 애플리케이션(340-1)이 실행을 재개할 때 이용될 재개 정보, 애플리케이션(340-1)에 의해 디스플레이되고 있거나 디스플레이될 준비가 된 정보를 나타내는 사용자 인터페이스 상태 정보, 사용자가 애플리케이션(340-1)의 이전 상태 또는 뷰로 되돌아가는 것을 가능하게 하기 위한 상태 큐(queue), 및 사용자에 의해 취해진 이전 액션들의 재실행(redo)/실행취소(undo) 큐 중 하나 이상과 같은 추가 정보를 포함한다.
이벤트 모니터(371)는 주변기기 인터페이스(318)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트(예컨대, 터치 감응형 디스플레이인 경우의 디스플레이 시스템(312) 상에서의 다중 터치 제스처의 일부분으로서의 사용자 터치)에 관한 정보를 포함한다. 주변기기 인터페이스(318)는 I/O 서브시스템(306), 또는 센서, 예컨대 근접 센서(들)(366), 가속도계(들)(368), 및/또는 (오디오 회로부(310)를 통한) 마이크로폰(313)으로부터 수신하는 정보를 송신한다. 주변기기 인터페이스(318)가 I/O 서브시스템(306)으로부터 수신하는 정보는 터치 감응형 디스플레이 또는 다른 터치 감응형 표면(예컨대, 도 1a 및 도 1b의 터치패드(108))인 경우의 디스플레이 시스템(312)으로부터의 정보를 포함한다.
일부 실시예들에서, 이벤트 모니터(371)는 요청들을 사전결정된 간격으로 주변기기 인터페이스(318)에 전송한다. 이에 응답하여, 주변기기 인터페이스(318)는 이벤트 정보를 송신한다. 다른 실시예들에서, 주변기기 인터페이스(318)는 중요한 이벤트(예컨대, 사전결정된 잡음 임계치를 초과하는 입력 및/또는 사전결정된 지속기간 초과 동안의 입력을 수신하는 것)가 있을 때에만 이벤트 정보를 송신한다.
일부 실시예들에서, 이벤트 분류기(370)는 또한 히트 뷰(hit view) 판정 모듈(372) 및/또는 활성 이벤트 인식기 판정 모듈(373)을 포함한다.
히트 뷰 판정 모듈(372)은, 디스플레이 시스템(312)이 1개 초과의 뷰를 디스플레이할 때, 하나 이상의 뷰들 내의 어디에서 서브이벤트가 발생했는지 판정하기 위한 소프트웨어 절차들을 제공하는데, 여기서 뷰들은 사용자가 디스플레이 상에서 볼 수 있는 제어부들 및 다른 요소들로 구성된다.
애플리케이션과 연관된 사용자 인터페이스의 다른 양태는 본 명세서에서 때때로 애플리케이션 뷰들 또는 사용자 인터페이스 윈도우(user interface window)들로 지칭되는 뷰들의 세트이며, 여기서 정보가 디스플레이되고 터치 기반 제스처가 발생한다. 터치가 검출되는 (애플리케이션의) 애플리케이션 뷰들은, 선택적으로, 애플리케이션의 프로그램 계층구조 또는 뷰 계층구조 내의 프로그램 레벨들에 대응한다. 예를 들어, 터치가 검출되는 최하위 레벨의 뷰는 선택적으로 히트 뷰로 지칭되고, 적절한 입력들로서 인식되는 이벤트들의 세트는, 선택적으로, 터치 기반 제스처를 시작하는 초기 터치의 히트 뷰에 적어도 부분적으로 기초하여 판정된다.
히트 뷰 판정 모듈(372)은 터치 기반 제스처의 서브이벤트들에 관련된 정보를 수신한다. 애플리케이션이 계층구조에서 조직화된 다수의 뷰들을 갖는 경우, 히트 뷰 판정 모듈(372)은 히트 뷰를, 서브이벤트를 다루어야 하는 계층구조 내의 최하위 뷰로서 식별한다. 대부분의 상황에서, 히트 뷰는 개시되는 서브이벤트가 발생하는 최하위 레벨 뷰이다(즉, 이벤트 또는 잠재적 이벤트를 형성하는 서브이벤트들의 시퀀스에서의 제1 서브이벤트임). 일단 히트 뷰가 히트 뷰 판정 모듈에 의해 식별되면, 히트 뷰는 전형적으로 그것이 히트 뷰로서 식별되게 하는 것과 동일한 터치 또는 입력 소스에 관련된 모든 서브이벤트들을 수신한다.
활성 이벤트 인식기 판정 모듈(373)은 뷰 계층구조 내에서 어느 뷰 또는 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는지를 판정한다. 일부 실시예들에서, 활성 이벤트 인식기 판정 모듈(373)은 히트 뷰만이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 활성 이벤트 인식기 판정 모듈(373)은 서브이벤트의 물리적 위치를 포함하는 모든 뷰들이 적극 참여 뷰(actively involved view)들인 것으로 판정하고, 그에 따라 모든 적극 참여 뷰들이 서브이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 터치 서브이벤트들이 전적으로 하나의 특정 뷰와 연관된 영역으로 한정되었더라도, 계층구조 내의 상위 뷰들은 여전히 적극 참여 뷰들로서 유지될 것이다.
이벤트 디스패처 모듈(374)은 이벤트 정보를 이벤트 인식기(예컨대, 이벤트 인식기(380))에 디스패치한다. 활성 이벤트 인식기 판정 모듈(373)을 포함하는 실시예들에서, 이벤트 디스패처 모듈(374)은 이벤트 정보를 활성 이벤트 인식기 판정 모듈(373)에 의해 판정된 이벤트 인식기에 전달한다. 일부 실시예들에서, 이벤트 디스패처 모듈(374)은 이벤트 큐 내에 이벤트 정보를 저장하는데, 이벤트 정보는 개개의 이벤트 수신기(382)에 의해 인출된다.
일부 실시예들에서, 운영 체제(326)는 이벤트 분류기(370)를 포함한다. 대안으로, 애플리케이션(340-1)은 이벤트 분류기(370)를 포함한다. 또 다른 실시예들에서, 이벤트 분류기(370)는 독립형 모듈이거나, 또는 접촉/모션 모듈(330)과 같이 메모리(302)에 저장되는 다른 모듈의 일부이다.
일부 실시예들에서, 애플리케이션(340-1)은 복수의 이벤트 핸들러들(390) 및 하나 이상의 애플리케이션 뷰들(391)을 포함하며, 이들의 각각은 애플리케이션의 사용자 인터페이스의 개개의 뷰 내에 발생하는 터치 이벤트들을 다루기 위한 명령어들을 포함한다. 애플리케이션(340-1)의 각각의 애플리케이션 뷰(391)는 하나 이상의 이벤트 인식기들(380)을 포함한다. 전형적으로, 애플리케이션 뷰(391)는 복수의 이벤트 인식기들(380)을 포함한다. 다른 실시예들에서, 이벤트 인식기들(380) 중 하나 이상은 사용자 인터페이스 키트(도시되지 않음) 또는 애플리케이션(340-1)이 방법들 및 다른 속성들을 물려받는 상위 레벨 객체와 같은 별개의 모듈의 일부이다. 일부 실시예들에서, 개개의 이벤트 핸들러(390)는 데이터 업데이터(376), 객체 업데이터(377), GUI 업데이터(378), 및/또는 이벤트 분류기(370)로부터 수신된 이벤트 데이터(379) 중 하나 이상을 포함한다. 이벤트 핸들러(390)는, 선택적으로, 데이터 업데이터(376), 객체 업데이터(377) 또는 GUI 업데이터(378)를 이용하거나 호출하여 애플리케이션 내부 상태(392)를 업데이트한다. 대안으로, 애플리케이션 뷰들(391) 중 하나 이상은 하나 이상의 개개의 이벤트 핸들러들(390)을 포함한다. 또한, 일부 실시예들에서, 데이터 업데이터(376), 객체 업데이터(377), 및 GUI 업데이터(378) 중 하나 이상은 애플리케이션 뷰(391)에 포함된다.
개개의 이벤트 인식기(380)는 이벤트 분류기(370)로부터 이벤트 정보(예컨대, 이벤트 데이터(379))를 수신하고 그 이벤트 정보로부터 이벤트를 식별한다. 이벤트 인식기(380)는 이벤트 수신기(382) 및 이벤트 비교기(384)를 포함한다. 일부 실시예들에서, 이벤트 인식기(380)는 또한 적어도 메타데이터(383) 및 이벤트 전달 명령어들(388)(선택적으로, 서브이벤트 전달 명령어들을 포함함)의 서브세트를 포함한다.
이벤트 수신기(382)는 이벤트 분류기(370)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브이벤트, 예를 들어 터치 또는 터치 이동에 관한 정보를 포함한다. 서브이벤트에 따라서, 이벤트 정보는 또한 서브이벤트의 위치와 같은 추가 정보를 포함한다. 서브이벤트가 터치의 모션과 관련되는 경우, 이벤트 정보는 또한 선택적으로 서브이벤트의 속력 및 방향을 포함한다. 일부 실시예들에서, 이벤트들은 하나의 배향으로부터 다른 배향으로(예컨대, 세로 배향으로부터 가로 배향으로, 또는 그 반대로)의 디바이스의 회전을 포함하며, 이벤트 정보는 디바이스의 현재 배향(디바이스 자세로도 지칭됨)에 관한 대응하는 정보를 포함한다.
이벤트 비교기(384)는 이벤트 정보를 사전정의된 이벤트 또는 서브이벤트 정의들과 비교하고, 그 비교에 기초하여, 이벤트 또는 서브이벤트를 판정하거나, 이벤트 또는 서브이벤트의 상태를 판정 또는 업데이트한다. 일부 실시예들에서, 이벤트 비교기(384)는 이벤트 정의들(386)을 포함한다. 이벤트 정의들(386)은 이벤트들(예컨대, 서브이벤트들의 사전정의된 시퀀스들), 예를 들어 이벤트 1(387-1), 이벤트 2(387-2) 등의 정의들을 포함한다. 일부 실시예들에서, 이벤트(387) 내의 서브이벤트들은, 예를 들어 터치 시작, 터치 종료, 터치 이동, 터치 취소, 및 다중 터치를 포함한다. 일례에서, 이벤트 1(387-1)에 대한 정의는 디스플레이된 객체 상에의 더블 탭핑이다. 더블 탭핑은, 예를 들어 사전결정된 단계 동안의 디스플레이된 객체 상의 제1 터치(터치 시작), 사전결정된 단계 동안의 제1 리프트오프(터치 종료), 사전결정된 단계 동안의 디스플레이된 객체 상의 제2 터치(터치 시작), 및 사전결정된 단계 동안의 제2 리프트오프(터치 종료)를 포함한다. 다른 예에서, 이벤트 2(387-2)에 대한 정의는 디스플레이된 객체 상에서의 드래깅이다. 드래깅은, 예를 들어, 사전결정된 단계 동안의 디스플레이된 객체 상에의 터치(또는 접촉), 터치 감응형 디스플레이인 경우의 디스플레이 시스템(312)을 가로지르는 터치의 이동, 및 터치의 리프트오프(터치 종료)을 포함한다. 일부 실시예들에서, 이벤트는 또한 하나 이상의 연관된 이벤트 핸들러들(390)에 대한 정보를 포함한다.
일부 실시예들에서, 이벤트 정의(387)는 개개의 사용자 인터페이스 객체에 대한 이벤트의 정의를 포함한다. 일부 실시예들에서, 이벤트 비교기(384)는 어느 사용자 인터페이스 객체가 서브이벤트와 연관되는지 판정하도록 히트 테스트(hit test)를 수행한다. 예를 들어, 3개의 사용자 인터페이스 객체들이 디스플레이 시스템(312) 상에 디스플레이된 애플리케이션 뷰에서, 터치가 터치 감응형 디스플레이인 경우의 디스플레이 시스템(312) 상에서 검출되는 경우, 이벤트 비교기(384)는 3개의 사용자 인터페이스 객체들 중 어느 것이 터치(서브이벤트)와 연관되어 있는지 판정하도록 하는 히트 테스트를 수행한다. 각각의 디스플레이된 객체가 개개의 이벤트 핸들러(390)와 연관되는 경우, 이벤트 비교기는 어느 이벤트 핸들러(390)가 활성화되어야 하는지 판정하는 데 히트 테스트의 결과를 이용한다. 예를 들어, 이벤트 비교기(384)는 히트 테스트를 트리거하는 객체 및 서브이벤트와 연관된 이벤트 핸들러를 선택한다.
일부 실시예들에서, 개개의 이벤트(387)에 대한 정의는 또한 서브이벤트들의 시퀀스가 이벤트 인식기의 이벤트 타입에 대응하는지 대응하지 않는지의 여부가 판정된 후까지 이벤트 정보의 전달을 지연시키는 지연된 액션들을 포함한다.
개개의 이벤트 인식기(380)가 일련의 서브이벤트들이 이벤트 정의들(386) 내의 이벤트들 중 어떠한 것과도 매칭되지 않는 것으로 판정하면, 개개의 이벤트 인식기(380)는 이벤트 불가능, 이벤트 실패, 또는 이벤트 종료 상태에 진입하고, 그 후 개개의 이벤트 인식기는 터치 기반 제스처의 후속적인 서브이벤트들을 무시한다. 이러한 상황에서, 만일 있다면, 히트 뷰에 대해 활성 상태로 유지되는 다른 이벤트 인식기들이 진행 중인 터치 기반 제스처의 서브이벤트들을 계속해서 추적 및 프로세싱한다.
일부 실시예들에서, 개개의 이벤트 인식기(380)는 이벤트 전달 시스템이 어떻게 적극 참여 이벤트 인식기들에 대한 서브이벤트 전달을 수행해야 하는지를 나타내는 구성가능한 속성들, 플래그(flag)들, 및/또는 목록들을 갖는 메타데이터(383)를 포함한다. 일부 실시예들에서, 메타데이터(383)는 이벤트 인식기들이 어떻게 서로 상호작용하는지, 또는 상호작용하게 되는지를 나타내는 구성가능한 속성들, 플래그들, 및/또는 목록들을 포함한다. 일부 실시예들에서, 메타데이터(383)는, 서브이벤트들이 뷰 또는 프로그램 계층구조에서의 다양한 레벨들에 전달되는지의 여부를 나타내는 구성가능한 속성들, 플래그들, 및/또는 목록들을 포함한다.
일부 실시예들에서, 개개의 이벤트 인식기(380)는 이벤트의 하나 이상의 특정 서브이벤트들이 인식될 때 이벤트와 연관된 이벤트 핸들러(390)를 활성화시킨다. 일부 실시예들에서, 개개의 이벤트 인식기(380)는 이벤트와 연관된 이벤트 정보를 이벤트 핸들러(390)에 전달한다. 이벤트 핸들러(390)를 활성화시키는 것은 개개의 히트 뷰에 서브이벤트들을 전송(및 지연 전송)하는 것과는 별개이다. 일부 실시예들에서, 이벤트 인식기(380)는 인식된 이벤트와 연관된 플래그를 보내고, 그 플래그와 연관된 이벤트 핸들러(390)는 그 플래그를 캐치하고 사전정의된 프로세스를 수행한다.
일부 실시예들에서, 이벤트 전달 명령어들(388)은 이벤트 핸들러를 활성화시키지 않으면서 서브이벤트에 관한 이벤트 정보를 전달하는 서브이벤트 전달 명령어들을 포함한다. 대신에, 서브이벤트 전달 명령어들은 일련의 서브이벤트들과 연관된 이벤트 핸들러들에 또는 적극 참여 뷰들에 이벤트 정보를 전달한다. 일련의 서브이벤트들 또는 적극 참여 뷰들과 연관된 이벤트 핸들러들은 이벤트 정보를 수신하고 사전결정된 프로세스를 수행한다.
일부 실시예들에서, 데이터 업데이터(376)는 애플리케이션(340-1)에서 이용되는 데이터를 생성 및 업데이트한다. 예를 들어, 데이터 업데이터(376)는 미디어 플레이어 모듈(344)에 의해 사용되는 비디오 파일을 저장한다. 일부 실시예들에서, 객체 업데이터(377)는 애플리케이션(340-1)에 의해 사용되는 객체들을 생성 및 업데이트한다. 예를 들어, 객체 업데이터(376)는 새로운 사용자 인터페이스 객체를 생성하거나, 또는 사용자 인터페이스 객체의 위치를 업데이트한다. GUI 업데이터(378)는 GUI를 업데이트한다. 예를 들어, GUI 업데이터(378)는 디스플레이 시스템(312)(예컨대, 도 1a의 디스플레이 부분(110)의 일차 디스플레이(102), 및/또는 도 1a 및 도 1b의 동적 기능 열(104)) 상에의 디스플레이를 위해 디스플레이 정보를 준비하고, 이를 그래픽 모듈(332)로 전송한다.
일부 실시예들에서, 이벤트 핸들러(들)(390)는 데이터 업데이터(376), 객체 업데이터(377), 및 GUI 업데이터(378)를 포함하거나 이들에 액세스 권한이 있다. 일부 실시예들에서, 데이터 업데이터(376), 객체 업데이터(377), 및 GUI 업데이터(378)는 애플리케이션(340-1)의 단일 모듈 또는 애플리케이션 뷰(391)에 포함된다. 다른 실시예들에서, 이들은 2개 이상의 소프트웨어 모듈들 내에 포함된다.
터치 감응형 디스플레이들 상에의 사용자 터치들의 이벤트 핸들링에 관한 전술된 논의는 또한 입력 디바이스들을 갖는 전자 디바이스(300)를 동작시키기 위한 다른 형태들의 사용자 입력들에도 적용되지만, 그 모두가 터치 스크린들 상에서 개시되는 것은 아니라는 것이 이해되어야 한다. 예를 들어, 단일 또는 다수의 키보드 누르기 또는 유지하기(hold)와 선택적으로 조화되는 마우스 이동 및 마우스 버튼 누르기; 터치패드 상에서의 탭핑, 드래깅, 스크롤 등과 같은 접촉 이동들; 펜 스타일러스 입력들; 디바이스의 이동; 구두 명령어들; 검출된 눈 이동들; 생체 측정 입력들; 및/또는 이들의 임의의 조합은, 인식될 이벤트를 정의하는 서브이벤트들에 대응하는 입력들로서 선택적으로 이용된다.
도 4는, 일부 실시예들에 따른, 주변기기 전자 디바이스(400)의 블록 다이어그램이다. 일부 실시예들에서, 주변기기 전자 디바이스(400)는, 동일한 하우징 내에 동적 기능 열(104) 및 물리적 입력 메커니즘, 예컨대 물리적 키들의 세트(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106)) 및/또는 터치패드(예컨대, 도 2b 및 도 2c의 터치패드(108))를 적어도 부분적으로 포함하는 주변기기 입출력 디바이스이다. 주변기기 전자 디바이스(400)의 예들은 주변기기 키보드(예컨대, 도 2a 및 도 2b의 주변기기 키보드(206)), 주변기기 터치 감응형 표면(예컨대, 도 2c의 제1 주변기기 입력 메커니즘(212)), 또는 다른 주변기기 입력 메커니즘들(예컨대, 도 2d의 제2 주변기기 입력 메커니즘(222))을 포함한다. 주변기기 전자 디바이스(400)는 컴퓨팅 디바이스(202)(도 2a 내지 도 2d)와 통신가능하게 커플링된다. 예를 들어, 주변기기 전자 디바이스(400)는, USB 또는 PS/2와 같은 유선 접속을 통해, 또는 블루투스, Wi-Fi 등과 같은 통신 프로토콜을 이용한 무선 통신 링크를 통해, 컴퓨팅 디바이스(202)에 통신가능하게 커플링된다. 주변기기 전자 디바이스(400)는 전자 디바이스(300)(도 3a)에서의 컴포넌트들 또는 절차들 중 일부에 의존할 수 있거나, 또는 이러한 컴포넌트들 또는 절차들 중 일부는 전자 디바이스(300) 대신에 주변기기 전자 디바이스(400)에 의해 완료되거나, 그 내부에 위치되거나, 또는 그에 의해 하우징될 수 있다.
일부 실시예들에서, 주변기기 전자 디바이스(400)는 메모리(402)(선택적으로, 하나 이상의 컴퓨터 판독가능 저장 매체들을 포함함), 메모리 제어기(422), 하나 이상의 프로세싱 유닛(CPU)들(420), 주변기기 인터페이스(418), RF 회로부(408), 오디오 회로부(410), 스피커(411), 마이크로폰(413), 입출력(I/O) 서브시스템(406), 기타 입력 또는 제어 디바이스들(416), 및 외부 포트(424) 중 하나 이상을 포함한다. 주변기기 전자 디바이스(400)는 터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))(때때로, 본 명세서에서, "터치 감응형 디스플레이", "터치 스크린", 또는 "터치 스크린 디스플레이"로도 지칭됨)을 포함한다.
주변기기 전자 디바이스(400)는, 선택적으로, 터치 감응형 디스플레이 시스템(412) 또는 터치패드(예컨대, 도 2b 및 도 2c의 터치패드(108))와 같은 터치 감응형 표면 상에의 접촉들의 세기를 검출하기 위한 하나 이상의 세기 센서들(465)을 포함한다. 주변기기 전자 디바이스(400)는, 선택적으로, 터치 감응형 디스플레이 시스템(412) 또는 터치패드(예컨대, 도 2b 및 도 2c의 터치패드(108))와 같은 터치 감응형 표면 상에 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기들(467)을 포함한다. 이들 컴포넌트들은 선택적으로 하나 이상의 통신 버스들 또는 신호 라인(403)들을 통해 통신한다.
메모리(402)는, 선택적으로, 고속 랜덤 액세스 메모리를 포함하고, 또한 선택적으로, 하나 이상의 자기 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 다른 비휘발성 솔리드 스테이트 메모리 디바이스들과 같은 비휘발성 메모리를 포함한다. 주변기기 전자 디바이스(400)의 다른 컴포넌트들, 예컨대, CPU(들)(420) 및 주변기기 인터페이스(418)에 의한 메모리(402)에의 액세스는, 선택적으로, 메모리 제어기(422)에 의해 제어된다. 주변기기 인터페이스(418)는 CPU(들)(420) 및 메모리(402)를 I/O 서브시스템(406) 및 기타 회로부에 커플링시키는 데 사용될 수 있다. 하나 이상의 프로세싱 유닛들(420)은 메모리(402)에 저장되어 주변기기 전자 디바이스(400)에 대한 다양한 기능들을 수행하게 하고 데이터를 프로세싱하게 하는 다양한 소프트웨어 프로그램들 및/또는 명령어들의 세트들을 구동하거나 실행시킨다. 일부 실시예들에서, 주변기기 인터페이스(418), CPU(들)(420) 및 메모리 제어기(422)는, 선택적으로, 칩(404)과 같은 단일 칩 상에서 구현된다. 일부 다른 실시예들에서, 이들은 선택적으로 별개의 칩들 상에서 구현된다.
RF 회로부(408)는 전자기 신호들이라고도 지칭되는 RF 신호들을 수신 및 전송한다. RF 회로부(408)는 전기 신호들을 전자기 신호들로/로부터 변환하고, 전자기 신호들을 통해 통신 네트워크들 및 다른 통신 디바이스들과 통신한다. RF 회로부(408)는, 선택적으로, 안테나 시스템, RF 송수신기, 하나 이상의 증폭기들, 튜너, 하나 이상의 발진기들, 디지털 신호 프로세서, CODEC 칩셋, SIM 카드, 메모리 등을 포함하지만 이들로 제한되지 않는, 이러한 기능들을 수행하기 위한 잘 알려진 회로부를 포함한다. 무선 통신은, 선택적으로, NFC, 블루투스, Wi-Fi(예컨대, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g, 및/또는 IEEE 802.11n), Wi-MAX, 또는 본 명세서의 출원일 현재 아직 개발되지 않은 통신 프로토콜들을 포함하는 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 제한되지 않는 복수의 통신 표준들, 프로토콜들 및 기술들 중 임의의 것을 이용한다.
선택적인 오디오 회로부(410), 스피커(411), 및 마이크로폰(413)은 사용자와 주변기기 전자 디바이스(400) 사이에 오디오 인터페이스를 제공한다. 오디오 회로부(410)는 주변기기 인터페이스(418)로부터 오디오 데이터를 수신하고, 그 오디오 데이터를 전기 신호로 변환하고, 그 전기 신호를 스피커(411)로 송신한다. 스피커(411)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. 오디오 회로부(410)는 또한 마이크로폰(413)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로부(410)는 전기 신호를 오디오 데이터로 변환하고, 프로세싱을 위해 오디오 데이터를 주변기기 인터페이스(418)로 송신한다. 오디오 데이터는, 선택적으로, 주변기기 인터페이스(418)에 의해 메모리(402) 및/또는 RF 회로부(408)로부터 인출되고/되거나 그로 송신된다. 일부 실시예들에서, 오디오 회로부(410)는 또한 헤드셋 잭을 포함한다. 헤드셋 잭은 출력-전용 헤드폰들, 또는 출력부(예컨대, 한쪽 또는 양쪽 귀용 헤드폰) 및 입력부(예컨대, 마이크로폰) 양쪽 모두를 갖는 헤드셋과 같은 착탈가능한 오디오 입출력 주변기기들과 오디오 회로부(410) 사이의 인터페이스를 제공한다.
I/O 서브시스템(406)은 주변기기 전자 디바이스(400)의 입력/출력 주변기기들, 예컨대 터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))을 주변기기 인터페이스(418)에 커플링시킨다. I/O 서브시스템(406)은, 선택적으로, 디스플레이 제어기(456), 세기 센서 제어기(459), 햅틱 피드백 제어기(461), 및 기타 입력 또는 제어 디바이스들(416)을 위한 하나 이상의 입력 제어기들(460)을 포함한다. 하나 이상의 기타 입력 제어기들(460)은 전기 신호들을 다른 입력 또는 제어 디바이스들(416)로부터/로 수신/전송한다. 기타 입력 또는 제어 디바이스들(416)은, 선택적으로, 물리적 버튼(예컨대, 푸시 버튼, 로커 버튼 등), 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠, 물리적 키들의 세트, 터치패드 등을 포함한다.
터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))은 주변기기 전자 디바이스(400)와 사용자 사이에 입력/출력 인터페이스를 제공한다. TSD(touch-sensitive display) 제어기(456)는 터치 감응형 디스플레이 시스템(412)으로부터/으로 전기 신호들을 수신 및/또는 송신한다. 터치 감응형 디스플레이 시스템(412)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 선택적으로 그래픽들, 텍스트, 아이콘들, 비디오 및 이들의 임의의 조합(총칭하여 "그래픽들"로 지칭됨)을 포함한다. 일부 실시예들에서, 시각적 출력 중 일부 또는 전부가 사용자 인터페이스 객체들/요소들에 대응한다.
터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))은, 햅틱 및/또는 촉각적 접촉에 기초하여 사용자로부터의 입력을 수용하는 터치 감응형 표면, 센서, 또는 센서들의 세트를 포함한다. 이와 같이, 터치 감응형 디스플레이 시스템(412) 및 TSD 제어기(456)는 (임의의 연관된 모듈들 및/또는 메모리(402) 내의 명령어들의 세트들과 함께) 터치 감응형 디스플레이 시스템(412) 상에의 접촉(및, 접촉의 임의의 이동 또는 중단)을 검출하며, 검출된 접촉을 터치 감응형 디스플레이 시스템(412) 상에 디스플레이되는 사용자 인터페이스 객체들(예컨대, 하나 이상의 소프트 키, 아이콘, 웹 페이지, 또는 이미지)을 선택 또는 제어하는 데 이용되는 신호들로 변환한다. 하나의 예시적인 실시예에서, 터치 감응형 디스플레이 시스템(412)과 사용자 사이의 접촉 지점은 사용자의 손가락과 접촉하는 터치 감응형 디스플레이 시스템(412)의 영역에 대응한다.
터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))은, 선택적으로, LCD 기술, LPD 기술, LED 기술, 또는 OLED 기술을 이용하지만, 다른 디스플레이 기술들이 다른 실시예들에서 이용된다. 터치 감응형 디스플레이 시스템(412) 및 TSD 제어기(456)는, 선택적으로, 용량성, 저항성, 적외선 및 표면 음향파 기술들뿐만 아니라 다른 근접 센서 어레이들, 또는 터치 감응형 디스플레이 시스템(412)과의 하나 이상의 접촉 지점들을 판정하기 위한 다른 요소들을 포함하지만 이들로 한정되지 않는, 현재 알려져 있거나 추후에 개발되는 복수의 터치 감지 기술들 중 임의의 것을 이용하여, 접촉 및 그의 임의의 이동 또는 중단을 검출한다. 하나의 예시적인 실시예에서, 미국 캘리포니아주 쿠퍼티노 소재의 Apple Inc.로부터의 iPHONE®, iPODTOUCH®, 및 iPAD®에서 발견되는 것과 같은 투영형 상호 용량 감지 기술이 이용된다.
터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))은, 선택적으로, 400 dpi 초과(예컨대, 500 dpi, 800 dpi, 또는 그 초과)의 비디오 해상도를 갖는다. 일부 실시예들에서, 사용자는 스타일러스, 손가락 등을 이용하여 터치 감응형 디스플레이 시스템(412)과 접촉한다. 일부 실시예들에서, 사용자 인터페이스는, 주로 손가락 기반 접촉들 및 제스처들과 협업하도록 설계된다.
일부 실시예들에서, 터치 감응형 디스플레이 시스템(412) 외에도, 주변기기 전자 디바이스(400)는 선택적으로 터치패드(예컨대, 도 2b 및 도 2c의 터치패드(108))를 포함한다. 일부 실시예들에서, 터치패드는, 터치 감응형 디스플레이 시스템(412)과는 달리, 시각적 출력을 디스플레이하지 않는 주변기기 전자 디바이스(400)의 터치 감응형 영역이다. 일부 실시예들에서, 터치패드는, 선택적으로, 터치 감응형 디스플레이 시스템(412)과는 분리된 터치 감응형 표면, 또는 터치 감응형 디스플레이 시스템(412)에 의해 형성된 터치 감응형 표면의 연장부이다.
주변기기 전자 디바이스(400)는 또한 다양한 컴포넌트들에 전력을 공급하기 위한 전력 시스템(462)을 포함한다. 전력 시스템(462)은, 선택적으로, 전력 관리 시스템, 하나 이상의 전원들(예컨대, 배터리, 교류 전류(AC) 등), 재충전 시스템, 전력 고장 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시자(예컨대, LED), 및 휴대용 디바이스들 내에서의 전력의 생성, 관리 및 분배와 연관된 임의의 다른 컴포넌트들을 포함한다.
주변기기 전자 디바이스(400)는, 선택적으로, 또한, I/O 서브시스템(406) 내의 세기 센서 제어기(459)와 커플링되는 하나 이상의 접촉 세기 센서들(465)을 포함한다. 접촉 세기 센서(들)(465)는, 선택적으로, 하나 이상의 압전 저항 스트레인 게이지, 용량성 힘 센서, 전기적 힘 센서, 압전 힘 센서, 광학적 힘 센서, 용량성 터치 감응형 표면, 또는 다른 세기 센서(예컨대, 터치 감응형 표면 상에의 접촉 힘(또는 압력)을 측정하는 데 사용되는 센서)를 포함한다. 접촉 세기 센서(들)(465)는 환경으로부터 접촉 세기 정보(예컨대, 압력 정보 또는 압력 정보에 대한 대용물)를 수신한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서는 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(412) 및/또는 도 2b 및 도 2c의 터치패드(108))과 동위치되거나 그에 근접해 있다.
주변기기 전자 디바이스(400)는, 선택적으로, I/O 서브시스템(406) 내의 햅틱 피드백 제어기(461)와 커플링되는 하나 이상의 촉각적 출력 생성기들(467)을 포함한다. 촉각적 출력 생성기(들)(467)는, 선택적으로, 스피커 또는 다른 오디오 컴포넌트와 같은 하나 이상의 전자음향 디바이스들, 및/또는 모터, 솔레노이드, 전기활성 폴리머, 압전 액추에이터, 정전 액추에이터, 또는 기타 촉각적 출력 생성 컴포넌트(예컨대, 전기 신호들을 디바이스 상의 촉각적 출력들로 변환하는 컴포넌트)와 같은, 에너지를 선형 모션으로 변환하는 전기기계 디바이스들을 포함한다. 접촉 세기 센서(들)(465)는 햅틱 피드백 모듈(433)로부터 촉각적 피드백 생성 명령어들을 수신하며, 주변기기 전자 디바이스(400)의 사용자에 의해 감지될 수 있는 촉각적 출력들을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기는 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(412) 및/또는 도 2b 및 도 2c의 터치패드(108))과 동위치되거나 그에 근접해 있으며, 선택적으로, 터치 감응형 표면을 수직으로(예컨대, 주변기기 전자 디바이스(400)의 표면의 내부/외부로) 또는 횡방향으로(예컨대, 주변기기 전자 디바이스(400)의 표면과 동일한 평면에서 전후로) 이동시킴으로써 촉각적 출력을 생성한다.
일부 실시예들에서, 메모리(402)에 저장된 소프트웨어 컴포넌트들은 운영 체제(426), 통신 모듈(428)(또는 명령어들의 세트), 접촉/모션 모듈(430)(또는 명령어들의 세트), 및 동적 기능 열 모듈(450)(또는 명령어들의 세트들)을 포함한다. 또한, 일부 실시예들에서, 메모리(402)는, 디스플레이 상태를 비롯한, 어떤 뷰들 또는 다른 정보가 터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104))의 다양한 영역들을 점유하는지를 나타내는 디바이스 상태(457)를 저장한다.
운영 체제(426)는 일반적인 시스템 태스크들(예컨대, 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어 및 관리하기 위한 다양한 소프트웨어 컴포넌트 및/또는 드라이버들을 포함하고, 다양한 하드웨어 및 소프트웨어 컴포넌트들 사이의 통신을 가능하게 한다.
통신 모듈(428)은 하나 이상의 외부 포트들(424) 및/또는 RF 회로부(408)를 통한 다른 디바이스들(예컨대, 도 2a 내지 도 2d의 컴퓨팅 디바이스(202))과의 통신을 가능하게 하고, 또한, RF 회로부(408) 및/또는 외부 포트(424)를 통해 데이터를 전송/수신하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 외부 포트(424)(예컨대, USB, 파이어와이어(FIREWIRE) 등)는 다른 디바이스들에 직접적으로 또는 네트워크(예컨대, 인터넷, 무선 LAN 등)를 통해 간접적으로 커플링시키도록 구성된다.
접촉/모션 모듈(430)은, 선택적으로, 터치 감응형 디스플레이 시스템(412) 및 다른 터치 감응형 디바이스들(예컨대, 터치패드 또는 물리적 클릭 휠)과의 접촉을 검출한다. 접촉/모션 모듈(430)은 접촉이 발생했는지의 여부를 판정하는 것(예컨대, 손가락-다운 이벤트를 검출하는 것), 접촉의 세기(예컨대, 접촉의 힘 또는 압력, 또는 접촉의 힘 또는 압력에 대한 대체물)를 판정하는 것, 접촉의 이동이 있는지의 여부를 판정하고 터치 감응형 표면을 가로지르는 이동을 추적하는 것(예컨대, 하나 이상의 손가락-드래그 이벤트를 검출하는 것), 및 접촉이 중단되었는지의 여부를 판정하는 것(예컨대, 손가락-업 이벤트 또는 접촉 중단을 검출하는 것)과 같은, 접촉의 검출에 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/모션 모듈(430)은 터치 감응형 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉 지점의 이동을 판정하는 것은, 선택적으로, 접촉 지점의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향의 변화)를 판정하는 것을 포함한다. 이러한 동작들은, 선택적으로, 단일 접촉들(예컨대, 한 손가락 접촉들)에 또는 다수의 동시 접촉들(예컨대, "멀티터치"/다수의 손가락 접촉들)에 적용된다. 일부 실시예들에서, 접촉/모션 모듈(430)은 또한 터치패드(예컨대, 도 2b 및 도 2c의 터치패드(108)) 상에의 접촉을 검출한다.
일부 실시예들에서, 접촉/모션 모듈(430)은 하나 이상의 세기 임계치들의 세트를 이용하여, 동작이 사용자에 의해 수행되었는지의 여부를 판정한다(예컨대, 사용자가 어포던스를 선택했거나 그 위를 "클릭"했는지의 여부를 판정한다). 일부 실시예들에서, 적어도 세기 임계치들의 서브세트가 소프트웨어 파라미터들에 따라 판정된다(예컨대, 세기 임계치들은 특정한 물리적 액추에이터들의 활성화 임계치들에 의해 판정되지 않으며, 주변기기 전자 디바이스(400)의 물리적 하드웨어를 변경하지 않으면서 조정될 수 있다). 예를 들면, 트랙패드 또는 터치 스크린 디스플레이의 마우스 "클릭" 임계치는 트랙패드 또는 터치 스크린 디스플레이 하드웨어를 변경함이 없이 넓은 범위의 사전정의된 임계치 값들 중 임의의 것으로 설정될 수 있다. 추가로, 일부 구현예들에서, 디바이스의 사용자는 (예컨대, 개별적인 세기 임계치들을 조정함으로써 그리고/또는 복수의 세기 임계치들을 시스템 레벨 클릭 "세기" 파라미터로 한꺼번에 조정함으로써) 세기 임계치들의 세트의 하나 이상의 세기 임계치를 조정하기 위한 소프트웨어 설정들을 제공받는다.
접촉/모션 모듈(430)은, 선택적으로, 사용자에 의한 제스처 입력을 검출한다. 터치 감응형 표면 상에서의 상이한 제스처들은 상이한 접촉 패턴들(예컨대, 상이한 모션들, 타이밍들, 및/또는 검출된 접촉들의 세기들)을 갖는다. 따라서, 제스처는, 선택적으로, 특정 접촉 패턴을 검출함으로써 검출된다. 예를 들어, 손가락 탭핑 접촉을 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 (예컨대, 아이콘의 위치에서의) 손가락-다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)에서 손가락-업(리프트오프) 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 감응형 표면 상에서 손가락 스와이프 제스처를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 하나 이상의 손가락-드래깅 이벤트들을 검출하는 것, 및 일부 실시예들에서, 또한, 그에 후속하여 손가락-업(리프트오프) 이벤트를 검출하는 것을 포함한다.
햅틱 피드백 모듈(433)은, 주변기기 전자 디바이스(400)와의 사용자 상호작용들에 응답하여 주변기기 전자 디바이스(400) 상의 하나 이상의 위치들에 촉각적 출력들을 생성하도록 촉각적 출력 생성기(들)(467)에 의해 이용되는 명령어들을 생성하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다.
동적 기능 열(DFR) 모듈(450)은 포커스 획득 모듈(451), DFR 판정 모듈(452), 및 DFR 제시 모듈(453)을 포함한다. 일부 실시예들에서, 포커스 획득 모듈(451)은 컴퓨팅 디바이스(202)(도 2a 내지 도 2d)로부터 주변기기 디스플레이 디바이스(204)의 일차 디스플레이(102)(도 2a 내지 도 2d) 상에 디스플레이된 그래픽 사용자 인터페이스의 현재 포커스인 활성 상태 사용자 인터페이스 요소의 표시를 획득하도록 구성된다. 일부 실시예들에서, DFR 판정 모듈(452)은, 현재 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소에 기초하여 그래픽(예컨대, 하나 이상의 어포던스들의 세트)을 판정하도록 구성된다. 대안으로, 일부 실시예들에서, 컴퓨팅 디바이스(202)(도 2a 내지 도 2d)는, 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소에 기초하여 그래픽(예컨대, 하나 이상의 어포던스들의 세트)을 판정하고, 터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104)) 상에의 디스플레이를 위해 주변기기 전자 디바이스(400) 또는 그의 컴포넌트(예컨대, DFR 모듈(450))에 그래픽을 제공한다. 일부 실시예들에서, DFR 제시 모듈(453)은 터치 감응형 디스플레이 시스템(412)(예컨대, 도 2a 내지 도 2d의 동적 기능 열(104)) 상에 DFR 판정 모듈(452)에 의해 판정되는(또는 컴퓨팅 디바이스(202)에 의해 제공되는) 그래픽을 렌더링하도록 구성된다. DFR 제시 모듈(453)은, 디스플레이되는 그래픽의 시각적 효과(예컨대, 명도, 투명도, 채도, 콘트라스트, 또는 다른 시각적 속성)를 변화시키기 위한 컴포넌트들을 포함한, 터치 감응형 디스플레이 시스템(412) 상에 그래픽을 렌더링하고 그의 디스플레이를 야기하기 위한 다양한 공지된 소프트웨어 컴포넌트들을 포함한다. 일부 실시예들에서, DFR 모듈(450)은 동적 기능 열(104)의 감도를 조정하기; 동적 기능 열(104)에 의해 제공되는 가청 및/또는 햅틱 피드백을 조정하기; 동적 기능 열(104)에 의해 디스플레이되는 어포던스들 및 정보의 설정(예컨대, 크기, 명도, 폰트, 언어 등)을 조정하기; 동적 기능 열(104)의 현재 전력 모드(예컨대, 정상 모드 및 저전력 모드)를 조정하기; 등을 위한 다른 모듈들을 포함한다.
일부 실시예들에서, 메모리(402)는 (예컨대, 운영 체제(426)에서) 이벤트 분류기(470)를 포함한다. 일부 실시예들에서, 이벤트 분류기(470)는 이벤트 분류기(370)(도 3b)와 동일한 기능들을 수행하고, 이벤트 분류기(370)(도 3b)의 모듈들, 절차들, 및 명령어들의 서브세트 또는 수퍼세트를 포함한다. 이와 같이, 이벤트 분류기(470)는 간결성을 위해 기술되지 않을 것이다.
주변기기 전자 디바이스(400)는 단지 일례이며, 주변기기 전자 디바이스(400)는, 선택적으로, 도시된 것보다 더 많은 또는 더 적은 컴포넌트들을 갖거나, 선택적으로, 2개 이상의 컴포넌트들을 조합하거나, 또는 선택적으로, 컴포넌트들의 상이한 구성 또는 배열을 갖는다는 것이 이해되어야 한다. 도 4에 도시된 다양한 컴포넌트들은, 하나 이상의 신호 처리 및/또는 주문형 집적 회로들을 비롯한, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합으로 구현된다.
상기 식별된 모듈들 각각은 상기 기술된 하나 이상의 기능들 및 본 출원에 기술되는 방법들(예컨대, 컴퓨터 구현 방법들 및 본 명세서에 기술되는 다른 정보 프로세싱 방법들)을 수행하기 위한 실행가능 명령어들의 세트에 대응한다. 이러한 모듈들(즉, 명령어들의 세트들)은 개별적인 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 이에 따라 이러한 모듈들의 다양한 서브세트들은, 선택적으로, 다양한 실시예들에서 조합되거나 다른 방식으로 재배열된다. 일부 실시예들에서, 메모리(402)는 선택적으로, 상기에서 식별된 모듈들 및 데이터 구조들의 서브세트를 저장한다. 또한, 메모리(402)는, 선택적으로, 상기에서 기술되지 않은 추가 모듈들 및 데이터 구조들을 저장한다.
본 명세서에 사용되는 바와 같이, "포커스 선택자(focus selector)"라는 용어는 사용자와 상호작용하고 있는 사용자 인터페이스의 현재 부분을 나타내는 입력 요소를 지칭한다. 커서 또는 다른 위치 마커를 포함하는 일부 구현예들에서, 커서가 특정 사용자 인터페이스 요소(예컨대, 버튼, 윈도우, 슬라이더 또는 다른 사용자 인터페이스 요소) 위에 있는 동안에 입력(예컨대, 누르기 입력)이 터치 감응형 표면(예컨대, 도 3에서의 터치패드(355) 또는 도 4b에서의 터치 감응형 표면(451)) 상에서 검출될 때 특정 사용자 인터페이스 요소가 검출된 입력에 따라 조정되도록, 커서는 "포커스 선택자"로서의 역할을 한다. 터치 스크린 디스플레이 상의 사용자 인터페이스 요소들과의 직접적인 상호작용을 가능하게 하는 터치 스크린 디스플레이를 포함하는 일부 구현예들에서, 입력(예컨대, 접촉에 의한 누르기 입력)이 특정 사용자 인터페이스 요소(예컨대, 버튼, 윈도우, 슬라이더 또는 다른 사용자 인터페이스 요소)의 위치에 있는 터치 스크린 디스플레이 상에서 검출될 때, 검출된 입력에 따라 특정 사용자 인터페이스 요소가 조정되도록, 터치 스크린 상의 검출된 접촉은 "포커스 선택자"로서의 역할을 한다. 일부 구현예들에서, (예를 들어, 포커스를 하나의 버튼으로부터 다른 버튼으로 이동시키도록 탭 키 또는 화살표 키를 사용함으로써) 터치 스크린 디스플레이 상의 대응하는 커서의 이동 또는 접촉의 이동 없이 포커스가 사용자 인터페이스의 하나의 영역으로부터 사용자 인터페이스의 다른 영역으로 이동되며; 이러한 구현예들에서, 포커스 선택자는 사용자 인터페이스의 상이한 영역들 사이에서의 포커스의 이동에 따라 움직인다. 포커스 선택자가 갖는 특정 형태와 무관하게, 포커스 선택자는 일반적으로 (예컨대, 사용자가 상호작용하려고 하는 사용자 인터페이스의 요소를 디바이스에 나타내는 것에 의해) 사용자 인터페이스와의 사용자의 의도된 상호작용을 전달하기 위해 사용자에 의해 제어되는 사용자 인터페이스 요소(또는 터치 스크린 디스플레이 상의 접촉)이다. 예를 들어, 터치 감응형 표면(예컨대, 터치패드 또는 터치 스크린) 상에서 누르기 입력이 검출되는 동안 개개의 버튼 위의 포커스 선택자(예컨대, 커서, 접촉 또는 선택 상자)의 위치는 (디바이스의 디스플레이 상에 보여지는 다른 사용자 인터페이스 요소들과 달리) 사용자가 개개의 버튼을 활성화시키려고 하고 있다는 것을 나타낼 것이다.
명세서 및 청구범위에서 사용되는 바와 같이, 터치 감응형 표면 상의 접촉의 "세기"라는 용어는 터치 감응형 표면 상의 접촉(예컨대, 손가락 접촉 또는 스타일러스 접촉)의 힘 또는 압력(단위 면적 당 힘), 또는 터치 감응형 표면 상의 접촉의 힘 또는 압력에 대한 대체물(대용물)을 지칭한다. 접촉의 세기는, 적어도 4개의 구별되는 값들을 포함하고 더 전형적으로는 수백 개(예컨대, 적어도 256개)의 구별되는 값들을 포함하는 일정 범위의 값들을 갖는다. 접촉의 세기는 다양한 접근법들, 및 다양한 센서들 또는 센서들의 조합들을 이용하여 선택적으로 판정(또는 측정)된다. 예를 들어, 터치 감응형 표면 아래의 또는 그에 인접한 하나 이상의 힘 센서들은 터치 감응형 표면 상의 다양한 지점들에서 힘을 측정하는 데 선택적으로 사용된다. 일부 구현예들에서, 다수의 힘 센서들로부터의 힘 측정치들이 접촉의 추정되는 힘을 판정하기 위해 조합(예컨대, 가중 평균 또는 합산)된다. 유사하게, 스타일러스의 압력 감응형 팁이 터치 감응형 표면 상의 스타일러스의 압력을 판정하는 데 선택적으로 사용된다. 대안으로, 터치 감응형 표면 상에서 검출된 접촉 면적의 크기 및/또는 그에 대한 변화들, 접촉 부근의 터치 감응형 표면의 용량 및/또는 그에 대한 변화들, 및/또는 접촉 부근의 터치 감응형 표면의 저항 및/또는 그에 대한 변화들은 터치 감응형 표면 상의 접촉의 힘 또는 압력에 대한 대체물로서 선택적으로 이용된다. 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 세기 임계치가 초과되었는지의 여부를 판정하는 데 직접 이용된다(예컨대, 세기 임계치는 대체 측정치들에 대응하는 단위로 기술된다). 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 추정된 힘 또는 압력으로 변환되고, 추정된 힘 또는 압력은 세기 임계치가 초과되었는지의 여부를 판정하기 위해 이용된다(예컨대, 세기 임계치는 압력의 단위로 측정된 압력 임계치이다). 사용자 입력의 속성으로서 접촉의 세기를 사용하는 것은 그렇지 않았으면 어포던스들을 (예컨대, 터치 감응형 디스플레이 상에) 디스플레이하고 그리고/또는 (예컨대, 터치 감응형 디스플레이, 터치 감응형 표면, 또는 노브(knob) 또는 버튼과 같은 물리적/기계적 제어부를 통해) 사용자 입력을 수신하기 위한 제한된 실면적을 갖는 감소된 크기의 디바이스 상에서 사용자에 의해 용이하게 액세스 가능하지 않을 수 있는 부가적인 디바이스 기능에의 사용자 액세스를 가능하게 한다.
일부 실시예들에서, 접촉/모션 모듈(130)은 동작이 사용자에 의해 수행되었는지의 여부를 판정하기 위해 (예컨대, 사용자가 아이콘 위에서 "클릭"했는지의 여부를 판정하기 위해) 하나 이상의 세기 임계치들의 세트를 이용한다. 일부 실시예들에서, 적어도 세기 임계치들의 서브세트가 소프트웨어 파라미터들에 따라 결정된다(예컨대, 세기 임계치들은 특정 물리적 액추에이터들의 활성화 임계치들에 의해 결정되지 않으며, 시스템(100)의 물리적 하드웨어를 변경함이 없이 조정될 수 있다). 예를 들어, 트랙패드 또는 터치 스크린 디스플레이의 마우스 "클릭" 임계치는 트랙패드 또는 터치 스크린 디스플레이 하드웨어를 변경함이 없이 넓은 범위의 사전정의된 임계 값들 중 임의의 것으로 설정될 수 있다. 추가로, 일부 구현예들에서, 디바이스의 사용자는 (예컨대, 개별적인 세기 임계치들을 조정함으로써 그리고/또는 복수의 세기 임계치들을 시스템 레벨 클릭 "세기" 파라미터로 한꺼번에 조정함으로써) 세기 임계치들의 세트의 하나 이상의 세기 임계치를 조정하기 위한 소프트웨어 설정들을 제공받는다.
명세서 및 청구범위에서 사용되는 바와 같이, 접촉의 "특성 세기"라는 용어는 접촉의 하나 이상의 세기들에 기초한 접촉의 특성을 지칭한다. 일부 실시예들에서, 특성 세기는 다수의 세기 샘플들에 기초한다. 특성 세기는, 선택적으로, 사전정의된 수의 세기 샘플들, 또는 (예컨대, 접촉을 검출한 이후에, 접촉의 리프트오프를 검출하기 이전에, 접촉의 이동의 시작을 검출하기 이전 또는 이후에, 접촉의 종료를 검출하기 이전에, 접촉의 세기의 증가를 검출하기 이전 또는 이후에, 그리고/또는 접촉의 세기의 감소를 검출하기 이전 또는 이후에) 사전정의된 이벤트에 대해 사전결정된 기간(예컨대, 0.05, 0.1, 0.2, 0.5, 1, 2, 5, 10 초) 동안 수집된 세기 샘플들의 세트에 기초한다. 접촉의 특성 세기는, 선택적으로, 접촉의 세기들의 최대 값, 접촉의 세기들의 중간 값(mean value), 접촉의 세기들의 평균값(average value), 접촉의 세기들의 상위 10 백분위 값(top 10 percentile value), 접촉의 세기들의 최대 값의 절반의 값, 접촉의 세기들의 최대 값의 90 퍼센트의 값 등 중 하나 이상에 기초한다. 일부 실시예들에서, 접촉의 지속기간은 (예컨대, 특성 세기가 시간의 경과에 따른 접촉의 세기의 평균일 때) 특성 세기를 판정하는 데 사용된다. 일부 실시예들에서, 동작이 사용자에 의해 수행되었는지의 여부를 판정하기 위해, 특성 세기가 하나 이상의 세기 임계치들의 세트와 비교된다. 예를 들어, 하나 이상의 세기 임계치들의 세트는 제1 세기 임계치 및 제2 세기 임계치를 포함할 수 있다. 이 예에서, 제1 임계치를 초과하지 않는 특성 세기를 갖는 접촉의 결과, 제1 동작이 행해지고, 제1 세기 임계치를 초과하지만 제2 세기 임계치를 초과하지 않는 특성 세기를 갖는 접촉의 결과, 제2 동작이 행해지며, 제2 세기 임계치 초과의 특성 세기를 갖는 접촉의 결과, 제3 동작이 행해진다. 일부 실시예들에서, 특성 세기와 하나 이상의 세기 임계치들 간의 비교는, 제1 동작 또는 제2 동작을 수행할지를 결정하기 위해 사용되기보다는, 하나 이상의 동작들을 수행할지의 여부(예컨대, 개개의 옵션을 수행할지 아니면 개개의 동작을 수행하는 것을 보류할지)를 결정하기 위해 사용된다.
일부 실시예들에서, 특성 세기를 판정하기 위해 제스처의 일부분이 식별된다. 예를 들어, 터치 감응형 표면은 시작 위치로부터 전이하여 종료 위치(이 지점에서 접촉의 세기가 증가함)에 도달하는 연속적인 스와이프 접촉(예컨대, 드래그 제스처)을 수신할 수 있다. 이 예에서, 종료 위치에서의 접촉의 특성 세기는 스와이프 접촉 전체가 아니라 연속적인 스와이프 접촉의 일부분에만(예컨대, 종료 위치에서의 스와이프 접촉의 부분에만) 기초할 수 있다. 일부 실시예들에서, 접촉의 특성 세기를 판정하기 전에 스와이프 접촉의 세기들에 평활화 알고리즘(smoothing algorithm)이 적용될 수 있다. 예를 들어, 평활화 알고리즘은, 선택적으로, 비가중 이동 평균(unweighted sliding-average) 평활화 알고리즘, 삼각(triangular) 평활화 알고리즘, 메디안 필터(median filter) 평활화 알고리즘, 및/또는 지수(exponential) 평활화 알고리즘 중 하나 이상을 포함한다. 일부 상황들에서, 이 평활화 알고리즘들은 특성 세기를 판정하기 위해 스와이프 접촉의 세기들에서의 좁은 급등(spike)들 또는 급감(dip)들을 제거한다.
일부 실시예들에서, 하나 이상의 사전정의된 세기 임계치들은 특정 입력이 세기-기반 기준을 만족시키는지의 여부를 판정하는 데 사용된다. 예를 들어, 하나 이상의 사전정의된 세기 임계치들은 (i) 접촉 검출 세기 임계치(IT0), (ii) 가볍게 누르기 세기 임계치(ITL), (iii) 깊게 누르기 세기 임계치(ITD)(예컨대, 적어도 초기에 IL보다 더 높음), 및/또는 (iv) 하나 이상의 다른 세기 임계치들(예컨대, IL보다 낮은 세기 임계치 IH)을 포함한다. 일부 실시예들에서, 가볍게 누르기 세기 임계치는, 디바이스가 물리적 마우스의 버튼 또는 트랙 패드를 클릭하는 것과 전형적으로 연관된 동작들을 수행하게 될 세기에 대응한다. 일부 실시예들에서, 깊게 누르기 세기 임계치는, 디바이스가 물리적 마우스의 버튼 또는 트랙 패드를 클릭하는 것과 전형적으로 연관된 동작들과는 상이한 동작들을 수행하게 될 세기에 대응한다. 일부 실시예들에서, 접촉이 가볍게 누르기 세기 임계치 미만의(예컨대, 그리고 공칭 접촉-검출 세기 임계치(IT0)(이 미만에서는 접촉이 더 이상 검출되지 않음) 초과의) 특성 세기로 검출될 때, 디바이스는 가볍게 누르기 세기 임계치 또는 깊게 누르기 세기 임계치와 연관된 동작을 수행하지 않고 터치 감응형 표면 상의 접촉의 이동에 따라 포커스 선택자를 이동시킬 것이다. 일반적으로, 달리 언급되지 않는 한, 이 세기 임계치들은 사용자 인터페이스 도면들의 상이한 세트들 사이에서 일관성이 있다.
일부 실시예들에서, 디바이스에 의해 검출된 입력들에 대한 디바이스의 응답은 입력 동안 접촉 세기에 기초한 기준들에 따라 달라진다. 예를 들어, 일부 "가볍게 누르기" 입력의 경우, 입력 동안 제1 세기 임계치를 초과하는 접촉의 세기는 제1 응답을 트리거한다. 일부 실시예들에서, 디바이스에 의해 검출된 입력들에 대한 디바이스의 응답은 입력 동안의 접촉 세기 및 시간 기반 기준들 둘 모두를 포함하는 기준들에 따라 달라진다. 예를 들어, 일부 "깊게 누르기" 입력의 경우, 가볍게 누르기에 대한 제1 세기 임계치보다 큰, 입력 동안 제2 세기 임계치를 초과하는 접촉의 세기는, 제1 세기 임계치를 충족하는 것과 제2 세기 임계치를 충족하는 것 사이에서 지연 시간이 경과한 경우에만, 제2 응답을 트리거한다. 이 지연 시간은 통상적으로 200 ms 미만의 지속시간(예컨대, 제2 세기 임계치의 크기에 따라 40, 100, 또는 120 ms이고, 제2 세기 임계치가 증가함에 따라 지연 시간이 증가함)이다. 이 지연 시간은 우발적 깊게 누르기 입력의 방지를 돕는다. 다른 예로서, 일부 "깊게 누르기" 입력의 경우, 제1 세기 임계치가 충족되는 시간 이후에 발생하는 민감도 감소 기간이 있다. 민감도 감소 기간 동안, 제2 세기 임계치가 증가된다. 제2 세기 임계치의 이러한 일시적인 증가는 또한 우발적 깊게 누르기 입력의 방지를 돕는다. 다른 깊게 누르기 입력의 경우, 깊게 누르기 입력의 검출에 대한 응답은 시간 기반 기준들에 따라 달라지지 않는다.
일부 실시예들에서, 입력 세기 임계치들 및/또는 대응하는 출력들 중 하나 이상은 하나 이상의 요인, 예컨대 사용자 설정, 접촉 모션, 입력 타이밍, 애플리케이션 실행, 세기가 적용되는 속도, 동시 입력의 수, 사용자 이력, 환경적 요인(예컨대, 주변 노이즈), 포커스 선택자 위치 등에 기초하여 달라진다. 예시적인 요인들이 미국 특허 출원 번호 제14/399,606호 및 제14/624,296호에 기술되어 있으며, 이들은 본 명세서에 전체적으로 참조로서 포함된다.
예를 들어, 도 3c는 시간 경과에 따른 터치 입력(476)의 세기에 부분적으로 기초하여 시간 경과에 따라 변화하는 동적 세기 임계치(480)를 예시한다. 동적 세기 임계치(480)는 2개의 컴포넌트들, 즉 터치 입력(476)이 초기에 검출된 때부터 사전정의된 지연 시간(p1) 이후에 시간 경과에 따라 감쇠하는 제1 컴포넌트(474), 및 시간 경과에 따라 터치 입력(476)의 세기를 따라가는 제2 컴포넌트(478)의 합산이다. 제1 컴포넌트(474)의 초기 높은 세기 임계치는 "깊게 누르기" 응답의 우발적 트리거링을 감소시키지만, 터치 입력(476)이 충분한 세기를 제공하는 경우 즉각적인 "깊게 누르기" 응답을 여전히 허용한다. 제2 컴포넌트(478)는 터치 입력의 점진적인 세기 변동에 의한 "깊게 누르기" 응답의 의도하지 않은 트리거링을 감소시킨다. 일부 실시예들에서, 터치 입력(476)이 (예컨대, 도 3c에서의 지점(481)에서의) 동적 세기 임계치(480)를 만족시킬 때, "깊게 누르기" 응답이 트리거된다.
도 3d는 다른 동적 세기 임계치(486)(예컨대, 세기 임계치(ID))를 예시한다. 도 3d는 또한 다른 2개의 세기 임계치들, 즉 제1 세기 임계치(IH) 및 제2 세기 임계치(IL)를 예시한다. 도 3d에서, 터치 입력(484)은 시간(p2) 이전에 제1 세기 임계치(IH) 및 제2 세기 임계치(IL)를 만족시키지만, 지연 시간(p2)이 시간(482)을 경과할 때까지 어떠한 응답도 제공되지 않는다. 또한, 도 3d에서, 동적 세기 임계치(486)는 시간 경과에 따라 감쇠하는데, 감쇠는 시간(482)(제2 세기 임계치(IL)와 연관된 응답이 트리거된 때)으로부터 사전정의된 지연 시간(p1)이 경과한 후에 시간(488)에서 시작한다. 이러한 타입의 동적 세기 임계치는 더 낮은 세기 임계치, 예를 들어 제1 세기 임계치(IH) 또는 제2 세기 임계치(IL)와 연관된 응답을 트리거한 직후, 또는 그와 동시에 동적 세기 임계치(ID)와 연관된 응답의 우발적 트리거링을 감소시킨다.
도 3e는 또 다른 동적 세기 임계치(492)(예컨대, 세기 임계치(ID))를 예시한다. 도 3e에서, 세기 임계치(IL)와 연관된 응답은 터치 입력(490)이 초기에 검출된 때부터 지연 시간(p2)이 경과한 후에 트리거된다. 동시에, 동적 세기 임계치(492)는 터치 입력(490)이 초기에 검출된 때부터 사전정의된 지연 시간(p1)이 경과한 후에 감쇠한다. 따라서, 세기 임계치(IL)와 연관된 응답을 트리거한 후에 터치 입력(490)의 세기가 감소하고, 이어서 터치 입력(490)의 해제 없이 터치 입력(490)의 세기가 증가하면, 터치 입력(490)의 세기가 다른 세기 임계치, 예를 들어, 세기 임계치(IL) 미만인 때에도 (예컨대, 시간(494)에서) 세기 임계치(ID)와 연관된 응답을 트리거할 수 있다.
가볍게 누르기 세기 임계치(ITL) 미만의 세기로부터 가볍게 누르기 세기 임계치(ITL)와 깊게 누르기 세기 임계치(ITD) 사이의 세기로의 접촉의 특성 세기의 증가는, 때때로 "가볍게 누르기" 입력으로서 지칭된다. 깊게 누르기 세기 임계치(ITD) 미만의 세기로부터 깊게 누르기 세기 임계치(ITD) 초과의 세기로의 접촉의 특성 세기의 증가는, 때때로 "깊게 누르기" 입력으로서 지칭된다. 접촉-검출 세기 임계치(IT0) 미만의 세기로부터 접촉-검출 세기 임계치(IT0)와 가볍게 누르기 세기 임계치(ITL) 사이의 세기로의 접촉의 특성 세기의 증가는, 때때로 터치 표면 상의 접촉을 검출하는 것으로서 지칭된다. 접촉-검출 세기 임계치(IT0) 초과의 세기로부터 접촉-검출 세기 임계치(IT0) 미만의 세기로의 접촉의 특성 세기의 감소는, 때때로 터치 표면으로부터 접촉의 리프트오프를 검출하는 것으로서 지칭된다. 일부 실시예들에서 IT0는 0(영)이다. 일부 실시예들에서 IT0는 0보다 크다. 일부 실시예들에서, 음영이 있는 원 또는 타원은 터치 감응형 표면 상의 접촉의 세기를 나타내기 위해 사용된다. 일부 실시예들에서, 음영이 없는 원 또는 타원은 개개의 접촉의 세기를 특정하지 않으면서 터치 감응형 표면 상의 개개의 접촉을 표현하기 위해 사용된다.
본 명세서에 기술된 일부 실시예들에서, 하나 이상의 동작들은, 개개의 누르기 입력을 포함하는 제스처를 검출한 것에 응답하여 또는 개개의 접촉(또는 복수의 접촉들)으로 수행되는 개개의 누르기 입력을 검출한 것에 응답하여 수행되며, 여기서 개개의 누르기 입력은 누르기 입력 세기 임계치 초과의 접촉(또는 복수의 접촉들)의 세기의 증가를 검출한 것에 적어도 부분적으로 기초하여 검출된다. 일부 실시예들에서, 개개의 동작은, 누르기 입력 세기 임계치 초과의 개개의 접촉의 세기의 증가를 검출한 것에 응답하여 수행된다(예컨대, 개개의 동작은 개개의 누르기 입력의 "다운 스트로크(down stroke)"에서 수행됨). 일부 실시예들에서, 누르기 입력은 누르기 입력 세기 임계치 초과의 개개의 접촉의 세기의 증가 및 누르기 입력 세기 임계치 미만의 접촉의 세기의 후속적인 감소를 포함하며, 개개의 동작은 누르기 입력 임계치 미만의 개개의 접촉의 세기의 후속적인 감소를 검출한 것에 응답하여 수행된다(예컨대, 개개의 동작은 개개의 누르기 입력의 "업 스트로크(up stroke)"에서 수행됨).
일부 실시예들에서, 디바이스는 때때로 "지터(jitter)"로 지칭되는 돌발적인 입력들을 회피하기 위해 세기 히스테리시스를 채용하며, 여기서 디바이스는 누르기 입력 세기 임계치에 대한 사전정의된 관계를 갖는 히스테리시스 세기 임계치(예컨대, 히스테리시스 세기 임계치는 누르기 입력 세기 임계치보다 X 세기 단위만큼 낮거나, 히스테리시스 세기 임계치는 누르기 입력 세기 임계치의 75%, 90% 또는 어떤 적절한 비율임)를 정의하거나 선택한다. 이와 같이, 일부 실시예들에서, 누르기 입력은 누르기 입력 세기 임계치 초과의 개개의 접촉의 세기의 증가 및 누르기 입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만의 접촉의 세기의 후속적인 감소를 포함하며, 개개의 동작은 히스테리시스 세기 임계치 미만의 개개의 접촉의 세기의 후속적인 감소를 검출한 것에 응답하여 수행된다(예컨대, 개개의 동작은 개개의 누르기 입력의 "업 스트로크"에서 수행됨). 유사하게, 일부 실시예들에서, 누르기 입력은 디바이스가 히스테리시스 세기 임계치 이하에서의 세기로부터 누르기 입력 세기 임계치 이상에서의 세기로의 접촉의 세기의 증가, 및 선택적으로, 히스테리시스 세기 이하에서의 세기로의 접촉의 세기의 후속적인 감소를 검출하는 경우에만 검출되고, 개개의 동작은 누르기 입력(예컨대, 주변환경에 따른 접촉의 세기의 증가 또는 접촉의 세기의 감소)을 검출한 것에 응답하여 수행된다.
설명의 편의상, 누르기 입력 세기 임계치와 연관된 누르기 입력에 응답하여 또는 누르기 입력을 포함하는 제스처에 응답하여 수행되는 동작들의 설명은, 선택적으로, 누르기 입력 세기 임계치 초과의 접촉의 세기의 증가, 히스테리시스 세기 임계치 미만의 세기로부터 누르기 입력 세기 임계치 초과의 세기로의 접촉의 세기의 증가, 누르기 입력 세기 임계치 미만의 접촉의 세기의 감소, 또는 누르기 입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만의 접촉의 세기의 감소를 검출한 것에 응답하여 트리거된다. 또한, 동작이 누르기 입력 세기 임계치 미만의 접촉의 세기의 감소를 검출한 것에 응답하여 수행되는 것으로서 기술되어 있는 예들에서, 동작은, 선택적으로, 누르기 입력 세기 임계치에 대응하고 그보다 더 낮은 히스테리시스 세기 임계치 미만의 접촉의 세기의 감소를 검출한 것에 응답하여 수행된다. 전술된 바와 같이, 일부 실시예들에서, 이러한 응답들의 트리거링은 또한 시간 기반 기준들이 충족됨(예컨대, 제1 세기 임계치가 충족되는 것과 제2 세기 임계치가 충족되는 것 사이에 지연 시간이 경과됨)에 따라 달라진다.
사용자 인터페이스 및 연관된 프로세스
이제, 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)에 의해 구현될 수 있는 사용자 인터페이스("UI")들 및 연관된 프로세스들의 실시예들을 향해 주목한다. 일부 실시예들에서, 일차 디스플레이(102)는 휴대용 컴퓨팅 시스템(100)의 디스플레이 부분(110)(도 1a)에 구현된다. 대안으로, 일부 실시예들에서, 일차 디스플레이(102)는 주변기기 디스플레이 디바이스(204)(도 2a 내지 도 2d)에 구현된다. 일부 실시예들에서, 동적 기능 열(104)은 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)에 구현되는 터치 감응형 디스플레이이다. 대안으로, 일부 실시예들에서, 동적 기능 열(104)은 주변기기 키보드(206)(도 2a 및 도 2b), 제1 주변기기 입력 메커니즘(212)(도 2c), 또는 주변기기 입력 메커니즘(222)(도 2d)에 구현되는 터치 감응형 디스플레이이다.
도 5a 내지 도 14e는, 일부 실시예들에 따른, 동적으로 업데이트된 터치 스크린 디스플레이 상에 애플리케이션 특정 어포던스들을 디스플레이하기 위한 예시적인 사용자 인터페이스들을 도시한다. 이러한 도면들에서의 사용자 인터페이스들은, 도 44a 내지 도 44d, 도 45a 내지 도 45c, 도 46a, 도 46b, 도 47a, 도 47b, 및 도 48a 내지 도 48c에서의 방법들을 포함한, 하기에 기술되는 방법들 및/또는 프로세스들을 예시하는 데 이용된다. 당업자는 하기의 사용자 인터페이스들이 단지 예들일 뿐이라는 것을 이해할 것이다. 또한, 당업자는, 실제로, 추가적인 어포던스들 및/또는 사용자 인터페이스 요소들 또는 더 적은 어포던스들 및/또는 사용자 인터페이스 요소들이 사용될 수 있다는 것을 이해할 것이다.
도 5a는, 시스템(즉, 운영 체제)이 현재 포커스를 두고 있다는 것을 나타내는 상태 트레이(502), 및 하기를 포함하는 복수의 실행가능/선택가능 애플리케이션 아이콘들을 갖는 애플리케이션(앱) 트레이(514)를 디스플레이하는 일차 디스플레이(102)를 도시한다: 메일 애플리케이션 아이콘(506)(예컨대, 도 3a에서의 이메일 클라이언트 모듈(341)에 대응함), 웹 브라우저 애플리케이션 아이콘(508)(예컨대, 도 3a에서의 웹 브라우징 모듈(345)에 대응함), 미디어 플레이어 애플리케이션 아이콘(510)(예컨대, 도 3a에서의 미디어 플레이어 모듈(344)에 대응함), 애플리케이션 A 아이콘(512)(예컨대, 게임에 대응함), 및 사진 애플리케이션 아이콘(515)(예컨대, 도 3a에서의 이미지 관리 모듈(343)에 대응함). 일부 실시예들에서, 상태 트레이(502)는 전경에서 현재 구동 중인 애플리케이션을 나타내고, 또한, 애플리케이션에 대한 대응하는 제어부들의 세트를 각각이 포함하는 복수의 메뉴들(예컨대, 도 5a에서의 파일, 편집, 보기, 이동(go), 윈도우, 및 도움말 메뉴들)을 포함한다. 도 5a는, 또한, 애플리케이션 A 아이콘(512)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 일부 실시예들에서, 커서(504)는 휴대용 컴퓨팅 시스템(100)의 터치패드(108)(도 1a 및 도 1b), 데스크톱 컴퓨팅 시스템(200)의 주변기기 마우스(208)(도 2a 및 도 2d), 주변기기 키보드(206)의 터치패드(108)(도 2b), 제1 주변기기 입력 메커니즘(212)의 터치패드(108)(도 2c) 등에 의해 제어된다.
도 5a는, 추가로, 일차 디스플레이(102)(즉, 운영 체제, 이는 애플리케이션 윈도우들이 열려 있지 않기 때문임)의 현재 포커스에 기초하여 복수의 어포던스들을 디스플레이하는 동적 기능 열(104)(예컨대, 터치 감응형 디스플레이)을 도시한다. 예를 들어, 도 5a에서, 시스템/운영 체제는 일차 디스플레이(102) 상에 현재 포커스를 두고 있다. 도 5a에서, 동적 기능 열(104)은 하기를 포함하는 물리적 및/또는 소프트 키들로서 구현되는 지속적인 제어부들을 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 대응하는 기능(예컨대, 일차 디스플레이(102) 상에서 현재 포커스를 두고 있는 애플리케이션을 나가거나 게임을 일시정지시킴)을 호출하는 이스케이프 어포던스(516); 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104) 및/또는 일차 디스플레이(102) 상에서의, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)을 로그아웃, 재시작, 또는 전력차단하기 위한 모드 경고(예컨대, 도 14e의 모드 경고(5308))의 디스플레이를 야기하는 전력 제어부(534).
도 5a에서, 동적 기능 열(104)은, 또한, 하기를 포함하는 복수의 시스템 레벨 어포던스들을 포함한다: 도 1a와 도 2a 및 도 2b에서의 일차 디스플레이(102)의 명도를 조정하기 위한 명도 어포던스(518); 도 1a 및 도 1b와 도 2a 및 도 2b(적용가능한 경우)의 물리적 키들의 세트(106)의 명도 및/또는 동적 기능 열(104)의 명도를 조정하기 위한 명도 어포던스(520); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 도 1a와 도 2a 및 도 2b의 일차 디스플레이(102) 상에서의 활성 애플리케이션들에 대한 미리보기 윈도우들의 디스플레이를 야기하는 노출 어포던스(522); 로컬 검색(예를 들어, 전자 문서용) 및/또는 인터넷 검색을 수행하기 위한 검색 어포던스(524); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 도 1a와 도 2a 및 도 2b의 일차 디스플레이(102) 상에서의 디폴트 또는 사용자-선택 위젯들 및 툴들의 디스플레이를 야기하는 론치패드(launchpad) 어포던스(526); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 최근 메시지들, 통지들, 캘린더 이벤트들, 등을 포함하는, 도 1a와 도 2a 및 도 2b의 일차 디스플레이(102) 상에서의 통지 센터의 디스플레이를 야기하는 통지 어포던스(528); 미디어 아이템들(예컨대, 노래, 팟캐스트, 비디오 등)의 재생을 개시하기 위한 또는 재생을 일시정지시키기 위한 재생/일시정지 어포던스(530); 및 재생되고 있는 미디어 아이템의 볼륨을 조정하기 위한 볼륨 제어 어포던스(532). 예를 들어, 탭핑이 명도 어포던스(520) 상에서 검출될 때, 동적 기능 열(104)은, 물리적 키들의 세트(106)의 명도 및/또는 동적 기능 열(104)의 명도를 조정하기 위한 명도 슬라이더(예컨대, 도 6f에서의 볼륨 슬라이더(5100)와 유사함)를 디스플레이한다. 일부 실시예들에서, 복수의 시스템 레벨 어포던스들은, 또한, 심볼/아이콘 크기, 터치 검출 감도, 햅틱 피드백, 청각적 피드백, 포커스의 변화에 대한 애니메이션, 전력 모드 등과 같은, 동적 기능 열(104)과 연관된 설정을 조정하는 것에 액세스하기 위한 설정 어포던스(도시되지 않음)를 포함한다.
도 5b는, 도 5a에서의 커서(504)를 사용한 애플리케이션 A 아이콘(512)의 선택을 검출한 것에 응답하여 애플리케이션 A(예컨대, 판타지 RPG 게임)에 대한 윈도우(536)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 5b에서, 애플리케이션 A는 메인 메뉴 모드에 있고(예컨대, 판타지 RPG 게임이 일시정지됨), 윈도우(536)는 애플리케이션 A에 대한 메인 메뉴를 디스플레이한다. 애플리케이션 A에 대한 윈도우(536)는 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 5b에서, 상태 트레이(502)는 애플리케이션 A가 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 애플리케이션 A 아이콘(512) 뒤의 그림자에 기초하여, 애플리케이션 A가 전경에서 구동 중이라는 것을 나타낸다. 도 5b에서, 애플리케이션 A에 대한 윈도우(536)는, 상부 좌측 코너에 (각각, 좌측으로부터 우측으로) 윈도우(536)를 닫고, 윈도우(536)의 크기를 최대화하고, 윈도우(536)를 최소화하기 위한 3개의 선택가능 어포던스들을 포함한다.
도 5b는, 또한, 도 5a에서 커서(504)를 사용한 애플리케이션 A 아이콘(512)의 선택을 검출한 것에 응답하여 지속적 제어부들(즉, 어포던스들(516, 534)) 및 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)) 외에도 어포던스(538)를 디스플레이하는 동적 기능 열(104)을 도시한다. (예컨대, 탭핑 접촉을 통해) 활성화될 때, 어포던스(538)는 동적 기능 열(104)이 애플리케이션 A에 대응하는 어포던스들 및/또는 표시자들의 제1 세트(예컨대, 도 5c에서의 제어부 세트 A)를 디스플레이하게 한다. 도 5b는, 추가로, 어포던스(538)에 대응하는 위치에서의 접촉(540)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 5c는, 도 5b에서 어포던스(538)의 선택을 검출한 것에 응답하여 애플리케이션 A에 대응하는 어포던스들 및/또는 표시자들의 제1 세트(예컨대, 제어부 세트 A), 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 5c에서, 애플리케이션 A(예컨대, 판타지 RPG 게임)에 대응하는 어포던스들 및/또는 표시자들의 제1 세트(예컨대, 제어부 세트 A)는 애플리케이션 A를 실행하는 동안에 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에 의해 제어되는 게임내 캐릭터/아바타에 관련된 "health" 표시자(543) 및 "mana" 표시자(545)를 포함한다. 도 5c에서, 애플리케이션 A에 대응하는 어포던스들 및/또는 표시자들의 제1 세트(예컨대, 제어부 세트 A)는 또한 게임내 글자/아바타를 제어하기 위한 제어 어포던스들(546-A, 546-B, 546-C)을 포함한다. (예컨대, 탭핑 접촉을 통해) 활성화될 때, 어포던스(542)는 동적 기능 열(104)이 복수의 시스템 레벨 어포던스들(예컨대, 도 5a에 도시된 어포던스들(518, 520, 522, 524, 526, 528, 530, 532))을 디스플레이하게 한다. 도 5c는, 또한, 제1 위치(548-A)로부터 제2 위치(548-B)로 이동하는 접촉(544)으로 상향 스와이프 제스처를 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 5d는, 도 5c에서 상향 스와이프 제스처를 검출한 것에 응답하여 애플리케이션 A에 대응하는 어포던스들 및/또는 표시자들의 제2 세트(예컨대, 제어부 세트 B) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 5d에서, 애플리케이션 A에 대응하는 어포던스들 및/또는 표시자들의 제2 세트(예컨대, 제어부 세트 B)는 애플리케이션 A를 실행하는 동안에 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에 의해 제어되는 게임내 캐릭터/아바타를 제어하기 위한 제어 어포던스들(546-D, 546-E, 546-F, 546-G, 546-H, 546-I, 546-J, 546-K)을 포함한다. 도 5d는, 또한, 어포던스(542)에 대응하는 위치에서의 접촉(552)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 5e는, 도 5d에서 어포던스(542)의 선택을 검출한 것에 응답하여 지속적 제어부들(즉, 어포던스들(516, 534)), 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)), 및 애플리케이션 A에 대응하는 어포던스(538)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 5e는, 또한, 미디어 플레이어 애플리케이션 아이콘(510)에 대응하는 새로운 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 6a는, 도 5e에서 커서(504)를 사용한 미디어 플레이어 애플리케이션 아이콘(510)의 선택을 검출한 것에 응답하여 미디어 플레이어 애플리케이션에 대한 윈도우(554)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 예를 들어, 윈도우(554)는 윈도우(536) 상에 오버레이된다. 도 6a에서, 윈도우(554)는 사용자의 미디어 라이브러리의 음악 서브섹션과 연관된 복수의 앨범들을 디스플레이한다. 도 6a에서, 사용자의 미디어 라이브러리의 음악 서브섹션은 굵은 글씨체로 디스플레이된 "Music" 및 윈도우(554)에 적어도 부분적으로 디스플레이된 앨범 A 내지 앨범 L에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 6a에서, 상태 트레이(502)는 미디어 플레이어 애플리케이션이 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 미디어 플레이어 애플리케이션 아이콘(510) 뒤의 그림자에 기초하여, 미디어 플레이어 애플리케이션이 전경에서 구동 중이라는 것을 나타낸다. 도 6a는, 또한, 사용자의 미디어 라이브러리의 팟캐스트 서브섹션에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 6a는, 추가로, 도 5e에서 커서(504)를 사용한 미디어 플레이어 애플리케이션 아이콘(510)의 선택을 검출한 것에 응답하여 복수의 앨범 어포던스들(558)(예컨대, 앨범 어포던스들(558-A 내지 558-G)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 6a에서, 복수의 앨범 어포던스들(558)은 윈도우(554)에 현재 디스플레이되어 있는 앨범들의 서브세트에 대응한다. 일부 실시예들에서, 복수의 앨범 어포던스들(558)은 윈도우(554)에 현재 디스플레이되어 있는 앨범들을 미러링(mirror)한다. 예를 들어, (예컨대, 탭핑 접촉을 통한) 앨범 어포던스(558-D)의 선택에 응답하여, 휴대용 컴퓨팅 디바이스(100) 또는 컴퓨팅 디바이스(200)는 오디오 회로부(310)(도 3a)에 의한 앨범 D의 재생을 야기하고, 또한, 일차 디스플레이(102)가 윈도우(554)의 현재 실행 영역에 앨범 D를 디스플레이하게 한다.
도 6b는, 도 6a에서 커서(504)를 사용한 팟캐스트 서브섹션의 선택을 검출한 것에 응답하여 윈도우(554)에 제1 복수의 팟캐스트들을 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 6b에서, 윈도우(554)는 사용자의 미디어 라이브러리의 팟캐스트 서브섹션과 연관된 복수의 팟캐스트들을 디스플레이한다. 도 6b에서, 사용자의 미디어 라이브러리의 팟캐스트 서브섹션은 메뉴에서 굵은 글씨체로 디스플레이된 "Podcasts" 및 윈도우(554)에 적어도 부분적으로 디스플레이된 팟캐스트 A 내지 팟캐스트 L에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다.
도 6b는, 또한, 도 6a에서 커서(504)를 사용한 팟캐스트 서브섹션의 선택을 검출한 것에 응답하여 제1 복수의 팟캐스트 어포던스들(560)(예컨대, 팟캐스트 어포던스들(560-A 내지 560-G)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 6b에서, 복수의 팟캐스트 어포던스들(560)은 윈도우(554)에 현재 디스플레이되어 있는 팟캐스트들의 서브세트에 대응한다. 예를 들어, (예컨대, 탭핑 접촉을 통한) 팟캐스트 어포던스(560-D)의 선택에 응답하여, 휴대용 컴퓨팅 시스템(100) 또는 컴퓨팅 디바이스(200)는 오디오 회로부(310)(도 3a)에 의한 팟캐스트 D의 재생을 야기하고, 또한, 일차 디스플레이(102)가 윈도우(554)의 현재 실행 영역에 팟캐스트 D를 디스플레이하게 한다. 도 6b는, 추가로, 제1 위치(564-A)로부터 제2 위치(564-B)로 이동하는 접촉(562)으로 우측으로부터 좌측으로의 스와이프 제스처를 검출하는 동적 기능 열(104)을 도시한다.
도 6c는, 도 6b에서 우측으로부터 좌측으로의 스와이프 제스처를 검출한 것에 응답하여 윈도우(554)에 제2 복수의 팟캐스트 어포던스들(560)(예컨대, 팟캐스트 어포던스들(560-E 내지 560-P))을 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 6c는, 또한, 도 6b에서 우측으로부터 좌측으로의 스와이프 제스처를 검출한 것에 응답하여 제2 복수의 팟캐스트 어포던스들(560)(예컨대, 팟캐스트 어포던스들(560-E 내지 560-K)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 6c는, 추가로, 팟캐스트 어포던스(560-J)에 대응하는 위치에서의 접촉(566)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 6d는, 도 6c에서 팟캐스트 어포던스(560-J)의 선택을 검출한 것에 응답하여 윈도우(554)에 팟캐스트 J의 재생을 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 6d는, 또한, 메일 애플리케이션 아이콘(506)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 6d는, 추가로, 도 6c에서 팟캐스트 어포던스(560-J)의 선택을 검출한 것에 응답하여, 재생 제어부들 및 표시자들과 함께, 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 6d에서, 지속적 볼륨 제어부(568)는 팟캐스트 J가 음소거되지 않고 또한 팟캐스트 J에 대한 이퀄라이저 피드백을 디스플레이한다는 것을 나타낸다. 도 6d에서, 재생 제어부들은 팟캐스트 J의 재생을 제어하기 위한 되감기 제어부(571), 일시정지 제어부(572), 및 빨리감기 제어부(573)를 포함한다. 도 6d에서, 재생 표시자들은 팟캐스트 J에 대응하는 이미지(574)(예컨대, 커버 아트 또는 연관된 이미지), 팟캐스트 J의 저작자 및 제목을 디스플레이하는 표시자(576), 및 남은 시간 표시자(578)를 포함한다.
도 6e는, 도 6d에서 커서(504)를 사용한 메일 애플리케이션 아이콘(506)의 선택을 검출한 것에 응답하여 메일 애플리케이션에 대한 윈도우(580)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 예를 들어, 윈도우(580)는 윈도우들(554, 536) 상에 오버레이된다. 도 6e에서, 윈도우(580)는 사용자의 수신함 내의 복수의 이메일들(예컨대, 이메일 A 내지 이메일 F)의 목록 및 선택된 이메일 A의 내용을 디스플레이한다. 일부 실시예들에서, 최신 또는 가장 긴급한 이메일이 사용자의 수신함 내의 복수의 이메일들의 목록의 상부에 디스플레이되고, 목록의 상부에 있는 이메일이 자동으로 선택된다. 도 6e에서, 이메일 A는, 이메일이 복수의 이메일들의 목록 내에 굵은 글씨체로 디스플레이되고 이메일 A의 내용이 목록 아래의 윈도우(580)에 디스플레이됨에 따라 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 6e에서, 상태 트레이(502)는 메일 애플리케이션이 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 메일 애플리케이션 아이콘(506) 뒤의 그림자에 기초하여, 메일 애플리케이션이 전경에서 구동 중이라는 것을 나타낸다.
도 6e는, 또한, 도 6d에서 커서(504)를 사용한 메일 애플리케이션 아이콘(506)의 선택을 검출한 것에 응답하여 이메일 A에 대응하는 복수의 어포던스들(예컨대, 어포던스들(582, 584, 586, 588, 590, 592, 594, 596, 598)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 6e에서, 이메일 A에 대응하는 복수의 어포던스들은 하기를 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 수신함을 리프레시(refresh)하는 어포던스(582); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 (예컨대, 도 7b에 도시된) 새로운 이메일을 작성하기 위한 서브윈도우를 디스플레이하게 하는 어포던스(584); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 이메일 A의 발신자에게 답신하기 위한 서브윈도우를 디스플레이하게 하는 어포던스(586); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 이메일 A의 모든 수신자들에게 답신하기 위한 서브윈도우를 디스플레이하게 하는 어포던스(588); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 이메일 A를 전달하기 위한 서브윈도우를 디스플레이하게 하는 어포던스(590); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 이메일 A가 디폴트 메일함 또는 폴더에 보관되게 하는 어포던스(592); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 이메일 A가 삭제되게 하는 어포던스(594); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이, (예컨대, 도 7a에 도시된 바와 같이) 이메일 A에 적용될 상이한 플래그들 - 상이한 플래그들은 선택적으로 기존의 폴더들에 대응함 - 을 선택하기 위한 어포던스들의 세트를 디스플레이하게 하는 어포던스(596); 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102) 또는 동적 기능 열(104)이 사용자의 수신함을 검색하기 위한 검색 대화를 디스플레이하게 하는 어포던스(598). 도 6e는, 추가로, 지속적 볼륨 제어부(568)에 대응하는 위치에서의 접촉(599)(예컨대, 길게 누르기 제스처)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 6f는, 도 6e에서 지속적 볼륨 제어부(568)에 대응하는 위치에서 길게 누르기 제스처를 검출한 것에 응답하여 도 6c에서 개시된 팟캐스트 J의 재생 볼륨을 조정하기 위한 볼륨 슬라이더(5100)를 디스플레이하는 동적 기능 열(104)을 도시한다. 볼륨 슬라이더(5100)에서의 원형체/썸(thumb)은 볼륨을 조정하도록 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에 의해 드래깅될 수 있다. 대안으로, 일부 실시예들에서, 동적 기능 열(104)은, 도 6e에서 지속적 볼륨 제어부(568)에 대응하는 위치에서 길게 누르기 제스처를 검출한 것에 응답하여 도 6c에서 개시된 팟캐스트 J의 재생을 제어하기 위한 재생 제어부들(예컨대, 일시정지, 고속 감기, 되감기, 다음 트랙, 이전 트랙 등)을 디스플레이한다. 도 6f에서, 볼륨 슬라이더(5100)는 이메일 A에 대응하는 복수의 어포던스들 상에 오버레이된다. 도 6f는, 또한, 어포던스(596)에 대응하는 위치에서의 접촉(5102)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
다른 실시예들에서, 볼륨 슬라이더(5100)는 이메일 A에 대응하는 복수의 어포던스들과는 분리된 영역에 디스플레이된다. 이와 같이, 볼륨 슬라이더(5100)가 활성화되어 있는 동안, 이메일 A에 대응하는 복수의 어포던스들(예컨대, 어포던스들(582, 584, 586, 588, 590, 592, 594, 596, 598))은 볼륨 슬라이더(5100)를 디스플레이하기 위해 충분한 디스플레이 공간이 이용가능하다는 것을 보장하도록 활발하게 스크롤되거나 수축된다. 일부 실시예들에서, 원형체/썸은, 사용자가 어포던스로부터의 접촉을 제거하지 않은 채 원형체/썸을 슬라이드시키게 하는 길게 누르기 제스처에 응답하여 사용자의 손가락 아래에 디스플레이된다.
도 7a는, 도 6f에서 어포던스(596)의 선택을 검출한 것에 응답하여 이메일 A에 적용될 상이한 플래그들 - 상이한 플래그들은 선택적으로 기존의 폴더들에 대응함 - 을 선택하기 위한 어포던스들(5103, 5104, 5106, 5108, 5110)의 세트를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 7a에서, 동적 기능 열(104)은, 또한, 동적 기능 열(104) 상에 어포던스들(5103, 5104, 5106, 5108, 5110)의 세트를 디스플레이하는 것을 중지하기 위한, 그리고 (예컨대, 도 6e에 도시된 바와 같이) 동적 기능 열(104) 상에 이메일 A에 대응하는 복수의 어포던스들을 디스플레이하기 위한 나가기 어포던스(5112)를 디스플레이한다. 도 7a는, 또한, 윈도우(580)에서 이메일 작성 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 7b는, 도 7a에서 커서(504)를 사용한 이메일 작성 어포던스의 선택을 검출한 것에 응답하여 윈도우(580) 내에 새로운 이메일을 작성하기 위한 서브윈도우를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 7b에서, 새로운 이메일을 작성하기 위한 서브윈도우는, 이메일 작성 어포던스가 더 두꺼운 선들로 디스플레이됨에 따라, 그리고, 또한, 새로운 이메일을 작성하기 위한 서브윈도우를 둘러싼 두꺼운 선들로 나타내진 바와 같이, 일차 디스플레이(102) 상에 포커스를 두고 있다.
도 7b는, 또한, 도 7a에서 커서(504)를 사용한 이메일 작성 어포던스의 선택을 검출한 것에 응답하여 새로운 이메일을 작성하는 것에 대응하는 어포던스들의 세트를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 7b에서, 새로운 이메일을 작성하는 것에 대응하는 어포던스들의 세트는 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)이 새롭게 작성된 이메일을 전송하게 하는 어포던스(5114); 새로운 이메일에 대한 텍스트의 텍스트 색상을 변경하기 위한 어포던스(5116); 새로운 이메일의 선택된 텍스트를 굵은 글씨체화하기 위한 어포던스(5118); 새로운 이메일의 선택된 텍스트를 이탤릭체화하기 위한 어포던스(5120); 및 새로운 이메일의 선택된 텍스트에 밑줄긋기하기 위한 어포던스(5122)를 포함한다. 도 7b는, 추가로, 지속적 볼륨 제어부(568)에 대응하는 위치에서의 접촉(5124)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 7c는, 윈도우(580) 내에 새로운 이메일을 작성하기 위한 서브윈도우에서의 새로운 이메일의 본문 내의 텍스트 및 글자들 "pl" 뒤에 위치되는 현재 삽입 위치의 표시자를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 7c는, 또한, 도 7b에서 지속적 볼륨 제어부(568)에 대응하는 위치에서의 탭핑 접촉을 검출한 것에 응답하여 팟캐스트 J가 음소거되어 있다는 것을 나타내는 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 7c에서, 지속적 볼륨 제어부(568)는, 도 6c에서 재생이 개시된 팟캐스트 J가 음소거되어 있는 동안에도 팟캐스트 J에 대한 이퀄라이저 피드백을 디스플레이한다(즉, 팟캐스트 J가 여전히 재생 중이지만 음소거되어 있다는 것을 보여준다). 도 7c에서, 동적 기능 열(104)은, 윈도우(580) 내에서 서브윈도우 내의 삽입 지점에 기초하여, 새로운 이메일의 본문에서 타이핑되고 있는 "pl"로 시작하는 단어를 완성하기 위한 예상 단어들(5126, 5128, 5130)을 디스플레이한다. 도 7c는, 추가로, 예상 단어(5126)(즉, "planet")에 대응하는 위치에서의 접촉(5132)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 7d는, 도 7c에서 예상 단어(5126)(즉, "planet")의 선택을 검출한 것에 응답하여 윈도우(580) 내에 새로운 이메일을 작성하기 위한 서브윈도우 내의 새로운 이메일의 본문에 단어 "planet"을 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 7d는, 또한, 새로운 이메일을 작성하기 위한 서브윈도우의 "To:" 란에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 8a는 도 7d에서 커서(504)를 사용한 "To:" 란의 선택을 검출한 것에 응답하여 사용자의 주소록에 대응하는 메뉴(5134)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 8a에서, 메뉴(5134)는 사용자의 주소록의 "All Contacts" 그룹에 대응하는 복수의 연락처들의 목록(예컨대, 기존의 또는 자동으로 채워진 연락처들의 목록)을 포함한다. 도 8a에서, 사용자의 주소록의 "All Contacts" 그룹은 메뉴(5134) 내의 "All Contacts" 그룹을 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다.
도 8a는, 또한, 도 7d에서 커서(504)를 사용한 "To:" 란의 선택을 검출한 것에 응답하여, 사용자의 주소록의 "All Contacts" 그룹에 대응하는 제1 복수의 연락처 어포던스들(5136)(예컨대, 연락처 어포던스들(5136-A 내지 5136-F)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 8a에서, 동적 기능 열(104)은, 또한, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 일차 디스플레이(102) 상에 메뉴(5134)를 디스플레이하는 것을 중지하게 하고, 또한, 동적 기능 열(104)이 제1 복수의 연락처 어포던스들(5136)을 디스플레이하는 것을 중지하게 하는 나가기 어포던스(5112)를 디스플레이한다. 도 8a는, 추가로, 제1 위치(5140-A)로부터 제2 위치(5140-B)로 이동하는 접촉(5138)으로 우측으로부터 좌측으로의 스와이프 제스처(예컨대, 사용자가 All Contacts를 통하여 우측으로부터 좌측으로 스크롤함)를 검출하는 동적 기능 열(104)을 도시한다.
도 8b는, 8a에서 우측으로부터 좌측으로의 스와이프 제스처를 검출한 것에 응답하여 사용자의 주소록의 "All Contacts" 그룹에 대응하는 제2 복수의 연락처 어포던스들(5136)(예컨대, 연락처 어포던스들(5136-E 내지 5136-J)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 8b는, 또한, 제1 위치(5144-A)로부터 제2 위치(5144-B)로 이동하는 접촉(5142)으로 상향 스와이프 제스처를 검출하는 동적 기능 열(104)을 도시한다.
도 8c는, 도 8b에서 상향 스와이프 제스처를 검출한 것에 응답하여 사용자의 주소록의 "Family" 그룹에 대응하는 복수의 연락처들의 목록을 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 8c에서, 사용자의 주소록의 "Family" 그룹은 메뉴(5134) 내의 "Family" 그룹을 둘러싼 두꺼운 선들로 나타내진 바와 같이, 일차 디스플레이(102) 상에 포커스를 두고 있다.
도 8c는, 또한, 도 8b에서 상향 스와이프 제스처를 검출한 것에 응답하여 사용자의 주소록의 "Family" 그룹에 대응하는 복수의 연락처 어포던스들(5146)(예컨대, 연락처 어포던스들(5146-A 내지 5146-F)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 8c는, 추가로, 사용자의 주소록의 "Family" 그룹 내의 "James H."라는 이름의 연락처와 연관된 연락처 어포던스(5146-D)에 대응하는 위치에서의 접촉(5148)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 8d는, 도 8c에서 연락처 어포던스(5146-D)의 선택을 검출한 것에 응답하여 윈도우(580) 내에 새로운 이메일을 작성하기 위한 서브윈도우의 "To:" 란에 "James H."를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 8d는, 또한, 도 8c에서 연락처 어포던스(5146-D)의 선택을 검출한 것에 응답하여 사용자의 주소록의 "Family" 그룹에 대응하는 복수의 연락처 어포던스들(5146)(예컨대, 연락처 어포던스들(5146-A 내지 5146-F))의 디스플레이를 새로운 이메일을 작성하는 것에 대응하는 어포던스들(예컨대, 어포던스들(5114, 5116, 5118, 5120, 5122))의 세트로 대체하는 동적 기능 열(104)을 도시한다. 도 8d는, 추가로, 적어도 하나의 시스템 레벨 어포던스(542)에 대응하는 위치에서의 접촉(5150)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 8e는, 도 8d에서 어포던스(542)의 선택을 검출한 것에 응답하여 지속적 제어부들(즉, 어포던스들(516, 534)), 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)), 및 메일 애플리케이션에 대응하는 어포던스(5152)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 8e는, 또한, 재생/일시정지 어포던스(530)에 대응하는 위치에서의 접촉(5154)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 예를 들어, 재생/일시정지 어포던스(530)의 선택을 검출한 것에 응답하여, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)은, 도 6c와 관련하여 기술된 상호작용에 의해 개시되었고 도 7b와 관련하여 기술된 상호작용에 의해 음소거되었던 팟캐스트 J의 재생을 일시정지시킨다. 팟캐스트 J의 재생은 도 8e에서 재생/일시정지 어포던스(530)의 후속 선택에 의해 재개시될 수 있다.
도 8f는, 윈도우(580)를 닫기 위한 나가기 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 8g는, 도 8f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여 모드 경고(5156)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 8g에서, 모드 경고(5156)는 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 8g에서, 일차 디스플레이(102) 상에 디스플레이된 모드 경고(5156)는 사용자에게 윈도우(580)를 닫기 전에 이메일 초안을 저장할 것을 프롬프트하며, "Save" 어포던스, "Don't Save" 어포던스, 및 "Cancel" 어포던스를 포함한다. 도 8g는, 또한, "Cancel" 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 동적 기능 열 상에의 모드 경고들의 디스플레이는 효율성을 증가시키고 더 양호한 사용자 경험을 제공하는데, 이는 그것이 사용자가 그의 양눈을 키보드와 스크린 사이에서 이동시킬 필요성을 제거하고, 또한, 사용자가 그의 양손을 키보드로부터 마우스와 같은 다른 입력 디바이스로 이동시킬 필요성을 제거하기 때문이다.
도 8g는, 추가로, 도 8f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여 모드 경고(5156) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 일부 실시예들에서, 모드 경고는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 의해 수신되는 이메일, SMS 등에 대응하는 통지, (예컨대, 저장 다이얼로그, 나가기 확인 다이얼로그, 또는 이메일 전송 확인 다이얼로그로서) 애플리케이션과 연관된 경고 등이다. 도 8g에서, 동적 기능 열(104) 상에 디스플레이된 모드 경고(5156)는 사용자에게 윈도우(580)를 닫기 전에 이메일 초안을 저장할 것을 프롬프트하며, "Save" 어포던스(5158), "Don't Save" 어포던스(5160), 및 "Cancel" 어포던스(5162)를 포함한다. 어포던스들(5158, 5160, 5162)은 단지 예들일 뿐이며, 다른 어포던스들이 모드 경고들을 제어하거나 그들에 응답하는 데 이용될 수 있다.
도 8h는, 도 8g에서 커서(504)를 사용한 "Cancel" 어포던스의 선택을 검출한 것에 응답하여, 모드 경고(5156)를 디스플레이하는 것을 중지하고 (도 8f에서와 같이) 새로운 이메일을 작성하기 위한 서브윈도우의 디스플레이를 유지하는 일차 디스플레이(102)를 도시한다. 도 8h는, 또한, 도 8g에서 커서(504)를 사용한 "Cancel" 어포던스의 선택을 검출한 것에 응답하여, 모드 경고(5156)를 디스플레이하는 것을 중지하고, 지속적 제어부들(즉, 어포던스들(516, 534)), 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)), 및 (도 8f에서와 같이) 메일 애플리케이션에 대응하는 어포던스(5152)를 디스플레이하는 동적 기능 열(104)을 도시한다.
도 9는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터, 특정된 물리적 키 조합(예컨대, alt + tab)에 대응하는 신호를 수신한 것에 응답하여 애플리케이션 선택 윈도우(5164)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 9에서, 일차 디스플레이(102) 상에 디스플레이된 애플리케이션 선택 윈도우(5164)는 하기를 포함한다: (예컨대, 커서(504)에 의한 선택을 통해) 활성화될 때, 일차 디스플레이(102)가 메일 애플리케이션에 대응하는 윈도우(580)를 전경에 디스플레이하게 하는 메일 애플리케이션 아이콘(506); (예컨대, 커서(504)에 의한 선택을 통해) 활성화될 때, 일차 디스플레이(102)가 미디어 플레이어 애플리케이션에 대응하는 윈도우(554)를 전경에 디스플레이하게 하는 미디어 플레이어 애플리케이션 아이콘(510); 및 (예컨대, 커서(504)에 의한 선택을 통해) 활성화될 때, 일차 디스플레이(102)가 애플리케이션 A에 대응하는 윈도우(536)를 전경에 디스플레이하게 하는 애플리케이션 A 아이콘(512). 도 9는, 또한, 사진 애플리케이션 아이콘(515)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 9는, 추가로, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터, 특정된 물리적 키 조합(예컨대, alt + tab)에 대응하는 신호를 수신한 것에 응답하여 애플리케이션 선택 윈도우(5164) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 9에서, 동적 기능 열(104) 상에 디스플레이된 애플리케이션 선택 윈도우(5164)는 하기를 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 메일 애플리케이션에 대응하는 윈도우(580)를 전경에 디스플레이하게 하는 메일 애플리케이션 아이콘(506); (예컨대,탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 미디어 플레이어 애플리케이션에 대응하는 윈도우(554)를 전경에 디스플레이하게 하는 미디어 플레이어 애플리케이션 아이콘(510); 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 애플리케이션 A에 대응하는 윈도우(536)를 전경에 디스플레이하게 하는 애플리케이션 A 아이콘(512).
도 10a는, 도 9에서 커서(504)를 사용한 사진 애플리케이션 아이콘(515)의 선택을 검출한 것에 응답하여 사진 애플리케이션에 대한 윈도우(5166)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 예를 들어, 윈도우(5166)는 윈도우들(580, 554, 536) 상에 오버레이된다. 도 10a에서, 윈도우(5166)는 사용자의 사진 라이브러리의 전체 사진 서브섹션과 연관된 복수의 사진들을 디스플레이한다. 도 10a에서, 사용자의 사진 라이브러리의 전체 사진 서브섹션은 굵은 글씨체로 디스플레이된 "Photos" 및 윈도우(5166)에 적어도 부분적으로 디스플레이된 사진 A 내지 사진 L에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 10a에서, 상태 트레이(502)는 사진 애플리케이션이 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 사진 애플리케이션 아이콘(515) 뒤의 그림자에 기초하여, 사진 애플리케이션이 전경에서 구동 중이라는 것을 나타낸다. 도 10a는, 또한, 윈도우(5166) 내의 사진 B에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 10a는, 추가로, 도 9에서 커서(504)를 사용한 사진 애플리케이션 아이콘(515)의 선택을 검출한 것에 응답하여 사용자의 사진 라이브러리의 전체 사진 서브섹션에 대응하는 복수의 어포던스들(예컨대, 어포던스들(5168, 5170, 5172)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10a에서, 동적 기능 열(104)은 하기를 포함한다: 사용자의 사진 라이브러리를 검색하기 위한 검색 어포던스(5168); (예컨대, 탭핑 접촉을 통해) 활성화될 때, (예컨대, 도 10c에 도시된) 풀스크린 모드에서 사용자의 사진 라이브러리의 전체 사진 서브섹션에서의 선택된 사진들 또는 모든 사진들의 슬라이드쇼를 개시하는 슬라이드 어포던스(5170); 및 윈도우(5166)에 디스플레이되는 사용자의 사진 라이브러리의 전체 사진 서브섹션으로부터 디스플레이되는 사진들을 스크롤하기 위한 슬라이더 어포던스(5172).
도 10b는 도 10a에서 커서(504)를 사용한 사진 B의 선택을 검출한 것에 응답하여 윈도우(5166)에 선택된 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10b에서, 선택된 사진 B는, 윈도우(5166) 내의 사진 B를 둘러싼 두꺼운 선들로 나타내진 바와 같이, 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 10b는, 또한, 슬라이드쇼 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 10b는, 추가로, 도 10a에서 커서(504)를 사용한 사진 B의 선택을 검출한 것에 응답하여 선택된 사진 B에 대응하는 어포던스들의 세트를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10b에서, 선택된 사진 B에 대응하는 어포던스의 세트는 하기를 포함한다: 사용자의 사진 라이브러리를 검색하기 위한 검색 어포던스(5168); 선택된 사진 B로 줌인하기 위한 줌 어포던스(5174); 선택된 사진 B를 좋아하는 좋아요(like) 어포던스(5176); (예컨대, 탭핑 접촉을 통해) 활성화될 때, (예컨대, 도 10c에 도시된) 풀스크린 모드에서 사용자의 사진 라이브러리의 전체 사진 서브섹션에서의 선택된 사진들 또는 모든 사진들의 슬라이드쇼를 개시하는 슬라이드 어포던스(5170); 동적 기능 열(104) 및/또는 일차 디스플레이(102) 상에 선택된 사진 B에 대응하는 정보, 예컨대 크기, 위치, 시간/날짜 등을 디스플레이하기 위한 정보 어포던스(5178); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 (예컨대, 도 10f에 도시된) 선택된 사진 B를 편집하기 위한 툴들을 디스플레이하게 하고/하거나, 일차 디스플레이(102)가 선택된 사진 B를 편집하기 위한 편집 인터페이스를 디스플레이하게 하는 편집하기 어포던스(5180); 선택된 사진 B를 사진 앨범에 추가하기 위한 사진 추가하기 어포던스(5182); 선택된 사진 B를 하나 이상의 통신 모드들(예컨대, 소셜 미디어 네트워크들, SMS, 이메일 등)을 통해 공유하기 위한 공유하기 어포던스(5184); 및 사용자의 사진 라이브러리로부터 선택된 사진 B를 삭제하기 위한 삭제 어포던스(5186).
도 10c는, 도 10b에서 커서(504)를 사용한 슬라이드쇼 어포던스의 선택을 검출한 것에 응답하여 윈도우(5188)에서 사용자의 사진 라이브러리의 전체 사진 서브섹션으로부터 사진들의 슬라이드쇼를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10c에서, 일차 디스플레이(102)는 풀스크린 모드에서 사진 B를 갖는 윈도우(5188)를 디스플레이한다.
도 10c는, 또한, 도 10b에서 커서(504)를 사용한 슬라이드쇼 어포던스의 선택을 검출한 것에 응답하여 사용자의 사진 라이브러리의 전체 사진 서브섹션 내의 사진들에 대응하는 복수의 썸네일 이미지들(예컨대, 썸네일 이미지들(5192-Y, 5192-Z, 5192-A, 5192-B, 5192-C, 5192-D, 5192-E))을 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10c에서, 썸네일 이미지(5192-B)를 둘러싼 두꺼운 선들은 사진 B가 현재 일차 디스플레이(102)에 의해 디스플레이되어 있다는 것을 나타낸다. 도 10c에서, 동적 기능 열(104)은, 또한, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 슬라이드쇼가 일시정지되게 하고, 또한, 일차 디스플레이(102)가 풀스크린 모드를 나가게 하는 일시정지 어포던스(5190)를 디스플레이한다. 도 10c는, 추가로, 일시정지 어포던스(5190)에 대응하는 위치에서의 접촉(5194)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 10d는, 도 10c에서 일시정지 어포던스(5190)의 선택을 검출한 것에 응답하여 윈도우(5166) 내의 확대 뷰에 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10d에서, 사진 B의 확대 뷰는, 윈도우(5166) 내의 사진 B의 확대 뷰를 둘러싼 두꺼운 선들에 의해 나타내진 바와 같이, 일차 디스플레이(102) 상에 포커스를 두고 있다.
도 10d는, 또한, 도 10c에서 일시정지 어포던스(5190)의 선택을 검출한 것에 응답하여 사진 B에 대응하는 어포던스들의 세트를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10d에서, 사진 B에 대응하는 어포던스의 세트는 하기를 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104) 및/또는 일차 디스플레이(102)가, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 사진 B로 줌인하거나 그로부터 줌아웃할 수 있게 하는 줌 제어부들을 디스플레이하게 하는 줌 어포던스(5174); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 풀스크린 모드에서 사진 B를 디스플레이하게 하는 풀스크린 어포던스(5194); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 풀스크린 모드에서 사용자의 사진 라이브러리의 전체 사진 서브섹션에서의 선택된 사진들 또는 모든 사진들의 슬라이드쇼를 개시하는 슬라이드 어포던스(5170); 동적 기능 열(104) 및/또는 일차 디스플레이(102) 상에 선택된 사진 B에 대응하는 정보, 예컨대 크기, 위치, 시간/날짜 등을 디스플레이하기 위한 정보 어포던스(5178); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 선택된 사진 B를 편집하기 위한 툴들을 디스플레이하게 하고/하거나, 일차 디스플레이(102)가 선택된 사진 B를 편집하기 위한 편집 인터페이스를 디스플레이하게 하는 편집하기 어포던스(5180); 선택된 사진 B를 사진 앨범에 추가하기 위한 사진 추가하기 어포던스(5182); 및 선택된 사진 B를 하나 이상의 통신 모드들(예컨대, 소셜 미디어 네트워크들, SMS, 이메일 등)을 통해 공유하기 위한 공유하기 어포던스(5184). 도 10d는, 추가로, 풀스크린 어포던스(5196)에 대응하는 위치에서의 접촉(5196)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 10e는, 도 10d에서 풀스크린 어포던스(5196)의 선택을 검출한 것에 응답하여 윈도우(5200) 내에 풀스크린 모드에서 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10e는, 또한, 도 10d에서 풀스크린 어포던스(5196)의 선택을 검출한 것에 응답하여 최소화하기 어포던스(5198)를 디스플레이하는 동적 기능 열(104)을 도시한다. (예컨대, 탭핑 접촉을 통해) 활성화될 때, 최소화하기 어포던스(5198)는 일차 디스플레이(102)가 (도 10d에 도시된 바와 같이) 윈도우(5166) 내의 확대 뷰에 사진 B를 디스플레이하게 한다. 도 10e는, 추가로, 편집하기 어포던스(5180)에 대응하는 위치에서의 접촉(5201)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 10f는, 도 10e에서 편집하기 어포던스(5180)의 선택을 검출한 것에 응답하여 편집 툴들의 세트(5205)를 디스플레이하는 동적 기능 열(104)을 도시한다.
도 10f는, 또한, 도 10e에서 편집하기 어포던스(5180)의 선택을 검출한 것에 응답하여 두꺼운/굵은 아웃라인을 갖는 편집하기 어포던스(5180) 및 도 10e에서 반투명도가 증가된 채로 디스플레이된 모든 다른 어포던스들(예컨대, 줌 어포던스(5174), 최소화하기 어포던스(5198), 정보 어포던스(5178), 사진 추가하기 어포던스(5182), 및 공유하기 어포던스(5184))을 디스플레이하는 동적 기능 열(104)을 도시한다.
도 10f에서, 편집 툴들의 세트(5205)는 하기를 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 윈도우(5200) 내에서 시계 또는 반시계 방향으로 사진 B를 회전시키기 위한 제어부들을 디스플레이하게 하는 회전 툴(5202); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 사진 B를 증강시키기, 예컨대 사진 B에 필터들을 적용하기, 사진 B의 명도를 조정하기, 사진 B의 채도를 조정하기, 등을 위한 제어부들을 디스플레이하게 하는 증강 툴(5204); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 사진 B에서 사람들의 적목 현상(red-eye)을 저감하기 위한 제어부들을 디스플레이하게 하는 적목 현상 저감 툴(5206); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 윈도우(5200) 내에서의 사진 B의 배향을 교정하기(straighten) 위한 제어부들을 디스플레이하게 하는 교정하기 툴(5208); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 윈도우(5200) 내의 사진 B를 크로핑하기 위한 제어부들을 디스플레이하게 하는 크로핑 툴(5210); 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 제거 및 에어브러시 효과와 같이 사진 B를 리터치하기 위한 제어부들을 디스플레이하게 하는 리터치 툴(5212). 도 10f는, 추가로, 교정하기 툴(5208)에 대응하는 위치에서의 접촉(5214)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 10g는, 도 10f에서 교정하기 툴(5208)의 선택을 검출한 것에 응답하여, 윈도우(5200) 내에서의 사진 B의 배향을 교정하기 위한 제어부들의 세트(5209)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10g에서, 교정하기 툴(2208)에 대응하는 제어부들의 세트(5209)는 윈도우(5200) 내에서의 사진 B의 배향을 조정하기 위한 슬라이더(5210), 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 제어부들의 세트(5209)를 디스플레이하는 것을 중지하게 하고 (도 10f에 도시된 바와 같이) 편집 툴들의 세트(5205)를 디스플레이하게 하는 완료 어포던스(5212)를 포함한다. 도 10g는, 또한, 이스케이프 어포던스(516)에 대응하는 위치에서의 접촉(5216)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는 슬라이더(5210) 상에서 또는 제어부들의 세트(5209) 내에서 기원하는(originating) 위치에서 좌측으로부터 우측으로의 스와이프/드래그 제스처 또는 우측으로부터 좌측으로의 스와이프/드래그 제스처를 수행함으로써 윈도우(5200) 내에서의 사진 B의 배향을 조정할 수 있다. 예를 들어, 동적 기능 열(104) 상에서의 상향 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열(104)은 크로핑 툴(5210)에 대응하는 제어부들의 세트를 디스플레이한다. 다른 예에서, 동적 기능 열(104) 상에서의 하향 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열(104)은 적목 현상 저감 툴(5206)에 대응하는 제어부들의 세트를 디스플레이한다.
도 10h는, 도 10g에서 이스케이프 어포던스(516)의 선택을 검출한 것에 응답하여 윈도우(5166) 내의 확대 뷰에 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10h는, 도 10g에서 이스케이프 어포던스(516)의 선택을 검출한 것에 응답하여 (도 10d에 도시된 바와 같이) 사진 B에 대응하는 어포던스들의 세트를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10h에서, 사진 B에 대응하는 어포던스의 세트는 하기를 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104) 및/또는 일차 디스플레이(102)가, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 사진 B로 줌인하거나 그로부터 줌아웃할 수 있게 하는 줌 제어부들을 디스플레이하게 하는 줌 어포던스(5174); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 풀스크린 모드에서 사진 B를 디스플레이하게 하는 풀스크린 어포던스(5194); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 풀스크린 모드에서 사용자의 사진 라이브러리의 전체 사진 서브섹션에서의 선택된 사진들 또는 모든 사진들의 슬라이드쇼를 개시하는 슬라이드 어포던스(5170); 동적 기능 열(104) 및/또는 일차 디스플레이(102) 상에 선택된 사진 B에 대응하는 정보, 예컨대 크기, 위치, 시간/날짜 등을 디스플레이하기 위한 정보 어포던스(5178); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 선택된 사진 B를 편집하기 위한 툴들을 디스플레이하게 하고/하거나, 일차 디스플레이(102)가 선택된 사진 B를 편집하기 위한 편집 인터페이스를 디스플레이하게 하는 편집하기 어포던스(5180); 선택된 사진 B를 사진 앨범에 추가하기 위한 사진 추가하기 어포던스(5182); 및 선택된 사진 B를 하나 이상의 통신 모드들(예컨대, 소셜 미디어 네트워크들, SMS, 이메일 등)을 통해 공유하기 위한 공유하기 어포던스(5184).
도 10h는, 또한, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 의한 통지(5218)의 수신에 응답하여 어포던스들(5178, 5180, 5182, 5184) 상에 오버레이된 통지(5218)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10h에서, 통지(5218)는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 Suzie S.에 의해 전송된 SMS, 인스턴트 메시지 등에 대응하는데, 여기서 통지의 내용은 "Movies tonight?"라고 질문하는 것이다. 도 10h는, 추가로, 통지(5128) 내의 제1 위치(5222-A)로부터 제2 위치(5222-B)로의 접촉(5220)으로 좌측으로부터 우측으로의 스와이프 제스처를 검출하는 동적 기능 열(104)을 도시한다.
도 11a는, 도 10h에서 좌측으로부터 우측으로의 스와이프 제스처를 검출한 것에 응답하여 통지(5218)를 디스플레이하는 것을 중지하는 동적 기능 열(104)을 도시한다. 도 11a는, 또한, 웹 브라우저 애플리케이션 아이콘(508)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 11b는, 도 11a에서 커서(504)를 사용한 웹 브라우저 애플리케이션 아이콘(508)의 선택을 검출한 것에 응답하여 웹 브라우저 애플리케이션에 대한 윈도우(5224)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 예를 들어, 윈도우(5224)는 윈도우(5166) 상에 오버레이된다. 도 11b에서, 윈도우(5224)는, 브라우징 제어부들(예컨대, 마지막 웹 페이지, 다음 웹 페이지, 리프레시, 및 즐겨찾기에 추가하기), 어드레스 바, 검색 바, 모든 북마크 보기 어포던스(예컨대, 펼쳐진 책과 닮음), 열려 있는 모든 탭 보기 어포던스(예컨대, 6개 정사각형들의 그리드), 및 특정한 북마크 A, B, 및 C에 대한 어포던스들을 비롯한, 웹 브라우저 애플리케이션에 대한 제어부들을 포함한다. 도 11b에서, 윈도우(5224)는 즐겨찾는 웹사이트들 또는 가장 빈번하게 방문한 웹사이트들 A 내지 H에 링크하는 복수의 어포던스들(5227)을 포함하는 웹 브라우저 애플리케이션에 대한 홈 인터페이스를 나타낸다. 도 11b에서, 애플리케이션 A에 대한 윈도우(5224)는 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 11b에서, 상태 트레이(502)는 웹 브라우저 애플리케이션이 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 웹 브라우저 애플리케이션 아이콘(508) 뒤의 그림자에 기초하여, 웹 브라우저 애플리케이션이 전경에서 구동 중이라는 것을 나타낸다.
도 11b는, 또한, 도 11a에서 커서(504)를 사용한 웹 브라우저 애플리케이션 아이콘(508)의 선택을 검출한 것에 응답하여 지속적 제어부들(즉, 어포던스들(516, 534) 및 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)) 외에도 어포던스(5226)를 디스플레이하는 동적 기능 열(104)을 도시한다. (예컨대, 탭핑 접촉을 통해) 활성화될 때, 어포던스(5226)는 동적 기능 열(104)이 웹 브라우저 애플리케이션에 대한 제어부들의 세트(예컨대, 도 11c에 도시된 바와 같은 어포던스들(5230, 5232, 5238), 및 어드레스 바(5234))를 디스플레이하게 한다. 도 11b는, 추가로, 어포던스(5226)에 대응하는 위치에서의 접촉(5228)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 11c는, 도 11b에서 어포던스(5226)의 선택을 검출한 것에 응답하여 웹 브라우저 애플리케이션에 대한 제어부들의 세트를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 11c에서, 웹 브라우저 애플리케이션에 대한 제어부들의 세트는 하기를 포함한다: 윈도우(5224) 내의 웹 브라우저 애플리케이션에 의해 현재 디스플레이되어 있는 웹 페이지 이전에 방문한 웹 페이지를 디스플레이하기 위한 어포던스(5230); 윈도우(5224) 내의 웹 브라우저 애플리케이션에 의해 현재 디스플레이되어 있는 웹 페이지 이후에 방문되는 웹 페이지를 디스플레이하기 위한 어포던스(5232); 웹 브라우저 애플리케이션에 의해 현재 디스플레이되어 있는 웹 페이지를 즐겨찾기 목록 또는 북마크 폴더에 추가하기 위한 어포던스(5238); 및 웹 브라우저 애플리케이션에 의해 현재 디스플레이되어 있는 웹 페이지의 URL을 디스플레이하기 위한 어드레스 바(5234). 도 11c에서, 어드레스 바(5234)는, 또한, 웹 브라우저 애플리케이션에 의해 현재 디스플레이되어 있는 웹 페이지를 리프레시하기 위한 리프레시 어포던스(5236)를 포함한다. 도 11c는, 또한, 웹사이트 A에 링크하는 어포던스(5227-A)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 11d는, 도 11c에서 커서(504)를 사용한 웹사이트 A에 대응하는 어포던스(5227-A)의 선택을 검출한 후에 윈도우(5224) 내에 탭 A에 대한 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 11d에서, 탭 A에 대한 인터페이스는 탭 A를 둘러싸는 두꺼운 라인들 및 탭 A에 대한 굵은 텍스트에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 11d에서, 탭 A에 대한 인터페이스는 웹사이트 A의 체크아웃 웹 페이지(예컨대, URL: www.website_A.com/checkout과 연관됨)를 나타낸다. 체크아웃 웹 페이지는 구매용 아이템 A 및 B를 포함하고 있는 사용자의 가상 쇼핑 카트에 대응한다. 도 11d는, 또한, 윈도우(5224) 내의 구매 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 11c는, 추가로, 어드레스 바(5234) 내에 웹사이트 A의 체크아웃 웹 페이지에 대한 URL(예컨대, www.website_A.com/checkout)을 디스플레이하는 동적 기능 열(104)을 도시한다.
도 11e는, 도 11d에서 커서(504)를 사용한 구매 어포던스의 선택을 검출한 것에 응답하여 윈도우(5224) 상에 오버레이된 모드 경고(5240)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 11e에서, 일차 디스플레이(102) 상에 디스플레이된 모드 경고(5240)는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 동적 기능 열(104) 상에 그의 지문을 제공할 것을 프롬프트하고, 또한, (예컨대, 커서(504)에 의한 선택을 통해) 활성화될 때, 구매의 취소를 야기하는 취소하기 어포던스(5242)를 포함한다. 예를 들어, 모드 경고(5240)는, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 의해 개시되는 구매를 인증하기 위해 지문을 요구하는 보안 설정(예컨대, 디폴트 또는 사용자 지정됨)에 따라 디스플레이된다. 예를 들어, 일부 실시예들에서, 일차 디스플레이(102) 및/또는 동적 기능 열(104)은, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 로그인 시, 애플리케이션 또는 웹사이트에 액세스하기 위해 패스워드를 입력할 때, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 의해 저장된 데이터를 복호화하기 위해 패스워드를 입력할 때, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)으로부터 폴더들 및/또는 데이터를 삭제할 때, 다른 파괴적 액션들을 취할 때, 등에 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 동적 기능 열(104) 상에 그의 지문을 제공할 것을 프롬프트하는 모드 경고를 디스플레이한다.
도 11e는, 또한, 도 11d에서 커서(504)를 사용한 구매 어포던스의 선택을 검출한 것에 응답하여 모드 경고(5240)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 11e에서, 동적 기능 열(104) 상에 디스플레이된 모드 경고(5240)는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 동적 기능 열(104)의 지문 영역(5244)에 그의 지문을 제공할 것을 프롬프트하고, 또한, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 구매의 취소를 야기하는 취소하기 어포던스(5242)를 포함한다. 일부 실시예들에서, 동적 기능 열(104)은, 도 5a 내지 도 11d에서 전력 제어부(534)에 또한 대응하는 동적 기능 열(104)의 지문 영역(5244) 내에서의 지문을 검출하도록 구성된다. 일부 실시예들에서, 동적 기능 열(104)은 그의 터치 감응형 영역 내의 임의의 위치에서 지문을 검출하도록 구성된다. 도 11e는, 추가로, 지문 영역(5244) 내에서의 접촉(5246)(예컨대, 누르고 유지하기 제스처)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 11f는, 도 11e에서 지문 영역(5244) 내에서의 접촉(5246)을 검출한 후, 윈도우(5224) 내에 탭 A에 대한 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 11f에서, 탭 A에 대한 인터페이스는 도 11e에서 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에 의해 제공된 지문의 인증 후에 구매가 완료되었다는 것을 나타내는 웹사이트 A의 영수증 웹 페이지(예컨대, URL: www.website_A.com/reciept와 연관됨)를 보여준다.
도 11f는, 또한, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 의한 착신 음성 호출의 수신에 응답하여, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))와 함께, C. Cheung으로부터의 착신 음성 호출과 연관된 인터페이스(5248)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 11f에서, 인터페이스(5248)는 착신 호출에 응답하기 위한 제1 어포던스(5250) 및 착신 호출을 거부하기 위한 제2 어포던스(5252)를 포함한다. 도 11f는, 추가로, 제1 어포던스(5250)에 대응하는 위치에서의 접촉(5254)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 예를 들어, 제1 어포던스(5250)의 선택을 검출한 후, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자와 C. Cheung 사이의 통신 접속(예컨대, VoIP)이 음성 호출을 위해 확립된다.
도 11g는, 도 11f에서 제1 어포던스(5250)의 선택을 검출한 후, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))와 함께, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자와 C. Cheung 사이의 진행 중인 음성 호출과 연관된 인터페이스(5256)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 11g에서, 인터페이스(5256)는 음성 호출을 종료하기 위한 어포던스(5258) 및 총 음성 호출 시간의 표시자(예컨대, 7분 29초)를 포함한다. 일부 실시예들에서, 진행 중인 음성 호출 동안, 일차 디스플레이(102)의 포커스와 연관된 어포던스들은 동적 기능 열(104) 상에 디스플레이되지 않는다. 일부 실시예들에서, 음성 호출이 사전정의된 양의 시간 동안 지속된 후, 인터페이스(5256)는 콤팩트 모드에서 디스플레이되고, 일차 디스플레이(102)의 포커스와 연관된 어포던스들은 동적 기능 열(104) 상에 디스플레이될 수 있다. 도 11g는, 또한, 어포던스(5258)에 대응하는 위치에서의 접촉(5260)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 11h는 윈도우(5224) 내에 탭 B에 대한 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시하는데, 여기서 웹 브라우저 애플리케이션 내에서는 탭들 A, B 및 C가 열려 있다, 도 11h에서, 탭 B에 대한 인터페이스는 웹사이트 B의 홈 웹 페이지(예컨대, URL: www.website_B.com/home과 연관됨)를 보여준다. 도 11h에서, 탭 B에 대한 인터페이스는 탭 B를 둘러싼 두꺼운 선들 및 탭 B에 대한 굵은 텍스트로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다.
도 11h는, 또한, 도 11g에서 어포던스(5258)의 선택을 검출한 후, 인터페이스(5256)를 디스플레이하는 것을 중지하는 동적 기능 열(104)을 도시한다. 도 11h에서, 동적 기능 열(104)은 어드레스 바(5234) 내에 웹사이트 B의 홈 웹 페이지에 대한 URL(예컨대, www.website_B.com/home)을 포함한다. 도 11h에서, 동적 기능 열(104)은 또한 하기를 포함한다: (예컨대, 탭핑 접촉에 의해) 활성화될 때, 일차 디스플레이(102)가 탭 A에 대한 인터페이스를 디스플레이하게 하고, 또한, 동적 기능 열(104)이 어드레스 바(5234) 내에 탭 B에 대응하는 URL을 나타내게 하는 어포던스(5262-A); 및 (예컨대, 탭핑 접촉에 의해) 활성화될 때, 일차 디스플레이(102)가 탭 C에 대한 인터페이스를 디스플레이하게 하고, 또한, 동적 기능 열(104)이 어드레스 바(5234) 내에 탭 C에 대응하는 URL을 나타내게 하는 어포던스(5262-B).
도 12a는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)에 의한 통지(5264)의 수신에 응답하여 윈도우(5264) 상에 오버레이된 통지(5264)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12a에서, 통지(5264)는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 MAS에 의해 전송된 SMS, 인스턴트 메시지 등에 대응하는데, 여기서 통지의 내용은 "Landed yet?"라고 질문하는 것이다. 도 12a는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅하는 것을 디스플레이하는 일차 디스플레이(102)를 도시한다. 예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는, 개개의 메뉴, 통지, 모드 경고 등을 일차 디스플레이(102) 상의 그의 원 윈치로부터 사전정의된 위치(예컨대, 하부 우측 코너 또는 다른 유사한 위치)로 드래깅한 것에 응답하여 동적 기능 열(104) 상에서의 개개의 메뉴, 통지, 모드 경고 등의 디스플레이를 야기할 수 있다. 일부 실시예들에서, 사전정의된 위치는 유사한 방식으로 동작하는 복수의 사전정의된 위치들 - 복수의 사전정의된 위치들은 디폴트 또는 사용자 특정 위치들임 - 중 하나이다.
도 12b는, 도 12a에서 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅한 것에 응답하여 윈도우(5264) 상에 오버레이된 통지(5264)를 디스플레이하는 것을 중지하는 일차 디스플레이(102)를 도시한다. 도 12b는, 또한, 도 12a에서 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅한 것에 응답하여 어포던스들(5262-A, 5262-B) 상에 오버레이된 통지(5264)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 12b는, 추가로, 통지(5264) 내의 위치에서의 접촉(5266)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 12c는, 도 12b에서 통지(5264) 내의 위치에서의 접촉(5266)을 검출한 것에 응답하여 응답 다이얼로그 박스(5268)를 디스플레이하는 동적 기능 열(104)을 도시한다. 대안으로, 일부 실시예들에서, 통지(5264)에 대응하는 애플리케이션은 도 12b에서 통지(5264) 내의 위치에서의 접촉(5266)을 검출한 것에 응답하여 열린다. 도 12c에서, 응답 다이얼로그 박스(5268)는 도 12a 및 도 12b에 도시된 통지(5264)의 내용에 대한 복수의 예상 응답들을 포함한다. 도 12c에서, 응답 다이얼로그 박스(5268)는 제1 예상 응답(5270)("Yes"), 제2 예상 응답(5272)("No"), 및 제3 예상 응답(5274)("On my way!")을 포함한다. 도 12c는, 또한, 제1 예상 응답(5270)에 대응하는 위치에서의 접촉(5276)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 예를 들어, 제1 예상 응답(5270)의 선택에 응답하여, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)은 디폴트 통신 모드(예컨대, SMS, 인스턴트 메시지 등) 또는 통지(5264)가 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 전송되게 한 것과 동일한 통신 모드를 통해 제1 예상 응답(5270)("Yes")이 MAS에게 전송되게 한다.
도 12d는 윈도우(5224) 내의 모든 북마크 보기 어포던스(예컨대, 펼쳐진 책과 닮음)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12e는, 도 12d에서 커서(504)를 사용한 모든 북마크 보기 어포던스의 선택을 검출한 것에 응답하여 윈도우(5224) 내에 북마크 사이드바를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12e에서, 북마크 사이드바는 북마크 사이드바를 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 12e는, 또한, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 커서(504)를 사용하여 북마크 사이드바를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅하는 것을 도시한다.
도 12f는, 도 12e에서 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자가 커서(504)를 사용하여 북마크 사이드바를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅한 것에 응답하여 모든 기존 북마크들에 대응하는 북마크 어포던스들의 세트(5278)(예컨대, 북마크 어포던스들(5278-A 내지 5278-G))을 디스플레이하는 동적 기능 열(104)을 도시한다. 예를 들어, 북마크 어포던스들의 세트(5278)의 개개의 어포던스가 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)는 윈도우(5224) 내의 새로운 탭에 북마크 어포던스들의 세트(5278)의 개개의 어포던스에 대응하는 웹사이트를 디스플레이한다. 이러한 예를 계속 참조하면, 북마크 어포던스의 세트(5278)의 개개의 어포던스가 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)은 북마크 어포던스들의 세트(5278)를 디스플레이하는 것을 중지하고, (예컨대, 도 12e에 도시된 바와 같이) 웹 브라우저 애플리케이션에 대한 제어부들의 세트를 디스플레이하고, 어드레스 바(5234)에 북마크 어포던스들의 세트(5278)의 개개의 어포던스에 대응하는 웹사이트에 대한 URL을 디스플레이한다. 도 12f에서, 동적 기능 열(104)은, 또한, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 북마크 어포던스들의 세트(5278)를 디스플레이하는 것을 중지하게 하고, 도 12e에 도시된 바와 같은, 웹 브라우저 애플리케이션에 대한 제어부들의 세트를 디스플레이하게 하는 나가기 어포던스(5112)를 디스플레이한다. 도 12f는, 또한, 윈도우(5224)를 닫기 위한 나가기 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다.
도 12g는, 도 12f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여 북마크 어포던스들의 세트(5278) 상에 오버레이된 모드 경고(5280)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 12g에서, 모드 경고(5280)는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 그가 웹 브라우저 애플리케이션 내에서의 열려 있는 모든 탭들을 닫으려고 의도한다는 것을 확인할 것을 프롬프트한다. 도 12g에서, 모드 경고(5280)는 하기를 포함한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 일차 디스플레이(102)가 윈도우(5224)의 디스플레이를 중지하게 하는 나가기 어포던스(5282); 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 모드 경고(5280)를 무시하고, 일차 디스플레이(102)가 윈도우(5224)의 디스플레이를 유지하게 하는 취소하기 어포던스(5284). 도 12g는, 또한, 나가기 어포던스(5282)에 대응하는 위치에서의 접촉(5286)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 12h는, 도 12g에서 나가기 어포던스(5282)의 선택을 검출한 것에 응답하여 윈도우(5224)를 디스플레이하는 것을 중지하고 사진 애플리케이션에 대한 윈도우(5166)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12h에서, 상태 트레이(502)는 시스템/운영 체제가 현재 일차 디스플레이(102) 상에 포커스를 두고 있다는 것을 나타내고 있다. 도 12h는, 또한, 윈도우(5166)에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12h는, 추가로, 도 12g에서 나가기 어포던스(5282)의 선택을 검출한 것에 응답하여, 그리고 일차 디스플레이(102)의 현재 포커스(예컨대, 시스템/운영 체제)에 기초하여, 지속적 제어부들(즉, 어포던스들(516, 534)) 및 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532))을 디스플레이하는 동적 기능 열(104)을 도시한다.
도 13a에서, 일차 디스플레이(102)의 포커스는 도 12h에서 커서(504)를 사용한 윈도우(5166)의 선택을 검출한 것에 응답하는 사진 애플리케이션이다. 더 구체적으로, 사용자의 사진 라이브러리의 전체 사진 서브섹션은 굵은 글씨체로 디스플레이된 "Photos" 및 윈도우(5166)에 적어도 부분적으로 디스플레이된 사진 A 내지 사진 L에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 13a에서, 상태 트레이(502)는 사진 애플리케이션이 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 사진 애플리케이션 아이콘(515) 뒤의 그림자에 기초하여, 사진 애플리케이션이 전경에서 구동 중이라는 것을 나타낸다. 도 13a는, 또한, 상태 트레이(502) 내의 파일 메뉴에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 13a는, 추가로, 도 12h에서 커서(504)를 사용한 윈도우(5166)의 선택을 검출한 것에 응답하여, 사용자의 사진 라이브러리의 전체 사진 서브섹션에 대응하는 복수의 어포던스들(예컨대, 어포던스들(5168, 5170, 5172)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다.
도 13b는, 도 13a에서 커서(504)를 사용한 파일 메뉴의 선택을 검출한 것에 응답하여, 파일 제어부들의 메뉴(5288)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 13b에서, 파일 제어부들의 메뉴(5288)는 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 13b에서, 파일 제어부들의 메뉴(5288)는 새로운 앨범 제어부, 새로운 폴더 제어부, 새로운 캘린더 제어부, 가져오기 제어부, 내보내기 제어부, 윈도우 닫기 제어부, 및 프린트 제어부를 포함한다.
도 13b는, 또한, 도 13a에서 커서(504)를 사용한 파일 메뉴의 선택을 검출한 것에 응답하여 제1 복수의 어포던스들(5290)을 디스플레이하는 동적 기능 열(104)을 도시한다. 도 13b에서, 제1 복수의 어포던스들(5290)은 일차 디스플레이(102)에 의해 디스플레이된 파일 제어부들의 메뉴(5288)에 나타난 파일 제어부들에 대응한다. 예를 들어, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 어포던스(5290-G)(예컨대, 윈도우 파일 닫기 제어부에 대응함)는 일차 디스플레이(102)가 윈도우(5166)의 디스플레이를 중지하게 하고, 또한, 동적 기능 열(104)이 제1 복수의 어포던스들(5290)의 디스플레이를 중지하게 한다. 도 13b는, 추가로, 제1 위치(5294-A)로부터 제2 위치(5294-B)로 이동하는 접촉(5292)으로 상향 스와이프 제스처를 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 13c는 도 13b에서 상향 스와이프 제스처를 검출한 것에 응답하여 편집 제어부들의 메뉴(5296)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 예를 들어, 일차 디스플레이(102)는 도 13b에서 동적 기능 열 상에서의 하향 스와이프를 검출한 것에 응답하여 도움말 제어부들의 메뉴를 디스플레이한다. 도 13c에서, 편집 제어부들의 메뉴(5296)는 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 13b에서, 편집 제어부들의 메뉴(5296)는 실행취소 제어부, 재실행 제어부, 잘라내기 제어부, 복사하기 제어부, 붙여넣기 제어부, 모두 선택 제어부, 찾기 제어부, 폰트 제어부, 및 특수 기호 제어부를 포함한다.
도 13c는, 또한, 도 13b에서 상향 스와이프 제스처를 검출한 것에 응답하여 제2 복수의 어포던스들(5298)을 디스플레이하는 동적 기능 열(104)을 도시한다. 도 13c에서, 제2 복수의 어포던스들(5298)은 일차 디스플레이(102)에 의해 디스플레이된 편집 제어부들의 메뉴(5296)에 나타난 편집 제어부들에 대응한다. 예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는 동적 기능 열(104) 상에서 좌측으로부터 우측으로의 스와이프 제스처를 수행함으로써 동적 기능 열(104) 상에서 복수의 어포던스들(5298)(예컨대, 특수 기호 어포던스(5289-I))의 밸런스를 볼 수 있다.
도 14a는, 특정된 물리적 키(예컨대, 기능 키) 또는 동적 기능 열(104)에 의해 디스플레이된 현재 어포던스들을 오버라이드하기 위한 특정된 물리적 키 조합에 대응하는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터 신호를 수신한 것에 응답하여, 지속적 제어부들(예컨대, 어포던스들(516, 534))과 함께, 제1 복수의 어포던스들(5301)을 디스플레이하는 동적 기능 열(104)을 도시한다. 도 14a에서, 동적 기능 열(104)은 제1 복수의 어포던스들(5301)(예컨대, F1 내지 F12에 대응함), 및 동적 기능 열(104) 상에 제1 복수의 어포던스들(5301)을 디스플레이하는 것을 중지하기 위한 나가기 어포던스(5112)를 디스플레이한다. 도 14a에서, 동적 기능 열(104)은, 또한, 제1 복수의 어포던스들(5301)이 4개 세트들 중 제1 세트의 어포던스들이라는 것을 나타내는 내비게이션 지원부(5302)를 디스플레이한다. 예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는 동적 기능 열(104) 상에서 좌측으로부터 우측으로의 또는 우측으로부터 좌측으로의 스와이프 제스처를 수행함으로써 제1 복수의 어포던스들(5301) 내에 추가적인 어포던스들(예컨대, F13,..에 대응함)을 드러내게 할 수 있다. 일부 실시예들에서, 제1 복수의 어포던스들(5301)은 컴퓨팅 시스템의 사용자에 의해 설정된 커스텀화된 심볼 열, 또는 가장 빈번하게 사용되는 심볼들 및/또는 특수 기호들의 세트를 포함한다.
도 14b는, 특정된 물리적 키(예컨대, 기능 키) 또는 동적 기능 열(104)에 의해 디스플레이된 현재 어포던스들을 오버라이드하기 위한 특정된 물리적 키 조합에 대응하는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터 제2 신호를 수신한 것에 응답하여, 지속적 제어부들(예컨대, 어포던스들(516, 534))과 함께, 제2 복수의 어포던스들(5303)을 디스플레이하는 동적 기능 열(104)을 도시한다. 대안으로, 일부 실시예들에서, 동적 기능 열(104)은 도 14a에서 동적 기능 열(104) 상에서의 상향 스와이프 제스처를 검출한 것에 응답하여 제2 복수의 어포던스들(5303)을 디스플레이한다. 도 14b에서, 동적 기능 열(104)은 제2 복수의 어포던스들(5301)(예컨대, `, 1, 2, 3, …에 대응함), 및 동적 기능 열(104) 상에 제2 복수의 어포던스들(5303)을 디스플레이하는 것을 중지하기 위한 나가기 어포던스(5112)를 디스플레이한다. 도 14b에서, 내비게이션 지원부(5302)는 제2 복수의 어포던스들(5302)이 4개 세트들 중 제2 세트의 어포던스들이라는 것을 나타낸다. 예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는 동적 기능 열(104) 상에서 좌측으로부터 우측으로의 또는 우측으로부터 좌측으로의 스와이프 제스처를 수행함으로써 제2 복수의 어포던스들(5302) 내에 추가적인 어포던스들을 드러내게 할 수 있다.
도 14c는, 특정된 물리적 키(예컨대, 기능 키) 또는 동적 기능 열(104)에 의해 디스플레이된 현재 어포던스들을 오버라이드하기 위한 특정된 물리적 키 조합에 대응하는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터 제3 신호를 수신한 것에 응답하여, 지속적 제어부들(예컨대, 어포던스들(516, 534))과 함께, 제3 복수의 어포던스들(5304)을 디스플레이하는 동적 기능 열(104)을 도시한다. 대안으로, 일부 실시예들에서, 동적 기능 열(104)은 도 14b에서 동적 기능 열(104) 상에서의 상향 스와이프 제스처를 검출한 것에 응답하여 제3 복수의 어포던스들(5304)을 디스플레이한다. 도 14c에서, 동적 기능 열(104)은 제3 복수의 어포던스들(5304)(예컨대, ~, !, @, #, …에 대응함), 및 동적 기능 열(104) 상에 제3 복수의 어포던스들(5304)을 디스플레이하는 것을 중지하기 위한 나가기 어포던스(5112)를 디스플레이한다. 도 14c에서, 내비게이션 지원부(5302)는 제3 복수의 어포던스들(5302)이 4개 세트들 중 제3 세트의 어포던스들이라는 것을 나타낸다. 예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는 동적 기능 열(104) 상에서 좌측으로부터 우측으로의 또는 우측으로부터 좌측으로의 스와이프 제스처를 수행함으로써 제3 복수의 어포던스들(5304) 내에 추가적인 어포던스들을 드러내게 할 수 있다.
도 14d는, 특정된 물리적 키(예컨대, 기능 키) 또는 동적 기능 열(104)에 의해 디스플레이된 현재 어포던스들을 오버라이드하기 위한 특정된 물리적 키 조합에 대응하는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터 제4 신호를 수신한 것에 응답하여, 지속적 제어부들(예컨대, 어포던스들(516, 534))과 함께, 제4 복수의 어포던스들(5305)을 디스플레이하는 동적 기능 열(104)을 도시한다. 대안으로, 일부 실시예들에서, 동적 기능 열(104)은 도 14c에서 동적 기능 열(104) 상에서의 상향 스와이프 제스처를 검출한 것에 응답하여 제4 복수의 어포던스들(5305)을 디스플레이한다. 도 14d에서, 동적 기능 열(104)은 제4 복수의 어포던스들(5305)(예컨대, [, ], {, }, …에 대응함), 및 동적 기능 열(104) 상에 제4 복수의 어포던스들(5305)을 디스플레이하는 것을 중지하기 위한 나가기 어포던스(5112)를 디스플레이한다. 도 14d에서, 내비게이션 지원부(5302)는 제4 복수의 어포던스들(5305)이 4개 세트들 중 제4 세트의 어포던스들이라는 것을 나타낸다. 예를 들어, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자는 동적 기능 열(104) 상에서 좌측으로부터 우측으로의 또는 우측으로부터 좌측으로의 스와이프 제스처를 수행함으로써 제4 복수의 어포던스들(5305) 내에 추가적인 어포던스들을 드러내게 할 수 있다. 도 14d는, 추가로, 전력 제어부(534)에 대응하는 위치에서의 접촉(5306)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
도 14e는 도 14d에서 전력 제어부(534)의 선택을 검출한 것에 응답하여 모드 경고(5308)를 디스플레이하는 동적 기능 열(104)을 도시한다. 예를 들어, 모드 경고(5308)는 제4 복수의 기능 어포던스(5305) 상에 오버레이된다. 도 14e에서, 모드 경고(5308)는 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자에게 하기를 포함하는 복수의 옵션들 중 하나의 옵션을 선택할 것을 프롬프트한다: (예컨대, 탭핑 접촉을 통해) 활성화될 때, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)의 사용자 중 현재 사용자가 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)(즉, 도 2a 내지 도 2d의 컴퓨팅 디바이스(202))로부터 로그아웃되게 하는 로그아웃 어포던스(5310); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)(즉, 도 2a 내지 도 2d의 컴퓨팅 디바이스(202))의 재시작을 야기하는 재시작 어포던스(5312); (예컨대, 탭핑 접촉을 통해) 활성화될 때, 휴대용 컴퓨팅 시스템(100) 또는 데스크톱 컴퓨팅 시스템(200)(즉, 도 2a 내지 도 2d의 컴퓨팅 디바이스(202))이 전력차단되게 하는 전력차단 어포던스(5314); 및 (예컨대, 탭핑 접촉을 통해) 활성화될 때, 동적 기능 열(104)이 모드 경고(5308)의 디스플레이를 중지하게 하는 취소하기 어포던스(5316).
일부 실시예들에서, 동적 기능 열(104)(본 명세서에서, "터치 감응형 이차 디스플레이(104)"로도 지칭됨)은 사용자가 일차 디스플레이(102) 상에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성을 용이하게 조작하게 하는 어포던스들로 채워진다. 몇몇 예들이 도 15a 내지 도 15h에 도시되어 있다. 구체적으로, 도 15a는 사용자가 일차 디스플레이(102) 상의 드로잉 애플리케이션과 상호작용하고 있음을 도시한다. 드로잉 애플리케이션 내에서의 편집가능 부분의 선택(예컨대, 사용자는, 커서(504)를 머리 위에 배치하고 입력 디바이스를 사용하여 클릭하거나 누르는 것에 의해, 도시된 스틱 피규어(stick figure)의 머리를 선택함)에 응답하여, 터치 감응형 이차 디스플레이(104)는 편집하기 옵션들을 포함하도록 업데이트된다. 도 15a에 도시된 바와 같이, 사용자가 편집가능 드로잉 객체의 일부분을 선택한 것에 응답하여, 터치 감응형 이차 디스플레이는 선택되었던 편집가능 객체의 타입에 이용가능한 다양한 편집하기 기능들에 각각 대응하는 어포던스들을 포함하도록 업데이트된다(예컨대, 도 24a 내지 도 24n을 참조하여 하기에서 더 상세히 설명되는 바와 같이, 사용자가 그래픽 콘텐츠를 선택하는지 아니면 텍스트 콘텐츠를 선택하는지에 따라 상이한 어포던스들이 디스플레이된다).
일부 실시예들에서, 다양한 편집하기 기능들에 각각 대응하는 어포던스들은 하기를 포함한다: (i) 선택될 때, 터치 감응형 이차 디스플레이가 일반 편집하기 옵션들을 디스플레이하게 하는 일반 편집하기 어포던스(5501); (ii) 선택될 때, 터치 감응형 이차 디스플레이가 하이라이트하기 옵션들을 디스플레이하기 시작하게 하는 하이라이트 스타일 어포던스(5502); 및 (iii) 선택될 때(도 15a에서 선택된 바와 같이 도시됨), 터치 감응형 이차 디스플레이가 일차 디스플레이(102) 상에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성들을 수정하기 위한 옵션들을 디스플레이하기 시작하게 하는 마크업(markup) 어포던스(5503).
일부 실시예들에서, 마크업 어포던스(5503)의 선택에 응답하여, 터치 감응형 이차 디스플레이는 시각적 특성들을 수정하기 위한 옵션들을 디스플레이하기 시작한다. 일부 실시예들에서, 그리고 도 15a에 도시된 바와 같이, 이러한 옵션들은 마크업 어포던스(5503)에 인접하게 디스플레이된다(예컨대, 다양한 편집하기 기능들에 각각 대응하는 어포던스들은 터치 감응형 이차 디스플레이의 제1 영역에서 디스플레이되고, 옵션들은 인접한 제2 영역에서 디스플레이됨). 일부 실시예들에서, 제1 및 제2 영역들은 터치 감응형 이차 디스플레이의 애플리케이션 특정 섹션 내에 포함되고, 다른 어포던스들이 애플리케이션 특정 섹션의 좌측에 보여지고(예컨대, 도 15a에 도시된 "esc" 어포던스) 그리고 우측에 보여진다(예컨대, 명도를 수정하는 것, 컴퓨팅 시스템의 배경에서 미디어 콘텐츠의 재생 및 볼륨을 제어하는 것을 허용하는 어포던스들).
일부 실시예들에서, 색상 선택자(color picker) 어포던스의 선택(예컨대, 도 15a의 5010-A의 선택)을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이는 오버레이 디스플레이 모드를 이용하여 나타나는데, 여기서 색상 선택 옵션들은 터치 감응형 이차 디스플레이(104)의 애플리케이션 특정 부분 중 대부분을 점유하는 것으로 제시된다. 도 15b에 도시된 바와 같이, 색상 선택 객체들은 일차 디스플레이 상에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성(예컨대, 색상)을 수정하기 위한 사용자 인터페이스 제어부(5505)(색상 선택자(5505)로도 지칭됨)에 제시된다. 다른 예시적인 시각적 특성은 틴트(tint), 음영(shade), 및 불투명도를 포함한다.
일부 실시예들에서, 사용자가 누르고 유지하기 제스처(예컨대, 사용자가 사용자 인터페이스 제어부(5505)에 보여지는 특정 색상과 접촉하고 임계량 초과의 시간, 예컨대.5, 1, 1.5, 또는 2초 동안 그 접촉을 유지함)를 개시한 경우, 또는 사용자가 특정 색상 위에서 접촉하고 그 접촉의 특성 세기가 세기 임계치를 만족시키는 경우, 터치 감응형 이차 디스플레이에 보여지는 사용자 인터페이스 제어부(5505)는 특정 색상에 대응하는 추가 옵션들을 포함하도록 업데이트된다. 예를 들어, 분홍색 색상의 표현 위의 입력(5010-B)(예컨대, 눌러서 유지하기 입력 또는 세기 임계치를 만족시키는 입력)에 응답하여, 사용자 인터페이스 제어부는 선택을 위해 이용가능한 분홍색의 추가 음영들을 포함하도록 업데이트된다. 도 15c 및 도 15d에 도시된 바와 같이, 입력(5010-B)에 응답하여, 분홍색의 추가 음영들이 터치 감응형 이차 디스플레이 내에서의 선택을 위해 제시되고, 일차 디스플레이(102) 상의 드로잉 애플리케이션 내에서의 편집가능 객체의 머리는 특정 색상을 사용하여 렌더링된다.
일부 실시예들에서, 사용자는 입력(5010-C)을 터치 감응형 이차 디스플레이 상의 분홍색의 추가 음영들의 표현들을 가로질러 슬라이딩시킬 수 있고, 이에 응답하여, 일차 디스플레이(102) 상에 보여지는 편집가능 객체의 머리는 분홍색의 각각의 접촉된 음영을 사용하여 렌더링된다. 도 15d에 도시된 바와 같이, 사용자는 입력(5010-C)을 이용하여 분홍색의 상이한 음영과 접촉하고, 이에 응답하여, 일차 디스플레이(102)는 분홍색의 상이한 음영을 사용하여 콘텐츠를 렌더링한다. 일부 실시예들에서, 입력들(5010-A, 5010-B, 5010-C)은 하나의 연속 입력에 대응하고, 이러한 방식으로, 사용자들은 특정 시각적 특성에 대한 다양한 값들을 선택한 후에 객체들이 어떻게 보일 것인지를 빠르고 효율적으로 미리보기할 수 있다.
일부 실시예들에서, 사용자 인터페이스 제어부(5505)는 특정 시각적 특성에 대해 기본 수정 기능과 고급 수정 기능 사이에서 선택하는 것을 허용하는 적어도 2개의 디스플레이 모드들을 갖는다. 일부 실시예들에서, 사용자들은 모드 전환 어포던스(5506)를 선택함으로써 이들 적어도 2개의 디스플레이 모드들 사이에서 토글링할 수 있다. 예를 들어, 도 15b에 도시된 입력(5003)에 응답하여, 색상 선택자(5505)는 도 15e에 도시된 바와 같이 (도 15b 및 도 15c에 도시된 기본 디스플레이 모드와는 별개인) 고급 디스플레이 모드에서 보여지고, 모드 전환 어포던스는 색상 선택자(5505)에 대한 기본 모드에 대응하는 상이한 디스플레이 상태에서 보여진다. 일부 실시예들에서, 고급 디스플레이 모드는, 또한, 다른 시각적 특성들을 수정하는 것을 허용하는 사용자 인터페이스 제어부들을 디스플레이하는 것을 포함한다(예들이 틴트, 음영, 및 불투명도에 대해 도 15f 내지 도 15h에 각각 도시되어 있다). 일부 실시예들에서, 사용자는 개개의 사용자 인터페이스 제어부들 중 임의의 사용자 인터페이스 제어부를 선택할 수 있고, 이어서, 개개의 사용자 인터페이스 제어부를 가로질러 슬라이딩하여 일차 디스플레이(102)가 선택된 객체가 어떻게 보일지의 미리보기를 렌더링하기 시작하게 할 수 있다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)의 애플리케이션 특정 섹션은, 사용자가 새로운 애플리케이션을 열 때(예컨대, 도 15a 내지 도 15d에 도시된 콘텐츠 편집 애플리케이션으로부터 스위칭함), 상이한 어포던스들을 포함하도록 변화한다. 도 16a 내지 도 16m에 도시된 바와 같이, 터치 감응형 이차 디스플레이(104)는 사용자들이 웹 콘텐츠를 통해 신속하고 효율적으로 내비게이팅하게 하고 터치 감응형 이차 디스플레이(104)로부터 직접 브라우저 특정 기능들을 수행하게 하는 어포던스들을 포함한다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)의 애플리케이션 특정 섹션은 일차 디스플레이(102) 상의 웹 브라우저에 보여지는 탭들에 대응하는 탭들의 표현들을 디스플레이한다. 도 16a는 터치 감응형 이차 디스플레이(104)에 도시된 예시적인 어포던스들을 도시하지만, 웹 브라우저가 하나의 탭만을 포함한다. 웹 브라우저가 하나 초과의 탭을 포함한다는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 탭들 각각에 대응하는 표현들을 포함하도록 업데이트된다(예컨대, 도 16b, 도 16c 및 도 16f 내지 도 16l에서 2개 내지 10개의 탭들에 대한 예들이 각각 도시됨). 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 사전정의된 수의 탭들(예컨대, 도 16m에 도시된 예에서 보여지는 바와 같이, 최대 15개의 탭들)에 대한 표현들을 디스플레이하도록 구성된다.
터치 감응형 이차 디스플레이(104) 내에 각각의 탭들의 표현들을 직접적으로 제공함으로써, 사용자들은 (예컨대, 트랙패드를 사용하여, 또는 복잡한 시퀀스의 키보드 입력들을 사용하여, 탭들을 순환시켜야 하는 것 대신에) 탭들을 통해 매우 신속하게 내비게이팅할 수 있다. 일부 실시예들에서, 사용자는 일차 디스플레이(102) 상에 보여지는 각각의 탭들 사이에서의 빠른 내비게이션을 허용하는 단일 제스처를 터치 감응형 이차 디스플레이(104)에 제공할 수 있다. 터치 감응형 이차 디스플레이(104)에 보여진 어포던스들을 사용하는 웹 콘텐츠의 3개의 상이한 탭들 사이에서의 그러한 빠른 내비게이션의 일례가 도 16c 내지 도 16e에 도시되어 있다. 도 16a 내지 도 16m에 관한 추가 세부사항들이 방법(1100) 및 도 49를 참조하여 하기에 제공된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이에서 보여지는 표현들은 일차 디스플레이(102) 상의 웹 브라우저 내의 대응하는 탭과 연관된 콘텐츠의 축소된/미니 뷰(예컨대, 도 12h에 도시된 바와 같이, 개개의 탭들의 표현들 각각은 대응하는 탭에 대한 웹 콘텐츠의 미니 뷰를 포함함)를 보여준다. 일부 실시예들에서, 적절한 표현들이, 또한, 터치 감응형 이차 디스플레이에서, 비어 있는 탭(도 16n), 상부 사이트 탭(도 16o), 및 즐겨찾기 탭(도 16p)에 대해 보여진다.
일부 실시예들에서, 사용자들은 터치 감응형 이차 디스플레이(104)에 보여진 어포던스들을 사용하여 일차 디스플레이(102) 상에 디스플레이되는 즐겨찾는 사이트들의 계층구조를 통해 내비게이팅할 수 있다. 예를 들어, 도 16q는 하나 이상의 즐겨찾는 사이트들에 각각 대응하는 어포던스들을 갖는 터치 감응형 이차 디스플레이(104)를 도시한다. 이들 어포던스들 중 하나의 어포던스의 선택(예컨대, 입력(5013)이 도 16q의 즐겨찾기의 폴더 "News & Media"를 선택함)에 응답하여, 일차 디스플레이(102)는 터치 감응형 이차 디스플레이(104)와 같이 (예컨대, 도 16r에 도시된 바와 같이, 폴더 내에 포함된 즐겨찾는 사이트들의 표현들을 포함하도록) 업데이트된다.
일차 디스플레이(102) 상에 보여지는 즐겨찾는 사이트들 중 하나 이상의 사이트들이 동일한 기본 도메인(예컨대, URL)으로부터의 것이라는 판정에 따라, 터치 감응형 이차 디스플레이는 하나 이상의 즐겨찾는 사이트들에 관한 추가 세부사항들을 포함한다. 예를 들어, "Design Milk" 및 "Dwell" 즐겨찾기는 양측 모두가 "twitter.com" 도메인으로부터의 것이며, 이와 같이, 터치 감응형 이차 디스플레이(104)는 추가 세부사항들(예컨대, 도 16s에 도시된 바와 같이, TWITTER에 대한 아이콘뿐 아니라 트위터 핸들(TWITTER handle))을 포함한다. 도 16s 및 도 16t는, 또한, 터치 감응형 이차 디스플레이(104)가 일차 디스플레이(102)를 통해 수신된 입력들에 응답하여 업데이트되는 것을 도시한다. 예를 들어, 입력(5014)이 URL 바를 선택한 것 및 사용자가 URL 바에 일부 텍스트를 타이핑해 넣는 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 텍스트 완성 옵션들(예컨대, 도 16t에 도시된 바와 같이, 도메인 네임을 타이핑하는 동안 사용자를 돕기 위한 ".com", ".net", ".org" 등)을 포함하도록 업데이트된다.
도 17a 내지 도 17g는 터치 감응형 이차 디스플레이(104)를 통해 사용자에게 콘텐츠(예컨대, 다양한 양식 요소들을 완성하기 위한 콘텐츠) 및 액션들(예컨대, 대금을 결제하기 위한 액션)을 제안하는 예들을 제공한다. 도 17a에 도시된 바와 같이, 사용자가 일차 디스플레이(102) 상에 양식 입력 요소들을 포함하는 웹 페이지와 상호작용하는 동안, 터치 감응형 이차 디스플레이(104)는 양식 요소들을 완성하는 데 사용하기 위한 제안 콘텐츠를 포함하도록 업데이트된다. 예를 들어, 사용자에게는 "Home" 또는 "Work" 어드레스 정보 중 어느 하나를 자동 완성하기 위한 어포던스들이 제공된다(도 17a). 다른 예로서, 초기 양식 요소를 완성하고 결제 입력 페이지로 내비게이팅한 후에, 터치 감응형 이차 디스플레이(104)는 (도 17b에 도시된 바와 같은) 저장된 신용 카드 세부사항들에 대응하는 어포던스들을 포함하도록 업데이트된다(터치 감응형 이차 디스플레이(104)에서의 특정 어포던스의 선택 시, 일차 디스플레이(102)는 특정 어포던스에 대응하는 저장된 신용 카드 세부사항들을 포함하도록 업데이트됨). 다른 비제한적인 예는 제안된 또는 저장된 패스워드를 입력하기 위한 어포던스를 제공하는 것이다(도 17f 및 도 17g).
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, (도 17c 내지 도 17e에 도시된 바와 같이) 사용자가 인증된 지문을 제공한 후에 대금을 전송하기 위한 어포던스들을 포함한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, 미디어 플레이어 애플리케이션을 통해 이용가능한 오디오 레코딩, 비디오 레코딩, 및 스크린 레코딩 기능들에 대응하는 어포던스들을 디스플레이한다. 일부 예들이 도 18a 내지 도 18i에 도시되어 있다. 도 18a에 도시된 바와 같이, 사용자가 일차 디스플레이(102) 상에서 오디오 레코딩 다이얼로그를 여는 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 오디오 레코딩을 시작하기 위한 어포던스(5061) 및 오디오 옵션들을 구성하기 위한 선택적 어포던스(5060)를 포함하도록 업데이트된다.
일부 실시예들에서, 어포던스(5060)의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 각각의 이용가능한 오디오 입력에 대한 선택가능한 옵션들(예컨대, 도 18b에 도시된 바와 같이, "Built-in Audio"에 대한 옵션 및 "Neumann KMS"에 대한 다른 옵션)을 포함하도록 업데이트된다. 일부 실시예들에서, 선택가능한 옵션들은 터치 감응형 이차 디스플레이(104) 내의 오버레이 디스플레이 모드에서 디스플레이되고, 터치 감응형 이차 디스플레이(104)의 좌측에 보여진 "x" 아이콘의 선택에 응답하여, 오버레이 디스플레이 모드는 종료되고, 터치 감응형 이차 디스플레이(104)가 도 18a에 도시된 바와 같이 다시 나타난다.
이제 도 18c를 참조하면, 사용자가 일차 디스플레이(102) 상의 스크린 레코딩 다이얼로그를 여는 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 스크린 레코딩을 시작하기 위한 제1 어포던스 및 오디오 옵션들을 구성하기 위한 선택적인 제2 어포던스를 포함하도록 업데이트된다. 제2 어포던스의 선택을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 오디오 옵션들을 제시하도록 업데이트된다. 일부 실시예들에서, 제1 어포던스의 선택을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 레코딩 옵션들(레코딩할 스크린을 선택하기 위한 옵션들을 포함함 - 도 18e)을 제시하도록 업데이트되고, 사용자가 레코딩 옵션들로부터 선택한 후, 스크린 레코딩은 개시되고, 일차 디스플레이(102)는 스크린 레코딩이 시작되었음을 나타내도록 업데이트된다. 다른 실시예들에서, 스크린 레코딩은 제1 어포던스의 선택 직후에 시작된다.
도 18f 및 도 18g는 사용자가 비디오 레코딩 다이얼로그를 여는 것에 응답하여 터치 감응형 이차 디스플레이(104)에서 보여지는 예시적인 어포던스들을 도시한다. 일부 실시예들에서, 사용자는 (도 18g에 도시된 바와 같이) 카메라 옵션들 및 오디오 입력 옵션들과 같은 레코딩 옵션들을 신속하게 구성하기 위해 (그리고, 이러한 옵션들을 찾아내기 위해 복잡한 메뉴 계층구조들을 내비게이팅할 필요 없이) 이러한 어포던스들을 활용할 수 있다.
일부 실시예들에서, 사용자가 오디오, 비디오, 또는 스크린 콘텐츠를 레코딩하기 시작하고 사용자가 미디어 애플리케이션을 나가는 경우, 터치 감응형 이차 디스플레이(104)는 진행 중인 레코딩을 제어하는 것을 허용하는 사용자 인터페이스 제어부들 및 상태 표시자들(예컨대, 진행 중인 레코딩을 위한 파일 크기)을 포함하도록 업데이트된다(도 18h). 일부 실시예들에서, 사용자가 레코딩을 시작하고, 웹 브라우저 애플리케이션을 엶으로써 미디어 애플리케이션을 종료하고, 이어서 도 18h에 도시된 "x" 아이콘(예컨대, 입력(5800))을 선택하는 경우, 이에 응답하여, 터치 감응형 이차 디스플레이(104)는 웹 브라우저에 대응하는 어포던스들을 포함하도록 업데이트되고, (예컨대, 도 18i에 도시된 바와 같이) 진행 중인 레코딩에 대응하는 레코딩 상태 표시자(5801)가 터치 감응형 이차 디스플레이(104)에 제공된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)에 제시된 제어부들 및/또는 어포던스들은, 또한, 미디어 아이템을 재생하는 동안, 유용한 기능들에 대한 빠르고 용이한 액세스를 제공하는 것을 돕는다. 유용한 기능들의 일부 예들은 미디어 아이템을 탐색하는 것, 서브타이틀 및 오디오 구성 옵션들을 선택하는 것, 및/또는 미디어 아이템을 트리밍하는 것을 포함한다(유용한 기능들을 수행하기 위해 터치 감응형 이차 디스플레이(104)에 보여진 예시적인 사용자 인터페이스들이 도 19a 내지 도 19k에 제공됨).
도 19a에 도시된 바와 같이, 일차 디스플레이(102)가 미디어 아이템을 디스플레이하는 동안, 터치 감응형 이차 디스플레이(104)는 미디어 아이템의 부분들의 표현들을 포함한다. 일부 실시예들에서, 사용자들은 미디어 아이템을 통해 빠르게 내비게이팅하기 위해 입력을 제공할 수 있다. 예를 들어, 터치 감응형 이차 디스플레이(104)를 가로지르는 실질적으로 우측 방향으로의 입력(5015-A) 및 입력(5015-A)의 이동에 응답하여, 일차 디스플레이는 미디어 아이템을 탐색하도록 업데이트된다(예컨대, 도 19a의 장면 #1A에 대응하는 콘텐츠를 보여주는 것으로부터 도 19b의 장면 #4A에 대응하는 콘텐츠를 보여주는 것으로 진행함). 터치 감응형 이차 디스플레이(104)는, 또한, 입력(5015-A)의 이동에 따른 미디어 아이템의 부분들의 표현들을 탐색한다. 도 19b에 도시된 바와 같이, 입력(5015-A)이 시간 기반 또는 세기 기반 임계치를 만족시킨다는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 입력(5015-A)에 의해 현재 접촉된 표현들 중 하나에 대한 줌인 뷰를 제공한다.
일부 실시예들에서, 미디어 아이템의 부분들의 표현들은 미디어 아이템의 타입에 대응한다. 예를 들어, 미디어 아이템이 제1 타입의 것(예컨대, 저장된 비디오 콘텐츠 또는 썸네일들이 사용가능한 다른 비디오 콘텐츠)이라는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 미디어 아이템 내의 특정 프레임들의 썸네일 표현들을 포함한다. 미디어 아이템이 제2 타입의 것(예컨대, 썸네일 미리보기들이 이용가능하지 않은 스트리밍 비디오 콘텐츠)이라는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 (도 16r에 도시된 바와 같은) 썸네일 표현들을 포함하지 않는다. 미디어 아이템이 제3 타입의 것(예컨대, 라이브 비디오 콘텐츠)이라는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 (도 19h에 도시된 바와 같은) 썸네일 표현들을 포함하지 않는다. 미디어 아이템이 제4 타입의 것(예컨대, 오디오 전용 콘텐츠)이라는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 (예컨대, 도 19i에 도시된 바와 같은) 미디어 아이템을 표현하는 오디오 그래프를 포함한다.
일부 실시예들에서, 서브타이틀들이 (예컨대, 미디어 콘텐츠 제공자 또는 다른 연관된 엔티티를 통해) 사용가능하다는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 (도 19f 및 도 19g에 도시된 바와 같은) 오디오 구성 어포던스(5805)를 포함한다. 오디오 구성 어포던스(5805)의 선택을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이는 미디어 아이템에 대한 이용가능한 서브타이틀 및 오디오 구성 옵션들을 디스플레이하도록 업데이트된다(예컨대, 예들이 도 19c 및 도 19d에 도시되어 있다).
일부 실시예들에서, 상기에 논의된 미디어 아이템은, 또한, 편집가능하고, 터치 감응형 이차 디스플레이(104)는 (예컨대, 도 19j 및 도 19k에 도시된 바와 같이, 미디어 아이템을 트리밍하기 위해) 미디어 아이템을 수정하는 것을 허용하는 사용자 인터페이스 제어부들을 포함한다.
이제 도 20a 내지 도 20g를 참조하면, 터치 감응형 이차 디스플레이(104)가 더 빠른 데이터 입력, 및 특히 리마인더들(또는 다른 타입들의 애플리케이션들에 대한 다른 객체 타입들)의 더 빠른 생성을 돕는 데 사용되는 예시적인 사용자 인터페이스들이 제시되어 있다. 일부 실시예들에서, 사용자가 리마인더 애플리케이션을 연 것에 응답하여, 터치 감응형 이차 디스플레이(104)는, (예컨대, 도 20a의 입력(5016)을 이용하여) 선택될 때, 새로운 리마인더(또는 다른 타입들의 애플리케이션들에 대한 일부 다른 새로운 콘텐츠 아이템)의 생성을 야기하는 새로운 객체 어포던스를 포함하도록 채워진다.
입력(5016)을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 비활성 상태의 새로운 객체 어포던스를 디스플레이하고(즉, 새로운 객체 어포던스는 그레이아웃되고 선택가능하지 않음), 리마인더 완성 어포던스(예컨대, 선택될 때, 터치 감응형 이차 디스플레이(104)와 통신하는 컴퓨팅 디바이스가 일차 디스플레이(102) 상의 현재 선택된 리마인더를 완성된 것으로 마킹하게 하는 체크마크 아이콘), 리마인더 세부사항 어포던스(예컨대, 선택될 때, 컴퓨팅 디바이스가 현재 선택된 리마인더와 연관된 세부사항들을 편집하기 위한 옵션들을 디스플레이하게 하는 원내에 포함된 i), 및 현재 선택된 리마인더에 텍스트를 추가하기 위한 텍스트 입력 옵션들을 디스플레이한다. 일부 실시예들에서, 리마인더 완성 어포던스 및 리마인더 세부사항 어포던스는 사용자가 현재 선택된 리마인더에 대한 제목을 제공할 때까지 초기에는 비활성 상태로 보여진다. 도 20c에 도시된 바와 같이, 사용자가 제목을 제공했다는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 새로운 객체 어포던스, 리마인더 완성 어포던스, 및 리마인더 세부사항 어포던스를 활성의 선택가능한 상태들로 디스플레이한다. 도 20c는, 또한, 사용자가 추가 텍스트를 제공함에 따라 텍스트 입력 옵션들이 변경되는 것을 도시한다(예컨대, 새로운 텍스트 입력 옵션들은 사용자에 의해 이전에 입력된 텍스트에 적어도 부분적으로 기초하여 선택됨).
리마인더 세부사항 어포던스(예컨대, 입력(5017))에서의 입력에 응답하여, 터치 감응형 이차 디스플레이(104)는, 이전에 보여진 텍스트 입력 옵션들 대신에, "Add Time" 어포던스 및 "Add Location" 어포던스(도 20d)를 포함하도록 채워진다.
"Add Time" 어포던스에서 입력(5018)을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 일차 디스플레이(102) 상의 현재 선택된 리마인더에 대한 날짜 및 시간을 선택하기 위한 옵션들을 포함하도록 채워진다. 도 20e 및 도 20f에 도시된 바와 같이, 사용자가 이러한 옵션들을 수정함에 따라, 일차 디스플레이(102) 상에 보여지는 리마인더 애플리케이션에 대한 사용자 인터페이스는 그에 따라 (예컨대, 사용자가 리마인더 시간을 1 PM으로부터 1:45 PM으로 수정했음을 반영하도록) 업데이트된다.
일부 실시예들에서, 날짜 어포던스(예컨대, 도 20e에서 "Jun 25"를 보여줌)에서의 제스처(예컨대,.5 내지 1.5초와 같은 사전결정된 양 초과의 시간 동안 터치 감응형 이차 디스플레이(104)와 접촉한 상태로 유지되는 누르고 유지하기 제스처)에 응답하여, 터치 감응형 이차 디스플레이는 새로운 데이터를 선택하는 것을 허용하는 제어부를 포함하도록 업데이트된다. 일부 실시예들에서, 새로운 날짜를 선택하는 것을 허용하는 제어부가 나타나고, 제스처가 터치 감응형 이차 디스플레이와 접촉하는 지점으로부터 밖으로 연장된다. 일부 실시예들에서, 이어서, 사용자는 제스처를 제어부 위에서 슬라이딩할 수 있고, 리마인더와 함께 사용하기 위한 새로운 날짜를 선택할 수 있다. 일부 실시예들에서, 제어부를 디스플레이하는 것과 결합하여, 도 20e에 도시된 시간 슬라이드는 선택된 시간 범위만이 보여지는 더 작은 디스플레이 크기로 감소된다.
"Add Location" 어포던스 위에서의 입력(5019)을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 20g에 도시된 바와 같이) 위치 선택 옵션들을 포함하도록 채워진다. 도 20g에 도시된 바와 같이, 위치 선택 옵션들 중 하나의 옵션(예컨대, 입력(5020)을 사용하는 "Home" 옵션)의 선택에 응답하여, 일차 디스플레이(102)는 그에 따라 (예컨대, 선택된 위치에 대응하는 주소 및 지도 표현을 포함하도록) 업데이트된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 데스크톱 관리 애플리케이션(예컨대, "FINDER" 애플리케이션)을 통해 이용가능한 기능들에 액세스하는 것을 허용하는 어포던스들을 포함하도록 채워진다. 도 21a 내지 도 21j는, 선택될 때, 터치 감응형 이차 디스플레이(104)와 통신하는 컴퓨팅 디바이스가 (파일들을 검색하는 것, 파일명들 및 다른 특성들을 수정하는 것, 파일들을 공유하거나 포스팅하거나 이동시키는 것, 및 파일들을 삭제하는 것을 포함하는) 다양한 파일 관리 기능들을 수행하게 하는, 터치 감응형 이차 디스플레이(104)에 보여지는 예시적인 어포던스들을 도시한다.
일부 실시예들에서, 사용자가 초기에 데스크톱 관리 애플리케이션에 액세스할 때, 터치 감응형 이차 디스플레이(104)는, 도 21a에 도시된 바와 같이, 데스크톱 관리 애플리케이션에 대한 어떠한 애플리케이션 특정 어포던스들도 디스플레이하지 않는다(다른 실시예들에서, 터치 감응형 이차 디스플레이(104)는 즐겨찾는 폴더들에 액세스하기 위한 옵션들을 포함할 수 있음). 일차 디스플레이(102) 상의 새로운 윈도우(예컨대, 도 21b의 "All My Files" 윈도우)를 연 것에 응답하여, 그리고 새로운 윈도우 내에 보여진 파일을 선택하기 전, 터치 감응형 이차 디스플레이(104)는 다양한 폴더들, 내부 디스크 드라이브들, 탈착식/외장 디스크 드라이브들 등을 통해 내비게이팅하기 위한 어포던스들을 포함하도록 채워진다. 예를 들어, 도 21b에 도시된 바와 같이, 터치 감응형 이차 디스플레이(104)는 추가 어포던스들을 드러내기 위해 우측으로부터 좌측으로의 스와이프 제스처를 수행함으로써, "iCloud Drive", "Home", "Applications", "Documents", "Desktop" 등으로 내비게이팅하기 위한 어포던스들을 포함한다.
일부 실시예들에서, 보여진 새로운 윈도우 내에 디스플레이되는 개개의 파일의 선택(예컨대, 도 21c의 "read-only file"의 선택, 또는 도 21d의 일부 다른 파일의 선택)에 응답하여, 터치 감응형 이차 디스플레이는 개개의 파일과 상호작용하기 위한 옵션들을 포함하도록 업데이트된다. 일부 실시예들에서, 개개의 파일이 판독 전용 파일이라는 판정에 따라, 터치 감응형 이차 디스플레이(104)에 제시된 옵션들 중 일부가 비활성 디스플레이 모드에서 보여진다(예컨대, "New Folder with Selection", "Add Tags", 및 "Move To" 옵션들이 도 21c에서 그레이아웃됨). 일부 실시예들에서, 개개의 파일이 판독 전용 파일이 아니라는 판정에 따라, 모든 옵션들이 (예컨대, 도 21d에 도시된 바와 같이) 활성 디스플레이 모드에서 제시된다.
일부 실시예들에서, 옵션들 중 어느 하나의 옵션의 선택에 응답하여(예컨대, 입력들(5021, 5022, 5023) 중 어느 하나의 입력에 응답하여), 터치 감응형 이차 디스플레이(104)는 업데이트된다. 예를 들어, 입력(5021)에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 21e에 도시된 바와 같이) 개개의 파일을 태깅하기 위한 옵션들을 포함하도록 업데이트되고; 입력(5022)에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 21f에 도시된 바와 같이) 개개의 파일을 이동시키기 위한 옵션들을 포함하도록 업데이트되고; 입력(5023)에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 21g에 도시된 바와 같이) 개개의 파일을 공유하기 위한 옵션들을 포함하도록 업데이트된다.
일부 실시예들에서 (그리고 도 21g에 도시된 바와 같이), 개개의 파일을 공유하기 위한 옵션들은 메일 애플리케이션을 통해 개개의 파일을 전송하는 것, 단거리 통신 프로토콜(예컨대, AIRDROP)을 통해 개개의 파일을 전송하는 것, 및/또는 하나 이상의 소셜 네트워킹 애플리케이션들(예컨대, TWITTER, FACEBOOK, INSTAGRAM 등)을 통해 개개의 파일을 포스팅하는 것을 포함한다. 사용자가 도 21g에 도시된 공유하기/전송하기/포스팅하기 옵션들 중 하나를 선택한 후, 일차 디스플레이(102)는 적절한 애플리케이션을 디스플레이하도록 업데이트되고, 터치 감응형 이차 디스플레이(104)는 하위 레벨 공유하기 옵션들을 디스플레이하도록 업데이트된다. 예를 들어, 입력(5025)(도 21g)에 응답하여, 일차 디스플레이(102)는 적절한 애플리케이션(예컨대, TWITTER 애플리케이션, 포스팅될 개개의 파일의 표현을 포함함)을 디스플레이하도록 업데이트되고, 터치 감응형 이차 디스플레이(104)는 포스트에 텍스트를 추가하기 위한 텍스트 입력 옵션들, 및 선택될 때 개개의 파일 및 임의의 추가된 텍스트를 포스팅하는 버튼을 디스플레이하도록 업데이트된다.
다른 예로서, 입력(5024-A)(도 21g)에 응답하여, 터치 감응형 이차 디스플레이(104)는 개개의 파일이 전송되어야 하는 디바이스를 선택하기 위한 하위 레벨 공유하기 옵션들을 포함하도록 업데이트된다(예컨대, 도 21i에 도시된 바와 같이, 터치 감응형 이차 디스플레이는 개개의 파일이 전송될 수 있는 복수의 인근 디바이스들 각각에 대한 어포던스들을 포함함). 입력(5024-B)에 응답하여, 컴퓨팅 디바이스는 개개의 파일의 전송을 개시하고, 터치 감응형 이차 디스플레이(104)는 전송의 진행을 반영하는 상태 표시자(5092)를 포함하도록 업데이트된다(도 21j).
도 22a 내지 도 22c는 (예컨대, 계층구조 메뉴로부터 휴지통 비우기 기능들을 찾아내고 이어서 선택하기 위해 내비게이팅해야 하는 것 대신) 터치 감응형 이차 디스플레이(104)를 사용하여 휴지통 비우기 기능들에 더 빠르게 액세스하는 예들을 도시하고, 이러한 기능들은 단일 입력을 사용한 선택을 위해 터치 감응형 이차 디스플레이(104)에 디스플레이된다. 일부 실시예들에서, 어떠한 파일도 선택되지 않을 때 "Trash"에 대한 윈도우를 보는 동안, 터치 감응형 이차 디스플레이(104)는, 선택될 때, 컴퓨팅 시스템이 전체 휴지통을 비우게 하는 어포던스(예컨대, 도 22a의 "Empty Trash" 어포던스)를 포함한다. 일부 실시예들에서 (그리고 도 22b에 도시된 바와 같이), 파일이 선택될 때 "Trash"에 대한 윈도우를 보는 동안, 터치 감응형 이차 디스플레이(104)는, 선택될 때, 컴퓨팅 시스템이 전체 휴지통을 비우게 하는 어포던스(예컨대, "Delete All" 어포던스), 선택된 파일만을 삭제하게 하는 어포던스(예컨대, "Delete Selection" 어포던스), 또는 휴지통으로부터 선택된 파일을 제거하게 하는 어포던스(예컨대, "Put Back" 어포던스)를 포함한다. 도 22c는 터치 감응형 이차 디스플레이(104)가, 또한, "Delete All" 또는 "Empty Trash" 어포던스들의 선택에 응답하여, 일차 디스플레이(102) 상의 모드 다이얼로그로부터 제어부들을 디스플레이하여, 이에 따라, 사용자가 단지 터치 감응형 이차 디스플레이(104)에만 입력들을 제공함으로써 휴지통 비우기 기능을 빠르고 용이하게 완료하는 것을 허용할 수 있는 것을 도시한다.
일부 실시예들에서, 휴지통 윈도우를 보는 동안 또는 일부 다른 윈도우(예컨대, All My Files 윈도우)를 보는 동안, 사용자는 검색 박스를 선택함으로써 모든 파일들을 검색하기 시작할 수 있다. 검색 박스의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 검색 옵션들(예컨대, 검색이 수행되어야 하는 디렉토리 또는 폴더를 선택하기 위한 옵션들(도 23a), 또는 "Fiename"에 의해 검색할지 아니면 "Everything"에 의해 검색할지를 선택하기 위한 옵션들(도 23b))을 포함하도록 업데이트된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 문서 편집하기 기능들에 신속하게 액세스하는 것을 허용하는 어포던스들을 포함하도록 채워진다(몇몇 예들이 도 24a 내지 도 24n에 제공된다).
특히, 도 24a에 도시된 바와 같이, 사용자가 문서 편집 애플리케이션(예컨대, 워드 프로세싱 애플리케이션)을 연 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 문서 편집하기 기능들을 수행하기 위한 어포던스들의 세트를 포함하도록 채워진다. 일부 실시예들에서, 어포던스들의 세트는 제1 어포던스(5501)(예컨대, 일반 편집하기 어포던스(5501)), 제2 어포던스(5502)(예컨대, 하이라이트 스타일 어포던스(5502)), 및 제3 어포던스(5503)(예컨대, 마크업 어포던스(5503))를 포함한다. 일부 실시예들에서, 제1, 제2, 및 제3 어포던스들 각각은 사용자 입력 이후에 디스플레이되는 추가 어포던스들과 연관된다. 예를 들어, 제1 어포던스(5501)의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 제1 어포던스와 연관된 추가 어포던스들을 포함하도록 업데이트된다(도 24a).
도 24a에 도시된 바와 같이, 제1 어포던스와 연관된 추가 어포던스들은, (i) 선택될 때, 일차 디스플레이(102) 상의 선택된 객체가 반시계 방향으로 90도 회전되게 하는 반시계 방향 회전 어포던스; (ii) 선택될 때, 일차 디스플레이(102) 상의 선택된 객체가 시계 방향으로 90도 회전되게 하는 시계 방향 회전 어포던스; (iii) 선택될 때, 일차 디스플레이(102) 상의 직사각형 선택 툴의 사용을 허용하는 직사각형 선택 툴; (iv) 선택적인 텍스트 옵션 어포던스; 및 (v) 선택될 때, 일차 디스플레이(102) 상에 디스플레이된 객체의 선택된 부분의 크로핑을 야기하는 크로핑 어포던스를 포함한다. 도 24a는, 또한, (예컨대, 입력(5027)을 통한) 터치 감응형 이차 디스플레이(104)로부터의 직사각형 선택 툴의 선택을 도시한다.
도 24b에서, 사용자는 일차 디스플레이(102) 상에서 디스플레이된 문서의 일부분을 선택했고, 또한 (예컨대, 입력(5028)을 통해) 터치 감응형 이차 디스플레이(104)로부터 하이라이트 스타일 어포던스(5502)를 선택한다. 하이라이트 스타일 어포던스(5502)의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 하이라이트 스타일 어포던스와 연관되는, 다양한 색상들로 하이라이트하기 위한 5개의 상이한 어포던스들, 밑줄 어포던스, 및 취소선(strikethrough) 어포던스를 포함한 추가 어포던스들을 포함하도록 업데이트된다(도 24c).
도 24c는, 또한, (예컨대, 입력(5029)을 통한) 마크업 어포던스(5503)의 사용자 선택을 도시하고, 이에 응답하여, 터치 감응형 이차 디스플레이(104)는 마크업 어포던스(5503)와 연관된 디폴트 어포던스들(예컨대, 마크업 어포던스(5503)에 인접한, 도 19k에 도시된 것들)을 포함하도록 업데이트된다. 일부 실시예들에서, 디폴트 어포던스들은 일차 디스플레이(102)가 이미지 콘텐츠를 포함하는 경우에 디스플레이되는 하나 이상의 선택적 어포던스들(5030)을 포함한다. 일부 실시예들에서, 사용자가 일차 디스플레이(102) 상의 객체들을 선택함에 따라, 디폴트 어포던스들은 일차 디스플레이(102) 상에서 현재 선택된 객체의 타입(예컨대, 그래픽 또는 텍스트 객체)에 기초하여 선택되는 추가 어포던스들로 대체된다.
예를 들어, 일차 디스플레이(102) 상에서 현재 선택되는 타입의 객체가 제1 타입의 것이라는 판정에 따라(예컨대, 도 24e에 도시된 "** New Text Object"와 같은 텍스트 객체임), 추가 어포던스들은 도 24e에 도시된 것들을 포함한다. 추가 어포던스들은 일차 디스플레이(102) 상에 선택된 객체를 렌더링하는 데 사용되는 시각적 특성들의 쉽고 빠른 수정을 허용한다(예컨대, 도 24f 및 도 24g에 도시된 바와 같이, 사용자가 색상 선택자에 대한 제어부를 간단히 조정/슬라이딩함으로써 색상 특성을 수정할 수 있음). 일차 디스플레이(102) 상에서 현재 선택되는 타입의 객체가 제2 타입의 것이라는 판정에 따라(예컨대, 도 24g에 도시된 적색 선과 같은 드로잉된 그래픽 객체임), 추가 어포던스들은 도 24g에 도시된 것들을 포함한다.
일부 실시예들에서, 사용자가 (예컨대, 도 24h에서 일차 디스플레이(102) 상에 보여진 문서 편집 애플리케이션과 같은) 애플리케이션을 나가려고 시도하는 경우, 터치 감응형 이차 디스플레이(104)는 모드 저장 다이얼로그와 상호작용하기 위한 옵션들을 포함하도록 업데이트된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, (예컨대, 도 24i에 도시된 바와 같이) 일차 디스플레이(102) 상에 현재 디스플레이되어 있는 문서를 인쇄하라는 요청에 응답하여 인쇄 옵션들을 디스플레이하도록 구성된다.
도 24j 및 도 24k는 선 스타일들을 수정하라는 사용자 요청(예컨대, 도 24j)에 응답하여, 그리고 텍스트 스타일들을 수정하라는 사용자 요청(예컨대, 도 24k)에 응답하여 터치 감응형 이차 디스플레이(104) 상에 디스플레이된 예시적인 어포던스들을 포함한다.
일부 실시예들에서, 문서 편집하기 기능들은 메일 메시지들(예컨대, 이메일들, 텍스트 메시지들 등) 내에 포함된 마크업 객체들에 이용가능하다. 도 24l 내지 도 24n은 터치 감응형 이차 디스플레이(104)가 상기에 논의된 문서 편집하기 기능들 중 일부(특히, 마크업 어포던스(5503)와 연관된 기능들)를 포함하도록 채워지는 예들을 제공한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 잠금해제 동작들을 수행하기 위한 어포던스들을 포함하도록 채워진다. 예를 들어, 도 25a는 잠금된 객체(예컨대, 잠금된 메모 파일 객체)에 액세스하도록 요청하는 입력(5901)을 도시한다. 입력(5901)을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 25a에 도시된 바와 같이) 텍스트 편집 및 텍스트 제안 옵션들을 디스플레이하는 것을 중지하고, 그 대신, 터치 감응형 이차 디스플레이(104)에서 (또는 그에 인접하게) 인가된 지문을 제공함으로써 잠금된 객체가 잠금해제될 수 있다는 명령어(instruction)를 디스플레이한다. 도 25b에 도시된 바와 같이, 터치 감응형 이차 디스플레이(104)는 Notes 애플리케이션에 대한 아이콘, 및 지문이 어디에 제공되어야 하는지를 사용자에게 명령하는 화살표와 함께 "Touch ID to Unlock Note"라는 명령어를 포함한다. 이러한 방식으로, 사용자는 잠재적으로 긴 패스코드를 입력해야 하는 것 대신에 단일 입력(인가된 지문)을 제공함으로써 잠금된 객체를 잠금해제할 수 있다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, (i) 사용자가 (예컨대, 도 26a에 도시된 바와 같은) 로그인 스크린에 액세스하거나 (예컨대, 도 26c에 도시된 바와 같이) 로그인 스크린 또는 다른 어딘가로부터 상이한 사용자에게로 스위칭하려고 시도하는 것; (ii) 사용자가 (예컨대, 도 26b에 도시된 바와 같이) 잠금된 스크린세이버에서 나가는 것; (iii) 사용자가 (예컨대, 도 26d에 도시된 바와 같이) 잠금된 시스템 선호도에 액세스하려고 시도하는 것; 및 (iv) 사용자가 (예컨대, 도 26e에 도시된 바와 같이) 새로운 컴포넌트를 설치하려고 시도하는 것에 응답하여, 잠금해제 기능을 수행하기 위한 명령어들을 포함하도록 채워진다.
일부 실시예들에서, 컴퓨팅 시스템이 적어도 2명의 사용자들과 연관되는 경우(예컨대, 컴퓨팅 시스템이 적어도 2명의 사용자들 각각에 대한 로그인 프로파일들을 갖도록 구성됨), 컴퓨팅 시스템이 초기에 시작될 때, 적어도 2명의 사용자들 중 제1 사용자로서 로그인할지 아니면 제2 사용자로서 로그인할지를 선택하는 것을 허용하는 로그인 스크린이 디스플레이된다. 일부 실시예들에서, 각자의 사용자가 (예컨대, 지문들을 수용하는 터치 감응형 이차 디스플레이(104)의 영역에서) 인가된 지문을 제공했음을 검출한 것에 응답하여, 컴퓨팅 시스템은 인가된 지문을 제1 또는 제2 사용자들 중 하나의 사용자에 매칭시키고, 이어서, 일차 디스플레이(102)가 매칭된 사용자에 특정적인 새로운 로그인 스크린을 보여주게 한다(예컨대, 새로운 로그인 스크린은 각자의 사용자에게 컴퓨팅 시스템에의 액세스를 얻기 위해 패스워드를 입력할 것을 요청함). 이러한 방식으로, 로그인 스크린으로부터 적어도 2명의 사용자들 중 한 명을 선택하기 위해, 각자의 사용자는 트랙패드 또는 마우스를 사용하여 내비게이팅해야 하는 것 대신에 간단히 지문을 제공한다.
일부 실시예들에서, 인가된 지문을 제공하는 것은 각자의 사용자가 컴퓨팅 시스템에의 즉각적인 액세스를 얻을 수 있게 한다. 일부 실시예들에서, 초기 로그인이 이미 수행되었고(예컨대, 초기 로그인 동안, 컴퓨팅 시스템에의 액세스를 얻기 위해 패스워드가 입력됨), 컴퓨팅 시스템은 추후 시점에 잠겨 있다. 사용자가 이어서 그 추후 시점 이후에 액세스를 얻기 위해 인가된 지문을 제공하는 경우, 인가된 지문이 컴퓨팅 시스템의 유효 사용자와 매칭한다는 판정에 따라, 컴퓨팅 시스템에의 즉각적인 액세스가 승인된다. 일부 실시예들에서, 컴퓨팅 시스템이 추후 시점에서 잠금되는 경우, 적어도 2명의 사용자들은 컴퓨팅 시스템에서 활성 로그인 세션들을 갖는다(이들 2명의 사용자들 중 어느 한 명은 컴퓨팅 시스템에의 액세스를 다시 얻기 위해 간단히 지문을 제공할 수 있다). 액세스를 얻고 컴퓨팅 시스템에서의 다른 기능들을 수행하기 위한 생체 측정 센서들의 사용에 관한 추가 세부사항들이 도 66 및 도 67을 참조하여 하기에서 기술되는 방법들(2800, 2900)에 대해 아래에서 제공된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 사진들(또는 다른 미디어 아이템들)을 통해 내비게이팅하기 위한, 사진들을 수정하기 위한, 그리고 사진 편집 또는 사진 브라우징 애플리케이션을 통해 이용가능한 다른 기능들을 수행하기 위한 어포던스들을 포함하도록 채워진다. 일부 예들이 도 27a 내지 도 29t에 도시되어 있다.
구체적으로, 도 27a는, 사용자가 일차 디스플레이(102) 상의 사진 편집 애플리케이션과 연관된 복수의 사진들을 보고 있는 동안, 터치 감응형 이차 디스플레이(104)가 (예컨대, 사진들 중 하나를 즐겨찾는 것으로 플래깅하고/하거나 사진을 회전시키고/시키거나 사진을 편집하기 위해) 복수의 사진들과 상호작용하기 위한 다른 옵션들 중에서 복수의 사진들 개개의 표현들(예컨대, 복수의 사진들 각각의 미니 뷰들(5070-B, 5071-B 등))을 포함하도록 채워진다는 것을 도시한다. 도 27a는 사진 편집 애플리케이션이 "사진 E"를 현재 디스플레이하고 있는 것 및 터치 감응형 이차 디스플레이(104)에서의 사진 E에 대한 개개의 표현(예컨대, 표현(5071-B))이 사진 E가 현재 디스플레이된 사진이라는 표시를 제공하기 위해 더 큰 포맷으로 디스플레이됨을 도시한다.
터치 감응형 이차 디스플레이(104)에서의 입력(예컨대, 탭핑 또는 스와이프 제스처)을 제공함으로써, 사용자는 일차 디스플레이(102) 상의 복수의 사진들을 통해 빠르게 내비게이팅할 수 있다. 예를 들어, 도 27b에 도시된 바와 같이, 사용자는 터치 감응형 이차 디스플레이(104)에서 실질적으로 우측으로부터 좌측으로의 방향으로의 스와이프 제스처(5068)를 제공하고, 이에 응답하여, 일차 디스플레이(102) 및 터치 감응형 이차 디스플레이(104) 양측 모두는 스와이프 제스처(5068)의 이동에 따라 업데이트된다. 스와이프 제스처(5068)가 터치 감응형 이차 디스플레이(104)를 가로질러 이동함에 따라, (도 27b에 도시된 바와 같이) 일차 디스플레이(102) 상에 보여지는 사진들은 터치 감응형 이차 디스플레이(104) 내의 스와이프 제스처(5068)에 의해 어느 표현들이 접촉되는지에 기초하여 업데이트된다.
도 27b는 또한 (예컨대, 입력(5030)을 통한) 터치 감응형 이차 디스플레이(104) 상의 편집 버튼의 선택을 예시한다. 입력(5030)에 응답하여, 터치 감응형 이차 디스플레이(104)는 (예컨대, 도 27c에 도시된 바와 같이) 일차 디스플레이(102) 상에 보여지는 현재 선택된 사진에 대한 사진 편집하기 옵션들을 포함하도록 업데이트된다. 일부 실시예들에서, 각각의 사진 편집하기 옵션의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 (예컨대, 향상 어포던스에 대해 도 27d에 도시된 바와 같이) 그 선택을 반영하도록 업데이트된다.
(예컨대, 도 27e의 입력(5031)을 통한) 툴 내비게이션 어포던스의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 "Crop", "Filters", "Adjust", "Retouch", 및 "Red-eye" 편집하기 기능들을 포함한 추가 편집 툴들을 포함하도록 업데이트된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, 선택될 때 터치 감응형 이차 디스플레이(104)가 오버레이된 콘텐츠를 디스플레이하는 것을 중지하게 하는 "x" 아이콘을 포함한다(예컨대, 도 27g에 도시된 바와 같이, 오버레이된 콘텐츠는 "x" 아이콘의 선택에 응답하여 더 이상 디스플레이되지 않음).
도 27f의 논의로 돌아가면, 사용자는 터치 감응형 이차 디스플레이(104) 상에 보여지는 추가 편집 툴들 중 임의의 것을 선택할 수 있다. 일부 실시예들에서, 선택은 (예컨대, 입력들(5032, 5033, 5034, 5035, 5036) 중 어느 하나의 입력을 사용하여) 추가 편집 툴들 중 하나의 툴을 탭핑함으로써 수행된다. 일부 실시예들에서, 사용자는 툴 내비게이션 어포던스 위에서 입력을 누르고 유지할 수 있고(예컨대, 도 27e의 입력(5031)이 누르고 유지하기 입력임), 이어서, 사용자는 추가 편집 툴들 중 원하는 하나의 편집 툴을 향해 입력(5031)을 슬라이딩한다(예컨대, 입력들(5032 내지 5036)은 선택을 나타내기 위한 입력(5031)의 리프트오프 또는 임의의 추가 누르기 중 어느 하나에 대응함) 도 27h 내지 도 27k는 크롭 툴의 입력(5032) 후에 이용가능한 예시적인 제어부들을 도시한다(일부 실시예들에서, 이러한 제어부들은 물체를 회전시키기 위한 제어부들(도 27h 및 도 27i) 및 객체에 대한 종횡비를 수정하기 위한 제어부들(도 27j 및 도 27k)을 포함함).
이제, 도 27l 및 도 27m을 참조하면, 필터 툴 위에서의 입력(5033)에 응답하여 이용가능한 예시적인 제어부들이 터치 감응형 이차 디스플레이(104)에 보여진다. 입력들(5035, 5036)에 대해, 이러한 입력들에 응답하여 터치 감응형 이차 디스플레이(104)에 디스플레이된 예시적인 제어부들이 각각 도 27n(리터치 제어부들) 및 도 27o(적목 현상 제어부들)에 제공된다.
이제, 도 28a를 참조하면, 터치 감응형 이차 디스플레이(104)에서의 입력(5034)에 응답하여 디스플레이되는 예시적인 조정 제어부들이 도시되어 있다. 도 28a에 도시된 바와 같이, 조정 제어부들은 이미지의 광, 색상, 및 콘트라스트("B&W") 태양들을 수정하기 위한 제어부들을 포함한다. 각각의 입력들(5039, 5040, 5041)(각각, 도 28a, 도 28b, 도 28c)에 응답하여, 터치 감응형 이차 디스플레이(104)는 이미지에 대한 광, 색상, 및 콘트라스트를 각각 수정하는 것을 허용하는 슬라이더 제어부를 포함하도록 업데이트된다(예컨대, 도 28a 내지 도 28c에 도시된 바와 같이, 일차 디스플레이(102) 상에 디스플레이된 사진은 개개의 슬라이더 제어부가 터치 감응형 이차 디스플레이(104)에서 수정됨에 따라 업데이트됨).
일부 실시예들에서, 개개의 슬라이더 제어부가 터치 감응형 이차 디스플레이(104)에서 수정된 후, 청색을 사용하여 하이라이트되는 체크마크가 디스플레이되어, 일차 디스플레이(102) 상에 디스플레이된 사진이 수정을 이용하여 렌더링되었음을 나타낸다. 일부 실시예들에서, 사용자들은 체크마크에서 탭핑함으로써 용이하게 수정을 회귀시킬 수 있다(예컨대, 색상 슬라이더 제어부에 대한 체크마크에서의 입력(5043)에 응답하여, 도 28f에 도시된 바와 같이, 사진 E는 색상 수정을 이용하여 더 이상 렌더링되지 않고, 터치 감응형 이차 디스플레이(104)에서의 청색 하이라이트는 더 이상 제시되지 않음). 도 28g는 광, 색상, 및 콘트라스트 슬라이더 제어부들 각각에 대한 다양한 제시 상태들의 개요를 제공한다.
터치 감응형 이차 디스플레이(104)에 디스플레이되고 사진들을 통해 브라우징하는 데 사용되는 제어부들의 추가 예들이 도 28h 내지 도 28l에 도시되어 있다. 구체적으로, 도 28h는 연도/컬렉션 레벨에서 사진들을 통해 내비게이팅하기 위한, 터치 감응형 이차 디스플레이(104)에 디스플레이된 제어부들을 도시하고; 도 28i는, 연도/컬렉션 레벨에서 사진들을 통해 브라우징하는 동안의 사진의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)가 추가 옵션들(즐겨찾기 아이콘 및 회전 아이콘을 포함함)을 포함하는 것을 도시하고; 도 28j는 개별적인 사진들을 통해 브라우징하는 동안의 즐겨찾기 아이콘의 선택을 도시하고; 도 28k는, 라이브 사진의 표현이 사진들을 통해 내비게이팅하는 동안에 (그리고, 일부 실시예들에서, 스크러버가 라이브 사진의 표현에서 멈춘 후에) 접촉되는 경우, 상이한 스크러버 표현이 제시되는 것을 도시하고; 도 28l은, 비디오의 표현이 사진들을 통해 내비게이팅하는 동안에 (그리고, 일부 실시예들에서, 스크러버가 비디오의 표현에서 멈춘 후에) 접촉되는 경우, 다른 상이한 스크러버 표현이 제시되고 재생 버튼이 제공되어 비디오의 재생을 허용한다는 것을 도시한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)에 디스플레이되는 표현들은 다양한 타입의 비디오들에 대해 상이하게 제시된다(예컨대, 슬로-모(slo-mo) 비디오에 대한 일례가 도 28m에 도시되어 있고, 정규 비디오에 대한 일례가 도 28n에 도시되어 있음). 일부 실시예들은, 또한, (예컨대, 도 28o 및 도 28p에 도시된 바와 같이) 터치 감응형 이차 디스플레이(104)로부터 직접적으로 비디오들을 트리밍하는 것을 허용한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104) 내에 디스플레이되는 제어부들은 (예컨대, 도 29a 내지 도 29d에 도시된 바와 같이) 사진 애플리케이션 내의 앨범 탭들을 통해 내비게이팅하는 동안, (예컨대, 도 29e에 도시된 바와 같이) 사진 애플리케이션 내의 공유 탭을 통해 내비게이팅하는 동안, 그리고 (예컨대, 도 29f 내지 도 29j에 도시된 바와 같이) 사진 애플리케이션의 활성 탭을 통해 내비게이팅하는 동안 제공된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104) 내에 디스플레이되는 제어부들이 사진 애플리케이션을 통해 액세스되는 슬라이드쇼들 및 인쇄 제품들(예들이 도 29k 내지 도 29o에 도시되어 있음)을 위해 제공되어, 이에 따라, 사용자들이 슬라이드쇼에 텍스트 또는 사진들을 빠르고 쉽게 추가하게 할 뿐 아니라 선적(shipping) 세부사항들을 추가하고 프린트 순서에 대한 순서화 옵션들을 구성하게 한다.
일부 실시예들에서, 사진 애플리케이션 내의 사진들을 검색하는 동안, 터치 감응형 이차 디스플레이(104)는 (예컨대, 특정 위치 근처에서 촬영된 사진들에 대한 검색을 좁히는 것을 돕기 위해) 지도 보기 옵션들을 선택하기 위한 제어부(도 29p), 검색 파라미터를 선택하기 위한 제어부들(예컨대, 도 29q), 및/또는 사진 애플리케이션 내로 임포트할 사진들을 선택하기 위한 제어부들(예컨대, 도 29r 내지 도 29t)로 채워진다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 시스템 전체 검색(system-wide search) 기능들을 수행하기 위한 어포던스들로 채워진다. 일부 예들이 도 30a 내지 도 30f에 도시되어 있다. 일부 실시예들에서, 사용자 입력이 텍스트를 검색 질의에 추가한 것에 응답하여(예컨대, 텍스트 "photo"가 도 30a와 도 30b 사이에 추가됨), 터치 감응형 이차 디스플레이(104)는 (도 30b에 도시된 바와 같이) 텍스트 완성 옵션들을 포함하도록 업데이트된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, 텍스트 완성 옵션들에 더하여 애플리케이션 제어 어포던스들을 포함하도록 채워진다. 예를 들어, 도 30c는 연락처 애플리케이션에 대한 애플리케이션 제어 어포던스들을 도시하고, 도 30d 및 도 30e는 미디어 재생 애플리케이션에 대한 애플리케이션 제어 어포던스들을 도시하고, 도 30f는 지도 애플리케이션에 대한 애플리케이션 제어 어포던스들을 도시한다. 일부 실시예들에서, 애플리케이션 제어 어포던스들은 일차 디스플레이(102) 상에서의 특정 검색 결과의 선택에 응답하여 디스플레이되고, 특정 검색 결과에 대응하는 콘텐츠와 상호작용하기 위해 사용될 수 있는 제어부들을 포함한다.
일부 실시예들에서, 시스템 전체 검색 기능은 터치 감응형 이차 디스플레이에서의 제스처를 이용하여 활성화된다. 예를 들어, 터치 감응형 이차 디스플레이(104)를 가로지르는 실질적 하향 수직 방향으로의 스와이프 제스처에 응답하여, 일차 디스플레이는 시스템 전체 검색에 대한 사용자 인터페이스(예컨대, 도 30a에 도시된 사용자 인터페이스)를 디스플레이하도록 야기된다. 일부 실시예들에서, 시스템 전체 검색을 활성화시키기 위한 이러한 제스처는 일차 디스플레이가 데스크톱 사용자 인터페이스(예컨대, FINDER의 페이지)를 디스플레이하고 있을 때 이용가능하다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 (예컨대, 일부 운영 체제들을 통해 이용가능한 MISSION CONTROL 특징부를 사용하여) 다양한 워크스페이스들 사이에서 선택하기 위한 어포던스들로 채워진다. 일부 예들이 도 31a 및 도 31b에 도시되어 있다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 일차 디스플레이(102) 상에 디스플레이되는 많은 검색 결과들을 통해 내비게이팅하기 위한 어포던스들로 채워진다. 일부 예들이 도 32a 내지 도 32e에 도시되어 있다(추가 세부사항들이 방법(1200) 및 도 50을 참조하여 하기에 제공됨).
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 일차 디스플레이(102) 상의 메시징 애플리케이션을 사용하는 동안에 기능들에 빠르게 액세스하기 위한 어포던스들로 채워진다. 예들이 도 33a 내지 도 33k에 도시되어 있다.
도 33a에 도시된 바와 같이, 사용자가 일차 디스플레이(102) 상에 보여지는 메시징 애플리케이션에서 새로운 메시지를 생성한 것에 응답하여 (또는 사용자가 수신자 영역 내의 메시징 애플리케이션에서 보여지는 "+" 아이콘을 선택한 것에 응답하여), 터치 감응형 이차 디스플레이(104)는 예측된 수신자들을 새로운 메시지에 추가하기 위한 어포던스들을 포함하도록 업데이트된다. 예를 들어, 도 33a는 제1 예측된 수신자에 대한 제1 어포던스(John Appleseed's Home) 및 제2 예측된 수신자에 대한 제2 어포던스(John Campbell's Home)를 포함한다. 입력(5045)이 터치 감응형 이차 디스플레이(104)로부터 제1 어포던스를 선택한 것에 응답하여, 일차 디스플레이(102) 상의 메시징 애플리케이션 내의 새로운 메시지는 제1 예측된 수신자에 대응하는 어드레스를 디스플레이하도록 업데이트된다. 사전행동적/예측된 제안들은 미국 출원 제15/167,713호에 더 상세히 논의되어 있으며, 이는 이로써 전체가 참고로 포함된다.
일부 실시예들에서, 새로운 메시지에 대한 텍스트 입력 필드의 선택(예컨대, 입력(5046-A))에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 33b의 터치 감응형 이차 디스플레이(104)에서 좌측으로부터 우측으로 보여지는) (i) 선택될 때, 터치 감응형 이차 디스플레이(104)가 메시징 애플리케이션을 통해 오디오를 레코딩 및 전송하기 위한 옵션들을 디스플레이하게 하는 마이크로폰 어포던스(도 33g 내지 도 33k); (ii) 선택될 때, 터치 감응형 이차 디스플레이가 새로운 메시지에 추가할 이모지를 선택하기 위한 옵션들을 디스플레이하게 하는 이모지 어포던스(도 33c 및 도 33d)(또한, 방법(1500) 및 도 53을 참조하여 하기에 더 상세히 기술됨); (iii) 선택될 때, 터치 감응형 이차 디스플레이가 새로운 메시지에 추가할 하나 이상의 사진들을 선택하기 위한 제어부들을 제공하게 하는 그림 선택자 어포던스(도 33f)(예시적인 사진 선택 제어부들이 또한 도 27a 및 도 27b를 참조하여 상기에서 논의됨); 및 (iv) 예측된 텍스트 입력 옵션들을 디스플레이하기 시작한다.
일부 실시예들에서, 마이크로폰 어포던스를 선택한 후, 터치 감응형 이차 디스플레이(104)는, 선택될 때, 컴퓨팅 시스템이 오디오를 레코딩하기 시작하게 하는 레코드 어포던스를 포함하도록 업데이트된다. 일부 실시예들에서, 오디오가 레코딩되고 있는 동안, 터치 감응형 이차 디스플레이(104)는 (도 33h에 도시된 바와 같이) 레코딩된 오디오의 표현을 포함하도록 업데이트된다. 일부 실시예들에서, 오디오가 레코딩을 완료한 후(또는 사용자가 도 33h의 터치 감응형 이차 디스플레이(104)에 보여진 레코딩 정지 버튼을 선택한 후), (도 33i에 도시된 바와 같이) 전송 버튼이 활성화된다.
일부 실시예들에서, 마이크로폰 어포던스를 사용한 입력에 의한 접촉 이후, 입력은 (도 33j에 도시된 바와 같이) 오디오 레코딩을 시작하기 위해 마이크로폰 어포던스와 접촉한 상태로 유지된다. 일부 실시예들에서, 오디오 레코딩을 종료하기 위해, 사용자는 터치 감응형 이차 디스플레이와 접촉하는 것으로부터 입력을 제거하고, 이에 응답하여, 터치 감응형 이차 디스플레이는 완성된 오디오 레코딩의 표현, 취소 버튼, 및 활성 전송 버튼을 포함한다.
일부 실시예들에서, 일차 디스플레이(102) 상의 메시징 애플리케이션 내에 보여지는 특정 대화 스레드에 포함된 메시징 버블(예컨대, 일부 다른 사용자로부터 수신된 콘텐츠를 포함하는 메시징 버블)의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 버블 확인(acknowledgement)들을 선택하기 위한 제어부들을 포함하도록 업데이트된다(예컨대, 사진 선택자 어포던스에는 버블 확인들을 선택하기 위한 예시적인 제어부들이 인접해 있음). 일부 실시예들에서, 선택된 메시징 버블이 사용자에 의해(즉, 일부 다른 사용자에 의해서는 아님) 전송된 메시지에 대응하는 경우, 터치 감응형 이차 디스플레이(104)는 버블 확인을 선택하기 위한 제어부들을 포함하지 않는다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 34a 내지 도 34c에 도시된 바와 같이, 연락처 애플리케이션을 제어하기 위한 어포던스들로 채워진다. 일부 실시예들에서, 일차 디스플레이(102) 상에서의 디스플레이를 위해 연락처 애플리케이션을 연 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 ("esc" 어포던스 이후에 좌측으로부터 우측으로 보여진) 연락처 애플리케이션을 제어하기 위한 하기의 어포던스들을 포함하도록 업데이트된다: (i) 선택될 때, 연락처 애플리케이션이 새로운 연락처를 추가하기 위한 프로세스를 개시하게 하는 "+" 어포던스; (ii) 선택될 때, 일차 디스플레이(102) 상의 연락처 애플리케이션에서 현재 선택된 연락처에 대한 전화 호출을 개시하는 선택적인 전화 호출 어포던스; (iii) 선택될 때, 연락처 애플리케이션에서 현재 선택된 연락처에 대한 비디오 호출을 개시하는 선택적인 비디오 호출 어포던스; (iv) 선택될 때, 일차 디스플레이(102)가 연락처 애플리케이션에서 현재 선택된 연락처에 메시지를 전송하기 위한 메시징 애플리케이션을 디스플레이하기 시작하게 하는 선택적인 인스턴트 메시징 어포던스; (v) 선택될 때, 일차 디스플레이(102)가 연락처 애플리케이션에서 현재 선택된 연락처로의 이메일을 작성하기 위한 이메일 애플리케이션을 디스플레이하기 시작하게 하는 선택적인 이메일 어포던스; (vi) 선택될 때, 터치 감응형 이차 디스플레이(104)가 편집하기 옵션들을 디스플레이하게 하고 일차 디스플레이(102)가 연락처 애플리케이션에서 현재 선택된 연락처를 편집하는 것을 허용하는 모드에 진입하게 하는 편집 어포던스; 및 (vi) 선택될 때, 터치 감응형 이차 디스플레이(104)가 연락처 애플리케이션에서 현재 선택된 연락처를 공유하기 위한 옵션들을 디스플레이하게 하는 공유 어포던스.
일부 실시예들에서, 선택적인 전화 호출, 비디오 호출, 인스턴트 메시징, 및 이메일은, 현재 선택된(즉, 일차 디스플레이(102) 상의 포커스 선택자를 갖는) 연락처가, 전화 호출을 신청하는 것을 허용하는 연락처 세부사항(예컨대, 연락처에 대한 전화번호가 저장됨), 비디오 호출을 신청하는 것을 허용하는 연락처 세부사항(예컨대, 연락처에 대한 적절한 사용자명 또는 이메일이 저장됨), 인스턴트 메시지를 전송하는 것을 허용하는 연락처 세부사항(예컨대, 연락처에 대한 적절한 사용자명 또는 이메일이 저장됨), 또는 이메일을 전송하는 것을 허용하는 연락처 세부사항(예컨대, 연락처에 대한 이메일 주소가 저장됨)과 연관된다는 판정에 따라 각각 디스플레이된다. 일부 실시예들에서, 이러한 판정이 만족되지 않는 경우, 개개의 선택적인 어포던스는 전혀 디스플레이되지 않거나 비활성 상태로 디스플레이된다(즉, 개개의 어포던스는 그레이아웃된 선택불가능한 상태로 디스플레이됨).
도 34a는, 또한, 편집 어포던스 위에서의 입력(5049)을 도시하고, 입력(5049)에 응답하여, 터치 감응형 이차 디스플레이(104)는 (도 34b에 도시된 바와 같이) 편집 제어부들을 포함하도록 업데이트되고, 일차 디스플레이(102)는 연락처를 편집하는 것을 허용하는 모드에 진입한다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)에 보여진 편집 제어부들은 일차 디스플레이(102) 상에서 어느 연락처 세부사항들이 편집되고 있는지에 기초하여 선택된다. 예를 들어, 이름, 회사, 또는 부서 필드들이 현재 편집되고 있다(예컨대, 도 34b에서의 이름 필드에 대해 도시된 바와 같이, 일차 디스플레이(102) 상에 포커스 선택자를 가짐)는 판정에 따라, 이어서, 터치 감응형 이차 디스플레이(104)는 새로운 연락처 세부사항들(예컨대, 새로운 전화 번호, 새로운 이메일 주소, 새로운 물리적 주소, 및/또는 새로운 생일 등)을 추가하기 위한 제어부들을 포함하도록 업데이트된다.
다른 예로서, 전화 번호 필드가 편집되고 있다(예컨대, 도 34c에 도시된 바와 같이, 일차 디스플레이(102) 상에 포커스 선택자를 가짐)는 판정에 따라, 이어서, 터치 감응형 이차 디스플레이(104)는 (도 34c에 도시된 바와 같이) 일차 디스플레이(102) 상에서 선택된 전화 번호를 제거하거나 라벨을 할당하기 위한 제어부들을 포함하도록 업데이트된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 35a 및 도 35b에 도시된 바와 같이, 계산기 애플리케이션을 제어하기 위한 어포던스들로 채워진다. 예를 들어, 일차 디스플레이(102) 상의 계산기 애플리케이션을 연 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 계산기 기능들을 제어하기 위한 어포던스들을 포함하도록 채워진다(이러한 어포던스들의 예들이 도 35a에 도시되어 있음). 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, (예컨대, 도 35b에 도시된 바와 같이) 다양한 통화(currency)들 사이에서 빠르게 변환하기 위한 제어부들을 제공한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 36a 내지 도 36w에 도시된 바와 같이, 캘린더 애플리케이션을 제어하고 캘린더 애플리케이션과 연관되는 이벤트들을 수정하기 위한 어포던스들로 채워진다. 일부 실시예들에서, 어포던스들은 다양한 캘린더 뷰들(예컨대, 도 36a 내지 도 36d)을 통해 내비게이팅하는 것을 허용하는 어포던스들뿐 아니라 (예컨대, 도 36e 내지 도 36t에 도시된 바와 같이) 이벤트 세부사항들을 빠르게 편집하는 것을 허용하는 어포던스들 및 (예컨대, 도 36u 내지 도 36w에 도시된 바와 같이) 계류 중인 이벤트 초대에 응답하는 것을 허용하는 어포던스들을 포함한다. 도 36a 내지 도 36w에 관한 추가 세부사항들이 방법(1300) 및 도 51을 참조하여 하기에 제공된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 37a 내지 도 37m에 도시된 바와 같이, 메일 애플리케이션을 제어하기 위한 어포던스들로 채워진다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 일차 디스플레이(102) 상에 포커스 선택자를 갖는 이메일에 적용된 플래그들을 효율적으로 변경하기 위해 사용된다. 도 30a 내지 도 37c에 도시된 바와 같이, 사용자는 플래그 어포던스 위에서의 누르고 유지하기 제스처를 개시할 수 있고, 이에 응답하여, 터치 감응형 이차 디스플레이(104)는 포커스 선택자를 갖는 이메일에 대한 플래그 옵션들을 디스플레이하도록 업데이트되고, 이어서, 사용자는 원하는 플래그(예컨대, 자주색 플래그) 위에서 (누르고 유지하기 제스처의 연속적인 이동으로) 슬라이딩한다. 이어서, 터치 감응형 이차 디스플레이(104)는 원하는 플래그가 선택되었음을 보여주도록 업데이트된다(도 37c).
일부 실시예들에서, (일차 디스플레이(102) 또는 터치 감응형 이차 디스플레이(104) 중 어느 하나 상에서의) 이동 방향(move-to) 옵션의 선택에 응답하여, 터치 감응형 이차 디스플레이(104)는 상이한 폴더 또는 저장소로 이메일을 이동시키기 위한 제어부들을 포함하도록 업데이트된다(예들이 도 37d 및 도 37e에 도시되어 있음).
일부 실시예들에서, 사용자가 이메일 메시지를 편집 또는 작성하고 있는 동안, 터치 감응형 이차 디스플레이(104)는 텍스트 완성을 위한 어포던스들(도 37f에 도시된 "I", "The", 및 "it" 옵션들), 선택된 텍스트를 편집하기 위한 어포던스들(도 37g 및 도 37h, 도 37g에 도시된 키보드 어포던스는 텍스트를 편집하기 위한 어포던스들 대신에 텍스트 완성 옵션들을 재디스플레이하는 데 사용됨), 이모지를 선택하기 위한 어포던스들(도 37i), 및/또는 텍스트 및/또는 그래픽 콘텐츠에 적용할 색상들을 선택하기 위한 어포던스들(예컨대, 도 37j 및 도 37k)을 포함하도록 업데이트된다.
일부 실시예들에서, 텍스트 완성을 위한 어포던스들은 단어 예측들(일례가 도 37l에 도시되어 있음), 맞춤법 교정들, 및/또는 사전행동적 제안들(일례가 도 37m에 도시되어 있음)을 포함한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 38a 내지 도 38j에 도시된 바와 같이, 전화 애플리케이션을 제어하기 위한 어포던스들로 채워진다. 일부 실시예들에서, 사용자가 제1 애플리케이션(예컨대, 웹 브라우징 애플리케이션)과 상호작용하고 있는 동안, 착신 호출(예컨대, 비디오 호출 또는 오디오 호출)이 수신된다. 착신 호출이 수신되었음을 검출한 것에 응답하여, 컴퓨팅 시스템은 착신 호출과 연관된 어포던스들로 터치 감응형 이차 디스플레이(104)를 채운다. 예를 들어, 도 38a에 도시된 바와 같이, 터치 감응형 이차 디스플레이(104)는 (i) 착신 호출자에 대한 표현(예컨대, 착신 호출자에 대한 사진 및 착신 호출자가 호출을 개시하고 싶어한다는 표시); (ii) 선택될 때, (예컨대, 터치 감응형 이차 디스플레이(104) 내에서부터 사전결정된 응답 메시지를 선택함으로써 또는 일차 디스플레이(102) 상의 메시징 애플리케이션을 열어서 사용자가 착신 호출자에게 전송할 메시지를 작성할 수 있게 함으로써) 사용자가 텍스트 메시지를 갖는 착신 호출에 응답하게 하는 메시징 어포던스; (iii) 선택될 때, 착신 호출을 거부하는 거부 어포던스(착신 호출이 거부되었음을 검출한 것에 응답하여, 컴퓨팅 시스템은, 예컨대 도 38e에 도시된 바와 같이, 터치 감응형 이차 디스플레이(104)가 웹 브라우징 애플리케이션에 대한 어포던스들을 디스플레이하는 것으로 회귀하게 함); (iv) 선택될 때, 컴퓨팅 디바이스가 착신 호출을 수용하게 하는 수용 어포던스; 및 (v) 선택될 때, 터치 감응형 이차 디스플레이(104)가 착신 호출에 대한 리마인더 옵션들을 디스플레이하게 하는 리마인더 어포던스(리마인더 어포던스의 선택에 응답하여 디스플레이된 예시적인 리마인더 옵션들이 도 38b에 도시되어 있음)로 채워진다.
일부 실시예들에서, 착신 호출의 수용을 검출한 것에 응답하여, 컴퓨팅 시스템은, 도 38c 및 도 38d에 도시된 바와 같이, 터치 감응형 이차 디스플레이(104)가 착신 호출에 대한 상태 정보뿐 아니라 착신 호출을 종료하기 위한 종료 어포던스 및 착신 호출을 음소거하기 위한 음소거 어포던스를 디스플레이하게 한다. 일부 실시예들에서, 사용자가, 착신 호출이 수신되었을 때 상이한 애플리케이션(예컨대, 상기에서 논의된 웹 브라우징 애플리케이션)을 이전에 보고 있던 경우, 터치 감응형 이차 디스플레이(104)는 오버레이 모드(도 38c)에서 상태 정보를 디스플레이하는데, 여기서 오버레이 모드를 나가서 상이한 애플리케이션에 대한 제어부들로 되돌아가는 것을 허용하는 "x" 어포던스가 디스플레이된다(예컨대, 도 38c에서의 "x" 어포던스의 선택을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이(104)는 도 38e에 도시된 것들과 같은 상이한 애플리케이션에 대한 제어부들을 디스플레이하는 것으로 회귀함).
일부 실시예들에서, 사용자가, 착신 호출이 수신되었을 때 전화 애플리케이션(예컨대, FACETIME 애플리케이션)을 보고 있던 경우, 터치 감응형 이차 디스플레이(104)는 도 38d에 도시된 바와 같이 상태 정보를 디스플레이하는데, 여기서 "esc" 어포던스가 위에서 논의된 "x" 어포던스 대신에 디스플레이된다. 일차 디스플레이(102) 상에서 보이고 있거나 상호작용되고 있는 것에 따라, 터치 감응형 이차 디스플레이(104)의 극좌(leftmost) 영역(스마트 라벨 버튼에 대한 스마트 라벨 영역으로도 지칭됨)에서 "x" 어포던스를 디스플레이하는 것, "esc" 어포던스를 디스플레이하는 것, 및 기타 어포던스들을 디스플레이하는 것 사이에서 스위칭하는 것에 관한 추가 세부사항들이 스마트 라벨 버튼에 관해 하기에 제공된다.
일부 실시예들에서, 착신 호출이 오디오 호출이라는 판정에 따라, 터치 감응형 이차 디스플레이(104)는, 선택될 때, 비디오 호출을 시작하라는 착신 호출자에게로의 요청을 개시하는 비디오 어포던스로 채워진다(비디오 어포던스의 일례가 도 38f에 도시되어 있음).
일부 실시예들에서, 상기에서 논의된 착신 호출이 진행 중인 동안에 새로운 호출이 수신되는 경우, 터치 감응형 이차 디스플레이는 정보, 및 새로운 호출에 대응하는 어포던스들(예컨대, 도 38g(새로운 호출이 수신될 때 디스플레이되는 어포던스들) 및 도 38h(새로운 호출이 수용될 때 디스플레이되는 어포던스들)에 도시된 바와 같음)을 포함하도록 채워진다. 일부 실시예들에서, 병합 어포던스의 선택을 검출한 것에 응답하여, 2개 이상의 진행 중인 호출들이 병합되고 터치 감응형 이차 디스플레이는 2개 이상의 진행 중인 호출들이 병합되었음을 반영하도록 업데이트된다(예컨대, 도 38i에 도시된 바와 같이, 2개 이상의 진행 중인 호출들에 대응하는 표현들은 분리된 대신에 중첩되는 것으로 도시되어 있음).
일부 실시예들에서, 호출 실패가 발생했다는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 (예컨대, 도 38j에 도시된 바와 같이) 실패한 호출로부터 다른 당사자에게 메시징하고/하거나 답신하기 위한 어포던스들로 채워진다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 39에 도시된 바와 같이, 활성 모니터링 애플리케이션을 제어하기 위한 어포던스들로 채워진다. 예를 들어, 이러한 어포던스들은 활성 모니터링 애플리케이션의 각각의 탭 사이에서 스위칭하기 위한 어포던스들을 포함하고, 이러한 어포던스들 각각은 (도 39에 도시된 바와 같이) 개개의 대응하는 탭과 연관된 현재 프로세서 활성의 표현과 함께 디스플레이된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 40에 도시된 바와 같이, 활성 로깅 애플리케이션을 제어하기 위한 어포던스들로 채워진다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 상이한 부트 모드(예컨대, 컴퓨팅 시스템이 도 41a 및 도 41b의 터치 감응형 이차 디스플레이(104)에서 제어부들을 동적으로 렌더링하는 것과 호환가능하지 않는 운영 체제에서 부트업하는 모드)에 있는 동안에 특정 기능들에 액세스하기 위한, 시스템 선호도들(예컨대, 도 41c의 "Show All" 어포던스)을 보기 위한, 그리고 스크린샷들을 캡처하기 위한 어포던스들로 채워진다(예컨대, "command+shift+4"와 같은 사전정의된 시퀀스의 키보드 입력들에 응답하여(또는 사용자가 도 35b의 터치 감응형 이차 디스플레이의 우측 시스템 트레이 부분에 보여진 사진 아이콘을 선택한 것에 응답하여), 터치 감응형 이차 디스플레이(104)는 도 41e의 스크린샷을 캡처하기 위한 제어부들로 채워짐).
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 42a 및 도 42b에 도시된 바와 같이, 가상 보조 애플리케이션을 제어하기 위한 또는 그에 추가 정보를 제공하기 위한 어포던스들로 채워진다. 일부 실시예들에서, 컴퓨팅 시스템은 사용자로부터의 구두 커맨드들의 수신에 응답하여 터치 감응형 이차 디스플레이(104)를 업데이트한다. 예를 들어, 컴퓨팅 시스템은 터치 감응형 이차 디스플레이(104)가 (예컨대, 도 42a 및 도 42b에 도시된 바와 같이) 특정 구두 커맨드를 명확화하기 위한 옵션들을 제시할 수 있게 하는 데이터를 터치 감응형 이차 디스플레이(104)에 제공한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 도 43a 내지 도 43d에 도시된 바와 같이, 텍스트 입력 기능들을 제어하기 위한 그리고 비-영어 글자들의 세트에 액세스하기 위한 어포던스들로 채워진다. 일부 실시예들에서, 비-영어 글자들의 세트에 액세스하기 위한 어포던스들은, 사용자가 메시징 애플리케이션, 문서 편집 애플리케이션, 또는 텍스트 입력 및 편집을 허용하는 일부 다른 애플리케이션과 상호작용하고 있는 동안, 터치 감응형 이차 디스플레이(104)를 통해 이용가능하다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 터치 감응형 이차 디스플레이(104)의 극좌 영역을 점유하는 스마트 라벨 버튼을 포함한다. 일부 실시예들에서, 스마트 라벨 버튼은 사용자가 일차 디스플레이(102) 상에서 무엇을 보고 있는지에 기초하여, 그리고 일부 환경들에서, 특정 시점에 터치 감응형 이차 디스플레이(104)에서 어떤 제어부들이 이용가능한지에 기초하여 변경된다. 예를 들어, 스마트 라벨 버튼은 "esc"(사용자가 일차 디스플레이(102) 상에 보여진 현재 디스플레이된 애플리케이션을 나가게 함), "x"(사용자가 오버레이 디스플레이 모드를 나가서 일차 디스플레이(102) 상에 포커스 선택자를 갖는 애플리케이션에 대한 제어부들을 디스플레이하는 것으로 되돌아가게 함), "cancel"(사용자가 터치 감응형 이차 디스플레이(104)에서 다양한 제어부들을 사용하여 행해진 변경들을 취소하게/되돌리게 함), "done"(사용자가, 그들이 터치 감응형 이차 디스플레이(104)를 통한 특정 변경들을 완료한 것을 나타내게 함), 및 "exit"를 디스플레이할 수 있다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 다수의 디스플레이 모드들과 연관된다. 일부 실시예들에서, 세 손가락(또는 두 손가락) 제스처가 터치 감응형 이차 디스플레이(104)에서 다수의 모드들 각각 사이에서 스위칭하도록 제공된다. 일부 실시예들에서, 제스처는 실질적으로 수평이거나 실질적으로 수직인 방향으로 제공된다. 일부 실시예들에서, 다수의 모드들은 하기를 포함한다: (i) 터치 감응형 이차 디스플레이(104)가 커스텀화된 모드와 함께 사용하기 위해 사용자에 의해 커스텀화된 어포던스들을 디스플레이하는 커스텀화된 모드; (ii) 터치 감응형 이차 디스플레이(104)가 일차 디스플레이 및 시스템 레벨 기능들에 대응하는 어포던스들을 디스플레이하는 현재 컨텍스트 모드; 및 (iii) 터치 감응형 이차 디스플레이(104)가 시스템 기능들만을 디스플레이하는 시스템 기능 모드.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)에 제시된 어포던스들은 커스텀화가능하고, 사용자들은 어포던스들을 추가하고/하거나 이들을 터치 감응형 이차 디스플레이(104)로부터 제거할 수 있다(일부 실시예들에서, 커스텀화는 터치 감응형 이차 디스플레이(104)가 상기에서 논의된 커스텀화된 모드에 있을 때에만 이용가능함). 예를 들어, 터치 감응형 이차 디스플레이(104)가 랩톱 키보드 위에 그리고 랩톱의 일차 디스플레이 아래에 디스플레이되는 실시예들에서, 일차 디스플레이 상에 제시되는 어포던스(또는 다수의 어포던스들을 포함하는 메뉴)가, 하나의 연속적인 제스처를 이용하여, 터치 감응형 이차 디스플레이까지 아래로 드래깅되고 이어서 터치 감응형 이차 디스플레이 내에서 수평으로 이동될 수 있다. 일부 실시예들에서, 어포던스가 터치 감응형 이차 디스플레이 내에서 이리저리 이동됨에 따라, 터치 감응형 이차 디스플레이의 다양한 섹션들(예컨대, 애플리케이션 특정 및 시스템 레벨 영역)이 강조되고/하이라이트된다.
일부 실시예들에서, 사용자는 컴퓨팅 시스템의 트랙패드에서 드로잉 입력들을 제공할 수 있고, 드로잉 입력들을 수신한 것에 응답하여, 컴퓨팅 시스템은 터치 감응형 이차 디스플레이(104)가 사용자에 의한 선택을 위한 후보 형상들을 제시하게 한다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)에 대한 명도 레벨은 일차 디스플레이(102)에 대한 명도 레벨에 적어도 부분적으로 기초하여 그리고 컴퓨팅 시스템 주위의 주변광 조건들에 적어도 부분적으로 기초하여 결정된다.
이제 도 70a 내지 도 70d에 주목한다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는 지도 애플리케이션과 함께 사용하기 위한 다양한 제어부들을 포함하도록 동적으로 업데이트된다. 이러한 제어부들을 포함하도록 터치 감응형 이차 디스플레이를 동적으로 업데이트하는 것은 인간-기계 인터페이스를 개선함으로써, 터치 감응형 이차 디스플레이들을 포함하는 전자 디바이스들의 조작성을 개선하는 데 도움을 준다. 예를 들어, 사용자들은 더 적은 상호작용들을 이용하여 동작들을 수행할 수 있고(즉, 사용자들은 원하는 메뉴 옵션들 또는 어포던스들을 검색하는 데 시간을 낭비할 필요가 없는데, 이는 그들이 용이한 1회 클릭 선택을 위해 터치 감응형 이차 디스플레이에서 동적으로 제공되기 때문임), 사용자들은 전자 디바이스와의 상호작용들을 지속할 수 있다.
도 70a에 도시된 바와 같이, 지도 애플리케이션이 일차 디스플레이(102) 상에 제시되고, 터치 감응형 이차 디스플레이(104)는 지도 애플리케이션에 대응하는 어포던스들을 포함하도록 업데이트된다. 예를 들어, 터치 감응형 이차 디스플레이(104)는, 선택될 때, 지도 애플리케이션이 사용자의 현재 위치의 표시자(예컨대, 사용자의 현재 위치를 반영하는 지도 상에 디스플레이되는 핀)를 일차 디스플레이 상에 디스플레이하게 하는 어포던스(7001)를 포함한다. 일부 실시예들에서, 터치 감응형 이차 디스플레이는, 또한, 선택될 때, 지도 애플리케이션이 검색 인터페이스를 열게 하는 어포던스(7002)를 포함한다. 이러한 방식으로, 사용자는 검색 인터페이스를 론칭하는 데 마우스, 트랙패드, 또는 다른 디바이스를 사용할 필요가 없고, 그 대신, 단순히 어포던스(7002)를 선택하여 원하는 지리학적 위치에 대한 지도 애플리케이션을 검색하기 시작할 수 있다.
일부 실시예들에서, 어포던스(7002)에서의 사용자 입력에 응답하여, 일차 디스플레이(102) 상의 지도 애플리케이션은 장소들의 인근 카테고리들(예컨대, 인근 레스토랑들, 커피 숍들, 쇼핑 목적지들, 관심 이동 지점들, 서비스, 재미있는 위치들, 건강 위치들, 및 운송 관련 서비스들)을 선택하기 위한 어포던스들을 포함하도록 업데이트된다(도 70b). 도 70b에 도시된 바와 같이, 장소들의 인근 카테고리들을 선택하기 위한 이러한 어포던스들을 포함하도록 지도 애플리케이션을 업데이트하는 것과 결합하여, 터치 감응형 이차 디스플레이(104)는 장소들의 다양한 인근 카테고리들의 빠른 선택을 허용하는 어포던스들을 포함하도록 동적으로 업데이트된다. 예를 들어, 어포던스(7003)는, 선택될 때, 지도 애플리케이션이 인근 레스토랑들을 검색하게 하고; 어포던스(7004)는, 선택될 때, 지도 애플리케이션이 인근 커피 숍들을 검색하게 하고; 어포던스(7005)는, 선택될 때, 지도 애플리케이션이 인근 쇼핑 목적지들을 검색하게 하고; 어포던스(7006)는, 선택될 때, 지도 애플리케이션이 인근 호텔들을 검색하게 하고; 어포던스(7007)는, 선택될 때, 지도 애플리케이션이 인근 금융 기관들(예컨대, 은행들 또는 ATM들)을 검색하게 하고; 어포던스(7008)는, 선택될 때, 지도 애플리케이션이 인근 영화 상영관들을 검색하게 하고; 어포던스(7009)는, 선택될 때, 지도 애플리케이션이 인근 병원들을 검색하게 하고; 어포던스(7010)는, 선택될 때, 지도 애플리케이션이 인근 주유소들을 검색하게 한다. 일부 실시예들에서(그리고 도 70b에 도시된 바와 같이), 터치 감응형 이차 디스플레이(104)는, 예컨대 일차 디스플레이(102)에서 (그 아래에 디스플레이된 지도들을 가리지 않으면서) 피팅되지 않을 수도 있는 추가 인근 검색 옵션들을 포함함으로써, 더 많은 정보가 마찬가지로 제한된 스크린 상에서 이용가능하게 되게 할 수 있다.
이제, 도 70c를 참조하면, 일부 실시예들에서, 사용자가 특정 지리적 위치를 검색한 후, 또는 사용자가 상기에서 논의된 카테고리들로부터의 관심 인근 지점들과 상호작용한 다음에 특정 지리적 위치를 선택한 후, 터치 감응형 이차 디스플레이(104)는, 선택될 때, 지도 애플리케이션이 라우팅 정보를 제공하기 위해 지도 애플리케이션에 의해 사용될 운송 모드를 선택하게 하는 어포던스들을 포함하도록 업데이트된다. 예를 들어, 터치 감응형 이차 디스플레이는 운송의 운전, 보행, 또는 환승 모드들을 각각 선택하기 위한 어포던스들(7011, 7012, 7013)을 포함할 수 있다.
도 70d에 도시된 예에서, 사용자는 원하는 지리적 위치에 대한 운송의 운전 모드를 선택하였고, 이에 응답하여, 터치 감응형 이차 디스플레이(104)는 그 지리적 위치로의 운전 방향을 개시하는 것을 허용하는 어포던스(예컨대, 어포던스(7014))를 포함하도록 업데이트된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, 추가 어포던스들(예컨대, 어포던스들(7015 내지 7019)), 즉, 사용자가, 웹 브라우저에서 지리적 위치를 검색하게 하는 어포던스(예컨대, 어포던스(7015)), 지리적 위치와 연관된 전화 번호로 연락하게 하는 어포던스(예컨대, 어포던스(7016)), 지리적 위치를 제1 장소로 플래깅하게 하는 어포던스(예컨대, 어포던스(7017)), 지리적 위치에 관한 더 많은 정보를 찾아 내게 하는 어포던스(예컨대, 어포던스(7018)), 및 다수의 다양한 공유 플랫폼들을 통해 지리적 위치를 공유하게 하는 어포던스(예컨대, 어포던스(7019))를 포함하도록 업데이트된다. 일부 실시예들에서, 다수의 다양한 공유 플랫폼들은 이메일, 소셜 미디어(예컨대, TWITTER, FACEBOOK, 및 다른 유사한 소셜 미디어 공유 플랫폼들), 텍스트 메시징 등을 포함할 수 있다.
이제, 도 71a 내지 도 75를 참조하면, 다양한 비디오 편집 애플리케이션들과 함께 사용하기 위해 터치 감응형 이차 디스플레이에서 제어부들을 동적으로 제공하는 것을 도시하기 위해 사용되는 디스플레이들(일차 디스플레이 및 터치 감응형 이차 디스플레이)의 개략도들이 도시되어 있다. 예를 들어, 다양한 비디오 편집 애플리케이션들은 모두가 미국 캘리포니아주 쿠퍼티노 소재의 APPLE INC.로부터의 것인 FINAL CUT PRO, MOTION, COMPRESSOR, 및 IMOVIE를 포함할 수 있다. 비디오 편집 애플리케이션들과 함께 사용하기 위한 제어부들을 포함하도록 터치 감응형 이차 디스플레이를 동적으로 업데이트하는 것은 인간-기계 인터페이스를 개선함으로써 터치 감응형 이차 디스플레이들을 포함하는 전자 디바이스들의 조작성을 개선하는 것을 돕는다. 예를 들어, 사용자들은 더 적은 상호작용들을 이용하여 동작들을 수행할 수 있고(즉, 사용자들은 원하는 메뉴 옵션들 또는 어포던스들을 검색하는 데 시간을 낭비할 필요가 없는데, 이는 그들이 용이한 1회 클릭 선택을 위해 터치 감응형 이차 디스플레이에서 동적으로 제공되기 때문임), 사용자들은 전자 디바이스와의 상호작용들을 지속할 수 있다.
도 71a 내지 도 71m은 비디오 편집 애플리케이션들에 대한 예시적인 사용자 인터페이스들을 도시하기 위해 사용되는 일차 디스플레이(102) 및 터치 감응형 이차 디스플레이(104)의 개략도들이다(도시된 예들에서, 비디오 편집 애플리케이션은 FINAL CUT PRO임). 도 71a에 도시된 바와 같이, 일차 디스플레이(102)는 비디오 편집 애플리케이션에 대한 사용자 인터페이스를 디스플레이하고 있는데, 여기서 사용자는 비디오 프로젝트에 대한 타임라인과 상호작용하고 있고, 터치 감응형 이차 디스플레이(104)는 비디오 타임라인을 조작하는 것을 허용하는 사용자 인터페이스 제어부들을 디스플레이하고 있다. 구체적으로, 터치 감응형 이차 디스플레이는 사용자 인터페이스 제어부(7102) 내의 4개의 상이한 열들 상에 포함된 작은 직사각형 표현들을 포함하는데, 여기서 제1 열은 비디오 프로젝트의 타이틀 부분에 대응하고, 제2 열은 비디오 프로젝트에 대한 비디오 트랙에 대응하고, 제3 열은 비디오 프로젝트에 대한 오디오 트랙에 대응하고, 제4 열은 비디오 프로젝트에 대한 음악 트랙에 대응한다. 일부 실시예들에서, 사용자는 제1 단부(7103) 또는 제2 단부(7104)를 드래깅함으로써 비디오 프로젝트를 빠르게 조작할 수 있고, 이에 응답하여, 일차 디스플레이(102)는 조작들에 따라 (즉, 상기에서 논의된 바와 같이, 비디오 프로젝트에 대한 정보의 열들 각각에 대응하는 정보를 더 많이 또는 더 적게 보여주기 위해) 업데이트된다.
예를 들어, 도 71b에 도시된 바와 같이, 단부들(7103, 7104)의 사용자 조작에 응답하여(즉, 터치 감응형 이차 디스플레이(104)를 가로질러 반대 방향으로 각각 드래깅함), 일차 디스플레이는 (도 71b에 도시된 바와 같이) 타임라인이 더 많이 보이도록 업데이트된다. 도 71b는, 또한, 사용자들이 좌향 지점 삽입 기호(leftward-point caret) 어포던스(7105)를 선택하여, 터치 감응형 이차 디스플레이(104)가 특정 시스템 레벨 어포던스들(예컨대, 명도, 재생, 볼륨 조작, 및 음소거 어포던스들)을 디스플레이하는 것을 중지하게 하고 사용자 인터페이스 제어부(7102) 내에 보여진 타임라인 표현의 디스플레이 크기를 증가시키게 할 수 있다는 것을 도시한다(예컨대, 도 71b에 도시된 바와 같이, 어포던스(7105)가 선택된 후, 터치 감응형 이차 디스플레이(104) 내에 이제 타임라인이 더 많이 보여짐). 이러한 방식으로, 더 많은 정보가 제한된 이용가능한 스크린 실면적(real estate)을 갖는 디스플레이에서 디스플레이될 수 있는데, 즉 터치 감응형 이차 디스플레이(104)는 시스템 레벨 어포던스들을 디스플레이하는 것을 중지함으로써 타임라인 표현을 더 많이 보여줄 수 있다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는 또한 사용자 인터페이스 제어부(7102) 내에 추가 열들을 포함할 수 있다. 2개의 예들이 도 71c 및 도 71d1에 도시되어 있는데, 여기서 일차 디스플레이(102) 상에서 편집되고 있는 (예컨대, 시각적 전이, 비디오 클립의 상단 상에서의 오버레이로 보일 수 있는 텍스트, 서로의 상단 상에 오버레이될 사운드들에 대응하는 다른 오디오 클립, 분리되었던 하나의 오디오 파일의 표현들 등과 같은) 비디오 프로젝트의 추가 컴포넌트들에 대응하는 추가 열들이 도시된다.
도 71d2 내지 도 71m은 FINAL CUT PRO와 같은 비디오 편집 애플리케이션에서 이용가능한 특정 기능들을 제어하기 위해 디스플레이될 수 있는 추가 사용자 인터페이스 제어부들을 도시하기 위해 사용되는 터치 감응형 이차 디스플레이(104)의 개략도들이다. 예를 들어, 도 71d2는 새로운 비디오 프로젝트를 생성하는 것과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 예시적인 사용자 인터페이스 제어부들을 도시하고, 도 71e는 비디오 프로젝트 내의 특정 클립을 선택하는 것과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 사용자 인터페이스 제어부들을 도시하고, 도 71f는 비디오 프로젝트에 대한 볼륨 레벨을 조작하는 것과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 사용자 인터페이스 제어부들을 도시하고, 도 71g는 다수의 요소들(예컨대, 비디오 프로젝트와 연관된 다수의 오디오 또는 음악 트랙들)에 대한 볼륨 레벨들을 선택하는 것과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 사용자 인터페이스 제어부들을 도시하고, 도 71h는 비디오 프로젝트의 컴포넌트들(예컨대, 오디오, 비디오, 또는 음악 트랙들)을 트리밍하는 것과 연관된 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 도시한다.
추가 예들이 또한 도 71i 내지 도 71m에 도시되어 있다. 예를 들어, 도 71i는 다양한 편집 툴들과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 예시적인 사용자 인터페이스 제어부들을 도시하고, 도 71j는 볼륨 페이드 제어부들을 조작하는 것과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 예시적인 사용자 인터페이스 제어부들을 도시하고, 도 71k는 다수의 컴포넌트들을 선택하고 이어서 그러한 요소들 각각에 대한 볼륨 페이드 제어부들을 조작하는 것과 연관된 기능들을 제어하기 위해 디스플레이될 수 있는 예시적인 사용자 인터페이스 제어부들을 도시하고, 도 71l은 (도 71a 및 도 71b를 참조하여 상기에서 논의된 바와 같이) 비디오 프로젝트에 대한 타임라인을 조작하는 것을 도시하고, 도 71m은 비디오 프로젝트 내에서의 전이를 편집하는 것과 연관된 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 도시한다.
도 71a 내지 도 71m에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 추가 세부사항들은 당업자에 의해 이해되고 인식될 것이며, 이러한 세부사항들 중 일부는 APPLE INC.로부터 입수가능한 "Final Cut Pro × User Guide"와 같은 사용자 매뉴얼들(이는 공개적으로 이용가능하고, 제목이 "final_cut_pro_x-10.1.1-user_guide.pdf"임)에 반영되어 있다. 미국 특허 출원 공개 제2012/0210222호, 제2012/0210231호, 제2012/0210228호, 및 제2014/0253560호 및 미국 특허 제8,849,028호 및 제7,805,678호가 또한 도 71a 내지 도 71m에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 세부사항들 및 설명들을 제공하며, 이들 각각은 이로써 전체가 참고로 포함된다.
이제, 도 72a 내지 도 72p를 참조하면, 비디오 편집 애플리케이션과 연관된 사용자 인터페이스들을 예시하기 위해 사용되는 디스플레이들(일차 디스플레이 및 터치 감응형 이차 디스플레이 양측 모두)의 개략도들이 도시되어 있다(이러한 예들에서, 비디오 편집 애플리케이션은 MOTION임). 도 72a에 도시된 바와 같이, 비디오 편집 애플리케이션에 대한 사용자 인터페이스는 일차 디스플레이(102) 상에 디스플레이되고, 터치 감응형 이차 디스플레이(104)는 비디오 편집 애플리케이션 내에서 이용가능한 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 포함한다(예컨대, 사용자는 터치 감응형 이차 디스플레이(104)에서 입력들을 제공함으로써 비디오 프로젝트와 연관된 그래픽을 조작할 수 있음). 예를 들어, 사용자는 사용자 인터페이스 제어부의 제1 단부(7202) 또는 제2 단부(7204)를 이동시켜 (예컨대, 특정 시점에서 어느 이미지들이 보여질 것인지를 조작하기 위해) 비디오 프로젝트의 일부분을 빠르게 조작할 수 있다.
일부 실시예들에서 그리고 상기에서 설명된 바와 같이, 터치 감응형 이차 디스플레이(102)에서 제한된 디스플레이 스크린 실면적을 효율적으로 활용하는 것을 돕기 위해, 사용자들은 좌향 지점 삽입 기호를 선택하여, 터치 감응형 이차 디스플레이(102)가 시스템 레벨 어포던스들을 디스플레이하는 것을 중지하게 하고 그 대신에 도 72a의 터치 감응형 이차 디스플레이에 보여진 타임라인 뷰와 같은 특정 사용자 인터페이스 제어부를 더 많이 디스플레이하게 할 수 있다. 예를 들어, 삽입 기호 어포던스의 선택에 응답하여, 도 72k에 도시된 바와 같이, 타임라인 뷰가 터치 감응형 이차 디스플레이(104)에서 더 많이 보여진다.
도 72b 내지 도 72k는 MOTION과 같은 비디오 편집 애플리케이션에서 이용가능한 특정 기능들을 제어하기 위해 디스플레이될 수 있는 추가 사용자 인터페이스 제어부들을 도시하기 위해 사용되는 터치 감응형 이차 디스플레이(104)의 개략도들이다. 예를 들어, 도 72b는 어떠한 객체도 선택되지 않았을 때(예컨대, 비디오 편집 애플리케이션이 초기에 일차 디스플레이(102)에서 론칭될/열릴 때) 비디오 편집 애플리케이션 내에서 이용가능한 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 72c1은 객체가 일차 디스플레이(102) 상의 비디오 편집 애플리케이션 내에서 선택된 후에 이용가능한 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 72c21은 다수의 객체들이 선택된 후에 이용가능한 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 72d는 다양한 타이밍 옵션들을 조작하기 위해 이용가능한 기능들을 제어하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 72e 및 도 72f는 다양한 툴 옵션들을 선택하기 위한 사용자 인터페이스 제어부들을 도시한다(일부 실시예들에서, 보여진 제어부들은 글리프들로 지칭되고, 추가 글리프들이 또한 도 75에 도시되어 있음).
비디오 편집 애플리케이션 내의 텍스트를 편집하기 위한 예시적인 사용자 인터페이스 제어부들이 도 72g 내지 도 72j에 제공된다. 도 72g는 (예컨대, 특정 비디오 프로젝트 또는 개별 프레임과 연관된 제목과 같은) 텍스트를 편집하기 위해 터치 감응형 이차 디스플레이(104)에서 이용가능한 사용자 인터페이스 제어부들을 도시하고, 도 72h는 텍스트 외양 옵션들을 선택하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 72i는 텍스트 크기조정 옵션들을 선택하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 72j는 텍스트 커닝 옵션들을 변경하기 위한 사용자 인터페이스 제어부들을 도시한다.
도 72a 내지 도 72k에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 추가 세부사항들은 당업자에 의해 이해되고 인식될 것이며, 이러한 세부사항들 중 일부는 APPLE INC.로부터 입수가능한 "Motion User Guide"와 같은 사용자 매뉴얼들(이는 공개적으로 이용가능하고, 제목이 "motion_5.1.1_ug.pdf"임)에 반영되어 있다. 미국 특허 출원 공개 제2013/0239057호 및 제2009/0226080호 및 미국 특허 제9,070,206호가 또한 도 72a 내지 도 72k에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 세부사항들 및 설명들을 제공하며, 이들 각각은 이로써 전체가 참고로 포함된다.
이제, 비디오 편집 애플리케이션 내에서 이용가능한 기능들을 제어하기 위해 터치 감응형 이차 디스플레이에서 제공되는 사용자 인터페이스 제어부들의 예시들을 제공하는 도 73a 내지 도 73n에 주목한다(도면들의 이러한 시퀀스에서, 예시적인 비디오 편집 애플리케이션은 COMPRESSOR임). 도 73a는 새로운 COMPRESSOR 아이템(즉, 비어있는 배치)을 추가하기 위해 터치 감응형 이차 디스플레이(104)에서 제공되는 사용자 인터페이스 제어부들을 도시하고, 도 73b는 새로운 파일, 이미지 시퀀스, 또는 주변 사운드 옵션을 추가하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 73c는 새로운 설정들을 추가하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 73d는 새로운 설정들을 구성하기 위한 사용자 인터페이스 제어부들을 도시한다.
추가 예들이 또한 도 73e 내지 도 73i에 도시되어 있다. 구체적으로, 도 73e는 정상 배치를 구성하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 73f는 마커들을 제어하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 73g는 뷰어 모드를 제어하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 73h는 뷰어 모드에 있는 동안에 마커들을 선택하기 위한 사용자 인터페이스 제어부들을 도시하고, 도 73i는 iTMS 배치 아이템들을 제어하기 위한 사용자 인터페이스 제어부를 도시한다. 도 73j 내지 도 73n은 추가 사용자 인터페이스 제어부들을 도시하는데, 이들은 각각 iTMS 배치 기능들, 설정들, 활성 프로세싱 옵션들을 제어하기 위한 것들(즉, 프로세싱이 진행 중인 동안에 터치 감응형 이차 디스플레이(104)에서 사용가능한 사용자 인터페이스 제어부들), 활성 일시정지된 옵션들을 제어하기 위한 것들(즉, 프로세싱이 일시정지된 동안에 터치 감응형 이차 디스플레이(104)에서 사용가능한 사용자 인터페이스 제어부들), 완료된 옵션들을 제어하기 위한 것들(즉, 프로세싱이 완료된 후에 터치 감응형 이차 디스플레이(104)에서 사용가능한 사용자 인터페이스 제어부들)을 포함한다.
도 73a 내지 도 73n에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 추가 세부사항들은 당업자에 의해 이해되고 인식될 것이며, 이러한 세부사항들 중 일부는 APPLE INC.로부터 입수가능한 "Compressor User Guide"와 같은 사용자 매뉴얼들(이는 공개적으로 이용가능하고, 제목이 "compressor_4.1.2_user_guide.pdf"임)에 반영되어 있다. 미국 특허 출원 공개 제2014/0344691호가 또한 도 73a 내지 도 73n에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 세부사항들 및 설명들을 제공하며, 이로써 전체가 참고로 포함된다.
이제, 다양한 비디오 편집하기 기능들을 제어하기 위한 사용자 인터페이스 제어들이 도시되어 있는 도 74a 내지 도 74h에 주목한다(도면들의 이러한 시퀀스에서, 비디오 편집 애플리케이션은 IMOVIE임). 도 74a 내지 도 74d는 각각 프로젝트 생성, 프로젝트 재생, 비디오 편집, 및 볼륨 옵션들을 제어하기 위해 터치 감응형 이차 디스플레이(104)에서 디스플레이되는 사용자 인터페이스 제어부들을 도시한다. 도 74e 내지 도 74h는 다양한 미디어 브라우저 기능들을 제어하기 위해 터치 감응형 이차 디스플레이(104)에서 디스플레이되는 사용자 인터페이스 제어부들을 도시한다.
도 74a 내지 도 74h에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 추가 세부사항들은 당업자에 의해 이해되고 인식될 것이며, 이러한 세부사항들 중 일부는 APPLE INC.로부터 입수가능한 "iMovie '08 Getting Started"와 같은 사용자 매뉴얼들(이는 공개적으로 이용가능하며, 제목이 "iMovie_08_Getting_ Started.pdf"임)에 반영되어 있다. 미국 특허 출원 공개 제2012/0210230호가 또한 도 74a 내지 도 74h에 도시된 사용자 인터페이스 제어부들 및 어포던스들에 관한 세부사항들 및 설명들을 제공하며, 이로써 전체가 참고로 포함된다.
이제, 도 75를 참조하면, 다수의 애플리케이션 특정 비디오 편집 글리프들이 그에 도시되어 있으며, 그들 각각은 터치 감응형 이차 디스플레이(104)에서 디스플레이될 수 있다. 처음 2개의 열들은 FINAL CUT PRO와 연관된 글리프들에 대응하고, 다음 3개의 열들은 MOTION과 연관된 글리프들에 대응하고, 다음의 열은 COMPRESSOR와 연관된 글리프들을 보여주고, 마지막 열은 IMOVIE와 연관된 글리프들을 보여준다. 일부 실시예들에서, 이러한 글리프들은 터치 감응형 이차 디스플레이에 제공되어, 사용자들이 터치 감응형 이차 디스플레이(104)에서의 단일 입력을 사용하여 (그리고 다수의 계층구조적 메뉴들을 통해 내비게이팅함으로써 그 제어부를 검색하는 데 시간을 낭비할 필요 없이) 원하는 제어부들에 액세스하게 한다. 이러한 글리프들에 관한 추가 세부사항들은 당업자에 의해 이해되고 인식될 것이며, 이러한 세부사항들 중 일부는 도 71a 내지 도 74h를 참조하여 상기에서 언급된 사용자 매뉴얼들, 특허 출원 공보들 및 등록된 특허들에 제공되어 있다.
도 44a 내지 도 44d는 일부 실시예들에 따른, 동적 입출력 디바이스(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)을 포함함)를 업데이트하는 방법의 흐름도이다. 방법(600)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다. 방법(600)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))을 포함하고 물리적 키보드를 포함하지 않는다.
컴퓨팅 시스템은 일차 디스플레이 상에 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 하나 이상의 사용자 인터페이스 요소들을 포함함 - 를 디스플레이한다(602). 도 5b는, 예를 들어, 애플리케이션 A가 현재 포커스를 두고 있다는 것을 나타내는 상태 트레이(502) 및 하기를 포함한 복수의 실행가능/선택가능 애플리케이션 아이콘들을 갖는 애플리케이션(앱) 트레이(514)를 갖는 제1 사용자 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다: 메일 애플리케이션 아이콘(506), 웹 브라우저 애플리케이션 아이콘(508), 미디어 플레이어 애플리케이션 아이콘(510), 애플리케이션 A 아이콘(512), 및 사진 애플리케이션 아이콘(515). 일차 디스플레이(102) 상에 디스플레이된 제1 사용자 인터페이스는, 도 5b에서, 또한, 애플리케이션 A(예컨대, 판타지 RPG 게임)에 대한 윈도우(536)를 포함한다. 도 5b에서, 예를 들어, 윈도우(536)는 새로운 게임 시작 어포던스, 계속하기 어포던스, 및 옵션 어포던스를 비롯한 복수의 어포던스들을 갖는 애플리케이션 A에 대한 메인 메뉴를 포함한다. 도 6a는, 예를 들어, 미디어 플레이어 애플리케이션에 대한 윈도우(554)를 갖는 제1 사용자 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다.
일부 실시예들에서, 컴퓨팅 시스템은 하기를 추가로 포함한다(604): (i) 일차 디스플레이, 프로세서, 메모리, 및 일차 컴퓨팅 디바이스 통신 회로부를 포함하는 일차 컴퓨팅 디바이스; 및 (ii) 하우징, 터치 스크린 디스플레이, 물리적 입력 메커니즘, 및 일차 컴퓨팅 디바이스 통신 회로부와 통신하기 위한 입력 디바이스 통신 회로부를 포함하고, 일차 컴퓨팅 디바이스와는 별개이고 그로부터 분리되어 있는 입력 디바이스. 일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)과 같은 랩톱이 아니라, 그 대신, 컴퓨팅 디바이스(202), 주변기기 디스플레이 디바이스(204)(이는, 선택적으로, 컴퓨팅 디바이스(202)와 일체화됨), 및 터치 스크린 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104))에 인접해 있는 복수의 물리적 키들(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))을 갖는 입력 디바이스(예컨대, 도 2a 및 도 2b의 주변기기 키보드(206))를 갖는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 대안으로, 일부 실시예들에서, 입력 디바이스(예컨대, 도 2c의 제1 주변기기 입력 메커니즘(212))는 터치 스크린 디스플레이(예컨대, 도 2c의 동적 기능 열(104))에 인접해 있는 터치 패드 또는 숫자패드(예컨대, 도 2c의 터치패드(108))를 포함한다. 일부 실시예들에서, 입력 디바이스는 유선 접속(예컨대, USB, PS/2 등) 또는 무선 접속(예컨대, Bluetooth, Wi-Fi 등)을 통해 일차 컴퓨팅 디바이스(예컨대, 도 2a 내지 도 2d의 컴퓨팅 디바이스(202))와 통신한다.
일부 실시예들에서, 물리적 입력 메커니즘은 복수의 물리적 키들을 포함한다(606). 도 1a 및 도 1b에서, 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)은 물리적 키들의 세트(106)에 인접해 있는 터치 스크린 디스플레이(예컨대, 동적 기능 열(104))를 적어도 부분적으로 포함한다.
일부 실시예들에서, 물리적 입력 메커니즘은 터치패드를 포함한다(608). 도 1a 및 도 1b에서, 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)은 물리적 키들의 세트(106) 외에도 터치 스크린 디스플레이(예컨대, 동적 기능 열(104)) 및 터치패드(108)를 적어도 부분적으로 포함한다.
컴퓨팅 시스템은 하나 이상의 사용자 인터페이스 요소들 중에서 일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 식별한다(610). 일부 실시예들에서, "포커스를 두고 있는"이라는 용어는, 현재 전경 내에 있고, 활성 상태로 구동 중이거나, 또는 컴퓨팅 시스템의 사용자로부터 수신된 입력, 예컨대 키 누름, 마우스 클릭, 음성 커맨드, 제스처 모션 등에 의해 제어가능한 사용자 인터페이스의 활성 상태 요소(예컨대, 애플리케이션과 연관된 윈도우, 애플리케이션과 연관된 특정한 툴바 또는 메뉴, 또는 운영 체제)를 지칭할 수 있다.
일부 실시예들에서, 컴퓨팅 시스템 또는 그의 컴포넌트(예컨대, 도 3a의 포커스 판정 모듈(351))는 포커스를 두고 있는 일차 디스플레이 상에 디스플레이된 제1 사용자 인터페이스의 사용자 인터페이스 요소를 식별한다. 일부 실시예들에서, 포커스를 두고 있는 사용자 인터페이스 요소는 애플리케이션에 대응하는 윈도우, 애플리케이션의 윈도우 내부에 또는 외부에 있는 애플리케이션에 대응하는 사용자 인터페이스 요소(예컨대, 필드, 서브윈도우, 메뉴, 툴, 툴바, 툴 세트 등), 또는 데스크톱/운영 체제 관련 인터페이스의 일부분(예컨대, 볼륨 제어부, 파일 탐색기 인터페이스의 일부분 또는 제어부/설정 패널)이다. 일부 실시예들에서, 활성 상태 사용자 인터페이스 요소는 일차 디스플레이 상에서 하이라이트되거나, 또는 그것이 포커스를 두고 있다는 것을 나타내도록 일차 디스플레이 상의 전경 위치에 디스플레이된다. 일부 실시예들에서, 활성 상태 사용자 인터페이스 요소의 디스플레이 특성은 그것이 포커스를 두고 있다는 것을 나타내도록 변경 또는 강조된다(예컨대, 유색 텍스트, 굵은 텍스트, 두꺼운 경계부 등). 대안으로 그리고/또는 추가로, 일부 실시예들에서, 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 나타내도록 시각적 및/또는 청각적 큐(cue)들이 제공된다(예컨대, 포커스가 변경될 때 차임이 울리거나, 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소 위로 통통 튀는 별이 디스플레이되거나, 또는 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소의 디스플레이 특성이 일차 디스플레이 상에 디스플레이된 제1 사용자 인터페이스의 밸런스와는 상이함).
도 5b에서, 예를 들어, 애플리케이션 A에 대한 윈도우(536)는 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 5b에서, 상태 트레이(502)는 애플리케이션 A가 전경에서 구동 중이라는 것을 나타내고, 앱 트레이(514)는, 또한, 애플리케이션 A 아이콘(512) 뒤의 그림자에 기초하여, 애플리케이션 A가 전경에서 구동 중이라는 것을 나타낸다. 도 6a에서, 예를 들어, 윈도우(554) 내에 보여진 사용자의 미디어 라이브러리의 음악 서브섹션은 굵은 글씨체로 디스플레이된 "Music" 및 윈도우(554) 내에 적어도 부분적으로 디스플레이된 앨범 A 내지 앨범 L에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 대조적으로, 도 6b에서, 예를 들어, 윈도우(554) 내에 보여진 사용자의 미디어 라이브러리의 팟캐스트 서브섹션은 굵은 글씨체로 디스플레이된 "Podcasts" 및 윈도우(554) 내에 적어도 부분적으로 디스플레이된 팟캐스트 A 내지 팟캐스트 L에 의해 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 7b에서, 예를 들어, 윈도우(580) 내에서 새로운 이메일을 작성하기 위한 서브윈도우는 서브윈도우를 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 8c에서, 예를 들어, 메뉴(5134) 내의 사용자의 주소록의 "Family" 그룹 탭은 메뉴(5134)의 "Family" 그룹 탭을 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 11h에서, 예를 들어, 윈도우(5224) 내의 탭 B에 대한 인터페이스는 탭 B를 둘러싼 두꺼운 선들 및 탭 B에 대한 굵은 텍스트로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 12e에서, 예를 들어, 윈도우(5224) 내의 북마크 사이드바는 북마크 사이드바를 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 13c에서, 예를 들어, 편집 제어부들의 메뉴(5296)는 일차 디스플레이(102) 상에 포커스를 두고 있다.
컴퓨팅 시스템은 일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소가 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관되는지의 여부를 판정한다(612). 일부 실시예들에서, 활성 상태 사용자 인터페이스 요소는 애플리케이션 또는 운영 체제 중 어느 하나와 연관된다. 일부 실시예들에서, 컴퓨팅 시스템 또는 그의 컴포넌트(예컨대, 도 3a의 DFR 판정 모듈(352))는 일차 디스플레이(102) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소에 기초하여 동적 기능 열(104) 상의 디스플레이를 위한 어포던스들의 세트를 판정하고, 또한, 활성 상태 사용자 인터페이스 요소가 특정 애플리케이션과 연관되는지 운영 체제와 연관되는지를 판정한다.
일부 실시예들에서, 애플리케이션은 제1 사용자 인터페이스의 전경에서 프로세서에 의해 실행된다(614). 예를 들어, 애플리케이션은 이메일 애플리케이션, 워드 프로세싱 애플리케이션, 프레젠테이션 애플리케이션, 사진 편집하기 애플리케이션, 음악 애플리케이션, 게임 애플리케이션, 스프레드시트 애플리케이션 등 중 하나이다. 도 5b 내지 도 5e는, 예를 들어, 컴퓨팅 시스템에 의해 전경에서 실행되는 애플리케이션 A(예컨대, 판타지 RPG 게임)에 대응하는 윈도우(536)를 포함하는 일차 디스플레이(102)에 의해 디스플레이되는 제1 사용자 인터페이스를 도시한다. 도 6a 내지 도 6d는, 예를 들어, 컴퓨팅 시스템에 의해 전경에서 실행되는 미디어 플레이어 애플리케이션에 대응하는 윈도우(554)를 포함하는 일차 디스플레이(102)에 의해 디스플레이되는 제1 사용자 인터페이스를 도시한다. 도 6e 내지 도 9는, 예를 들어, 컴퓨팅 시스템에 의해 전경에서 실행되는 메일 애플리케이션에 대응하는 윈도우(580)를 포함하는 일차 디스플레이(102)에 의해 디스플레이되는 제1 사용자 인터페이스를 도시한다. 도 10a 내지 도 11a는, 예를 들어, 컴퓨팅 시스템에 의해 전경에서 실행되는 사진 애플리케이션에 대응하는 윈도우(5166)를 포함하는 일차 디스플레이(102)에 의해 디스플레이되는 제1 사용자 인터페이스를 도시한다. 도 11b 내지 도 12g는, 예를 들어, 컴퓨팅 시스템에 의해 전경에서 실행되는 웹 브라우저 애플리케이션에 대응하는 윈도우(5224)를 포함하는 일차 디스플레이(102)에 의해 디스플레이되는 제1 사용자 인터페이스를 도시한다.
일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소가 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관된다는 판정에 따라, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 제2 사용자 인터페이스를 디스플레이하며, 제2 사용자 인터페이스는 하기를 포함한다(616): (A) 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트; 및 (B) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스. 일부 실시예들에서, 하나 이상의 어포던스들의 제1 세트는 선택가능할 수 있거나 또는 선택가능하지 않을 수 있는 사용자 선택가능 심볼들/아이콘들 및/또는 표시자들 및 정보를 포함한다. 일부 실시예들에서, 하나 이상의 어포던스들의 제1 세트는 애플리케이션에 대한 기본 제어부들에 대응한다. 일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는 하나 이상의 어포던스들의 제1 세트와 함께 디스플레이된다. 일례에서, 도 5a 내지 도 14e에서, 적어도 하나의 시스템 레벨 어포던스는 지속적 어포던스들(516, 534)을 포함한다. 다른 예에서, 도 5c에서, 적어도 하나의 시스템 레벨 어포던스는, (예컨대, 탭핑 접촉으로) 활성화될 때, 복수의 시스템 레벨 어포던스들(예컨대, 도 5a에 도시된 어포던스들(518, 520, 522, 524, 526, 528, 530, 532))의 디스플레이를 야기하는 어포던스(542)를 포함한다.
도 11c는, 예를 들어, 도 11b에서 어포던스(5226)의 선택을 검출한 것에 응답하여, 적어도 하나의 시스템 레벨 어포던스(542)와 함께, 일차 디스플레이(102) 상에 포커스를 두고 있는 웹 브라우저 애플리케이션에 대한 기본 제어부들의 세트 및 표시자들(예컨대, 어포던스들(5230, 5232, 5238) 및 어드레스 바(5234))을 디스플레이하는 동적 기능 열(104)을 도시한다. 일부 실시예들에서, 하나 이상의 어포던스들의 제1 세트는 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소와 연관된 제어부들에 대응한다. 이와 같이, 컴퓨팅 시스템의 사용자는, 애플리케이션에 입력을 제공하고 그의 기능들을 제어하기 위한 하나 이상의 어포던스들의 제1 세트로부터 제어부들을 선택할 수 있는데, 이때, 그러한 선택가능한 제어부들이 일차 디스플레이 상에 디스플레이될 때, 그의/그녀의 양손을 물리적 키들의 세트로부터 다른 입력 디바이스(예컨대, 마우스)로 떨어지게 시프트시키지 않으면서 선택할 수 있다. 예를 들어 사용자의 양손에 대해 키보드와 마우스 사이에서의 그리고 사용자의 양눈에 대해 키보드와 디스플레이 사이에서의 모드 스위칭의 이러한 감소는 더 직관적인 사용자 경험 및 더 효율적인 인간-기계 인터페이스를 제공한다. 도 6e는, 예를 들어, 도 6d에서 커서(504)를 사용한 메일 애플리케이션 아이콘(506)의 선택을 검출한 것에 응답하여, 적어도 하나의 시스템 레벨 어포던스(542)와 함께, 일차 디스플레이(102) 상에 포커스를 두고 있는 이메일 A에 대응하는 복수의 어포던스들(예컨대, 어포던스들(582, 584, 586, 588, 590, 592, 594, 596, 598))을 디스플레이하는 동적 기능 열(104)을 도시한다.
일차 디스플레이 상에서 이루어진 포커스의 변경들에 응답하여 터치 감응형 이차 디스플레이에 애플리케이션 특정 및 시스템 레벨 어포던스들을 디스플레이하는 것은 사용자에게 터치 감응형 이차 디스플레이를 통해 직접적으로 이용가능한 액세스가능한 어포던스들을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 직접적으로 액세스가능하게 통하는 액세스가능한 어포던스들을 제공하는 것은 (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 마찬가지로, 터치 감응형 이차 디스플레이 상의 애플리케이션 특정 어포던스들의 디스플레이는 일차 디스플레이 상에 현재 포커스를 두고 있는 애플리케이션과 연관된 어포던스들을 제공함으로써 디바이스의 내부 상태를 나타낸다.
일부 실시예들에서, 컴퓨팅 시스템의 사용자는 하나 이상의 어포던스들의 제1 세트에 포함된 어포던스를 수정 또는 커스텀화할 수 있다. 일부 실시예들에서, 일차 디스플레이(102) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스를 식별하고 하나 이상의 어포던스들의 제1 세트를 디스플레이하기 전, 동적 기능 열(104)은 컴퓨팅 시스템의 사용자에 의해 설정되거나 소프트웨어로 설정된 디폴트 인터페이스를 디스플레이한다. 예를 들어, 디폴트 인터페이스는 복수의 기능 키들(예컨대, F1, F2, F3, …, F12), 주식 티커(stock ticker), 스포츠 스코어를 스크롤하는 것, 날씨 예보 및 정보를 스크롤하는 것, 등 중 하나를 포함한다.
일부 실시예들에서, 제1 사전결정된 기간(예컨대, 30초, 60초, 90초 등) 동안에 하나 이상의 어포던스들의 제1 세트를 디스플레이한 후, 동적 기능 열(104)은 컴퓨팅 시스템의 사용자에 의해 설정되거나 소프트웨어로 설정된 디폴트 인터페이스를 재디스플레이한다. 일부 실시예들에서, 제1 사전결정된 기간(예컨대, 30초, 60초, 90초 등) 동안에 하나 이상의 어포던스들의 제1 세트를 디스플레이한 후, 동적 기능 열(104)은 접촉이 동적 기능 열(104), 또는 컴퓨팅 시스템과 연관된 키보드 또는 터치패드에 의해 검출될 때까지 턴오프된다. 일부 실시예들에서, 제1 사전결정된 기간(예컨대, 30초, 60초, 90초 등) 동안에 하나 이상의 어포던스들의 제1 세트를 디스플레이한 후, 동적 기능 열(104)은 (예컨대, 동적 기능 열이 도 2a 및 도 2b의 배터리 전력 공급형 주변기기 키보드(206)에 구현되는 경우) 전원에 접속될 때까지 턴오프된다. 일부 실시예들에서, 하나 이상의 어포던스들의 제1 세트를 디스플레이하고, 제2 사전결정된 기간(예컨대, 30초, 60초, 90초 등) 동안에 하나 이상의 어포던스들의 제1 세트에 대해 사용자 입력을 검출하지 않은 후, 동적 기능 열(104)은 컴퓨팅 시스템의 사용자에 의해 설정되거나 소프트웨어로 설정된 디폴트 인터페이스를 재디스플레이한다. 일부 실시예들에서, 운영 체제가 포커스를 두고 있거나 활성 상태 사용자 인터페이스 요소가 전경에서 구동 중인 애플리케이션과 연관되지 않는 경우, 동적 기능 열(104)은 컴퓨팅 시스템의 사용자에 의해 설정되거나 소프트웨어로 설정된 디폴트 인터페이스를 재디스플레이한다.
일부 실시예들에서, 제1 사전결정된 기간(예컨대, 30초, 60초, 90초 등) 동안에 하나 이상의 어포던스들의 제1 세트를 디스플레이한 후, 그리고 컴퓨팅 시스템이 저전력 모드에 설정되어 있을 때, 동적 기능 열(104)은, 예를 들어 시간, 배터리 잔여 수명, Wi-Fi 신호 강도 등을 비롯한 어포던스들의 제한된 세트를 디스플레이한다. 예를 들어, 어포던스들의 제한된 세트는 컴퓨팅 시스템의 사용자에 의해 선택되거나 또는 소프트웨어로 설정되며, 컴퓨팅 시스템의 사용자는 시스템 설정 패널을 통해 컴퓨팅을 저전력 모드로 설정할 수 있다.
일부 실시예들에서, 제2 사용자 인터페이스 상에 디스플레이된 어포던스들 중 적어도 하나는 다기능 어포던스이다(618). 일부 실시예들에서, 다기능 어포던스는 다기능 어포던스에 대응하는 위치에서 수행되는 상이한 입력들을 검출한 것에 응답하여 2개 이상의 기능들/동작들을 수행할 수 있다. 예를 들어, 도 6e에서, 제2 사용자 인터페이스 내에 동적 기능 열(104)에 의해 디스플레이된 지속적 볼륨 제어부(568)는 다기능 어포던스이다.
일부 실시예들에서, 컴퓨팅 시스템은 다기능 어포던스를 선택하는 사용자 터치 입력을 검출한다(620). 사용자 터치 입력이 제1 타입에 대응한다는 판정에 따라, 컴퓨팅 시스템은 다기능 어포던스와 연관된 제1 기능을 수행한다. 사용자 터치 입력이 제1 타입과는 별개인 제2 타입에 대응한다는 판정에 따라, 컴퓨팅 시스템은 다기능 어포던스와 연관된 제2 기능을 수행한다. 예를 들어, 제1 기능/동작(예컨대, 미디어 아이템을 음소거함)은 다기능 어포던스에 대응하는 위치에서의 제1 제스처(예컨대, 탭핑 접촉)을 검출한 것에 응답하여 수행되고, 제2 기능/동작(예컨대, 미디어 아이템에 대한 볼륨 슬라이더 또는 재생 제어부들을 디스플레이함)은 다기능 어포던스에 대응하는 위치에서의 제2 제스처(예컨대, 길게 누르기 제스처)를 검출한 것에 응답하여 수행된다. 예를 들어, 제1 제스처 타입은 하나 이상의 접촉들(예컨대, 탭핑 접촉)로 사전결정된 기간(예컨대, 500ms, 1s 등) 미만 동안에 검출된 터치 입력에 대응하고, 제2 제스처 타입은 하나 이상의 접촉들(예컨대, 길게 누르기 제스처)로 사전결정된 기간(예컨대, 500ms, 1s 등) 이상 동안에 검출된 터치 입력에 대응한다.
도 6e는, 예를 들어, 지속적 볼륨 제어부(568)에 대응하는 위치에서의 접촉(599)(예컨대, 길게 누르기 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 도 6f는, 도 6e에서 지속적 볼륨 제어부(568)에 대응하는 위치에서의 길게 누르기 제스처를 검출한 것에 응답하여 도 6c에서 개시된 팟캐스트 J의 재생 볼륨을 조정하기 위한 볼륨 슬라이더(5100)를 디스플레이하는 동적 기능 열(104)을 도시한다. 대안으로, 일부 실시예들에서, 동적 기능 열(104)은, 도 6e에서 지속적 볼륨 제어부(568)에 대응하는 위치에서 길게 누르기 제스처를 검출한 것에 응답하여 도 6c에서 개시된 팟캐스트 J의 재생을 제어하기 위한 재생 제어부들(예컨대, 일시정지, 고속 감기, 되감기, 다음 트랙, 이전 트랙 등)을 디스플레이한다. 도 7b는, 예를 들어, 지속적 볼륨 제어부(568)에 대응하는 위치에서의 접촉(5124)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 도 7c는, 도 7b에서 지속적 볼륨 제어부(568)에 대응하는 위치에서의 탭핑 접촉을 검출한 것에 응답하여 팟캐스트 J가 음소거되어 있다는 것을 나타내는 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는, 선택 시, 터치 스크린 디스플레이 상에서의, 시스템 레벨 기능들에 대응하는 복수의 시스템 레벨 어포던스들의 디스플레이를 야기하도록 구성된다(622). 일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는 볼륨 및 명도 제어부들과 같은 복수의 시스템 레벨 제어부들/어포던스들, 및 다른 시스템 레벨 기능들에의 액세스를 가능하게 한다. 예를 들어, 도 5d에서, 동적 기능 열(104)은 애플리케이션 A 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))에 대응하는 어포던스들의 제2 세트 및/또는 표시자들(예컨대, 제어부 세트 B)을 디스플레이한다. 도 5c에서, 동적 기능 열(104)은 또한 어포던스(542)에 대응하는 위치에서의 접촉(552)(예컨대, 탭핑 접촉)을 검출한다. 이러한 예를 계속 참조하면, 도 5e는, 도 5d에서 어포던스(542)의 선택을 검출한 것에 응답하여 지속적 제어부들(즉, 어포던스들(516, 534)), 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)), 및 애플리케이션 A에 대응하는 어포던스(538)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는 전력 제어부 또는 이스케이프 제어부 중 하나에 대응한다(624). 일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는, 일차 디스플레이(102)의 포커스와는 무관하게 동적 기능 열(104) 상에 디스플레이되는 지속적 제어부들(예컨대, 도 5a 내지 도 14e의 이스케이프 어포던스(516) 및 전력 제어부(534))을 포함한다. (예컨대, 탭핑 접촉을 통해) 활성화될 때, 이스케이프 어포던스(516)는 대응하는 기능의 수행(예컨대, 일차 디스플레이(102) 상에 현재 포커스를 두고 있는 애플리케이션을 나가는 것)을 야기한다. (예컨대, 탭핑 접촉을 통해) 활성화될 때, 전력 제어부(534)는 동적 기능 열(104) 상에서의, 컴퓨팅 시스템을 로그아웃, 재시작, 또는 시스템 종료하기 위한 모드 경고(예컨대, 도 14e의 모드 경고(5308))의 디스플레이를 야기한다.
일부 실시예들에서, 컴퓨팅 시스템은 어포던스들의 제1 세트의 하나의 어포던스를 선택하는 사용자 터치 입력을 검출하고, 사용자 터치 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 애플리케이션의 기능들에 대응하는 어포던스들의 상이한 세트를 디스플레이하고, 적어도 하나의 시스템 레벨 어포던스의 디스플레이를 유지한다(626). 일부 실시예들에서, 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트는 애플리케이션과 연관된 툴들 또는 기능들의 세트에 액세스하기 위한 단일 어포던스를 포함한다. 도 5b는, 예를 들어, 도 5a에서 커서(504)를 사용한 애플리케이션 A 아이콘(512)의 선택을 검출한 것에 응답하여, 지속적 제어부들(즉, 어포던스들(516, 534)) 및 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)) 외에도, 일차 디스플레이(102) 상에 포커스를 두고 있는 애플리케이션 A에 대응하는 어포던스(538)를 디스플레이하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 도 5c는 도 5b에서 어포던스(538)의 선택을 검출한 것에 응답하여 애플리케이션 A에 대응하는 어포던스들의 제1 세트 및/또는 표시자들(예컨대, 제어부 세트 A)을 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 컴퓨팅 시스템은 적어도 하나의 시스템 레벨 어포던스를 선택하는 후속의 사용자 터치 입력을 검출하고, 후속의 사용자 터치 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 시스템 레벨 기능들에 대응하는 복수의 시스템 레벨 어포던스들 및 애플리케이션에 대응하는 적어도 하나의 애플리케이션 레벨 어포던스를 디스플레이한다(628). 도 5d는, 예를 들어, 일차 디스플레이(102) 상에 포커스를 두고 있는 애플리케이션 A에 대응하는 어포던스들의 제2 세트 및/또는 표시자들(예컨대, 제어부 세트 B) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 도 5d에서 어포던스(542)의 선택을 검출한 것에 응답하여, 도 5e는 지속적 제어부들(즉, 어포던스들(516, 534)), 복수의 시스템 레벨 어포던스들(즉, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)), 및 애플리케이션 A에 대응하는 어포던스(538)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 터치 스크린 디스플레이 상에 제2 사용자 인터페이스를 디스플레이한 후, 컴퓨팅 시스템은 하나 이상의 사용자 인터페이스 요소들 중에서 일차 디스플레이 상에 포커스를 두고 있는 제2 활성 상태 사용자 인터페이스 요소를 식별하고, 제2 활성 상태 사용자 인터페이스 요소가 컴퓨팅 디바이스에 의해 실행되는 상이한 애플리케이션에 대응하는지의 여부를 판정한다(630). 제2 활성 상태 사용자 인터페이스 요소가 상이한 애플리케이션에 대응한다는 판정에 따라, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 제4 사용자 인터페이스를 디스플레이하고, 제4 사용자 인터페이스는 하기를 포함한다: (D) 상이한 애플리케이션에 대응하는 하나 이상의 어포던스들의 제3 세트; 및 (E) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스. 도 6a는, 예를 들어, 일차 디스플레이(102) 상에 포커스를 두고 있는 사용자의 미디어 라이브러리의 서브섹션에 대응하는 복수의 앨범 어포던스들(558)(예컨대, 앨범 어포던스들(558-A 내지 558-G)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 6a는, 또한, 사용자의 미디어 라이브러리의 팟캐스트 서브섹션에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 이러한 예를 계속 참조하면, 도 6a에서 커서(504)를 사용한 팟캐스트 서브섹션의 선택을 검출한 것에 응답하여, 도 6b는 일차 디스플레이(102) 상에 현재 포커스를 두고 있는 사용자의 미디어 라이브러리의 팟캐스트 서브섹션에 대응하는 제1 복수의 팟캐스트 어포던스들(560)(예컨대, 팟캐스트 어포던스들(560-A 내지 560-G)) 및 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 컴퓨팅 시스템은 포커스를 두고 있는 상이한 사용자 인터페이스 요소를 나타내는 청각적 큐들을 제공한다. 일부 실시예들에서, 일차 디스플레이(102)는 포커스를 두고 있는 상이한 사용자 인터페이스 요소를 나타내는 시각적 큐를 디스플레이한다. 예를 들어, 도 6b에 대해, 일차 디스플레이(102)는 윈도우(554) 내의 좌측 행에 있는 "podcasts" 텍스트 위에 별 표시자(도시되지 않음)를 디스플레이하거나, 윈도우(554) 내의 좌측 행에 "podcasts" 텍스트를 굵은 글씨체로 만들거나, 윈도우(554) 내의 좌측 행에 있는 "podcasts" 텍스트를 상이한 색상 또는 동일한 색상으로 플래싱(flash)하거나, 또는 팟캐스트 서브섹션이 일차 디스플레이(102) 상에 현재 포커스를 두고 있다는 것을 다른 방식으로 나타낸다. 일부 실시예들에서, 동적 기능 열(104)은 전이 애니메이션을 디스플레이하고, 이에 의해, 복수의 앨범 어포던스들(558)(도 6a에 도시됨)은 경로 위로 롤링(roll)되거나 경로를 벗어나서 슬라이드되어 제1 복수의 팟캐스트 어포던스들(560)(도 6b에 도시됨)을 디스플레이하게 한다.
일부 실시예들에서, 제2 활성 상태 사용자 인터페이스 요소를 식별한 후, 컴퓨팅 시스템은 상이한 애플리케이션과 연관되지 않는 미디어(예컨대, 오디오 또는 비디오) 아이템이 컴퓨팅 시스템에 의해 재생되는 중인지의 여부를 판정하며, 미디어 아이템이 컴퓨팅 시스템에 의해 재생되는 중이라는 판정에 따라, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 미디어 아이템을 제어하기 위한 적어도 하나의 지속적 어포던스(예컨대, 볼륨 및/또는 재생 제어부들)를 디스플레이한다(632). 일부 실시예들에서, 적어도 하나의 어포던스는, 포커스가 변경되거나 미디어가 음소거되고/되거나 배경에서 재생되는 중인 경우에도, 컴퓨팅 시스템의 사용자가 미디어 아이템을 터치 스크린 디스플레이로부터 음소거/음소거해제할 수 있게 하는 지속적 제어부이다. 도 6d는, 예를 들어, 팟캐스트 J의 재생을 개시하는 도 6c에서의 팟캐스트 어포던스(560-J)의 선택을 검출한 것에 응답하여, 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 7a는, 예를 들어, 애플리케이션의 이메일 A가 일차 디스플레이(102) 상에 포커스를 두고 있는 동안에도 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 적어도 하나의 지속적 어포던스는 미디어 아이템에 대응하는 피드백(예컨대, 이퀄라이저(EQ) 바, 런타임 표시자 등)을 디스플레이한다(634). 도 6d는, 예를 들어, 팟캐스트 J의 재생에 대응하는 이퀄라이저 바를 갖는 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다. 유사하게, 도 7c는, 예를 들어, 팟캐스트 J의 재생이 음소거되는 동안에도 이퀄라이저 바를 갖는 지속적 볼륨 제어부(568)를 디스플레이하는 동적 기능 열(104)을 도시한다. 일부 실시예들에서, 동적 기능 열(104)은 재생 중인 미디어 아이템, 또는 날씨 표시자, 마이크로폰 캡처 표시자, 또는 Wi-Fi 신호 강도 표시자와 같은 일부 다른 실시간 정보에 기초하여 계속해서 업데이트되는 어포던스를 포함한다.
일부 실시예들에서, 컴퓨팅 디바이스는 오버라이드 키에 대응하는 사용자 입력을 검출하며, 사용자 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 제2 사용자 인터페이스의 하나 이상의 어포던스들의 적어도 제1 세트를 디스플레이하는 것을 중지하고, 디폴트 기능 키들의 제1 세트를 디스플레이한다(636). 일부 실시예들에서, 오버라이드 키에 대응하는 사용자 입력은 입력 메커니즘(예컨대, 기능 키와 같은 특정된 물리적 키의 작동)으로부터 또는 동적 기능 열(예컨대, "escape" 어포던스(516)와 같은 가상 키의 선택)로부터 신호를 수신한 것에 응답하여 검출된다. 예를 들어, 사용자는 "fn" 키를 작동시켜서, 동적 기능 열(104)에 의해 디스플레이되는 현재 어포던스들을 무시하고 디폴트 F1, F2, F3, …, F12 열을 디스플레이한다. 도 14a는, 예를 들어, 동적 기능 열(104)을 오버라이드하기 위한 특정된 물리적 키(예컨대, 기능 키)에 대응하는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 내지 도 2d)의 물리적 키들의 세트(106)로부터 신호를 수신한 것에 응답하여, 지속적 제어부들(예컨대, 어포던스들(516, 534))과 함께, 어포던스들(5301)(예컨대, F1, F2, F3, …, F12에 대응함)을 갖는 인터페이스(5300)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 오버라이드 키에 대응하는 사용자 입력을 검출한 것에 응답하여, 동적 기능 열(104)은 컴퓨팅 시스템의 사용자에 의해 설정되거나 소프트웨어로 설정된 디폴트 인터페이스를 디스플레이한다. 예를 들어, 디폴트 인터페이스는 복수의 기능 키들(예컨대, F1, F2, F3, …, F12), 주식 티커, 스포츠 스코어를 스크롤하는 것, 날씨 예보를 스크롤하는 것 등 중 하나를 포함한다.
일부 실시예들에서, 디폴트 기능 키들의 제1 세트를 디스플레이한 후, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에서 터치 스크린 디스플레이의 주요 치수에 실질적으로 평행인 방향으로의 제스처를 검출하고, 스와이프 제스처를 검출한 것에 응답하여, 적어도 하나의 별개의 기능 키(예컨대, 이전에 디스플레이되지 않은 기능 키)를 갖는 디폴트 기능 키들의 제2 세트를 디스플레이한다(638). 예를 들어, 도 14a에 대해, 컴퓨팅 시스템의 사용자는 동적 기능 열(104) 상에서 실질적으로 수평인 스와이프 제스처(예컨대, 우측으로부터 좌측으로의 스와이프 제스처 또는 좌측으로부터 우측으로의 스와이프 제스처 중 하나)를 수행함으로써 동적 기능 열(104) 상에서 인터페이스(5300) 내에 추가적인 기능 키들(예컨대, F13, F14, F15, …)을 드러내게 할 수 있다.
일부 실시예들에서, 활성 상태 사용자 인터페이스 요소가 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관되지 않는다는 판정에 따라, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 제3 사용자 인터페이스를 디스플레이하고, 제3 사용자 인터페이스는 하기를 포함한다(640): (C) 컴퓨팅 시스템의 운영 체제 제어부들에 대응하고, 하나 이상의 어포던스들의 제1 세트와는 별개인 하나 이상의 어포던스들의 제2 세트. 도 5a에서, 예를 들어, 시스템/운영 체제는 일차 디스플레이(102) 상에 현재 포커스를 두고 있다. 예를 들어, 일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소는 볼륨 제어부, 시스템 제어부(예컨대, 명도 또는 볼륨 제어부), 시스템 설정, 시작 메뉴, 파일 탐색기, 시스템 검색 등과 같은 운영 체제와 연관된다. 도 5a는 지속적 어포던스들(예컨대, 어포던스들(516, 534))과 함께 복수의 시스템 레벨 어포던스들(예컨대, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532))을 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는, (B) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하는 운영 체제 제어부들의 확장된 세트이다(642). 도 8e는, 예를 들어, 도 8d에서 어포던스(542)의 선택을 검출한 것에 응답하여, 지속적 어포던스들(예컨대, 어포던스들(516, 534))과 함께, 복수의 시스템 레벨 어포던스들(예컨대, 어포던스들(518, 520, 522, 524, 526, 528, 530, 532)을 비롯한 확장된 세트의 운영 체제 제어부들)을 디스플레이하는 동적 기능 열(104)을 도시한다.
도 44a 내지 도 44d에서의 동작들이 기술된 특정 순서는 단지 일례이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(700, 800, 900, 1000))과 관련하여 본 명세서에 기술된 다른 프로세스들의 세부사항들이 도 44a 내지 도 44d와 관련하여 전술된 방법(600)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다.
도 45a 내지 도 45c는 일부 실시예들에 따른, 동적 입출력 디바이스(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)을 포함함)를 업데이트하는 방법의 흐름도이다. 방법(700)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다. 방법(700)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))을 포함하고 물리적 키보드를 포함하지 않는다.
컴퓨팅 시스템은 일차 디스플레이 상에서 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스를 디스플레이한다(702). 도 8a는, 예를 들어, 사용자의 주소록에 대응하는 메뉴(5134)를 갖는 제1 사용자 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 8a에서, 메뉴(5134)는 사용자의 주소록(예컨대, 기존 또는 자동으로 덧붙여진 연락처들의 목록)의 "All Contacts" 그룹에 대응하는 복수의 연락처들의 목록을 포함하는데, 이는 메뉴(5134)에서 "All Contacts" 그룹을 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다. 도 13b는, 예를 들어, 윈도우(5166) 상에 오버레이되고 일차 디스플레이(102) 상에 포커스를 두고 있는 파일 제어부들의 메뉴(5288)를 갖는 제1 사용자 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다.
컴퓨팅 시스템은 터치 스크린 디스플레이 상에 제2 사용자 인터페이스 - 제2 사용자 인터페이스는 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트를 포함하고, 하나 이상의 어포던스들의 제1 세트는 애플리케이션의 제1 부분에 대응함 - 를 디스플레이한다(704). 일부 실시예들에서, 애플리케이션의 상위 메뉴 또는 파일 메뉴(즉, 제1 부분 또는 서브섹션)와 연관된 하나 이상의 어포던스들의 제1 세트. 도 8a는, 예를 들어, 일차 디스플레이(102) 상에 포커스를 두고 있는 사용자의 주소록의 "All Contacts" 그룹에 대응하는 제1 복수의 연락처 어포던스들(5136-A 내지 5136-F)(즉, 어포던스들의 제1 세트)을 갖는 제2 사용자 인터페이스를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 13b는, 예를 들어, 일차 디스플레이(102) 상에 포커스를 두고 있는 파일 제어부들의 메뉴(5288)에 대응하는 제1 복수의 어포던스들(5290)(즉, 어포던스들의 제1 세트)을 갖는 제2 사용자 인터페이스를 디스플레이하는 동적 기능 열(104)을 도시한다.
컴퓨팅 시스템은 터치 스크린 디스플레이 상에서 스와이프 제스처를 검출한다(706). 제1 예에서, 도 8a는 제1 위치(5140-A)로부터 제2 위치(5140-B)로 이동하는 접촉(5138)을 갖는 우측으로부터 좌측으로의 스와이프 제스처를 검출하는 동적 기능 열(104)을 도시한다. 다른 예에서, 도 13b는 제1 위치(5294-A)로부터 제2 위치(5294-B)로 이동하는 접촉(5292)을 갖는 상향 스와이프 제스처를 검출하는 동적 기능 열(104)을 도시한다.
스와이프 제스처가 제1 방향(예컨대, 수평)으로 수행되었다는 판정에 따라, 컴퓨팅 시스템은, 터치 스크린 디스플레이 상에 애플리케이션에 대응하는 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트의 적어도 하나의 어포던스는 하나 이상의 어포던스들의 제1 세트와는 별개이고, 하나 이상의 어포던스들의 제2 세트는 또한 애플리케이션의 제1 부분에 대응함 - 를 디스플레이한다(708). 일부 실시예들에서, 제1 방향으로의 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열은, 애플리케이션의 제1 부분에 또한 대응하는 어포던스들의 제1 세트에 비해 상이한 어포던스들의 제2 세트 - 어포던스들의 제2 세트는 적어도 하나의 상이한 어포던스(예컨대, 툴 또는 아이템)를 갖는 애플리케이션의 제1 부분(예컨대, 툴 세트 또는 메뉴)에 대응함 - 를 디스플레이한다. 예를 들어, 도 8a에서 우측으로부터 좌측으로의 스와이프 제스처를 검출한 것에 응답하여, 도 8b는 사용자의 주소록의 "All Contacts" 그룹에 대응하는 제2 복수의 연락처 어포던스들(5136-E 내지 5136-J)(즉, 어포던스들의 제2 세트)을 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 제1 방향은 터치 스크린 디스플레이의 주요 치수에 실질적으로 평행이다(710). 예를 들어, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)을 참조하면, 제1 방향은 동적 기능 열(104) 및/또는 물리적 키들의 세트(106)의 주요 치수에 대해 실질적으로 수직이다.
일부 실시예들에서, 제1 방향은 터치 스크린 디스플레이의 주요 치수에 실질적으로 수직이다(712). 예를 들어, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)을 참조하면, 제1 방향은 동적 기능 열(104) 및/또는 물리적 키들의 세트(106)의 주요 치수에 대해 실질적으로 평행(예컨대, 수평)이다.
스와이프 제스처가 제1 방향(예컨대, 수직)에 대해 실질적으로 수직인 제2 방향으로 수행되었다는 판정에 따라, 컴퓨팅 시스템은, 터치 스크린 디스플레이 상에 애플리케이션에 대응하는 하나 이상의 어포던스들의 제3 세트 - 하나 이상의 어포던스들의 제3 세트는 하나 이상의 어포던스들의 제2 세트와는 별개이고, 하나 이상의 어포던스들의 제3 세트는 애플리케이션의 제1 부분과는 별개인 애플리케이션의 제2 부분에 대응함 - 를 디스플레이한다(714). 일부 실시예들에서, 제2 방향으로의 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열은, 어포던스들의 제1 세트와 연관된 애플리케이션의 제1 부분에 비해 상이한 어포던스들의 제3 세트 - 어포던스들의 제3 세트는 애플리케이션의 제2 부분(예컨대, 상이한 툴 세트 또는 메뉴)에 대응함 - 를 디스플레이한다. 예를 들어, 도 13b에서 상향 스와이프 제스처를 검출한 것에 응답하여, 도 13c는 일차 디스플레이(102) 상에 포커스를 두고 있는 편집 제어부들의 메뉴(5296)에 대응하는 제2 복수의 어포던스들(5298)(즉, 어포던스들의 제3 세트)을 디스플레이하는 동적 기능 열(104)을 도시한다. 일부 실시예들에서, 동적 기능 열(104)은 전이 애니메이션을 디스플레이하고, 이에 의해, 제1 복수의 어포던스들(5290)(도 13b에 도시됨)은 경로 위로 롤링되거나 경로를 벗어나서 슬라이드되어 제2 복수의 팟캐스트 어포던스들(598)(도 13c에 도시됨)을 디스플레이하게 한다.
이와 같이, 일 실시예에서, 동적 기능 열(104) 상에서 검출된 수평 스와이프는 그룹 또는 카테고리 내에서 이동 또는 스크럽(scrub)되고, 수직 스와이프는 카테고리/필터를 변경한다. 그 결과, 컴퓨팅 시스템의 사용자는 그의/그녀의 양손을 키보드로부터 마우스로 떨어지게 이동시키지 않으면서 툴들 및 메뉴들을 용이하게 내비게이팅할 수 있다. 이는, 또한, 정보의 더 효율적인 디스플레이를 가능하게 하고, 더 효율적인 인간-기계 상호작용을 허용한다.
스와이프 제스처들에 응답하여 사용자가 터치 감응형 이차 디스플레이에서 애플리케이션 특정 어포던스들을 통해 빠르게 내비게이팅하게 하는 것은 사용자에게 터치 감응형 이차 디스플레이를 통해 스크롤하고 원하는 기능을 빠르게 찾아내기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 스크롤하고 원하는 기능을 빠르게 찾아내기 위한 편리한 방식을 제공하는 것은 (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이, 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 더욱이, 이차 디스플레이에서의 스와이프 제스처들에 응답하여 터치 감응형 이차 디스플레이에 디스플레이되는 어포던스들을 동적으로 업데이트함으로써, 이차 디스플레이는 제한된 스크린 상에서 더 많은 정보가 이용가능하게 되게 할 수 있으며, 원하는 옵션들이 필요할 때 사용자들에게 바로 그러한 옵션들이 제공됨을 보장하는 것을 돕는다(이에 의해, 전력 사용량을 감소시키고 배터리 수명을 연장할 수 있는데, 그 이유는 사용자들이 그러한 원하는 옵션들을 찾아내기 위해 계층구조적 메뉴들을 통해 검색하는 데 전력 및 배터리 수명을 낭비할 필요가 없기 때문임).
일부 실시예들에서, 제2 부분은 스와이프 제스처를 검출하기 전에 일차 디스플레이 상에서 제1 사용자 인터페이스 내의 콤팩트 뷰에 디스플레이되고, 시스템은, 스와이프 제스처가 제1 방향에 실질적으로 수직인 제2 방향으로 수행되었다는 판정에 따라, 일차 디스플레이 상에서 제1 사용자 인터페이스 내의 확장된 뷰에 제2 부분을 디스플레이한다(716). 예를 들어, 도 13b에서, 사진 애플리케이션에 대한 상태 트레이(502)의 제1 부분(예컨대, 파일 제어부들의 메뉴(5288))은 확대 모드에서 일차 디스플레이(102)에 의해 디스플레이되고, 사진 애플리케이션에 대한 상태 트레이(502)의 제2 부분(예컨대, 편집 제어부들의 메뉴(5296))은 콤팩트 모드에서 일차 디스플레이(102)에 의해 디스플레이된다. 이러한 예를 계속 참조하면, 도 13b에서 제2 방향으로 수행된 스와이프 제스처(예컨대, 접촉(5292)에 의한 상향 스와이프 제스처)를 검출한 것에 응답하여, 사진 애플리케이션에 대한 상태 트레이(502)의 제2 부분은 도 13c에서 확대 모드에서 일차 디스플레이(102)에 의해 디스플레이되고, 사진 애플리케이션에 대한 상태 트레이(502)의 제1 부분은 콤팩트 모드에서 일차 디스플레이(102)에 의해 디스플레이된다.
다른 예에서, 도 8b에서, 메일 애플리케이션의 메뉴(5134)의 제1 부분(예컨대, 메뉴(5134) 내의 사용자의 주소록의 "All Contacts" 그룹)은 확대 모드에서 일차 디스플레이(102)에 의해 디스플레이되고, 메일 애플리케이션의 메뉴(5134)의 제2 부분(예컨대, 메뉴(5134) 내의 사용자의 주소록의 "Family" 그룹)은 콤팩트 모드에서 일차 디스플레이(102)에 의해 디스플레이된다. 이러한 예를 계속 참조하면, 도 8b에서 제2 방향으로 수행된 스와이프 제스처(예컨대, 접촉(5142)에 의한 상향 스와이프 제스처)를 검출한 것에 응답하여, 메일 애플리케이션의 메뉴(5134)의 제2 부분은 도 8c에서 확대 모드에서 일차 디스플레이(102)에 의해 디스플레이되고, 메일 애플리케이션의 메뉴(5134)의 제1 부분은 콤팩트 모드에서 일차 디스플레이(102)에 의해 디스플레이된다.
일부 실시예들에서, 제1 부분은 애플리케이션의 메뉴, 탭, 폴더, 툴 세트, 또는 툴바 중 하나이고, 제2 부분은 애플리케이션의 메뉴, 탭, 폴더, 툴 세트, 또는 툴바 중 하나이다(718). 도 8a 내지 도 8c에서, 예를 들어, 메일 애플리케이션의 메뉴(5134)의 제1 부분은 메뉴(5134) 내의 사용자의 주소록의 "All Contacts" 그룹에 대응하고, 메일 애플리케이션의 메뉴(5134)의 제2 부분은 메뉴(5134) 내의 사용자의 주소록의 "Family" 그룹에 대응한다. 도 13b 및 도 13c에서, 예를 들어, 사진 애플리케이션에 대한 상태 트레이(502)의 제1 부분은 파일 제어부들의 메뉴(5288)에 대응하고, 사진 애플리케이션에 대한 상태 트레이(502)의 제2 부분은 편집 제어부들의 메뉴(5296)에 대응한다.
일부 실시예들에서, 터치 스크린 디스플레이 상에 하나 이상의 어포던스들의 제3 세트를 디스플레이한 후, 컴퓨팅 시스템은 제1 사용자 인터페이스 상의 제1 부분을 선택하는 사용자 입력을 검출하고, 사용자 입력을 검출한 것에 응답하여, 터치 스크린 디스플레이 상에 애플리케이션의 제2 부분에 대응하는 하나 이상의 어포던스들의 제3 세트를 디스플레이하는 것을 중지하고, 애플리케이션의 제1 부분에 대응하는 하나 이상의 어포던스들의 제2 세트를 디스플레이한다(720). 예를 들어, 도 13c에 대해, 일차 디스플레이(102) 상에 포커스를 두고 있는 편집 제어부들의 메뉴(5296)에 대응하는 제2 복수의 어포던스들(5298)(즉, 어포던스들의 제3 세트)을 동적 기능 열(104) 상에 디스플레이한 후, 일차 디스플레이(102)는 상태 트레이(502) 내의 파일 메뉴(도시되지 않음)에 대응하는 위치에 커서(504)를 디스플레이한다. 이러한 예를 계속 참조하면, 커서(504)를 사용한 상태 트레이(502) 내의 파일 메뉴의 선택을 검출한 것에 응답하여, 동적 기능 열(104)은 제2 복수의 어포던스들(5298)(즉, 어포던스들의 제3 세트)을 디스플레이하는 것을 중지하고, 그 대신, 파일 제어부들의 메뉴(5288)(즉, 어포던스들의 제2 세트)를 디스플레이한다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트 및 하나 이상의 어포던스들의 제3 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함한다(722). 예를 들어, 도 8b에서, 동적 기능 열(104)은, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))와 함께, 사용자의 주소록의 "All Contacts" 그룹에 대응하는 제2 복수의 연락처 어포던스들(5136-E 내지 5136-J)(즉, 어포던스들의 제2 세트)을 디스플레이한다. 도 13c에서, 예를 들어, 동적 기능 열(104)은, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542))와 함께, 일차 디스플레이(102) 상에 포커스를 두고 있는 편집 제어부들의 메뉴(5296)에 대응하는 제2 복수의 어포던스들(5298)(즉, 어포던스들의 제3 세트)을 디스플레이한다.
일부 실시예들에서, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스는 풀스크린 모드에서 일차 디스플레이 상에 디스플레이되고, 터치 스크린 디스플레이 상에 디스플레이된 하나 이상의 어포던스들의 제1 세트는 풀스크린 모드에 대응하는 제어부들을 포함한다(724). 도 10g는, 예를 들어, 풀스크린 모드에서 윈도우(5200) 내에 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시하고, 또한, 윈도우(5200) 내에서의 사진 B의 배향을 교정하기 위한 제어부들의 세트(5209)를 디스플레이하는 동적 기능 열(104)을 도시한다. 예를 들어, 제2 방향(예컨대, 동적 기능 열(104)의 주요 치수에 대해 수직)으로의 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열(104)은 (예컨대, 스와이프 제스처가 상향 스와이프 제스처인 경우에) 크로핑 툴(5210)에 대응하는 제어부들의 세트 또는 (예컨대, 스와이프 제스처가 하향 스와이프 제스처인 경우에) 적목 현상 저감 툴(5206)에 대응하는 제어부들의 세트를 디스플레이한다. 이러한 예를 계속 참조하면, 제1 방향(예컨대, 동적 기능 열(104)의 주요 치수에 대해 수평)으로의 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열(104)은 윈도우(5200) 내에서의 사진 B의 배향을 조절한다.
다른 예에서, 도 10g에 대해, 제2 방향(예컨대, 동적 기능 열(104)의 주요 치수에 대해 수직)으로의 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열(104)은 (예컨대, 스와이프 제스처가 상향 스와이프 제스처인 경우에) 정보 어포던스(5178)와 연관된 제어부들의 세트 또는 (예컨대, 스와이프 제스처가 하향 스와이프 제스처인 경우에) 사진 추가하기 어포던스(5182)와 연관된 제어부들의 세트를 디스플레이한다. 이러한 예를 계속 참조하면, 제1 방향(예컨대, 동적 기능 열(104)의 주요 치수에 대해 수평)으로의 스와이프 제스처를 검출한 것에 응답하여, 동적 기능 열(104)은 (예컨대, 스와이프 제스처가 우측으로부터 좌측으로의 스와이프 제스처인 경우에) 크로핑 툴(5210)에 대응하는 제어부들의 세트 또는 (예컨대, 스와이프 제스처가 좌측으로부터 우측으로의 스와이프 제스처인 경우에) 적목 현상 저감 툴(5206)에 대응하는 제어부들의 세트를 디스플레이한다.
도 45a 내지 도 45c에서의 동작들이 기술된 특정 순서는 단지 일례이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(600, 800, 900, 1000))과 관련하여 본 명세서에 기술된 다른 프로세스들의 세부사항들이 도 45a 내지 도 45c와 관련하여 전술된 방법(700)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다.
도 46a 및 도 46b는, 일부 실시예들에 따른, 풀스크린 모드에 있는 동안에 애플리케이션의 기능을 유지하는 방법의 흐름도이다. 방법(800)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다. 방법(800)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))을 포함하고 물리적 키보드를 포함하지 않는다.
컴퓨팅 시스템은, 표준 모드에서 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 애플리케이션과 연관된 하나 이상의 어포던스들의 적어도 제1 세트를 포함함 - 를 디스플레이한다(802). 도 10b는, 예를 들어, 표준 디스플레이 모드에서 사진 애플리케이션에 대한 윈도우(5166)를 갖는 제1 사용자 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10b에서, 윈도우(5166) 내에서의 선택된 사진 B는 일차 디스플레이(102) 상에 포커스를 두고 있고, 윈도우(5166)는 선택된 사진 B에 대한 하기의 기능들/동작들을 수행하기 위한 선택가능 어포던스들(즉, 어포던스들의 제1 세트)을 포함한다: 검색, 줌, 슬라이드쇼, 공유, 및 설정.
컴퓨팅 시스템은 일차 디스플레이 상에 풀스크린 모드에서 애플리케이션에 대한 제1 사용자 인터페이스의 적어도 일부분을 디스플레이하기 위한 사용자 입력을 검출한다(804). 예를 들어, 검출된 사용자 입력은 일차 디스플레이(102) 또는 동적 기능 열(104) 상에 디스플레이된 풀스크린 뷰 어포던스 또는 슬라이드쇼 어포던스의 선택에 대응한다.
일부 실시예들에서, 풀스크린 모드에서 일차 디스플레이 상에 애플리케이션에 대한 제1 사용자 인터페이스의 적어도 일부분을 디스플레이하기 위한 사용자 입력은 터치 스크린 디스플레이 상에서 검출된 터치 입력 및 일차 디스플레이 상의 제1 사용자 인터페이스 내에서 선택된 제어부 중 적어도 하나이다(806). 제1 예에서, 도 10b는 슬라이드쇼 어포던스에 대응하는 위치에 커서(504)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 제2 예에서, 도 10d는 풀스크린 어포던스(5196)에 대응하는 위치에서의 접촉(5196)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다.
사용자 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은, 일차 디스플레이 상에 제1 사용자 인터페이스 내의 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 디스플레이하는 것을 중지하고; 풀스크린 모드에서 일차 디스플레이 상에, 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 디스플레이하고; 인간의 개입 없이, 터치 스크린 디스플레이 상에, 애플리케이션을 제어하기 위한 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트에 대응함 - 를 자동으로 디스플레이한다(808). 상기의 제1 예를 계속 참조하면, 도 10c는, 도 10b에서 커서(504)를 사용한 슬라이드쇼 어포던스의 선택을 검출한 것에 응답하여 윈도우(5188)에서 사용자의 사진 라이브러리의 전체 사진 서브섹션으로부터 사진들의 슬라이드쇼를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10c는, 또한, 도 10b에서 커서(504)를 사용한 슬라이드쇼 어포던스의 선택을 검출한 것에 응답하여, 썸네일 이미지들(5192-Y, 5192-Z, 5192-A, 5192-B, 5192-C, 5192-D, 5192-E)(즉, 어포던스들의 제2 세트)을 디스플레이하는 동적 기능 열(104)을 도시한다. 썸네일 이미지들(5192-Y, 5192-Z, 5192-A, 5192-B, 5192-C, 5192-D, 5192-E)은 사용자의 사진 라이브러리의 전체 사진 서브섹션과 연관된 슬라이드쇼에 대한 소정 시퀀스의 사진들에 대응한다. 도 10c에서, 사진 B에 대응하는 어포던스(5192-B)는 사진 B가 현재 일차 디스플레이(102) 상에 포커스를 두고 있다는 것을 나타내도록 동적 기능 열(104)에 의해 (예컨대, 굵은 텍스트 및 두꺼운 경계부로) 두드러지게 디스플레이된다.
상기의 제2 예를 계속 참조하면, 도 10e는, 도 10d에서 풀스크린 어포던스(5196)의 선택을 검출한 것에 응답하여 윈도우(5200) 내에 풀스크린 모드에서 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 10f는, 또한, 도 10e에서 편집하기 어포던스(5180)의 선택을 검출한 것에 응답하여 편집 툴들의 세트(5205)(즉, 어포던스들의 제2 세트)를 디스플레이하는 동적 기능 열(104)을 도시한다.
다른 예에서, 웹 브라우저 애플리케이션 또는 웹 브라우저 애플리케이션에 대응하는 사용자 인터페이스의 일부분이 일차 디스플레이(102) 상에 포커스를 두고 있고 컴퓨팅 시스템이 풀스크린 모드에 진입하도록 하는 사용자 입력을 검출하는 경우, 일차 디스플레이(102)는 풀스크린 모드에서 현재 활성 상태 탭을 디스플레이하고, 동적 기능 열(104)은, 적어도 하나의 시스템 레벨 어포던스와 함께, 웹 브라우저 애플리케이션 내에 열려 있는 탭에 대응하는 썸네일 이미지들을 디스플레이한다. 예를 들어, 컴퓨팅 시스템의 사용자는 동적 기능 열(104) 상의 개개의 탭에 대응하는 썸네일을 선택함으로써 풀스크린 모드에서 일차 디스플레이(102) 상에 개개의 탭을 디스플레이할 수 있다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트이다(810). 예를 들어, 어포던스들의 제2 세트는 애플리케이션과 연관된 어포던스들의 제1 세트의 적어도 일부분을 포함한다. 다른 예에서, 어포던스들의 제2 세트는 애플리케이션과 연관된 어포던스들의 제1 세트를 포함한다. 다른 예에서, 어포던스들의 제2 세트는 애플리케이션과 연관된 어포던스들의 제1 세트와 동일하다. 예를 들어, 어포던스들의 제2 세트는 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관된 제어부들, 예컨대 사진 편집 제어부, 게이밍 제어부, 슬라이드쇼 제어부 및 프리뷰, 웹 브라우저에 대한 현재 열려 있는 웹 페이지 탭 등을 포함한다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 풀스크린 모드에 대응하는 제어부들을 포함한다(812). 도 10c는, 예를 들어, 사용자의 사진 라이브러리의 전체 사진 서브섹션과 연관된 슬라이드쇼에 대한 소정 시퀀스의 사진들에 대응하는 썸네일 이미지들(5192-Y, 5192-Z, 5192-A, 5192-B, 5192-C, 5192-D, 5192-E)(즉, 어포던스들의 제2 세트)을 디스플레이하는 동적 기능 열(104)을 도시한다. 예를 들어, 컴퓨팅 시스템의 사용자는 어포던스들(5192) 중 하나를 선택함으로써 특정 사진 앞으로 또는 특정 사진 뒤로 스킵할 수 있다. 또한, 예를 들어, 컴퓨팅 시스템의 사용자는 동적 기능 열(104) 상에서 우측으로부터 좌측으로의 스와이프 제스처를 수행함으로써 소정 시퀀스의 사진들에서 앞으로 브라우징할 수 있거나, 또는 동적 기능 열(104) 상에서 좌측으로부터 우측으로의 스와이프 제스처를 수행함으로써 소정 시퀀스의 사진들에서 뒤로 브라우징할 수 있다. 추가로, 도 10c에서, 동적 기능 열(104)은, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 슬라이드쇼가 일시정지되게 하고, 또한, 일차 디스플레이(102)가 풀스크린 모드를 나가게 하는 일시정지 어포던스(5190)를 디스플레이한다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함한다(814). 도 10c는, 예를 들어, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542)) 및 지속적 제어부들(예컨대, 어포던스들(516, 534))과 함께, 썸네일 이미지들(5192) 및 일시정지 어포던스(5190)를 디스플레이하는 동적 기능 열(104)을 도시한다.
애플리케이션의 일부분이 일차 디스플레이 상에 풀스크린 모드에서 디스플레이되는 동안에 터치 감응형 이차 디스플레이를 통해 애플리케이션을 제어하기 위한 어포던스들을 제공하는 것은 사용자들이 일차 디스플레이 상에 더 이상 직접 디스플레이되지 않을 수도 있는 기능들에 계속해서 액세스하게 한다. 사용자들이 일차 디스플레이 상에 더 이상 직접적으로 디스플레이되지 않을 수도 있는 기능들에 계속해서 액세스하게 하는 것은, 사용자에게 일차 디스플레이 상에 매립되었을 수 있는 기능들에 액세스하기 위한 빠르고 편리한 방식을 제공하며, (예컨대, 더 적은 상호작용으로 그리고 필요한 기능들을 찾기 위해 계층구조적 메뉴들을 통해 찾는 데 시간을 낭비할 필요 없이, 사용자가 터치 감응형 이차 디스플레이를 통해 필요한 기능들에 직접적으로 액세스하는 것을 도움으로써) 이에 의해, 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 기능들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 따라서, 콘텐츠가 풀스크린 모드에서 (방해 없이) 제시될 수 있음을 보장하기 위해 메뉴 옵션들을 일차 디스플레이로부터 그리고 터치 감응형 이차 디스플레이로 시프트시킴으로써, 사용자들은 디바이스와의 상호작용들을 지속할 수 있고, 그들의 작업흐름은 풀스크린 모드로 시프트할 때 중단되지 않는다.
추가로, 풀스크린 콘텐츠를 보는 동안에 메뉴 옵션들에 액세스하기 위해 더 적은 상호작용들이 요구되는데, 이는 일차 디스플레이 상의 콘텐츠 뒤에 매립되었을 수 있는 메뉴 옵션들이 쉽고 빠른 액세스를 위해 (그리고 풀스크린 모드를 나가고 이어서 메뉴 옵션들을 이리저리 찾을 필요 없이) 터치 감응형 이차 디스플레이 상에 제시되기 때문이며, 이에 의해, 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 디스플레이된 어포던스들의 제2 세트의 하나의 어포던스를 선택하는 사용자 터치 입력을 검출하고, 사용자 터치 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 어포던스들의 제2 세트의 선택된 하나의 어포던스에 따라 풀스크린 모드에서 일차 디스플레이 상에 디스플레이되고 있는 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 변경한다(816). 도 10g에서, 예를 들어, 컴퓨팅 시스템의 사용자는 슬라이더(5210) 상에서 또는 제어부들의 세트(5209) 내에서 기원하는 위치에서 좌측으로부터 우측으로의 스와이프/드래그 제스처 또는 우측으로부터 좌측으로의 스와이프/드래그 제스처를 수행함으로써 일차 디스플레이(102)에 의해 디스플레이되는 윈도우(5200) 내에서의 사진 B의 배향을 조절할 수 있다.
일부 실시예들에서, 풀스크린 모드에서 일차 디스플레이 상에 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 디스플레이한 후, 컴퓨팅 시스템은, 풀스크린 모드를 나가기 위한 후속의 사용자 입력을 검출하고; 후속의 사용자 입력을 검출한 것에 응답하여, 표준 모드에서 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 포함함 - 를 디스플레이하고; 터치 스크린 디스플레이 상에서 애플리케이션을 제어하기 위한 하나 이상의 어포던스들의 제2 세트의 적어도 소정 서브세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트에 대응함 - 의 디스플레이를 유지한다(818). 일례에서, 도 10c는 일시정지 어포던스(5190)에 대응하는 위치에서의 접촉(5194)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 일차 디스플레이(102)는 풀스크린 모드를 나가고, 도 10d는, 도 10c에서 일시정지 어포던스(5190)의 선택을 검출한 것에 응답하여 윈도우(5166) 내의 확대 뷰에 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 다른 예에서, 도 10g는 이스케이프 어포던스(516)에 대응하는 위치에서의 접촉(5216)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 일차 디스플레이(102)는 풀스크린 모드를 나가고, 도 10h는, 도 10g에서 이스케이프 어포던스(516)의 선택을 검출한 것에 응답하여 윈도우(5166) 내의 확대 뷰에 사진 B를 디스플레이하는 일차 디스플레이(102)를 도시한다. 이러한 예를 계속 참조하면, 도 10h는, 또한, 도 10g에서 디스플레이된 어포던스들의 제2 세트의 적어도 소정 서브세트의 디스플레이를 유지하는 동적 기능 열(104)을 도시한다.
도 46a 및 도 46b에서의 동작들이 기술된 특정 순서는 단지 일례이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(600, 700, 900, 1000))과 관련하여 본 명세서에 기술된 다른 프로세스들의 세부사항들이 도 46a 및 도 46b와 관련하여 전술된 방법(800)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다.
도 47a 및 도 47b는 일부 실시예들에 따른, 터치 스크린 디스플레이 상에 통지들을 디스플레이하는 방법의 흐름도이다. 방법(900)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다. 방법(900)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))을 포함하고 물리적 키보드를 포함하지 않는다.
컴퓨팅 시스템은, 일차 디스플레이 상에, 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스를 디스플레이한다(902). 도 12f는, 예를 들어, 윈도우(5224) 내의 북마크 사이드바와 함께, 탭 B에 대한 인터페이스(예컨대, www.website_B.com/home에 대응함)를 갖는 제1 사용자 인터페이스를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12f에서, 북마크 사이드바는 북마크 사이드바를 둘러싼 두꺼운 선들로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다.
컴퓨팅 시스템은, 터치 스크린 디스플레이 상에, 제2 사용자 인터페이스 - 제2 사용자 인터페이스는 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트를 포함함 - 를 디스플레이한다(904). 상기의 예를 계속 참조하면, 도 12f는, 북마크 사이드바가 일차 디스플레이(102) 상에 포커스를 두고 있는 결과로서, 모든 기존 북마크들에 대응하는 북마크 어포던스들의 세트(5278)를 갖는 제2 사용자 인터페이스를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 통지를 검출하기 전, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에 통지를 디스플레이하기 위해 그리고 일차 디스플레이 상에 통지를 디스플레이하지 않기 위해 통지 설정을 선택하는 사용자 입력을 검출한다(906). 일부 실시예들에서, 컴퓨팅 시스템의 사용자는 수신된 통지가 일차 디스플레이(102) 및 동적 기능 열(104) 중 하나 이상에 디스플레이될 것인지를 설정 패널 내에서 지정할 수 있다. 일부 실시예들에서, 컴퓨팅 시스템은 동적 기능 열(104) 상에 수신된 통지를 디스플레이하지만, 디폴트에 의해 일차 디스플레이(102) 상에는 디스플레이하지 않는다.
컴퓨팅 시스템은 통지를 검출한다(908). 일부 실시예들에서, 통지는 애플리케이션(예컨대, 도 12f에서의 웹 브라우저 애플리케이션)과 연관된다. 일부 실시예들에서, 통지는 전경에서 현재 실행되고 있는 애플리케이션 또는 배경 애플리케이션과 연관된다. 예를 들어, 통지는 하기 중 하나이다: 모드 경고 또는 실시간 통지, 예컨대 새롭게 수신된 이메일, 인스턴트 메시지, 또는 SMS와 연관된 경고; 소셜 미디어 애플리케이션 내의 포스팅 또는 응답과 같은 애플리케이션 내의 새롭게 검출된 사건과 연관된 통지; 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관된 모델 경고, 예컨대 저장하기/나가기 다이얼로그 박스 또는 다른 프롬프트; 등.
통지를 검출한 것에 응답하여, 컴퓨팅 시스템은, 제2 사용자 인터페이스에서, 터치 스크린 디스플레이 상에, 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트 및 검출된 통지 - 검출된 통지는 일차 디스플레이 상에 디스플레이되지 않음 - 의 적어도 일부분을 동시에 디스플레이한다(910). 예를 들어, 일부 실시예들에서, 동작 906에서 논의된 통지 설정에 기초하여, 검출된 통지의 적어도 일부분은 동적 기능 열(104) 상에 디스플레이된 제2 사용자 인터페이스 상에 오버레이된다. 추가적으로 그리고/또는 대안으로, 일부 실시예들에서, 통지는 일차 디스플레이(102)에 의해 디스플레이된 제1 사용자 인터페이스 상에 오버레이된다. 이와 같이, 컴퓨팅 시스템의 사용자는 통지를 보고 그에 응답할 수 있는데, 이때 그러한 선택가능한 제어부들이 일차 디스플레이 상에 디스플레이될 때, 그의/그녀의 양손을 물리적 키들의 세트로부터 다른 입력 디바이스(예컨대, 마우스)로 떨어지게 시프트시키지 않으면서 응답할 수 있다. 예를 들어 사용자의 양손에 대해 키보드와 마우스 사이에서의 그리고 사용자의 양눈에 대해 키보드와 디스플레이 사이에서의 모드 스위칭의 이러한 감소는 더 직관적인 사용자 경험 및 더 효율적인 인간-기계 인터페이스를 제공한다.
예를 들어, 도 8g는, 도 8f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여 모드 경고(5156)를 디스플레이하는 일차 디스플레이(102) 및 동적 기능 열(104)을 도시한다. 도 8g에서, 모드 경고(5156)는 사용자에게 윈도우(580)를 닫기 전에 이메일 초안을 저장할 것을 프롬프트하며, "Save" 어포던스(5158), "Don't Save" 어포던스(5160), 및 "Cancel" 어포던스(5162)를 포함한다. 다른 예에서, 도 9는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터, 특정된 물리적 키 조합(예컨대, alt + tab)에 대응하는 신호를 수신한 것에 응답하여 애플리케이션 선택 윈도우(5164)를 디스플레이하는 일차 디스플레이(102) 및 동적 기능 열(104)을 도시한다. 도 9에서, 애플리케이션 선택 윈도우(5164)는 컴퓨팅 시스템의 사용자가 배경에 있을 수 있는 현재 구동 중인 애플리케이션들 사이에서 토글링할 수 있게 한다.
또 다른 예에서, 도 10h는 컴퓨팅 시스템에 의한 통지(5218)의 수신에 응답하여 어포던스들(5178, 5180, 5182, 5184) 상에 오버레이된 통지(5218)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 10h에서, 통지(5218)는 컴퓨팅 시스템의 사용자에게 Suzie S.에 의해 전송된 SMS, 인스턴트 메시지 등에 대응하는데, 여기서 통지의 내용은 "Movies tonight?"라고 질문하는 것이다. 또 다른 예에서, 도 11e는, 도 11d에서 커서(504)를 사용한 구매 어포던스의 선택을 검출한 것에 응답하여 모드 경고(5240)를 디스플레이하는 일차 디스플레이(102) 및 동적 기능 열(104)을 도시한다. 도 11e에서, 동적 기능 열(104) 상에 디스플레이된 모드 경고(5240)는 컴퓨팅 시스템의 사용자에게 동적 기능 열(104)의 지문 영역(5244)에 그의 지문을 제공할 것을 프롬프트하고, 또한, (예컨대, 탭핑 접촉을 통해) 활성화될 때, 구매의 취소를 야기하는 취소하기 어포던스(5242)를 포함한다.
또 다른 예에서, 도 12a는 컴퓨팅 시스템에 의한 통지(5264)의 수신에 응답하여 윈도우(5264) 상에 오버레이된 통지(5264)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12a에서, 통지(5264)는 컴퓨팅 시스템의 사용자에게 MAS에 의해 전송된 SMS, 인스턴트 메시지 등에 대응하는데, 여기서 통지의 내용은 "Landed yet?"라고 질문하는 것이다. 또 다른 예에서, 도 12g는, 도 12f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여 북마크 어포던스들의 세트(5278) 상에 오버레이된 모드 경고(5280)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 12g에서, 모드 경고(5280)는 컴퓨팅 시스템의 사용자에게 그가 웹 브라우저 애플리케이션 내의 열려 있는 모든 탭들을 닫으려고 의도한다는 것을 확인할 것을 프롬프트한다. 또 다른 예에서, 도 14b는 도 14d에서 전력 제어부(534)의 선택을 검출한 것에 응답하여 모드 경고(5308)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 14e에서, 모드 경고(5308)는 컴퓨팅 시스템의 사용자에게 로그아웃 어포던스(5310), 재시작 어포던스(5312), 전력 차단 어포던스(5314), 및 취소하기 어포던스(5316) 중 하나로부터 로그아웃/전력 차단 옵션을 선택할 것을 프롬프트한다.
터치 감응형 이차 디스플레이에 수신된 통지들을 디스플레이하는 것은 사용자들이 일차 디스플레이 상에서 중단되지 않은 방식으로 그들의 작업을 계속하게 하고, 그들이 터치 감응형 이차 디스플레이를 통해 수신된 통지들과 상호작용하게 한다. 사용자들이 일차 디스플레이 상에서 중단되지 않은 방식으로 그들의 작업을 계속하게 하는 것, 및 사용자들이 터치 감응형 이차 디스플레이를 통해 수신된 통지들과 상호작용하게 하는 것은 (예컨대, 사용자가 터치 감응형 이차 디스플레이를 통해 직접적으로, 그리고 수신된 통지를 다루기 위해 그들의 작업흐름을 중단할 필요 없이, 수신된 통지들에 편리하게 액세스하는 것을 도움으로써) 사용자들에게 수신된 통지들을 리뷰하고 그들과 상호작용하기 위한 빠르고 편리한 방식을 제공하고, 이에 의해, 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 한다. 더욱이, 터치 감응형 이차 디스플레이에서 통지들을 수신한 것을 디스플레이하는 것은, 수신된 통지가, 일부 실시예들에서, 터치 감응형 이차 디스플레이에서 다른 어포던스들에 오버레이된 것으로 디스플레이됨에 따라, 터치 감응형 이차 디스플레이에서의 수신된 통지들에 대한 강조 효과를 제공하여, 이에 따라, 수신된 통지가 터치 감응형 이차 디스플레이에서 가시적이고 용이하게 액세스가능함을 보장한다.
일부 실시예들에서, 터치 스크린 디스플레이 상에 디스플레이된 통지의 일부분은 컴퓨팅 시스템의 사용자에게 검출된 통지에 응답하기 위한 복수의 옵션들 중 하나의 옵션을 선택할 것을 프롬프트한다(912). 예를 들어, 도 8g에서, 일차 디스플레이(102) 및 동적 기능 열(104) 상에 디스플레이된 모드 경고(5156)는 사용자에게 윈도우(580)를 닫기 전에 이메일 초안을 저장할 것을 프롬프트하며, "Save" 어포던스(5158), "Don't Save" 어포던스(5160), 및 "Cancel" 어포던스(5162)를 포함한다. 다른 예에서, 동적 기능 열(104)에 의해 디스플레이된 모드 경고(5280)는, 도 12g에서, 컴퓨팅 시스템의 사용자에게 그가 웹 브라우저 애플리케이션 내의 열려 있는 모든 탭들을 닫으려고 의도한다는 것을 확인할 것을 프롬프트한다. 또 다른 예에서, 동적 기능 열(104)에 의해 디스플레이된 모드 경고(5308)는, 도 14e에서, 컴퓨팅 시스템의 사용자에게 로그아웃 어포던스(5310), 재시작 어포던스(5312), 전력 차단 어포던스(5314), 및 취소하기 어포던스(5316) 중 하나로부터 로그아웃/전력 차단 옵션을 선택할 것을 프롬프트한다.
일부 실시예들에서, 터치 스크린 디스플레이 상에 디스플레이되는 통지의 일부분은 검출된 통지에 대한 하나 이상의 제안 응답들을 포함한다(914). 도 12c는, 예를 들어, 도 12b에서 통지(5264) 내의 위치에서의 접촉(5266)을 검출한 것에 응답하여 응답 다이얼로그 박스(5268)를 디스플레이하는 동적 기능 열(104)을 도시한다. 도 12c에서, 응답 다이얼로그 박스(5268)는 도 12a 및 도 12b에 도시된 통지(5264)의 내용에 대한 복수의 예상 응답들을 포함한다. 도 12c에서, 응답 다이얼로그 박스(5268)는 제1 예상 응답(5270)("Yes"), 제2 예상 응답(5272)("No"), 및 제3 예상 응답(5274)("On my way!")을 포함한다. 도 12c는, 또한, 제1 예상 응답(5270)에 대응하는 위치에서의 접촉(5276)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 예를 들어, 제1 예상 응답(5270)의 선택에 응답하여, 컴퓨팅 시스템은 통지(5264)가 컴퓨팅 시스템의 사용자에게 전송되게 한 것과 동일한 통신 모드(예컨대, SMS, 인스턴트 메시지 등)를 통해 제1 예상 응답(5270)("Yes")이 MAS에게 전송되게 한다. 다른 예에서, 제1 예상 응답(5270)의 선택에 응답하여, 컴퓨팅 시스템은 제1 예상 응답(5270)("Yes")이 디폴트 통신 모드(예컨대, 사용자에 의해 선택되거나 소프트웨어로 설정됨)를 통해 MAS에게 전송되게 한다.
일부 실시예들에서, 통지는 착신 인스턴트 메시지, SMS, 이메일, 음성 호출, 또는 영상 호출 중 적어도 하나에 대응한다(916). 도 10h에서, 예를 들어, 통지(5218)는 컴퓨팅 시스템의 사용자에게 Suzie S.에 의해 전송된 SMS, 인스턴트 메시지 등에 대응한다. 다른 예에서, 도 11f에서, 인터페이스(5248)는 C. Cheung으로부터의 착신 음성 호출에 대응하고, 도 11g에서, 인터페이스(5256)는 C. Cheung과 컴퓨팅 시스템의 사용자 사이의 진행 중인 음성 호출에 대응한다. 또 다른 예에서, 통지(5264)는, 도 12a 및 도 12b에서, 컴퓨팅 시스템의 사용자에게 MAS에 의해 전송된 SMS, 인스턴트 메시지 등에 대응한다.
일부 실시예들에서, 통지는, 애플리케이션을 닫거나 애플리케이션 내에서 액션을 수행하는 사용자 입력에 응답하여, 컴퓨팅 시스템의 프로세서에 의해 실행되고 있는 애플리케이션에 의해 발행되는 모드 경고에 대응한다(918). 제1 예에서, 도 8g는, 도 8f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여 윈도우(580)를 닫기 전, 컴퓨팅 시스템의 사용자에게 이메일 초안을 저장할 것을 프롬프트하는 모드 경고(5156)를 도시한다. 제2 예에서, 도 11e는, 도 11d에서 커서(504)를 사용한 구매 어포던스의 선택을 검출한 것에 응답하여, 구매를 승인하기 위해, 컴퓨팅 시스템(100)의 사용자에게 그의 지문을 제공할 것을 프롬프트하는 모드 경고(5240)를 도시한다. 제3 예에서, 도 12g는, 도 12f에서 커서(504)를 사용한 나가기 어포던스의 선택을 검출한 것에 응답하여, 컴퓨팅 시스템의 사용자에게 그가 웹 브라우저 애플리케이션 내의 열려 있는 모든 탭들을 닫으려고 의도한다는 것을 확인할 것을 프롬프트하는 모드 경고(5280)를 도시한다.
일부 실시예들에서, 하나 이상의 어포던스들의 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하고, 통지는 입력 메커니즘(예컨대, alt + tab 또는 다른 키보드 조합)의 하나 이상의 부분들 또는 시스템 레벨 어포던스 중 적어도 하나의 어포던스(예컨대, 전력 제어 어포던스)를 선택하는 사용자 입력에 대응한다(920). 일례에서, 도 9는, 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)의 물리적 키들의 세트(106)로부터 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)의 주변기기 키보드(206)의 물리적 키들의 세트(106)로부터, 특정된 물리적 키 조합(예컨대, alt + tab)에 대응하는 신호를 수신한 것에 응답하여 애플리케이션 선택 윈도우(5164)를 디스플레이하는 동적 기능 열(104)을 도시한다. 다른 예에서, 도 14e는 도 14d에서 전력 제어부(534)의 선택을 검출한 것에 응답하여 모드 경고(5308)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에서 검출된 통지의 일부분에 대응하는 사용자 터치 입력을 검출한다(922). 사용자 터치 입력이 제1 타입(예컨대, 스와이프하여 무시하기)에 대응한다는 판정에 따라, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에서 제2 사용자 인터페이스에 검출된 통지의 일부분을 디스플레이하는 것을 중지한다. 사용자 터치 입력이 제1 타입과는 별개인 제2 타입(예컨대, 탭핑하여 액션을 수행하기)에 대응한다는 판정에 따라, 컴퓨팅 시스템은 검출된 통지와 연관된 액션(예컨대, 새롭게 수신된 이메일, SMS, 또는 IM에 응답하기 위한 다이얼로그를 열기; 문서를 저장하기; 프로그램을 나가기; 등)을 수행한다. 예를 들어, 도 10h는 통지(5128) 내의 제1 위치(5222-A)로부터 제2 위치(5222-B)로의 접촉(5220)으로 좌측으로부터 우측으로의 스와이프 제스처를 검출하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 도 11a는 도 10h에서의 좌측으로부터 우측으로의 스와이프 제스처를 검출한 것에 응답하여 통지(5218)를 디스플레이하는 것을 중지하는 동적 기능 열(104)을 도시한다. 다른 예에서, 도 12b는 통지(5264) 내의 소정 위치에서의 접촉(5266)(예컨대, 탭핑 접촉)을 수신 및 검출하는 동적 기능 열(104)을 도시한다. 이러한 예를 계속 참조하면, 도 12c는 도 12b에서 통지(5264) 내의 위치에서의 접촉(5266)을 검출한 것에 응답하여 응답 다이얼로그 박스(5268)를 디스플레이하는 동적 기능 열(104)을 도시한다.
도 47a 및 도 47b에서의 동작들이 기술된 특정 순서는 단지 일례이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(600, 700, 800, 1000))과 관련하여 본 명세서에 기술된 다른 프로세스들의 세부사항들이 도 47a 및 도 47b와 관련하여 전술된 방법(900)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다.
도 48a 내지 도 48c는 일부 실시예들에 따른, 사용자 인터페이스 부분들을 이동시키는 방법의 흐름도이다. 방법(1000)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다. 방법(1000)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
컴퓨팅 시스템은 일차 디스플레이 상에, 사용자 인터페이스 - 사용자 인터페이스는 하나 이상의 사용자 인터페이스 요소들을 포함함 - 를 디스플레이한다(1002). 예를 들어, 도 12a는 윈도우(5224) 내의 탭 B에 대한 인터페이스 및 윈도우(5224) 상에 오버레이된 통지(5264)를 디스플레이하는 일차 디스플레이(102)를 도시한다. 도 12a에서, 탭 B에 대한 인터페이스는 웹사이트 B의 홈 웹 페이지(예컨대, URL: www.website_B.com/home과 연관됨)를 보여준다.
컴퓨팅 시스템은 일차 디스플레이 상에 포커스를 두고 있는 하나 이상의 사용자 인터페이스 요소들 중 활성 상태 사용자 인터페이스 요소 - 활성 상태 사용자 인터페이스 요소는 컴퓨팅 시스템에 의해 실행되는 애플리케이션과 연관됨 - 를 식별한다(1004). 도 12a에서, 예를 들어, 탭 B에 대한 인터페이스는 탭 B를 둘러싼 두꺼운 선들 및 탭 B에 대한 굵은 텍스트로 나타내진 바와 같이 일차 디스플레이(102) 상에 포커스를 두고 있다.
일차 디스플레이 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 식별한 것에 응답하여, 컴퓨팅 시스템은, 터치 스크린 디스플레이 상에, 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트를 디스플레이한다(1006). 도 12a에서, 동적 기능 열(104)은 하기를 포함한 웹 브라우저 애플리케이션에 대한 제어부들(예컨대, 하나 이상의 어포던스들의 세트)을 디스플레이한다: 어드레스 바(5234) 내의 웹사이트 B의 홉 웹 페이지(예컨대, www.website_B.com/home), 최근에 본 웹 페이지들 사이에서 내비게이팅하기 위한 어포던스들(5230, 5232), 즐겨찾기 또는 북마크 목록에 현재 웹 페이지를 추가하기 위한 어포던스들(5238), 및 탭 A 및 탭 C에 각각 액세스하기 위한 어포던스들(5262-A, 5262-B).
컴퓨팅 시스템은 사용자 인터페이스의 개개의 부분을 이동시키는 사용자 입력을 검출한다(1008). 일부 실시예들에서, 사용자 인터페이스의 일부분은 메뉴, 툴바, 툴 세트, 통지 등이다. 예를 들어, 컴퓨팅 시스템은 메뉴를 일차 디스플레이(102)의 하부(또는 다른 사용자 지정 위치)로 드래깅하는 제스처, 또는 오른쪽 클릭 액션 또는 다른 대응하는 어포던스를 통해 동적 기능 열(104)로 메뉴를 이동시키라는 명령어를 검출한다. 일례에서, 도 12a는 컴퓨팅 시스템의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅하는 것을 디스플레이하는 일차 디스플레이(102)를 도시한다. 다른 예에서, 도 12e는 컴퓨팅 시스템의 사용자가 커서(504)를 사용하여 북마크 사이드바를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅하는 것을 디스플레이하는 일차 디스플레이(102)를 도시한다.
일부 실시예들에서, 사용자 인터페이스의 개개의 부분은 컴퓨팅 시스템에 의해 실행되는 애플리케이션에 대응하는 메뉴이다(1010). 예를 들어, 사용자 인터페이스의 개개의 부분은 워드 프로세싱 애플리케이션에 대한 메뉴 또는 툴바이다. 예를 들어, 커서(504)에 의해 드래깅되고 있는 개개의 사용자 인터페이스의 개개의 부분은, 도 12e에서, 윈도우(5224) 내의 북마크 사이드바이다.
일부 실시예들에서, 사용자 인터페이스의 개개의 부분은 통지 또는 모드 경고 중 적어도 하나이다(1012). 예를 들어, 커서(504)에 의해 드래깅되고 있는 개개의 사용자 인터페이스의 개개의 부분은, 도 12a에서, 통지(5264)이다.
사용자가 일차 디스플레이로부터 그리고 터치 감응형 이차 디스플레이로 사용자 인터페이스 부분들(예컨대, 메뉴들, 통지들 등)을 빠르게 이동시키게 하는 것은 사용자에게 사용자 인터페이스 부분들에 액세스하기 위한 편리하고 커스텀화된 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 사용자 인터페이스 부분들에 액세스하기 위한 편리하고 커스텀화된 방식을 제공하는 것은 (예컨대, 사용자가, 더 적은 상호작용들로, 그리고 이전에 보인(그리고 가능하게는 매립된) 사용자 인터페이스 부분을 찾는 데 시간을 낭비할 필요 없이, 터치 감응형 이차 디스플레이를 통해 직접적으로 사용자 인터페이스 부분들에 액세스하는 것을 도움으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 필요한 사용자 인터페이스 부분들에 더 빠르고 효율적으로 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 더욱이, 사용자 입력에 응답하여 터치 감응형 이차 디스플레이에서 사용자 인터페이스 부분들을 디스플레이하는 것은 개개의 사용자 인터페이스 부분들이, 일부 실시예들에서, 터치 감응형 이차 디스플레이에서 다른 어포던스들에 오버레이된 것으로 디스플레이됨에 따라 터치 감응형 이차 디스플레이에서의 사용자 인터페이스 부분들에 대한 강조 효과를 제공하여, 이에 따라, 개개의 사용자 인터페이스 부분이 터치 감응형 이차 디스플레이에서 가시적이고 용이하게 액세스가능함을 보장한다.
사용자 입력을 검출한 것에 응답하여, 그리고 사용자 입력이 사전정의된 액션 기준들을 만족시킨다는 판정에 따라, 컴퓨팅 시스템은 일차 디스플레이 상에 사용자 인터페이스의 개개의 부분을 디스플레이하는 것을 중지하고; 터치 스크린 디스플레이 상에 하나 이상의 어포던스들의 세트의 적어도 서브세트를 디스플레이하는 것을 중지하고; 터치 스크린 디스플레이 상에, 사용자 인터페이스의 개개의 부분의 표현을 디스플레이한다(1014). 일례에서, 도 12b는, 통지(5264)를 디스플레이하는 것을 중지한 일차 디스플레이, 및 도 12a에서 컴퓨팅 시스템의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅한 것에 응답하여, 어포던스들(5262-A, 5262-B) 상에 오버레이된 통지(5264)를 디스플레이하는 동적 기능 열(104)을 도시한다. 다른 예에서, 도 12f는, 도 12e에 도시된 바와 같이 웹 브라우저 애플리케이션과 연관된 제어부들을 디스플레이하는 것을 중지하고, 도 12e에서 컴퓨팅 시스템의 사용자가 커서(504)를 사용하여 북마크 사이드바를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅한 것에 응답하여 모든 기존 북마크들에 대응하는 북마크 어포던스들의 세트(5278)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 사전정의된 액션 기준들은 사용자 입력이 사용자 인터페이스의 개개의 부분을 일차 디스플레이의 사전정의된 위치로 드래깅하는 드래깅 제스처인 경우에 만족된다(1016). 일부 실시예들에서, 사전정의된 위치는 컴퓨팅 시스템의 사용자에 의해 설정되거나 디폴트에 의해 소프트웨어로 설정된 복수의 사전정의된 위치 중 하나이다. 일례에서, 도 12b에서, 컴퓨팅 시스템의 사용자는 커서(504)를 사용하여 통지(5264)를 사전정의된 위치(예컨대, 일차 디스플레이(102)의 하부 우측 코너)로 드래깅한다. 다른 예에서, 도 12e에서, 컴퓨팅 시스템의 사용자는 커서(504)를 사용하여 북마크 사이드바를 사전정의된 위치(예컨대, 일차 디스플레이(102)의 하부 우측 코너)로 드래깅한다.
일부 실시예들에서, 사전정의된 액션 기준들은 사용자 입력이 사용자 인터페이스의 개개의 부분을 터치 스크린 디스플레이로 이동시키는 것에 대응하는 사전결정된 입력인 경우에 만족된다(1018). 예를 들어, 일차 디스플레이(102)는, 워드 프로세싱 애플리케이션에 대한 윈도우 상에 오버레이된 포맷 툴바와 함께, 워드 프로세싱 애플리케이션에 대한 윈도우를 디스플레이한다. 이러한 예를 계속 참조하면, 포맷 툴바를 오른쪽 클릭한 후에 특정 디스플레이 옵션을 선택한 것, 또는 포맷 툴바가 일차 디스플레이(102) 상에 포커스를 두고 있는 동안에 특정 디스플레이 옵션을 선택한 것에 응답하여, 일차 디스플레이(102)는 포맷 툴바를 디스플레이하는 것을 중지하고, 동적 기능 열은 포맷 툴바를 디스플레이한다.
일부 실시예들에서, 사용자 인터페이스의 개개의 부분의 표현은 터치 스크린 디스플레이 상에서 하나 이상의 어포던스들의 세트 상에 오버레이된다(1020). 예를 들어, 도 12b는 도 12a에서 컴퓨팅 시스템의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 우측 코너에 있는 사전정의된 위치로 드래깅한 것에 응답하여, 어포던스들(5262-A, 5262-B) 상에 오버레이된 통지(5264)를 디스플레이하는 동적 기능 열(104)을 도시한다.
일부 실시예들에서, 하나 이상의 어포던스들의 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하고, 터치 스크린 디스플레이 상에 사용자 인터페이스의 개개의 부분의 표현을 디스플레이한 후, 컴퓨팅 시스템은 터치 스크린 디스플레이 상에서 적어도 하나의 시스템 레벨 어포던스의 디스플레이를 유지한다(1022). 도 12b에서, 예를 들어, 동적 기능 열(104)은, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542)) 및 지속적 제어부들(예컨대, 이스케이프 어포던스(516) 및 전력 제어부(534))과 함께, 어포던스들(5262-A, 5262-B) 상에 오버레이된 통지(5264)를 디스플레이한다. 도 12f에서, 예를 들어, 동적 기능 열(104)은, 적어도 하나의 시스템 레벨 어포던스(예컨대, 어포던스(542)) 및 지속적 제어부들(예컨대, 이스케이프 어포던스(516) 및 전력 제어부(534))과 함께, 북마크 어포던스들의 세트(5278)를 디스플레이한다.
일부 실시예들에서, 사용자 입력을 검출한 것에 응답하여, 그리고 사용자 입력이 사전정의된 액션 기준들을 만족시키지 않는다는 판정에 따라, 컴퓨팅 시스템은 일차 디스플레이 상에서 사용자 인터페이스의 개개의 부분의 디스플레이를 유지하고, 터치 스크린 디스플레이 상에서 하나 이상의 어포던스들의 세트의 디스플레이를 유지한다(1024). 예를 들어, 도 12a에 대해, 컴퓨팅 시스템의 사용자가 커서(504)를 사용하여 통지(5264)를 일차 디스플레이(102)의 하부 좌측 코너로 드래깅하는 경우, 통지(5264)는 일차 디스플레이(102)의 하부 좌측 코너에 디스플레이될 것이고, 동적 기능 열(104)은 하부 좌측 코너가 사전정의된 위치가 아니기 때문에(예컨대, 하부 우측 코너가 사전정의된 위치임) 통지(5264)를 디스플레이할 것이다.
도 48a 내지 도 48c에서의 동작들이 기술된 특정 순서는 단지 일례이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예컨대, 방법들(600, 700, 800, 900))과 관련하여 본 명세서에 기술된 다른 프로세스들의 세부사항들이 도 48a 내지 도 48c와 관련하여 전술된 방법(1000)과 유사한 방식으로 또한 적용가능하다는 것이 주목되어야 한다.
도 49는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 브라우징하는 방법(1100)을 도시한 흐름도이다. 방법(1100)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(1102). 방법(1100)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
후술되는 바와 같이, 방법(1100)(및 연관된 인터페이스들)은 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 브라우징하기 위한 직관적인 방식을 제공한다. 방법(1100)은, 사용자가 그들의 손가락들을 물리적 입력 메커니즘 상의 키들 위의 위치들로부터 이동시킬 필요가 없고, 그 대신, 작업을 계속하기 위해 손가락 위치들을 조정하여 트랙패드로 이동시키고 이어서 손가락 위치들을 다시 물리적 입력 메커니즘으로 이동시킬 필요 없이, 간단히 이차 디스플레이 상의 제어부들을 선택할 수 있도록 사용자들에게 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들에의 빠른 액세스를 제공한다.
도 49에 도시된 바와 같이, 방법(1100)은 애플리케이션을 열라는 요청을 수신하는 단계를 포함한다. 예를 들어, 사용자는 웹 브라우저 애플리케이션에 대한 아이콘, 또는 컴퓨팅 시스템 상에서 이미 실행되고 있는 웹 브라우저 애플리케이션을 열라는 요청들을 클릭한다. 일부 실시예들에서, 사용자는 애플리케이션을 열기 위해 컴퓨팅 시스템에 구두 명령어들(예컨대, SIRI와 같은 가상 어시스턴트에게 발행되는 구두 커맨드)을 제공한다.
요청을 수신한 것에 응답하여, 컴퓨팅 시스템은, 일차 디스플레이 상에, 컴퓨팅 시스템 상에서 실행되는 애플리케이션과 연관된 복수의 사용자 인터페이스 객체들을 디스플레이한다(1106). 예를 들어, 복수의 사용자 인터페이스 객체들은 웹 브라우징 애플리케이션에서의 탭들, 사진 브라우징 애플리케이션에서의 개별 사진들, 비디오 편집 애플리케이션에서의 비디오의 개별 프레임들 등에 대응한다.
일부 실시예들에서, 복수의 사용자 인터페이스 객체들은 그의 연관된 콘텐츠와 함께 디스플레이되는 제1 사용자 인터페이스 객체 및 그들의 연관된 콘텐츠 없이 디스플레이되는 다른 사용자 인터페이스 객체들을 포함한다. 예를 들어, 도 16c에 도시된 바와 같이, 복수의 사용자 인터페이스 객체들은 브라우저 애플리케이션에서 웹 브라우징 탭들에 대응하고, 제1 사용자 인터페이스 객체는 일차 디스플레이(102) 상에 현재 포커스를 갖는 탭(5052-A)에 대응한다. 도 16c에 도시된 바와 같이, 탭(5052-A)은 연관된 웹 콘텐츠 및 다른 사용자 인터페이스 객체들과 함께 디스플레이된다(예컨대, 탭들(5050-A, 5051-A)은 그들의 연관된 웹 콘텐츠 없이 디스플레이됨).
요청을 수신한 것에 응답하여, 컴퓨팅 시스템은, 또한, 터치 감응형 이차 디스플레이 상에, 복수의 사용자 인터페이스 객체들 중 하나의 사용자 인터페이스 객체를 각각 표현하는(즉, 그에 대응하는) 어포던스들의 세트를 디스플레이한다(1108). 예를 들어, 제1 어포던스(5052-B)는 도 16c의 제1 사용자 인터페이스 객체(5052-A)에 대응한다. 일부 실시예들에서, 어포던스들의 세트는 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스 옆에 디스플레이된다(예컨대, 시스템 레벨 어포던스들은 상기에서 상세히 논의되고, 도 16c에 도시된 바와 같이, 명도, 재생, 및 볼륨 제어부들에 액세스하기 위한 시스템 레벨 어포던스들이 터치 감응형 이차 디스플레이(104) 내의 어포던스들의 세트에 인접하게 도시되어 있음).
일부 실시예들에서, 제1 탭에 대응하는 어포던스들의 세트의 제1 어포던스는 세트 내의 다른 어포던스들보다 더 큰 디스플레이 크기로 디스플레이된다(예컨대, 제1 어포던스(5052-B)는 다른 어포던스들(5050-B, 5051-B)에 비해 더 큰 디스플레이 크기를 갖는 디스플레이임). 일부 실시예들에서, 다른 어포던스들은 또한 제1 어포던스(5052-B)의 명도 레벨에 비해 더 낮은 명도 레벨로 디스플레이된다.
일부 실시예들에서, 애플리케이션을 열라는 요청을 수신하기 전, 터치 감응형 이차 디스플레이는 터치 감응형 이차 디스플레이의 애플리케이션 특정 영역 내에 상이한 세트의 어포던스들(예를 들어, Finder 애플리케이션 내의 다양한 폴더들에 액세스하기 위한 어포던스들, 예컨대 도 21b에서의 터치 감응형 이차 디스플레이(104)에 보여진 어포던스들)를 포함했다.
컴퓨팅 시스템은, 방법(1100)에 따라, 터치 감응형 이차 디스플레이를 통해, 어포던스들의 세트의 제1 어포던스로부터 어포던스들의 세트의 제2 어포던스로 향하는 방향으로의 스와이프 제스처(예컨대, 도 16c의 5011-A)를 검출한다(1110). 일부 실시예들에서, 제1 어포던스는 제1 사용자 인터페이스 객체를 표현하고(예컨대, 제1 어포던스(5052-B)는 제1 사용자 인터페이스 객체(5052-A)를 표현함), 제2 어포던스는 제1 사용자 인터페이스 객체와는 별개인 제2 사용자 인터페이스 객체를 표현한다(예컨대, 제2 어포던스(5051-B)는 제2 사용자 인터페이스 객체(5051-A)를 표현함).
스와이프 제스처를 검출한 것에 응답하여, 컴퓨팅 시스템은, 제1 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하는 것을 중지하고 제2 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하도록 (예컨대, 스와이프 제스처 동안) 일차 디스플레이를 업데이트한다. 예를 들어, 도 16d에 도시된 바와 같이, 스와이프 제스처가 제2 어포던스(5051-B)(예컨대, 도 16d의 입력(5011-B))를 향해 이동하고 그와 접촉함에 따라, 이에 응답하여, 일차 디스플레이는 제2 사용자 인터페이스 객체(5051-A)에 대한 연관된 콘텐츠를 포함하도록 업데이트된다. 일부 실시예들에서, 제2 어포던스(5051-B)는, 또한 터치 감응형 이차 디스플레이(104) 상에서 더 큰 디스플레이 크기 및 증가된 명도 레벨을 갖도록 업데이트된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이(104) 상에 디스플레이된 개개의 어포던스 위에서의 탭은 또한 (스와이프 제스처 대신에 또는 그에 더하여) 일차 디스플레이 상의 복수의 사용자 인터페이스 객체들을 통한 내비게이션을 용이하게 하는 데 이용될 수 있다. 예를 들어, 입력들(5011-A, 5011-B, 5011-C) 각각은 개별 입력들에 대응할 수 있거나, 또는 터치 감응형 이차 디스플레이(104)를 가로지르는 연속적인 스와이프 제스처에 대응할 수 있다.
일부 실시예들에서, 컴퓨팅 시스템은 터치 감응형 이차 디스플레이를 가로지르는 스와이프 제스처의 연속적인 이동을 검출하는데, 이는 스와이프 제스처가 제3 사용자 인터페이스 객체를 나타내는 제3 어포던스와 접촉하는 것을 포함한다(도 16e에 도시된 바와 같이, 5011-C는 제3 어포던스(5050-B)와 접촉함). 스와이프 제스처가 제3 어포던스와 접촉하는 것을 검출한 것에 응답하여, 컴퓨팅 시스템은 (도 16e에 도시된 바와 같이) 제3 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하도록 일차 디스플레이를 업데이트한다.
일부 실시예들에서, 어포던스의 세트 내의 각각의 어포던스는 복수의 개개의 사용자 인터페이스 객체에 대한 개개의 연관된 콘텐츠의 표현을 포함한다. 예를 들어, 어포던스들(5050-B, 5051-B, 5052-B) 각각은 (예컨대, 도 16c에 도시된 바와 같이) 일차 디스플레이(102) 상에 보여진 대응하는 탭에 대한 콘텐츠의 미니 뷰/축소된 뷰를 포함한다.
터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 사용자가 일차 디스플레이 상의 사용자 인터페이스 객체들(예컨대, 브라우저 탭들)을 통해 빠르게 내비게이팅하게 하는 것은 사용자에게 사용자 인터페이스 객체들을 통해 신속하게 내비게이팅하기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 사용자 인터페이스 객체들을 통해 빠르게 내비게이팅하기 위한 편리한 방식을 제공하는 것(및 사용자 인터페이스 객체들을 통해 내비게이팅하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 사용자 인터페이스 객체들을 통해 내비게이팅하는 데 더 적은 상호작용들을 필요로 하는 것)은, (예컨대, 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 내비게이팅하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-기계 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 더 빠르고 효율적으로 내비게이팅할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 게다가, 사용자들이 터치 감응형 디스플레이에서 입력(예컨대, 스와이프 제스처)를 제공하여 일차 디스플레이 상의 사용자 인터페이스 객체들을 통해 내비게이팅함에 따라, 터치 감응형 디스플레이에서의 각각의 접촉된 어포던스(사용자 인터페이스 객체들 중 하나에 대응함)는 다른 어포던스들로부터 시각적으로 구별되어(예컨대, 개개의 접촉된 어포던스는 확대되고 경계부가 하이라이트될 수 있음), 이에 따라, 터치 감응형 이차 디스플레이 상에 디스플레이된 정보가 사용자에게 더 구별가능해지게 한다.
일부 실시예들에서, 컴퓨팅 시스템은, 스와이프 제스처를 검출하기 전(또는 스와이프 제스처의 이동을 검출하기 전), 제1 어포던스 위에서의 터치 감응형 이차 디스플레이와의 초기 접촉을 검출한다. 초기 접촉을 검출한 것에 응답하여, 컴퓨팅 시스템은 제1 어포던스의 확대 레벨(또는 디스플레이 크기)을 증가시킨다. 일부 실시예들에서, 사용자가 일차 디스플레이(102) 상에 포커스를 두고 있는 사용자 인터페이스 객체 이외의 개개의 사용자 인터페이스 객체에 대응하는 개개의 어포던스에서 입력을 제공했다는 판정에 따라, 컴퓨팅 디바이스는 개개의 어포던스의 확대 레벨을 증가시킨다.
일부 실시예들에서, 애플리케이션은 웹 브라우징 애플리케이션이고, 복수의 사용자 인터페이스 객체들 각각은 웹 브라우징 탭들에 대응한다.
일부 실시예들에서, 컴퓨팅 시스템은 일차 디스플레이 상에서 웹 브라우징 애플리케이션의 URL 입력 부분에서의 입력을 검출한다. 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 즐겨찾기 URL들의 표현들을 포함하도록 터치 감응형 이차 디스플레이를 업데이트한다. 일례가 도 16p에 도시되어 있다.
일부 실시예들에서, 애플리케이션은 사진 브라우징 애플리케이션이고, 복수의 사용자 인터페이스 객체들 각각은 (도 27b에 도시된 바와 같이) 개별 사진들에 대응한다. 일부 실시예들에서, 어포던스들의 세트는 사용자 인터페이스 객체들 각각에 대한 콘텐츠의 타입에 기초한 상이한 표현 타입들을 포함한다. 예를 들어, UI 객체들 중 하나가 라이브 사진에 대응하는 경우, (도 28k에 도시된 바와 같이) 적절한 표시를 디스플레이한다.
일부 실시예들에서, 애플리케이션은 비디오 편집(또는 비디오 재생) 애플리케이션이고, 복수의 사용자 인터페이스 객체는 각각 개개의 비디오 내의 개별 프레임들에 대응한다. 사용자가 입력(5015-A)을 제공하여 개개의 비디오의 개별 프레임들을 통해 빠르게 내비게이팅할 수 있는 일례가 도 19a 및 도 19b에 도시되어 있다.
도 49에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 50은 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 검색 결과들을 통해 브라우징하는 방법(1200)을 도시한 흐름도이다. 방법(1200)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(1202). 방법(1200)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
후술되는 바와 같이, 방법(1200)(및 연관된 인터페이스들)은 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 검색 결과들을 통해 브라우징하고 그들을 찾아내기 위한 직관적인 방식을 제공한다. 방법(1200)은, 사용자가 그들의 손가락들을 물리적 입력 메커니즘 상의 키들 위의 위치들로부터 이동시킬 필요가 없고, 그 대신, 작업을 계속하기 위해 손가락 위치들을 조정하여 트랙패드로 이동시키고 이어서 손가락 위치들을 다시 물리적 입력 메커니즘으로 이동시킬 필요 없이, 간단히 이차 디스플레이 상의 제어부들을 선택할 수 있도록 사용자들에게 검색 결과들 사이에서 내비게이팅하기 위한 터치 감응형 이차 디스플레이에서의 사용자 인터페이스 제어부들에의 빠른 액세스를 제공한다.
방법(1200)에 따르면, 컴퓨팅 시스템은 컴퓨팅 디바이스의 일차 디스플레이 상에 디스플레이된 콘텐츠 내에서 검색하라는 요청을 수신한다(1204). 예를 들어, 도 32a 및 도 32b에 도시된 바와 같이, 요청은 웹 페이지 상의 텍스트에 대한 검색에 대응하고, 도 32c 내지 도 32e에 도시된 바와 같이, 요청은 문서 내의 텍스트에 대한 검색에 대응한다.
요청을 수신한 것에 응답하여, 컴퓨팅 시스템은, 일차 디스플레이 상에, 검색에 응답하는 복수의 검색 결과들을 디스플레이한다(1206). 일부 실시예들에서, 콘텐츠 내에서 검색하라는 요청은 콘텐츠 내에서 검색 문자열을 찾으라는 요청이고, 복수의 검색 결과들은 각각 적어도 검색 문자열을 포함한다(예컨대, 도 32a 내지 도 32e에 도시된 바와 같이, 검색 문자열은 "the"임). 일부 실시예들에서, 복수의 검색 결과들을 디스플레이하는 것은 복수의 검색 결과들 각각에 대한 검색 문자열을 하이라이트하는 것을 포함한다(예컨대, 도 32a 내지 도 32e에 도시된 바와 같이, 검색 문자열 "the"는 웹 브라우저 및 메모 애플리케이션 사용자 인터페이스들 내에서 하이라이트됨).
일부 실시예들에서, (일차 디스플레이(102)의) 포커스는 복수의 검색 결과들 중 제1 검색 결과 상에 있다(예컨대, 도 32a에 도시된 바와 같이, 제1 검색 결과는 검색 결과들의 나머지를 하이라이트하는 데 사용되는 것과는 상이한 색상을 사용하여 하이라이트됨).
요청을 수신한 것에 응답하여, 컴퓨팅 시스템은. 또한. 터치 감응형 이차 디스플레이 상에, 복수의 검색 결과들 중 개개의 검색 결과에 각각 대응하는 개개의 표현들을 디스플레이한다(1208). 예를 들어, 표현들은 (도 32a에 도시된 바와 같이) 검색 결과들 중 개개의 검색 결과들에 각각 대응하는 틱 마크들이다. 일부 실시예들에서, 틱 마크들은 (도 32a에 도시된 바와 같이) 일차 디스플레이 상의 검색 결과들의 순서에 대응하는 순서로 터치 감응형 이차 디스플레이 상에 일렬로 디스플레이된다. 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)는, 또한, 선택된 검색 결과의 현재 위치를 나타내는 텍스트(예컨대, 도 32a에 도시된 바와 같은 "1 of 29")를 포함한다.
방법(1200)에 따르면, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이를 통해, 개개의 표현들 중 한 표현을 선택하는 터치 입력(예컨대, 탭핑 또는 스와이프)을 검출하는데, 표현은 제1 검색 결과와는 별개인, 복수의 검색 결과들 중 제2 검색 결과에 대응한다(1210). 예를 들어, 도 32b 및 도 32d에 도시된 바와 같이, 터치 입력은 제10 및 제13 표현을 각각 선택한다.
입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 일차 디스플레이 상의 포커스를 제2 검색 결과로 변경한다(1212). 예를 들어, 도 32b에 도시된 바와 같이, 터치 입력이 터치 감응형 이차 디스플레이에 보여진 제13 표현을 선택한 것에 응답하여, 컴퓨팅 시스템은 일차 디스플레이 상의 포커스를 제2 검색 결과로 변경한다. 이러한 방식으로, 사용자는 터치 감응형 이차 디스플레이(104) 내에서 그들이 스크럽/스와이프/제스처함에 따라 각각의 검색 결과를 빠르고 용이하게 찾아내고 조사할 수 있다.
터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 사용자가 일차 디스플레이 상의 검색 결과들을 통해 빠르게 내비게이팅하게 하는 것은 사용자에게 검색 결과들을 통해 신속하게 내비게이팅하기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 검색 결과들을 통해 빠르게 내비게이팅하기 위한 편리한 방식을 제공하는 것(및 검색 결과들을 통해 내비게이팅하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 많은 검색 결과들을 통해 빠르게 브라우징하는 데 사용자로부터의 더 적은 상호작용들을 필요로 하는 것)은, (예컨대, 일차 디스플레이 상의 많은 검색 결과들을 통해 내비게이팅하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-기계 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 일차 디스플레이 상의 검색 결과들을 통해 더 빠르고 효율적으로 내비게이팅할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 게다가, 사용자들이 터치 감응형 디스플레이에서 입력(예컨대, 스와이프 제스처)를 제공하여 일차 디스플레이 상의 검색을 통해 내비게이팅함에 따라, 터치 감응형 디스플레이에서의 각각의 접촉된 어포던스(검색 결과들 중 하나에 대응함)는 다른 어포던스들로부터 시각적으로 구별되어(예컨대, 개개의 접촉된 어포던스는 확대되고 경계부가 하이라이트될 수 있음), 이에 따라, 터치 감응형 이차 디스플레이 상에 디스플레이된 정보가 사용자에게 더 구별가능해지게 한다.
일부 실시예들에서, 포커스를 변경하는 것은, 일차 디스플레이 상에서, 제2 검색 결과의 시각적 특성(예컨대, 렌더링하는 데 사용되는 시각적 특성)을 수정하는 것(예컨대, 더 큰 폰트 크기를 갖는 제2 검색 결과를 디스플레이하는 것 또는 상이한 하이라이트 색상을 갖는 제2 검색 결과를 디스플레이하는 것)을 포함한다.
일부 실시예들에서, 컴퓨팅 시스템은 터치 감응형 이차 디스플레이 상의 개개의 표현들 중 적어도 2개를 가로질러 이동하는 제스처를 검출한다. 제스처를 검출한 것에 응답하여, 컴퓨팅 시스템은 일차 디스플레이 상의 포커스를, 스와이프 제스처들이 개개의 표현들 중 적어도 2개를 가로질러 이동함에 따라 개개의 표현들 중 적어도 2개에 대응하는 개개의 검색 결과들로 변경한다(예컨대, 접촉이 개개의 표현들 각각을 가로질러 이동함에 따라, 일차 디스플레이는 적절한 검색 결과를 보여주도록 업데이트되어, 단일 스와이프 제스처로 검색 결과들 모두를 통하는 빠르고 용이한 내비게이션을 허용함).
일부 실시예들에서, 컴퓨팅 시스템은, 제스처의 속력이 임계 속력 초과라는 판정에 따라, 컴퓨팅 시스템은, 일차 디스플레이 상의 포커스를 개개의 표현들 중 적어도 2개의 표현들에 대응하는 것들에 더하여 개개의 검색 결과들로 변경한다. 예를 들어, 제스처가 임계 속력 초과로 이동하는 경우, 컴퓨팅 시스템은 일차 디스플레이(102)가 제스처 동안 접촉된 것들에 더하여 더 많은 검색 결과들을 순환하게 한다. 일부 실시예들에서, 제스처는 스와이프 제스처 또는 플릭 제스처이다.
일부 실시예들에서 (그리고 도 32c 및 도 32d에 도시된 바와 같이), 터치 감응형 이차 디스플레이(104)는, 선택될 때, 컴퓨팅 시스템이 현재 선택된 검색 결과를 대체하거나 일차 디스플레이(102) 상에 보여진 검색 결과들 모두를 대체하게 하는 "Replace" 어포던스를 포함한다. 일부 실시예들에서, "Replace" 어포던스의 선택에 응답하여, 컴퓨팅 시스템은 (도 32e에 도시된 바와 같이) 현재 선택을 대체할지 아니면 모든 검색 결과들을 대체할지를 선택하기 위한 추가 옵션들을 포함하도록 터치 감응형 이차 디스플레이(104)를 업데이트한다.
도 50에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 51은 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상에 디스플레이되는 이벤트에 대한 세부사항들을 수정하는 방법의 방법(1300)을 도시한 흐름도이다. 방법(1300)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(1302). 방법(1300)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
후술되는 바와 같이, 방법(1300)(및 연관된 인터페이스들)은 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상에 디스플레이되는 이벤트에 대한 세부사항들을 수정하기 위한 직관적인 방식을 제공한다. 방법(1300)은, 사용자가 그들의 손가락들을 물리적 입력 메커니즘 상의 키들 위의 위치들로부터 이동시킬 필요가 없고, 그 대신, 작업을 계속하기 위해 손가락 위치들을 조정하여 (예컨대, 복잡한 메뉴 계층구조들을 통해 내비게이팅하는 데 시간을 낭비하도록) 트랙패드로 이동시키고 이어서 손가락 위치들을 다시 물리적 입력 메커니즘으로 이동시킬 필요 없이, 간단히 이차 디스플레이 상의 제어부들을 선택할 수 있도록 사용자들에게 터치 감응형 이차 디스플레이에서 (이벤트 세부사항들을 수정하기 위한) 사용자 인터페이스 제어부들에의 빠른 액세스를 제공한다.
방법(1300)에 따르면, 컴퓨팅 시스템은, 일차 디스플레이 상에, 캘린더 애플리케이션을 디스플레이한다(1304)(예컨대, 캘린더 애플리케이션에 대한 다양한 사용자 인터페이스들이 도 36a 내지 도 36j에 도시되어 있음). 일부 실시예들에서, 터치 감응형 이차 디스플레이(104)에서 이용가능한 제어부들은 일차 디스플레이 상의 캘린더 애플리케이션과 연관된 현재 뷰에 기초하여(예컨대, 도 36a 내지 도 36d에 도시된 바와 같이, 캘린더 애플리케이션을 보기 위해 요일 뷰가 사용되는지, 주 뷰가 사용되는지, 월 뷰가 사용되는지, 또는 년 뷰가 사용되고 있는지에 따라) 변경된다.
컴퓨팅 시스템은 캘린더 애플리케이션과 연관되는 이벤트에 관한 정보를 디스플레이하라는 요청을 수신한다(1306). 요청을 수신한 것에 응답하여, 컴퓨팅 시스템은, 일차 디스플레이 상에, 제1 이벤트에 대한 이벤트 세부사항들을 디스플레이하는데, 이벤트 세부사항들은 이벤트에 대한 시작 시간 및 종료 시간을 포함한다(1308). 예를 들어, 요청은 일차 디스플레이 상의 캘린더 애플리케이션 내에 디스플레이되는 이벤트의 선택에 대응한다(도 36i에 도시된 바와 같이, "Breakfast"로 라벨링된 이벤트에 대한 이벤트 세부사항들이 일차 디스플레이(102) 상의 캘린더 애플리케이션 내에 제시됨). 도 36i에 도시된 바와 같이, 이벤트 세부사항들은 "Breakfast" 이벤트가 2015 년 6 월 24일에 10-11 AM에 있음을 나타낸다.
요청을 수신한 것에 응답하여, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이 상에, 적어도 시작 시간 및 종료 시간을 포함하는 시간의 범위를 나타내는 어포던스를 디스플레이한다(1310)(도 36i에 도시된 바와 같이, 어포던스가 보여지고, 이벤트에 대한 현재 시작 및 종료 시간들이 청색으로 하이라이트되어 있음).
일부 실시예들에서, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이를 통해, 시간의 범위를 수정하는 어포던스에서의 입력을 검출한다. 일부 실시예들에서, 시간의 범위를 수정하는 입력은, 임계량 초과의 시간 동안 어포던스와 접촉한 상태로 유지되고 이어서 터치 감응형 이차 디스플레이를 가로질러서 그 어포던스의 적어도 일부분을 이동시키는 누르기 입력이다(예컨대, 이러한 누르기 입력은, 또한, 도 36j에 도시된 바와 같이, 이벤트에 대한 종료 시간을 3 PM으로 이동시키는 드래그 제스처로 지칭될 수 있음).
입력을 검출한 것에 응답하여, 컴퓨팅 시스템은, (i) 입력에 따라 이벤트에 대한 시작 시간 및 종료 시간 중 적어도 하나를 수정하고; (ii) 일차 디스플레이 상에서, 입력에 따른 이벤트에 대한 수정된 시간 범위를 디스플레이한다(예컨대, 도 36j에 도시된 바와 같이, 일차 디스플레이(102)는 이벤트가 이제 3PM에 종료하고 있음을 반영하도록 업데이트됨).
일부 실시예들에서, 시간의 범위를 변경하는 입력은, 터치 감응형 이차 디스플레이를 가로질러 이동하고 컴퓨팅 시스템이 이벤트에 대한 새로운 시작 시간 및 새로운 종료 시간을 선택하게 하는 스와이프 제스처이다. 일부 실시예들에서, 새로운 시작 및 종료 시간들은 시작 및 종료 시간들에 의해 커버되는 동일한 지속기간을 갖는 시간 슬롯에 대응한다. 예를 들어, 컴퓨팅 디바이스는 터치 감응형 이차 디스플레이(104)가 이전 시작 및 종료 시간들과 동일한 지속기간인 다음의 이용가능한 시간 블록으로 점프하게 하는데, 예컨대, 기존의 시작/종료 시간이 1-2 PM인 경우, 스와이프는 새로운 시작 및 종료 시간이 2-3 PM으로서 선택되게 할 수 있다.
일부 실시예들에서, 컴퓨팅 시스템은 수정된 시작 및/또는 종료 시간을 갖는 이벤트를 컴퓨팅 시스템의 메모리에 저장한다.
사용자가 터치 감응형 이차 디스플레이에서 이벤트 세부사항들을 빠르고 용이하게 편집하게 하는 것은 사용자에게 여분의 입력들을 수행할 필요 없이(예컨대, 이벤트 세부사항들을 수정하기 위해 키보드를 사용하는 것과 트랙패드를 사용하는 것 사이에서 전후로 점프할 필요 없이) 이벤트 세부사항들을 빠르게 편집하기 위한 편리한 방식을 제공한다. 사용자에게 터치 감응형 이차 디스플레이를 통해 이벤트 세부사항들을 빠르게 편집하기 위한 편리한 방식을 제공하는 것(및 이벤트 세부사항들을 편집하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 이벤트 세부사항들을 편집한 원하는 결과를 달성하기 위해 더 적은 상호작용들을 필요로 하는 것)은 (예컨대, 특정 이벤트 세부사항들을 빠르게 편집하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 이벤트 세부사항들을 더 빠르고 효율적으로 편집할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 추가로, (예컨대, 이벤트에 대한 업데이트된 시작 및 종료 시간들을 보여주기 위해) 터치 감응형 이차 디스플레이에서의 입력들에 응답하여 일차 디스플레이를 업데이트함으로써, 사용자는, 이벤트를 수정하기 위한 입력을 제공하고 이어서 일차 디스플레이 상에 반영된 그러한 수정들을 즉각적으로 봄으로써 효율적인 방식으로 디바이스와의 상호작용들을 지속할 수 있어서, 사용자가 이어서 추가 입력을 제공할지의 여부를 결정할 수 있게 한다.
도 51에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 52는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이를 포함하는 컴퓨팅 시스템과 접속된 외부 디바이스들에 관한 액션가능 정보를 터치 감응형 이차 디스플레이에서 제시하는 방법의 방법(1400)을 도시한 흐름도이다. 방법(1400)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(1402). 방법(1400)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
하기에서 기술되는 바와 같이, 방법(1400)(및 연관된 인터페이스들)은 터치 감응형 이차 디스플레이를 포함하는 컴퓨팅 시스템과 접속된 외부 디바이스들에 관한 액션가능 정보를 터치 감응형 이차 디스플레이에서 제시하기 위한 직관적인 방식을 제공한다. 방법(1400)은, 사용자가 그들의 손가락들을 물리적 입력 메커니즘 상의 키들 위의 위치들로부터 이동시킬 필요가 없고, 그 대신, 작업을 계속하기 위해 손가락 위치들을 조정하여 (예컨대, 외부 디바이스들을 제어하기 위한 필요한 기능들을 찾기 위해 복잡한 메뉴 계층구조들을 통해 내비게이팅하는 데 시간을 낭비하도록) 트랙패드로 이동시키고 이어서 손가락 위치들을 다시 물리적 입력 메커니즘으로 이동시킬 필요 없이, 간단히 이차 디스플레이 상의 제어부들을 선택할 수 있도록 사용자들에게 터치 감응형 이차 디스플레이에서 (외부 디바이스들을 제어하기 위한) 사용자 인터페이스 제어부들에의 빠른 액세스를 제공한다.
방법(1400)에 따르면, 컴퓨팅 시스템은 컴퓨팅 시스템과, 컴퓨팅 시스템과는 별개인 외부 장치 사이의 새로운 접속을 검출한다(1404)(예컨대, 추가 모니터가 물리적 케이블을 사용하여 접속되고, 헤드폰은 블루투스를 통해 또는 헤드폰 잭 등을 통해 접속된다). 새로운 접속을 검출한 것에 응답하여, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이 상에, 외부 디바이스를 통해 이용가능한 기능들에 대응하는 복수의 어포던스들을 디스플레이한다(1406).
이러한 방식으로, 사용자들은 터치 감응형 이차 디스플레이로부터 옵션을 단순히 선택함으로써 새롭게 접속된 외부 디바이스들과 무엇을 할 것인지를 빠르게 결정할 수 있다. 따라서, 사용자들은 (예컨대, 메뉴로 내비게이팅하고 이어서 새로운 외부 디바이스에 대한 옵션을 선택해야 함으로써, 또는 트랙패드와 상호작용하기 위해 그들의 손을 재위치시켜야 함으로써) 새로운 외부 디바이스들과 무엇을 할 것인지를 결정하기 위해 그들의 현재 작업흐름을 중단할 필요가 없다.
일부 실시예들에서, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이를 통해, 외부 디바이스를 통해 이용가능한 제1 기능에 대응하는 제1 어포던스의 선택을 수신한다. 선택을 수신한 것에 응답하여, 컴퓨팅 디바이스는 제1 기능의 수행을 개시한다(예컨대, 컴퓨팅 디바이스는 오디오를 헤드폰으로 출력하기 시작하거나, 또는 컴퓨팅 디바이스는 외부 모니터를 사용하여 미러링을 디스플레이하기 시작함).
일부 실시예들에서, 외부 디바이스는 일차 디스플레이 및 터치 감응형 이차 디스플레이와는 별개인 추가 디스플레이이다. 일부 실시예들에서, 복수의 어포던스들은, 선택될 때, 컴퓨팅 시스템이 추가 디스플레이를 통해 디스플레이 미러링 기능의 수행을 개시하게 하는 제1 어포던스를 포함한다.
사용자가 터치 감응형 이차 디스플레이를 통해 외부 디바이스들을 효율적으로 활용하게 하는 것은 사용자에게 메뉴에 달리 매립될 수 있는 기능들에 액세스하기 위한 편리한 방식을 제공한다. 사용자에게 메뉴들에 달리 매립될 수 있는 외부 디바이스들에 대한 기능들에 액세스하기 위한 편리한 방식을 제공하는 것(및, 따라서, 기능들에 액세스하는 데 필요한 입력들의 수를 감소시켜서, 이에 따라, 외부 디바이스들을 사용하기 위해 더 적은 상호작용들을 필요로 하는 것)은, (예컨대, 외부 디바이스에 대한 특정 기능을 수행하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 외부 디바이스들과 더 빠르고 효율적으로 상호작용할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 이러한 방식으로, 터치 감응형 이차 디스플레이는 또한 (디바이스와 외부 디바이스 사이의 접속 상태를 반영하고, 사용자들이 외부 디바이스와 용이하게 상호작용하게 함으로써) 디바이스의 내부 상태에 관한 정보를 전달한다.
도 52에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 53은 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 애플리케이션 내에 디스플레이되는 글자들을 미리보기하는 방법(1500)을 도시한 흐름도이다. 방법(1500)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(1502). 방법(1500)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
후술되는 바와 같이, 방법(1500)(및 연관된 인터페이스들)은 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 애플리케이션 내에 디스플레이되는 글자들을 미리보기하기 위한 직관적인 방식을 제공한다. 방법(1500)은, 사용자가 그들의 손가락들을 물리적 입력 메커니즘 상의 키들 위의 위치들로부터 이동시킬 필요가 없고, 그 대신, 작업을 계속하기 위해 손가락 위치들을 조정하여 (예컨대, 원하는 글자들을 찾기 위해 복잡한 메뉴 계층구조들을 통해 내비게이팅하는 데 시간을 낭비하도록) 트랙패드로 이동시키고 이어서 손가락 위치들을 다시 물리적 입력 메커니즘으로 이동시킬 필요 없이, 간단히 이차 디스플레이 상의 제어부들을 선택할 수 있도록 사용자들에게 터치 감응형 이차 디스플레이에서 (글자들을 용이하게 미리보기하기 위한) 사용자 인터페이스 제어부들에의 빠른 액세스를 제공한다.
방법(1500)에 따르면, 컴퓨팅 시스템은, 일차 디스플레이 상에, 컴퓨팅 시스템 상에서 실행되고 있는 애플리케이션에 대한 사용자 인터페이스를 디스플레이한다(1504)(예컨대, 사용자 인터페이스는, 도 33a에 도시된 것과 같은 메시징 애플리케이션에 대한 것임). 컴퓨팅 시스템은 사용자 인터페이스 내의 특정 위치에서 제1 입력(예컨대, 도 32e의 입력(5046-A))을 검출한다(1506). 예를 들어, 제1 입력은 문서를 작성 또는 편집하라는 요청, 텍스트 메시지를 작성 또는 편집하기 시작하라는 요청 등에 대응한다. 일부 실시예들에서, 제1 입력은 컴퓨팅 시스템이, 디스플레이된 커서가 입력이 검출되었던 특정 위치로 이동하도록, 디스플레이된 커서에 대한 위치를 업데이트하게 한다.
제1 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이 상에, 별개의 글자들에 각각 대응하는 어포던스들의 세트를 디스플레이한다(1506)(예컨대, 도 33a에 도시된 바와 같이, 어포던스들의 세트는 각각 개별 이모지들에 대응함).
일부 실시예들에서, 제1 입력은, 또한, 터치 감응형 이차 디스플레이 내의 어포던스들의 세트의 디스플레이를 활성화하기 위해 터치 감응형 이차 디스플레이에 제공될 수 있다(예컨대, 제1 입력은 도 33b의 입력(5046-B)에 대응함).
일부 실시예들에서, 애플리케이션에 대한 사용자 인터페이스를 디스플레이하는 것은 어포던스들의 세트를 포함하도록 터치 감응형 이차 디스플레이를 업데이트하는 것을 포함한다. 예를 들어, 애플리케이션이 열리고 사용자들이 문서를 작성 또는 편집하기 시작하게 하면, 터치 감응형 제2 디스플레이가 어포던스들의 세트를 포함하게 하기 위한 어떠한 추가 입력도 필요하지 않다.
일부 실시예들에서, 컴퓨팅 시스템은 사용자 인터페이스 내에 포함된 텍스트 콘텐츠에 적어도 부분적으로 기초하여 어포던스들의 세트에 포함시킬 어포던스들을 결정한다(예컨대, 어포던스들의 세트 내에 디스플레이된 이모지들은 이미 타이핑되었던 것, 특정 단어들이 이미 타이핑되었을 때 선택된 이전 이모지들 등에 기초하여 변경됨). 일부 실시예들에서, 결정하는 것은 사용자가 사용자 인터페이스에 포함된 텍스트 콘텐츠를 수정했음을 검출한 것에 응답하여 이행된다(예컨대, 사용자가 텍스트를 타이핑하거나 제거함에 따라, 터치 감응형 이차 디스플레이 내에 디스플레이된 제안된 이모지들이 변경될 수 있음).
일부 실시예들에서, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이를 통해, 별개의 글자들 중 제1 글자에 대응하는 제1 어포던스 위에서의 제2 입력(예컨대, 도 33c의 입력(5047))을 검출한다(예컨대, 제1 어포던스는 제1 이모지 글자에 대응함). 제2 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은, 입력이 제1 어포던스와 접촉한 상태로 유지되는 동안, 일차 디스플레이 상에, 특정 위치에서의 제1 글자의 미리보기를 디스플레이한다. 예를 들어, 도 33c에 도시된 바와 같이, 입력(5047)에 의해 접촉되는 제1 이모지 글자의 미리보기가. 일차 디스플레이(102) 상에서, 메시징 애플리케이션에 대한 사용자 인터페이스 내에 제시된다.
일부 실시예들에서, 컴퓨팅 시스템은, 또한, 터치 감응형 이차 디스플레이를 통해, 제1 어포던스로부터, 별개의 글자들 중 제2 글자에 대응하는 제2 어포던스로의 제2 입력의 이동을 검출한다(예컨대, 입력(5047)은 도 33d의 입력(5048)에 대응하는 터치 감응형 이차 디스플레이 상의 위치로 이동함). 제1 어포던스로부터 그리고 제2 어포던스로의 제2 입력의 이동을 검출한 것에 응답하여, 컴퓨팅 시스템은 (예컨대, 도 33d에 도시된 바와 같이) 제1 글자의 미리보기를 제2 글자의 미리보기로 대체한다. 일부 실시예들에서, 제2 입력이 터치 감응형 이차 디스플레이를 가로질러 계속해서 이동함에 따라, 컴퓨팅 시스템은 어포던스들의 세트 내의 대응하는 어포던스들이 제2 입력에 의해 접촉될 때 별개의 글자들 중 개개의 글자들에 대한 미리보기들을 디스플레이한다(예컨대, 미리보기는 일차 디스플레이(102) 상에서 입력(5047)과 입력(5048) 사이의 터치 감응형 이차 디스플레이 상에 위치된 이모지들 각각을 보여주도록 업데이트됨).
일부 실시예들에서, 제2 글자의 미리보기는 제2 입력이 제2 어포던스와 접촉한 상태로 유지되는 동안에 일차 디스플레이 상에 디스플레이된 상태로 유지된다.
일부 실시예들에서, 컴퓨팅 시스템은, 제2 입력이 제2 어포던스와 접촉하는 동안, 제2 입력의 리프트오프를 검출한다. 리프트오프를 검출한 것에 응답하여, 컴퓨팅 시스템은 제2 사용자 인터페이스 요소의 영구 디스플레이(즉, 그의 미리보기가 아님)를 포함하도록 사용자 인터페이스를 업데이트한다.
일부 실시예들에서, 컴퓨팅 시스템은, 제2 입력이 제2 어포던스와 접촉하는 동안, 추가 입력(예컨대, 제2 어포던스에서의 제2 입력 동안 더 강하게 누르기)을 검출한다. 추가 입력을 검출한 것에 응답하여, 컴퓨팅 시스템은 제2 사용자 인터페이스 요소의 영구 디스플레이(즉, 그의 미리보기가 아님)를 포함하도록 사용자 인터페이스를 업데이트한다.
터치 감응형 이차 디스플레이에서 직관적 입력을 제공함으로써 사용자가 일차 디스플레이 상의 애플리케이션 내에서 글자들이 어떻게 보일지를 빠르고 용이하게 미리보기하게 하는 것은 사용자에게 애플리케이션 내에서 글자들이 어떻게 보일지를 빠르게 미리보기하게 하기 위한 편리한 방식을 제공한다. 사용자에게 애플리케이션 내에서 글자들이 어떻게 보일지를 빠르게 미리보기하게 하기 위한 편리한 방식을 제공하는 것은, (예컨대, 글자들이 어떻게 보일지를 빠르기 미리보기하게 하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 하여, 이에 따라, 일차 디스플레이 상에서 이러한 글자들이 어떻게 보일지를 미리보기하는 데 더 적은 상호작용들이 요구됨으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 글자들을 더 빠르고 효율적으로 미리보기할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 이러한 방식으로, 사용자들에게 글자들을 계속해서 미리보기하는 것, 및 이어서 원하는 글자를 찾을 때까지 입력들을 계속해서 제공하는 것이 허용됨에 따라, 사용자들에게는 그들의 디바이스들과의 효율적이고 지속적인 상호작용들이 제공된다.
일부 실시예들에서, 터치 감응형 이차 디스플레이에서의 스와이프 제스처들을 통한 이모지 미리보기에 대해 전술된 기능은, 또한, 애플리케이션에 대한 사용자 인터페이스 내에 디스플레이된 텍스트에 대한 다른 수정들을 수행하는 데 활용된다. 예를 들어, 터치 감응형 이차 디스플레이는 색상 선택자(예컨대, 도 15b에 도시되고 방법(1600)을 참조하여 하기에서 더 상세히 후술되는 색상 옵션들의 열)을 디스플레이할 수 있으며, 사용자가 색상 선택자 내의 다양한 색상 옵션들 위에서 스와이프함에 따라, 선택된 텍스트는 사용자에게 스와이프 제스처와 결합하여 접촉되는 다양한 색상 옵션들 각각에 대해 그 텍스트가 어떻게 보일 것인지의 미리보기를 제공하도록 일차 디스플레이 상에서 동적으로 수정된다.
도 53에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 54는 일부 실시예들에 따른, 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성들을 수정하는 방법(1600)을 도시한 흐름도이다. 방법(1600)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(1602). 방법(1600)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
하기에 기술되는 바와 같이, 방법(1600)(및 연관된 인터페이스들)은 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성들을 수정하기 위한 직관적 방식을 제공한다. 방법(1600)은, 사용자가 그들의 손가락들을 물리적 입력 메커니즘 상의 키들 위의 위치들로부터 이동시킬 필요가 없고, 그 대신, 작업을 계속하기 위해 손가락 위치들을 조정하여 (예컨대, 시각적 특성들을 수정하는 것을 허용하는
원하는 기능들을 찾기 위해 복잡한 메뉴 계층구조들을 통해 내비게이팅하는 데 시간을 낭비하도록) 트랙패드로 이동시키고 이어서 손가락 위치들을 다시 물리적 입력 메커니즘으로 이동시킬 필요 없이, 간단히 이차 디스플레이 상의 제어부들을 선택할 수 있도록 사용자들에게 터치 감응형 이차 디스플레이에서 (일차 디스플레이 상에 콘텐츠를 렌더링하는 데 이용되는 시각적 특성들을 용이하게 수정하기 위한) 사용자 인터페이스 제어부들에의 빠른 액세스를 제공한다.
방법(1600)에 따르면, 컴퓨팅 시스템은 콘텐츠 편집 애플리케이션(예컨대, 도 15b에 도시된 드로잉 애플리케이션과 같은, 문서들, 도면들, 사진들 등을 작성 및 편집하기 위한 애플리케이션)을 열라는 요청을 수신한다(1604). 요청을 수신한 것에 응답하여, 컴퓨팅 시스템은 (예컨대, 도 15b에 도시된 바와 같이) 일차 디스플레이 상에 콘텐츠 편집 애플리케이션을 디스플레이한다(1606).
요청을 수신한 것에 응답하여, 컴퓨팅 디스템은, 또한, 터치 감응형 이차 디스플레이 상에, 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 이용되는 적어도 하나의 시각적 특성을 수정하기 위한 사용자 인터페이스 제어부(예컨대, 도 15b에 도시된 색상 선택자(5505)와 같은, 콘텐츠 편집 애플리케이션 내에 디스플레이된 콘텐츠에 대한 색상들을 선택하기 위해 사용되는 색상 값들의 슬라이딩 스케일을 포함하는 색상 선택자)를 디스플레이한다(1608). 일부 실시예들에서, 색상 선택자(5505)는 기본 디스플레이 모드(도 15b)에서 보여지고, 다른 환경에서(또는 어포던스(5506)에서의 사용자 입력에 응답하여), 색상 선택자는 (도 15e 내지 도 15h에 도시된 바와 같이) 고급 디스플레이 모드에서 보여진다. 일부 실시예들에서, (기본 및 고급 디스플레이 모드들에서의) 사용자 인터페이스 제어부는 값들의 슬라이딩 스케일을 따라 적어도 하나의 시각적 특성에 대한 개개의 값에 각각 대응하는 개개의 제어부들을 포함한다(예컨대, 도 15b의 색상 선택자(5505)에서 보여지는 색상의 각각의 블록은 하나의 색상 값에 대응함).
일부 실시예들에서, 컴퓨팅 시스템은, 터치 감응형 이차 디스플레이(104)를 통해, 적어도 하나의 시각적 특성에 대한 제1 값을 선택하는 사용자 인터페이스 제어부에서의 입력을 검출한다(예컨대, 입력(5010-C)은 분홍색의 음영을 선택함). 입력을 검출한 후, 컴퓨팅 시스템은, 적어도 하나의 시각적 특성에 대한 제1 값을 사용하여 콘텐츠 편집 애플리케이션에서 콘텐츠를 렌더링한다(예컨대, 콘텐츠 편집 애플리케이션에 추가된 모든 새로운 콘텐츠는 제1 값을 사용하여 렌더링되고/되거나 현재 선택된 콘텐츠는 제1 값을 사용하여 렌더링됨). 예를 들어, 도 15d에 도시된 바와 같이, 예시적인 스틱 피규어(stick figure)의 머리가 제1 값을 사용하여 렌더링된다.
일부 실시예들에서, 콘텐츠를 렌더링하기 전에, 컴퓨팅 시스템은 콘텐츠의 선택(예컨대, 도 15a의 커서(504)를 통해 수신하는 입력과 같은, 스틱 피규어의 머리를 선택하는 입력)을 수신한다. 일부 실시예들에서, 콘텐츠를 렌더링하는 것은 적어도 하나의 시각적 특성에 대한 제1 값을 사용하여 콘텐츠의 미리보기를 제시하는 것을 포함한다(예컨대, 스틱 피규어의 머리에 대한 수정은 미리보기임).
일부 실시예들에서, 값들의 슬라이딩 스케일은 색상의 별개의 음영들을 표현한다. 일부 실시예들에서, 제1 값은 제1 색상의 제1 음영에 대응하고, 방법(1600)은, 입력이 사전결정된 기준들을 만족시킨다(임계량 초과의 시간 동안 접촉 상태로 유지되거나 세기 기반 임계치를 만족시킴)는 판정에 따라, 제1 색상의 제1 음영과는 별개인, 제1 색상의 다른 음영들을 선택하기 위한 옵션들을 포함하도록 터치 감응형 이차 디스플레이 상의 사용자 인터페이스 제어부를 수정하는 단계를 추가로 포함한다. 입력(5010)이 임계량 초과의 시간 동안 터치 감응형 이차 디스플레이(104)와 접촉한 상태로 유지되고, 이에 응답하여, 터치 감응형 이차 디스플레이가 제1 색상의 다른 음영(예컨대, 분홍색의 다른 음영들)을 선택하기 위한 옵션들을 제시하는 일례가 도 15b 내지 도 15d에 도시되어 있다. 일부 실시예들에서, 사용자는 그러한 다른 색상들이 일차 디스플레이(102) 상에서 어떻게 보일 것인지를 빠르게 미리보기하기 위해 단지 제1 색상의 다른 음영들을 가로질러 입력을 슬라이드할 필요가 있다.
일부 실시예들에서, 미리보기는 입력이 터치 감응형 이차 디스플레이와 접촉한 상태로 유지되는 동안에 제시된다. 일부 실시예들에서, 컴퓨팅 시스템은, 입력의 리프트오프를 검출한 것에 응답하여, 미리보기를 디스플레이하는 것을 중지하고, 그 대신, 선택된 콘텐츠를 적어도 하나의 시각적 특성에 대한 제1 값으로 디스플레이한다(예컨대, 스틱 피규어의 머리는, 단지 입력이 터치 감응형 이차 디스플레이(104)와 접촉한 상태로 유지되는 동안에 지속되는 미리보기로서가 아니라 지속적 방식으로 렌더링됨).
일부 실시예들에서, 컴퓨팅 시스템은, 입력의 리프트오프를 검출한 것에 응답하여, 적어도 하나의 시각적 특성에 대한 수정된 값을 갖는 편집가능 콘텐츠의 일부분을 디스플레이한다.
따라서, 사용자들에게 터치 감응형 이차 디스플레이에서 입력들을 제공함으로써 일차 디스플레이 상의 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 사용되는 시각적 특성들을 수정하기 위한 직관적 방식이 제공된다. 사용자들에게 이러한 방식으로 시각적 특성들을 수정하기 위한 직관적 방식을 제공하는 것은, (예컨대, 일차 디스플레이 상에 콘텐츠를 렌더링하는 데 이용될 때 특정 시각적 특성들이 어떻게 보일지를 빠르게 미리보기하게 하기 위해 터치 감응형 이차 디스플레이에서 단일 입력 또는 제스처를 필요로 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스를 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 시각적 특성들에 대한 변경들을 더 빠르고 더 효율적인 방식으로 미리보기할 수 있게 함으로써, 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다. 이러한 방식으로, 사용자들에게 일차 디스플레이 상에서 시각적 특성에 대한 수정들이 어떻게 보일지를 계속해서 미리보기하는 것, 및 이어서 시각적 특성에 대한 원하는 수정을 찾을 때까지 입력들을 계속해서 제공하는 것이 허용됨에 따라, 사용자들에게는 그들의 디바이스들과의 효율적이고 지속적인 상호작용들이 제공된다.
도 54에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 66은 일부 실시예들에 따른, 효율적인 로그인을 가능하게 하기 위해 생체 측정 센서를 사용하는 방법(2800)을 도시한 흐름도이다. 방법(2800)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(2802). 방법(2800)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
하기에서 기술되는 바와 같이, 방법(2800)(및 연관된 인터페이스들)은 생체 측정 센서를 사용하여 효율적인 로그인(로그인을 완료하는 데 단지 단일 입력만이 필요한 일부 경우들에 있어서, 더 적은 입력들을 필요로 하는 로그인)을 가능하게 하기 위한 직관적 방식을 제공한다. 방법(2800)은 사용자들에게 그들의 디바이스들에 빠르게 로그인하는 능력을 제공하여, 사용자가 항상 그들의 패스워드를 항상 타이핑할 필요가 없거나 사용자 특정 로그인 페이지로 내비게이팅해야 할 필요가 없게 한다(그 대신, 사용자는 단순히 생체 측정 정보를 제공하며, 그 생체 측정 정보에 기초하여, 디바이스는 사용자를 식별하고 빠른 로그인을 허용함).
방법(2800)에 따르면, 전자 디바이스는, 디바이스가 잠금된 상태에 있는 동안(예컨대, 잠금된 상태는 디바이스의 하나 이상의 특징부들이 디스에이블되고 민감한 정보에의 액세스 또는 정보를 변경 또는 삭제하는 능력이 금지된 상태임), 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들에 로그인하는 것과 연관된 개개의 로그인 사용자 인터페이스를 디스플레이한다(2804). 예시적인 로그인 사용자 인터페이스가 도 26c의 일차 디스플레이(102) 상에 보여진다.
일부 실시예들에서, 로그인 사용자 인터페이스는 생체 측정 정보를 제공하기 위한 명령어들을 포함한다(예컨대, 도 26c에 도시된 바와 같이, 로그인 사용자 인터페이스는 명령어들 "Touch ID to login or switch users"를 포함함). 일부 실시예들에서, 디바이스는 생체 측정 센서에 인접해 있는 이차 디스플레이(예컨대, 본 명세서에 기술된 터치 감응형 이차 디스플레이(104))를 포함하고; 방법(2800)은, 디바이스의 디스플레이 상에 로그인 사용자 인터페이스를 디스플레이하는 동안, 이차 디스플레이에서, 생체 측정 센서를 통해 생체 측정 정보를 제공하라는 명령어들을 디스플레이하는 단계를 포함한다(예컨대, 이차 디스플레이(104)는 텍스트 "Touch ID to Login"를 포함함). 일부 실시예들에서, 생체 측정 센서는 지문 센서이다. 일부 실시예들에서, 생체 측정 센서는 얼굴 검출 센서이다. 일부 실시예들에서, 생체 측정 센서는 망막 스캐너이다.
로그인 사용자 인터페이스를 디스플레이하는 동안, 전자 디바이스는 사용자에 관한 생체 측정 정보를 수신한다(2806). 예를 들어, 사용자는 전자 디바이스의 사전정의된 영역에서(예컨대, 전자 디바이스와 일체화된 생체 측정 센서, 예컨대 물리적 키보드 위에 위치되고 이차 디스플레이에 인접해 있는 생체 측정 센서에서) 지문을 제공한다. 일부 실시예들에서, 생체 측정 센서는 이차 디스플레이와 일체형이다.
생체 측정 정보를 수신한 것에 응답하여, 전자 디바이스는, 제1 및 제2 사용자 계정들이 디바이스 상에 활성 세션들을 갖지 않는 동안(예컨대, 디바이스가 막 부팅되었거나 또는 사용자들이 아직 디바이스에 로그인하지 않았음), 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는지 아니면 제2 사용자 계정에 대한 생체 측정 정보와 일치하는지 판정한다. 예를 들어, 도 26c에 도시된 바와 같이, (디스플레이된 로그인 사용자 인터페이스 상의 이름 Josh Olson 근처에서 주황색-하이라이트된 체크마크에 의해 나타나는 바와 같이) 사용자들 "Johnny Appleseed" 및 "Sally"는 아직 로그인하지 않았으며, 사용자 "Josh Olson"은 로그인했다.
생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다는 판정에 따라, 디바이스는 디스플레이 상에, 제1 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이한다(2808). 예를 들어, 프롬프트는 (도 26a에 도시된 바와 같이, 사용자 "Johnny Appleseed"로부터의 생체 측정 정보를 수신한 후) 텍스트 "Touch ID disabled for initial login, please enter your password"를 포함한다.
생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다는 판정에 따라, 디바이스는 디스플레이 상에, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이한다(2810). 예를 들어, 프롬프트는 도 26a에 도시된 프롬프트와 유사하지만, 제2 사용자 계정에 대해(예컨대, 사용자 "Sally"로부터의 생체 측정 정보를 수신한 것에 응답하여, "Johnny Appleseed"에 대해서가 아니라 사용자 "Sally"에 대해) 디스플레이된다.
이러한 방식으로, 사용자들에게는 생체 측정 센서에서 단일 입력을 제공함으로써 사용자 특정 로그인 페이지에 액세스하기 위한 직관적인 방식이 제공된다. 사용자들에게 이러한 방식으로 사용자 특정 로그인 페이지에 액세스하기 위한 직관적 방식을 제공하는 것은 (예컨대, 적절한 사용자 특정 로그인 페이지에 빠르게 액세스하기 위해 생체 측정 센서에서 단일 입력 또는 제스처를 필요로 하여, 이에 따라, 사용자 특정 로그인 페이지에 도달하는 데 더 적은 상호작용들이 필요하게 함으로써) 컴퓨팅 시스템의 조작성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 단일 입력을 통해 로그인 페이지에 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 전자 디바이스는, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖는다는 판정에 따라, 디바이스는 (예를 들어, 추가 사용자 입력을 필요로 하지 않고서, 예컨대 제1 사용자 계정이 패스워드를 입력할 것을 필요로 하지 않고서) 제1 사용자 계정에 대해 잠금해제한다. 예를 들어, 제1 사용자 계정은 디바이스 상에 활성 세션을 갖는 것으로서 도 26c에 도시된 사용자 "Josh Olson"에 대응한다.
일부 실시예들에서, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖는다는 판정에 따라, 디바이스는 (예컨대, 추가 사용자 입력을 필요로 하지 않고서) 제2 사용자 계정에 대해 잠금해제한다. 예를 들어, "샐리(Sally)"와 같은 다른 사용자들 중 하나는 이미 로그인했고 디바이스 상에 활성 세션을 가지며, 이에 따라, 디바이스는 추가 입력을 요구하는 대신에 즉시 잠금해제된다.
일부 실시예들에서, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 디바이스의 임의의 사용자 계정에 대한 생체 측정 정보와 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지하는 것을 포함한다. 예를 들어, 디바이스 상에 사용자 계정을 갖지 않는 일부 다른 사용자가 (지문과 같은) 생체 측정 정보를 제공하려고 시도하는 경우, 디바이스는 잠금된 상태로 유지된다(예컨대, 디바이스는 로그인 사용자 인터페이스를 계속해서 디스플레이하고, 제공된 생체 측정 정보가 인식되지 않음을 나타내는 메시지를 디스플레이할 수 있음).
일부 실시예들에서, 로그인 사용자 인터페이스는 복수의 사용자 계정들에 대응하는 복수의 선택가능한 어포던스들을 포함한다(도 26c에 도시된 바와 같이, 선택가능한 어포던스들은 사용자들 각각에 대해 보여짐).
일부 실시예들에서, 디바이스는, 제1 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트(예컨대, 도 26a에 도시된 프롬프트)를 디스플레이하는 동안, 로그인 크리덴셜의 입력을 수신하며(예컨대, 패스워드는 "Enter Password" 입력 박스에서 입력됨); 로그인 크리덴셜의 입력을 수신한 것에 응답하여, 디바이스는 로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치하는지의 여부를 판정한다.
로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치한다는 판정에 따라, 디바이스는 제1 사용자 계정에 대해 잠금해제된다. 로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치하지 않는다는 판정에 따라, 디바이스는 잠금된 상태로 유지된다.
일부 실시예들에서, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 동안, 디바이스는 로그인 크리덴셜의 입력(예컨대, 도 26a의 "Enter Password" 입력 박스에서 제2 사용자에 의해 입력된 패스워드)을 수신한다. 로그인 크리덴셜의 입력을 수신한 것에 응답하여, 디바이스는 로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치하는지의 여부를 판정한다.
로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치한다는 판정에 따라, 디바이스는 제1 사용자 계정에 대해 잠금해제되고; 로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치하지 않는다는 판정에 따라, 디바이스는 잠금된 상태로 유지된다.
도 66에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
도 67은 일부 실시예들에 따른, 로그인된 사용자 계정들 사이에서의 효율적인 고속 스위칭을 가능하게 하기 위해 생체 측정 센서를 사용하는 방법(2900)을 도시한 흐름도이다. 방법(2900)은 프로세서, 메모리, 일차 디스플레이를 포함하는 제1 하우징, 및 물리적 키보드(본 명세서에서 물리적 입력 메커니즘으로도 지칭됨) 및 일차 디스플레이와는 별개인 터치 감응형 이차 디스플레이를 적어도 부분적으로 포함하는 제2 하우징을 포함하는 컴퓨팅 시스템에서 수행된다(2902). 방법(2900)에서의 일부 동작들은 선택적으로 조합되고/되거나, 일부 동작들의 순서는 선택적으로 변경된다.
일부 실시예들에서, 컴퓨팅 시스템은 휴대용 컴퓨팅 시스템(100)(도 1a) 또는 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 일차 디스플레이는 휴대용 컴퓨팅 시스템(100)(도 1a)의 디스플레이 부분(110)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(110)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 1a)이다. 대안으로, 일부 실시예들에서, 일차 디스플레이는 주변기기 디스플레이 디바이스(204)(본 명세서에서, 일차 디스플레이(102)를 포함하는 제1 하우징(204)으로도 지칭됨)에서 구현되는 일차 디스플레이(102)(도 2a 내지 도 2d)이다. 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 1a 및 도 1b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 1a 및 도 1b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 휴대용 컴퓨팅 시스템(100)의 본체 부분(120)(도 1a 및 도 1b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2a 및 도 2b의 동적 기능 열(104)) 및 물리적 키보드(예컨대, 도 2a 및 도 2b의 물리적 키들의 세트(106))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 주변기기 키보드(206)(도 2a 및 도 2b)이다. 대안으로, 일부 실시예들에서, 제2 하우징은 터치 감응형 이차 디스플레이(예컨대, 도 2c의 동적 기능 열(104))를 적어도 부분적으로 포함하는 데스크톱 컴퓨팅 시스템(200)의 제1 주변기기 입력 메커니즘(212) (도 2c)이고, 제2 하우징은 입력 메커니즘(예컨대, 도 2c의 터치패드(108))를 포함하고 물리적 키보드를 포함하지 않는다.
하기에 기술되는 바와 같이, 방법(2900)(및 연관된 인터페이스들)은 생체 측정 센서를 사용하여 로그인된 사용자 계정들 사이에서 효율적인 고속 스위칭을 가능하게 하기 위한 직관적 방식을 제공한다. 방법(2900)은 단순히 생체 측정 정보를 제공함으로써 (그리고 사용자들을 스위칭하기 위해 패스워드를 제공하거나 사용자 인터페이스로 내비게이팅할 필요 없이) 사용자들에게 사용자들이 그들의 사용자 계정들로 스위칭하게 하는 제어부들 및 가이던스를 제공한다.
방법(2900)에 따르면, 전자 디바이스는, 디바이스가 제1 사용자 계정에 로그인되어 있는 동안, 제1 사용자 계정과 연관된 사용자 인터페이스(예컨대, 제1 사용자 계정에 대한 홈 스크린 또는 데스크톱)를 디스플레이한다(2904). 디바이스는 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들과 연관되고, 제2 사용자 계정은 제2 사용자 계정에 로그인하는 것을 가능하게 하는 생체 측정 정보와 연관된다.
제1 사용자 계정과 연관된 사용자 인터페이스를 디스플레이하는 동안, 디바이스는 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한다(2906). 예를 들어, 제2 사용자는, 제1 사용자 계정이 현재 로그인되어 있는 동안, 일체형 생체 측정 센서에서의 입력을 제공한다.
일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 디바이스는, 제2 사용자 계정이 디바이스 상에 활성 세션을 갖는 동안, 입력이 제2 사용자 스위칭 기준들을 충족시키는지의 여부를 판정한다. 일부 실시예들에서, 제2 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함한다.
입력이 제2 사용자 스위칭 기준들을 충족시키는 한편 제2 사용자 계정이 디바이스 상에 활성 세션을 갖는다는 판정에 따라, 디바이스는, (i) 제2 사용자 계정에 대해 디바이스를 잠금해제하고; (ii) 제1 사용자 계정에 대해 디바이스를 잠금하고(예를 들어, 제1 사용자 계정을 로그오프함); (iii) 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제2 사용자 계정과 연관된 사용자 인터페이스로 대체한다(2908). 이러한 방식으로, 제2 사용자는 단순히 단일 생체 측정 입력을 제공함으로써 디바이스 상에서의 활성 세션에 대한 액세스를 획득할 수 있다.
따라서, 사용자들에게는 생체 측정 센서에서 단일 입력을 제공함으로써 전자 디바이스 상의 활성 사용자 특정 세션에 액세스하기 위한 직관적인 방식이 제공된다. 사용자들에게 이러한 방식으로 활성 사용자 특정 세션에 액세스하기 위한 직관적 방식을 제공하는 것은 (예컨대, 활성 세션에의 즉각적 액세스를 얻기 위해 생체 측정 센서에서 단일 입력 또는 제스처를 필요로 하여, 그에 따라, 사용자 계정들을 스위칭하고 디바이스에 로그인하는 데 더 적은 상호작용들을 필요로 함으로써) 전자 디바이스의 조작성을 향상시키고 사용자-디바이스 인터페이스가 더 효율적이 되게 하는데, 이는, 추가로, 사용자가 단일 입력을 통해 활성 세션에 액세스할 수 있게 함으로써 디바이스의 전력 사용량을 감소시키고 배터리 수명을 개선한다.
일부 실시예들에서, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제2 사용자 스위칭 기준들을 충족시키는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다 - 제2 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디바이스는, 디스플레이 상에, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이한다(예컨대, "Touch ID disabled for initial login, please enter your password"라는 텍스트를 갖는
예시적인 프롬프트가 도 26a에 도시되어 있음).
일부 실시예들에서, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제3 사용자 스위칭 기준들을 충족시키는 한편 제3 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제3 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디바이스는, (i) 제3 사용자 계정에 대해 디바이스를 잠금해제하고; (ii) 제1 사용자 계정에 대해 디바이스를 잠금하고; (iii) 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제3 사용자 계정과 연관된 사용자 인터페이스로 대체한다. 이러한 방식으로, 제3 사용자는 단순히 단일 생체 측정 입력을 제공함으로써 디바이스 상에서의 활성 세션에 대한 액세스를 획득할 수 있다.
일부 실시예들에서, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제3 사용자 스위칭 기준들을 충족시키는 한편 제3 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다 - 제3 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디스플레이 상에, 제3 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이한다(예컨대, "Touch ID disabled for initial login, please enter your password"라는 텍스트를 갖는 예시적인 프롬프트가 도 26a에 도시되어 있음).
일부 실시예들에서, 제1 사용자는 생체 측정 입력을 제공함으로써 사용 중인 디바이스에 빠르고 용이하게 다시 로그인할 수 있다. 예를 들어, 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제2 사용자 계정(또는 제3 사용자 계정)과 연관된 사용자 인터페이스로 대체한 후에 그리고 제2 사용자 계정(또는 제3 사용자 계정)과 연관된 사용자 인터페이스를 디스플레이하는 동안, 디바이스는 일체형 생체 측정 센서를 갖는 입력 요소를 통해 제2 입력을 수신한다. 일체형 생체 측정 센서를 갖는 입력 요소를 통해 제2 입력을 수신한 것에 응답하여, 제2 입력이 제1 사용자 스위칭 기준들을 충족시키는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제1 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디바이스는, (i) 제1 사용자 계정에 대해 디바이스를 잠금해제하고; (ii) 제2 사용자 계정에 대해 디바이스를 잠금하고; (iii) 제2 계정과 연관된 사용자 인터페이스의 디스플레이를 제1 사용자 계정과 연관된 사용자 인터페이스로 대체한다. 이러한 방식으로, 제1 사용자는 전자 디바이스의 사용을 즉시 재개하기 위해 (그리고 패스워드를 입력하거나 디바이스의 사용을 재개하기 위한 임의의 다른 입력들을 제공할 필요 없이) 단일 생체 측정 입력을 제공할 수 있다.
일부 실시예들에서, 입력 요소는 버튼(예컨대, 터치 감응형 이차 디스플레이(104) 상에 포함되거나 또는 이차 디스플레이(104)에 인접하게 위치된 버튼)이고, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 검출하는 것은 버튼을 통한 누르기 입력을 검출하는 것을 포함한다. 예를 들어, 입력은 기계적 버튼의 푸시 입력, 또는 사전정의된 세기/압력 임계치 초과의 세기/압력을 갖는 누르기 입력이다. 일부 실시예들에서, 누르기 입력을 검출하지 않고 생체 측정 정보가 검출되는 경우, 디바이스는, 수신된 생체 측정 정보가 사용자 계정에 현재 로그인되지 않은 사용자 계정과 일치하는 경우에도, 사용자들을 스위칭하는 것을 보류한다.
일부 실시예들에서, 제2 사용자 스위칭 기준들은 누르기 입력이 제1 임계량 미만의 시간 동안 지속된다는 기준을 포함한다.
일부 실시예들에서, 일체형 생체 측정 센서를 갖는 입력 요소를 통한 누르기 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제1 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스는 저전력 모드에 진입한다(예컨대, 저전력 모드는 디스플레이가 턴오프된 보류 상태에 대응함).
일부 실시예들에서, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제1 임계량의 시간보다는 더 오래 그리고 제2 임계량의 시간보다는 덜 지속된다는 판정에 따라, 디바이스는 저전력 모드에 진입한다 (예컨대, 저전력 모드는 디스플레이가 턴오프되고 누르기 입력의 종료 시에 저전력 모드에 진입되는 슬립/보류된 상태에 대응함). 버튼을 사용한 누르기 입력이 제2 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스는, 디바이스의 상태를 변경하기 위한 옵션들의 메뉴(예컨대, 메뉴 옵션들은, 선택될 때, 디바이스가 각각 디바이스를 셧다운, 재시작, 또는 슬립/보류하게 하는 셧다운, 재시작, 슬립/보류 옵션들을 포함함)를 디스플레이한다.
일부 실시예들에서, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제2 임계량의 시간을 초과하는 제3 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스는 재시작된다.
일부 실시예들에서, 현재 서명되지 않은 사용자가 생체 측정 정보를 제공할 때(예컨대, 터치 감응형 이차 디스플레이(104)와 일체화될 수 있는 터치 ID 버튼과 같은, 디바이스의 생체 측정 센서 상에 그들의 손가락을 둘 때), 사용자는, 이용가능한 것이 있는 경우, 그 사용자에 대한 저장된 생체 측정 정보(예컨대, 생체 측정 또는 터치 ID 센서를 통해 이전에 수신된 저장된 지문 정보)에 기초하여 디바이스에 의해 식별된다. 일부 실시예들에서, 사용자는 사용자가 버튼을 누르기 전에 식별된다. 사용자에 의해 제공된 생체 측정 정보가 유효하다(예컨대, 그것이 그 사용자에 대한 저장된 생체 측정 정보와 매칭된다)는 판정에 따라, 터치 감응형 이차 디스플레이(104)는 사용자에게 "click to switch to [User Name] ->"로 명령하는 프롬프트를 포함하도록 업데이트된다. 일부 실시예들에서, 이러한 프롬프트 내의 화살표는 사용자가 생체 측정 센서가 위치되는 디바이스의 위치를 향하게 한다.
일부 실시예들에서, 프롬프트는 사용자에게 특정적인 텍스트를 포함한다(예컨대, [User Name] 텍스트는 사용자에 대한 사용자 이름으로 대체됨). 예를 들어, 프롬프트는, Sally의 지문이 검출되는 경우에는 텍스트 "click to switch to Sally ->"를, 그리고 Johnny의 지문이 검출되는 경우에는 텍스트 "click to switch to Johnny ->"를 포함할 수 있다.
일부 실시예들에서, 사용자에 의해 제공된 생체 측정 정보가 현재 서명된 계정과 연관되거나 또는 생체 측정 정보가 인식되지 않는 경우(즉, 디바이스의 사용자 계정과 연관되지 않음), 터치 감응형 이차 디스플레이(104) 상에 어떠한 프롬프트도 디스플레이되지 않는다.
도 68에서의 동작들이 기술된 특정 순서는 단지 예시적이며, 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해해야 한다. 당업자는 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
일부 실시예들에 따르면, 도 55는 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1700)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 55에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 전자 디바이스(1700)는 전자 디바이스(300)(도 3)에 대응하는 컴포넌트들을 갖는 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)으로서 구현된다. 당업자는 전자 디바이스(1700)가 또한 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d) 내에 어떻게 구현될 수 있는지 이해할 것이다.
도 55에 도시된 바와 같이, 전자 디바이스(1700)는 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(1702)(예컨대, 도 1a 및 도 2a 내지 도 2d의 일차 디스플레이(102)), 사용자 입력들을 수신하도록 구성된 물리적 입력 유닛(1704), 정보를 디스플레이하도록 구성된 터치 스크린 디스플레이(TSD) 유닛(1706)(때때로, 본 명세서에서, "터치 스크린 디스플레이" 또는 "터치 스크린"으로 지칭됨)(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)), 하나 이상의 센서들을 갖는 터치 스크린 디스플레이 유닛(1706) 상에서의 접촉들을 수신하도록 구성된 터치 감응형 표면 유닛(1708), 및 일차 디스플레이 유닛(1702), 물리적 입력 유닛(1704), 터치 스크린 디스플레이 유닛(1706), 및 터치 감응형 표면 유닛(1708)에 커플링된 프로세싱 유닛(1710)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1710)은 일차 디스플레이 제어 유닛(1712), 터치 스크린 디스플레이(TSD) 제어 유닛(1714), 포커스 식별 유닛(1716), 판정 유닛(1718), 입력 검출 유닛(1720), 입력 타입 판정 유닛(1722), 수행 유닛(1724), 및 미디어 재생 판정 유닛(1726)을 포함한다.
프로세싱 유닛(1710)은 일차 디스플레이 유닛(1702) 상에서의 제1 사용자 인터페이스의 (예컨대, 일차 디스플레이 제어 유닛(1712)을 사용한) 디스플레이를 야기하도록 - 제1 사용자 인터페이스는 하나 이상의 사용자 인터페이스 요소들을 포함함 -; 하나 이상의 사용자 인터페이스 요소들 중에서 일차 디스플레이 유닛(1702) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 (예컨대, 포커스 식별 유닛(1716)을 사용하여) 식별하도록; 그리고 일차 디스플레이 유닛(1702) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소가 프로세싱 유닛(1710)에 의해 실행되는 애플리케이션과 연관되는지의 여부를 (예컨대, 판정 유닛(1718)을 사용하여) 판정하도록 구성된다. 일차 디스플레이 유닛(1702) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소가 애플리케이션과 연관된다는 판정에 따라, 프로세싱 유닛(1710)은 터치 스크린 디스플레이 유닛(1706) 상에서의 제2 사용자 인터페이스의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성되고, 제2 사용자 인터페이스는 하기를 포함한다: (A) 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트; 및 (B) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스.
일부 실시예들에서, 전자 디바이스는 추가로 하기를 포함한다: (i) 일차 디스플레이 유닛(1702), 프로세싱 유닛(1710), 및 제1 통신 회로부 유닛을 포함하는 일차 컴퓨팅 유닛; 및 (ii) 터치 스크린 디스플레이 유닛(1706), 터치 감응형 표면 유닛(1708), 물리적 입력 유닛(1704), 및 제1 통신 회로부 유닛과 통신하기 위한 제2 통신 회로부 유닛을 포함하는 일체형 입력 유닛 - 일체형 입력 유닛은 일차 컴퓨팅 유닛과는 별개이고 그로부터 분리됨 -.
일부 실시예들에서, 물리적 입력 유닛(1704)은 복수의 물리적 키들을 포함한다.
일부 실시예들에서, 물리적 입력 유닛(1704)은 터치패드를 포함한다.
일부 실시예들에서, 프로세싱 유닛(1710)은 제1 사용자 인터페이스의 전경에서 애플리케이션을 실행하도록 구성된다.
일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는, 선택 시, 터치 스크린 디스플레이 유닛(1706) 상에서의, 시스템 레벨 기능들에 대응하는 복수의 시스템 레벨 어포던스들의 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 적어도 하나의 시스템 레벨 어포던스는 전력 제어부 또는 이스케이프 제어부 중 하나에 대응한다.
일부 실시예들에서, 터치 스크린 디스플레이 유닛(1706) 상에서 제2 사용자 인터페이스 내에 디스플레이되는 어포던스들 중 적어도 하나의 어포던스는 다기능 어포던스이다.
일부 실시예들에서, 프로세싱 유닛(1710)은, 터치 감응형 표면 유닛(1708) 상에서 다기능 어포던스를 선택하는 사용자 터치 입력을 (예컨대, 입력 검출 유닛(1720)을 사용하여) 검출하도록; 사용자 터치 입력이 제1 타입에 대응한다는 (예컨대, 입력 타입 판정 유닛(1722)을 사용한) 판정에 따라, (예컨대, 수행 유닛(1724)을 사용하여) 다기능 어포던스와 연관된 제1 기능을 수행하도록; 그리고 사용자 터치 입력이 제1 타입과는 별개인 제2 타입에 대응한다는 (예컨대, 입력 타입 판정 유닛(1722)을 사용한) 판정에 따라, (예컨대, 수행 유닛(1724)을 사용하여) 다기능 어포던스와 연관된 제2 기능을 수행하도록 구성된다.
일부 실시예들에서, 활성 상태 사용자 인터페이스 요소가 애플리케이션과 연관되지 않는다는 판정에 따라, 프로세싱 유닛(1710)은 터치 스크린 디스플레이 유닛(1706) 상에서의 제3 사용자 인터페이스의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성되고, 제3 사용자 인터페이스는 하기를 포함한다: (C) 전자 디바이스(1700)의 운영 체제 제어부들에 대응하는 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트와는 별개임 -.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는, (B) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하는 확장된 세트의 운영 체제 제어부들이다.
일부 실시예들에서, 프로세싱 유닛(1710)은, (예컨대, 입력 검출 유닛(1720)을 사용하여) 터치 감응형 표면 유닛(1708) 상에서 어포던스들의 제1 세트의 하나의 어포던스를 선택하는 사용자 터치 입력을 검출하도록; 사용자 터치 입력을 검출한 것에 응답하여, 터치 스크린 디스플레이 유닛(1706) 상에서의 애플리케이션의 기능들에 대응하는 어포던스들의 상이한 세트의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록; 그리고 터치 스크린 디스플레이 유닛(1706) 상에서 적어도 하나의 시스템 레벨 어포던스의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 유지하도록 구성된다.
일부 실시예들에서, 프로세싱 유닛(1710)은, (예컨대, 입력 검출 유닛(1720)을 사용하여) 터치 감응형 표면 유닛(1708) 상에서 적어도 하나의 시스템 레벨 어포던스를 선택하는 후속의 사용자 터치 입력을 검출하도록; 그리고, 후속의 사용자 터치 입력을 검출한 것에 응답하여, 터치 스크린 디스플레이 유닛(1706) 상에서의, 시스템 레벨 기능들에 대응하는 복수의 시스템 레벨 어포던스들 및 애플리케이션에 대응하는 적어도 하나의 애플리케이션 레벨 어포던스의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 프로세싱 유닛(1710)은, 터치 스크린 디스플레이 유닛(1706) 상에 제2 사용자 인터페이스를 디스플레이한 후, 일차 디스플레이 유닛(1702) 상에 포커스를 두고 있는 제2 활성 상태 사용자 인터페이스 요소를 (예컨대, 포커스 식별 유닛(1716)을 사용하여) 식별하도록; 그리고, 제2 활성 상태 사용자 인터페이스 요소가 프로세싱 유닛(1710)에 의해 실행되는 상이한 애플리케이션에 대응하는지의 여부를 (예컨대, 판정 유닛(1718)을 사용하여) 판정하도록 구성된다. 제2 활성 상태 사용자 인터페이스 요소가 상이한 애플리케이션에 대응한다는 판정에 따라, 프로세싱 유닛(1710)은 터치 스크린 디스플레이 유닛(1706) 상에서의 제4 사용자 인터페이스의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성되고, 제4 사용자 인터페이스는 하기를 포함한다: (D) 상이한 애플리케이션에 대응하는 하나 이상의 어포던스들의 제3 세트; 및 (E) 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스.
일부 실시예들에서, 프로세싱 유닛(1710)은, 제2 활성 상태 사용자 인터페이스 요소를 (예컨대, 포커스 식별 유닛(1716)을 사용하여) 식별한 후, (예컨대, 미디어 재생 판정 유닛(1726)을 사용하여) 미디어 아이템 - 미디어 아이템은 상이한 애플리케이션과 연관되지 않음 - 이 전자 디바이스(1700)에 의해 재생되고 있는지의 여부를 판정하도록; 그리고, 미디어 아이템이 전자 디바이스(1700)에 의해 재생되고 있다는 (예컨대, 미디어 재생 판정 유닛(1726)을 사용한) 판정에 따라, 터치 스크린 디스플레이 유닛(1706) 상에서의, 미디어 아이템을 제어하기 위한 제4 사용자 인터페이스 상의 적어도 하나의 지속적 어포던스의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 적어도 하나의 지속적 어포던스는 미디어 아이템에 대응하는 피드백을 디스플레이한다.
일부 실시예들에서, 프로세싱 유닛(1710)은, (예컨대, 입력 검출 유닛(1720)을 사용하여) 오버라이드 키에 대응하는 사용자 입력을 검출하도록; 사용자 입력을 검출한 것에 응답하여, (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용하여) 터치 스크린 디스플레이 유닛(1706) 상에 제2 사용자 인터페이스의 하나 이상의 어포던스들의 적어도 제1 세트를 디스플레이하는 것을 중지하도록; 그리고, 터치 스크린 디스플레이 유닛(1706) 상에서의 디폴트 기능 키들의 제1 세트의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 프로세싱 유닛(1710)은, 터치 스크린 디스플레이 유닛(1706) 상에 디폴트 기능 키들의 제1 세트를 디스플레이한 후, (예컨대, 입력 검출 유닛(1720)을 사용하여) 터치 감응형 표면 유닛(1708) 상에서 터치 스크린 디스플레이 유닛(1706)의 주축에 실질적으로 평행인 방향으로의 제스처를 검출하도록; 그리고, 실질적으로 수평인 스와이프 제스처를 검출한 것에 응답하여, 터치 스크린 디스플레이 유닛(1706) 상에서의, 적어도 하나의 별개의 기능 키를 갖는 디폴트 기능 키들의 제2 세트의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1714)을 사용한) 디스플레이를 야기하도록 구성된다.
전술된 정보 프로세싱 방법들에서의 동작들은 선택적으로 (예컨대, 도 3a 및 도 4와 관련하여 전술된 바와 같은) 범용 프로세서들 또는 애플리케이션 특정 칩들과 같은 정보 프로세싱 장치 내의 하나 이상의 기능 모듈들을 실행시킴으로써 구현된다.
도 44a 내지 도 44d를 참조하여 전술된 동작들은, 선택적으로, 도 3a, 도 3b 또는 도 55에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작들(626, 628)은 선택적으로 이벤트 분류기(370), 이벤트 인식기(380) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(370) 내의 이벤트 모니터(371)는 터치 감응형 디스플레이로서 구현된 경우의 디스플레이 시스템(312) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(374)은 이벤트 정보를 애플리케이션(340-1)에 전달한다. 애플리케이션(340-1)의 개개의 이벤트 인식기(380)는 이벤트 정보를 개개의 이벤트 정의(386)와 비교하고, 터치 감응형 디스플레이 상의 제1 위치에서의 제1 접촉이 사전정의된 이벤트 또는 서브이벤트에 대응하는지의 여부를 판정한다. 개개의 사전정의된 이벤트 또는 서브이벤트가 검출될 때, 이벤트 인식기(380)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(390)를 활성화시킨다. 이벤트 핸들러(390)는, 선택적으로, 데이터 업데이터(376) 또는 객체 업데이터(377)를 사용하거나 호출하여, 애플리케이션 내부 상태(392)를 업데이트한다. 일부 실시예들에서, 이벤트 핸들러(390)는 개개의 GUI 업데이터(378)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 3a 및 도 3b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
일부 실시예들에 따르면, 도 56은 다양한 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1800)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 56에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 전자 디바이스(1800)는 전자 디바이스(300)(도 3)에 대응하는 컴포넌트들을 갖는 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)으로서 구현된다. 당업자는 전자 디바이스(1800)가 또한 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d) 내에 어떻게 구현될 수 있는지 이해할 것이다.
도 56에 도시된 바와 같이, 전자 디바이스(1800)는 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(1802)(예컨대, 도 1a 및 도 2a 내지 도 2d의 일차 디스플레이(102)), 사용자 입력들을 수신하도록 구성된 물리적 입력 유닛(1804), 정보를 디스플레이하도록 구성된 터치 스크린 디스플레이(TSD) 유닛(1806)(때때로, 본 명세서에서, "터치 스크린 디스플레이" 또는 "터치 스크린"으로 지칭됨)(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)), 하나 이상의 센서들을 갖는 터치 스크린 디스플레이 유닛(1806) 상에서의 접촉들을 수신하도록 구성된 터치 감응형 표면 유닛(1808), 및 일차 디스플레이 유닛(1802), 물리적 입력 유닛(1804), 터치 스크린 디스플레이 유닛(1806), 및 터치 감응형 표면 유닛(1808)에 커플링된 프로세싱 유닛(1810)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1810)은 일차 디스플레이 제어 유닛(1812), 터치 스크린 디스플레이(TSD) 제어 유닛(1814), 입력 검출 유닛(1816), 및 입력 타입 판정 유닛(1818)을 포함한다.
프로세싱 유닛(1810)은, 일차 디스플레이 유닛(1802) 상에서의, 프로세싱 유닛(1810)에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스의 (예컨대, 일차 디스플레이 제어 유닛(1812)을 사용한) 디스플레이를 야기하도록; 터치 스크린 디스플레이 유닛(1806) 상에서의 제2 사용자 인터페이스 - 제2 사용자 인터페이스는 애플리케이션에 대응하는 하나 이상의 어포던스들의 제1 세트를 포함하고, 하나 이상의 어포던스들의 제1 세트는 애플리케이션의 제1 부분에 대응함 - 의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1814)을 사용한) 디스플레이를 야기하도록; 그리고 (예컨대, 입력 검출 유닛(1816)을 사용하여) 터치 감응형 표면 유닛(1808) 상에서의 스와이프 제스처를 검출하도록 구성된다. 스와이프 제스처가 제1 방향(예컨대, 수평)으로 수행되었다는 (예컨대, 입력 타입 판정 유닛(1818)을 사용한) 판정에 따라, 프로세싱 유닛(1810)은, 터치 스크린 디스플레이 유닛(1806) 상에서의, 애플리케이션에 대응하는 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트의 적어도 하나의 어포던스는 하나 이상의 어포던스들의 제1 세트와는 별개이고, 하나 이상의 어포던스들의 제2 세트는 또한 애플리케이션의 제1 부분에 대응함 - 의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1814)을 사용한) 디스플레이를 야기하도록 구성된다. 스와이프 제스처가 제1 방향에 대해 실질적으로 수직인 제2 방향(예컨대, 수직)으로 수행되었다는 (예컨대, 입력 타입 판정 유닛(1818)을 사용한) 판정에 따라, 프로세싱 유닛(1810)은, 터치 스크린 디스플레이 유닛(1806) 상에서의, 애플리케이션에 대응하는 하나 이상의 어포던스들의 제3 세트 - 하나 이상의 어포던스들의 제3 세트는 하나 이상의 어포던스들의 제2 세트와는 별개이고, 하나 이상의 어포던스들의 제3 세트는 애플리케이션의 제1 부분과는 별개인 애플리케이션의 제2 부분에 대응함 - 의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1814)을 사용한) 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 제2 부분은 스와이프 제스처를 검출하기 전에 일차 디스플레이 유닛(1802) 상에서 제1 사용자 인터페이스 내의 콤팩트 뷰에 디스플레이되고, 프로세싱 유닛(1810)은, 스와이프 제스처가 제1 방향에 실질적으로 수직인 제2 방향으로 수행되었다는 판정에 따라, (예컨대, 일차 디스플레이 제어 유닛(1812)을 사용하여) 일차 디스플레이 유닛(1802) 상에서의 제1 사용자 인터페이스 내의 확장된 뷰에 제2 부분의 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 애플리케이션에 대한 제1 사용자 인터페이스는 풀스크린 모드에서 일차 디스플레이 유닛(1802) 상에 디스플레이되고, 터치 스크린 디스플레이 유닛(1806) 상에 디스플레이된 하나 이상의 어포던스들의 제1 세트는 풀스크린 모드에 대응하는 제어부들을 포함한다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트 및 하나 이상의 어포던스들의 제3 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함한다.
일부 실시예들에서, 터치 스크린 디스플레이 유닛(1806) 상에 하나 이상의 어포던스들의 제3 세트를 디스플레이한 후, 프로세싱 유닛(1810)은, (예컨대, 입력 검출 유닛(1816)을 사용하여) 제1 사용자 인터페이스 상의 제1 부분을 선택하는 사용자 입력을 검출하도록; 사용자 입력을 검출한 것에 응답하여, (예컨대, 터치 스크린 디스플레이 제어 유닛(1814)을 사용하여) 터치 스크린 디스플레이 유닛(1806) 상에 애플리케이션의 제2 부분에 대응하는 하나 이상의 어포던스들의 제3 세트를 디스플레이하는 것을 중지하도록; 그리고 터치 스크린 디스플레이 유닛(1806) 상에서의 애플리케이션의 제1 부분에 대응하는 하나 이상의 어포던스들의 제2 세트의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1814)을 사용한) 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 제1 방향은 터치 스크린 디스플레이 유닛(1806)의 주요 치수에 실질적으로 평행이다.
일부 실시예들에서, 제1 방향은 터치 스크린 디스플레이 유닛(1806)의 주요 치수에 실질적으로 수직이다.
일부 실시예들에서, 제1 부분은 애플리케이션의 메뉴, 탭, 폴더, 툴 세트, 또는 툴바 중 하나이고, 제2 부분은 애플리케이션의 메뉴, 탭, 폴더, 툴 세트, 또는 툴바 중 하나이다.
도 45a 내지 도 45c를 참조하여 전술된 동작들은, 선택적으로, 도 3a, 도 3b 또는 도 56에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작(710)은, 선택적으로, 이벤트 분류기(370), 이벤트 인식기(380) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(370) 내의 이벤트 모니터(371)는 터치 감응형 디스플레이로서 구현된 경우의 디스플레이 시스템(312) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(374)은 이벤트 정보를 애플리케이션(340-1)에 전달한다. 애플리케이션(340-1)의 개개의 이벤트 인식기(380)는 이벤트 정보를 개개의 이벤트 정의(386)와 비교하고, 터치 감응형 디스플레이 상의 제1 위치에서의 제1 접촉이 사전정의된 이벤트 또는 서브이벤트에 대응하는지의 여부를 판정한다. 개개의 사전정의된 이벤트 또는 서브이벤트가 검출될 때, 이벤트 인식기(380)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(390)를 활성화시킨다. 이벤트 핸들러(390)는, 선택적으로, 데이터 업데이터(376) 또는 객체 업데이터(377)를 사용하거나 호출하여, 애플리케이션 내부 상태(392)를 업데이트한다. 일부 실시예들에서, 이벤트 핸들러(390)는 개개의 GUI 업데이터(378)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 3a 및 도 3b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
일부 실시예들에 따르면, 도 57은 다양한 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(1900)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 57에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 전자 디바이스(1900)는 전자 디바이스(300)(도 3)에 대응하는 컴포넌트들을 갖는 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)으로서 구현된다. 당업자는 전자 디바이스(1900)가 또한 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d) 내에 어떻게 구현될 수 있는지 이해할 것이다.
도 57에 도시된 바와 같이, 전자 디바이스(1900)는 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(1902)(예컨대, 도 1a 및 도 2a 내지 도 2d의 일차 디스플레이(102)), 사용자 입력들을 수신하도록 구성된 물리적 입력 유닛(1904), 정보를 디스플레이하도록 구성된 터치 스크린 디스플레이(TSD) 유닛(1906)(때때로, 본 명세서에서, "터치 스크린 디스플레이" 또는 "터치 스크린"으로 지칭됨)(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)), 하나 이상의 센서들을 갖는 터치 스크린 디스플레이 유닛(1906) 상에서의 접촉들을 수신하도록 구성된 터치 감응형 표면 유닛(1908), 및 일차 디스플레이 유닛(1902), 물리적 입력 유닛(1904), 터치 스크린 디스플레이 유닛(1906), 및 터치 감응형 표면 유닛(1908)에 커플링된 프로세싱 유닛(1910)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(1910)은 일차 디스플레이 제어 유닛(1912), 터치 스크린 디스플레이(TSD) 제어 유닛(1914), 입력 검출 유닛(1916), 및 변경 유닛(1918)을 포함한다.
프로세싱 유닛(1910)은, 표준 모드에서 일차 디스플레이 유닛(1902) 상에서의 프로세싱 유닛(1910)에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 포함함 - 의 (예컨대, 일차 디스플레이 제어 유닛(1912)을 사용한) 디스플레이를 야기하도록; 그리고 (예컨대, 입력 검출 유닛(1916)을 사용하여) 풀스크린 모드에서 일차 디스플레이 유닛(1902) 상에 애플리케이션에 대한 제1 사용자 인터페이스의 적어도 일부분을 디스플레이하기 위한 사용자 입력을 검출하도록 구성된다. 사용자 입력을 검출한 것에 응답하여, 프로세싱 유닛(1910)은, 일차 디스플레이 상에, 제1 사용자 인터페이스 내의 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 (예컨대, 일차 디스플레이 제어 유닛(1912)을 사용하여) 디스플레이하는 것을 중지하도록; 풀스크린 모드에서 일차 디스플레이 유닛(1902) 상에서의 애플리케이션에 대한 제1 사용자 인터페이스의 일부분의 (예컨대, 일차 디스플레이 제어 유닛(1912)을 사용한) 디스플레이를 야기하도록; 그리고 터치 스크린 디스플레이 유닛(1906) 상에서의, 애플리케이션을 제어하기 위한 하나 이상의 어포던스들의 제2 세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트에 대응함 - 의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1914)을 사용한) 디스플레이를 인간의 개입 없이 자동으로 야기하도록구성된다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들 제1 세트이다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 풀스크린 모드에 대응하는 제어부들을 포함한다.
일부 실시예들에서, 프로세싱 유닛(1910)은 (예컨대, 입력 검출 유닛(1916)을 사용하여) 터치 감응형 표면 유닛(1908) 상의 어포던스들의 제2 세트의 하나의 어포던스를 선택하는 사용자 터치 입력을 검출하도록 구성되고, 사용자 터치 입력을 검출한 것에 응답하여, 프로세싱 유닛(1910)은 (예컨대, 변경 유닛(1918)을 사용하여) 어포던스들의 제2 세트의 선택된 하나의 어포던스에 따라 풀스크린 모드에서 일차 디스플레이 유닛(1902) 상에 디스플레이되고 있는 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 변경하도록 구성된다.
일부 실시예들에서, 풀스크린 모드에서 일차 디스플레이 유닛(1902) 상에 애플리케이션에 대한 제1 사용자 인터페이스의 일부분을 디스플레이한 후, 프로세싱 유닛(1910)은, (예컨대, 입력 검출 유닛(1916)을 사용하여) 풀스크린 모드를 종료하기 위한 후속의 사용자 입력을 검출하도록; 후속의 사용자 입력을 검출한 것에 응답하여, 표준 모드에서 일차 디스플레이 유닛(1902) 상에서의, 프로세싱 유닛(1910)에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스 - 제1 사용자 인터페이스는 애플리케이션과 연관된 하나 이상의 어포던스들의 제1 세트를 포함함 - 의 (예컨대, 일차 디스플레이 제어 유닛(1912)을 사용한) 디스플레이를 야기하도록; 그리고 터치 스크린 디스플레이 유닛(1906) 상에서 애플리케이션을 제어하기 위한 하나 이상의 어포던스들의 제2 세트의 적어도 서브세트 - 하나 이상의 어포던스들의 제2 세트는 하나 이상의 어포던스들의 제1 세트에 대응함 - 의 (예컨대, 터치 스크린 디스플레이 제어 유닛(1914)을 사용한) 디스플레이를 유지하도록 구성된다.
일부 실시예들에서, 풀스크린 모드에서 일차 디스플레이 유닛(1902) 상에 애플리케이션에 대한 제1 사용자 인터페이스의 적어도 일부분을 디스플레이하기 위한 사용자 입력은 터치 감응형 표면 유닛(1908) 상에서 검출된 터치 입력 및 일차 디스플레이 유닛(1902) 상의 제1 사용자 인터페이스 내에서 선택된 제어부 중 적어도 하나이다.
일부 실시예들에서, 하나 이상의 어포던스들의 제2 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함한다.
도 46a 및 도 46b를 참조하여 전술된 동작들은, 선택적으로, 도 3a, 도 3b 또는 도 57에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작들(804, 816)은 선택적으로 이벤트 분류기(370), 이벤트 인식기(380) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(370) 내의 이벤트 모니터(371)는 터치 감응형 디스플레이로서 구현된 경우의 디스플레이 시스템(312) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(374)은 이벤트 정보를 애플리케이션(340-1)에 전달한다. 애플리케이션(340-1)의 개개의 이벤트 인식기(380)는 이벤트 정보를 개개의 이벤트 정의(386)와 비교하고, 터치 감응형 디스플레이 상의 제1 위치에서의 제1 접촉이 사전정의된 이벤트 또는 서브이벤트에 대응하는지의 여부를 판정한다. 개개의 사전정의된 이벤트 또는 서브이벤트가 검출될 때, 이벤트 인식기(380)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(390)를 활성화시킨다. 이벤트 핸들러(390)는, 선택적으로, 데이터 업데이터(376) 또는 객체 업데이터(377)를 사용하거나 호출하여, 애플리케이션 내부 상태(392)를 업데이트한다. 일부 실시예들에서, 이벤트 핸들러(390)는 개개의 GUI 업데이터(378)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 3a 및 도 3b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
일부 실시예들에 따르면, 도 58은 다양한 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(2000)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 58에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 전자 디바이스(2000)는 전자 디바이스(300)(도 3)에 대응하는 컴포넌트들을 갖는 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)으로서 구현된다. 당업자는 전자 디바이스(2000)가 또한 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d) 내에 어떻게 구현될 수 있는지 이해할 것이다.
도 58에 도시된 바와 같이, 전자 디바이스(2000)는 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2002)(예컨대, 도 1a 및 도 2a 내지 도 2d의 일차 디스플레이(102)), 사용자 입력들을 수신하도록 구성된 물리적 입력 유닛(2004), 정보를 디스플레이하도록 구성된 터치 스크린 디스플레이(TSD) 유닛(2006)(때때로, 본 명세서에서, "터치 스크린 디스플레이" 또는 "터치 스크린"으로 지칭됨)(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)), 하나 이상의 센서들을 갖는 터치 스크린 디스플레이 유닛(2006) 상에서의 접촉들을 수신하도록 구성된 터치 감응형 표면 유닛(2008), 및 일차 디스플레이 유닛(2002), 물리적 입력 유닛(2004), 터치 스크린 디스플레이 유닛(2006), 및 터치 감응형 표면 유닛(2008)에 커플링된 프로세싱 유닛(2010)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(2010)은 일차 디스플레이 제어 유닛(2012), 터치 스크린 디스플레이(TSD) 제어 유닛(2014), 통지 유닛(2016), 입력 검출 유닛(2018), 입력 타입 판정 유닛(2020), 및 수행 유닛(2022)을 포함한다.
프로세싱 유닛(2010)은 일차 디스플레이 유닛(2002) 상에서의, 프로세싱 유닛(2010)에 의해 실행되는 애플리케이션에 대한 제1 사용자 인터페이스의 (예컨대, 일차 디스플레이 제어 유닛(2012)을 사용한) 디스플레이를 야기하도록; 터치 스크린 디스플레이 유닛(2006) 상에서의, 제2 사용자 인터페이스 - 제2 사용자 인터페이스는 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트를 포함함 - 의 (예컨대, 터치 스크린 디스플레이 제어 유닛(2014)을 사용한) 디스플레이를 야기하도록; (예컨대, 통지 유닛(2016)을 사용하여) 통지를 검출하도록; 그리고, 통지를 검출한 것에 응답하여, 터치 스크린 디스플레이 유닛(2006) 상에서의 제2 사용자 인터페이스에, 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트 및 검출된 통지 - 검출된 통지는 일차 디스플레이 유닛(2002) 상에 디스플레이되지 않음 - 의 적어도 일부분의 (예컨대, 터치 스크린 디스플레이 제어 유닛(2014)을 사용한) 동시 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 통지를 검출하기 전, 프로세싱 유닛(2010)은 터치 스크린 디스플레이 유닛(2006) 상에 통지를 디스플레이하기 위해 그리고 일차 디스플레이 유닛(2002) 상에 통지를 디스플레이하지 않기 위해 (예컨대, 입력 검출 유닛(2018)을 사용하여) 통지 설정을 선택하는 사용자 입력을 검출하도록 구성된다.
일부 실시예들에서, 프로세싱 유닛(2010)은 (예컨대, 입력 검출 유닛(2018)을 사용하여) 터치 감응형 표면 유닛(2008) 상에서 검출된 통지의 일부분에 대응하는 사용자 터치 입력을 검출하도록 구성된다. 사용자 터치 입력이 제1 타입(예컨대, 스와이프 제스처)에 대응한다는 (예컨대, 입력 타입 판정 유닛(2020)을 사용한) 판정에 따라, 프로세싱 유닛(2010)은 (예컨대, 터치 스크린 디스플레이 제어 유닛(2014)을 사용하여) 터치 스크린 디스플레이 유닛(2006) 상에서 제2 사용자 인터페이스에 검출된 통지의 일부분을 디스플레이하는 것을 중지하도록 구성된다. 사용자 터치 입력이 제1 타입과는 별개인 제2 타입(예컨대, 탭핑 접촉)에 대응한다는 (예컨대, 입력 타입 판정 유닛(2020)을 사용한) 판정에 따라, 프로세싱 유닛(2010)은 (예컨대, 수행 유닛(2022)을 사용하여) 검출된 통지와 연관된 액션을 수행하도록 구성된다.
일부 실시예들에서, 터치 스크린 디스플레이 유닛(2006) 상에 디스플레이된 통지의 일부분은 전자 디바이스(2000)의 사용자에게 검출된 통지에 응답하기 위한 복수의 옵션들 중 하나의 옵션을 선택할 것을 프롬프트한다.
일부 실시예들에서, 터치 스크린 디스플레이 유닛(2006) 상에 디스플레이되는 통지의 일부분은 검출된 통지에 대한 하나 이상의 제안 응답들을 포함한다.
일부 실시예들에서, 통지는 착신 인스턴트 메시지, SMS, 이메일, 음성 호출, 또는 영상 호출 중 적어도 하나에 대응한다.
일부 실시예들에서, 통지는, 애플리케이션을 닫거나 애플리케이션 내에서 액션을 수행하는 사용자 입력에 응답하여, 프로세싱 유닛(2010)에 의해 실행되고 있는 애플리케이션에 의해 발행되는 모드 경고에 대응한다.
일부 실시예들에서, 하나 이상의 어포던스들의 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하고, 통지는 입력 메커니즘의 하나 이상의 부분들 또는 시스템 레벨 어포던스 중 적어도 하나의 어포던스를 선택하는 사용자 입력에 대응한다.
도 47a 및 도 47b를 참조하여 전술된 동작들은, 선택적으로, 도 3a, 도 3b 또는 도 58에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작(922)은, 선택적으로, 이벤트 분류기(370), 이벤트 인식기(380) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(370) 내의 이벤트 모니터(371)는 터치 감응형 디스플레이로서 구현된 경우의 디스플레이 시스템(312) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(374)은 이벤트 정보를 애플리케이션(340-1)에 전달한다. 애플리케이션(340-1)의 개개의 이벤트 인식기(380)는 이벤트 정보를 개개의 이벤트 정의(386)와 비교하고, 터치 감응형 디스플레이 상의 제1 위치에서의 제1 접촉이 사전정의된 이벤트 또는 서브이벤트에 대응하는지의 여부를 판정한다. 개개의 사전정의된 이벤트 또는 서브이벤트가 검출될 때, 이벤트 인식기(380)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(390)를 활성화시킨다. 이벤트 핸들러(390)는, 선택적으로, 데이터 업데이터(376) 또는 객체 업데이터(377)를 사용하거나 호출하여, 애플리케이션 내부 상태(392)를 업데이트한다. 일부 실시예들에서, 이벤트 핸들러(390)는 개개의 GUI 업데이터(378)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 3a 및 도 3b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
일부 실시예들에 따르면, 도 59는 다양한 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(2100)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 59에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 전자 디바이스(2100)는 전자 디바이스(300)(도 3)에 대응하는 컴포넌트들을 갖는 휴대용 컴퓨팅 시스템(100)(도 1a 및 도 1b)으로서 구현된다. 당업자는 전자 디바이스(2100)가 또한 데스크톱 컴퓨팅 시스템(200)(도 2a 내지 도 2d) 내에 어떻게 구현될 수 있는지 이해할 것이다.
도 59에 도시된 바와 같이, 전자 디바이스(2100)는 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2102)(예컨대, 도 1a 및 도 2a 내지 도 2d의 일차 디스플레이(102)), 사용자 입력들을 수신하도록 구성된 물리적 입력 유닛(2104), 정보를 디스플레이하도록 구성된 터치 스크린 디스플레이(TSD) 유닛(2106)(때때로, 본 명세서에서, "터치 스크린 디스플레이" 또는 "터치 스크린"으로 지칭됨)(예컨대, 도 1a, 도 1b, 및 도 2a 내지 도 2d의 동적 기능 열(104)), 하나 이상의 센서들을 갖는 터치 스크린 디스플레이 유닛(2106) 상에서의 접촉들을 수신하도록 구성된 터치 감응형 표면 유닛(2108), 및 일차 디스플레이 유닛(2102), 물리적 입력 유닛(2104), 터치 스크린 디스플레이 유닛(2106), 및 터치 감응형 표면 유닛(2108)에 커플링된 프로세싱 유닛(2110)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(2110)은 일차 디스플레이 제어 유닛(2112), 터치 스크린 디스플레이(TSD) 제어 유닛(2114), 식별 유닛(2116), 입력 검출 유닛(2118), 및 판정 유닛(2120)을 포함한다.
프로세싱 유닛(2110)은 일차 디스플레이 유닛(2102) 상에서의, 사용자 인터페이스의 (예컨대, 일차 디스플레이 제어 유닛(2112)을 사용한) 디스플레이를 야기하도록 - 사용자 인터페이스는 하나 이상의 사용자 인터페이스 요소들을 포함함 -; 하나 이상의 사용자 인터페이스 요소들 중에서 일차 디스플레이 유닛(2102) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소 - 활성 상태 사용자 인터페이스 요소는 프로세싱 유닛(2110)에 의해 실행되는 애플리케이션과 연관됨 - 를 (예컨대, 식별 유닛(2116)을 사용하여) 식별하도록; 그리고 일차 디스플레이 유닛(2102) 상에 포커스를 두고 있는 활성 상태 사용자 인터페이스 요소를 식별한 것에 응답하여, 터치 스크린 디스플레이 유닛(2106) 상에서의 애플리케이션에 대응하는 하나 이상의 어포던스들의 세트의 (예컨대, 터치 스크린 디스플레이 제어 유닛(2114)을 사용한) 디스플레이를 야기하도록 구성된다. 프로세싱 유닛(2110)은, 사용자 인터페이스의 개개의 부분을 이동시키는 사용자 입력을 (예컨대, 입력 검출 유닛(2118)을 사용하여) 검출하도록; 그리고, 사용자 입력을 검출한 것에 응답하여, 그리고 사용자 입력이 사전정의된 액션 기준들을 만족시킨다는 (예컨대, 판정 유닛(2120)을 사용한) 판정에 따라, 일차 디스플레이(2102) 상에 사용자 인터페이스의 개개의 부분을 (예컨대, 일차 디스플레이 제어 유닛(2112)을 사용하여) 디스플레이하는 것을 중지하도록; 터치 스크린 디스플레이 유닛(2106) 상에 하나 이상의 어포던스들의 세트의 적어도 서브세트를 (예컨대, 터치 스크린 디스플레이 제어 유닛(2114)을 사용하여) 디스플레이하는 것을 중지하도록; 그리고 터치 스크린 디스플레이 유닛(2106) 상에서의, 사용자 인터페이스의 개개의 부분의 표현의 (예컨대, 터치 스크린 디스플레이 제어 유닛(2114)을 사용한) 디스플레이를 야기하도록 구성된다.
일부 실시예들에서, 사용자 인터페이스의 개개의 부분은 프로세싱 유닛(2110)에 의해 실행되는 애플리케이션에 대응하는 메뉴이다.
일부 실시예들에서, 사용자 인터페이스의 개개의 부분은 통지 또는 모드 경고 중 적어도 하나이다.
일부 실시예들에서, 사전정의된 액션 기준들은 사용자 입력이 사용자 인터페이스의 개개의 부분을 일차 디스플레이 유닛(2102)의 사전정의된 위치로 드래깅하는 드래깅 제스처인 경우에 만족된다.
일부 실시예들에서, 사전정의된 액션 기준들은 사용자 입력이 사용자 인터페이스의 개개의 부분을 터치 스크린 디스플레이 유닛(2106)으로 이동시키는 것에 대응하는 사전결정된 입력인 경우에 만족된다.
일부 실시예들에서, 사용자 입력을 검출한 것에 응답하여, 그리고 사용자 입력이 사전정의된 액션 기준들을 만족시키지 않는다는 (예컨대, 판정 유닛(2120)을 사용한) 판정에 따라, 프로세싱 유닛(2110)은, (예컨대, 일차 디스플레이 제어 유닛(2112)을 사용하여) 일차 디스플레이 유닛(2102) 상에서 사용자 인터페이스의 개개의 부분의 디스플레이를 유지하도록; 그리고 (예컨대, 터치 스크린 디스플레이 제어 유닛(2114)을 사용하여) 터치 스크린 디스플레이 유닛(2106) 상에서 하나 이상의 어포던스들의 세트의 디스플레이를 유지하도록 구성된다.
일부 실시예들에서, 하나 이상의 어포던스들의 세트는 적어도 하나의 시스템 레벨 기능에 대응하는 적어도 하나의 시스템 레벨 어포던스를 포함하고, 프로세싱 유닛(2110)은, 터치 스크린 디스플레이 유닛(2106) 상에 사용자 인터페이스의 개개의 부분의 표현을 디스플레이한 후, (예컨대, 터치 스크린 디스플레이 제어 유닛(2114)을 사용하여) 터치 스크린 디스플레이 유닛(2106) 상에서의 적어도 하나의 시스템 레벨 어포던스의 디스플레이를 유지하도록 구성된다.
일부 실시예들에서, 사용자 인터페이스의 개개의 부분의 표현은 터치 스크린 디스플레이 유닛(2106) 상에서 하나 이상의 어포던스들의 세트 상에 오버레이된다.
도 48a 내지 도 48c를 참조하여 전술된 동작들은, 선택적으로, 도 3a, 도 3b 또는 도 59에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작(1008)은, 선택적으로, 이벤트 분류기(370), 이벤트 인식기(380) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(370) 내의 이벤트 모니터(371)는 터치 감응형 디스플레이로서 구현된 경우의 디스플레이 시스템(312) 상에의 접촉을 검출하고, 이벤트 디스패처 모듈(374)은 이벤트 정보를 애플리케이션(340-1)에 전달한다. 애플리케이션(340-1)의 개개의 이벤트 인식기(380)는 이벤트 정보를 개개의 이벤트 정의(386)와 비교하고, 터치 감응형 디스플레이 상의 제1 위치에서의 제1 접촉이 사전정의된 이벤트 또는 서브이벤트에 대응하는지의 여부를 판정한다. 개개의 사전정의된 이벤트 또는 서브이벤트가 검출될 때, 이벤트 인식기(380)는 이벤트 또는 서브이벤트의 검출과 연관된 이벤트 핸들러(390)를 활성화시킨다. 이벤트 핸들러(390)는, 선택적으로, 데이터 업데이터(376) 또는 객체 업데이터(377)를 사용하거나 호출하여, 애플리케이션 내부 상태(392)를 업데이트한다. 일부 실시예들에서, 이벤트 핸들러(390)는 개개의 GUI 업데이터(378)에 액세스하여, 애플리케이션에 의해 디스플레이되는 것을 업데이트한다. 유사하게, 다른 프로세스들이 도 3a 및 도 3b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 당업자에게 자명할 것이다.
일부 실시예들에 따르면, 도 60은 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(2200)(전자 디바이스(2200)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 60에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(2200)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(2200)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 60에 도시된 바와 같이, 컴퓨팅 시스템(2200)은 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2202)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 터치 감응형 이차 디스플레이 유닛(2204), 키보드 입력들을 수신하도록 구성된 물리적 키보드 유닛(2205), 및 디스플레이 유닛(2202), 물리적 키보드 유닛(2205), 및 터치 감응형 이차 디스플레이 유닛(2204)과 커플링되는 프로세싱 유닛(2210)을 포함한다. 일부 실시예들에서, 일차 디스플레이 유닛(2202)은 제1 하우징의 일부이고, 물리적 키보드 유닛(2205) 및 터치 감응형 이차 디스플레이 유닛(2204)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 요청 수신 유닛(예컨대, 요청 수신 유닛(2212)), 표시 유닛(2214)(예컨대, 표시 유닛(2214)), 및 검출 유닛(예컨대, 검출 유닛(2216))을 포함한다.
프로세싱 유닛은, 애플리케이션을 열라는 요청을 (예컨대, 요청 수신 유닛(2212)을 사용하여) 수신하도록; 요청을 수신한 것에 응답하여, (i) 일차 디스플레이 상에, 컴퓨팅 시스템 상에서 실행되는 애플리케이션과 연관된 복수의 사용자 인터페이스 객체들 - 복수는 그의 연관된 콘텐츠와 함께 디스플레이되는 제1 사용자 인터페이스 객체 및 그들의 연관된 콘텐츠 없이 디스플레이되는 다른 사용자 인터페이스 객체들을 포함함 - 을 (예컨대, 일차 디스플레이 유닛(2202)과 결합하여 표시 유닛(2214)을 사용하여) 디스플레이하도록; (ii) 터치 감응형 이차 디스플레이 상에, 복수의 사용자 인터페이스 객체들 중 하나의 사용자 인터페이스 객체를 각각 표현하는 어포던스들의 세트를 (예컨대, 터치 감응형 이차 디스플레이 유닛(2204)과 결합하여 표시 유닛(2214)을 사용하여) 디스플레이하도록; 터치 감응형 디스플레이를 통해, 어포던스들의 세트의 제1 어포던스로부터 그리고 어포던스들의 세트의 제2 어포던스를 향하는 방향으로의 스와이프 제스처를 (예컨대, 검출 유닛(2216)을 사용하여) 검출하도록 - 제1 어포던스는 제1 사용자 인터페이스 객체를 표현하고, 제2 어포던스는 제1 사용자 인터페이스 객체와는 별개인 제2 사용자 인터페이스 객체를 표현함 -; 그리고 스와이프 제스처를 검출한 것에 응답하여, 제1 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하는 것을 중지하고 제2 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하도록 일차 디스플레이를 (예컨대, 표시 유닛(2214)을 사용하여) 업데이트하도록 구성된다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 프로세싱 유닛은 터치 감응형 이차 디스플레이를 가로지르는 스와이프 제스처의 연속적인 이동 - 스와이프 제스처는 제3 사용자 인터페이스 객체를 표현하는 제3 어포던스와 접촉하는 것을 포함함 - 을 (예컨대, 검출 유닛(2216)을 사용하여) 검출하도록; 그리고 스와이프 제스처가 제3 어포던스와 접촉하는 것을 검출한 것에 응답하여, 제3 사용자 인터페이스 객체에 대한 연관된 콘텐츠를 디스플레이하도록 일차 디스플레이를 업데이트하도록 추가로 구성된다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 어포던스의 세트 내의 각각의 어포던스는 복수의 개개의 사용자 인터페이스 객체에 대한 개개의 연관된 콘텐츠의 표현을 포함한다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 프로세싱 유닛은, 스와이프 제스처를 검출하기 전, 제1 어포던스 위에서의 터치 감응형 이차 디스플레이와의 초기 접촉을 (예컨대, 검출 유닛(2216)을 사용하여) 검출하도록; 그리고 초기 접촉을 검출한 것에 응답하여, 제1 어포던스의 확대 레벨을 (예컨대, 터치 감응형 이차 디스플레이(2204)와 결합하여 표시 유닛(2214)을 사용하여) 증가시키도록 추가로 구성된다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 애플리케이션은 웹 브라우징 애플리케이션이고, 복수의 사용자 인터페이스 객체들 각각은 웹 브라우징 탭들에 대응한다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 프로세싱 유닛은 일차 디스플레이 상에서 웹 브라우징 애플리케이션의 URL 입력 부분에서의 입력을 (예컨대, 검출 유닛(2216)을 사용하여) 검출하도록; 그리고, 입력을 검출한 것에 응답하여, (예컨대, 터치 감응형 이차 디스플레이 유닛(2204)과 결합하여 표시 유닛(2214)을 사용하여) 즐겨찾는 URL들의 표현들을 포함하도록 터치 감응형 이차 디스플레이를 업데이트하도록 추가로 구성된다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 애플리케이션은 사진 브라우징 애플리케이션이고, 복수의 사용자 인터페이스 객체들 각각은 개별 사진들에 대응한다.
컴퓨팅 시스템(2200)의 일부 실시예들에서, 애플리케이션은 비디오 편집 애플리케이션이고, 복수의 사용자 인터페이스 객체는 각각 개개의 비디오 내의 개별 프레임들에 대응한다.
일부 실시예들에 따르면, 도 61은 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(2300)(전자 디바이스(2300)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 61에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(2300)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(2300)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 61에 도시된 바와 같이, 컴퓨팅 시스템(2300)은 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2302)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 터치 감응형 이차 디스플레이 유닛(2304), 키보드 입력들을 수신하도록 구성된 물리적 키보드 유닛(2305), 및 디스플레이 유닛(2302), 물리적 키보드 유닛(2305), 및 터치 감응형 이차 디스플레이 유닛(2304)과 커플링되는 프로세싱 유닛(2310)을 포함한다. 일부 실시예들에서, 일차 디스플레이 유닛(2302)은 제1 하우징의 일부이고, 물리적 키보드 유닛(2305) 및 터치 감응형 이차 디스플레이 유닛(2304)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 요청 수신 유닛(예컨대, 요청 수신 유닛(2312)), 표시 유닛(2314)(예컨대, 표시 유닛(2314)), 검출 유닛(예컨대, 검출 유닛(2316)), 및 포커스 변경 유닛(예컨대, 포커스 변경 유닛(2318))을 포함한다.
프로세싱 유닛은 컴퓨팅 디바이스의 일차 디스플레이 상에 디스플레이된 콘텐츠 내에서 검색하라는 요청을 (예컨대, 요청 수신 유닛(2312)을 사용하여) 수신하도록; 요청을 수신한 것에 응답하여, (i) 일차 디스플레이 상에, 검색에 응답하는 복수의 검색 결과들을 (예컨대, 일차 디스플레이 유닛(2302)과 결합하여 표시 유닛(2314)을 사용하여) 디스플레이하도록 - 포커스는 복수의 검색 결과들 중 제1 검색 결과에 있음 -; (ii) 터치 감응형 이차 디스플레이 상에, 복수의 검색 결과들 중 개개의 검색 결과에 각각 대응하는 개개의 표현들을 (예컨대, 터치 감응형 이차 디스플레이(2304)와 결합하여 표시 유닛(2314)을 사용하여) 디스플레이하도록; 터치 감응형 이차 디스플레이를 통해, 개개의 표현들 중 한 표현을 선택하는 터치 입력을 (예컨대, 검출 유닛(2316)을 사용하여) 검출하도록 - 표현은 제1 검색 결과와는 별개인, 복수의 검색 결과들 중 제2 검색 결과에 대응함 -; 그리고 입력을 검출한 것에 응답하여, 일차 디스플레이 상의 포커스를 제2 검색 결과로 (예컨대, 일차 디스플레이 유닛(2302)과 결합하여 표시 유닛(2316)을 사용하여) 변경하도록 구성된다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 포커스를 변경하는 것은, 일차 디스플레이 상에서, 특정 검색 결과의 시각적 특성을 수정하는 것을 포함한다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 프로세싱 유닛은 터치 감응형 이차 디스플레이 상의 개개의 표현들 중 적어도 2개를 가로질러 이동하는 제스처를 (예컨대, 검출 유닛(2316)을 사용하여) 검출하도록; 그리고, 제스처를 검출한 것에 응답하여, 스와이프 제스처들이 개개의 표현들 중 적어도 2개의 표현들을 가로질러 이동함에 따라, 일차 디스플레이 상의 포커스를, 개개의 표현들 중 적어도 2개의 표현들에 대응하는 개개의 검색 결과들로 (예컨대, 일차 디스플레이 유닛(2302)과 결합하여 표시 유닛(2316)을 사용하여) 변경하도록 추가로 구성된다.
컴퓨팅 시스템(2300)의 일부 실시예들에서, 프로세싱 유닛은, 제스처의 속력이 임계 속력 초과라는 판정에 따라, 일차 디스플레이 상의 포커스를 개개의 표현들 중 적어도 2개의 표현들에 대응하는 것들에 더하여 개개의 검색 결과들로 (예컨대, 일차 디스플레이 유닛(2302)과 결합하여 표시 유닛(2316)을 사용하여) 변경하도록 추가로 구성된다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 제스처는 스와이프 제스처이다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 제스처는 플릭 제스처이다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 표현들은 검색 결과들 중 개개의 검색 결과들에 각각 대응하는 틱 마크들이다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 틱 마크들은 일차 디스플레이 상의 검색 결과들의 순서에 대응하는 순서로 터치 감응형 이차 디스플레이 상에 일렬로 디스플레이된다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 콘텐츠 내에서 검색하라는 요청은 콘텐츠 내에서 검색 문자열을 찾아내라는 요청이고, 복수의 검색 결과들 각각은 적어도 검색 문자열을 포함한다.
컴퓨팅 디바이스(2300)의 일부 실시예들에서, 복수의 검색 결과들을 디스플레이하는 것은 복수의 검색 결과들 각각에 대한 검색 문자열을 하이라이트하는 것을 포함한다.
일부 실시예들에 따르면, 도 62는 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(2400)(전자 디바이스(2400)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 62에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(2400)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(2400)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 62에 도시된 바와 같이, 컴퓨팅 시스템(2400)은 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2402)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 터치 감응형 이차 디스플레이 유닛(2404), 키보드 입력들을 수신하도록 구성된 물리적 키보드 유닛(2405), 및 디스플레이 유닛(2402), 물리적 키보드 유닛(2405), 및 터치 감응형 이차 디스플레이 유닛(2404)과 커플링되는 프로세싱 유닛(2410)을 포함한다. 일부 실시예들에서, 일차 디스플레이 유닛(2402)은 제1 하우징의 일부이고, 물리적 키보드 유닛(2405) 및 터치 감응형 이차 디스플레이 유닛(2404)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 요청 수신 유닛(예컨대, 요청 수신 유닛(2412)), 표시 유닛(2414)(예컨대, 표시 유닛(2414)), 검출 유닛(예컨대, 검출 유닛(2416)), 및 수정 유닛(예컨대, 수정 유닛(2418))을 포함한다.
프로세싱 유닛은, 일차 디스플레이 상에, 캘린더 애플리케이션을 (예컨대, 일차 디스플레이 유닛(2402)과 결합하여 표시 유닛(2414)을 사용하여) 디스플레이하도록; 캘린더 애플리케이션과 연관되는 이벤트에 관한 정보를 디스플레이하라는 요청을 (예컨대, 요청 수신 유닛(2412)을 사용하여) 수신하도록; 그리고, 요청을 수신한 것에 응답하여, (i) 일차 디스플레이 상에, 제1 이벤트에 대한 이벤트 세부사항들을 (예컨대, 일차 디스플레이 유닛(2402)과 결합하여 표시 유닛(2414)을 사용하여) 디스플레이하도록 - 이벤트 세부사항들은 이벤트에 대한 시작 시간 및 종료 시간을 포함함 -; 그리고 (ii) 터치 감응형 이차 디스플레이 상에, 적어도 시작 시간 및 종료 시간을 포함하는 시간의 범위를 나타내는 어포던스를 (예컨대, 터치 감응형 이차 디스플레이 유닛(2404)과 결합하여 표시 유닛(2414)을 사용하여) 디스플레이하도록 구성된다.
컴퓨팅 시스템(2400)의 일부 실시예들에서, 프로세싱 유닛은, 터치 감응형 이차 디스플레이를 통해, 시간의 범위를 수정하는 사용자 인터페이스 제어부에서의 입력을 (예컨대, 검출 유닛(2416)을 사용하여) 검출하도록; 그리고, 입력을 검출한 것에 응답하여, (i) 입력에 따라 이벤트에 대한 시작 시간 및 종료 시간 중 적어도 하나를 (예컨대, 수정 유닛(2418)을 사용하여) 수정하도록; 그리고 (ii) 일차 디스플레이 상에, 입력에 따라 이벤트에 대한 시간의 수정된 범위를 (예컨대, 일차 디스플레이 유닛(2402)과 결합하여 표시 유닛(2414)을 사용하여) 디스플레이하도록 추가로 구성된다.
컴퓨팅 디바이스(2400)의 일부 실시예들에서, 프로세싱 유닛은 수정된 시작 및/또는 종료 시간을 갖는 이벤트를 컴퓨팅 시스템의 메모리에 저장하도록 추가로 구성된다.
컴퓨팅 디바이스(2400)의 일부 실시예들에서, 시간 범위를 수정하는 입력은, 임계량 초과의 시간 동안 어포던스와 접촉한 상태로 유지되고 이어서 터치 감응형 이차 디스플레이 상의 어포던스의 적어도 일부분을 이동시키는 누르기 입력이다.
컴퓨팅 디바이스(2400)의 일부 실시예들에서, 시간 범위를 수정하는 입력은, 터치 감응형 이차 디스플레이를 가로질러 이동하고 컴퓨팅 시스템이 이벤트에 대한 새로운 시작 시간 및 새로운 종료 시간을 선택하게 하는 스와이프 제스처이고, 새로운 시작 및 종료 시간들은 시작 및 종료 시간들에 의해 커버되는 동일한 지속기간을 갖는 시간 슬롯에 대응한다.
일부 실시예들에 따르면, 도 63은 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(2500)(전자 디바이스(2500)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 63에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(2500)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(2500)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 63에 도시된 바와 같이, 컴퓨팅 시스템(2500)은 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2502)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 터치 감응형 이차 디스플레이 유닛(2504), 키보드 입력들을 수신하도록 구성된 물리적 키보드 유닛(2505), 및 디스플레이 유닛(2502), 물리적 키보드 유닛(2505), 및 터치 감응형 이차 디스플레이 유닛(2504)과 커플링되는 프로세싱 유닛(2510)을 포함한다. 일부 실시예들에서, 일차 디스플레이 유닛(2502)은 제1 하우징의 일부이고, 물리적 키보드 유닛(2505) 및 터치 감응형 이차 디스플레이 유닛(2504)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 선택 수신 유닛(예컨대, 선택 수신 유닛(2512)), 표시 유닛(2514)(예컨대, 표시 유닛(2514)), 검출 유닛(예컨대, 검출 유닛(2516)), 및 수행 개시 유닛(예컨대, 수행 개시 유닛(2518))을 포함한다.
프로세싱 유닛은, 컴퓨팅 시스템과 컴퓨팅 시스템과는 별개인 외부 디바이스 사이의 새로운 접속을 (예컨대, 검출 유닛(2516)을 사용하여) 검출하도록; 그리고 새로운 접속을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이 상에, 외부 디바이스를 통해 이용가능한 기능들에 대응하는 복수의 어포던스들을 (예컨대, 터치 감응형 이차 디스플레이 유닛(2504)과 결합하여 표시 유닛(2514)을 사용하여) 디스플레이하도록 구성된다.
컴퓨팅 시스템(2500)의 일부 실시예들에서, 프로세싱 유닛은, 터치 감응형 이차 디스플레이를 통해, 외부 디바이스를 통해 이용가능한 제1 기능에 대응하는 제1 어포던스의 선택을 (예컨대, 선택 수신 유닛(2512)을 통해) 수신하도록; 그리고, 선택을 수신한 것에 응답하여, 제1 기능의 수행을 (예컨대, 수행 개시 유닛(2518)을 사용하여) 개시하도록 추가로 구성된다.
컴퓨팅 시스템(2500)의 일부 실시예들에서, 외부 디바이스는 일차 디스플레이 및 터치 감응형 이차 디스플레이와는 별개인 추가 디스플레이이다.
컴퓨팅 시스템(2500)의 일부 실시예들에서, 복수의 어포던스들은, 선택될 때, 컴퓨팅 시스템이 추가 디스플레이를 통해 디스플레이 미러링 기능의 수행을 개시하게 하는 제1 어포던스를 포함한다.
일부 실시예들에 따르면, 도 64는 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(2600)(전자 디바이스(2600)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 64에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(2600)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(2600)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 64에 도시된 바와 같이, 컴퓨팅 시스템(2600)은 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2602)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 터치 감응형 이차 디스플레이 유닛(2604), 키보드 입력들을 수신하도록 구성된 물리적 키보드 유닛(2605), 및 디스플레이 유닛(2602), 물리적 키보드 유닛(2605), 및 터치 감응형 이차 디스플레이 유닛(2604)과 커플링되는 프로세싱 유닛(2610)을 포함한다. 일부 실시예들에서, 일차 디스플레이 유닛(2602)은 제1 하우징의 일부이고, 물리적 키보드 유닛(2605) 및 터치 감응형 이차 디스플레이 유닛(2604)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 표시 유닛(예컨대, 표시 유닛(2612)), 검출 유닛(2614)(예컨대, 검출 유닛(2614)), 및 대체 유닛(예컨대, 대체 유닛(2616))을 포함한다.
프로세싱 유닛은, 일차 디스플레이 상에, 컴퓨팅 시스템 상에서 실행되고 있는 애플리케이션에 대한 사용자 인터페이스를 (예컨대, 일차 디스플레이 유닛(2602)과 결합하여 표시 유닛(2612)을 사용하여) 디스플레이하도록; 사용자 인터페이스 내의 특정 위치에서 제1 입력을 (예컨대, 검출 유닛(2614)을 사용하여) 검출하도록; 그리고, 제1 입력을 검출한 것에 응답하여, 터치 감응형 이차 디스플레이 상에, 별개의 글자들에 각각 대응하는 어포던스들의 세트를 (예컨대, 터치 감응형 이차 디스플레이 유닛(2604)과 결합하여 표시 유닛(2612)을 사용하여) 디스플레이하도록 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 프로세싱 유닛은, 터치 감응형 이차 디스플레이를 통해, 별개의 글자들 중 제1 글자에 대응하는 제1 어포던스 위에서의 제2 입력을 (예컨대, 검출 유닛(2614)을 사용하여) 검출하도록; 그리고, 제2 입력을 검출한 것에 응답하여, 입력이 제1 어포던스와 접촉한 상태로 유지되는 동안, 일차 디스플레이 상에, 특정 위치에서의 제1 글자의 미리보기를 (예컨대, 일차 디스플레이 유닛(2602)과 결합하여 표시 유닛(2612)을 사용하여) 디스플레이하도록 추가로 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 프로세싱 유닛은, 터치 감응형 이차 디스플레이를 통해, 제1 어포던스로부터 별개의 글자들 중 제2 글자에 대응하는 제2 어포던스로의 제2 입력의 이동을 (예컨대, 검출 유닛(2614)을 사용하여) 검출하도록; 그리고, 제1 어포던스로부터 그리고 제2 어포던스로의 제2 입력의 이동을 검출한 것에 응답하여, 제1 글자의 미리보기를 제2 글자의 미리보기로 (예컨대, 대체 유닛(2616)을 사용하여) 대체하도록 추가로 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 프로세싱 유닛은, 사용자 인터페이스에 포함된 텍스트 콘텐츠에 적어도 부분적으로 기초하여 어포던스들의 세트에 포함시킬 어포던스들을 결정하도록 추가로 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 결정하는 것은 사용자가 사용자 인터페이스에 포함된 텍스트 콘텐츠를 수정했음을 검출한 것에 응답하여 이행된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 프로세싱 유닛은, 제2 입력이 제2 어포던스와 접촉하는 동안, 제2 입력의 리프트오프를 검출하도록, 그리고 리프트오프를 검출한 것에 응답하여, 제2 사용자 인터페이스 요소를 포함하도록 사용자 인터페이스를 업데이트하도록 추가로 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 프로세싱 유닛은, 제2 입력이 제2 어포던스와 접촉하는 동안, 추가 입력을 검출하도록, 그리고 추가 입력을 검출한 것에 응답하여, 제2 사용자 인터페이스 요소를 포함하도록 사용자 인터페이스를 업데이트하도록 추가로 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 프로세싱 유닛은, 제2 입력이 터치 감응형 이차 디스플레이를 가로질러 계속해서 이동함에 따라, 어포던스들의 세트 내의 대응하는 어포던스들이 제2 입력에 의해 접촉될 때 별개의 글자들 중 개개의 글자들에 대한 미리보기들을 디스플레이하도록 추가로 구성된다.
컴퓨팅 시스템(2600)의 일부 실시예들에서, 제2 글자의 미리보기는 입력이 제2 어포던스와 접촉한 상태로 유지되는 동안에 일차 디스플레이 상에 디스플레이된 상태로 유지된다.
일부 실시예들에 따르면, 도 65는 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(2700)(전자 디바이스(2700)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 65에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(2700)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(2700)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 65에 도시된 바와 같이, 컴퓨팅 시스템(2700)은 정보를 디스플레이하도록 구성된 일차 디스플레이 유닛(2702)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 터치 감응형 이차 디스플레이 유닛(2704), 키보드 입력들을 수신하도록 구성된 물리적 키보드 유닛(2705), 및 디스플레이 유닛(2702), 물리적 키보드 유닛(2705), 및 터치 감응형 이차 디스플레이 유닛(2704)과 커플링되는 프로세싱 유닛(2710)을 포함한다. 일부 실시예들에서, 일차 디스플레이 유닛(2702)은 제1 하우징의 일부이고, 물리적 키보드 유닛(2705) 및 터치 감응형 이차 디스플레이 유닛(2704)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 요청 수신 유닛(예컨대, 요청 수신 유닛(2712)), 표시 유닛(2714)(예컨대, 표시 유닛(2714)), 검출 유닛(예컨대, 검출 유닛(2716)), 및 콘텐츠 렌더링 유닛(예컨대, 콘텐츠 렌더링 유닛(2718))을 포함한다.
프로세싱 유닛은, 콘텐츠 편집 애플리케이션을 열라는 요청을 (예컨대, 요청 수신 유닛(2712)을 사용하여) 수신하도록; 요청을 수신한 것에 응답하여, (i) 일차 디스플레이 상에, 콘텐츠 편집 애플리케이션을 (예컨대, 일차 디스플레이 유닛(2702)과 결합하여 표시 유닛(2714)을 사용하여) 디스플레이하도록; 그리고, (ii) 터치 감응형 이차 디스플레이 상에, 콘텐츠 편집 애플리케이션 내에 콘텐츠를 렌더링하는 데 사용되는 적어도 하나의 시각적 특성을 수정하기 위한 사용자 인터페이스 제어부를 (예컨대, 터치 감응형 이차 디스플레이 유닛(2704)과 결합하여 표시 유닛(2714)을 사용하여) 디스플레이하도록 구성된다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 프로세싱 유닛은, 터치 감응형 이차 디스플레이를 통해, 적어도 하나의 시각적 특성에 대한 제1 값을 선택하는 사용자 인터페이스 제어부에서의 입력을 (예컨대, 검출 유닛(2716)을 사용하여) 검출하도록; 그리고 입력을 검출한 후, 적어도 하나의 시각적 특성에 대한 제1 값을 사용하여 콘텐츠 편집 애플리케이션 내에 콘텐츠를 (예컨대, 콘텐츠 렌더링 유닛(2718)을 사용하여) 렌더링하도록 추가로 구성된다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 사용자 인터페이스 제어부는, 값들의 슬라이딩 스케일을 따라 적어도 하나의 시각적 특성에 대한 개개의 값에 각각 대응하는 개개의 제어부들을 포함한다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 값들의 슬라이딩 스케일은 색상의 별개의 음영들을 표현한다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 제1 값은 제1 색상의 제1 음영에 대응하고, 프로세싱 유닛은, 입력이 사전결정된 기준들을 만족시킨다는 판정에 따라, 제1 색상의 제1 음영과는 별개인, 제1 색상의 다른 음영들을 선택하기 위한 옵션들을 포함하도록 터치 감응형 이차 디스플레이 상의 사용자 인터페이스 제어부를 수정하도록 추가로 구성된다.
컴퓨팅 시스템(2700)의의 일부 실시예들에서, 프로세싱 유닛은, 콘텐츠를 렌더링하기 전, 콘텐츠의 선택을 수신하도록 추가로 구성되고, 콘텐츠를 렌더링하는 것은 적어도 하나의 시각적 특성에 대한 제1 값을 사용하여 콘텐츠의 미리보기를 제시하는 것을 포함한다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 미리보기는 입력이 터치 감응형 이차 디스플레이와 접촉한 상태로 유지되는 동안에 제시된다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 프로세싱 유닛은, 입력의 리프트오프를 검출한 것에 응답하여, 미리보기를 디스플레이하는 것을 중지하도록 추가로 구성된다.
컴퓨팅 시스템(2700)의 일부 실시예들에서, 프로세싱 유닛은, 입력의 리프트오프를 검출한 것에 응답하여, 적어도 하나의 시각적 특성에 대한 수정된 값을 갖는 편집가능 콘텐츠의 일부분을 디스플레이하도록 추가로 구성된다.
일부 실시예들에 따르면, 도 68은 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(3000)(전자 디바이스(3000)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 68에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(3000)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(3000)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 68에 도시된 바와 같이, 컴퓨팅 시스템(3000)은, 정보를 디스플레이하도록 구성된 디스플레이 유닛(3002)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 이차 디스플레이 유닛(3004), 사용자로부터 생체 측정 입력들로 구성된 생체 측정 센서 유닛(3005), 및 디스플레이 유닛(3002), 이차 디스플레이 유닛(3004), 및 생체 측정 유닛(3005)과 커플링되는 프로세싱 유닛(3010)을 포함한다. 일부 실시예들에서, 디스플레이 유닛(3002)은 제1 하우징의 일부이고, 생체 측정 센서 유닛(3005) 및 이차 디스플레이 유닛(3004)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 생체 측정 정보 수신 유닛(예컨대, 생체 측정 정보 수신 유닛(3012)), 표시 유닛(3014)(예컨대, 표시 유닛(3014)), 잠금해제 유닛(예컨대, 잠금해제 유닛(3016)), 및 수신 유닛(예컨대, 수신 유닛(3018))을 포함한다.
프로세싱 유닛은, 디바이스가 잠금된 상태에 있는 동안, 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들에 로그인하는 것과 연관되는 각자의 로그인 사용자 인터페이스를 (예컨대, 표시 유닛(3014)을 사용하여) 디스플레이하도록; 로그인 사용자 인터페이스를 디스플레이하는 동안, 사용자에 관한 생체 측정 정보를 (예컨대, 생체 측정 정보 수신 유닛(3012)을 사용하여) 수신하도록; 생체 측정 정보를 수신한 것에 응답하여, (i) 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다는 판정에 따라, 디스플레이 상에, 제1 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 (예컨대, 표시 유닛(3014)을 사용하여) 디스플레이하도록; 그리고 (ii) 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다는 판정에 따라, 디스플레이 상에, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 (예컨대, 표시 유닛(3014)을 사용하여) 디스플레이하도록 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 프로세싱 유닛은, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖는다는 판정에 따라, 제1 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3016)을 사용하여) 잠금해제하도록 추가로 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 프로세싱 유닛은, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치하는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖는다는 판정에 따라, 제2 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3016)을 사용하여) 잠금해제하도록 추가로 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 프로세싱 유닛은, 생체 측정 정보를 수신한 것에 응답하여, 생체 측정 정보가 디바이스의 임의의 사용자 계정에 대한 생체 측정 정보와 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지하도록 추가로 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 로그인 사용자 인터페이스는 복수의 사용자 계정들에 대응하는 복수의 선택가능한 어포던스들을 포함한다.
전자 디바이스(3000)의 일부 실시예들에서, 프로세싱 유닛은, 제1 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 동안, 로그인 크리덴셜의 입력을 (예컨대, 수신 유닛(3018)을 사용하여) 수신하도록; 그리고 로그인 크리덴셜의 입력을 수신한 것에 응답하여, 로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치한다는 판정에 따라, 제1 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3016)을 사용하여) 잠금해제하도록; 그리고, 로그인 크리덴셜이 제1 사용자 계정에 대한 로그인 크리덴셜과 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지시키도록 추가로 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 프로세싱 유닛은, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 디스플레이하는 동안, 로그인 크리덴셜의 입력을 (예컨대, 수신 유닛(3018)을 사용하여) 수신하도록; 그리고 로그인 크리덴셜의 입력을 수신한 것에 응답하여, 로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치한다는 판정에 따라, 제1 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3016)을 사용하여) 잠금해제하도록; 그리고, 로그인 크리덴셜이 제2 사용자 계정에 대한 로그인 크리덴셜과 일치하지 않는다는 판정에 따라, 디바이스를 잠금된 상태로 유지시키도록 추가로 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 로그인 사용자 인터페이스는 생체 측정 정보를 제공하라는 명령어들을 포함한다.
전자 디바이스(3000)의 일부 실시예들에서, 전자 디바이스는 생체 측정 센서에 인접해 있는 이차 디스플레이를 포함하고; 프로세싱 유닛은, 디바이스의 디스플레이 상에 로그인 사용자 인터페이스를 디스플레이하는 동안, 이차 디스플레이에서, 생체 측정 센서를 통해 생체 측정 정보를 제공하라는 명령어들을 디스플레이하도록 추가로 구성된다.
전자 디바이스(3000)의 일부 실시예들에서, 생체 측정 센서는 지문 센서이다.
전자 디바이스(3000)의 일부 실시예들에서, 생체 측정 센서는 얼굴 검출 센서이다.
전자 디바이스(3000)의 일부 실시예들에서, 생체 측정 센서는 망막 스캐너이다.
일부 실시예들에 따르면, 도 69는 다양한 기술된 실시예들의 원리들에 따라 구성된 컴퓨팅 시스템(3100)(전자 디바이스(3100)로도 지칭됨)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은 다양한 기술된 실시예들의 원리를 수행하도록 선택적으로, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합에 의해 구현된다. 당업자라면 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 69에서 기술된 기능 블록들이 선택적으로 조합되거나 서브블록들로 분리된다는 것이 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가 정의를 지원한다. 논의의 용이함을 위해, 컴퓨팅 시스템(3100)은 휴대용 컴퓨팅 시스템(100)(도 1a)으로서 구현된다. 일부 실시예들에서, 컴퓨팅 시스템(3100)은 도 1a 내지 도 2d에 도시된 디바이스들/시스템들 중 임의의 것에 따라 구현된다.
도 69에 도시된 바와 같이, 컴퓨팅 시스템(3100)은, 정보를 디스플레이하도록 구성된 디스플레이 유닛(3102)(예컨대, 일차 터치 스크린, 일차 터치 감응형 디스플레이, 및 일차 터치 스크린 디스플레이로도 지칭되는, 도 1a의 터치 감응형 디스플레이 시스템(112)), 터치 감응형 디스플레이 상에서의 접촉들, 제스처들, 및 다른 사용자 입력들을 수신하도록 구성된 이차 디스플레이 유닛(3104), 사용자로부터 생체 측정 입력들로 구성된 생체 측정 센서 유닛(3105), 및 디스플레이 유닛(3102), 이차 디스플레이 유닛(3104), 및 생체 측정 유닛(3105)과 커플링되는 프로세싱 유닛(3110)을 포함한다. 일부 실시예들에서, 디스플레이 유닛(3102)은 제1 하우징의 일부이고, 생체 측정 센서 유닛(3105) 및 이차 디스플레이 유닛(3104)은 제1 하우징과는 별개인 제2 하우징의 일부이다. 일부 실시예들에서, 프로세싱 유닛은 생체 측정 정보 수신 유닛(예컨대, 생체 측정 정보 수신 유닛(3112)), 표시 유닛(3114)(예컨대, 표시 유닛(3114)), 잠금해제 유닛(예컨대, 잠금해제 유닛(3116)), 잠금 유닛(예컨대, 잠금 유닛(3118)), 수신 유닛(예컨대, 수신 유닛(3120)), 저전력 모드 진입 유닛(예컨대, 저전력 모드 진입 유닛(3122)), 및 재시작 유닛(예컨대, 재시작 유닛(3124))을 포함한다.
프로세싱 유닛은, 디바이스가 제1 사용자 계정으로 로그인되어 있는 동안, 제1 사용자 계정과 연관된 사용자 인터페이스를 (예컨대, 표시 유닛(3114)을 사용하여) 디스플레이하도록 구성된다. 디바이스는 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들과 연관되고, 제2 사용자 계정은 제2 사용자 계정에 로그인하는 것을 가능하게 하는 생체 측정 정보와 연관된다. 제1 사용자 계정과 연관된 사용자 인터페이스를 디스플레이하는 동안, 프로세싱 유닛은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 (예컨대, 생체 측정 정보 수신 유닛(3112)을 사용하여) 수신하도록 구성된다. 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 프로세싱 유닛은, 입력이 제2 사용자 스위칭 기준들을 충족시키는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제2 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, (i) 제2 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3116)을 사용하여) 잠금해제하도록; (ii) 제1 사용자 계정에 대해 디바이스를 (예컨대, 잠금 유닛(3118)을 사용하여) 잠금하도록; 그리고 (iii) 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제2 사용자 계정과 연관된 사용자 인터페이스로 (예컨대, 표시 유닛(3114)을 사용하여) 대체하도록 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 프로세싱 유닛은, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제2 사용자 스위칭 기준들을 충족시키는 한편 제2 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다 - 제2 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디스플레이 상에, 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 (예컨대, 표시 유닛(3114)을 사용하여) 디스플레이하도록 추가로 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 프로세싱 유닛은, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제3 사용자 스위칭 기준들을 충족시키는 한편 제3 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제3 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, (i) 제3 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3116)을 사용하여) 잠금해제하도록; (ii) 제1 사용자 계정에 대해 디바이스를 (예컨대, 잠금 유닛(3118)을 사용하여) 잠금하도록; 그리고 (iii) 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제3 사용자 계정과 연관된 사용자 인터페이스로 (예컨대, 표시 유닛(3114)을 사용하여) 대체하도록 추가로 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 프로세싱 유닛은, 생체 측정 정보를 수신한 것에 응답하여, 입력이 제3 사용자 스위칭 기준들을 충족시키는 한편 제3 사용자 계정이 디바이스 상에서 활성 세션을 갖지 않는다 - 제3 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, 디스플레이 상에, 제3 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 (예컨대, 표시 유닛(3114)을 사용하여) 디스플레이하도록 추가로 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 입력 요소는 버튼이고, 일체형 생체 측정 센서를 갖는 입력 요소를 통한 입력은 버튼을 통한 누르기 입력을 검출하는 것을 포함한다.
전자 디바이스(3100)의 일부 실시예들에서, 제2 사용자 스위칭 기준들은 누르기 입력이 제1 임계량 미만의 시간 동안 지속된다는 기준을 포함하고; 프로세싱 유닛은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 누르기 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제1 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스를 (예컨대, 저전력 모드 진입 유닛(3122)을 사용하여) 저전력 모드에 두도록 추가로 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 제2 사용자 스위칭 기준들은 버튼이 제1 임계량 미만의 시간 동안 눌린다는 기준을 포함하고; 프로세싱 유닛은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제1 임계량의 시간보다 더 오래 그리고 제2 임계량의 시간보다 덜 지속된다는 판정에 따라, 디바이스를 (예컨대, 저전력 모드 진입 유닛(3122)을 사용하여) 저전력 모드에 두도록; 그리고 버튼을 사용한 누르기 입력이 제2 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스의 상태를 변경하기 위한 옵션들의 메뉴를 (예컨대, 표시 유닛(3114)을 사용하여) 디스플레이하도록 추가로 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 프로세싱 유닛은, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 입력을 수신한 것에 응답하여, 버튼을 사용한 누르기 입력이 제2 임계량의 시간을 초과하는 제3 임계량의 시간보다 더 오래 지속된다는 판정에 따라, 디바이스를 (예컨대, 재시작 유닛(3124)을 사용하여) 재시작시키도록 추가로 구성된다.
전자 디바이스(3100)의 일부 실시예들에서, 프로세싱 유닛은, 제1 계정과 연관된 사용자 인터페이스의 디스플레이를 제2 사용자 계정과 연관된 사용자 인터페이스로 대체한 후, 제2 사용자 계정과 연관된 사용자 인터페이스를 디스플레이하는 동안, 일체형 생체 측정 센서를 갖는 입력 요소를 통해 제2 입력을 (예컨대, 생체 측정 정보 수신 유닛(3112)을 사용하여) 수신하도록; 일체형 생체 측정 센서를 갖는 입력 요소를 통해 제2 입력을 수신한 것에 응답하여, 제2 입력이 제1 사용자 스위칭 기준들을 충족시키는 한편 제1 사용자 계정이 디바이스 상에서 활성 세션을 갖는다 - 제1 사용자 스위칭 기준들은 입력 요소를 사용한 입력 동안에 검출된 생체 측정 정보가 복수의 사용자 계정들 중 제1 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 - 는 판정에 따라, (i) 제1 사용자 계정에 대해 디바이스를 (예컨대, 잠금해제 유닛(3116)을 사용하여) 잠금해제하도록; (ii) 제2 사용자 계정에 대해 디바이스를 (예컨대, 잠금 유닛(3118)을 사용하여) 잠금하도록; 그리고 (iii) 제2 계정과 연관된 사용자 인터페이스의 디스플레이를 제1 사용자 계정과 연관된 사용자 인터페이스로 (예컨대, 표시 유닛(3114)을 사용하여) 대체하도록 추가로 구성된다.
전술한 설명은, 설명의 목적을 위해, 특정 실시예들을 참조하여 설명되었다. 그러나, 상기의 예시적인 논의들은 본 발명을 개시된 정확한 형태들로 규명하거나 제한하려는 의도는 아니다. 많은 수정들 및 변형들이 상기 교시 내용들의 관점에서 가능하다. 본 발명의 원리들 및 그의 실제적인 응용들을 가장 잘 설명하여 당업자들이 본 발명 및 다양하게 기술된 실시예들을 고려되는 특정 용도에 적합한 바와 같은 다양한 변형들을 갖고서 가장 잘 이용하는 것을 가능하게 하도록, 실시예들이 선택 및 설명되었다.

Claims (11)

  1. 방법으로서,
    디스플레이, 및 통합 생체 측정 센서를 갖는 입력 요소를 갖는 전자 디바이스에서;
    상기 디바이스가 제1 사용자 계정에 로그인되어 있는 동안, 상기 제1 사용자 계정과 연관된 사용자 인터페이스를 디스플레이하는 단계 -
    상기 디바이스는 상기 제1 사용자 계정 및 제2 사용자 계정을 포함하는 복수의 사용자 계정들과 연관되고;
    상기 제2 사용자 계정은 상기 제2 사용자 계정으로의 로그인을 가능하게 하는 생체 측정 정보와 연관됨 -;
    상기 제1 사용자 계정과 연관된 상기 사용자 인터페이스를 디스플레이하는 동안, 상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 입력을 수신하는 단계;
    상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 상기 입력을 수신하는 것에 응답하여:
    상기 제2 사용자 계정이 상기 디바이스 상에서 활성 세션을 갖는 동안 상기 입력이 제2 사용자 스위칭 기준들을 충족시킨다는 결정에 따라 - 상기 제2 사용자 스위칭 기준들은, 상기 입력 요소를 이용한 상기 입력 동안에 검출된 생체 측정 정보가 상기 복수의 사용자 계정 중 상기 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 -:
    상기 제2 사용자 계정에 대해 상기 디바이스를 잠금해제하는 단계;
    상기 제1 사용자 계정에 대해 상기 디바이스를 잠그는 단계; 및
    상기 제1 계정과 연관된 상기 사용자 인터페이스의 디스플레이를 상기 제2 사용자 계정과 연관된 사용자 인터페이스로 대체하는 단계를 포함하는 방법.
  2. 제1항에 있어서, 상기 생체 측정 정보를 수신하는 것에 응답하여:
    상기 제2 사용자 계정이 상기 디바이스 상에서 활성 세션을 갖지 않는 동안 상기 입력이 제2 사용자 스위칭 기준들을 충족시킨다는 결정에 따라 - 상기 제2 사용자 스위칭 기준들은, 상기 입력 요소를 이용한 상기 입력 동안 검출된 생체 측정 정보가 상기 복수의 사용자 계정 중 상기 제2 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 -, 상기 제2 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 상기 디스플레이 상에 디스플레이하는 단계를 포함하는 방법.
  3. 제1항 또는 제2항에 있어서, 상기 생체 측정 정보를 수신하는 것에 응답하여,
    제3 사용자 계정이 상기 디바이스 상에서 활성 세션을 갖는 동안 상기 입력이 제3 사용자 스위칭 기준들을 충족시킨다는 결정에 따라 - 상기 제3 사용자 스위칭 기준들은, 상기 입력 요소를 이용한 상기 입력 동안 검출된 생체 측정 정보가 상기 복수의 사용자 계정 중 상기 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 -:
    상기 제3 사용자 계정에 대해 상기 디바이스를 잠금해제하는 단계;
    상기 제1 사용자 계정에 대해 상기 디바이스를 잠그는 단계; 및
    상기 제1 계정과 연관된 상기 사용자 인터페이스의 디스플레이를 상기 제3 사용자 계정과 연관된 사용자 인터페이스로 대체하는 단계를 포함하는 방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 생체 측정 정보를 수신하는 것에 응답하여,
    상기 제3 사용자 계정이 상기 디바이스 상에서 활성 세션을 갖지 않는 동안 상기 입력이 제3 사용자 스위칭 기준들을 충족시킨다는 결정에 따라 - 상기 제3 사용자 스위칭 기준들은, 상기 입력 요소를 이용한 상기 입력 동안 검출된 생체 측정 정보가 상기 복수의 사용자 계정 중 상기 제3 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 -, 상기 제3 사용자 계정에 대한 로그인 크리덴셜을 입력하라는 프롬프트를 상기 디스플레이 상에 디스플레이하는 단계를 포함하는 방법.
  5. 제1항 또는 제2항에 있어서,
    상기 입력 요소는 버튼이고;
    상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통한 상기 입력은 상기 버튼을 통해 누름 입력을 검출하는 것을 포함하는 방법.
  6. 제5항에 있어서,
    상기 제2 사용자 스위칭 기준들은 상기 누름 입력이 제1 임계 시간량 미만 동안 지속된다는 기준을 포함하고;
    상기 방법은 상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 상기 누름 입력을 수신하는 것에 응답하여, 상기 버튼을 이용한 상기 누름 입력이 상기 제1 임계 시간량보다 길게 지속된다는 결정에 따라, 상기 디바이스를 저전력 모드에 두는 단계를 포함하는 방법.
  7. 제5항에 있어서,
    상기 제2 사용자 스위칭 기준들은 상기 버튼이 제1 임계 시간량 미만 동안 눌러진다는 기준을 포함하고;
    상기 방법은 상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 상기 입력을 수신하는 것에 응답하여,
    상기 버튼을 이용한 상기 누름 입력이 상기 제1 임계 시간량보다 길게 그리고 제2 임계 시간량보다 짧게 지속된다는 결정에 따라, 상기 디바이스를 저전력 모드에 두는 단계; 및
    상기 버튼을 이용한 상기 누름 입력이 상기 제2 임계 시간량보다 길게 지속된다는 결정에 따라, 상기 디바이스의 상태를 변경하기 위한 옵션들의 메뉴를 디스플레이하는 단계를 포함하는 방법.
  8. 제7항에 있어서, 상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 상기 입력을 수신하는 것에 응답하여,
    상기 버튼을 이용한 상기 누름 입력이 상기 제2 임계 시간량보다 큰 제3 임계 시간량보다 길게 지속된다는 결정에 따라, 상기 디바이스를 재시작하는 단계를 포함하는 방법.
  9. 제1항 내지 제8항 중 어느 한 항에 있어서, 상기 제1 계정과 연관된 상기 사용자 인터페이스의 디스플레이를 상기 제2 사용자 계정과 연관된 사용자 인터페이스로 대체한 후에,
    상기 제2 사용자 계정과 연관된 상기 사용자 인터페이스를 디스플레이하는 동안, 상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 제2 입력을 수신하는 단계;
    상기 통합 생체 측정 센서를 갖는 상기 입력 요소를 통해 상기 제2 입력을 수신하는 것에 응답하여:
    상기 제1 사용자 계정이 상기 디바이스 상에서 활성 세션을 갖는 동안 상기 제2 입력이 제1 사용자 스위칭 기준들을 충족시킨다는 결정에 따라 - 상기 제1 사용자 스위칭 기준들은, 상기 입력 요소를 이용한 상기 입력 동안에 검출된 생체 측정 정보가 상기 복수의 사용자 계정 중 상기 제1 사용자 계정에 대한 생체 측정 정보와 일치한다는 요건을 포함함 -:
    상기 제1 사용자 계정에 대해 상기 디바이스를 잠금해제하는 단계;
    상기 제2 사용자 계정에 대해 상기 디바이스를 잠그는 단계; 및
    상기 제2 계정과 연관된 상기 사용자 인터페이스의 디스플레이를 상기 제1 사용자 계정과 연관된 사용자 인터페이스로 대체하는 단계를 포함하는 방법.
  10. 디스플레이 및 생체 측정 센서를 갖는 컴퓨팅 시스템의 하나 이상의 프로세서에 의해 실행될 때, 상기 컴퓨팅 시스템으로 하여금 제1항 내지 제9항 중 어느 한 항의 방법을 수행하게 하는 명령어들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체.
  11. 전자 디바이스로서,
    하나 이상의 프로세서;
    디스플레이;
    생체 측정 센서; 및
    상기 하나 이상의 프로세서에 의해 실행되도록 구성되는 하나 이상의 프로그램을 저장하는 메모리를 포함하고, 상기 하나 이상의 프로그램은 제1항 내지 제9항 중 어느 한 항의 방법을 수행하기 위한 명령어들을 포함하는 전자 디바이스.
KR1020217042875A 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들 KR102490421B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020237001774A KR20230014873A (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201662368988P 2016-07-29 2016-07-29
US62/368,988 2016-07-29
US201662412792P 2016-10-25 2016-10-25
US62/412,792 2016-10-25
KR1020207028796A KR102345993B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
PCT/US2017/041959 WO2018022313A1 (en) 2016-07-29 2017-07-13 Systems, devices, and methods for dynamically providing user interface controls at a touch-sensitive secondary display

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020207028796A Division KR102345993B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020237001774A Division KR20230014873A (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들

Publications (2)

Publication Number Publication Date
KR20220002739A true KR20220002739A (ko) 2022-01-06
KR102490421B1 KR102490421B1 (ko) 2023-01-19

Family

ID=59380818

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020197004584A KR102065900B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020237001774A KR20230014873A (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020207000325A KR102115714B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020207014317A KR102166223B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020207028796A KR102345993B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020217042875A KR102490421B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들

Family Applications Before (5)

Application Number Title Priority Date Filing Date
KR1020197004584A KR102065900B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020237001774A KR20230014873A (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020207000325A KR102115714B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020207014317A KR102166223B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
KR1020207028796A KR102345993B1 (ko) 2016-07-29 2017-07-13 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들

Country Status (8)

Country Link
US (4) US10303289B2 (ko)
EP (2) EP3465408B1 (ko)
JP (4) JP6700471B2 (ko)
KR (6) KR102065900B1 (ko)
CN (5) CN113157111A (ko)
AU (6) AU2017100879B4 (ko)
DK (1) DK179705B1 (ko)
WO (1) WO2018022313A1 (ko)

Families Citing this family (110)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10776103B2 (en) 2011-12-19 2020-09-15 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
US11089134B1 (en) 2011-12-19 2021-08-10 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
US9459781B2 (en) 2012-05-09 2016-10-04 Apple Inc. Context-specific user interfaces for displaying animated sequences
US10057400B1 (en) 2012-11-02 2018-08-21 Majen Tech, LLC Lock screen interface for a mobile device apparatus
US11431834B1 (en) 2013-01-10 2022-08-30 Majen Tech, LLC Screen interface for a mobile device apparatus
US10051103B1 (en) 2013-01-10 2018-08-14 Majen Tech, LLC Screen interface for a mobile device apparatus
US11914419B2 (en) 2014-01-23 2024-02-27 Apple Inc. Systems and methods for prompting a log-in to an electronic device based on biometric information received from a user
EP3872659A1 (en) 2014-01-23 2021-09-01 Apple Inc. Biometric authentication for online purchasing
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
KR102314109B1 (ko) * 2015-01-05 2021-10-18 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법
EP4321088A3 (en) 2015-08-20 2024-04-24 Apple Inc. Exercise-based watch face
USD775649S1 (en) * 2015-09-08 2017-01-03 Apple Inc. Display screen or portion thereof with animated graphical user interface
AU2017100879B4 (en) 2016-07-29 2017-09-28 Apple Inc. Systems, devices, and methods for dynamically providing user interface controls at touch-sensitive secondary display
WO2018067167A1 (en) * 2016-10-07 2018-04-12 Hewlett-Packard Development Company, L.P. Keyboard with secondary display device
USD815137S1 (en) * 2016-10-27 2018-04-10 Apple Inc. Display screen or portion thereof with graphical user interface
USD900860S1 (en) * 2016-10-27 2020-11-03 Apple Inc. Display screen or portion thereof with graphical user interface
USD820303S1 (en) * 2016-10-27 2018-06-12 Apple Inc. Display screen or portion thereof with graphical user interface
CA174365S (en) 2016-10-27 2017-11-28 Apple Inc Display screen with graphical user interface
USD815141S1 (en) * 2016-10-27 2018-04-10 Apple Inc. Display screen or portion thereof with graphical user interface
USD817992S1 (en) 2016-10-27 2018-05-15 Apple Inc. Display screen or portion thereof with graphical user interface
USD817993S1 (en) * 2016-10-27 2018-05-15 Apple Inc. Display screen or portion thereof with graphical user interface
USD820304S1 (en) * 2016-10-27 2018-06-12 Apple Inc. Display screen or portion thereof with graphical user interface
USD927529S1 (en) * 2019-01-11 2021-08-10 Apple Inc. Electronic device with pair of display screens or portions thereof each with graphical user interface
USD815140S1 (en) 2016-10-27 2018-04-10 Apple Inc. Display screen or portion thereof with graphical user interface
USD943624S1 (en) 2016-10-27 2022-02-15 Apple Inc. Electronic device with pair of display screens or portions thereof each with animated graphical user interface
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
DK179555B1 (en) 2017-05-16 2019-02-13 Apple Inc. USER INTERFACE FOR A FLASHLIGHT MODE ON AN ELECTRONIC DEVICE
USD837234S1 (en) 2017-05-25 2019-01-01 Palantir Technologies Inc. Display screen or portion thereof with transitional graphical user interface
USD839913S1 (en) * 2017-07-05 2019-02-05 Mintz Group, LLC Display screen or portion thereof with graphical user interface
US10455779B2 (en) * 2017-07-24 2019-10-29 Osram Sylvania Inc. Irradiance-controlled fixture for horticultural applications
USD874473S1 (en) * 2017-09-22 2020-02-04 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US10872336B2 (en) * 2017-10-13 2020-12-22 Intensity Analytics Corporation System and method for independent user effort-based validation
USD916718S1 (en) * 2017-10-30 2021-04-20 Siemens Healthcare Gmbh Display screen or portion thereof with a graphical user interface
USD847841S1 (en) 2017-11-01 2019-05-07 Apple Inc. Display screen or portion thereof with graphical user interface
US11134312B2 (en) * 2017-12-14 2021-09-28 Google Llc Methods, systems, and media for presenting contextual information in connection with media content
US10585525B2 (en) 2018-02-12 2020-03-10 International Business Machines Corporation Adaptive notification modifications for touchscreen interfaces
EP3557415A1 (en) * 2018-04-17 2019-10-23 Casio Computer Co., Ltd. Display control apparatus, program and display controlling method
USD960177S1 (en) 2018-05-03 2022-08-09 CACI, Inc.—Federal Display screen or portion thereof with graphical user interface
US11256548B2 (en) 2018-05-03 2022-02-22 LGS Innovations LLC Systems and methods for cloud computing data processing
USD858556S1 (en) * 2018-05-07 2019-09-03 Google Llc Display screen or portion thereof with an animated graphical interface
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
USD859450S1 (en) * 2018-05-07 2019-09-10 Google Llc Display screen or portion thereof with an animated graphical interface
USD896248S1 (en) * 2018-05-12 2020-09-15 Canva Pty Ltd. Display screen or portion thereof with an animated graphical user interface
USD869491S1 (en) * 2018-06-03 2019-12-10 Apple Inc. Electronic device with graphical user interface
USD879132S1 (en) * 2018-06-03 2020-03-24 Apple Inc. Electronic device with graphical user interface
USD933672S1 (en) 2018-06-03 2021-10-19 Apple Inc. Display screen or portion thereof with animated graphical user interface
US20190392063A1 (en) * 2018-06-25 2019-12-26 Microsoft Technology Licensing, Llc Reducing data loss in remote databases
US10839143B2 (en) * 2018-06-29 2020-11-17 Dropbox, Inc. Referential gestures within content items
USD951243S1 (en) * 2018-08-15 2022-05-10 Asustek Computer Inc. Electronic device with display screen with animated graphical user interface and keyboard
USD947206S1 (en) * 2018-08-15 2022-03-29 Asustek Computer Inc. Electronic device with animated graphical user interface
USD921658S1 (en) * 2018-08-22 2021-06-08 United Services Automobile Association (Usaa) Display panel portion with an animated graphical user interface
USD928187S1 (en) * 2018-08-23 2021-08-17 United Services Automobile Association (Usaa) Display panel portion with an animated graphical user interface
USD891443S1 (en) * 2018-10-31 2020-07-28 Nutanix, Inc. Display panel or portion thereof with a transitional graphical user interface
CN116308992A (zh) * 2018-10-31 2023-06-23 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
USD921018S1 (en) * 2018-11-21 2021-06-01 General Electric Company Display screen with animated graphical user interface
US10564719B1 (en) 2018-12-03 2020-02-18 Microsoft Technology Licensing, Llc Augmenting the functionality of user input devices using a digital glove
US11199901B2 (en) 2018-12-03 2021-12-14 Microsoft Technology Licensing, Llc Augmenting the functionality of non-digital objects using a digital glove
US11294463B2 (en) 2018-12-03 2022-04-05 Microsoft Technology Licensing, Llc Augmenting the functionality of user input devices using a digital glove
US11314409B2 (en) * 2018-12-03 2022-04-26 Microsoft Technology Licensing, Llc Modeless augmentations to a virtual trackpad on a multiple screen computing device
US11137905B2 (en) 2018-12-03 2021-10-05 Microsoft Technology Licensing, Llc Modeless augmentations to a virtual trackpad on a multiple screen computing device
EP3668087A1 (en) * 2018-12-14 2020-06-17 Carrier Corporation Video monitoring system workspace
CN111629319B (zh) * 2019-02-28 2022-05-31 中国移动通信有限公司研究院 一种位置预测方法及设备
US11017746B2 (en) * 2019-03-29 2021-05-25 Lenovo (Singapore) Pte. Ltd. Auxiliary display scaling factor
CN110213437B (zh) * 2019-05-27 2020-10-13 维沃移动通信有限公司 一种编辑方法及移动终端
USD913324S1 (en) 2019-05-29 2021-03-16 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD931298S1 (en) 2019-05-30 2021-09-21 Apple Inc. Display screen or portion thereof with graphical user interface
USD913315S1 (en) * 2019-05-31 2021-03-16 Apple Inc. Electronic device with graphical user interface
CN112015308B (zh) * 2019-05-31 2022-07-15 北京小米移动软件有限公司 内容展示方法及装置
DE102019118965A1 (de) * 2019-07-12 2021-01-14 Workaround Gmbh Nebengerät für ein Sensor- und/oder Informationssystem sowie Sensor- und/oder Informationssystem
WO2021015752A1 (en) 2019-07-24 2021-01-28 Hewlett-Packard Development Company, L.P. Keyboard with input modes
CN110570184B (zh) * 2019-08-26 2022-08-19 北京知嘛文化传播有限公司 向用户提供产品的系统、方法、装置以及存储介质
CN110727380A (zh) * 2019-08-28 2020-01-24 华为技术有限公司 一种消息提醒方法及电子设备
CN115297199A (zh) 2019-08-30 2022-11-04 华为技术有限公司 一种具有折叠屏的设备的触控方法与折叠屏设备
US10852905B1 (en) * 2019-09-09 2020-12-01 Apple Inc. Techniques for managing display usage
CN110913067A (zh) * 2019-11-06 2020-03-24 维沃移动通信有限公司 一种信息发送方法及电子设备
USD973676S1 (en) * 2019-11-27 2022-12-27 GE Precision Healthcare LLC Display screen with graphical user interface
CN111324249B (zh) * 2020-01-21 2020-12-01 北京达佳互联信息技术有限公司 多媒体素材生成方法、装置及存储介质
US11413531B2 (en) 2020-03-03 2022-08-16 Sony Interactive Entertainment Inc. Game console application with action card strand
USD927531S1 (en) * 2020-03-20 2021-08-10 Caterpillar Inc. Display screen with icon
WO2021192187A1 (ja) * 2020-03-26 2021-09-30 株式会社日立建機ティエラ 建設機械
USD938483S1 (en) * 2020-04-10 2021-12-14 Slack Technologies, Llc Display screen or portion thereof with graphical user interface
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
CN115552375A (zh) 2020-05-11 2022-12-30 苹果公司 用于管理用户界面共享的用户界面
GB2597055A (en) * 2020-07-02 2022-01-19 Coveva Ltd Dynamic context-specific input device and method
US11223873B1 (en) * 2020-07-10 2022-01-11 Verizon Patent And Licensing Inc. Methods and systems for remote streaming of a user-customized user interface
USD946596S1 (en) 2020-09-30 2022-03-22 Masimo Corporation Display screen or portion thereof with graphical user interface
USD946598S1 (en) 2020-09-30 2022-03-22 Masimo Corporation Display screen or portion thereof with graphical user interface
USD950599S1 (en) * 2020-09-30 2022-05-03 Masimo Corporation Display screen or portion thereof with graphical user interface
USD946597S1 (en) 2020-09-30 2022-03-22 Masimo Corporation Display screen or portion thereof with graphical user interface
WO2022086489A1 (en) * 2020-10-19 2022-04-28 Hewlett-Packard Development Company, L.P. Electronic devices with touch sensitive surfaces and user input devices
TWD216941S (zh) * 2020-11-13 2022-02-01 大陸商北京安博盛贏教育科技有限責任公司 顯示螢幕之具變化外觀之圖形化使用者介面
TWD216940S (zh) * 2020-11-13 2022-02-01 大陸商北京安博盛贏教育科技有限責任公司 顯示螢幕之具變化外觀之圖形化使用者介面
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
CN114655146B (zh) * 2021-03-26 2024-03-26 北京新能源汽车股份有限公司 一种车辆运输模式控制方法、装置及设备
USD954105S1 (en) * 2021-05-05 2022-06-07 Doom Solutions, LLC Display screen or portion thereof with a set of icons
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
US20220391456A1 (en) * 2021-06-06 2022-12-08 Apple Inc. Devices, Methods, and Graphical User Interfaces for Interacting with a Web-Browser
USD1025092S1 (en) * 2021-08-12 2024-04-30 Lg Display Co., Ltd. Display panel with graphical user interface
US20230121241A1 (en) * 2021-10-20 2023-04-20 Dell Products L.P. System and method of utilizing a keyboard with a display
US20230251766A1 (en) * 2022-02-04 2023-08-10 Dell Products, L.P. Application management and navigation in a web-based environment
CN114546231A (zh) * 2022-02-24 2022-05-27 特赞（上海）信息科技有限公司 基于浏览器插件的图像数据收集方法、装置及存储介质
CN115185910B (zh) * 2022-06-27 2023-10-13 无锡蜜蜂数智科技有限公司 一种智能标签管理系统及装置
US11893960B1 (en) * 2022-08-31 2024-02-06 Dell Products L.P. Information handling system collaborative touchpad display brightness management
US11899923B1 (en) 2022-08-31 2024-02-13 Dell Products L.P. Information handling system collaborative touchpad cursor over control icons
US11977733B2 (en) 2022-08-31 2024-05-07 Dell Products L.P. Information handling system collaborative touchpad dynamic scaling
US11983399B2 (en) 2022-08-31 2024-05-14 Dell Products L.P. Information handling system collaborative touchpad gesture activation and management
US11842043B1 (en) 2022-08-31 2023-12-12 Dell Products L.P. Information handling system collaborative touchpad and multizone touch rejection
WO2024064242A1 (en) * 2022-09-20 2024-03-28 Roberto Zayas Real-time equity monitoring system, process and interface
JP7432777B1 (ja) 2023-02-09 2024-02-16 レノボ・シンガポール・プライベート・リミテッド 情報処理システム、及び制御方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090011323A (ko) * 2007-07-25 2009-02-02 엘지전자 주식회사 휴대용 컴퓨터의 보조 입출력 장치 및 이를 이용한애플리케이션의 실행 방법
US20140068456A1 (en) * 2012-09-06 2014-03-06 Google Inc. Customized login interface
KR20150050732A (ko) * 2013-10-31 2015-05-11 삼성전자주식회사 생체 정보를 이용한 인증 방법 및 이를 지원하는 휴대형 전자장치
KR20150140302A (ko) * 2013-03-29 2015-12-15 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 잠겨진 디바이스에서 사용자들을 위한 동작을 수행하기 위한 시스템 및 방법

Family Cites Families (107)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3956745A (en) 1971-12-16 1976-05-11 The Marconi Company Limited Programmable keyboard arrangements
US6396483B1 (en) 1996-06-28 2002-05-28 Jeffrey H. Hiller Keyboard incorporating multi-function flat-panel input device and/or display
JPH10124217A (ja) 1996-10-16 1998-05-15 Hitachi Electron Service Co Ltd 入力機能を有する補助出力表示装置
US6618806B1 (en) 1998-04-01 2003-09-09 Saflink Corporation System and method for authenticating users in a computer network
US6111527A (en) 1998-06-18 2000-08-29 Susel; Irving Expandable keyboard
JP4672108B2 (ja) 2000-06-01 2011-04-20 シャープ株式会社 情報処理装置およびその制御方法
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
JP3940276B2 (ja) 2001-07-12 2007-07-04 三菱電機株式会社 施設管理システム
JP3892760B2 (ja) 2002-05-31 2007-03-14 株式会社東芝 情報処理装置
US7221330B2 (en) 2002-12-09 2007-05-22 Nokia Corporation Folding terminal with slider to fix terminal in a flat unfolded configuration
US7884804B2 (en) * 2003-04-30 2011-02-08 Microsoft Corporation Keyboard with input-sensitive display device
US20040239615A1 (en) 2003-05-27 2004-12-02 International Business Machines Corporation System and method for providing a computer user with alerts using a lighted mouse pad
US7805678B1 (en) 2004-04-16 2010-09-28 Apple Inc. Editing within single timeline
US7703036B2 (en) * 2004-08-16 2010-04-20 Microsoft Corporation User interface for displaying selectable software functionality controls that are relevant to a selected object
US8169410B2 (en) * 2004-10-20 2012-05-01 Nintendo Co., Ltd. Gesture inputs for a portable display device
US8207816B2 (en) * 2005-07-18 2012-06-26 Law Enforcement Intelligent Devices, Llc Biometric access control system
JP2007289457A (ja) 2006-04-26 2007-11-08 Matsushita Electric Ind Co Ltd 指紋認証装置および指紋認証方法
CN101252607A (zh) 2007-02-25 2008-08-27 北京三星通信技术研究有限公司 带有扩展显示屏的滑盖式手机
KR101066736B1 (ko) * 2007-06-12 2011-09-21 엘지전자 주식회사 휴대용 단말기
US8078984B2 (en) 2007-06-19 2011-12-13 Microsoft Corporation Virtual keyboard text replication
WO2009049331A2 (en) * 2007-10-08 2009-04-16 Van Der Westhuizen Willem Mork User interface
US8631358B2 (en) * 2007-10-10 2014-01-14 Apple Inc. Variable device graphical user interface
JP2009169735A (ja) 2008-01-17 2009-07-30 Sharp Corp 情報処理表示装置
US8776198B2 (en) * 2008-02-01 2014-07-08 Oracle International Corporation Techniques for non-unique identity establishment
US9098647B2 (en) 2008-03-10 2015-08-04 Apple Inc. Dynamic viewing of a three dimensional space
JP5567783B2 (ja) * 2008-03-27 2014-08-06 オリンパスイメージング株式会社 画像表示装置
TWI360775B (en) 2008-04-22 2012-03-21 Htc Corp Method and apparatus for operating user interface
US9740293B2 (en) * 2009-04-02 2017-08-22 Oblong Industries, Inc. Operating environment with gestural control and multiple client devices, displays, and users
JP4171770B1 (ja) * 2008-04-24 2008-10-29 任天堂株式会社 オブジェクト表示順変更プログラム及び装置
CN103135933B (zh) 2008-04-29 2016-05-11 宏达国际电子股份有限公司 用户界面的操作方法及装置
JP2011018085A (ja) * 2008-06-19 2011-01-27 Panasonic Corp 情報処理装置
JP2010009534A (ja) * 2008-06-30 2010-01-14 Fujitsu Ltd 電子装置及び表示方法
CN101382842A (zh) 2008-08-22 2009-03-11 合肥工业大学 单行按键超小型键盘及其复用键值的切换方法
JP2010066918A (ja) 2008-09-09 2010-03-25 Nec Personal Products Co Ltd 情報処理装置および表示制御方法
US20100088653A1 (en) * 2008-10-07 2010-04-08 Research In Motion Limited Portable electronic device and method of controlling same
JP5526397B2 (ja) 2008-10-28 2014-06-18 シャープ株式会社 コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラム
JP5278948B2 (ja) 2008-12-01 2013-09-04 シャープ株式会社 オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム
CN101441525B (zh) 2008-12-13 2010-06-02 旭丽电子(广州)有限公司 电脑键盘
US20100265182A1 (en) 2009-04-20 2010-10-21 Microsoft Corporation Context-based state change for an adaptive input device
CN101876879B (zh) 2009-04-29 2012-09-19 深圳富泰宏精密工业有限公司 双轴式滑动界面应用系统及方法
US8417297B2 (en) * 2009-05-22 2013-04-09 Lg Electronics Inc. Mobile terminal and method of providing graphic user interface using the same
US20100302245A1 (en) 2009-05-30 2010-12-02 Best Charles J L Providing interactive light controls in a three-dimensional compositing application
US20100332981A1 (en) 2009-06-30 2010-12-30 Daniel Lipton Providing Media Settings Discovery in a Media Processing Application
CN101727287B (zh) * 2009-12-29 2012-11-14 宇龙计算机通信科技(深圳)有限公司 一种定制信息的提示方法、系统及移动终端
US20110183654A1 (en) * 2010-01-25 2011-07-28 Brian Lanier Concurrent Use of Multiple User Interface Devices
CA2881448C (en) 2010-01-26 2017-09-05 Touchtunes Music Corporation Digital jukebox device with improved user interfaces, and associated methods
US9513801B2 (en) 2010-04-07 2016-12-06 Apple Inc. Accessing electronic notifications and settings icons with gestures
JP2012003508A (ja) 2010-06-16 2012-01-05 Toshiba Corp 情報処理装置、方法及びプログラム
US8248373B2 (en) 2010-06-18 2012-08-21 Microsoft Corporation Contextual control of dynamic input device
JP5023193B2 (ja) 2010-06-28 2012-09-12 株式会社東芝 情報処理装置
US8875025B2 (en) 2010-07-15 2014-10-28 Apple Inc. Media-editing application with media clips grouping capabilities
US9323438B2 (en) 2010-07-15 2016-04-26 Apple Inc. Media-editing application with live dragging and live editing capabilities
US20120068933A1 (en) 2010-09-17 2012-03-22 Microsoft Corporation Interactive keyboard with multiple different key arrangements
US9405444B2 (en) * 2010-10-01 2016-08-02 Z124 User interface with independent drawer control
EP2469384A1 (en) * 2010-12-23 2012-06-27 Research In Motion Limited Portable electronic device and method of controlling same
CN102096546A (zh) * 2010-12-29 2011-06-15 华为终端有限公司 一种操作系统的解锁方法及装置
US9369635B1 (en) 2011-01-07 2016-06-14 Apptopus, Inc. Director/camera communication system and method for wireless multi-camera video production
CN103593009A (zh) * 2011-02-10 2014-02-19 三星电子株式会社 包含触摸屏显示器的便携式设备以及控制它的方法
US9997196B2 (en) 2011-02-16 2018-06-12 Apple Inc. Retiming media presentations
WO2012125990A2 (en) 2011-03-17 2012-09-20 Laubach Kevin Input device user interface enhancements
EP2500807A1 (en) 2011-03-18 2012-09-19 Research In Motion Limited Portable electronic device including touch-sensitive display and method of entering text via virtual keyboard
US8627096B2 (en) * 2011-07-14 2014-01-07 Sensible Vision, Inc. System and method for providing secure access to an electronic device using both a screen gesture and facial biometrics
US8922476B2 (en) * 2011-08-31 2014-12-30 Lenovo (Singapore) Pte. Ltd. Information handling devices with touch-based reflective display
US9645733B2 (en) * 2011-12-06 2017-05-09 Google Inc. Mechanism for switching between document viewing windows
US9400893B2 (en) * 2011-12-15 2016-07-26 Facebook, Inc. Multi-user login for shared mobile devices
KR101922283B1 (ko) * 2011-12-28 2019-02-13 노키아 테크놀로지스 오와이 애플리케이션의 오픈 인스턴스의 제공
US9917987B2 (en) 2012-02-06 2018-03-13 Apple Inc. Media editing with overlaid color adjustment tools
US9131192B2 (en) 2012-03-06 2015-09-08 Apple Inc. Unified slider control for modifying multiple image properties
CN103324423B (zh) * 2012-03-21 2018-11-13 北京三星通信技术研究有限公司 一种终端及其用户界面显示方法
EP2660692A1 (en) 2012-04-30 2013-11-06 BlackBerry Limited Configurable touchscreen keyboard
CN103425914A (zh) * 2012-05-17 2013-12-04 宇龙计算机通信科技(深圳)有限公司 应用程序的登录方法及通信终端
US20130322705A1 (en) * 2012-05-30 2013-12-05 Google Inc. Facial and fingerprint authentication
KR101909030B1 (ko) * 2012-06-08 2018-10-17 엘지전자 주식회사 비디오 편집 방법 및 이를 위한 디지털 디바이스
WO2014037945A1 (en) * 2012-09-04 2014-03-13 N-Trig Ltd. Input device for a computing system
US9696879B2 (en) * 2012-09-07 2017-07-04 Google Inc. Tab scrubbing using navigation gestures
JP2013037704A (ja) 2012-09-11 2013-02-21 Fuji Xerox Co Ltd 利用制限管理装置、方法、プログラム
KR101453031B1 (ko) * 2012-09-17 2014-10-23 크루셜텍 (주) 지문을 이용한 로그인 방법, 사용자 단말기 및 기록 매체
TW201413564A (zh) 2012-09-20 2014-04-01 Hon Hai Prec Ind Co Ltd 桌面切換系統及方法
US20140095632A1 (en) 2012-09-28 2014-04-03 Interactive Memories, Inc. Methods for Coordinating and Presenting Collaborative Communication between Collaborators Working on an Image-Based Project Through an Electronic Interface
KR102061881B1 (ko) * 2012-10-10 2020-01-06 삼성전자주식회사 멀티 디스플레이 장치 및 그 디스플레이 제어 방법
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US9547375B2 (en) * 2012-10-10 2017-01-17 Microsoft Technology Licensing, Llc Split virtual keyboard on a mobile computing device
US20140157209A1 (en) 2012-12-03 2014-06-05 Google Inc. System and method for detecting gestures
CN104969527A (zh) 2012-12-07 2015-10-07 优特设备有限公司 向设备驱动器发布通知数据
EP2742869A1 (en) 2012-12-12 2014-06-18 Samsung Medison Co., Ltd. Ultrasound apparatus and method of inputting information into the same
CN105377612B (zh) 2013-01-04 2019-03-08 约翰逊控制技术公司 基于上下文的车辆用户界面重配置
CN103778388B (zh) * 2013-01-05 2016-09-14 天津七所精密机电技术有限公司 一种安全增强计算机系统
US9349206B2 (en) 2013-03-08 2016-05-24 Apple Inc. Editing animated objects in video
KR101749235B1 (ko) * 2013-03-15 2017-07-03 애플 인크. 동시에 열린 소프트웨어 애플리케이션들을 관리하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
US9405379B2 (en) * 2013-06-13 2016-08-02 Microsoft Technology Licensing, Llc Classification of user input
KR102147686B1 (ko) 2013-06-21 2020-08-26 삼성전자주식회사 오브젝트 실행 장치 및 방법
KR101801554B1 (ko) * 2013-07-11 2017-11-27 삼성전자주식회사 컨텐츠를 표시하는 사용자 단말 장치 및 그 방법
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
CN104715178B (zh) * 2013-12-11 2020-04-03 深圳富泰宏精密工业有限公司 电子装置的解锁系统及方法
KR20150069420A (ko) * 2013-12-13 2015-06-23 허윤석 터치스크린이 장착된 키보드를 이용한 컴퓨터장치의 제어방법
US20150193011A1 (en) * 2014-01-08 2015-07-09 Microsoft Corporation Determining Input Associated With One-to-Many Key Mappings
EP3872659A1 (en) 2014-01-23 2021-09-01 Apple Inc. Biometric authentication for online purchasing
KR20150097137A (ko) * 2014-02-18 2015-08-26 이찬석 지문 인식 기반 사용자 인증 방법
CN104008350B (zh) * 2014-05-15 2017-10-24 惠州Tcl移动通信有限公司 通过不同解锁方式进入不同用户模式的移动终端及方法
US10055567B2 (en) * 2014-05-30 2018-08-21 Apple Inc. Proximity unlock and lock operations for electronic devices
US11237710B2 (en) 2014-06-30 2022-02-01 Lenovo (Singapore) Pte. Ltd. Multi-function slide control
KR102358749B1 (ko) * 2014-12-26 2022-02-07 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
TWI628569B (zh) * 2015-09-30 2018-07-01 蘋果公司 具有適應性輸入列之鍵盤
CN105260125B (zh) * 2015-11-20 2018-09-28 上海斐讯数据通信技术有限公司 一种具有触摸屏的电子设备及其解锁方法
CN105574378A (zh) * 2015-12-09 2016-05-11 小米科技有限责任公司 终端控制方法及终端控制装置
US20170315704A1 (en) 2016-05-02 2017-11-02 Microsoft Technology Licensing, Llc Application user interfaces with scrollable color palettes
AU2017100879B4 (en) 2016-07-29 2017-09-28 Apple Inc. Systems, devices, and methods for dynamically providing user interface controls at touch-sensitive secondary display

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090011323A (ko) * 2007-07-25 2009-02-02 엘지전자 주식회사 휴대용 컴퓨터의 보조 입출력 장치 및 이를 이용한애플리케이션의 실행 방법
US20140068456A1 (en) * 2012-09-06 2014-03-06 Google Inc. Customized login interface
KR20150140302A (ko) * 2013-03-29 2015-12-15 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 잠겨진 디바이스에서 사용자들을 위한 동작을 수행하기 위한 시스템 및 방법
KR20150050732A (ko) * 2013-10-31 2015-05-11 삼성전자주식회사 생체 정보를 이용한 인증 방법 및 이를 지원하는 휴대형 전자장치

Also Published As

Publication number Publication date
CN107665047B (zh) 2021-02-23
US20190220135A1 (en) 2019-07-18
AU2017100879B4 (en) 2017-09-28
WO2018022313A1 (en) 2018-02-01
US11429145B2 (en) 2022-08-30
US10303289B2 (en) 2019-05-28
AU2019219760A1 (en) 2019-09-05
AU2017302420B2 (en) 2019-08-01
KR102166223B1 (ko) 2020-10-15
EP3699746A1 (en) 2020-08-26
JP2022172079A (ja) 2022-11-15
EP3465408A1 (en) 2019-04-10
CN113157109A (zh) 2021-07-23
JP2024020248A (ja) 2024-02-14
KR102065900B1 (ko) 2020-01-13
DK201770561A8 (en) 2018-02-26
KR102490421B1 (ko) 2023-01-19
AU2017100879A4 (en) 2017-07-27
AU2017302420A1 (en) 2019-02-07
DK201770561A1 (en) 2018-02-19
KR20190026028A (ko) 2019-03-12
CN113157111A (zh) 2021-07-23
KR20200006172A (ko) 2020-01-17
JP7174734B2 (ja) 2022-11-17
AU2019219760B2 (en) 2021-08-05
AU2021254570B2 (en) 2023-01-12
US20190220134A1 (en) 2019-07-18
JP2019527891A (ja) 2019-10-03
US10642416B2 (en) 2020-05-05
KR20200058587A (ko) 2020-05-27
JP6700471B2 (ja) 2020-05-27
CN113157108A (zh) 2021-07-23
EP3465408B1 (en) 2020-08-19
AU2023201500A1 (en) 2023-04-13
CN113157110A (zh) 2021-07-23
US20180032203A1 (en) 2018-02-01
KR102345993B1 (ko) 2022-01-03
US10719167B2 (en) 2020-07-21
AU2021254570A1 (en) 2021-11-18
JP7377319B2 (ja) 2023-11-09
KR102115714B1 (ko) 2020-05-26
DK179705B1 (da) 2019-04-03
CN107665047A (zh) 2018-02-06
JP2020149697A (ja) 2020-09-17
KR20200118911A (ko) 2020-10-16
AU2023251543A1 (en) 2023-11-16
AU2023201500B2 (en) 2023-11-09
KR20230014873A (ko) 2023-01-30
US20200257403A1 (en) 2020-08-13

Similar Documents

Publication Publication Date Title
KR102345993B1 (ko) 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
US20240143024A1 (en) Systems and Methods for Prompting a Log-In to an Electronic Device Based on Biometric Information Received from a User

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant