KR101896996B1 - 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스 - Google Patents

터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR101896996B1
KR101896996B1 KR1020177011291A KR20177011291A KR101896996B1 KR 101896996 B1 KR101896996 B1 KR 101896996B1 KR 1020177011291 A KR1020177011291 A KR 1020177011291A KR 20177011291 A KR20177011291 A KR 20177011291A KR 101896996 B1 KR101896996 B1 KR 101896996B1
Authority
KR
South Korea
Prior art keywords
content
touch screen
finger
detecting
display area
Prior art date
Application number
KR1020177011291A
Other languages
English (en)
Other versions
KR20170048613A (ko
Inventor
바스 오딩
케네쓰 엘. 코씨엔다
브래드포드 알렌 무어
프레디 알렌 안주레스
마르셀 반 오스
리차드 윌리암슨
스캇 포스탈
스테펜 오. 리메이
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20170048613A publication Critical patent/KR20170048613A/ko
Application granted granted Critical
Publication of KR101896996B1 publication Critical patent/KR101896996B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • H04M1/72552
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04805Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72445User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting Internet browser applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/70Details of telephonic subscriber devices methods for entering alphabetical characters, e.g. multi-tap or dictionary disambiguation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Document Processing Apparatus (AREA)
  • Telephone Function (AREA)
  • Facsimiles In General (AREA)

Abstract

일부 실시예에서, 장치는 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고 손가락 제스처에 의한 입력을 검출한다. 손가락 제스처에 응답하여, 장치는 콘텐츠를 선택하고, 선택된 콘텐츠를 시각적으로 구분하며, 및/또는 검출된 입력에 기초하여 선택된 콘텐츠를 업데이트한다. 일부 실시예에서, 장치는 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역을 디스플레이하고, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하며, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 선택된 콘텐츠에 대해 대응하는 동작을 수행한다. 예시적인 동작은 콘텐츠의 잘라내기, 복사, 및 붙여넣기를 포함한다.

Description

터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스{METHODS AND GRAPHICAL USER INTERFACES FOR EDITING ON A MULTIFUNCTION DEVICE WITH A TOUCH SCREEN DISPLAY}
개시된 실시예는 일반적으로 터치 스크린 디스플레이를 갖는 다기능 장치에 관한 것이며, 보다 상세하게는 이러한 장치 상에서 편집(예를 들어, 사용자-선택 콘텐츠의 잘라내기, 복사 또는 붙여넣기)을 수행하는 것에 관한 것이다.
전자 장치가 보다 콤팩트해지고 주어진 장치에 의해 수행되는 기능의 수가 증가함에 따라, 사용자가 다기능 장치와 쉽게 상호작용할 수 있게 해주는 사용자 인터페이스를 설계하는 것이 중요한 과제가 되었다. 이 과제는 데스크톱 또는 랩톱 컴퓨터보다 훨씬 더 작은 화면을 가지는 핸드헬드 휴대용 장치에 특히 중요하다. 이러한 상황이 유감스러운 이유는 사용자 인터페이스라는 수단을 통해 사용자가 콘텐츠 뿐만 아니라, 장치의 특징, 도구 및 기능에 액세스하려는 사용자 시도를 비롯한 사용자 동작 또는 거동에 대한 응답도 수신하기 때문이다. 일부 휴대용 통신 장치(예를 들어, 때때로 휴대폰, 셀 폰, 셀룰러 전화 등이라고 하는 이동 전화)는 더 많은 푸시 버튼을 추가하거나, 푸시 버튼의 밀도가 증가되거나, 푸시 버튼의 기능이 중복되거나, 사용자가 데이터에 액세스하고 데이터를 저장 및 조작할 수 있게 해주는 복잡한 메뉴 시스템을 사용하는 것에 의존해 왔다. 그 결과, 이러한 종래의 사용자 인터페이스에서는 종종 사용자가 복잡한 키 시퀀스(key sequence) 및 메뉴 계층구조를 기억하고 있어야만 한다.
실제 푸시 버튼을 포함하고 있는 사용자 인터페이스와 같은 많은 종래의 사용자 인터페이스는 또한 유연성이 없다. 이것이 유감스러운 이유는 유연성이 없는 것으로 인해 사용자 인터페이스가 휴대용 장치 상에서 실행되는 응용 프로그램에 의해 또는 사용자에 의해 구성 및/또는 적응될 수 없기 때문이다. 다수의 키 시퀀스 및 메뉴 계층구조를 기억하기 위한 시간 소비 요구사항 및 원하는 푸시 버튼을 활성화시키는 데 있어서의 어려움과 결합될 때, 이러한 비유연성은 대부분의 사용자들을 좌절시킬 것이다.
터치 스크린 디스플레이를 갖는 다기능 장치 상의 종래의 사용자 인터페이스는 텍스트 및 그래픽을 편집하는 간단하고 직관적인 방식을 제공하지 않는다. 잘라내기, 복사 및 붙여넣기와 같은 편집 기능(존재하는 경우)은 종종 찾아서 사용하기 어려우며, 그로써 사용자에 대한 상당한 인지 부담을 야기한다. 그에 부가하여, 종래의 편집 방법은 필요 이상으로 오래 걸리며, 그로써 에너지를 낭비한다. 이 후자의 문제는 배터리-작동 장치에서 특히 중요하다.
그에 따라, 보다 빠르고 보다 효율적인 콘텐츠 편집 방법 및 인터페이스를 갖는 터치 스크린 디스플레이를 가지는 다기능 장치가 필요하다. 이러한 방법 및 인터페이스는 사용자에 대한 인지 부담을 감소시키며 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 다기능 장치의 경우, 이러한 방법 및 인터페이스는 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스를 제공하는 것을 그 일 목적으로 한다.
<발명의 개요>
터치 스크린 디스플레이를 갖는 다기능 장치에 대한 사용자 인터페이스와 연관된 상기 결점 및 기타 문제점이 개시된 장치에 의해 감소되거나 제거된다. 일부 실시예에서, 장치는 터치 스크린 디스플레이를 갖는 데스크톱 컴퓨터이다. 일부 실시예에서, 장치는 휴대용(예를 들어, 노트북 컴퓨터 또는 핸드헬드 장치)이다. 일부 실시예에서, 장치는 터치 감응 디스플레이("터치 스크린" 또는 "터치 스크린 디스플레이"라고도 함)를 가진다. 일부 실시예에서, 장치는 그래픽 사용자 인터페이스(GUI), 하나 이상의 프로세서, 메모리, 및 메모리에 저장되어 있는, 다수의 기능을 수행하는 하나 이상의 모듈, 프로그램, 또는 명령어 집합을 가진다. 일부 실시예에서, 사용자는 주로 터치 스크린 디스플레이 상에서의 손가락 접촉 및 제스처를 통해 GUI와 상호작용한다. 일부 실시예에서, 기능은 이미지 편집, 그리기, 프레젠테이션, 워드 프로세싱, 웹 사이트 제작, 디스크 저작, 스프레드시트 작성, 게임 플레이, 전화 통화, 화상 회의, 이메일 보내기, 인스턴트 메시징, 운동 보조, 디지털 사진 촬영, 디지털 비디오 녹화, 웹 브라우징, 디지털 음악 재생, 및/또는 디지털 비디오 재생을 포함할 수 있다. 이들 기능을 수행하는 실행가능 명령어가 하나 이상의 프로세서에 의해 실행되도록 구성된 컴퓨터 판독가능 저장 매체 또는 기타 컴퓨터 프로그램 제품에 포함될 수 있다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 제1 배율로 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하는 단계, 편집가능 콘텐츠 상에서 손가락 제스처를 검출하는 단계, 편집가능 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 편집가능 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 편집가능 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 단계, 편집가능 콘텐츠의 확장된 부분 및 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 편집가능 콘텐츠의 확장된 부분을 변경하는 단계, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 단계, 삽입 마커가 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 단계, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기 및 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하는 단계, 제1 배율의 편집가능 콘텐츠 내의 현재 위치에 삽입 마커를 디스플레이하는 단계 - 현재 위치는 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 대응함 -, 및 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 단계 - 제1 명령 디스플레이 영역은 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 제1 배율의 편집가능 콘텐츠, 콘텐츠 확대기, 삽입 마커, 및 명령 디스플레이 영역을 포함하고, 편집가능 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 편집가능 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 편집가능 콘텐츠의 일부분이 제1 배율보다 큰 제2 배율로 확장되고, 콘텐츠 확대기가 디스플레이되며, 콘텐츠 확대기는 편집가능 콘텐츠의 확장된 부분, 및 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하고, 콘텐츠 확대기가 움직이고 편집가능 콘텐츠의 확장된 부분이 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 검출된 움직임에 따라 변경되며, 삽입 마커가 손가락 접촉의 검출된 움직임에 따라 제1 위치로부터 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고, 삽입 마커가 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기 및 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것이 중단되며, 삽입 마커가 제1 배율의 편집가능 콘텐츠 내의 현재 위치에 디스플레이되고 - 현재 위치는 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 대응함 -, 명령 디스플레이 영역이 삽입 마커에 인접하여 디스플레이된다 - 명령 디스플레이 영역은 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 제1 배율로 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하는 명령어, 편집가능 콘텐츠 상에서 손가락 제스처를 검출하는 명령어, 편집가능 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 편집가능 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 편집가능 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 명령어, 편집가능 콘텐츠의 확장된 부분 및 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 명령어, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 편집가능 콘텐츠의 확장된 부분을 변경하는 명령어, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 명령어, 삽입 마커가 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 명령어, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기 및 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하는 명령어, 제1 배율의 편집가능 콘텐츠 내의 현재 위치에 삽입 마커를 디스플레이하는 명령어 - 현재 위치는 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 대응함 -, 및 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 명령어 - 제1 명령 디스플레이 영역은 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 제1 배율로 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하고, 편집가능 콘텐츠 상에서 손가락 제스처를 검출하며, 편집가능 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 편집가능 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 편집가능 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하고, 편집가능 콘텐츠의 확장된 부분 및 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하며, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 편집가능 콘텐츠의 확장된 부분을 변경하며, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고, 삽입 마커가 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하며, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기 및 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하고, 제1 배율의 편집가능 콘텐츠 내의 현재 위치에 삽입 마커를 디스플레이하며 - 현재 위치는 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 대응함 -, 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하게 하는 - 제1 명령 디스플레이 영역은 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 - 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 제1 배율로 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하는 수단, 편집가능 콘텐츠 상에서 손가락 제스처를 검출하는 수단, 편집가능 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 편집가능 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 편집가능 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 수단, 편집가능 콘텐츠의 확장된 부분 및 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 수단, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 편집가능 콘텐츠의 확장된 부분을 변경하는 수단, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 수단, 삽입 마커가 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 수단, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기 및 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하는 수단, 제1 배율의 편집가능 콘텐츠 내의 현재 위치에 삽입 마커를 디스플레이하는 수단 - 현재 위치는 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 대응함 -, 및 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 수단 - 제1 명령 디스플레이 영역은 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 제1 배율로 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하는 단계, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하는 단계, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 읽기 전용 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 읽기 전용 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 단계, 읽기 전용 콘텐츠의 확장된 부분 및 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 읽기 전용 콘텐츠의 확장된 부분을 변경하는 단계, 손가락 접촉의 검출된 움직임에 따라 위치 마커를 제1 위치로부터 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 단계, 위치 마커가 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 단계, 및 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 읽기 전용 콘텐츠의 확장된 부분, 및 위치 마커를 디스플레이하는 것을 중단하는 단계, 및 제1 배율의 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 단계 - 현재 위치는 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 대응하고, 제1 명령 디스플레이 영역은 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 - 를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 제1 배율의 읽기 전용 콘텐츠, 콘텐츠 확대기, 위치 마커, 및 명령 디스플레이 영역을 포함하고, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 읽기 전용 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 읽기 전용 콘텐츠의 일부분이 제1 배율보다 큰 제2 배율로 확장되고, 콘텐츠 확대기가 디스플레이되며, 콘텐츠 확대기가 읽기 전용 콘텐츠의 확장된 부분 및 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하고, 콘텐츠 확대기가 움직이고 읽기 전용 콘텐츠의 확장된 부분이 손가락 접촉의 검출된 움직임에 따라 변경되며, 위치 마커가 손가락 접촉의 검출된 움직임에 따라 제1 위치로부터 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고, 위치 마커가 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 읽기 전용 콘텐츠의 확장된 부분, 및 위치 마커를 디스플레이하는 것이 중단되고, 명령 디스플레이 영역이 제1 배율의 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 디스플레이되며, 현재 위치는 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 대응하고, 명령 디스플레이 영역은 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함한다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 제1 배율로 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하는 명령어, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하는 명령어, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 읽기 전용 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 읽기 전용 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 명령어, 읽기 전용 콘텐츠의 확장된 부분 및 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 명령어, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 읽기 전용 콘텐츠의 확장된 부분을 변경하는 명령어, 손가락 접촉의 검출된 움직임에 따라 위치 마커를 제1 위치로부터 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 명령어, 위치 마커가 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 명령어, 및 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 읽기 전용 콘텐츠의 확장된 부분, 및 위치 마커를 디스플레이하는 것을 중단하는 명령어, 및 제1 배율의 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 명령어 - 현재 위치는 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 대응하고, 제1 명령 디스플레이 영역은 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 - 를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 제1 배율로 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하고, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하며, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 읽기 전용 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 읽기 전용 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하고, 읽기 전용 콘텐츠의 확장된 부분 및 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하며, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 읽기 전용 콘텐츠의 확장된 부분을 변경하며, 손가락 접촉의 검출된 움직임에 따라 위치 마커를 제1 위치로부터 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고, 위치 마커가 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하며, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 읽기 전용 콘텐츠의 확장된 부분, 및 위치 마커를 디스플레이하는 것을 중단하고, 제1 배율의 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하게 하는 - 현재 위치는 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 대응하고, 제1 명령 디스플레이 영역은 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 - 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 제1 배율로 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하는 수단, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하는 수단, 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 읽기 전용 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 읽기 전용 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 수단, 읽기 전용 콘텐츠의 확장된 부분 및 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 수단, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 읽기 전용 콘텐츠의 확장된 부분을 변경하는 수단, 손가락 접촉의 검출된 움직임에 따라 위치 마커를 제1 위치로부터 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 수단, 위치 마커가 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 수단, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 읽기 전용 콘텐츠의 확장된 부분, 및 위치 마커를 디스플레이하는 것을 중단하는 수단, 및 제1 배율의 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 수단 - 현재 위치는 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치에 대응하고, 제1 명령 디스플레이 영역은 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 - 을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계, 콘텐츠 상에서 손가락 제스처를 검출하는 단계, 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 단계, 콘텐츠의 확장된 부분 및 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 콘텐츠의 확장된 부분을 변경하는 단계, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 단계, 삽입 마커가 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 단계, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 콘텐츠의 확장된 부분, 및 삽입 마커를 디스플레이하는 것을 중단하는 단계, 및 삽입 마커의 제2 위치와 연관된 콘텐츠를 선택하는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 제1 배율의 콘텐츠, 콘텐츠 확대기, 삽입 마커, 및 명령 디스플레이 영역을 포함하고, 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 콘텐츠의 일부분이 제1 배율보다 큰 제2 배율로 확장되고, 콘텐츠의 확장된 부분 및 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기가 디스플레이되며, 콘텐츠 확대기가 움직이고 콘텐츠의 확장된 부분이 손가락 접촉의 검출된 움직임에 따라 변경되며, 삽입 마커가 손가락 접촉의 검출된 움직임에 따라 제1 위치로부터 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고, 삽입 마커가 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 콘텐츠의 확장된 부분, 및 삽입 마커를 디스플레이하는 것이 중단되고, 삽입 마커의 제2 위치와 연관된 콘텐츠가 선택된다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어, 콘텐츠 상에서 손가락 제스처를 검출하는 명령어, 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 명령어, 콘텐츠의 확장된 부분 및 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 명령어, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 콘텐츠의 확장된 부분을 변경하는 명령어, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 명령어, 삽입 마커가 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 명령어, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 콘텐츠의 확장된 부분, 및 삽입 마커를 디스플레이하는 것을 중단하는 명령어, 및 삽입 마커의 제2 위치와 연관된 콘텐츠를 선택하는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고, 콘텐츠 상에서 손가락 제스처를 검출하며, 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하고, 콘텐츠의 확장된 부분 및 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하며, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 콘텐츠의 확장된 부분을 변경하며, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고, 삽입 마커가 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하며, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 콘텐츠의 확장된 부분, 및 삽입 마커를 디스플레이하는 것을 중단하고, 삽입 마커의 제2 위치와 연관된 콘텐츠를 선택하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단, 콘텐츠 상에서 손가락 제스처를 검출하는 수단, 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서 터치 스크린 디스플레이 상의 콘텐츠의 일부분을 제1 배율보다 큰 제2 배율로 확장하는 수단, 콘텐츠의 확장된 부분 및 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 수단, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단, 콘텐츠 확대기를 움직여 손가락 접촉의 검출된 움직임에 따라 콘텐츠의 확장된 부분을 변경하는 수단, 손가락 접촉의 검출된 움직임에 따라 삽입 마커를 제1 위치로부터 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 수단, 삽입 마커가 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐을 검출하는 수단, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 콘텐츠 확대기, 콘텐츠의 확장된 부분, 및 삽입 마커를 디스플레이하는 것을 중단하는 수단, 및 삽입 마커의 제2 위치와 연관된 콘텐츠를 선택하는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하는 단계, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여, 단어를 선택하는 단계, 및 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 콘텐츠, 콘텐츠 내의 단어, 시작점 객체, 및 끝점 객체를 포함하고, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여, 단어가 선택되고, 시작점 객체 및 끝점 객체가 단어의 각각의 끝부분에 디스플레이된다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하는 명령어, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여, 단어를 선택하는 명령어, 및 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하며, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여, 단어를 선택하고, 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하는 수단, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여, 단어를 선택하는 수단, 및 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계, 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하는 단계, 터치 스크린 디스플레이 상에서 하나 이상의 손가락에 의해 행해지는 제스처를 인식하는 단계 - 제스처는 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 소정의 제스처 중 하나의 제스처임 -, 및 제스처를 인식한 것에 응답하여 콘텐츠에 대해 동작을 수행하는 단계를 포함한다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어, 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하는 명령어, 터치 스크린 디스플레이 상에서 하나 이상의 손가락에 의해 행해지는 제스처를 인식하는 명령어 - 제스처는 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 소정의 제스처 중 하나의 제스처임 -, 및 제스처를 인식한 것에 응답하여 콘텐츠에 대해 동작을 수행하는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고, 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하며, 터치 스크린 디스플레이 상에서 하나 이상의 손가락에 의해 행해지는 제스처를 인식하고 - 제스처는 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 소정의 제스처 중 하나의 제스처임 -, 제스처를 인식한 것에 응답하여 콘텐츠에 대해 동작을 수행하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단, 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하는 수단, 터치 스크린 디스플레이 상에서 하나 이상의 손가락에 의해 행해지는 제스처를 인식하는 수단 - 제스처는 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 소정의 제스처 중 하나의 제스처임 -, 및 제스처를 인식한 것에 응답하여 콘텐츠에 대해 동작을 수행하는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계 - 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 단계, 터치 스크린 디스플레이 상에서 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하는 단계, 및 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 선택된 콘텐츠에 대해 대응하는 동작을 수행하는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분되는 선택된 콘텐츠를 포함하는 콘텐츠, 및 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역을 포함하고, 명령 디스플레이 영역이 터치 스크린 디스플레이 상에서 선택된 콘텐츠에 인접하여 디스플레이되고, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 대응하는 동작이 선택된 콘텐츠에 대해 수행된다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어 - 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 명령어, 터치 스크린 디스플레이 상에서 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 명령어 - 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하는 명령어, 및 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 선택된 콘텐츠에 대해 대응하는 동작을 수행하는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고 - 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하며, 터치 스크린 디스플레이 상에서 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하고 - 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하며, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 선택된 콘텐츠에 대해 대응하는 동작을 수행하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단 - 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 수단, 터치 스크린 디스플레이 상에서 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 수단 - 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -, 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하는 수단, 및 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 선택된 콘텐츠에 대해 대응하는 동작을 수행하는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하는 단계 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 단계, 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하는 단계 - 명령 디스플레이 영역 요소는 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 및 하나 이상의 소정의 우선순위 요소 - 이들의 전방에 명령 디스플레이 영역 요소가 디스플레이될 수 없음 - 를 디스플레이하는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 콘텐츠를 포함하는 사용자 인터페이스 요소를 포함하고, 콘텐츠는 선택된 콘텐츠, 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소, 및 하나 이상의 소정의 우선순위 요소 - 이들의 전방에 명령 디스플레이 영역 요소가 디스플레이될 수 없음 - 를 포함하며, 선택된 콘텐츠는 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분되고, 명령 디스플레이 영역 요소는 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작한다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하는 명령어 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 명령어, 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하는 명령어 - 명령 디스플레이 영역 요소가 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 및 하나 이상의 소정의 우선순위 요소 - 이들의 전방에 명령 디스플레이 영역 요소가 디스플레이될 수 없음 - 를 디스플레이하는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하고 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하며, 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하고 - 명령 디스플레이 영역 요소가 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 하나 이상의 소정의 우선순위 요소 - 이들의 전방에 명령 디스플레이 영역 요소가 디스플레이될 수 없음 - 를 디스플레이하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하는 수단 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 수단, 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하는 수단 - 명령 디스플레이 영역 요소가 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 및 하나 이상의 소정의 우선순위 요소 - 이들의 전방에 명령 디스플레이 영역 요소가 디스플레이될 수 없음 - 를 디스플레이하는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하는 단계, 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 단계 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계, 선택된 콘텐츠의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하는 단계, 및 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 제1 배율의 콘텐츠 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 및 콘텐츠 확대기를 포함하고, 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 제스처가 검출되고, 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기가 디스플레이되며, 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이하고, 선택된 콘텐츠의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분이 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임에 따라 업데이트되며, 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커가 움직인다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하는 명령어, 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 명령어 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어, 선택된 콘텐츠의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하는 명령어, 및 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하며, 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하고 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하며, 선택된 콘텐츠의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하고, 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단 - 콘텐츠는 선택된 콘텐츠를 포함함 -, 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하는 수단, 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 수단 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단, 선택된 콘텐츠의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하는 수단, 및 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 단계 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하는 단계, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하는 단계, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 단계, 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 단계, 선택된 제1 콘텐츠 상자 밖의 위치로의 손가락 접촉의 움직임을 검출하는 단계, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출하는 단계, 및 제1 콘텐츠 상자 밖에서의 손가락 접촉의 위치에 따라 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 구조화된 전자 문서의 적어도 일부분 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 - 을 포함하고, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자가 선택되고, 선택된 제1 콘텐츠 상자가 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분되며, 선택된 제1 콘텐츠 상자 상에서 손가락 접촉이 검출되고, 선택된 제1 콘텐츠 상자 밖의 위치로의 손가락 접촉의 움직임이 검출되며, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐이 검출되고, 제1 콘텐츠 상자 밖에서의 손가락 접촉의 위치에 따라 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자가 선택된다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 명령어 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하는 명령어, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하는 명령어, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 명령어, 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 명령어, 선택된 제1 콘텐츠 상자 밖의 위치로의 손가락 접촉의 움직임을 검출하는 명령어, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출하는 명령어, 및 제1 콘텐츠 상자 밖에서의 손가락 접촉의 위치에 따라 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하고 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하며, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하고, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하며, 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하고, 선택된 제1 콘텐츠 상자 밖의 위치로의 손가락 접촉의 움직임을 검출하며, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출하고, 제1 콘텐츠 상자 밖에서의 손가락 접촉의 위치에 따라 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 수단 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하는 수단, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하는 수단, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 수단, 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 수단, 선택된 제1 콘텐츠 상자 밖의 위치로의 손가락 접촉의 움직임을 검출하는 수단, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출하는 수단, 및 제1 콘텐츠 상자 밖에서의 손가락 접촉의 위치에 따라 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 제1 배율로 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 단계 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하는 단계, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하는 단계, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 단계, 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하는 단계, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 단계 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 선택된 제1 콘텐츠 상자 내에서 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계, 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하는 단계, 및 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 제1 배율의 구조화된 전자 문서의 적어도 일부분 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 및 콘텐츠 확대기를 포함하고, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자가 선택되고, 선택된 제1 콘텐츠 상자가 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분되며, 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉이 검출되고, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기가 디스플레이되며, 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이하고, 선택된 제1 콘텐츠 상자 내에서 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임이 검출되며, 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분이 손가락 접촉의 움직임에 따라 업데이트되고, 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커가 움직인다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 제1 배율로 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 명령어 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하는 명령어, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하는 명령어, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 명령어, 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하는 명령어, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 명령어 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 선택된 제1 콘텐츠 상자 내에서 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어, 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하는 명령어, 및 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이는 명령어를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 제1 배율로 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하고 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하며, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하고, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하며, 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하고, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하며 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 선택된 제1 콘텐츠 상자 내에서 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고, 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하며, 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 제1 배율로 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 수단 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하는 수단, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여, 제1 콘텐츠 상자를 선택하는 수단, 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 수단, 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하는 수단, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 수단 - 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -, 선택된 제1 콘텐츠 상자 내에서 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단, 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트하는 수단, 및 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직이는 수단을 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이를 갖는 다기능 장치에서 컴퓨터-구현 방법이 수행된다. 이 컴퓨터-구현 방법은 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 단계 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 구조화된 전자 문서가 하나 이상의 소정의 문서 복잡성 기준을 만족시키는지를 판정하는 단계, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하는 단계, 및 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하는 단계를 포함한다.
일부 실시예에 따르면, 터치 스크린 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스는 구조화된 전자 문서의 적어도 일부분 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 - 을 포함하고, 구조화된 전자 문서가 하나 이상의 소정의 문서 복잡성 기준을 만족시키는지가 판정되고, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자가 선택되며, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분이 선택된다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되어 있고 하나 이상의 프로세서에 의해 실행되도록 구성되어 있다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 명령어 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 구조화된 전자 문서가 하나 이상의 소정의 문서 복잡성 기준을 만족시키는지를 판정하는 명령어, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하는 명령어, 및 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하는 단계를 포함한다.
일부 실시예에 따르면, 컴퓨터 판독가능 저장 매체는, 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 장치로 하여금 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하고 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 구조화된 전자 문서가 하나 이상의 소정의 문서 복잡성 기준을 만족시키는지를 판정하며, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하고, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하게 하는 명령어를 저장하고 있다.
일부 실시예에 따르면, 다기능 장치는 터치 스크린 디스플레이, 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 수단 - 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 구조화된 전자 문서가 하나 이상의 소정의 문서 복잡성 기준을 만족시키는지를 판정하는 수단, 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하는 수단, 및 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하는 수단을 포함한다.
따라서, 터치 스크린 디스플레이를 갖는 다기능 장치는 콘텐츠를 편집하는 보다 빠르고 보다 효율적인 방법 및 인터페이스를 제공받으며, 그로써 이러한 장치에서 유효성, 효율 및 사용자 만족도를 증가시킨다.
터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스를 제공할 수 있다.
본 발명의 상기한 실시예는 물론 본 발명의 부가적인 실시예의 보다 나은 이해를 위해, 유사한 참조 번호가 도면 전체에 걸쳐 대응하는 부분을 가리키고 있는 첨부 도면과 관련하여 실시예에 대한 설명이 이하에 기술될 것이다.
도 1a 및 도 1b는 일부 실시예에 따른 터치 감응 디스플레이를 갖는 휴대용 다기능 장치를 나타낸 블록도.
도 2는 일부 실시예에 따른, 터치 스크린을 갖는 휴대용 다기능 장치를 나타낸 도면.
도 3은 일부 실시예에 따른 예시적인 다기능 장치의 블록도.
도 4a 및 도 4b는 일부 실시예에 따른, 휴대용 다기능 장치 상의 응용 프로그램의 메뉴에 대한 예시적인 사용자 인터페이스를 나타낸 도면.
도 5a 내지 도 5qq는 일부 실시예에 따른, 터치 스크린 디스플레이를 갖는 다기능 장치 상에서 콘텐츠를 선택하는 예시적인 사용자 인터페이스를 나타낸 도면.
도 6a 내지 도 6uu는 일부 실시예에 따른, 선택된 콘텐츠에 대한 명령 디스플레이 영역에 대한 예시적인 사용자 인터페이스를 나타낸 도면.
도 7a 내지 도 7e는 일부 실시예에 따른, 콘텐츠 확대기를 사용하여 선택된 콘텐츠의 각각의 끝부분을 선택하는 예시적인 사용자 인터페이스를 나타낸 도면.
도 8a 내지 도 8u는 일부 실시예에 따른, 구조화된 전자 문서에서 콘탠츠를 선택하는 예시적인 사용자 인터페이스를 나타낸 도면.
도 9a 내지 도 9d는 일부 실시예에 따른, 편집가능 콘텐츠를 선택하는 방법을 나타낸 흐름도.
도 10a 내지 도 10d는 일부 실시예에 따른, 읽기 전용 콘텐츠를 선택하는 방법을 나타낸 흐름도.
도 11a 내지 도 11c는 일부 실시예에 따른, 콘텐츠를 선택하는 방법을 나타낸 흐름도.
도 12는 일부 실시예에 따른, 한 손가락에 의한 두번-탭핑 제스처로 단어를 선택하는 방법을 나타낸 흐름도.
도 13a 내지 도 13g는 일부 실시예에 따른, 손가락 제스처로 콘텐츠를 선택하는 방법을 나타낸 흐름도.
도 14a 내지 도 14d는 일부 실시예에 따른, 선택된 콘텐츠에 대한 명령 디스플레이 영역을 사용하는 방법을 나타낸 흐름도.
도 15a 내지 도 15c는 일부 실시예에 따른, 명령 디스플레이 영역을 배치하는 방법을 나타낸 흐름도.
도 16a 내지 도 16e는 일부 실시예에 따른, 콘텐츠 확대기를 사용하여 선택된 콘텐츠의 각각의 끝부분을 업데이트하는 방법을 나타낸 흐름도.
도 17a 및 도 17b는 일부 실시예에 따른, 구조화된 전자 문서에서 콘텐츠를 선택하는 방법을 나타낸 흐름도.
도 18은 일부 실시예에 따른, 구조화된 전자 문서에서 콘텐츠를 선택하는 방법을 나타낸 흐름도.
도 19는 일부 실시예에 따른, 문서 복잡성 기준에 기초하여 구조화된 전자 문서에서 콘텐츠를 선택하는 방법을 나타낸 흐름도.
이제부터, 실시예에 대해 상세히 언급할 것이며, 이들 실시예의 일례가 첨부 도면에 예시되어 있다. 이하의 상세한 설명에서, 본 발명의 완전한 이해를 제공하기 위해 다수의 구체적인 상세가 기술되어 있다. 그렇지만, 본 발명이 이들 구체적인 상세 없이도 실시될 수 있다는 것이 당업자에게는 명백할 것이다. 다른 경우들에, 이 실시예의 측면을 불필요하게 모호하게 하지 않기 위해 공지의 방법, 절차, 구성요소, 회로 및 네트워크에 대해서는 상세히 설명하지 않고 있다.
또한, 제1, 제2, 기타와 같은 용어가 본 명세서에서 다양한 요소를 기술하는 데 사용될 수 있지만, 이들 용어에 의해 이들 요소가 제한되어서는 안된다는 것을 잘 알 것이다. 이들 용어는 단지 한 요소를 다른 요소와 구분하는 데만 사용된다. 예를 들어, 본 발명의 범위를 벗어나지 않고, 제1 접촉은 제2 접촉이라고 할 수 있고, 이와 유사하게 제2 접촉은 제1 접촉이라고 할 수 있다. 제1 접촉 및 제2 접촉 둘다는 접촉이지만, 이들이 동일한 접촉은 아니다.
본 명세서에서 발명을 설명하는 데 사용된 용어들은 단지 특정의 실시예들을 설명하기 위한 것이며 본 발명을 제한하기 위한 것이 아니다. 본 발명의 설명 및 첨부된 특허청구범위에서 사용되는 바와 같이, 단수 형태 "어떤", "한" 및 "그"는, 문맥이 명확하게 다른 것을 말하지 않는 한, 복수 형태를 포함하는 것으로 보아야 한다. 또한, 용어 "및/또는"은, 본 명세서에서 사용되는 바와 같이, 열거된 관련 항목들 중 하나 이상의 항목의 모든 가능한 조합을 말하고 또한 포괄한다는 것을 잘 알 것이다. 또한, 용어 "포함한다" 및/또는 "포함하는"이 본 명세서에서 사용될 때 언급한 특징, 정수, 단계, 동작, 요소, 및/또는 구성요소가 존재함을 명시하는 것이고 하나 이상의 다른 특징, 정수, 단계, 동작, 요소, 구성요소 및/또는 이들의 그룹의 존재 또는 추가를 배제하지 않는다는 것을 잘 알 것이다.
본 명세서에서 사용되는 바와 같이, "~인 경우"라는 용어는, 문맥에 따라, "~일 때" 또는 "~ 시에" 또는 "~라고 판정한 것에 응답하여" 또는 '~을 검출한 것에 응답하여'를 의미하는 것으로 해석될 수 있다. 이와 유사하게, "~라고 판정되는 경우" 또는 "[언급된 조건 또는 이벤트가] 검출되는 경우"는, 문맥에 따라, "~라고 판정할 시에" 또는 "~라고 판정하는 것에 응답하여" 또는 "[언급된 조건 또는 이벤트를] 검출할 시에" 또는 "[언급된 조건 또는 이벤트를] 검출한 것에 응답하여"를 의미하는 것으로 해석될 수 있다.
컴퓨팅 장치, 이러한 장치에 대한 사용자 인터페이스, 및 이러한 장치를 사용하는 관련 프로세스가 기술되어 있다. 일부 실시예에서, 컴퓨팅 장치는 PDA 및/또는 음악 플레이어 기능과 같은 다른 기능도 포함하는 휴대폰과 같은 휴대용 통신 장치이다. 휴대용 다기능 장치의 예시적인 실시예는 미국 캘리포니아주 쿠퍼티노 소재의 Apple Computer, Inc.의 iPhone® 및 iPod Touch®를 포함하지만, 이들로 제한되지 않는다.
이하의 설명에서, 디스플레이 및 터치-감응 표면을 포함하는 컴퓨팅 장치가 기술되어 있다. 그렇지만, 컴퓨팅 장치가 실제 키보드, 마우스 및/또는 조이스틱과 같은 하나 이상의 다른 실제 사용자 인터페이스 장치를 포함할 수 있다는 것을 잘 알 것이다.
이 장치는 그리기 응용 프로그램, 프레젠테이션 응용 프로그램, 워드 프로세싱 응용 프로그램, 웹 사이트 제작 응용 프로그램, 디스크 저작 응용 프로그램, 스프레드시트 응용 프로그램, 게임 응용 프로그램, 전화 응용 프로그램, 화상 회의 응용 프로그램, 이메일 응용 프로그램, 인스턴트 메시징 응용 프로그램, 운동 보조 응용 프로그램, 사진 관리 응용 프로그램, 디지털 카메라 응용 프로그램, 디지털 비디오 카메라 응용 프로그램, 웹 브라우징 응용 프로그램, 디지털 음악 플레이어 응용 프로그램, 및/또는 디지털 비디오 플레이어 응용 프로그램 중 하나 이상과 같은 각종의 응용 프로그램을 지원한다.
장치 상에서 실행될 수 있는 다양한 응용 프로그램은 터치-감응 표면과 같은 적어도 하나의 공통의 실제 사용자 인터페이스 장치를 사용할 수 있다. 터치-감응 표면의 하나 이상의 기능은 물론 장치 상에 디스플레이되는 대응하는 정보가 응용 프로그램마다 및/또는 각자의 응용 프로그램 내에서 조정되고 및/또는 변화될 수 있다. 이러한 방식으로, 장치의 공통의 물리적 아키텍처(터치-감응 표면 등)가 직관적이고 투명한 사용자 인터페이스를 갖는 각종의 응용 프로그램을 지원할 수 있다.
사용자 인터페이스는 하나 이상의 소프트 키보드 구현을 포함할 수 있다. 소프트 키보드 구현은 미국 특허 출원 제11/459,606호[2006년 7월 24일자로 출원되고 발명의 명칭이 "Keyboards For Portable Electronic Devices(휴대용 전자 장치의 키보드)"임] 및 제11/459,615호[2006년 7월 24일자로 출원되고 발명의 명칭이 "Touch Screen Keyboards For Portable Electronic Devices(휴대용 전자 장치의 터치 스크린 키보드)"임]에 기술된 것과 같은 키보드의 디스플레이된 아이콘 상의 표준(QWERTY) 및/또는 비표준 심볼 구성을 포함할 수 있으며, 이들 미국 출원은 참조 문헌으로서 그 전체 내용이 본 명세서에 포함된다. 키보드 구현은 타이프라이터의 키보드와 같은 기존의 실제 키보드에서의 키의 수에 비해 감소된 수의 아이콘(또는 소프트 키)을 포함할 수 있다. 이것은 사용자가 키보드에서의 하나 이상의 아이콘과, 따라서 하나 이상의 대응하는 심볼을 선택하는 것을 더욱 쉽게 만들어 줄 수 있다. 키보드 구현이 적응적일 수 있다. 예를 들어, 하나 이상의 아이콘 및/또는 하나 이상의 대응하는 심볼을 선택하는 것과 같은 사용자 동작에 따라 디스플레이된 아이콘이 수정될 수 있다. 장치 상의 하나 이상의 응용 프로그램이 공통의 및/또는 상이한 키보드 구현을 이용할 수 있다. 따라서, 사용되는 키보드 구현이 응용 프로그램들 중 적어도 일부 응용 프로그램에 맞게 조정될 수 있다. 일부 실시예에서, 하나 이상의 키보드 구현이 각각의 사용자에 맞게 조정될 수 있다. 예를 들어, 하나 이상의 키보드 구현이 각각의 사용자의 단어 사용 이력(사전 편찬, 속어, 개별 사용 현황)에 기초하여 각각의 사용자에 맞게 조정될 수 있다. 키보드 구현들 중 일부는, 소프트 키보드 구현을 사용할 때, 하나 이상의 아이콘, 및 따라서 하나 이상의 심볼을 선택할 때 사용자 오류의 확률을 감소시키도록 조정될 수 있다.
이제부터, 터치 감응 디스플레이를 갖는 휴대용 장치의 실시예들에 대해 중점적으로 기술한다. 도 1a 및 도 1b는 일부 실시예에 따른, 터치 감응 디스플레이(112)를 갖는 휴대용 다기능 장치(100)를 나타낸 블록도이다. 터치 감응 디스플레이(112)는 때때로 편의상 "터치 스크린"이라고 하고, 또한 터치 감응 디스플레이 시스템이라고도 알려져 있거나 칭할 수 있다. 장치(100)는 메모리(102)(하나 이상의 컴퓨터 판독가능 저장 매체를 포함할 수 있음), 메모리 제어기(122), 하나 이상의 처리 장치(CPU)(120), 주변 장치 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크(113), 입/출력(I/O) 서브시스템(106), 기타 입력 또는 제어 장치(116), 및 외부 포트(124)를 포함할 수 있다. 장치(100)는 하나 이상의 광 센서(164)를 포함할 수 있다. 이들 구성요소는 하나 이상의 통신 버스 또는 신호선(103)을 통해 통신할 수 있다.
장치(100)가 휴대용 다기능 장치(100)의 일례에 불과하고 장치(100)가 도시된 것보다 더 많거나 더 적은 구성요소를 가질 수 있거나, 2개 이상의 구성요소를 겸비할 수 있거나, 상이한 구성요소의 구성 또는 배열을 가질 수 있다는 것을 잘 알 것이다. 하나 이상의 신호 처리 및/또는 ASIC(application specific integrated circuit)을 비롯한 도 1a 및 도 1b에 도시된 다양한 구성요소가 하드웨어로, 소프트웨어로 또는 하드웨어와 소프트웨어 둘다의 조합으로 구현될 수 있다.
메모리(102)는 고속 랜덤 액세스 메모리를 포함할 수 있고, 또한 하나 이상의 자기 디스크 저장 장치, 플래시 메모리 장치, 또는 기타 비휘발성 고상 메모리 장치와 같은 비휘발성 메모리를 포함할 수 있다. CPU(120) 및 주변 장치 인터페이스(118)와 같은 장치(100)의 다른 구성요소가 메모리(102)에 액세스하는 것이 메모리 제어기(122)에 의해 제어될 수 있다.
주변장치 인터페이스(118)는 장치의 입력 및 출력 주변 장치를 CPU(120) 및 메모리(102)에 결합시킨다. 하나 이상의 프로세서(120)는, 장치(100)의 다양한 기능을 수행하고 데이터를 처리하기 위해, 메모리(102)에 저장되어 있는 다양한 소프트웨어 프로그램 및/또는 일련의 명령어를 실행한다.
일부 실시예에서, 주변장치 인터페이스(118), CPU(120) 및 메모리 제어기(122)는 칩(104)과 같은 단일 칩 상에 구현될 수 있다. 어떤 다른 실시예에서, 이들은 개별 칩 상에 구현될 수 있다.
RF(radio frequency) 회로(108)는 RF 신호(전자기 신호라고도 함)를 수신하고 전송한다. RF 회로(108)는 전기 신호를 전자기 신호로/전자기 신호를 전기 신호로 변환하고 전자기 신호를 통해 통신 네트워크 및 기타 통신 장치와 통신한다. RF 회로(108)는 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기, 디지털 신호 처리기, 코덱 칩셋, SIM(subscriber identity module) 카드, 메모리(이들로 제한되지 않음) 등을 비롯한 이들 기능을 수행하는 공지의 회로를 포함할 수 있다. RF 회로(108)는 무선 통신에 의해 인터넷[월드 와이드 웹(WWW)이라고도 함], 인트라넷 및/또는 무선 네트워크[휴대 전화 네트워크, 무선 LAN(local area network) 및/또는 MAN(metropolitan area network) 등]와 같은 네트워크 및 기타 장치와 통신할 수 있다. 무선 통신은 GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스, Wi-Fi(Wireless Fidelity)(예를 들어, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 이메일에 대한 프로토콜[예를 들어, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)], 인스턴트 메시징[예를 들어, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service)], 및/또는 SMS(Short Message Service)], 또는 본 문서의 출원일에 즈음하여 아직 개발되지 않은 통신 프로토콜을 포함한 임의의 다른 적당한 통신 프로토콜을 포함하지만 이에 한정되지 않은 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것을 사용할 수 있다.
오디오 회로(110), 스피커(111), 및 마이크(113)는 사용자와 장치(100) 사이의 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변 장치 인터페이스(118)로부터 오디오 데이터를 수신하고, 오디오 데이터를 전기 신호로 변환하며, 전기 신호를 스피커(111)로 전송한다. 스피커(111)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. 오디오 회로(110)는 또한 마이크(113)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 처리를 위해 오디오 데이터를 주변 장치 인터페이스(118)로 전송한다. 오디오 데이터는 주변 장치 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되고 및/또는 그곳으로 전송될 수 있다. 일부 실시예에서, 오디오 회로(110)는 또한 헤드셋 잭(예를 들어, 도 2의 212)을 포함하고 있다. 헤드셋 잭은 오디오 회로(110)와 이동식 오디오 입/출력 주변 장치[출력 전용 헤드폰 또는 출력(예를 들어, 한쪽 귀 또는 양쪽 귀를 위한 헤드폰) 및 입력(예를 들어, 마이크) 둘다를 갖는 헤드셋 등] 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 장치(100) 상의 입/출력 주변 장치[터치 스크린(112) 및 기타 입력/제어 장치(116) 등]를 주변 장치 인터페이스(118)에 결합시킨다. I/O 서브시스템(106)은 디스플레이 제어기(156) 및 다른 입력 또는 제어 장치에 대한 하나 이상의 입력 제어기(160)를 포함할 수 있다. 하나 이상의 입력 제어기(160)는 기타 입력 또는 제어 장치(116)로부터/로 전기 신호를 수신/전송한다. 기타 입력/제어 장치(116)는 실제 버튼[예를 들어, 푸시 버튼, 로커 버튼(rocker button), 기타], 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휘일, 기타를 포함하고 있을 수 있다. 어떤 대안의 실시예에서, 입력 제어기(들)(160)는 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 장치 중 임의의 것에 결합될 수 있다(또는 그 중 아무 것에도 결합되지 않을 수 있다). 하나 이상의 버튼(예를 들어, 도 2의 208)은 스피커(111) 및/또는 마이크(113)의 볼륨 제어를 위한 업/다운 버튼을 포함할 수 있다. 하나 이상의 버튼은 푸시 버튼(예를 들어, 도 2의 206)을 포함할 수 있다. 푸시 버튼의 빨리 누르기(quick press)는 터치 스크린(112)의 잠금을 해제하거나, 2005년 12월 23일자로 출원된, 발명의 명칭이 "Unlocking a Device by Performing Gestures on an Unlock Image(잠금 해제 이미지 상에서 제스처를 수행하여 장치를 잠금 해제하기)"인 미국 특허 출원 제11/322,549호(참조 문헌으로서 그 전체 내용이 본 명세서에 포함됨)에 기술된 바와 같이, 장치를 잠금 해제하기 위해 터치 스크린 상에서 제스처를 사용하는 프로세스를 시작할 수 있다. 푸시 버튼(예를 들어, 206)의 길게 누르기는 장치(100)에 대한 전원을 켜거나 끌 수 있다. 사용자는 버튼들 중 하나 이상의 버튼의 기능을 커스터마이즈할 수 있다. 터치 스크린(112)은 가상 또는 소프트 버튼 및 하나 이상의 소프트 키보드를 구현하는 데 사용된다.
터치-감응 터치 스크린(112)은 장치와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 제어기(156)는 전기 신호를 터치 스크린(112)으로부터/으로 수신 및/또는 전송한다. 터치 스크린(112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 그래픽, 텍스트, 아이콘, 이 비디오, 및 이들의 임의의 조합(모두 합하여 "그래픽"이라고 함)을 포함할 수 있다. 일부 실시예에서, 시각적 출력의 일부 또는 전부는 사용자-인터페이스 객체에 대응할 수 있다.
터치 스크린(112)은 햅틱 및/또는 촉각 접촉에 기초한 사용자로부터의 입력을 받는 터치-감응 표면, 센서 또는 일련의 센서를 가진다. 터치 스크린(112) 및 디스플레이 제어기(156)는 [메모리(102) 내의 임의의 연관된 모듈 및/또는 명령어 집합과 함께] 터치 스크린(112) 상의 접촉(및 접촉의 움직임 또는 단절)을 검출하고, 검출된 접촉을 터치 스크린 상에 디스플레이되는 사용자-인터페이스 객체(예를 들어, 하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지 등)와의 상호작용으로 변환한다. 예시적인 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉점은 사용자의 손가락에 대응한다.
터치 스크린(112)은 LCD(liquid crystal display) 기술 또는 LPD(light emitting polymer display) 기술을 사용할 수 있지만, 다른 실시예에서 기타 디스플레이 기술들이 사용될 수 있다. 터치 스크린(112) 및 디스플레이 제어기(156)는 용량성, 저항성, 적외선 및 표면 음파(surface acoustic wave) 기술은 물론 터치 스크린(112)과의 하나 이상의 접촉점을 결정하는 기타 근접 센서 어레이 또는 기타 요소(이들로 제한되지 않음)를 비롯한 현재 알려져 있거나 나중에 개발되는 복수의 터치 감지 기술 중 임의의 기술을 사용하여 접촉 및 접촉의 움직임 또는 단절을 검출할 수 있다. 예시적인 실시예에서, 미국 캘리포니아주 쿠퍼티노 소재의 Apple Computer, Inc.의 iPhone® 및 iPod Touch®에서 발견되는 것과 같은 제안된 상호 커패시턴스 감지 기술이 사용된다.
터치 스크린(112)의 일부 실시예에서의 터치-감응 디스플레이는 미국 특허 제6,323,846호(Westerman 등), 제6,570,557호(Westerman 등), 및/또는 제6,677,932호(Westerman), 및/또는 미국 특허 공개 제2002/0015024A1호에 기술되어 있는 멀티-터치 감응 태블릿과 유사할 수 있으며, 이들 미국 특허 및 미국 특허 공개 각각은 참조 문헌으로서 그 전체 내용이 본 명세서에 포함된다. 그렇지만, 터치 스크린(112)은 휴대용 장치(100)로부터의 시각적 출력을 디스플레이하는 반면, 터치 감응 태블릿은 시각적 출력을 제공하지 않는다.
터치 스크린(112)의 일부 실시예에서의 터치-감응 디스플레이는 하기의 출원에 기술된 것과 같을 수 있다: (1) 2006년 5월 2일자로 출원된, 발명의 명칭이 "Multipoint Touch Surface Controller(멀티포인트 터치 표면 제어기)"인 미국 특허 출원 제11/381,313호, (2) 2004년 5월 6일자로 출원된, 발명의 명칭이 "Multipoint Touchscreen(멀티포인트 터치스크린)"인 미국 특허 출원 제10/840,862호, (3) 2004년 7월 30일자로 출원된, 발명의 명칭이 "Gestures For Touch Sensitive Input Devices(터치 감응 입력 장치에 대한 제스처)"인 미국 특허 출원 제10/903,964호, (4) 2005년 1월 31일자로 출원된, 발명의 명칭이 "Gestures For Touch Sensitive Input Devices(터치 감응 입력 장치에 대한 제스처)"인 미국 특허 출원 제11/048,264호, (5) 2005년 1월 18일자로 출원된, 발명의 명칭이 "Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices(터치 감응 입력 장치에 대한 모드-기반 그래픽 사용자 인터페이스)"인 미국 특허 출원 제11/038,590호, (6) 2005년 9월 16일자로 출원된, 발명의 명칭이 "Virtual Input Device Placement On A Touch Screen User Interface(터치 스크린 사용자 인터페이스 상의 가상 입력 장치 배치)"인 미국 특허 출원 제11/228,758호, (7) 2005년 9월 16일자로 출원된, 발명의 명칭이 "Operation Of A Computer With A Touch Screen Interface(터치 스크린 인터페이스를 갖는 컴퓨터의 동작)"인 미국 특허 출원 제11/228,700호, (8) 2005년 9월 16일자로 출원된, 발명의 명칭이 "Activating Virtual Keys Of A Touch-Screen Virtual Keyboard(터치 스크린 가상 키보드의 가상 키 활성화)"인 미국 특허 출원 제11/228,737호, 및 (9) 2006년 3월 3일자로 출원된, 발명의 명칭이 "Multi-Functional Hand-Held Device(다기능 핸드헬드 장치)"인 미국 특허 출원 제11/367,749호. 이들 출원 각각은 참조 문헌으로서 그 전체 내용이 본 명세서에 포함된다.
터치 스크린(112)은 100 dpi를 초과하는 해상도를 가질 수 있다. 예시적인 실시예에서, 터치 스크린은 대략 160 dpi의 해상도를 가진다. 사용자는 스타일러스, 손가락, 기타 등등의 임의의 적당한 물체 또는 부속물을 사용하여 터치 스크린(112)과 접촉할 수 있다. 일부 실시예에서, 사용자 인터페이스는 주로 손가락-기반 접촉 및 제스처(터치 스크린 상에서의 손가락의 접촉 면적이 더 크기 때문에 스타일러스-기반 입력보다 훨씬 덜 정확함)를 사용하여 동작하도록 설계되어 있다. 일부 실시예에서, 장치는 대략적인 손가락-기반 입력을 사용자가 원하는 동작을 수행하는 정확한 포인터/커서 위치 또는 명령으로 변환한다.
일부 실시예에서, 터치 스크린에 부가하여, 장치(100)는 특정의 기능을 활성화 또는 비활성화시키는 터치패드(도시 생략)를 포함할 수 있다. 일부 실시예에서, 터치패드는, 터치 스크린과는 달리, 시각적 출력을 디스플레이하지 않는 장치의 터치-감응 영역이다. 터치패드는 터치 스크린(112)과 별개인 터치-감응 표면이거나 터치 스크린에 의해 형성되는 터치-감응 표면의 연장부일 수 있다.
일부 실시예에서, 장치(100)는 입력 제어 장치(116)로서 실제 또는 가상 클릭 휘일을 포함할 수 있다. 사용자는, 클릭 휘일을 회전시킴으로써 또는 클릭 휘일과의 접촉 지점을 움직임으로써[예를 들어, 접촉 지점의 움직임의 양이 클릭 휘일의 중앙 지점에 대한 그의 각도 변위(angular displacement)로 측정되는 경우], 터치 스크린(112)에 디스플레이되는 하나 이상의 그래픽 객체(예를 들어, 아이콘)를 탐색하고 그와 상호작용할 수 있다. 클릭 휘일은 또한 디스플레이된 아이콘들 중 하나 이상의 아이콘을 선택하는 데 사용될 수 있다. 예를 들어, 사용자는 클릭 휘일 또는 관련 버튼의 적어도 일부분을 누를 수 있다. 클릭 휘일을 통해 사용자에 의해 제공되는 사용자 명령 및 탐색 명령은 입력 제어기(160)는 물론, 메모리(102) 내의 모듈들 및/또는 명령어 집합들 중 하나 이상에 의해 처리될 수 있다. 가상 클릭 휘일의 경우, 클릭 휘일 및 클릭 휘일 제어기는 각각 터치 스크린(112) 및 디스플레이 제어기(156)의 일부일 수 있다. 가상 클릭 휘일의 경우, 클릭 휘일은 장치와의 사용자 상호작용에 응답하여 터치 스크린 디스플레이 상에 나타나고 사라지는 불투명 또는 반투명 객체일 수 있다. 일부 실시예에서, 가상 클릭 휘일이 휴대용 다기능 장치의 터치 스크린 상에 디스플레이되고 터치 스크린과의 사용자 접촉에 의해 조작된다.
장치(100)는 또한 다양한 구성요소에 전원을 제공하는 전원 시스템(162)도 포함하고 있다. 전원 시스템(162)은 전력 관리 시스템, 하나 이상의 전원[예를 들어, 배터리, 교류(AC)], 충전 시스템, 전원 고장 검출 회로, 전력 컨버터 또는 인버터, 전원 상태 표시기[예를 들어, LED(light emitting diode)] 및 휴대용 장치에서의 전력의 발생, 관리 및 분배와 연관되어 있는 임의의 다른 구성요소를 포함할 수 있다.
장치(100)는 또한 하나 이상의 광 센서(164)도 포함할 수 있다. 도 1a 및 도 1b는 I/O 서브시스템(106) 내의 광 센서 제어기(158)에 결합된 광 센서를 나타내고 있다. 광 센서(164)는 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor) 광 트랜지스터(phototransistor)를 포함할 수 있다. 광 센서(164)는 하나 이상의 렌즈를 통해 투사되는, 환경으로부터의 광을 수광하고, 이 광을 영상을 표현하는 데이터로 변환한다. 이미징 모듈(143)(카메라 모듈이라고도 함)과 관련하여, 광 센서(164)는 정지 영상 또는 비디오를 캡처할 수 있다. 일부 실시예에서, 광 센서는 장치의 전면에 있는 터치 스크린 디스플레이(112)의 반대쪽인, 장치(100)의 배면에 위치하며, 따라서 터치 스크린 디스플레이가 정지 및/또는 비디오 영상 획득을 위한 뷰 파인더로서 사용될 수 있다. 일부 실시예에서, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자를 보면서 화상 회의를 위해 사용자의 영상이 획득될 수 있도록 광 센서가 장치의 전면에 위치해 있다. 일부 실시예에서, 화상 회의 및 정지 및/또는 비디오 영상 획득 둘다를 위해 하나의 광 센서(164)가 터치 스크린 디스플레이와 함께 사용될 수 있도록 사용자에 의해(예를 들어, 장치 하우징 내의 렌즈 및 센서를 회전시킴으로써) 광 센서(164)의 위치가 변경될 수 있다.
장치(100)는 또한 하나 이상의 근접 센서(166)도 포함할 수 있다. 도 1a 및 도 1b는 주변 장치 인터페이스(118)에 결합된 근접 센서(166)를 나타내고 있다. 다른 대안으로서, 근접 센서(166)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합될 수 있다. 근접 센서(166)는 발명의 명칭이 "Proximity Detector In Handheld Device(핸드헬드 장치 내의 근접 검출기)"인 미국 특허 출원 제11/241,839호, 발명의 명칭이 "Proximity Detector In Handheld Device(핸드헬드 장치 내의 근접 검출기)"인 미국 특허 출원 제11/240,788호, 발명의 명칭이 "Using Ambient Light Sensor To Augment Proximity Sensor Output(주변광 센서를 사용한 근접 센서 출력의 증강)"인 미국 특허 출원 제11/620,702호, 발명의 명칭이 "Automated Response To And Sensing Of User Activity In Portable Devices(휴대용 장치에서의 사용자 동작에 대한 자동화된 응답 및 그의 감지)"인 미국 특허 출원 제11/586,862호, 및 발명의 명칭이 "Methods And Systems For Automatic Configuration Of Peripherals(주변 장치의 자동 구성 방법 및 시스템)"인 미국 특허 출원 제11/638,251호에 기술된 바와 같이 동작할 수 있으며, 이들 미국 출원은 참조 문헌으로서 그 전체 내용이 본 명세서에 포함된다. 일부 실시예에서, 다기능 장치가 사용자의 귀 근방에 위치될 때(예를 들어, 사용자가 전화 통화를 하고 있을 때), 근접 센서는 터치 스크린(112)을 끄고 비활성화시킨다. 일부 실시예에서, 장치가 잠금 상태에 있을 때 불필요한 배터리 소모를 방지하기 위해, 장치가 사용자의 주머니, 지갑, 또는 기타 어두운 영역에 있을 때, 근접 센서는 스크린을 끈 채로 둔다.
장치(100)는 또한 하나 이상의 가속도계(168)도 포함할 수 있다. 도 1a 및 도 1b는 주변 장치 인터페이스(118)에 결합된 가속도계(168)를 나타내고 있다. 다른 대안으로서, 가속도계(168)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합될 수 있다. 가속도계(168)는 발명의 명칭이 "Acceleration-based Theft Detection System for Portable Electronic Devices(휴대용 전자 장치의 가속도-기반 도난 감지 시스템)"인 미국 특허 공개 제20050190059호, 및 발명의 명칭이 "Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer(가속도계에 기초하여 휴대용 장치를 동작시키는 방법 및 장치)"인 미국 특허 공개 제20060017692호에 기술된 바와 같이 동작할 수 있으며, 이들 미국 특허 공개 둘다는 참조 문헌으로서 그 전체 내용이 본 명세서에 포함된다. 일부 실시예에서, 하나 이상의 가속도계로부터 수신된 데이터의 분석에 기초하여, 정보가 터치 스크린 디스플레이 상에 인물 보기 또는 풍경 보기로 디스플레이된다.
일부 실시예에서, 메모리(102)에 저장된 소프트웨어 구성요소는 운영 체제(126), 통신 모듈(또는 명령어 집합)(128), 접촉/움직임 모듈(또는 명령어 집합)(130), 그래픽 모듈(또는 명령어 집합)(132), 편집 모듈(또는 명령어 집합)(133), 텍스트 입력 모듈(또는 명령어 집합)(134), GPS(Global Positioning System) 모듈(또는 명령어 집합)(135), 및 응용 프로그램(또는 명령어 집합)(136)을 포함할 수 있다.
운영 체제(126)(예를 들어, Darwin, RTXC, LINUX, UNIX, OS X, WINDOWS, 또는 VxWorks와 같은 임베디드 운영 체제)는 일반 시스템 작업(예를 들어, 메모리 관리, 저장 장치 제어, 전력 관리, 기타)을 제어 및 관리하는 다양한 소프트웨어 구성요소 및/또는 드라이버를 포함하고 있으며 다양한 하드웨어 구성요소와 소프트웨어 구성요소 사이의 통신을 용이하게 해준다.
통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 장치들과의 통신을 용이하게 해주고, 또한 RF 회로(108) 및/또는 외부 포트(124)에 의해 수신되는 데이터를 처리하는 다양한 소프트웨어 구성요소를 포함한다. 외부 포트(124)[예를 들어, USB(Universal Serial Bus), FireWire, 기타]는 다른 장치들에 직접 결합하거나 네트워크(예를 들어, 인터넷, 무선 LAN, 기타)를 통해 간접적으로 결합하도록 되어 있다. 일부 실시예에서, 외부 포트는 iPod(Apple Computer, Inc.의 상표) 장치에서 사용되는 30-핀 커넥터와 동일하거나 유사하고 및/또는 호환되는 멀티-핀(예를 들어, 30-핀) 커넥터이다.
접촉/움직임 모듈(130)은 [디스플레이 제어기(156)와 관련된] 터치 스크린(112) 및 다른 터치 감응 장치(예를 들어, 터치패드 또는 실제 클릭 휘일)와의 접촉을 검출할 수 있다. 접촉/움직임 모듈(130)은 접촉이 일어났는지를 판정하는 것(예를 들어, 손가락-아래로 이벤트를 검출하는 것), 접촉의 움직임이 있는지를 판정하고 터치-감응 표면을 가로지르는 움직임을 추적하는 것(예를 들어, 하나 이상의 손가락-드래그 이벤트를 검출하는 것), 및 접촉이 중단되었는지를 판정하는 것(예를 들어, 손가락-위로 이벤트 또는 접촉의 단절을 검출하는 것)과 같은, 접촉의 검출과 관련된 다양한 동작을 수행하는 다양한 소프트웨어 구성요소를 포함한다. 접촉/움직임 모듈(130)은 터치-감응 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터로 표현되는 접촉 지점의 움직임을 판정하는 것은 접촉 지점의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향의 변화)를 결정하는 것을 포함할 수 있다. 이들 동작은 단일 접촉(예를 들어, 하나의 손가락 접촉)에 또는 다중 동시 접촉(예를 들어, "멀티터치"/다중 손가락 접촉)에 적용될 수 있다. 일부 실시예에서, 접촉/움직임 모듈(130) 및 디스플레이 제어기(156)는 터치패드 상의 접촉을 검출한다. 일부 실시예에서, 접촉/움직임 모듈(130) 및 디스플레이 제어기(160)는 클릭 휘일 상의 접촉을 검출한다.
접촉/움직임 모듈(130)은 사용자에 의해 입력된 제스처를 검출할 수 있다. 터치-감응 표면 상의 상이한 제스처는 상이한 접촉 패턴을 가진다. 따라서, 특정의 접촉 패턴을 검출함으로써 제스처가 검출될 수 있다. 예를 들어, 손가락 탭핑 제스처를 검출하는 것은 손가락-아래로 이벤트를 검출하고 이어서 손가락-아래로 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)에서(예를 들어, 아이콘의 위치에서) 손가락-위로 이벤트를 검출하는 것을 포함한다. 다른 일례로서, 터치-감응 표면 상에서 손가락 스와이프 제스처를 검출하는 것은 손가락-아래로 이벤트를 검출하고 이어서 하나 이상의 손가락-드래그 이벤트를 검출하며 그 후에 손가락-위로 이벤트를 검출하는 것을 포함한다.
그래픽 모듈(132)은 디스플레이되는 그래픽의 휘도를 변경하는 구성요소를 비롯한, 터치 스크린(112) 또는 기타 디스플레이 상에 그래픽을 렌더링하고 디스플레이하는 다양한 공지된 소프트웨어 구성요소를 포함한다. 본 명세서에서 사용되는 바와 같이, "그래픽"이라는 용어는 텍스트, 웹 페이지, 아이콘(소프트 키를 비롯한 사용자 인터페이스 객체 등), 디지털 이미지, 비디오, 애니메이션, 기타(이들로 제한되지 않음)를 비롯한 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다.
일부 실시예에서, 그래픽 모듈(132)은 사용될 그래픽을 표현하는 데이터를 저장한다. 각각의 그래픽은 대응하는 코드를 할당받을 수 있다. 그래픽 모듈(132)은, 필요한 경우, 좌표 데이터 및 기타 그래픽 속성 데이터와 함께 디스플레이될 그래픽을 지정하는 하나 이상의 코드를 응용 프로그램 등으로부터 수신하고, 이어서 디스플레이 제어기(156)에 출력할 스크린 이미지 데이터를 발생한다.
텍스트 입력 모듈(134)의 구성요소일 수 있는 편집 모듈(133)은 다양한 응용 프로그램[예를 들어, 연락처(137), 이메일(140), IM(141), 브라우저(147), 달력(148), 검색 모듈(151), 및 콘텐츠를 선택하고 편집할 필요가 있는 임의의 다른 응용 프로그램]에서 사용자-선택 콘텐츠에 관련된 잘라내기, 복사, 붙여넣기, 및 기타 기능을 제공한다.
그래픽 모듈(132)의 구성요소일 수 있는 텍스트 입력 모듈(134)은 다양한 응용 프로그램[예를 들어, 연락처(137), 이메일(140), IM(141), 브라우저(147), 및 텍스트 입력을 필요로 하는 임의의 다른 응용 프로그램]에서 텍스트를 입력하는 소프트 키보드를 제공한다.
GPS 모듈(135)은 장치의 위치를 결정하고, 이 정보를 다양한 응용 프로그램에서 사용하도록[예를 들어, 위치-기반 다이얼링에서 사용하도록 전화(138)에, 사진/비디오 메타데이터로서 카메라(143)에, 및 날씨 위젯, 지역 옐로우 페이지 위젯, 및 지도/내비게이션 위젯과 같은 위치-기반 서비스를 제공하는 응용 프로그램에] 제공한다.
응용 프로그램(136)은 다음과 같은 모듈(또는 명령어 집합) 또는 그의 부분 집합 또는 상위 집합(superset)을 포함할 수 있다:
Figure 112017040619967-pat00001
연락처 모듈(137)(때때로 주소록 또는 연락처 목록이라고 함),
Figure 112017040619967-pat00002
전화 모듈(138),
Figure 112017040619967-pat00003
화상 회의 모듈(139),
Figure 112017040619967-pat00004
이메일 클라이언트 모듈(140),
Figure 112017040619967-pat00005
인스턴트 메시징(IM) 모듈(141),
Figure 112017040619967-pat00006
운동 보조 모듈(142),
Figure 112017040619967-pat00007
정지 및/또는 비디오 영상에 대한 카메라 모듈(143),
Figure 112017040619967-pat00008
이미지 관리 모듈(144),
Figure 112017040619967-pat00009
비디오 플레이어 모듈(145),
Figure 112017040619967-pat00010
음악 플레이어 모듈(146),
Figure 112017040619967-pat00011
브라우저 모듈(147),
Figure 112017040619967-pat00012
달력 모듈(148),
Figure 112017040619967-pat00013
날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5), 및 사용자에 의해 획득되는 기타 위젯은 물론, 사용자-생성 위젯(149-6)을 포함할 수 있는 위젯 모듈(149),
Figure 112017040619967-pat00014
사용자-생성 위젯(149-6)을 만드는 위젯 생성기 모듈(150),
Figure 112017040619967-pat00015
검색 모듈(151),
Figure 112017040619967-pat00016
비디오 플레이어 모듈(145) 및 음악 플레이어 모듈(146)을 병합한 비디오 및 음악 플레이어 모듈(152),
Figure 112017040619967-pat00017
메모 모듈(153),
Figure 112017040619967-pat00018
지도 모듈(154), 및/또는
Figure 112017040619967-pat00019
온라인 비디오 모듈(155).
메모리(102)에 저장될 수 있는 다른 응용 프로그램(136)의 일례는 다른 워드 프로세싱 응용 프로그램, 다른 이미지 편집 응용 프로그램, 그리기 응용 프로그램, 프레젠테이션 응용 프로그램, JAVA-지원 응용 프로그램, 암호화, 디지털 저작권 관리(digital rights management), 음성 인식, 및 음성 복제를 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 연락처 모듈(137)은 주소록에 이름(들)을 추가하는 것, 주소록으로부터 이름(들)을 삭제하는 것, 전화 번호(들), 이메일 주소(들), 실제 주소(들) 또는 기타 정보를 이름과 연관시키는 것, 이미지를 이름과 연관시키는 것, 이름을 분류하고 정렬하는 것, 전화(138), 화상 회의(139), 이메일(140), 또는 IM(141)에 의한 통신을 시작하고 및/또는 용이하게 해주기 위해 전화 번호 또는 이메일 주소를 제공하는 것 등을 비롯하여 주소록 또는 연락처 목록을 관리하는 데 사용될 수 있다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크(113), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 전화 모듈(138)은 전화 번호에 대응하는 문자 시퀀스를 입력하고, 주소록(137) 내의 하나 이상의 전화 번호에 액세스하며, 입력된 전화 번호를 수정하고, 각각의 전화 번호를 다이얼하며, 대화를 수행하고, 대화가 완료될 때 연결 해제하거나 수화기를 놓는 데 사용될 수 있다. 앞서 살펴본 바와 같이, 무선 통신은 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것을 사용할 수 있다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크(113), 터치 스크린(112), 디스플레이 제어기(156), 광 센서(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), 연락처 목록(137) 및 전화 모듈(138)과 관련하여, 화상 회의 모듈(139)은 사용자와 하나 이상의 다른 참가자 사이에서 화상 회의를 시작, 수행 및 종료하는 데 사용될 수 있다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 이메일 클라이언트 모듈(140)은 이메일을 생성, 전송, 수신 및 관리하는 데 사용될 수 있다. 이미지 관리 모듈(144)과 관련하여, 이메일 모듈(140)은 카메라 모듈(143)로 찍은 정지 또는 비디오 영상을 갖는 이메일을 생성하고 전송하는 것을 아주 쉽게 만들어준다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 인스턴트 메시징 모듈(141)은 인스턴트 메시지에 대응하는 문자 시퀀스를 입력하고, 이전에 입력된 문자를 수정하며, [예를 들어, 전화-기반 인스턴트 메시지에 대해 SMS(Short Message Service) 또는 MMS(Multimedia Message Service) 프로토콜을 사용하여 또는 인터넷-기반 인스턴스 메시지에 대해 XMPP, SIMPLE, 또는 IMPS를 사용하여] 각각의 인스턴트 메시지를 전송하고, 인스턴트 메시지를 수신하며, 수신된 인스턴트 메시지를 보는 데 사용될 수 있다. 일부 실시예에서, 전송된 및/또는 수신된 인스턴트 메시지는 그래픽, 사진, 오디오 파일, 비디오 파일, 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 다른 첨부물을 포함할 수 있다. 본 명세서에서 사용되는 바와 같이, "인스턴트 메시징"은 전화-기반 메시지(예를 들어, SMS 또는 MMS를 사용하여 전송되는 메시지) 및 인터넷-기반 메시지(예를 들어, XMPP, SIMPLE, 또는 IMPS를 사용하여 전송되는 메시지) 둘다를 말한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), GPS 모듈(135), 지도 모듈(154), 및 음악 플레이어 모듈(146)과 관련하여, 운동 보조 모듈(142)은 (예를 들어, 시간, 거리 및/또는 칼로리 소모 목표를 갖는) 운동을 생성하고, 운동 센서(스포츠 장치)와 통신하며, 운동 센서 데이터를 수신하고, 운동을 모니터링하는 데 사용되는 센서를 보정하며, 운동에 대한 음악을 선택하여 재생하고, 운동 데이터를 디스플레이, 저장 및 전송하는 데 사용될 수 있다.
터치 스크린(112), 디스플레이 제어기(156), 광 센서(들)(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 및 이미지 관리 모듈(144)과 관련하여, 카메라 모듈(143)은 정지 영상 또는 비디오(비디오 스트림을 포함함)를 캡처하고 이를 메모리(102)에 저장하거나, 정지 영상 또는 비디오의 특성을 수정하거나, 정지 영상 또는 비디오를 메모리(102)로부터 삭제하는 데 사용될 수 있다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), 및 카메라 모듈(143)과 관련하여, 이미지 관리 모듈(144)은 정지 및/또는 비디오 영상을 배열, 수정(예를 들어, 편집), 또는 다른 방식으로 조작, 분류, 삭제, (예를 들어, 디지털 슬라이드 쇼 또는 앨범으로) 제시, 및 저장하는 데 사용될 수 있다..
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 및 스피커(111)와 관련하여, 비디오 플레이어 모듈(145)은 [예를 들어, 터치 스크린 상에서 또는 외부 포트(124)를 통해 외부의 연결된 디스플레이 상에서] 비디오를 디스플레이, 제시 또는 다른 방식으로 재생하는 데 사용될 수 있다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108) 및 브라우저 모듈(147)과 관련하여, 음악 플레이어 모듈(146)은 사용자가 하나 이상의 파일 형식(MP3 또는 AAC 파일 등)으로 저장되어 있는 녹음된 음악 및 기타 사운드 파일을 다운로드하여 재생할 수 있게 해준다. 어떤 실시예들에서, 장치(100)는 iPod(Apple Computer, Inc.의 상표)과 같은 MP3 플레이어의 기능을 포함할 수 있다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 브라우저 모듈(147)은, 웹 페이지 또는 그의 일부분은 물론 웹 페이지에 링크된 첨부물 및 기타 파일을 검색하는 것, 그에 링크하는 것, 그를 수신하는 것, 및 그를 디스플레이하는 것을 비롯하여, 인터넷을 브라우징하는 데 사용될 수 있다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), 이메일 모듈(140), 및 브라우저 모듈(147)과 관련하여, 달력 모듈(148)은 달력 및 달력과 연관된 데이터(예를 들어, 달력 항목, 할 일 목록, 기타)를 생성, 디스플레이, 수정, 및 저장하는 데 사용될 수 있다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), 및 브라우저 모듈(147)과 관련하여, 위젯 모듈(149)은 사용자에 의해 다운로드되어 사용될 수 있는 미니-응용 프로그램이거나[예를 들어, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 및 사전 위젯(149-5)], 사용자에 의해 생성될 수 있는 미니-응용 프로그램[예를 들어, 사용자-생성 위젯(149-6)]이다. 일부 실시예에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파일, 및 자바스크립트 파일을 포함한다. 일부 실시예에서, 위젯은 XML(Extensible Markup Language) 파일 및 자바스크립트 파일(예를 들어, Yahoo! 위젯)을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), 및 브라우저 모듈(147)과 관련하여, 위젯 생성기 모듈(150)은 위젯을 생성하기 위해(예를 들어, 웹 페이지의 사용자-지정 부분을 위젯으로 변환함) 사용자에 의해 사용될 수 있다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 검색 모듈(151)은 하나 이상의 검색 조건(예를 들어, 하나 이상의 사용자-지정 검색어)과 일치하는 메모리(102) 내의 텍스트, 음악, 사운드, 이미지, 비디오, 및/또는 기타 파일을 검색하는 데 사용될 수 있다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 및 텍스트 입력 모듈(134)과 관련하여, 메모 모듈(153)은 메모, 할 일 목록, 기타를 생성하고 관리하는 데 사용될 수 있다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 편집 모듈(133), 텍스트 입력 모듈(134), GPS 모듈(135), 및 브라우저 모듈(147)과 관련하여, 지도 모듈(154)은 지도 및 지도와 연관된 데이터(예를 들어, 운전 방향, 특정 장소에 또는 그 근방에 있는 상점 및 기타 관심 지점에 관한 데이터, 및 기타 위치-기반 데이터)를 수신, 디스플레이, 수정 및 저장하는 데 사용될 수 있다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 편집 모듈(133), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 관련하여, 온라인 비디오 모듈(155)은 사용자가 특정의 온라인 비디오에 대한 링크를 갖는 이메일에 액세스하고, 브라우징하며, (예를 들어, 스트리밍 및/또는 다운로드에 의해) 수신하고, [예를 들어, 터치 스크린 상에서 또는 외부 포트(124)를 통해 외부의 연결된 디스플레이 상에서] 재생하며, 전송하고, 하나 이상의 파일 형식(H.264 등)으로 된 온라인 비디오를 다른 방식으로 관리할 수 있게 해준다. 일부 실시예에서, 이메일 클라이언트 모듈(140)보다는 인스턴트 메시징 모듈(141)이 특정의 온라인 비디오에 대한 링크를 전송하는 데 사용된다. 온라인 비디오 응용 프로그램에 대한 부가의 설명은 2007년 6월 20일자로 출원된, 발명의 명칭이 "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos(온라인 비디오를 재생하는 휴대용 다기능 장치, 방법 및 그래픽 사용자 인터페이스)"인 미국 가특허 출원 제60/936,562호, 및 2007년 12월 31일자로 출원된, 발명의 명칭이 "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos(온라인 비디오를 재생하는 휴대용 다기능 장치, 방법 및 그래픽 사용자 인터페이스)"인 미국 특허 출원 제11/968,067호에서 찾아볼 수 있으며, 이들 미국 출원은 참조 문헌으로서 그 전체 내용이 본 명세서에 포함된다.
상기 언급한 모듈 및 응용 프로그램 각각은 상기한 하나 이상의 기능을 수행하는 실행가능 명령어 집합 및 이 응용 프로그램에 기술된 방법(예를 들어, 본 명세서에 기술된 컴퓨터-구현 방법 및 기타 정보 처리 방법)에 대응한다. 이들 모듈(즉, 명령어 집합)은 별도의 소프트웨어 프로그램, 프로시저 또는 모듈로서 구현될 필요가 없고, 따라서 다양한 실시예에서 이들 모듈의 다양한 부분집합이 결합되거나 다른 방식으로 재배열될 수 있다. 예를 들어, 비디오 플레이어 모듈(145)은 음악 플레이어 모듈(146)과 결합되어 하나의 모듈[예를 들어, 비디오 및 음악 플레이어 모듈(152), 도 1b]로 될 수 있다. 일부 실시예에서, 메모리(102)는 앞서 언급한 모듈 및 데이터 구조의 부분집합을 저장할 수 있다. 게다가, 메모리(102)는 앞서 기술하지 않은 부가의 모듈 및 데이터 구조를 저장할 수 있다.
일부 실시예에서, 장치(100)는 장치 상에서의 소정의 일련의 기능의 동작이 터치 스크린(112) 및/또는 터치패드를 통해 배타적으로 수행되는 장치이다. 장치(100)의 동작을 위한 주 입력/제어 장치로서 터치 스크린 및/또는 터치패드를 사용함으로써, 장치(100) 상의 실제 입력/제어 장치(푸시 버튼, 다이얼, 기타 등등)의 수가 감소될 수 있다.
터치 스크린 및/또는 터치패드를 통해 배타적으로 수행될 수 있는 소정의 일련의 기능은 사용자 인터페이스 간의 이동을 포함한다. 일부 실시예에서, 터치패드는, 사용자에 의해 터치될 때, 장치(100)를 장치(100) 상에 디스플레이될 수 있는 임의의 다른 사용자 인터페이스로부터 주 메뉴, 홈 메뉴 또는 루트 메뉴로 이동하게 한다. 이러한 실시예에서, 터치패드는 "메뉴 버튼"이라고 할 수 있다. 어떤 다른 실시예에서, 메뉴 버튼는 터치패드 대신에 실제 푸시 버튼이거나 다른 실제 입력/제어 장치일 수 있다.
도 2는 일부 실시예에 따른, 터치 스크린(112)을 갖는 휴대용 다기능 장치(100)를 나타낸 것이다. 터치 스크린은 사용자 인터페이스(UI)(200) 내에 하나 이상의 그래픽을 디스플레이할 수 있다. 이 실시예에서는 물론 이하에 기술되는 다른 실시예에서, 사용자는, 예를 들어, 하나 이상의 손가락(202)(도면에 축척대로 그려져 있지 않음)으로 그래픽에 접촉하거나 터치함으로써 그래픽들 중 하나 이상의 그래픽을 선택할 수 있다. 일부 실시예에서, 사용자가 하나 이상의 그래픽과의 접촉을 단절할 때 하나 이상의 그래픽의 선택이 일어난다. 일부 실시예에서, 접촉은 하나 이상의 탭핑, 하나 이상의 스와이프(좌측에서 우측으로, 우측에서 좌측으로, 위로 및/또는 아래로), 및/또는 장치(100)와 접촉한 손가락의 롤링(우측에서 좌측으로, 좌측에서 우측으로, 위로 및/또는 아래로)과 같은 제스처를 포함할 수 있다. 일부 실시예에서, 그래픽과의 부적절한 접촉은 그래픽을 선택하지 않을 수 있다. 예를 들어, 선택에 대응하는 제스처가 탭핑일 때, 응용 프로그램 아이콘 위를 지나가는 스와이프 제스처는 대응하는 응용 프로그램을 선택하지 않을 수 있다.
장치(100)는 또한 "홈" 또는 메뉴 버튼(204)과 같은 하나 이상의 실제 버튼을 포함할 수 있다. 앞서 기술한 바와 같이, 메뉴 버튼(204)은 장치(100) 상에서 실행될 수 있는 일련의 응용 프로그램 중 임의의 응용 프로그램(136)으로 이동하는 데 사용될 수 있다. 다른 대안으로서, 일부 실시예에서, 메뉴 버튼은 터치 스크린(112) 내의 GUI에서 소프트 키로서 구현되어 있다.
일 실시예에서 장치(100)는 터치 스크린(112), 메뉴 버튼(204), 장치의 전원을 켜고/끄며 장치를 잠금하는 푸시 버튼(206), 볼륨 조절 버튼(들)(208), SIM(Subscriber Identity Module) 카드 슬롯(210), 헤드셋 잭(212), 및 도킹/충전 외부 포트(124)를 포함한다. 푸시 버튼(206)은 버튼을 누르고 소정의 시간 구간 동안 버튼을 눌러진 상태로 유지함으로써 장치를 켜고/끄는 데, 버튼을 누르고 소정의 시간 구간이 만료되기 전에 버튼을 놓음으로써 장치를 잠금하는 데, 및/또는 장치를 잠금 해제하거나 잠금 해제 프로세스를 시작하는 데 사용될 수 있다. 대안의 실시예에서, 장치(100)는 또한 마이크(113)를 통해 어떤 기능의 활성화 또는 비활성화를 위한 구두 입력을 받을 수 있다.
도 3은 일부 실시예에 따른 예시적인 다기능 장치의 블록도이다. 장치(300)는 휴대용일 필요가 없다. 일부 실시예에서, 장치(300)는 랩톱 컴퓨터, 데스크톱 컴퓨터, 테이블 컴퓨터, 멀티미디어 플레이어 장치, 내비게이션 장치, 교육 장치(아동의 학습 완구 등), 게임 시스템, 또는 제어 장치(예를 들어, 가정용 또는 산업용 제어기)이다. 장치(300)는 통상적으로 하나 이상의 처리 장치(CPU)(310), 하나 이상의 네트워크 또는 기타 통신 인터페이스(360), 메모리(370), 및 이들 구성요소를 상호연결시키는 하나 이상의 통신 버스(320)를 포함한다. 통신 버스(320)는 시스템 구성요소들 간의 통신을 상호연결시키고 제어하는 회로(때때로 칩셋이라고 함)를 포함할 수 있다. 장치(300)는, 일부 실시예에서, 터치 스크린 디스플레이(112)인 디스플레이(340)를 포함하는 입/출력(I/O) 인터페이스(330)를 포함한다. I/O 인터페이스(330)는 또한 키보드 및/또는 마우스(또는 다른 포인팅 장치)(350) 그리고 터치패드(355)를 포함할 수 있다. 메모리(370)는 DRAM, SRAM, DDR RAM과 같은 고속 랜덤 액세스 메모리 또는 다른 랜덤 액세스 고상 메모리 장치를 포함하고, 하나 이상의 자기 디스크 저장 장치, 광 디스크 저장 장치, 플래시 메모리 장치, 또는 기타 비휘발성 고상 저장 장치와 같은 비휘발성 메모리를 포함할 수 있다. 메모리(370)는 선택적으로 CPU(들)(310)로부터 원격지에 위치한 하나 이상의 저장 장치를 포함할 수 있다. 일부 실시예에서, 메모리(370)는 휴대용 다기능 장치(100)(도 1)의 메모리(102)에 저장된 프로그램, 모듈, 및 데이터 구조와 유사한 프로그램, 모듈, 및 데이터 구조, 또는 그의 부분 집합을 저장한다. 게다가, 메모리(370)는 휴대용 다기능 장치(100)의 메모리(102)에 존재하지 않는 부가의 프로그램, 모듈, 및 데이터 구조를 저장할 수 있다. 예를 들어, 장치(300)의 메모리(370)는 그리기 모듈(380), 프레젠테이션 모듈(382), 워드 프로세싱 모듈(384), 웹 사이트 제작 모듈(386), 디스크 저작 모듈(388), 및/또는 스프레드시트 모듈(390)을 저장할 수 있지만, 휴대용 다기능 장치(100)(도 1)의 메모리(102)는 이들 모듈을 저장하고 있지 않을 수 있다.
도 3에서 상기 언급한 요소들 각각은 이전에 언급한 메모리 장치들 중 하나 이상의 메모리 장치에 저장될 수 있다. 이상에 언급한 모듈들 각각은 이상에서 기술한 기능을 수행하는 명령어 집합에 대응한다. 상기 언급한 모듈 또는 프로그램(즉, 명령어 집합)은 별도의 소프트웨어 프로그램, 프로시저 또는 모듈로서 구현될 필요가 없고, 따라서 다양한 실시예에서 이들 모듈의 다양한 부분집합이 결합되거나 다른 방식으로 재배열될 수 있다. 일부 실시예에서, 메모리(370)는 앞서 언급한 모듈 및 데이터 구조의 부분집합을 저장할 수 있다. 게다가, 메모리(370)는 앞서 기술하지 않은 부가의 모듈 및 데이터 구조를 저장할 수 있다.
이제부터 휴대용 다기능 장치(100) 상에서 구현될 수 있는 사용자 인터페이스("UI")의 실시예에 대해 중점적으로 기술한다.
도 4a 및 도 4b는 일부 실시예에 따른, 휴대용 다기능 장치(100) 상의 응용 프로그램의 메뉴에 대한 예시적인 사용자 인터페이스를 나타낸 것이다. 유사한 사용자 인터페이스가 장치(300) 상에 구현될 수 있다. 일부 실시예에서, 사용자 인터페이스(400A)는 다음과 같은 요소, 또는 그의 부분 집합 또는 상위 집합을 포함한다:
Figure 112017040619967-pat00020
셀룰러 및 Wi-Fi 신호와 같은, 무선 통신(들)에 대한 신호 세기 표시기(들)(402),
Figure 112017040619967-pat00021
시간(404),
Figure 112017040619967-pat00022
블루투스 표시기(405),
Figure 112017040619967-pat00023
배터리 상태 표시기(406),
Figure 112017040619967-pat00024
다음과 같은 종종 사용되는 응용 프로그램에 대한 아이콘을 갖는 트레이(408):
o 부재중 전화 또는 음성 메일 메시지의 수의 표시기(414)를 포함할 수 있는 전화(138),
o 읽지 않은 이메일의 수의 표시기(410)를 포함할 수 있는 이메일 클라이언트(140),
o 브라우저(147),
o 음악 플레이어(146), 및
Figure 112017040619967-pat00025
다음과 같은 다른 응용 프로그램에 대한 아이콘:
o IM(141),
o 이미지 관리(144),
o 카메라(143),
o 비디오 플레이어(145),
o 날씨(149-1),
o 주식(149-2),
o 운동 보조(142),
o 달력(148),
o 계산기(149-3),
o 알람 시계(149-4),
o 사전(149-5), 및
o 사용자-생성 위젯(149-6).
일부 실시예에서, 사용자 인터페이스(400B)는 다음과 같은 요소, 또는 그의 부분 집합 또는 상위 집합을 포함한다:
Figure 112017040619967-pat00026
상기한 바와 같은 402, 404, 405, 406, 141, 148, 144, 143, 149-3, 149-2, 149-1, 149-4, 410, 414, 138, 140, 및 147,
Figure 112017040619967-pat00027
지도(154),
Figure 112017040619967-pat00028
메모(153),
Figure 112017040619967-pat00029
이하에서 더 기술하는 바와 같이, 장치(100) 및 그의 다양한 응용 프로그램(136)의 설정에 대한 액세스를 제공하는 설정(412),
Figure 112017040619967-pat00030
아이팟(Apple Computer, Inc.의 상표) 모듈(152)이라고도 하는 비디오 및 음악 플레이어 모듈(152), 및
Figure 112017040619967-pat00031
YouTube(Google, Inc.의 상표) 모듈(155)이라고도 하는 온라인 비디오 모듈(155).
이제부터 터치 스크린 디스플레이를 갖는 다기능 장치[장치(300) 또는 휴대용 다기능 장치(100) 등] 상에서 구현될 수 있는 사용자 인터페이스("UI") 및 관련 프로세스의 실시예에 대해 중점적으로 기술한다.
도 5a 내지 도 5qq는 일부 실시예에 따른, 터치 스크린 디스플레이를 갖는 다기능 장치 상에서 콘텐츠를 선택하는 예시적인 사용자 인터페이스를 나타낸 것이다. 이들 도면에서의 사용자 인터페이스는 도 9a 내지 도 9d, 도 10a 내지 도 10d, 도 11a 내지 도 11c, 도 12 및 도 13a 내지 도 13g와 관련하여 이하에 기술되는 프로세스를 설명하는 데 사용된다.
도 5a 내지 도 5d는 콘텐츠 확대기(508)를 사용하여 편집가능 콘텐츠 내에 삽입 마커(510)를 배치하는 것을 나타낸 것이다. 콘텐츠 확대기는 손가락 접촉(514)의 움직임에 따라 움직인다.
도 5d 내지 도 5k는 "선택" 명령 아이콘(518) 상에서 손가락 제스처를 검출한 것에 응답하여 삽입 마커의 현재 위치와 연관된 편집가능 콘텐츠를 선택하는 것을 나타낸 것이다. 일부 실시예에서, 삽입 마커가 단어 내에(예를 들어, 도 5h 및 도 5i에서 단어 "nation"), 단어의 첫번째 글자에 인접하여(예를 들어, 도 5d 및 도 5e에서 단어 "Four"), 또는 단어의 마지막 글자에 인접하여(예를 들어, 도 5f 및 도 5g에서 단어 "forth") 있는 경우 단어가 선택된다. 일부 실시예에서, 삽입 마커가 현재 단어 내에 또는 단어의 첫번째 또는 마지막 글자에 인접하여 위치하지 않고 문장 이후에 위치하는 경우 가장 가까운 단어 및 임의의 구두점 및/또는 공백이 선택된다(예를 들어, 도 5j 및 도 5k에서 "equal.").
도 5d 및 도 5l은 "모두 선택" 명령 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여 편집가능 콘텐츠 모두를 선택하는 것을 나타내고 있다.
도 5m 및 도 5o는 콘텐츠 확대기(508)를 사용하여 읽기 전용 콘텐츠(538) 내에 위치 마커(546)를 배치하는 것을 나타낸 것이다. 콘텐츠 확대기(508)는 손가락 접촉(550)의 움직임에 따라 움직인다.
도 5p 및 도 5q는 "선택" 명령 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여 읽기 전용 콘텐츠를 선택하는 것을 나타내고 있다. 일부 실시예에서, 선택은 편집가능 콘텐츠에서의 선택과 유사하지만, 확대되지 않은 콘텐츠에 삽입 마커(510)가 디스플레이되지 않는다.
도 5p, 도 5r 및 도 5s는 "모두 선택" 명령 아이콘(520) 상에서 손가락 제스처를 검출한 것에 응답하여 읽기 전용 콘텐츠(538) 모두를 선택하는 것을 나타내고 있다.
도 5t 및 도 5u는 단어 상에서의 두번-탭핑의 한 손가락 제스처로 단어를 선택하는 것을 나타낸 것이다.
도 5v 내지 도 5z는 단어, 텍스트 줄, 문장, 또는 단락을 선택하는 제스처를 나타내고 있다.
도 5aa 내지 도 5cc는 한 손가락에 의한 탭핑 앤 하프 제스처(tap-and-a-half gesture)를 나타내고 있다.
도 5dd 내지 도 5kk는 콘텐츠를 선택하고 선택된 콘텐츠를 증가시키는 두 손가락 제스처(two-finger gesture)를 나타낸 것이다.
도 5ll 내지 도 5nn은 한 손가락에 의한 여백에서 시작된 선택 제스처(margin-initiated selection gesture)를 나타낸 것이다. 도 5oo 내지 도 5qq는 한 손가락에 의한 스와이프로 시작되는 선택 제스처(swipe-initiated selection gesture)를 나타낸 것이다.
도 6a 내지 도 6uu는 일부 실시예에 따른, 선택된 콘텐츠에 대한 명령 디스플레이 영역에 대한 예시적인 사용자 인터페이스를 나타낸 것이다. 이들 도면에서의 사용자 인터페이스는 도 14a 내지 도 14d 및 도 15a 내지 도 15c와 관련하여 이하에 기술되는 프로세스를 설명하는 데 사용된다.
도 6a 및 도 6b는 선택된 콘텐츠를 잘라내기하는 것을 나타내고 있다. 도 6c 내지 도 6j는 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 것을 나타내고 있다.
도 6k는 부가의 명령 옵션을 디스플레이하는 아이콘을 갖는 명령 디스플레이 영역을 나타내고 있다.
도 6l 내지 도 6p는 동작을 실행 취소하는 방법을 나타내고 있다.
도 6q 및 도 6r은 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 것을 나타내고 있다.
도 6s 내지 도 6v는 선택된 콘텐츠 내의 전화 번호에 기초하여 동작을 수행하는 인터페이스를 나타내고 있다.
도 6w 및 도 6x는 선택된 콘텐츠 내의 이메일 주소에 기초하여 이메일을 시작하는 것을 나타내고 있다
도 6y 및 도 6z는 선택된 콘텐츠 내의 웹 주소에 기초하여 웹 브라우징을 시작하는 것을 나타내고 있다
도 6aa 및 도 6bb는 선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 것을 나타내고 있다.
도 6cc 내지 도 6oo는 명령 디스플레이 영역이 사라지고 및/또는 다시 나타나게 하는 동작을 나타내고 있다.
도 6pp 내지 도 6uu는 선택된 콘텐츠에 대한 명령 디스플레이 영역의 배치의 변화를 나타내고 있다.
도 7a 내지 도 7e는 일부 실시예에 따른, 콘텐츠 확대기를 사용하여 선택된 콘텐츠의 각각의 끝부분을 선택하는 예시적인 사용자 인터페이스를 나타낸 것이다. 이들 도면에서의 사용자 인터페이스는 도 16a 내지 도 16e와 관련하여 이하에 기술되는 프로세스를 설명하는 데 사용된다.
도 8a 내지 도 8u는 일부 실시예에 따른, 구조화된 전자 문서에서 콘탠츠를 선택하는 예시적인 사용자 인터페이스를 나타낸 것이다. 이들 도면에서의 사용자 인터페이스는 도 17a, 도 17b, 도 18 및 도 19와 관련하여 이하에 기술되는 프로세스를 설명하는 데 사용된다.
도 8a 및 도 8b는 콘텐츠 선택 이전에 콘텐츠 상자를 확대하고 중앙에 오도록 하는 것을 나타내고 있다. 도 8b 내지 도 8e는 제1 콘텐츠 상자를 선택하는 것, 선택을 손가락 제스처에 의해 2개의 상자로 확대하는 것, 및 2개의 상자를 복사하는 것을 나타내고 있다.
도 8f 내지 도 8k는 제1 콘텐츠 상자를 선택하고 선택된 콘텐츠 상자를 손가락 제스처에 의해 확대하는 것을 나타내고 있다.
도 8l 및 도 8m은 콘텐츠 상자를 복사하는 것, 상자를 메모에 붙여넣기하는 것(도 8m) 및 이메일에 붙여넣기하는 것(도 8n 내지 도 8o)을 나타내고 있다.
도 8p 내지 도 8u는 웹 페이지 상에서(도 8p 내지 도 8t) 및 HTML 이메일 메시지에서(도 8u) 하나의 콘텐츠 상자 내의 콘텐츠를 선택하는 것을 나타내고 있다.
도 9a 내지 도 9d는 일부 실시예에 따른, 편집가능 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(900)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(900)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(900)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 편집가능 콘텐츠를 선택하는 직관적 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 제1 배율로 터치 스크린 디스플레이 상에 편집가능 콘텐츠(502)를 디스플레이한다(902)(도 5a). 일부 실시예에서, 편집가능 콘텐츠(502)는 텍스트(예를 들어, 일반 텍스트, 비구조화된 텍스트, 또는 형식 지정된 텍스트)를 포함한다(904).
장치는 편집가능 콘텐츠(502) 상에서 손가락 제스처(504)를 검출한다(906)(도 5a). 일부 실시예에서, 편집가능 콘텐츠 상에서의 손가락 제스처는 누르고 있기(press and hold) 제스처이다(908).
편집가능 콘텐츠(502) 상에서 손가락 제스처(504)를 검출한 것에 응답하여, 장치는, 편집가능 콘텐츠(502)의 적어도 일부를 제1 배율로 계속 디스플레이하면서, 터치 스크린 디스플레이 상의 편집가능 콘텐츠의 일부분(506)(도 5b)을 제1 배율보다 큰 제2 배율로 확장하고 콘텐츠 확대기(content magnifier)를 디스플레이한다(910)(예를 들어, 도 5b에 도시된 바와 같음). 콘텐츠 확대기(508)는 편집가능 콘텐츠의 확장된 부분(506) 및 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에(예를 들어, 도 5b에서 단어 "equal"의 끝에) 있는 삽입 마커(510)를 디스플레이한다.
일부 실시예에서, 콘텐츠 확대기에 디스플레이된 편집가능 콘텐츠의 확장된 부분(506)은 동시에 디스플레이된 적어도 3개의 수평 텍스트 줄의 일부분을 포함한다(912)(예를 들어, 도 5o에 도시된 것과 유사함).
일부 실시예에서, 콘텐츠 확대기(508)는 소정의 형상(예를 들어, 도 5b에서 원)을 가진다(914).
일부 실시예에서, 삽입 마커(510)는 커서, 삽입 막대(insertion bar), 또는 삽입 점(insertion point)이다(916).
장치는 터치 스크린 디스플레이를 가로지르는 손가락 접촉(514)의 움직임(예를 들어, 도 5b의 512)을 검출한다(918). 일부 실시예에서, [예를 들어, 손가락 제스처(504)(도 5a)가 "누르고 있기" 제스처일 때] 손가락 접촉(514)은 손가락 제스처의 일부이다(920).
장치는 콘텐츠 확대기(508)를 움직여 손가락 접촉(514)의 검출된 움직임(512)에 따라 편집가능 콘텐츠의 확장된 부분(506)을 변경한다(922)(예를 들어, 도 5b 및 도 5c에 도시된 바와 같음).
장치는 손가락 접촉의 검출된 움직임에 따라 삽입 마커(510)를 제1 위치로부터 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로(예를 들어, 도 5b에서 단어 "equal"의 끝으로부터 도 5c에서 단어 "Four"의 시작으로) 움직인다(924).
장치는 삽입 마커(510)가 편집가능 콘텐츠의 확장된 부분(506) 내의 제2 위치에(예를 들어, 도 5c에서 단어 "Four"의 시작에) 위치하는 동안 손가락 접촉(514)의 해제를 검출한다(926).
손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기(508) 및 편집가능 콘텐츠의 확장된 부분(506)을 디스플레이하는 것을 중단하고 제1 배율의 편집가능 콘텐츠 내의 현재 위치에(예를 들어, 도 5d에서 단어 "Four"의 시작에) 삽입 마커(510)를 디스플레이하며 - 현재 위치는 편집가능 콘텐츠의 확장된 부분 내에서의 제2 위치에 대응함 -, 삽입 마커에 인접하여 제1 명령 디스플레이 영역(516)을 디스플레이한다(928)(예를 들어, 도 5d에 도시된 바와 같음). 제1 명령 디스플레이 영역(516)은 삽입 마커(510)의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘[예를 들어, 도 5d에서 "선택" 아이콘(518)]을 포함한다.
일부 실시예에서, 손가락 접촉(514)의 해제를 검출한 것에 응답하여, 장치는 편집가능 콘텐츠의 확장된 부분(506)이 제1 배율의 편집가능 콘텐츠 내의 현재 위치에 있는 삽입 마커(510) 내로 축소되는 애니메이션을 디스플레이한다(930).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 편집가능 콘텐츠 모두를 선택하는 아이콘[예를 들어, 도 5d에서 "모두 선택" 아이콘(520)]을 포함한다(932).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 부가의 명령 옵션을 디스플레이하는 아이콘[도시되어 있지는 않지만 도 6k의 ". . ." 아이콘(602)과 유사함]을 포함한다(934).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 이전의 동작을 실행 취소하는 아이콘[도시되어 있지는 않지만 도 6n의 "실행 취소" 아이콘(604)과 유사함]을 포함한다(936).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 이전의 동작을 다시 실행하는 아이콘[도시되어 있지는 않지만 도 6n의 "다시 실행" 아이콘(605)과 유사함]을 포함한다(938).
일부 실시예에서, 제1 명령 디스플레이 영역(516) 내의 아이콘은 사용자 구성가능한(user configurable) 적어도 하나의 명령을 포함한다(940).
일부 실시예에서, 제1 명령 디스플레이 영역(516) 내의 아이콘은 컨텍스트 기반(context sensitive)인 적어도 하나의 명령을 포함한다(942).
일부 실시예에서, 편집가능 콘텐츠(502)가 제1 응용 프로그램 내에서 디스플레이되고, 제1 명령 디스플레이 영역(516) 내의 아이콘은 소정의 응용 프로그래밍 인터페이스를 통해 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하는 적어도 하나의 명령을 포함한다(944).
일부 실시예에서, 장치는 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처[예를 들어, 도 5d에서 "선택" 아이콘(518) 상에서의 탭핑 제스처(522)]를 검출한다(946). 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 제1 명령 디스플레이 영역(516)을 디스플레이하는 것을 중단하고 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택한다. 일부 실시예에서, 삽입 마커가 단어 내에(예를 들어, 도 5h 및 도 5i에서 단어 "nation"), 단어의 첫번째 글자에 인접하여(예를 들어, 도 5d 및 도 5e에서 단어 "Four"), 또는 단어의 마지막 글자에 인접하여(도 5f 및 도 5g에서 단어 "forth") 있는 경우 단어가 선택된다. 일부 실시예에서, 삽입 마커(510)가 현재 단어 내에 또는 단어의 첫번째 또는 마지막 글자에 인접하여 위치하지 않고 문장 이후에 위치하는 경우 가장 가까운 단어 및 임의의 구두점 및/또는 공백이 선택된다(예를 들어, 도 5j 및 도 5k에서 "equal.").
일부 실시예에서, 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 선택된 콘텐츠(524)의 각각의 끝부분에 시작점 객체(start-point object)(526) 및 끝점 객체(end-point object)(528)를 디스플레이한다(948)(도 5e). 예를 들어, "선택" 아이콘(518) 상에서 탭핑 제스처(522)를 검출한 것(도 5d)에 응답하여, 장치는 선택된 단어 "Four"의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5e).
일부 실시예에서, 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 선택된 콘텐츠에 인접하여 제2 명령 디스플레이 영역을 디스플레이한다(950)[예를 들어, 제2 명령 디스플레이 영역(530)이 도 5e에서 선택된 단어 "Four"에 인접해 있다]. 제2 명령 디스플레이 영역(530)은 선택된 콘텐츠를 잘라내기하는 아이콘 및 선택된 콘텐츠를 복사하는 아이콘을 포함한다[예를 들어, 도 5e에서 "잘라내기" 아이콘(532) 및 "복사" 아이콘(534)].
일부 실시예에서, 제2 명령 디스플레이 영역(530)은 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘[예를 들어, 도 5e에서 "붙여넣기" 아이콘(536)]을 포함한다(952).
일부 실시예에서, 제2 명령 디스플레이 영역은 이전의 동작을 실행 취소하는 아이콘[예를 들어, 도 6n의 "실행 취소" 아이콘(604)]을 포함한다(954).
일부 실시예에서, 제2 명령 디스플레이 영역은 부가의 명령 옵션을 디스플레이하는 아이콘[예를 들어, 도 6k의 ". . ." 아이콘(602)]을 포함한다(956).
일부 실시예에서, 제2 명령 디스플레이 영역은 이전의 동작을 다시 실행하는 아이콘[예를 들어, 도 6n의 "다시 실행" 아이콘(605)]을 포함한다(958).
일부 실시예에서, 제2 명령 디스플레이 영역 내의 아이콘은 사용자 구성가능한 적어도 하나의 명령을 포함한다(960).
일부 실시예에서, 제2 명령 디스플레이 영역 내의 아이콘은 컨텍스트 기반인 적어도 하나의 명령을 포함한다(962).
일부 실시예에서, 편집가능 콘텐츠가 제1 응용 프로그램 내에서 디스플레이되고, 제2 명령 디스플레이 영역 내의 아이콘은 소정의 응용 프로그래밍 인터페이스를 통해 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하는 적어도 하나의 명령을 포함한다(964).
제2 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
도 10a 내지 도 10d는 일부 실시예에 따른, 읽기 전용 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(1000)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1000)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1000)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 읽기 전용 콘텐츠를 선택하는 직관적 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 제1 배율로 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠(538)를 디스플레이한다(1002)(도 5m). 일부 실시예에서, 읽기 전용 콘텐츠(538)는 텍스트(예를 들어, 일반 텍스트, 비구조화된 텍스트, 형식지정된 또는 웹 페이지에서의 텍스트)를 포함한다(1004).
장치는 읽기 전용 콘텐츠 상에서 손가락 제스처(540)를 검출한다(1006)(도 5m). 일부 실시예에서, 읽기 전용 콘텐츠 상에서의 손가락 제스처는 누르고 있기(press and hold) 제스처이다(1008).
읽기 전용 콘텐츠(538) 상에서 손가락 제스처(540)를 검출한 것에 응답하여, 장치는, 읽기 전용 콘텐츠(538)의 적어도 일부를 제1 배율로 계속 디스플레이하면서, 터치 스크린 디스플레이 상의 읽기 전용 콘텐츠의 일부분(544)을 제1 배율보다 큰 제2 배율로 확장하고 콘텐츠 확대기를 디스플레이한다(1010)(예를 들어, 도 5n에 도시된 바와 같음). 콘텐츠 확대기(508)는 읽기 전용 콘텐츠의 확장된 부분(544) 및 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에(예를 들어, 도 5n에서 단어 "earth"의 중간에) 있는 위치 마커(546)를 디스플레이한다.
일부 실시예에서, 콘텐츠 확대기에 디스플레이된 읽기 전용 콘텐츠의 확장된 부분(544)은 동시에 디스플레이된 적어도 3개의 수평 텍스트 줄의 일부분을 포함한다(1012)(예를 들어, 도 5o에 도시된 바와 같음).
일부 실시예에서, 콘텐츠 확대기(508)는 소정의 형상(예를 들어, 도 5n에서 원)을 가진다(1014).
읽기 전용 콘텐츠의 경우, 삽입 마커(510)는 기존의 (읽기 전용) 콘텐츠를 수정하는 프로세스에서가 아니라 (예를 들어, 복사하기 위해) 기존의 읽기 전용 콘텐츠를 선택하는 프로세스에서 사용되는 위치 마커(546)로 된다.
장치는 터치 스크린 디스플레이를 가로지르는 손가락 접촉(550)의 움직임(예를 들어, 도 5n의 548)을 검출한다(1016). 일부 실시예에서, [예를 들어, 손가락 제스처(540)가 "누르고 있기" 제스처일 때] 손가락 접촉(550)은 손가락 제스처의 일부이다(1018).
장치는 콘텐츠 확대기(508)를 움직여 손가락 접촉(550)의 검출된 움직임(548)에 따라 읽기 전용 콘텐츠의 확장된 부분(544)을 변경한다(1020).
장치는 손가락 접촉의 검출된 움직임에 따라 위치 마커(546)를 제1 위치로부터 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로(예를 들어, 도 5n에서 단어 "earth"의 중간으로부터 도 5o에서 단어 "nation"의 중간으로) 움직인다(1022).
장치는 위치 마커(546)가 읽기 전용 콘텐츠의 확장된 부분(544) 내의 제2 위치에(예를 들어, 도 5o에서 단어 "nation"의 중간에) 위치하는 동안 손가락 접촉(550)의 해제를 검출한다(1024).
손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기(508), 읽기 전용 콘텐츠의 확장된 부분(544), 및 위치 마커(546)를 디스플레이하는 것을 중단하고, 제1 배율의 읽기 전용 콘텐츠에서의 현재 위치에 인접하여 제1 명령 디스플레이 영역(516)을 디스플레이한다(1026). 현재 위치는 읽기 전용 콘텐츠의 확장된 부분 내에서의 제2 위치(예를 들어, 도 5p에서 단어 "nation"의 중간)에 대응한다. 제1 명령 디스플레이 영역(516)은 현재 위치와 연관된 콘텐츠를 선택하는 아이콘[예를 들어, 도 5p에서 "선택" 아이콘(518)]을 포함한다.
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 읽기 전용 콘텐츠 모두를 선택하는 아이콘[예를 들어, 도 5p에서 "모두 선택" 아이콘(520)]을 포함한다(1028).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 부가의 명령 옵션을 디스플레이하는 아이콘[도시되어 있지는 않지만 도 6k의 ". . ." 아이콘(602)과 유사함]을 포함한다(1030).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 이전의 동작을 실행 취소하는 아이콘[도시되어 있지는 않지만 도 6n의 "실행 취소" 아이콘(604)과 유사함]을 포함한다(1032).
일부 실시예에서, 제1 명령 디스플레이 영역(516)은 이전의 동작을 다시 실행하는 아이콘[도시되어 있지는 않지만 도 6n의 "다시 실행" 아이콘(605)과 유사함]을 포함한다(1034).
일부 실시예에서, 제1 명령 디스플레이 영역(516) 내의 아이콘은 사용자 구성가능한 적어도 하나의 명령을 포함한다(1036).
일부 실시예에서, 제1 명령 디스플레이 영역(516) 내의 아이콘은 컨텍스트 기반인 적어도 하나의 명령을 포함한다(1038).
일부 실시예에서, 읽기 전용 콘텐츠(538)가 제1 응용 프로그램 내에서 디스플레이되고, 제1 명령 디스플레이 영역(516) 내의 아이콘은 소정의 응용 프로그래밍 인터페이스를 통해 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하는 적어도 하나의 명령을 포함한다(1040).
일부 실시예에서, 장치는 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처[예를 들어, 도 5p에서 "선택" 아이콘(518) 상에서의 탭핑 제스처(552)]를 검출한다(1042). 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 제1 명령 디스플레이 영역(516)을 디스플레이하는 것을 중단하고 현재 위치와 연관된 콘텐츠를 선택한다. 일부 실시예에서, 현재 위치가 단어 내에(예를 들어, 도 5p 및 도 5q에서 단어 "nation"), 단어의 첫번째 글자에 인접하여, 또는 단어의 마지막 글자에 인접하여 있는 경우 단어가 선택된다. 일부 실시예에서, 현재 위치가 단어 내에 또는 단어의 첫번째 또는 마지막 글자에 인접하여 위치하지 않고 문장 이후에 있는 경우 가장 가까운 단어 및 임의의 구두점 및/또는 공백이 선택된다. 일부 실시예에서, 이러한 콘텐츠 선택은 편집가능 콘텐츠에 대해 전술한 바와 유사하지만, 콘텐츠가 읽기 전용 콘텐츠이기 때문에 삽입 마커(510)가 디스플레이되지 않는다.
일부 실시예에서, 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 선택된 콘텐츠(524)의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1044). 예를 들어, "선택" 아이콘(518) 상에서 탭핑 제스처(552)를 검출한 것(도 5p)에 응답하여, 장치는 선택된 단어 "nation"의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5q).
일부 실시예에서, 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 선택된 콘텐츠에 인접하여 제2 명령 디스플레이 영역을 디스플레이한다(1046)[예를 들어, 제2 명령 디스플레이 영역(530)이 도 5q에서 선택된 단어 "nation"에 인접해 있다]. 제2 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5q에서 "복사" 아이콘(534)]을 포함한다.
제2 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 동일한 콘텐츠가 응용 프로그램의 컨텍스트 또는 모드에 따라 편집가능하거나 읽기 전용일 수 있고, 이 경우에 콘텐츠를 처음으로 선택하는 방법이 그에 따라[예를 들어, 방법(900)에서 방법(1000)으로] 변한다. 예를 들어, 메모 응용 프로그램(153)에서의 콘텐츠가 도 5a 내지 도 5l에서는 편집가능한 반면, 메모 응용 프로그램(153)에서의 콘텐츠가 도 5m 내지 도 5q에서는 읽기 전용이다. "완료" 아이콘(도 5a)의 활성화에 응답하여 메모 응용 프로그램(153)에서의 읽기 전용 모드에 들어갈 수 있는 반면, "+" 아이콘(도 5m)의 활성화에 응답하여 또는 읽기 전용 콘텐츠(538) 상에서의 제스처(예를 들어, 탭핑 제스처)에 의해 편집 모드에 들어갈 수 있다.
도 11a 내지 도 11c는 일부 실시예에 따른, 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(1100)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1100)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1100)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 콘텐츠를 선택하는 직관적 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이한다(1102). 일부 실시예에서, 콘텐츠는 텍스트(예를 들어, 일반 텍스트, 비구조화된 텍스트, 형식지정된 또는 웹 페이지에서의 텍스트)를 포함한다(1103). 콘텐츠는 편집가능(502)이거나 읽기 전용(538)일 수 있다.
장치는 콘텐츠 상에서 손가락 제스처를 검출한다(1104)[예를 들어, 도 5a의 제스처(504)]. 일부 실시예에서, 콘텐츠 상에서의 손가락 제스처는 누르고 있기(press and hold) 제스처이다(1106).
콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서, 터치 스크린 디스플레이 상의 콘텐츠의 일부분(506)을 제1 배율보다 큰 제2 배율로 확장하고 콘텐츠 확대기를 디스플레이한다(1108)(예를 들어, 도 5b에 도시된 바와 같음). 콘텐츠 확대기(508)는 콘텐츠의 확장된 부분(506) 및 콘텐츠의 확장된 부분 내의 제1 위치에(예를 들어, 도 5b에서 단어 "equal"의 끝에) 있는 삽입 마커(510)를 디스플레이한다.
일부 실시예에서, 콘텐츠 확대기에 디스플레이된 콘텐츠의 확장된 부분은 동시에 디스플레이된 적어도 3개의 수평 텍스트 줄의 일부분을 포함한다(1110)(예를 들어, 도 5o에 도시된 바와 같음).
일부 실시예에서, 콘텐츠 확대기는 소정의 형상(예를 들어, 도 5b에서 원)을 가진다(1112).
일부 실시예에서, 삽입 마커는 커서, 삽입 막대, 또는 삽입 점이다(1114).
장치는 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임(예를 들어, 도 5b의 512)을 검출한다(1116). 일부 실시예에서, [예를 들어, 손가락 제스처(504)(도 5a)가 "누르고 있기" 제스처일 때] 손가락 접촉(514)은 손가락 제스처의 일부이다(1118).
장치는 콘텐츠 확대기(508)를 움직여 손가락 접촉(514)의 검출된 움직임(512)에 따라 콘텐츠의 확장된 부분(506)을 변경한다(1120)(예를 들어, 도 5b 및 도 5c에 도시된 바와 같음).
장치는 손가락 접촉의 검출된 움직임에 따라 삽입 마커(510)를 제1 위치로부터 콘텐츠의 확장된 부분 내의 제2 위치로(예를 들어, 도 5b에서 단어 "equal"의 끝으로부터 도 5c에서 단어 "Four"의 시작으로) 움직인다(1122).
장치는 삽입 마커(510)가 콘텐츠의 확장된 부분(506) 내의 제2 위치에(예를 들어, 도 5c에서 단어 "Four"의 시작에) 위치하는 동안 손가락 접촉(514)의 해제를 검출한다(1124).
손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기(508), 콘텐츠의 확장된 부분(506), 및 삽입 마커(510)를 디스플레이하는 것을 중단하고 삽입 마커의 제2 위치와 연관된 콘텐츠를 선택한다(1126)(예를 들어, 단어 "Four"가 선택되는 경우 도 5e에 도시된 바와 같음). 일부 실시예에서, 삽입 마커가 단어 내에, 단어의 첫번째 글자에 인접하여(예를 들어, 도 5c에서 단어 "Four"), 또는 단어의 마지막 글자에 인접하여 있는 경우 단어가 선택된다. 일부 실시예에서, 삽입 마커(510)가 현재 단어 내에 또는 단어의 첫번째 또는 마지막 글자에 인접하여 위치하지 않고 문장 이후에 위치하는 경우 가장 가까운 단어 및 임의의 구두점 및/또는 공백이 선택된다.
일부 실시예에서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 선택된 콘텐츠(524)의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1128). 예를 들어, 손가락 접촉(514)의 해제를 검출한 것(도 5c)에 응답하여, 장치는 선택된 단어 "Four"의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5e).
일부 실시예에서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 선택된 콘텐츠에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1130)[예를 들어, 명령 디스플레이 영역(530)이 도 5e에서 선택된 단어 "Four"에 인접해 있다]. 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5e에서 "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠의 확장된 부분(506)이 선택된 콘텐츠(524) 내로 축소되는 애니메이션을 디스플레이한다(1132).
도 12는 일부 실시예에 따른 한 손가락에 의한 두번-탭핑 제스처로 단어를 선택하는 방법을 나타낸 흐름도이다. 방법(1200)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다.
이하에서 기술하는 바와 같이, 방법(1200)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 단어를 선택하는 빠르고 쉬운 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이한다(1202). 일부 실시예에서, 콘텐츠는 텍스트(예를 들어, 일반 텍스트, 비구조화된 텍스트, 형식지정된 또는 웹 페이지에서의 텍스트)를 포함한다(1204). 콘텐츠는 편집가능(502)이거나 읽기 전용(538)일 수 있다.
장치는 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한다(1206). 예를 들어, 장치는 도 5t에서 단어 "forth" 상에서 한 손가락에 의한 두번-탭핑 제스처(554)를 검출한다.
콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처(554)를 검출한 것에 응답하여, 장치는 단어를 선택하고, 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다(1208). 예를 들어, 도 5t에서 단어 "forth" 상에서 한 손가락에 의한 두번-탭핑 제스처(554)를 검출한 것에 응답하여, 장치는 "forth"를 선택하고, "forth"의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5u에 도시된 바와 같음).
일부 실시예에서, 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처(554)를 검출한 것에 응답하여, 장치는 단어에 인접하여 명령 디스플레이 영역을 디스플레이한다(1210). 예를 들어, 장치는 도 5u에서 "forth"에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다. 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5u에서 "복사" 아이콘(534)]을 포함한다.
명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다. 삽입 마커(510)를 배치하기 위해 콘텐츠 확대기(508)를 사용할 필요없이, 텍스트의 원하는 부분을 신속하게 선택하기 위해 이하에서 기술되는 다른 콘텐츠 선택 제스처들 중 일부에 대해 방법(1200)과 유사한 방법이 사용될 수 있다.
도 13a 내지 도 13g는 일부 실시예에 따른, 손가락 제스처로 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(1300)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1300)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1300)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 콘텐츠를 선택하는 빠르고 쉬운 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이한다(1302). 일부 실시예에서, 콘텐츠는 텍스트(예를 들어, 일반 텍스트, 비구조화된 텍스트, 형식지정된 또는 웹 페이지에서의 텍스트)를 포함한다(1304). 콘텐츠는 편집가능(502)이거나 읽기 전용(538)일 수 있다.
장치는 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출한다(1306).
장치는 터치 스크린 디스플레이 상에서 하나 이상의 손가락에 의해 행해지는 제스처를 인식한다(1308). 제스처는 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 소정의 제스처 중 하나의 제스처이다.
장치는 제스처를 인식한 것에 응답하여 콘텐츠에 대해 동작을 수행한다(1310).
일부 실시예에서, 동작을 수행하는 것은, 제스처를 인식한 것에 응답하여, 콘텐츠의 적어도 일부분을 선택하고 선택된 콘텐츠(524)의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이하는 것을 포함한다(1312).
일부 실시예에서, 동작을 수행하는 것은, 제스처를 인식한 것에 응답하여, 콘텐츠의 적어도 일부분을 선택하고 선택된 콘텐츠에 인접하여 명령 디스플레이 영역(530)을 디스플레이하는 것을 포함한다(1314). 명령 디스플레이 영역(530)은 각각의 명령에 대응하는 하나 이상의 아이콘을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 콘텐츠 내의 제1 위치에서의 한 손가락에 의한 한번-탭핑 제스처(single-tap gesture)이다(1316). 콘텐츠 내의 제1 위치에서의 한 손가락에 의한 한번-탭핑 제스처를 인식한 것에 응답하여, 장치는 콘텐츠 내의 제1 위치에 삽입 마커(510)를 디스플레이한다.
일부 실시예에서, 제스처는 콘텐츠 내의 제1 단어 상에서의 한 손가락에 의한 소정의 횟수의 연속적인 탭핑(예를 들어, 두번-탭핑 제스처)이다(1318). 콘텐츠 내의 제1 단어 상에서 한 손가락에 의한 소정의 횟수의 연속적인 탭핑을 인식한 것에 응답하여, 장치는 제1 단어를 선택하고, 제1 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다. 예를 들어, 단어 "nation" 상에서 두번-탭핑 제스처(566)(도 5v)를 인식한 것에 응답하여, 장치는 단어 "nation"을 선택하고, "nation"의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5w). 일부 실시예에서, 콘텐츠 내의 제1 단어 상에서 한 손가락에 의한 소정의 횟수의 연속적인 탭핑을 인식한 것에 응답하여, 장치는 제1 단어에 인접하여 명령 디스플레이 영역(530)(도 5w)을 디스플레이한다(1320). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5w에서 "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 콘텐츠 내의 문장 상에서의 한 손가락에 의한 소정의 횟수의 연속적인 탭핑(예를 들어, 세번-탭핑 제스처)이다(1322). 일부 실시예에서, 제스처는 콘텐츠 내의 단일 텍스트 줄 상에서의 제스처이다. 콘텐츠 내의 문장(또는 단일 텍스트 줄) 상에서 한 손가락에 의한 소정의 횟수의 연속적인 탭핑을 인식한 것에 응답하여, 장치는 문장(또는 단일 텍스트 줄)을 선택하고, 문장(또는 단일 텍스트 줄)의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다. 예를 들어, 문장 상에서 세번-탭핑 제스처(562)를 인식한 것(도 5v)에 응답하여, 장치는 문장을 선택하고, 문장의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5x). 다른 대안으로서, 단일 텍스트 줄 상에서 세번-탭핑 제스처(564)를 인식한 것(도 5v)에 응답하여, 장치는 단일 텍스트 줄을 선택하고, 단일 텍스트 줄의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5y). 일부 실시예에서, 콘텐츠 내의 문장(또는 단일 텍스트 줄) 상에서 한 손가락에 의한 소정의 횟수의 연속적인 탭핑을 인식한 것에 응답하여, 장치는 문장(또는 단일 텍스트 줄)에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1324). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5x 또는 도 5y에서 "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 콘텐츠 내의 단락 상에서의 한 손가락에 의한 소정의 횟수의 연속적인 탭핑(예를 들어, 네번-탭핑 제스처)이다(1326). 콘텐츠 내의 단락 상에서 한 손가락에 의한 소정의 횟수의 연속적인 탭핑을 인식한 것에 응답하여, 장치는 단락을 선택하고, 단락의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다. 예를 들어, 단락 상에서 네번-탭핑 제스처(566)를 인식한 것(도 5v)에 응답하여, 장치는 단락을 선택하고, 단락의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5z). 일부 실시예에서, 콘텐츠 내의 단락 상에서 한 손가락에 의한 소정의 횟수의 연속적인 탭핑을 인식한 것에 응답하여, 장치는 단락에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1328). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5z에서 "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 콘텐츠 내의 제1 위치에서의 한 손가락에 의한 정지해 있는(또는 실질적으로 정지해 있는) 누름 제스처(pressing gesture)이다(1330). 예를 들어, 소정의 기간(예를 들어, 1~2mm) 동안 소정의 양(예를 들어, 0.2~0.5초)보다 적게 움직이는 한 손가락 접촉은 정지해 있는 누름 제스처(stationary pressing gesture)[누르고 있기 제스처라고도 함]이다[예를 들어, 도 5a의 제스처(504)]. 콘텐츠가 제1 배율로 디스플레이된다. 콘텐츠 내의 제1 위치에서 한 손가락에 의한 정지해 있는 누름 제스처를 인식한 것에 응답하여, 장치는, 콘텐츠의 적어도 일부를 제1 배율로 계속 디스플레이하면서, 터치 스크린 디스플레이 상의 제1 위치에 근접해 있는 콘텐츠의 일부분(506)을 제1 배율보다 큰 제2 배율로 확장하고 콘텐츠 확대기(508)를 디스플레이한다(도 5b). 콘텐츠 확대기는 콘텐츠의 확장된 부분(506) 및 제1 위치에 대응하는 콘텐츠의 확장된 부분 내의 위치에 있는 삽입 마커(510)를 디스플레이한다. 일부 실시예에서, 장치는 터치 스크린 디스플레이를 가로지르는 한 손가락의 움직임(예를 들어, 도 5b의 512)을 검출하고, 콘텐츠 확대기(508)를 움직여 한 손가락의 검출된 움직임에 따라 콘텐츠의 확장된 부분(506)을 변경하며, 한 손가락의 검출된 움직임에 따라 콘텐츠의 확장된 부분 내의 제2 위치로 삽입 마커(510)를 움직인다(1332).
일부 실시예에서, 제스처는 한 손가락에 의한 탭핑 앤 하프(tap-and-a-half) 제스처이다(1334). 탭핑 앤 하프 제스처는 한번 탭핑 직후에(예를 들어, 0.3-0.5초와 같은 소정의 기간 내에) 손가락 접촉(558)(도 5aa)이 이어서 터치 스크린 디스플레이 상에서 움직이는[예를 들어, 도 5aa에서의 움직임(560)] 것을 포함하는 한 손가락 제스처(single-finger gesture)이다. 한 손가락에 의한 탭핑 앤 하프 제스처를 인식한 것에 응답하여, 장치는 콘텐츠의 일부분을 선택한다(예를 들어, 콘텐츠 내의 단어를 선택한다). 일부 실시예에서, 처음에 선택된 부분은 터치 스크린 디스플레이 상에서의 한번-탭핑의 위치에 따른다(예를 들어, 한번-탭핑에 위치하거나 그에 근접하여 위치하는 단어를 선택하는 것). 일부 실시예에서, 처음에 선택된 부분은 손가락 접촉의 초기 위치에 따른다(예를 들어, 도 5aa에서 단어 "nation"과 같은, 한번-탭핑 이후에 손가락 접촉의 초기 위치에 위치하거나 그에 근접하여 위치하는 단어를 선택하는 것). 한 손가락에 의한 탭핑 앤 하프 제스처를 인식한 것에 응답하여, 장치는 터치 스크린 디스플레이 상에서의 손가락 접촉(558)의 검출된 움직임에 따라 콘텐츠의 선택된 부분을 업데이트한다 [예를 들어, 도 5aa 및 도 5bb에 도시된 바와 같이, 선택된 부분(524)을 증가시킴]. 일부 실시예에서, 한 손가락에 의한 탭핑 앤 하프 제스처를 인식한 것에 응답하여, 장치는 콘텐츠(524)의 업데이트된 선택된 부분의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1336). 일부 실시예에서, 터치 스크린 디스플레이 상에서의 손가락 접촉의 검출된 움직임에 따라 콘텐츠의 선택된 부분을 업데이트하는 것은 장치가 콘텐츠의 선택된 부분의 한쪽 끝을 콘텐츠 내의 고정 위치에 유지하면서 터치 스크린 디스플레이 상에서의 손가락 접촉의 검출된 움직임에 따라 콘텐츠의 선택된 부분의 다른쪽 끝을 움직이는 것을 포함한다(1338). 예를 들어, 도 5aa 및 도 5bb에 나타낸 바와 같이, 콘텐츠의 선택된 부분의 시작 부분이 고정된 채로 있으면서, 손가락 접촉이 디스플레이 상에서 텍스트를 지나 앞으로 움직임에 따라 콘텐츠의 선택된 부분의 끝부분이 증가될 수 있다. 이와 달리, 콘텐츠의 선택된 부분의 끝부분이 고정된 채로 있으면서, 손가락 접촉이 디스플레이 상에서 텍스트를 지나 뒤로 움직임에 따라 콘텐츠의 선택된 부분의 시작부가 증가될 수 있다. 일부 실시예에서, 시작점 객체(526) 및 끝점 객체(528)는 콘텐츠(524)의 업데이트된 선택된 부분의 그 각각의 끝부분에 따라 움직이는 것으로 디스플레이된다. 일부 실시예에서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠(524)(도 5cc)의 업데이트된 선택된 부분에 인접하여 명령 디스플레이 영역(530)(도 5cc)을 디스플레이한다(1340). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5cc에서 "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 콘텐츠 내의 단락 상에서 두 손가락(예를 들어, 도 5v에서 568 및 570)에 의한 한번-탭핑 제스처이다(1342). 콘텐츠 내의 단락 상에서 두 손가락에 의한 한번-탭핑 제스처를 인식한 것에 응답하여, 장치는 콘텐츠 내의 단락을 선택하고, 단락의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다(도 5z에 도시된 바와 같음). 일부 실시예에서, 장치는, 단락보다는, 문장 또는 텍스트의 다른 소정의 부분을 선택한다. 일부 실시예에서, 콘텐츠 내의 단락 상에서 두 손가락에 의한 한번-탭핑 제스처를 인식한 것에 응답하여, 장치는 단락에 인접하여 명령 디스플레이 영역(530)(도 5z)을 디스플레이한다(1344). 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 5z에서 "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 콘텐츠 내의 제1 위치에서의 제1 손가락에 의한 접촉(572)(도 5dd) 및 콘텐츠 내의 제2 위치에서의 제2 손가락에 의한 동시 접촉(574)(도 5dd)을 포함하는 두 손가락에 의한 정지해 있는(또는 실질적으로 정지해 있는) 누름 제스처이다(1346). 예를 들어, 각각의 두 손가락 접촉은 소정의 시간(예를 들어, 0.4 초) 내에 소정의 양(예를 들어, 1-3 mm) 미만으로 움직인다. 두 손가락에 의해 정지해 있는 누름 제스처를 인식한 것에 응답하여, 장치는 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하고, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠(524)의 선택된 부분의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(도 5dd).
일부 실시예에서, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택한 후에(1347), 장치는 제1 손가락에 의한 접촉(572)(도 5ee)의 움직임을 검출하고, 제1 손가락에 의한 접촉의 검출된 움직임에 따라 콘텐츠의 선택된 부분을 업데이트하며(도 5ee), 제2 손가락에 의한 접촉(574)(도 5ff)의 움직임을 검출하고, 제2 손가락에 의한 접촉의 검출된 움직임에 따라 콘텐츠의 선택된 부분을 업데이트하며(도 5gg), 콘텐츠(524)의 업데이트된 선택된 부분의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1348)(도 5hh).
일부 실시예에서, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택한 후에, 장치는 적어도 소정의 기간 동안 두 손가락(예를 들어, 도 5ii의 576 및 578)에 의한 정지해 있는 누름 제스처를 계속하여 검출한다(1350). 예를 들어, 장치는 적어도 추가의 0.6초 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한다. 적어도 소정의 기간 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여, 장치는 콘텐츠의 선택된 부분을, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 부분을 포함하는 문장으로 증가시키고, 문장의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다(도 5jj).
일부 실시예에서, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택한 후에, 장치는 적어도 소정의 기간 동안 두 손가락(예를 들어, 도 5ii의 576 및 578)에 의한 정지해 있는 누름 제스처를 계속하여 검출한다(1352). 예를 들어, 장치는 적어도 추가의 0.6초 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한다. 적어도 소정의 기간 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여, 장치는 콘텐츠의 선택된 부분을, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 부분을 포함하는 단락으로 증가시키고, 단락의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다(도 5kk).
일부 실시예에서, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택한 후에, 장치는 적어도 소정의 기간 동안 두 손가락(예를 들어, 도 5ii의 576 및 578)에 의한 정지해 있는 누름 제스처를 계속하여 검출한다(1354). 예를 들어, 장치는 적어도 추가의 0.6초 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한다. 적어도 소정의 기간 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여, 장치는 콘텐츠 모두를 선택하고, 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다.
일부 실시예에서, 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택한 후에, 장치는 일련의(또는 복수의) 소정의 기간 동안 두 손가락(예를 들어, 도 5ii의 576 및 578)에 의한 정지해 있는 누름 제스처를 계속하여 검출한다(1356). 일련의 소정의 기간 내의 각각의 기간 동안 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여, 장치는 콘텐츠의 선택된 부분을 증가시키고, 콘텐츠의 증가된 선택된 부분의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다(예를 들어, 도 5ii에서 도 5jj, 도 5kk로). 콘텐츠의 증가된 선택된 부분은 제1 위치와 제2 위치 사이에 위치하는 콘텐츠의 부분을 포함한다.
일부 실시예에서, 두 손가락(예를 들어, 576 및 578)의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠(524)의 선택된 부분에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1358). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, "복사" 아이콘(530)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
일부 실시예에서, 제스처는 한 손가락에 의한 여백에서 시작된 선택 제스처(margin-initiated selection gesture)이다(1360). 여백에서 시작된 선택 제스처는 콘텐츠에서의 단어(예를 들어, 도 5ll에서의 단어 "dedicated")에 인접한 여백에서의 초기 손가락 접촉[예를 들어, 도 5ll의 손가락-아래로 이벤트(finger-down event)(580)] 및 그에 뒤이은 콘텐츠 내의 위치로의 손가락 접촉의 움직임[예를 들어, 단어 또는 단어의 일부분을 가로지르는 손가락 접촉(580)(도 5ll)의 움직임(582)]을 포함하는 한 손가락 제스처이다. 한 손가락에 의한 여백에서 시작된 선택 제스처를 인식한 것에 응답하여, 장치는 콘텐츠의 일부분을 선택하고 - 단어에서 콘텐츠의 선택된 부분이 시작하거나 끝남 (예를 들어, 도 5ll에서의 단어 "dedicated"에서 선택된 부분이 시작됨)-, 콘텐츠 내의 위치로의 손가락 접촉의 움직임(582)에 따라 콘텐츠의 선택된 부분을 업데이트한다. 일부 실시예에서, 한 손가락에 의한 여백에서 시작된 선택 제스처를 인식한 것에 응답하여, 장치는 콘텐츠의 업데이트된 선택된 부분의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이한다(1362)(도 5nn). 일부 실시예에서, 장치는 또한 업데이트 동안에 시작점 객체 및 끝점 객체를 디스플레이한다(도 5mm). 일부 실시예에서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠(524)의 업데이트된 선택된 부분에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1364)(도시 생략). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
콘텐츠가 터치 스크린 디스플레이 상에서 수평이 아니라 수직으로 스크롤하도록 구성되어 있는 일부 실시예에서, 제스처는 한 손가락에 의한 스와이프로 시작되는 선택 제스처(swipe-initiated selection gesture)이다(1366). 스와이프로 시작되는 선택 제스처는 (1) 처음에 콘텐츠 내의 제1 위치(예를 들어, 도 5oo의 단어 "brought")에 있는 손가락 접촉[예를 들어, 도 5oo의 손가락-아래로 이벤트(584)] - 손가락 접촉은 처음에 터치 스크린 디스플레이 상에서 수평축으로부터 소정의 각도 내의(예를 들어, 수평축으로부터 5°- 30°내의) 방향으로 움직임 -, 및 (2) 콘텐츠 내의 제2 위치로의 손가락 접촉의 움직임[예를 들어, 도 5oo의 움직임(586)]을 포함하는 한 손가락 제스처이다. 일부 실시예에서, 손가락 접촉(584)은 처음에 타임아웃 기간 만료 이전에 소정의 수의 단위의 움직임을 움직인다(예를 들어, 1.5초 내에 3.2 mm). 일부 실시예에서, 손가락 접촉이 소정의 임계 초기 속도(threshold initial speed)(예를 들어, 2 mm/sec)를 초과하는 초기 속도로 움직인다. 한 손가락에 의한 스와이프로 시작되는 선택 제스처를 인식한 것에 응답하여, 장치는 콘텐츠의 일부분을 선택하고 - 제1 위치에서 콘텐츠의 선택된 부분이 시작하거나 끝남 (예를 들어, 도 5oo에서의 단어 "brought"에서 선택된 부분이 시작됨)-, 콘텐츠 내의 제2 위치로의 손가락 접촉(584)의 움직임에 따라 콘텐츠의 선택된 부분(524)을 업데이트한다(도 5pp). 일부 실시예에서, 장치는 콘텐츠의 업데이트된 선택된 부분(524)의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1368)(도 5qq). 일부 실시예에서, 장치는 또한 업데이트 동안에 시작점 객체 및 끝점 객체를 디스플레이한다(도 5pp). 일부 실시예에서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠의 업데이트된 선택된 부분(524)에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1370)(도시 생략). 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, "복사" 아이콘(534)]을 포함한다. 명령 디스플레이 영역(530)은 도 6a 내지 도 6bb와 관련하여 이하에서 논의되는 아이콘들 중 하나 이상의 아이콘을 포함할 수 있다.
도 14a 내지 도 14d는 일부 실시예에 따른, 선택된 콘텐츠에 대한 명령 디스플레이 영역을 사용하는 방법을 나타낸 흐름도이다. 방법(1400)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1400)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1400)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 선택된 콘텐츠와 상호작용하기 위해 명령 디스플레이 영역을 사용하는 직관적 방식을 제공한다. 이 방법은 선택된 콘텐츠에 대한 명령을 효율적으로 디스플레이하고 활성화한다. 이 방법은 또한 명령 디스플레이 영역을 필요할 때 나타나게 하고 더 이상 필요하지 않을 때 사라지게 한다. 이 방법은 선택된 콘텐츠와 상호작용할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 선택된 콘텐츠와 보다 빠르고 보다 효율적으로 상호작용할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 터치 스크린 디스플레이 상에 콘텐츠[예를 들어, 편집가능 콘텐츠(502) 또는 읽기 전용 콘텐츠(538)]를 디스플레이한다(1402). 디스플레이된 콘텐츠는 선택된 콘텐츠(524)(예를 들어, 터치 스크린 디스플레이 상에서의 사용자에 의한 하나 이상의 터치 제스처를 검출한 것에 응답하여 선택되는 콘텐츠)를 포함한다.
장치는 (예를 들어, 선택된 콘텐츠의 배경에 음영을 부여하고 및/또는 채색함으로써) 선택된 콘텐츠(524)를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분한다(1404).
일부 실시예에서, 장치는 선택된 콘텐츠(524)의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1406).
장치는 터치 스크린 디스플레이 상에서 선택된 콘텐츠(524)에 인접하여 명령 디스플레이 영역(530)을 디스플레이한다(1408). 명령 디스플레이 영역(530)은 하나 이상의 명령 아이콘을 포함한다. 일부 실시예에서, 명령 디스플레이 영역(530) 내의 아이콘이 하나의 행으로 디스플레이되며(1410), 이는 각각의 아이콘을 손가락으로 선택하는 것을 더 쉽게 만들어준다.
장치는 [예를 들어, 명령 아이콘 상에서의 탭핑 제스처와 같은 손가락 제스처에 의한 또는 명령 아이콘에 대응하는 소리 단어(spoken word)를 검출하는 것(음성 활성화)에 의한] 명령 디스플레이 영역(530) 내의 명령 아이콘의 활성화를 검출한다(1412).
명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠에 대해 대응하는 동작을 수행한다(1414).
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠를 복사하는 아이콘[예를 들어, 도 6a의 "복사" 아이콘(534)]을 포함한다. 장치는 선택된 콘텐츠를 복사하는 아이콘의 활성화 (예를 들어, 음성에 의하거나 "복사" 아이콘 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함)를 검출한다(1416). 선택된 콘텐츠를 복사하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠를 (예를 들어, 다기능 장치 내의 클립보드 또는 메모리 장소로) 복사한다.
일부 실시예에서, 명령 디스플레이 영역은 선택된 콘텐츠를 잘라내기하는 아이콘[예를 들어, 도 6a의 "잘라내기" 아이콘(532)]을 포함한다. 장치는 선택된 콘텐츠를 잘라내기하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6a의 "잘라내기" 아이콘(532) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1418) 선택된 콘텐츠를 잘라내기하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠(524)를 잘라내기한다(도 6b).
일부 실시예에서, 명령 디스플레이 영역은 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘[예를 들어, 도 6c의 "붙여넣기" 아이콘(536)]을 포함한다. 장치는 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6c의 "붙여넣기" 아이콘(536) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1420). 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠를 이전에 잘라내기되거나 복사된 콘텐츠로 대체한다. 예를 들어, 도 6c에서 "붙여넣기" 아이콘을 활성화시킨 것에 응답하여, 장치는 선택된 콘텐츠 "endure"(도 6c)를 이전에 복사된 콘텐츠 "nation"으로 대체한다(도 6d). 다른 대안으로서, 어떤 콘텐츠도 선택되지 않은 경우, 장치는 이전에 복사된 콘텐츠를 삽입 마커(510)의 위치에 붙여넣기한다(예를 들어, 메모에 붙여넣기하는 것에 대해서는 도 6e 및 도 6f에 예시된 바와 같고, 인스턴트 메시지에 붙여넣기하는 것에 대해서는 도 6g 및 도 6h에 예시된 바와 같으며, 그리고 이메일에 붙여넣기하는 것에 대해서는 도 6i 및 도 6j에 예시된 바와 같음).
일부 실시예에서, 명령 디스플레이 영역은 이전의 동작을 실행 취소하는 아이콘[예를 들어, 도 6n의 "실행 취소" 아이콘(604)]을 포함한다. 장치는 이전의 동작을 실행 취소하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6n의 "실행 취소" 아이콘(604) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1422). 이전의 동작을 실행 취소하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 장치에 의해 수행된 이전의 동작을 실행 취소한다.
예를 들어, 도 6l의 단어 "iPhone"이 도 6m에서 잘못하여 잘라내기된 것으로 가정하자. 일부 실시예에서, 잘라내기 동작은 도 6n의 "실행 취소" 아이콘(604)을 활성화시킴으로써 실행 취소될 수 있으며, 그로써 도 6p에서 단어 "iPhone"을 복원할 수 있다. 다른 대안으로서, 일부 실시예에서, [예를 들어, 가속도계(168)를 사용하여] 흔들기 제스처(shaking gesture)를 검출한 것에 응답하여, 장치는 이전의 잘라내기 동작을 실행 취소하고 도 6p에서 단어 "iPhone"을 복원한다. 다른 대안으로서, 일부 실시예에서, [예를 들어, 가속도계(168)를 사용하여] 흔들기 제스처(shaking gesture)를 검출한 것에 응답하여, 장치는 도 6o에서 실행 취소 아이콘(606)을 디스플레이한다. 장치는, 실행 취소 아이콘(606) 상에서의 손가락 제스처(예를 들어, 탭핑 제스처)에 응답하여, 이전의 잘라내기 동작을 실행 취소하고 도 6p에서 단어 "iPhone"을 복원한다.
일부 실시예에서, 명령 디스플레이 영역(530)은 부가의 명령 옵션을 디스플레이하는 아이콘[예를 들어, 도 6k의 ". . ." 아이콘(602)]을 포함한다. 장치는 부가의 명령 옵션을 디스플레이하는 아이콘의 활성화[예를 들어, 음성에 의하거나 도 6k의 ". . ." 아이콘(602) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1424). 부가의 명령 옵션을 디스플레이하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 부가의 명령 아이콘[예를 들어, 도 6o의 실행 취소(606) 및 다시 실행(608)]을 디스플레이한다. 각자의 부가의 명령 아이콘의 활성화[예를 들어, 음성에 의하거나 각자의 부가의 명령 아이콘(도시 생략) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]는 선택된 콘텐츠에 대해 대응하는 동작을 시작한다. 부가의 명령은 다른 대안으로서 명령 디스플레이 영역(530)의 일부로서 디스플레이될 수 있는 명령들(본 명세서에 기술된 바와 같이, 지도 보기, 전화 걸기, 기타 등등) 중 하나 이상의 명령일 수 있다.
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 아이콘[예를 들어, 도 6q의 "지도 보기" 아이콘(614)]을 포함한다. 장치는 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 아이콘의 활성화[예를 들어, 음성에 의하거나 도 6q의 "지도 보기" 아이콘(614) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1426). 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 디스플레이한다(예를 들어, 도 6r의 지도 응용 프로그램에서 지도 상에 물리적 위치를 보여줌). 일부 실시예에서, 장치는 선택된 콘텐츠[예를 들어, 도 6q의 선택된 콘텐츠(612)]에서의 물리적 위치(예를 들어, 주소)를 인식할 수 있다. 일부 실시예에서, 선택된 콘텐츠가 주소 이외의 부가 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠에서의 물리적 위치(예를 들어, 주소)를 인식할 수 있다. 예를 들어, 선택된 콘텐츠(610)가 주소 이외의 다른 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠(610)(도 6k)에서의 주소를 인식할 수 있다.
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 아이콘[예를 들어, 도 6s의 "전화 걸기" 아이콘(616)]을 포함한다. 장치는 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 아이콘의 활성화[예를 들어, 음성에 의하거나 도 6s의 "전화 걸기" 아이콘(616) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1428). 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 한다(도 6t). 일부 실시예에서, 장치는 선택된 콘텐츠[예를 들어, 도 6s의 선택된 콘텐츠(622)] 내의 전화 번호를 인식할 수 있다. 일부 실시예에서, 선택된 콘텐츠가 전화 번호 이외의 부가 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠 내의 전화 번호를 인식할 수 있다. 예를 들어, 선택된 콘텐츠(610)가 전화 번호 이외의 다른 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠(610)(도 6k) 내의 전화 번호를 인식할 수 있다.
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 아이콘[예를 들어, 도 6s의 "문자 메시지" 아이콘(618)]을 포함한다. 장치는 선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6s의 "문자 메시지" 아이콘(618) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1430) 선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작한다 [예를 들어, 인스턴트 메시징 응용 프로그램을 열고 선택된 콘텐츠 내의 주소 또는 전화 번호로의 인스턴트 메시지(전화-기반 인스턴트 메시지)에 대한 인스턴트 메시지 입력 영역을 제시함, 도 6u].
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 아이콘[예를 들어, 도 6w의 "이메일" 아이콘(624)]을 포함한다. 장치는 선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6w의 "이메일" 아이콘(624) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1432). 선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작한다 [예를 들어, 이메일 응용 프로그램을 열고 선택된 콘텐츠 내의 이메일 주소로의 이메일 메시지에 대한 이메일 입력 영역을 제시함, 도 6x]. 일부 실시예에서, 장치는 선택된 콘텐츠[예를 들어, 도 6w의 선택된 콘텐츠(630)] 내의 이메일 주소를 인식할 수 있다. 일부 실시예에서, 선택된 콘텐츠가 이메일 주소 이외의 부가 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠 내의 이메일 주소를 인식할 수 있다. 예를 들어, 선택된 콘텐츠(610)가 이메일 주소 이외의 다른 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠(610)(도 6k) 내의 이메일 주소를 인식할 수 있다.
일부 실시예에서, 명령 디스플레이 영역(530)이 선택된 콘텐츠 내의 이미지를 사용하여 슬라이드 쇼를 시작하는 아이콘을 포함한다. 장치는 선택된 콘텐츠 내의 이미지를 사용하여 슬라이드 쇼를 시작하는 아이콘의 활성화 (예를 들어, 음성에 의하거나 "슬라이드 쇼" 아이콘 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함)를 검출한다(1434) 선택된 콘텐츠 내의 이미지를 사용하여 슬라이드 쇼를 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠 내의 이미지를 사용하여 슬라이드 쇼를 시작한다.
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 아이콘[예를 들어, 도 6y의 "브라우즈" 아이콘(626)]을 포함한다. 장치는 선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6y의 "브라우즈" 아이콘(626) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1436). 선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 (예를 들어, 도 6z의 브라우저 응용 프로그램에서) 선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이한다. 일부 실시예에서, 장치는 선택된 콘텐츠[예를 들어, 도 6y의 선택된 콘텐츠(628)] 내의 웹 주소를 인식할 수 있다. 일부 실시예에서, 선택된 콘텐츠가 이메일 주소 이외의 부가 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠 내의 웹 주소를 인식할 수 있다. 예를 들어, 선택된 콘텐츠(610)가 웹 주소 이외의 다른 정보를 포함하고 있더라도, 장치가 선택된 콘텐츠(610)(도 6k) 내의 웹 주소를 인식할 수 있다.
일부 실시예에서, 명령 디스플레이 영역(530)은 선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 아이콘[예를 들어, 도 6aa의 "검색" 아이콘(632)]을 포함한다. 장치는 선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6aa의 "검색" 아이콘(632) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1438). 선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 선택된 콘텐츠 내의 정보를 사용하여 (예를 들어, 선택된 콘텐츠 또는 그의 일부분을 웹 검색에 대한 검색 입력으로서 사용하여, 도 6bb) 검색을 시작한다. 일부 실시예에서, 검색은 인터넷 검색(예를 들어, Google 검색, 도 6bb)을 포함한다. 일부 실시예에서, 검색은 장치 상에서의 정보의 검색(예를 들어, Spotlight 검색)을 포함한다.
일부 실시예에서, 명령 디스플레이 영역은 또한 연락처 응용 프로그램에 정보를 추가하는 아이콘[예를 들어, 도 6s의 "연락처에 추가" 아이콘(620)]을 포함한다. 장치는 연락처 응용 프로그램에 정보를 추가하는 아이콘의 활성화 [예를 들어, 음성에 의하거나 도 6s의 "연락처에 추가" 아이콘(620) 상에서의 탭핑 제스처와 같은 손가락 제스처에 의함]를 검출한다(1440). 연락처 응용 프로그램에 정보를 추가하는 아이콘의 활성화를 검출한 것에 응답하여, 장치는 연락처 응용 프로그램에 선택된 콘텐츠 내의 정보를 추가한다(도 6v).
일부 실시예에서, 선택된 콘텐츠가 움직일 때, 명령 디스플레이 영역이 터치 스크린 디스플레이 상에서 움직인다(1442).
일부 실시예에서, 명령 디스플레이 영역 내의 아이콘은 사용자 구성가능한 적어도 하나의 명령을 포함한다(1444). 예를 들어, 사용자는 설정 메뉴를 통해 명령 디스플레이 영역(530) 내의 잘라내기, 복사 및 붙여넣기 아이콘에 "모두 선택" 아이콘을 추가할 수 있다. 이와 유사하게, 사용자는 설정 메뉴를 통해 명령 디스플레이 영역(530)에 "지도 보기", "검색" 또는 기타 아이콘을 추가할 수 있다.
일부 실시예에서, 명령 디스플레이 영역 내의 아이콘은 컨텍스트 기반인 적어도 하나의 명령을 포함한다(1446). 예를 들어, 읽기 전용 콘텐츠에 대해서는 잘라내기 및 붙여넣기 아이콘이 디스플레이되지 않는다. 이와 유사하게, 이미지가 복사되어 있고 입력 필드가 텍스트 입력을 필요로 할 때, 붙여넣기 아이콘이 디스플레이되지 않는다.
일부 실시예에서, 콘텐츠가 제1 응용 프로그램[예를 들어, 이메일(140)] 내에서 디스플레이되고, 명령 디스플레이 영역 내의 아이콘은 소정의 응용 프로그래밍 인터페이스를 통해 제1 응용 프로그램에 연결된 제2 응용 프로그램[예를 들어, 브라우저(147), 지도(154), 또는 연락처(137)]을 호출하는 적어도 하나의 명령을 포함한다(1448).
일부 실시예에서, 장치는 명령 아이콘의 활성화[예를 들어, 콘텐츠 상에서의 스와이프 제스처(634)와 같은 손가락 제스처, 도 6cc]를 검출하기 전에 사용자에 의한 입력을 검출한다(1450, 도 14a). 사용자에 의한 입력을 검출한 것에 응답하여, 장치는 터치 스크린 디스플레이 상에서 콘텐츠를 스크롤하고, 명령 디스플레이 영역을 디스플레이하는 것을 중단한다(도 6dd). 일부 실시예에서, 장치는 콘텐츠의 스크롤을 중단한다. 콘텐츠의 스크롤을 중단한 것에 응답하여, 장치는 터치 스크린 디스플레이 상에서 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 다시 디스플레이한다(1452; 도 6ee). 환언하면, 명령 디스플레이 영역(530)이 스크롤 동안에 사라지고, 스크롤이 중단될 때 다시 나타난다(도 6cc 내지 도 6ee에 예시된 바와 같음). 이것은 스크롤 동안 콘텐츠의 방해받지 않는 뷰(unobstructed view)를 관찰자에게 제공한다. 명령 디스플레이 영역(530)은 통상적으로 선택된 콘텐츠에 인접하여(예를 들어, 선택된 콘텐츠 바로 위에 또는 바로 아래에) 디스플레이된다. 어떤 경우에, 명령 디스플레이 영역이 중복하거나, 선택된 콘텐츠 내에 디스플레이된다.
일부 실시예에서, 장치는 명령 아이콘의 활성화를 검출하기 전에 사용자에 의한 입력을 검출한다. 예를 들어, 장치는 선택된 콘텐츠(524)로부터 떨어져 있는(예를 들어, 3.2 mm와 같은 선택된 콘텐츠로부터 적어도 소정의 최소 거리 떨어져 있는) 터치 스크린 디스플레이 상의 위치에서 탭핑 제스처(636)(도 6ff)와 같은 손가락 제스처를 검출한다. 사용자에 의한 입력을 검출한 것에 응답하여, 장치는 선택된 콘텐츠를 선택 해제하고, 명령 디스플레이 영역을 디스플레이하는 것을 중단한다(1454)(도 6gg).
일부 실시예에서, 명령 디스플레이 영역(530) 내의 명령 아이콘의 활성화[예를 들어, "복사" 아이콘(534) 상에서의 손가락 탭핑 제스처(638)에 의함, 도 6hh]를 검출한 것에 응답하여, 장치는 명령 디스플레이 영역을 디스플레이하는 것을 중단한다(1456, 도 14d)(도 6ii).
일부 실시예에서, 장치는 명령 아이콘의 활성화를 검출하기 전에 사용자에 의한 타이핑 입력을 검출한다. 예를 들어, 장치는 키보드(640) 내의 "b" 키 상에서 손가락 제스처(642)를 검출한다(도 6jj). 사용자에 의한 타이핑 입력을 검출한 것에 응답하여, 장치는 선택된 콘텐츠를 타이핑 입력에 대응하는 문자들로 대체하고, 명령 디스플레이 영역을 디스플레이하는 것을 중단한다(1458, 도 14a)(도 6kk).
일부 실시예에서, 장치는, 명령 아이콘의 활성화(예를 들어, 선택된 콘텐츠의 시작 부분 또는 끝부분 상에서의 손가락 탭핑 제스처)를 검출하기 전에, 선택된 콘텐츠의 각각의 끝부분(즉, 선택된 콘텐츠의 시작 부분 또는 끝부분)에서 사용자에 의한 손가락 제스처를 검출한다. 선택된 콘텐츠의 각각의 끝부분 상에서 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 장치는 명령 디스플레이 영역을 디스플레이하는 것을 중단하고, 선택된 콘텐츠의 각각의 끝부분에 삽입 마커를 디스플레이하며, 선택된 콘텐츠를 선택 해제한다(1460). 예를 들어, 선택된 콘텐츠(524)의 끝부분 상에서 사용자에 의한 손가락 제스처(644)(도 6ll)를 검출한 것에 응답하여, 장치는 명령 디스플레이 영역(530)을 디스플레이하는 것을 중단하고, 선택된 콘텐츠의 끝부분에 삽입 마커(510)를 디스플레이하며, 선택된 콘텐츠를 선택 해제한다(도 6mm).
일부 실시예에서, 장치는 명령 아이콘의 활성화(예를 들어, 시작점 객체 상에서의 손가락 탭핑 제스처)를 검출하기 전에 시작점 객체 상에서 사용자에 의한 손가락 제스처를 검출한다. 시작점 객체 상에서 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 장치는 명령 디스플레이 영역, 시작점 객체 및 끝점 객체를 디스플레이하는 것을 중단하고, 선택된 콘텐츠의 시작부에 삽입 마커를 디스플레이하며, 선택된 콘텐츠를 선택 해제한다(1462).
일부 실시예에서, 장치는 명령 아이콘의 활성화[예를 들어, 끝점 객체(528) 상에서의 손가락 탭핑 제스처(644)(도 6ll)]를 검출하기 전에 끝점 객체 상에서 사용자에 의한 손가락 제스처를 검출한다. 끝점 객체 상에서 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 장치는 명령 디스플레이 영역, 시작점 객체 및 끝점 객체를 디스플레이하는 것을 중단하고, 선택된 콘텐츠의 끝부분에 삽입 마커(510)를 디스플레이하며, 선택된 콘텐츠를 선택 해제한다(1464)(도 6mm).
일부 실시예에서, 장치는 명령 아이콘의 활성화[예를 들어, 선택된 콘텐츠의 중간에서의 손가락 탭핑 제스처(646)(도 6nn)]를 검출하기 전에 선택된 콘텐츠 상에서 사용자에 의한 손가락 제스처를 검출한다. 선택된 콘텐츠 상에서 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 장치는 명령 디스플레이 영역(530)을 디스플레이하는 것을 중단한다(1466). 일부 실시예에서, 장치는 명령 디스플레이 영역을 디스플레이하는 것을 중단한 후 명령 아이콘의 활성화[예를 들어, 선택된 콘텐츠의 중간에서의 다른 손가락 탭핑 제스처(648)(도 6oo)]를 검출하기 전에 선택된 콘텐츠 상에서 사용자에 의한 손가락 제스처를 검출한다. 선택된 콘텐츠 상에서 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 장치는 선택된 부분에 인접하여 명령 디스플레이 영역(530)을 다시 디스플레이한다(1468)(도 6nn). 환언하면, 사용자는 선택된 콘텐츠(524) 내에서 탭핑함으로써 명령 디스플레이 영역을 디스플레이하는 것을 온/오프 토글할 수 있다.
도 15a 내지 도 15c는 일부 실시예에 따른, 명령 디스플레이 영역을 배치하는 방법을 나타낸 흐름도이다. 방법(1500)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1500)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1500)은 명령 디스플레이 영역이 터치 스크린 디스플레이 상의 다른 중요한 사용자 인터페이스 요소를 가리지 않도록 명령 디스플레이 영역을 배치하는 효율적인 방식을 제공한다. 이 방법은 명령 디스플레이 영역을 사용할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 보다 빠르고 보다 효율적으로 명령 디스플레이 영역을 사용할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 콘텐츠(650)를 포함하는 사용자 인터페이스 요소를 디스플레이한다(1502)(도 6pp). 콘텐츠는 선택된 콘텐츠(524)(예를 들어, 터치 스크린 디스플레이 상에서의 사용자에 의한 하나 이상의 터치 제스처를 검출한 것에 응답하여 선택되는 콘텐츠)를 포함한다.
장치는 (예를 들어, 선택된 콘텐츠의 배경에 음영을 부여하고 및/또는 채색함으로써) 선택된 콘텐츠(524)를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분한다(1504).
장치는 하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역(530) 요소를 디스플레이한다(1506). 이 설명을 위해, 명령 디스플레이 영역(530)은 각각이 각자의 디스플레이 우선순위를 가지는 다수의 UI 요소들 중 하나이며, 이에 대해서는 이하에서 보다 상세히 설명한다. 명령 디스플레이 영역(530) 요소가 콘텐츠(650)를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이된다. 명령 아이콘의 활성화는 선택된 콘텐츠(524)에 대해 대응하는 동작의 수행을 시작한다.
장치는 하나 이상의 소정의 우선순위 요소[예를 들어, 키보드(640), 도 6pp] - 이들의 전방에 명령 디스플레이 영역 요소가 디스플레이될 수 없음 - 를 디스플레이한다(1508, 도 15c).
일부 실시예에서, 명령 디스플레이 영역(530) 요소를 디스플레이하는 것은 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 선택된 콘텐츠 위쪽의 인접한 영역이 임의의 소정의 우선순위 요소를 포함하지 않을 때, 선택된 콘텐츠 위쪽의 인접한 영역에 명령 디스플레이 영역 요소를 디스플레이하는 것(1510)을 포함한다(예를 들어, 도 6pp 및 도 6tt).
일부 실시예에서, 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 선택된 콘텐츠 아래쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 선택된 콘텐츠 아래쪽의 인접한 영역이 임의의 소정의 우선순위 요소를 포함하지 않을 때, 장치는 선택된 콘텐츠 아래쪽의 인접한 영역에 명령 디스플레이 영역 요소를 디스플레이한다(1512)(예를 들어, 도 6rr 및 도 6uu).
일부 실시예에서, 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 명령 디스플레이 영역이 선택된 콘텐츠 내에 들어갈 정도로 충분히 작을 때, 장치는 선택된 콘텐츠 내의 영역에 명령 디스플레이 영역 요소를 디스플레이한다(1514)(예를 들어, 도 6qq 및 도 6ss).
일부 실시예에서, 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 선택된 콘텐츠 아래쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 명령 디스플레이 영역이 선택된 콘텐츠 내에 들어갈 정도로 충분히 작을 때, 장치가 선택된 콘텐츠 내에서 그 전방에 명령 디스플레이 영역 요소를 디스플레이한다(1516)(예를 들어, 도 6qq).
일부 실시예에서, 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 명령 디스플레이 영역이 너무 커서 선택된 콘텐츠 내에 들어갈 수 없고, 선택된 콘텐츠 아래쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 선택된 콘텐츠 아래쪽의 인접한 영역이 임의의 소정의 우선순위 요소를 포함하지 않을 때, 장치는 선택된 콘텐츠 아래쪽의 인접한 영역에 명령 디스플레이 영역 요소를 디스플레이한다(1518)(예를 들어, 도 6uu).
일부 실시예에서, 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 선택된 콘텐츠 아래쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 소정의 우선순위 요소를 포함하고, 명령 디스플레이 영역이 너무 커서 선택된 콘텐츠 내에 들어갈 수 없을 때, 장치는 명령 디스플레이 영역 요소를 디스플레이하는 것을 금지한다(1520).
일부 실시예에서, 선택된 콘텐츠 아래쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 선택된 콘텐츠 아래쪽의 인접한 영역이 임의의 소정의 우선순위 요소를 포함하지 않을 때, 장치는 선택된 콘텐츠 아래쪽의 인접한 영역에 명령 디스플레이 영역 요소를 디스플레이한다(1524)(예를 들어, 도 6rr 및 도 6uu).
일부 실시예에서, 명령 디스플레이 영역이 선택된 콘텐츠 내에 들어갈 정도로 충분히 작을 때, 장치는 선택된 콘텐츠 내에서 그 전방에 명령 디스플레이 영역 요소를 디스플레이한다(1526)(예를 들어, 도 6qq 및 도 6ss).
일부 실시예에서, 장치는 선택된 콘텐츠(524)와 관련하여 제1 위치에(예를 들어, 선택된 콘텐츠 바로 위에, 도 6pp) 명령 디스플레이 영역(530) 요소를 디스플레이한다(1528). 장치는, 선택된 콘텐츠를 움직이는 것(예를 들어, 손가락 제스처에 응답하여 콘텐츠를 스크롤하는 것)을 비롯하여, 터치 스크린 디스플레이 상에서 콘텐츠를 움직인다. 장치는 콘텐츠를 움직이는 동안 명령 디스플레이 영역 요소를 디스플레이하는 것을 중단한다. 콘텐츠가 움직이는 것을 멈출 때, 장치는 선택된 콘텐츠와 관련하여 제2 위치에 명령 디스플레이 영역(530) 요소를 다시 디스플레이한다. 선택된 콘텐츠와 관련한 제2 위치는 선택된 콘텐츠와 관련한 제1 위치[예를 들어, 선택된 콘텐츠 바로 아래에(도 6rr) 또는 선택된 콘텐츠 내에(도 6qq)]와 다르다.
도 16a 내지 도 16e는 일부 실시예에 따른, 콘텐츠 확대기를 사용하여 선택된 콘텐츠의 각각의 끝부분을 업데이트하는 방법을 나타낸 흐름도이다. 방법(1600)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1600)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1600)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 선택된 콘텐츠의 각각의 끝부분을 조정하는 직관적 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 제1 배율로 터치 스크린 디스플레이 상에 콘텐츠[예를 들어, 편집가능 콘텐츠(502) 또는 읽기 전용 콘텐츠(538)]를 디스플레이한다(1602). 콘텐츠는 선택된 콘텐츠(524)(예를 들어, 터치 스크린 디스플레이 상에서의 사용자에 의한 하나 이상의 터치 제스처를 검출한 것에 응답하여 선택되는 콘텐츠)를 포함한다. 일부 실시예에서, 콘텐츠는 텍스트(예를 들어, 일반 텍스트, 비구조화된 텍스트, 형식지정된 텍스트 또는 웹 페이지에서의 텍스트)를 포함한다(1604).
일부 실시예에서, 장치는 선택된 콘텐츠(524)의 각각의 끝부분에 시작점 객체(526) 및 끝점 객체(528)를 디스플레이한다(1606)(도 7a).
장치는 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출한다(선택된 콘텐츠의 끝부분은 시작점 객체 또는 끝점 객체 또는 이들 객체 중 하나의 객체의 숨겨진 히트 영역을 포함할 수 있음)(1608). 각각의 끝부분은 선택된 콘텐츠의 시작 또는 끝이다.
장치는 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기(702)를 디스플레이한다(1610). 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분(708), 및 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커(704)를 디스플레이한다.
일부 실시예에서, 콘텐츠 확대기(702)는 소정의 형상(예를 들어, 도 7a에 도시된 바와 같이, 직사각형 또는 둥근 모서리를 갖는 직사각형)을 가진다(1612). 일부 실시예에서, 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 것은 선택된 콘텐츠의 각각의 끝부분 바로 위에 그를 중심으로 하여(또는 실질적으로 그를 중심으로 하여) 콘텐츠 확대기를 디스플레이하는 것(1614)을 포함한다. 일부 실시예에서, 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉(706)(대응하는 시작점 객체 또는 끝점 객체 또는 이들 객체 중 하나의 객체의 숨겨진 히트 영역 상에서의 접촉)을 검출한 것에 응답하여 콘텐츠 확대기가 처음으로 디스플레이된다(1616).
일부 실시예에서, 콘텐츠 확대기에 의해 디스플레이되는 콘텐츠의 확장된 부분(708)은 각각의 끝부분에 인접한 선택된 콘텐츠(예를 들어, 도 7a의 "on so c") 및 각각의 끝부분에 인접한 비선택된 콘텐츠(예를 들어, 도 7a의 "onceived")를 포함한다(1618). 일부 실시예에서, 경계 마커(704)가 각각의 끝부분에 인접한 선택된 콘텐츠와 각각의 끝부분에 인접한 비선택된 콘텐츠 사이에 디스플레이된다(1620).
일부 실시예에서, 콘텐츠 확대기(708)는 콘텐츠에서의 단일 텍스트 줄의 확장된 부분을 디스플레이한다(1622)(도 7a). 일부 실시예에서, 삽입 마커를 배치하는 것을 돕는 콘텐츠 확대기[예를 들어, 도 5b의 확대기(508)]는 3개 이상의 텍스트 줄의 일부분을 디스플레이하는 반면, 선택된 콘텐츠에 대한 끝점을 설정하는 것을 돕는 콘텐츠 확대기[예를 들어, 도 7a의 확대기(702)]는 단지 각각의 끝점을 포함하는 단일 텍스트 줄의 확장된 부분을 디스플레이한다.
장치는 터치 스크린 디스플레이를 가로지르는 손가락 접촉(706)의 움직임을 검출한다(1624).
장치는 선택된 콘텐츠의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트한다(1626).
일부 실시예에서, 선택된 콘텐츠의 각각의 끝부분이 계속하여 업데이트된다(예를 들어, 끝부분이 문자들 내에서 그리고 문자들 사이에서 움직이는 것처럼 보인다)(1628).
일부 실시예에서, 선택된 콘텐츠의 각각의 끝부분이 문자별로(예를 들어, 글자별로) 업데이트된다(1630).
일부 실시예에서, 선택된 콘텐츠의 각각의 끝부분이 단어별로 업데이트된다(1632). 일부 실시예에서, 단어별 업데이트의 경우, 손가락 접촉의 위치가 현재 단어 내의 위치(예를 들어, 현재 단어의 중간에 있는 문자의 위치)에 대응할 때, 선택된 콘텐츠의 각각의 끝부분이 현재 단어의 끝으로 전진한다.
일부 실시예에서, 손가락 접촉의 움직임이 소정의 시간 구간 내에서 소정의 값(예를 들어, 평균 속도)을 초과할 때, 선택된 콘텐츠의 각각의 끝부분이 단어별로 업데이트된다(1634).
일부 실시예에서, 손가락 접촉의 움직임이 소정의 시간 구간 내에서 소정의 값 미만일 때, 선택된 콘텐츠의 각각의 끝부분이 문자별로 업데이트되고, 손가락 접촉의 움직임이 소정의 시간 구간 내에서 소정의 값을 초과할 때, 선택된 콘텐츠의 각각의 끝부분이 단어별로 업데이트된다(1636).
장치는 손가락 접촉(706)의 움직임에 따라 콘텐츠 확대기(702) 및 경계 마커(704)를 움직인다(1638). 일부 실시예에서, 경계 마커는 콘텐츠 확대기 내에서 고정된 위치를 유지한다(1640).
일부 실시예에서, 선택된 콘텐츠의 각각의 끝부분이 선택된 콘텐츠(도시 생략)의 시작 부분일 때, 장치는 손가락 접촉의 움직임에 따라 시작점 객체(526)를 움직이고, 선택된 콘텐츠의 각각의 끝부분이 선택된 콘텐츠의 끝일 때, 장치는 손가락 접촉의 움직임에 따라 끝점 객체(528)를 움직인다(1642).
일부 실시예에서, 콘텐츠 확대기는 콘텐츠 확대기의 중앙에 있는 각각의 단어를 포함한 단어들의 시퀀스를 디스플레이한다(1643). 장치는 손가락 접촉의 움직임에 따라 콘텐츠 확대기의 중앙에 있는 각각의 단어(예를 들어, 도 7a의 단어 "conceived")를 업데이트한다. 장치는 콘텐츠 확대기의 중앙에 있는 복수의 연속적인 단어에 대해 콘텐츠 확대기의 중앙에 있는 각각의 단어 내의 경계 마커를 움직임으로써 콘텐츠 확대기 내의 경계 마커를 움직인다(1644).
일부 실시예에서, 콘텐츠 확대기는 콘텐츠 확대기의 중앙에 있는 각각의 단어를 포함한 단어들의 시퀀스를 디스플레이한다. 장치는 손가락 접촉의 움직임에 따라 콘텐츠 확대기의 중앙에 있는 각각의 단어를 업데이트한다. 장치는 콘텐츠 확대기의 중앙에 있는 복수의 연속적인 단어에 대해 콘텐츠 확대기의 중앙에 있는 각각의 단어 내의 경계 마커를 문자 단위로 움직임으로써 콘텐츠 확대기 내의 경계 마커를 움직인다(1646).
일부 실시예에서, 콘텐츠 확대기는 콘텐츠 확대기의 중앙에 있는 각각의 단어를 포함한 단어들의 시퀀스를 디스플레이한다. 장치는 손가락 접촉의 움직임에 따라 콘텐츠 확대기의 중앙에 있는 각각의 단어를 업데이트한다. 장치는 콘텐츠 확대기의 중앙에 있는 복수의 연속적인 단어에 대해 콘텐츠 확대기의 중앙에 있는 각각의 단어의 끝으로 경계 마커를 점프시킴으로써 콘텐츠 확대기 내의 경계 마커를 움직인다(1648). 환언하면, 장치는 콘텐츠 확대기 내에 단어별 선택(word-by-word selection)을 디스플레이한다.
일부 실시예에서, 경계 마커(704)는 콘텐츠 확대기(702) 내에 중심을 둔(또는 실질적으로 중심을 둔) 채로 있다(1650).
일부 실시예에서, 손가락 접촉의 움직임에 따라 콘텐츠 확대기를 움직이는 것은 콘텐츠 확대기(702)를 라인 단위로 움직이는 것을 포함한다(1652). 라인 단위로 움직이는 것은 선택된 콘텐츠의 업데이트된 각각의 끝부분을 포함하는 텍스트 줄로 확대기를 스냅시킬 수 있다. 일부 실시예에서, 삽입 마커를 배치하는 것을 돕는 콘텐츠 확대기[예를 들어, 도 5b의 확대기(508)]는 터치 스크린 디스플레이 상에서 계속적으로 움직이는 반면, 선택된 콘텐츠에 대한 끝점을 설정하는 것을 돕는 콘텐츠 확대기[예를 들어, 도 7a의 확대기(702)]는 라인 단위로 움직인다. 일부 실시예에서, 양 유형의 확대기는 계속적으로 움직인다. 일부 실시예에서, 양 유형의 확대기는 라인 단위로 움직인다.
일부 실시예에서, 장치는 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한다. 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기를 디스플레이하는 것을 종료한다(1654).
일부 실시예에서, 장치는 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한다. 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기를 디스플레이하는 것을 종료하고, 선택된 콘텐츠의 각각의 끝부분을 현재 단어 내의 현재 위치에 배치한다(1656). 예를 들어, 손가락 접촉의 위치가 현재 단어 내의 현재 위치에(예를 들어, "conceived"에서 글자 "c"와 글자 "o" 사이에, 도 7a) 대응할 때 터치 스크린 디스플레이로부터의 손가락 접촉(706)(도 7a)의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기(702)를 디스플레이하는 것을 종료하고, 선택된 콘텐츠(524)의 각각의 끝부분을 현재 단어 내의 현재 위치에(예를 들어, "conceived"에서 글자 "c"와 글자 "o" 사이에, 도 7b) 배치한다.
일부 실시예에서, 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때, 장치는 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한다. 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기를 디스플레이하는 것을 종료하고, 선택된 콘텐츠의 각각의 끝부분을 현재 단어의 각각의 끝부분에 배치한다(1658). 예를 들어, 장치는 선택된 콘텐츠의 각각의 끝부분을 (1) 선택된 콘텐츠의 시작 부분 및 끝부분 둘다에 대해 현재 단어의 끝부분에, (2) 선택된 콘텐츠의 각각의 끝부분이 선택된 콘텐츠의 끝부분일 때 현재 단어의 끝부분에 그리고 선택된 콘텐츠의 각각의 끝부분이 선택된 콘텐츠의 시작 부분일 때 현재 단어의 시작 부분에, 또는 (3) 떨어짐을 검출하기 바로 전에 손가락 접촉의 움직임의 방향에 따라 현재 단어의 각각의 끝부분에 배치할 수 있다. 일부 실시예에서, 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기를 디스플레이하는 것을 종료하기 전에 콘텐츠 확대기가 현재 단어의 각각의 끝부분에 대응하는 위치(예를 들어, 현재 단어의 각각의 끝부분을 중심으로 하여 그 바로 위의 위치)로 움직이는 애니메이션을 디스플레이한다(1660). 예를 들어, 손가락 접촉의 위치가 현재 단어 내의 현재 위치에(예를 들어, "conceived"에서 글자 "c"와 글자 "o" 사이에, 도 7a) 대응할 때 터치 스크린 디스플레이로부터의 손가락 접촉(706)(도 7a)의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기(702)를 디스플레이하는 것을 종료하고, 현재 단어의 끝에(예를 들어, "conceived"의 끝에, 도 7e) 선택된 콘텐츠(524)의 끝부분을 배치한다.
일부 실시예에서, 손가락 접촉의 위치가 현재 단어 내의 현재 위치에(예를 들어, "conceived"에서 글자 "c"와 글자 "o" 사이에, 도 7a) 대응할 때 장치는 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한다. 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기를 디스플레이하는 것을 종료하고, 손가락 접촉의 움직임이 소정의 시간 구간 내에서 소정의 값 미만일 때(떨어질 때 또는 떨어짐을 검출하기 바로 전의 기간에, 예를 들어, 떨어짐을 검출하고 나서 0.5초 이내에 1.6 mm 미만), 선택된 콘텐츠의 각각의 끝부분을 현재 단어 내의 현재 위치에(예를 들어, "conceived"에서 글자 "c"와 글자 "o" 사이에, 도 7b) 배치하고, 손가락 접촉의 움직임이 소정의 시간 구간 내에서 소정의 값을 초과할 때, 선택된 콘텐츠의 각각의 끝부분을 현재 단어의 각각의 끝부분에(예를 들어, "conceived"의 끝에, 도 7e) 배치한다(1662). 예를 들어, 장치는 선택된 콘텐츠의 각각의 끝부분을 (1) 선택된 콘텐츠의 시작 부분 및 끝부분 둘다에 대해 현재 단어의 끝부분에, (2) 선택된 콘텐츠의 각각의 끝부분이 선택된 콘텐츠의 끝부분일 때 현재 단어의 끝부분에 그리고 선택된 콘텐츠의 각각의 끝부분이 선택된 콘텐츠의 시작 부분일 때 현재 단어의 시작 부분에, 또는 (3) 떨어짐을 검출하기 바로 전에 손가락 접촉의 움직임의 방향에 따라 현재 단어의 각각의 끝부분에 배치할 수 있다. 일부 실시예에서, 터치 스크린 디스플레이로부터의 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 장치는 손가락 접촉의 움직임이 소정의 시간 구간 내에서 소정의 값을 초과할 때, 콘텐츠 확대기를 디스플레이하는 것을 종료하기 전에 콘텐츠 확대기가 현재 단어의 각각의 끝부분에 대응하는 위치로 움직이는 애니메이션을 디스플레이한다(1664). 예를 들어, "conceived"의 글자 "c"와 글자 "o" 사이에서(도 7a) 손가락 접촉(706)의 떨어짐을 검출한 것에 응답하여, 장치는 콘텐츠 확대기를 (예를 들어, "conceived"의 끝부분에, 도 7e) 디스플레이하는 것을 종료하기 전에 (예를 들어, 도 7c 및 도 7d에 나타낸 바와 같이) 콘텐츠 확대기(702)가 현재 단어의 각각의 끝부분에 대응하는 위치로 움직이는 애니메이션을 디스플레이한다.
콘텐츠가 선택되면, 장치는, 사용자 입력에 응답하여, 선택된 콘텐츠에 대해 동작(도 6a 내지 도 6bb와 관련하여 전술한 동작 등)을 수행할 수 있다.
도 17a 및 도 17b는 일부 실시예에 따른, 구조화된 전자 문서에서 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(1700)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1700)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1700)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 구조화된 전자 문서(예를 들어, 웹 페이지) 내의 콘텐츠 블록을 선택하는 직관적 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
구조화된 전자 문서에서 탐색하는 데 손가락 제스처를 사용하는 것은 미국 특허 출원 제20080094368호(그 전체 내용이 참조 문헌으로서 본 명세서에 포함됨)에 기술되어 있다. 본 명세서에 기술된 바와 같이, 일부 실시예에서, 장치는 웹 페이지 내의 블록(또는 콘텐츠 상자)을 결정하기 위해 웹 페이지의 렌더 트리(render tree)를 분석한다. 일부 실시예에서, 블록은 대체된 인라인(replaced inline), 블록, 인라인 블록(inline block), 또는 인라인 테이블(inline table)인 렌더 노드(render node)에 대응한다. 일부 실시예에서, 웹 페이지 내의 복수의 상자는 웹 페이지에서의(웹 페이지에 의해 참조되는) 스타일 시트(캐스케이딩 스타일 시트 등)에 의해 정의된다. 터치 스크린 디스플레이 상에서 웹 페이지 내의 콘텐츠 상자를 확대하고 중앙에 위치시키기 위해 손가락 제스처[예를 들어, 두번-탭핑 제스처(802), 도 8a]가 사용된다(예를 들어, "Lost in Translation: A U.S. Gift to Russia"라는 제목의 콘텐츠 상자를 도 8a에서의 거의 읽을 수 없는 상태로부터 도 8b에서의 쉽게 읽을 수 있는 상태로 확대함).
장치는 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이한다(1702). 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함한다. 일부 실시예에서, 구조화된 전자 문서는 웹 페이지이다(1704). 일부 실시예에서, 구조화된 전자 문서는 HTML 또는 XML 문서이다(1706).
장치는 복수의 콘텐츠 상자 중 제1 콘텐츠 상자 상에서 손가락 제스처[예를 들어, 도 8b의 제스처(804) 또는 도 8f의 제스처(814)]를 검출한다(1708). 일부 실시예에서, 손가락 제스처는 누르고 있기 제스처이다(1710). 일부 실시예에서, 손가락 제스처는 탭핑 앤 하프 제스처이다(1712). 일부 실시예에서, 구조화된 전자 문서는 복수의 노드를 갖는 관련 렌더 트리를 가지며, 손가락 제스처의 위치에 있는 제1 상자를 결정하는 것은 손가락 제스처의 검출된 위치에 대응하는 복수의 노드 내의 제1 노드를 결정하기 위해 렌더 트리를 아래로 순회하는 것, 제1 노드로부터 논리적 콘텐츠 그룹을 포함하는 가장 가까운 부모 노드로 렌더 트리를 위로 순회하는 것, 및 가장 가까운 부모 노드에 대응하는 콘텐츠를 제1 콘텐츠 상자로서 식별하는 것을 포함한다. 일부 실시예에서, 논리적 콘텐츠 그룹은 단락, 이미지, 플러그 인 객체(plugin object), 또는 테이블을 포함한다. 일부 실시예에서, 가장 가까운 부모 노드는 대체된 인라인, 블록, 인라인 블록, 또는 인라인 테이블이다.
복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 제1 콘텐츠 상자를 선택하고, 선택된 제1 콘텐츠 상자(806)를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분한다(1714)(예를 들어, 도 8c 및 도 8g에 도시된 바와 같음). 일부 실시예에서, 복사하기 위해 제1 콘텐츠 상자가 선택된다. 일부 실시예에서, 잘라내기, 매핑, 검색 또는 도 6a 내지 도 6bb와 관련하여 상기한 동작들 중 하나의 동작 등의 다른 동작에의 입력으로서 사용하기 위해 제1 콘텐츠 상자가 선택된다.
일부 실시예에서, 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 것은 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 다른 배경 음영을 갖는 제1 콘텐츠 상자(806)를 디스플레이하는 것(1716)을 포함한다(도 8c 및 도 8g). 일부 실시예에서, 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 것은 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 다른 배경색을 갖는 제1 콘텐츠 상자를 디스플레이하는 것(1718)을 포함한다. 일부 실시예에서, 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 것은 제1 콘텐츠 상자 주변에 경계를 디스플레이하는 것(1720)을 포함한다. 일부 실시예에서, 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 것은 제1 콘텐츠 상자에 대한 하나 이상의 선택 핸들(selection handle)[예를 들어, 핸들(808), 도 8c 및 도 8g]을 디스플레이하는 것(1722)을 포함한다.
일부 실시예에서, 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여, 장치는 선택된 콘텐츠에 대한 명령 디스플레이 영역(530)을 디스플레이한다(1724)(도 8c 및 도 8g).
장치는 선택된 제1 콘텐츠 상자 상에서 손가락 접촉[예를 들어, 도 8c의 접촉(810) 또는 도 8g의 접촉(816)]을 검출한다(1726). 일부 실시예에서, 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 것은 선택된 제1 콘텐츠 상자에 대한 선택 핸들(808) 상에서 손가락 접촉을 검출하는 것(1728)을 포함한다(도 8c 및 도 8g). 일부 실시예에서, (예를 들어, 손가락 제스처가 "누르고 있기" 제스처일 때) 손가락 접촉은 손가락 제스처의 일부이다(1730).
장치는 선택된 제1 콘텐츠 상자 밖의 위치로의 손가락 접촉(810)의 움직임[예를 들어, 도 8c의 움직임(812) 또는 도 8g의 움직임(818)]을 검출한다(1732)(각각 도 8d 또는 도 8h).
일부 실시예에서, 선택된 제1 콘텐츠 상자 밖으로의 손가락 접촉의 움직임을 검출하는 동안, 장치는 선택된 콘텐츠 상자(또는 손가락 접촉의 현재 위치에서 손가락 접촉의 떨어짐이 검출되는 경우 선택될 콘텐츠 상자)를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분한다(1734).
장치는 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출한다(1736).
장치는 제1 콘텐츠 상자 밖에서의 손가락 접촉의 위치에 따라 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택한다(1738)(각각 도 8e 또는 도 8i). 일부 실시예에서, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출한 후에 선택이 일어난다. 일부 실시예에서, 선택된 제1 콘텐츠 상자 밖의 위치에서 손가락 접촉의 떨어짐을 검출하기 전에 선택이 행해지고 떨어짐에 의해 마무리된다.
도 8j 및 도 8k에서 손가락 접촉(820) 및 움직임(822)으로 나타낸 바와 같이, 선택된 콘텐츠 상자가 선택 핸들(808) 상에서의 추가의 손가락 제스처에 의해 추가적으로 확장될 수 있다.
일부 실시예에서, 장치는 [예를 들어, 선택된 콘텐츠에 인접하여 명령 디스플레이 영역(530) 내의 "복사" 아이콘(534) 상에서 손가락 제스처를 검출한 것에 응답하여, 도 8e 및 도 8i] 선택된 제1 콘텐츠 상자 및 선택된 하나 이상의 부가의 콘텐츠 상자를 복사한다(1740). 게다가, 일부 실시예에서, 복사된 콘텐츠는 메모리 내의 "임시 보드(pasteboard)"로 포스팅되고, 복사된 콘텐츠가 현재 응용 프로그램에서는 물론 장치에 의해 실행되는 다른 응용 프로그램에 붙여넣기하는 데(즉, 다른 응용 프로그램으로 복사하는 데) 이용가능하게 된다. 복사된 콘텐츠가 2개 이상의 콘텐츠 상자 또는 2개 이상의 데이터 형식의 콘텐츠를 포함할 때, 복사된 콘텐츠는 각각의 상이한 콘텐츠 상자 또는 데이터 항목에 대해 하나씩 다수의 객체로서 임시 보드로 포스팅될 수 있다. 상이한 포스팅된 객체는 상이한 데이터 형식(예를 들어, 이미지, HTML, 텍스트 등)을 가질 수 있다.
일부 실시예에서, 장치는 선택된 제1 콘텐츠 상자 및 선택된 하나 이상의 부가의 콘텐츠 상자를 붙여넣기한다(1742)(예를 들어, 다기능 장치 상의 대응하는 응용 프로그램에서 선택된 콘텐츠를 이메일, 메모, 또는 워드 프로세싱 문서에 붙여넣기한다).
일부 실시예에서, 복사된 선택된 콘텐츠에서의 형식 지정 및 기타 메타데이터가 붙여넣기 동안에 상실되고, 선택된 콘텐츠 내의 텍스트만이 붙여넣기된다[예를 들어, 도 8l의 콘텐츠 상자(806)를 도 8m의 메모에 복사함]. 일부 실시예에서, 복사된 선택된 콘텐츠에서의 형식 지정 및 기타 메타데이터가 붙여넣기 동안에 유지된다[예를 들어, 도 8l의 콘텐츠 상자(806)를 도 8n 및 도 8o의 이메일에 복사함].
도 18은 일부 실시예에 따른, 구조화된 전자 문서에서 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(1800)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1800)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1800)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 구조화된 전자 문서(예를 들어, 웹 페이지) 내의 단일 콘텐츠 블록 내의 콘텐츠를 선택하는 직관적 방식을 제공한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 제1 배율로 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이한다(1802). 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함한다.
장치는 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한다(1804).
복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여, 장치는 제1 콘텐츠 상자를 선택하고 선택된 제1 콘텐츠 상자를 선택되지 않은 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분한다(1806)(도 8p에 도시된 바와 같음). 일부 실시예에서, 복사하기 위해 제1 콘텐츠 상자가 선택된다. 일부 실시예에서, 매핑, 검색 또는 도 6a 내지 도 6bb와 관련하여 상기한 동작들 중 하나의 동작 등의 다른 동작에의 입력으로서 사용하기 위해 제1 콘텐츠 상자가 선택된다.
일부 실시예에서, 장치는 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하기 전에 제2 손가락 제스처[예를 들어, 선택된 제1 콘텐츠 상자(806) 내의 선택 핸들(808)을 움직이는 손가락 제스처, 도 8p]를 검출한다(1808). 제2 손가락 제스처를 검출한 것에 응답하여, 장치는 하나 이상의 콘텐츠 상자를 선택하도록 구성된 모드(도 8p)에서 하나의 콘텐츠 상자 내의 콘텐츠를 선택하도록 구성된 모드(도 8q)로 전환한다.
장치는 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출한다(선택된 콘텐츠의 끝부분은 시작점 객체 또는 끝점 객체 또는 이들 객체 중 하나의 객체의 숨겨진 히트 영역을 포함할 수 있음)(1810). 각각의 끝부분은 선택된 콘텐츠의 시작 또는 끝이다. 예를 들어, 도 8q에서, 손가락 접촉(824)은 선택된 콘텐츠의 시작 부분 상에서이다. 예를 들어, 도 8s에서, 손가락 접촉(826)은 선택된 콘텐츠의 끝부분 상에서이다.
장치는 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기(702)를 디스플레이한다(1812)(도 8r 및 도 8s). 콘텐츠 확대기(702)는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분(708), 및 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커(704)를 디스플레이한다.
장치는 선택된 제1 콘텐츠 상자(806) 내에서 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출한다(1814).
장치는 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 콘텐츠의 확장된 부분을 손가락 접촉의 움직임에 따라 업데이트한다(1816)(도 8r 및 도 8s).
장치는 손가락 접촉의 움직임에 따라 콘텐츠 확대기 및 경계 마커를 움직인다(1818)(도 8r 및 도 8s).
(예를 들어, 도 7a 내지 도 7e와 관련하여) 상기한 콘텐츠 선택의 다른 측면도 역시 여기서 사용될 수 있다. 콘텐츠가 선택되면, 장치는, 사용자 입력에 응답하여, 선택된 콘텐츠에 대해 도 6a 내지 도 6bb와 관련하여 전술한 읽기 전용 콘텐츠에 적용가능한 것과 같은 동작을 수행할 수 있다.
도 19는 일부 실시예에 따른 문서 복잡성 기준에 기초하여 구조화된 전자 문서에서 콘텐츠를 선택하는 방법을 나타낸 흐름도이다. 방법(1900)은 터치 스크린 디스플레이를 갖는 다기능 장치(예를 들어, 도 3의 300)에서 수행된다. 일부 실시예에서, 이 방법은 터치 스크린 디스플레이를 갖는 휴대용 다기능 장치[예를 들어, 휴대용 다기능 장치(100)]에서 수행된다. 방법(1900)에서의 일부 동작이 결합될 수 있고 및/또는 일부 동작의 순서가 변경될 수 있다.
이하에서 기술하는 바와 같이, 방법(1900)은 터치 스크린 디스플레이를 갖는 다기능 장치에서 HTML 이메일과 같은 구조화된 전자 문서의 복잡성에 따라 콘텐츠 선택 방법을 조정하는 방식을 제공한다. 이 방법은 간단한 구조를 갖는 문서에서 보다 정확한 선택을 가능하게 해주면서 복잡한 문서에서 콘텐츠 상자 전체를 선택한다. 이 방법은 콘텐츠를 선택할 때 사용자에 대한 인지 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리-작동 장치에서, 사용자가 콘텐츠 선택을 보다 빠르고 보다 효율적으로 수행할 수 있게 해주는 것은 전력을 절감하고 배터리 충전 사이의 시간을 증가시킨다.
장치는 터치 스크린 디스플레이 상에 구조화된 전자 문서(예를 들어, 사용자에 의해 수신되고 이메일 응용 프로그램에서 디스플레이되는 HTML 이메일)의 적어도 일부분을 디스플레이한다(1902). 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함한다.
장치는 구조화된 전자 문서가 하나 이상의 소정의 문서 복잡성 기준을 만족시키는지를 판정한다(1904).
일부 실시예에서, 하나 이상의 소정의 문서 복잡성 기준은 구조화된 전자 문서가 콘텐츠 상자를 포함하는 복수의 열을 포함해야 한다는 요구사항을 포함한다(1906).
일부 실시예에서, 하나 이상의 소정의 문서 복잡성 기준은 구조화된 전자 문서가 적어도 하나의 비인라인 이미지(non-inline image)를 포함해야 한다는 요구사항을 포함한다(1908).
일부 실시예에서, 하나 이상의 소정의 문서 복잡성 기준은 구조화된 전자 문서가 적어도 소정의 수의 레벨의 내포된 요소(nested element)(예를 들어, HTML 이메일 문서의 경우, 적어도 3 레벨의 내포된 요소)를 포함해야 한다는 요구사항을 포함한다(1910).
일부 실시예에서, 하나 이상의 소정의 문서 복잡성 기준은 구조화된 전자 문서가 캐스케이딩 스타일 시트(cascading style sheet)를 사용해야 한다는 요구사항을 포함한다(1912).
일부 실시예에서, 하나 이상의 소정의 문서 복잡성 기준은 구조화된 전자 문서가 부유 객체(floated object)를 포함해야 한다는 요구사항을 포함한다(1914).
일부 실시예에서, 하나 이상의 소정의 문서 복잡성 기준은 구조화된 전자 문서가 객체 주변에 부유된 텍스트를 포함해야 한다는 요구사항을 포함한다(1916).
장치는 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택한다(1918).
장치는 구조화된 전자 문서가 적어도 하나의 소정의 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택한다(1920). 제스처-지정 부분은 하나의 콘텐츠 상자 내의 일부분일 수 있다. 제스처-지정 부분은 첫번째 상자의 일부분 및 인접 상자의 일부분을 포함할 수 있다. 제스처-지정 부분은 첫번째 상자의 일부분, 마지막 상자의 일부분, 및 첫번째 상자와 마지막 상자 사이의 상자들 전체를 포함할 수 있다. 환언하면, 문서 복잡성 기준들 중 어떤 문서 복잡성 기준도 만족시키지 않는 구조화된 전자 문서(예를 들어, HTML 이메일)의 경우, (예를 들어, 도 10a 내지 도 10d 및 도 13a 내지 도 13g와 관련하여 상기한 것과 같은 제스처를 사용하여) 몇몇 상자(들)의 일부분만이 선택되도록 선택된 콘텐츠의 각각의 끝부분이 콘텐츠 상자(들) 내에 배치될 수 있다. 이와 달리, 적어도 하나의 문서 복잡성 기준을 만족시키는 구조화된 전자 문서의 경우, (예를 들어, 도 17a 및 도 17b와 관련하여 상기한 것과 같은 제스처를 사용하여) 전체 콘텐츠 상자가 선택된다.
(예를 들어, 도 7a 내지 도 7e와 관련하여) 상기한 콘텐츠 선택의 다른 측면도 역시 여기서 사용될 수 있다. 콘텐츠가 선택되면, 장치는, 사용자 입력에 응답하여, 선택된 콘텐츠에 대해 도 6a 내지 도 6bb와 관련하여 전술한 읽기 전용 콘텐츠에 적용가능한 것과 같은 동작을 수행할 수 있다.
전술한 정보 처리 방법에서의 단계들이 범용 프로세서 또는 ASIC(application specific chip)과 같은 정보 처리 장치에서 하나 이상의 기능 모듈을 실행함으로써 구현될 수 있다. 이들 모듈, 이들 모듈의 조합, 및/또는 이들과 일반 하드웨어와의 조합(예를 들어, 도 1a, 도 1b 및 도 3과 관련하여 전술함) 모두가 본 발명의 보호 범위 내에 포함된다.
이상의 기재 내용은, 설명을 위해, 특정의 실시예를 참조하여 기술되어 있다. 그렇지만, 상기 예시적인 설명은 총망라한 것이 아니며 또한 본 발명을 개시된 정확한 형태로 제한하기 위한 것도 아니다. 이상의 개시 내용을 고려하여 많은 수정 및 변형이 가능하다. 본 발명의 원리 및 그의 실제 응용을 가장 잘 설명함으로써 당업자가 본 발명 및 생각되는 특정의 용도에 적합한 다양한 수정을 갖는 다양한 실시예를 가장 잘 이용할 수 있게 해주기 위해 이들 실시예가 선택되어 기술되었다.
참고로, 본원의 원출원의 최초 출원서에 첨부된 청구범위는 아래와 같습니다.
-청구항 1-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
제1 배율로 상기 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하는 단계,
상기 편집가능 콘텐츠 상에서 손가락 제스처를 검출하는 단계,
상기 편집가능 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 편집가능 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 편집가능 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 단계,
상기 편집가능 콘텐츠의 확장된 부분, 및 상기 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 편집가능 콘텐츠의 확장된 부분을 변경하는 단계,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 단계,
삽입 마커가 편집가능 콘텐츠의 확장된 부분 내의 제2 위치에 위치해 있는 동안 손가락 접촉의 떨어짐(lift off)을 검출하는 단계,
손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기 및 상기 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하는 단계,
제1 배율의 편집가능 콘텐츠 내의 현재 위치에 삽입 마커를 디스플레이하는 단계 - 상기 현재 위치는 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응함 -, 및
상기 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 제1 명령 디스플레이 영역은 상기 삽입 마커의 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
를 포함하는 방법.
-청구항 2-
제1항에 있어서, 상기 편집가능 콘텐츠는 텍스트를 포함하는 방법.
-청구항 3-
제1항에 있어서, 상기 편집가능 콘텐츠 상에서의 상기 손가락 제스처는 누르고 있기(press and hold) 제스처인 방법.
-청구항 4-
제1항에 있어서, 상기 콘텐츠 확대기는 미리 정의된 형상을 가지는 방법.
-청구항 5-
제1항에 있어서, 상기 콘텐츠 확대기에 디스플레이된 상기 편집가능 콘텐츠의 확장된 부분은 동시에 디스플레이된 적어도 3개의 수평 텍스트 줄의 일부분을 포함하는 방법.
-청구항 6-
제1항에 있어서, 상기 삽입 마커는 커서, 삽입 막대(insertion bar), 또는 삽입 점(insertion point)인 방법.
-청구항 7-
제1항에 있어서, 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 편집가능 콘텐츠의 확장된 부분이 상기 제1 배율의 상기 편집가능 콘텐츠 내의 상기 현재 위치에 있는 상기 삽입 마커 내로 축소되는 애니메이션을 디스플레이하는 단계를 포함하는 방법.
-청구항 8-
제1항에 있어서, 상기 제1 명령 디스플레이 영역은 상기 편집가능 콘텐츠 모두를 선택하는 아이콘을 포함하는 방법.
-청구항 9-
제1항에 있어서, 상기 제1 명령 디스플레이 영역은 부가의 명령 옵션을 디스플레이하는 아이콘을 포함하는 방법.
-청구항 10-
제1항에 있어서, 상기 제1 명령 디스플레이 영역은 이전의 동작을 실행 취소하는 아이콘을 포함하는 방법.
-청구항 11-
제1항에 있어서, 상기 제1 명령 디스플레이 영역은 이전의 동작을 다시 실행하는 아이콘을 포함하는 방법.
-청구항 12-
제1항에 있어서, 상기 제1 명령 디스플레이 영역 내의 아이콘들은 사용자 구성가능한 적어도 하나의 명령을 포함하는 방법.
-청구항 13-
제1항에 있어서, 상기 제1 명령 디스플레이 영역 내의 아이콘들은 컨텍스트 기반(context sensitive)인 적어도 하나의 명령을 포함하는 방법.
-청구항 14-
제1항에 있어서, 상기 편집가능 콘텐츠는 제1 응용 프로그램 내에서 디스플레이되고, 상기 제1 명령 디스플레이 영역 내의 아이콘들은 미리 정의된 응용 프로그래밍 인터페이스(application programming interface)를 통해 상기 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하라는 적어도 하나의 명령을 포함하는 방법.
-청구항 15-
제1항에 있어서, 상기 손가락 접촉은 상기 손가락 제스처의 일부인 방법.
-청구항 16-
제1항에 있어서, 상기 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출하는 단계, 및
상기 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 제1 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계, 및
상기 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 단계를 포함하는 방법.
-청구항 17-
제16항에 있어서, 상기 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 18-
제16항에 있어서, 상기 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 선택된 콘텐츠에 인접하여 제2 명령 디스플레이 영역을 디스플레이하는 단계를 포함하고,
상기 제2 명령 디스플레이 영역은 상기 선택된 콘텐츠를 잘라내기하는 아이콘 및 상기 선택된 콘텐츠를 복사하는 아이콘을 포함하는 방법.
-청구항 19-
제18항에 있어서, 상기 제2 명령 디스플레이 영역은 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘을 포함하는 방법.
-청구항 20-
제18항에 있어서, 상기 제2 명령 디스플레이 영역은 이전의 동작을 실행 취소하는 아이콘을 포함하는 방법.
-청구항 21-
제18항에 있어서, 상기 제2 명령 디스플레이 영역은 부가의 명령 옵션을 디스플레이하는 아이콘을 포함하는 방법.
-청구항 22-
제18항에 있어서, 상기 제2 명령 디스플레이 영역은 이전의 동작을 다시 실행하는 아이콘을 포함하는 방법.
-청구항 23-
제18항에 있어서, 상기 제2 명령 디스플레이 영역 내의 아이콘들은 사용자 구성가능한 적어도 하나의 명령을 포함하는 방법.
-청구항 24-
제18항에 있어서, 상기 제2 명령 디스플레이 영역 내의 아이콘들은 컨텍스트 기반인 적어도 하나의 명령을 포함하는 방법.
-청구항 25-
제18항에 있어서, 상기 편집가능 콘텐츠는 제1 응용 프로그램 내에서 디스플레이되고, 상기 제2 명령 디스플레이 영역 내의 아이콘은 미리 정의된 응용 프로그래밍 인터페이스를 통해 상기 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하라는 적어도 하나의 명령을 포함하는 방법.
-청구항 26-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
제1 배율의 편집가능 콘텐츠,
콘텐츠 확대기,
삽입 마커, 및
명령 디스플레이 영역
을 포함하고,
상기 편집가능 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 편집가능 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 편집가능 콘텐츠의 일부분이 상기 제1 배율보다 큰 제2 배율로 확장되고,
상기 콘텐츠 확대기가 디스플레이되며 - 상기 콘텐츠 확대기는 상기 편집가능 콘텐츠의 확장된 부분, 및 상기 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 상기 삽입 마커를 디스플레이함 -,
상기 콘텐츠 확대기가 움직이고 상기 편집가능 콘텐츠의 확장된 부분이 상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 검출된 움직임에 따라 변경되며,
상기 삽입 마커가 상기 손가락 접촉의 검출된 움직임에 따라 상기 제1 위치로부터 상기 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고,
상기 삽입 마커가 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기 및 상기 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것이 중단되며,
상기 삽입 마커가 상기 제1 배율의 상기 편집가능 콘텐츠 내의 현재 위치에 디스플레이되고 - 상기 현재 위치는 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응함 -, 및
상기 명령 디스플레이 영역이 상기 삽입 마커에 인접하여 디스플레이되는 - 상기 명령 디스플레이 영역은 상기 삽입 마커의 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
그래픽 사용자 인터페이스.
-청구항 27-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
제1 배율로 상기 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하는 명령어,
상기 편집가능 콘텐츠 상에서 손가락 제스처를 검출하는 명령어,
상기 편집가능 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 편집가능 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 편집가능 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하고,
상기 편집가능 콘텐츠의 확장된 부분, 및 상기 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 명령어,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 편집가능 콘텐츠의 확장된 부분을 변경하는 명령어,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 명령어,
상기 삽입 마커가 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 명령어,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기 및 상기 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하고,
상기 제1 배율의 상기 편집가능 콘텐츠 내의 현재 위치에 상기 삽입 마커를 디스플레이하고 - 상기 현재 위치는 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응함 -,
상기 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 명령어 - 상기 제1 명령 디스플레이 영역은 상기 삽입 마커의 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
를 포함하는 다기능 장치.
-청구항 28-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
제1 배율로 상기 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하고,
상기 편집가능 콘텐츠 상에서 손가락 제스처를 검출하며,
상기 편집가능 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 편집가능 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 편집가능 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하고,
상기 편집가능 콘텐츠의 확장된 부분, 및 상기 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하며,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 편집가능 콘텐츠의 확장된 부분을 변경하며,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고,
상기 삽입 마커가 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하며,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기 및 상기 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하고,
상기 제1 배율의 상기 편집가능 콘텐츠 내의 현재 위치에 상기 삽입 마커를 디스플레이하며 - 상기 현재 위치는 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응함 -,
상기 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하게 하는 - 상기 제1 명령 디스플레이 영역은 상기 삽입 마커의 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 29-
터치 스크린 디스플레이,
제1 배율로 상기 터치 스크린 디스플레이 상에 편집가능 콘텐츠를 디스플레이하는 수단,
편집가능 콘텐츠 상에서 손가락 제스처를 검출하는 수단,
상기 편집가능 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 편집가능 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 편집가능 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 수단,
상기 편집가능 콘텐츠의 확장된 부분, 및 상기 편집가능 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 수단,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 편집가능 콘텐츠의 확장된 부분을 변경하는 수단,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 편집가능 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 수단,
상기 삽입 마커가 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 수단,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기 및 상기 편집가능 콘텐츠의 확장된 부분을 디스플레이하는 것을 중단하는 수단,
상기 제1 배율의 상기 편집가능 콘텐츠 내의 현재 위치에 상기 삽입 마커를 디스플레이하는 수단 - 상기 현재 위치는 상기 편집가능 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응함 -, 및
상기 삽입 마커에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 수단 - 상기 제1 명령 디스플레이 영역은 상기 삽입 마커의 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
을 포함하는 다기능 장치.
-청구항 30-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
제1 배율로 상기 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하는 단계,
상기 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하는 단계,
상기 읽기 전용 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 읽기 전용 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 읽기 전용 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 단계,
상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 읽기 전용 콘텐츠의 확장된 부분을 변경하는 단계,
상기 손가락 접촉의 검출된 움직임에 따라 상기 위치 마커를 상기 제1 위치로부터 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 단계,
상기 위치 마커가 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 단계,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 위치 마커를 디스플레이하는 것을 중단하는 단계, 및
상기 제1 배율의 상기 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 현재 위치는 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응하고, 상기 제1 명령 디스플레이 영역은 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
를 포함하는 방법.
-청구항 31-
제30항에 있어서, 상기 읽기 전용 콘텐츠는 텍스트를 포함하는 방법.
-청구항 32-
제30항에 있어서, 상기 읽기 전용 콘텐츠 상에서의 상기 손가락 제스처는 누르고 있기 제스처인 방법.
-청구항 33-
제30항에 있어서, 상기 콘텐츠 확대기는 미리 정의된 형상을 가지는 방법.
-청구항 34-
제30항에 있어서, 상기 콘텐츠 확대기에 디스플레이된 상기 읽기 전용 콘텐츠의 확장된 부분은 동시에 디스플레이된 적어도 3개의 수평 텍스트 줄의 일부분을 포함하는 방법.
-청구항 35-
제30항에 있어서, 상기 제1 명령 디스플레이 영역은 상기 읽기 전용 콘텐츠 모두를 선택하는 아이콘을 포함하는 방법.
-청구항 36-
제30항에 있어서, 상기 제1 명령 디스플레이 영역은 부가의 명령 옵션을 디스플레이하는 아이콘을 포함하는 방법.
-청구항 37-
제30항에 있어서, 상기 제1 명령 디스플레이 영역은 이전의 동작을 실행 취소하는 아이콘을 포함하는 방법.
-청구항 38-
제30항에 있어서, 상기 제1 명령 디스플레이 영역은 이전의 동작을 다시 실행하는 아이콘을 포함하는 방법.
-청구항 39-
제30항에 있어서, 상기 제1 명령 디스플레이 영역 내의 아이콘들은 사용자 구성가능한 적어도 하나의 명령을 포함하는 방법.
-청구항 40-
제30항에 있어서, 상기 제1 명령 디스플레이 영역 내의 아이콘들은 컨텍스트 기반인 적어도 하나의 명령을 포함하는 방법.
-청구항 41-
제30항에 있어서, 상기 읽기 전용 콘텐츠가 제1 응용 프로그램 내에서 디스플레이되고, 상기 제1 명령 디스플레이 영역 내의 아이콘들이 미리 정의된 응용 프로그래밍 인터페이스를 통해 상기 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하라는 적어도 하나의 명령을 포함하는 방법.
-청구항 42-
제30항에 있어서, 상기 손가락 접촉은 상기 손가락 제스처의 일부인 방법.
-청구항 43-
제30항에 있어서, 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 손가락 제스처를 검출하는 단계, 및
상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 제1 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계, 및
상기 현재 위치와 연관된 콘텐츠를 선택하는 단계를 포함하는 방법.
-청구항 44-
제43항에 있어서, 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 45-
제43항에 있어서, 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 선택된 콘텐츠에 인접하여 제2 명령 디스플레이 영역을 디스플레이하는 단계를 포함하고,
상기 제2 명령 디스플레이 영역은 상기 선택된 콘텐츠를 복사하는 아이콘을 포함하는 방법.
-청구항 46-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
제1 배율의 읽기 전용 콘텐츠,
콘텐츠 확대기,
위치 마커, 및
명령 디스플레이 영역
을 포함하고,
상기 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 읽기 전용 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 읽기 전용 콘텐츠의 일부분이 상기 제1 배율보다 큰 제2 배율로 확장되고,
상기 콘텐츠 확대기가 디스플레이되며 - 상기 콘텐츠 확대기는 상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이함 -,
상기 콘텐츠 확대기가 움직이고 상기 읽기 전용 콘텐츠의 확장된 부분이 손가락 접촉의 검출된 움직임에 따라 변경되며,
상기 위치 마커가 상기 손가락 접촉의 검출된 움직임에 따라 상기 제1 위치로부터 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고,
상기 위치 마커가 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 위치 마커를 디스플레이하는 것이 중단되고,
상기 명령 디스플레이 영역이 상기 제1 배율의 상기 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 디스플레이되며, 상기 현재 위치는 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응하고, 상기 명령 디스플레이 영역은 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함하는 그래픽 사용자 인터페이스.
-청구항 47-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
제1 배율로 상기 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하는 명령어,
상기 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하는 명령어,
상기 읽기 전용 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 읽기 전용 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 읽기 전용 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하고,
상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 명령어,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 읽기 전용 콘텐츠의 확장된 부분을 변경하는 명령어,
상기 손가락 접촉의 검출된 움직임에 따라 상기 위치 마커를 상기 제1 위치로부터 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 명령어,
상기 위치 마커가 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 명령어,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 위치 마커를 디스플레이하는 것을 중단하는 명령어, 및
상기 제1 배율의 상기 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 명령어 - 상기 현재 위치는 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응하고, 상기 제1 명령 디스플레이 영역은 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
를 포함하는 다기능 장치.
-청구항 48-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
제1 배율로 상기 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하고,
상기 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하며,
상기 읽기 전용 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 읽기 전용 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 읽기 전용 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하고,
상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하며,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 읽기 전용 콘텐츠의 확장된 부분을 변경하며,
상기 손가락 접촉의 검출된 움직임에 따라 상기 위치 마커를 상기 제1 위치로부터 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고,
상기 위치 마커가 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하며,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 위치 마커를 디스플레이하는 것을 중단하고,
상기 제1 배율의 상기 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하게 하는 - 상기 현재 위치는 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응하고, 상기 제1 명령 디스플레이 영역은 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 49-
터치 스크린 디스플레이,
제1 배율로 상기 터치 스크린 디스플레이 상에 읽기 전용 콘텐츠를 디스플레이하는 수단,
상기 읽기 전용 콘텐츠 상에서 손가락 제스처를 검출하는 수단,
상기 읽기 전용 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 읽기 전용 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 읽기 전용 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 수단,
상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제1 위치에 있는 위치 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 수단,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 읽기 전용 콘텐츠의 확장된 부분을 변경하는 수단,
상기 손가락 접촉의 검출된 움직임에 따라 상기 위치 마커를 상기 제1 위치로부터 상기 읽기 전용 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 수단,
상기 위치 마커가 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 수단,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 읽기 전용 콘텐츠의 확장된 부분, 및 상기 위치 마커를 디스플레이하는 것을 중단하는 수단, 및
상기 제1 배율의 상기 읽기 전용 콘텐츠 내의 현재 위치에 인접하여 제1 명령 디스플레이 영역을 디스플레이하는 수단 - 상기 현재 위치는 상기 읽기 전용 콘텐츠의 확장된 부분 내의 상기 제2 위치에 대응하고, 상기 제1 명령 디스플레이 영역은 상기 현재 위치와 연관된 콘텐츠를 선택하는 아이콘을 포함함 -
을 포함하는 다기능 장치.
-청구항 50-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계,
상기 콘텐츠 상에서 손가락 제스처를 검출하는 단계,
상기 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 단계,
상기 콘텐츠의 확장된 부분, 및 상기 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 확장된 부분을 변경하는 단계,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 단계,
상기 삽입 마커가 상기 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 단계,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 콘텐츠의 확장된 부분, 및 상기 삽입 마커를 디스플레이하는 것을 중단하는 단계, 및
상기 삽입 마커의 상기 제2 위치와 연관된 콘텐츠를 선택하는 단계
를 포함하는 방법.
-청구항 51-
제50항에 있어서, 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 52-
제50항에 있어서, 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 상기 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 53-
제50항에 있어서, 상기 콘텐츠는 텍스트를 포함하는 방법.
-청구항 54-
제50항에 있어서, 상기 콘텐츠 상에서의 상기 손가락 제스처는 누르고 있기 제스처인 방법.
-청구항 55-
제50항에 있어서, 상기 콘텐츠 확대기는 미리 정의된 형상을 가지는 방법.
-청구항 56-
제50항에 있어서, 상기 콘텐츠 확대기에 디스플레이된 상기 콘텐츠의 확장된 부분은 동시에 디스플레이된 적어도 3개의 수평 텍스트 줄의 일부분을 포함하는 방법.
-청구항 57-
제50항에 있어서, 상기 삽입 마커는 커서, 삽입 막대, 또는 삽입 점인 방법.
-청구항 58-
제50항에 있어서, 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 상기 콘텐츠의 확장된 부분이 상기 선택된 콘텐츠 내로 축소되는 애니메이션을 디스플레이하는 단계를 포함하는 방법.
-청구항 59-
제50항에 있어서, 상기 손가락 접촉은 상기 손가락 제스처의 일부인 방법.
-청구항 60-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
제1 배율의 콘텐츠,
콘텐츠 확대기,
삽입 마커, 및
명령 디스플레이 영역
을 포함하고,
상기 콘텐츠 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 콘텐츠의 일부분이 상기 제1 배율보다 큰 제2 배율로 확장되고,
상기 콘텐츠 확대기가 디스플레이되며 - 상기 콘텐츠 확대기는 상기 콘텐츠의 확장된 부분, 및 상기 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이함 -,
상기 콘텐츠 확대기가 움직이고 상기 콘텐츠의 확장된 부분이 손가락 접촉의 검출된 움직임에 따라 변경되며,
상기 삽입 마커가 상기 손가락 접촉의 검출된 움직임에 따라 상기 제1 위치로부터 상기 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고,
상기 삽입 마커가 상기 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 콘텐츠의 확장된 부분, 및 상기 삽입 마커를 디스플레이하는 것이 중단되고,
상기 삽입 마커의 상기 제2 위치와 연관된 콘텐츠가 선택되는
그래픽 사용자 인터페이스.
-청구항 61-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어,
상기 콘텐츠 상에서 손가락 제스처를 검출하는 명령어,
상기 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하고,
상기 콘텐츠의 확장된 부분, 및 상기 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 명령어,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 확장된 부분을 변경하는 명령어,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 명령어,
상기 삽입 마커가 상기 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 명령어,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 콘텐츠의 확장된 부분, 및 상기 삽입 마커를 디스플레이하는 것을 중단하는 명령어, 및
상기 삽입 마커의 상기 제2 위치와 연관된 콘텐츠를 선택하는 명령어
를 포함하는 다기능 장치.
-청구항 62-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고,
상기 콘텐츠 상에서 손가락 제스처를 검출하며,
상기 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하고,
상기 콘텐츠의 확장된 부분, 및 상기 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하며,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하고,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 확장된 부분을 변경하며,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 콘텐츠의 확장된 부분 내의 제2 위치로 움직이고,
상기 삽입 마커가 상기 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하며,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 콘텐츠의 확장된 부분, 및 상기 삽입 마커를 디스플레이하는 것을 중단하고,
상기 삽입 마커의 상기 제2 위치와 연관된 콘텐츠를 선택하게 하는 명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 63-
터치 스크린 디스플레이,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단,
상기 콘텐츠 상에서 손가락 제스처를 검출하는 수단,
상기 콘텐츠 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 수단,
상기 콘텐츠의 확장된 부분, 및 상기 콘텐츠의 확장된 부분 내의 제1 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 수단,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 수단,
상기 콘텐츠 확대기를 움직여 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 확장된 부분을 변경하는 수단,
상기 손가락 접촉의 검출된 움직임에 따라 상기 삽입 마커를 상기 제1 위치로부터 상기 콘텐츠의 확장된 부분 내의 제2 위치로 움직이는 수단,
상기 삽입 마커가 상기 콘텐츠의 확장된 부분 내의 상기 제2 위치에 위치해 있는 동안 상기 손가락 접촉의 떨어짐을 검출하는 수단,
상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기, 상기 콘텐츠의 확장된 부분, 및 상기 삽입 마커를 디스플레이하는 것을 중단하는 수단, 및
상기 삽입 마커의 상기 제2 위치와 연관된 콘텐츠를 선택하는 수단
을 포함하는 다기능 장치.
-청구항 64-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계,
상기 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑(double-tap) 제스처를 검출하는 단계, 및
상기 콘텐츠 내의 상기 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여,
상기 단어를 선택하는 단계, 및
상기 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계
를 포함하는 방법.
-청구항 65-
제64항에 있어서, 상기 콘텐츠 내의 상기 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여,
상기 단어에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 66-
제64항에 있어서, 상기 콘텐츠는 텍스트를 포함하는 방법.
-청구항 67-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
콘텐츠,
상기 콘텐츠 내의 단어,
시작점 객체, 및
끝점 객체
를 포함하고,
상기 콘텐츠 내의 상기 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여,
상기 단어가 선택되고,
상기 시작점 객체 및 상기 끝점 객체가 상기 단어의 각각의 끝부분에 디스플레이되는 그래픽 사용자 인터페이스.
-청구항 68-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어,
상기 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하는 명령어, 및
상기 콘텐츠 내의 상기 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여,
상기 단어를 선택하는 명령어, 및
상기 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 명령어
를 포함하는 다기능 장치.
-청구항 69-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고,
상기 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하며,
상기 콘텐츠 내의 상기 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여,
상기 단어를 선택하고,
상기 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 70-
터치 스크린 디스플레이,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단,
상기 콘텐츠 내의 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출하는 수단, 및
상기 콘텐츠 내의 상기 단어 상에서 한 손가락에 의한 두번-탭핑 제스처를 검출한 것에 응답하여,
상기 단어를 선택하는 수단, 및
상기 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 수단
을 포함하는 다기능 장치.
-청구항 71-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계,
상기 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하는 단계,
상기 터치 스크린 디스플레이 상에서 상기 하나 이상의 손가락에 의해 행해지는 제스처를 인식하는 단계 - 상기 제스처는 상기 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 미리 정의된 제스처 중 하나의 제스처임 -, 및
상기 제스처를 인식한 것에 응답하여 상기 콘텐츠에 대해 동작을 수행하는 단계
를 포함하는 방법.
-청구항 72-
제71항에 있어서, 동작을 수행하는 단계는 상기 제스처를 인식한 것에 응답하여, 상기 콘텐츠의 적어도 일부분을 선택하고 상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 73-
제71항에 있어서, 동작을 수행하는 단계는, 상기 제스처를 인식한 것에 응답하여, 상기 콘텐츠의 적어도 일부분을 선택하고 상기 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계를 포함하는 방법.
-청구항 74-
제71항에 있어서, 상기 콘텐츠는 텍스트를 포함하는 방법.
-청구항 75-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 제1 위치에서의 한 손가락에 의한 한번-탭핑(single-tap) 제스처이고,
상기 콘텐츠 내의 상기 제1 위치에서의 한 손가락에 의한 한번-탭핑 제스처를 인식한 것에 응답하여, 상기 콘텐츠 내의 상기 제1 위치에 삽입 마커를 디스플레이하는 단계를 포함하는 방법.
-청구항 76-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 제1 단어 상에서의 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑이고,
상기 콘텐츠 내의 상기 제1 단어 상에서 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑을 인식한 것에 응답하여,
상기 제1 단어를 선택하는 단계, 및
상기 제1 단어의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 77-
제76항에 있어서, 상기 콘텐츠 내의 상기 제1 단어 상에서 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑을 인식한 것에 응답하여,
상기 제1 단어에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 78-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 문장 상에서의 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑이고,
상기 콘텐츠 내의 상기 문장 상에서 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑을 인식한 것에 응답하여,
상기 문장을 선택하는 단계, 및
상기 문장의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 79-
제78항에 있어서, 상기 콘텐츠 내의 상기 문장 상에서 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑을 인식한 것에 응답하여,
상기 문장에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 80-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 단락 상에서의 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑이고,
상기 콘텐츠 내의 상기 단락 상에서 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑을 인식한 것에 응답하여,
상기 단락을 선택하는 단계, 및
상기 단락의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 81-
제80항에 있어서, 상기 콘텐츠 내의 상기 단락 상에서 한 손가락에 의한 미리 정의된 횟수의 연속적인 탭핑을 인식한 것에 응답하여,
상기 단락에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 82-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 제1 위치에서의 한 손가락에 의한 정지해 있는 누름 제스처(stationary pressing gesture)이고, 상기 콘텐츠가 제1 배율로 디스플레이되며,
상기 콘텐츠 내의 제1 위치에서의 한 손가락에 의한 정지해 있는 누름 제스처를 인식한 것에 응답하여,
상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서 상기 터치 스크린 디스플레이 상의 상기 제1 위치에 근접해 있는 상기 콘텐츠의 일부분을 상기 제1 배율보다 큰 제2 배율로 확장하는 단계, 및
상기 콘텐츠의 확장된 부분, 및 상기 제1 위치에 대응하는 상기 콘텐츠의 확장된 부분 내의 위치에 있는 삽입 마커를 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계를 포함하는 방법.
-청구항 83-
제82항에 있어서, 상기 터치 스크린 디스플레이를 가로지르는 상기 한 손가락의 움직임을 검출하는 단계,
상기 콘텐츠 확대기를 움직여 상기 한 손가락의 검출된 움직임에 따라 상기 콘텐츠의 확장된 부분을 변경하는 단계, 및
상기 한 손가락의 검출된 움직임에 따라 상기 콘텐츠의 확장된 부분 내의 제2 위치로 상기 삽입 마커를 움직이는 단계를 포함하는 방법.
-청구항 84-
제71항에 있어서, 상기 제스처는 한 손가락에 의한 탭핑 앤 하프 제스처(tap-and-a-half gesture)이고, 상기 탭핑 앤 하프 제스처는 한번 태핑 직후에 손가락 접촉이 이어서 상기 터치 스크린 디스플레이 상에서 움직이는 것을 포함하는 한 손가락 제스처이며,
상기 한 손가락에 의한 탭핑 앤 하프 제스처를 인식한 것에 응답하여,
상기 콘텐츠의 일부분을 선택하는 단계, 및
상기 터치 스크린 디스플레이 상에서의 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 상기 선택된 부분을 업데이트하는 단계를 포함하는 방법.
-청구항 85-
제84항에 있어서, 상기 한 손가락에 의한 탭핑 앤 하프 제스처를 인식한 것에 응답하여,
상기 콘텐츠의 상기 업데이트된 선택된 부분의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 86-
제84항에 있어서, 상기 터치 스크린 디스플레이 상에서의 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 상기 선택된 부분을 업데이트하는 단계는,
상기 콘텐츠의 상기 선택된 부분의 한쪽 끝을 상기 콘텐츠 내의 고정 위치에 유지하면서 상기 터치 스크린 디스플레이 상에서의 상기 손가락 접촉의 검출된 움직임에 따라 상기 콘텐츠의 상기 선택된 부분의 다른 쪽 끝을 움직이는 단계를 포함하는 방법.
-청구항 87-
제84항에 있어서, 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠의 상기 업데이트된 선택된 부분에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 88-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 단락 상에서 두 손가락에 의한 한번-탭핑 제스처이고,
상기 콘텐츠 내의 단락 상에서 두 손가락에 의한 한번-탭핑 제스처를 인식한 것에 응답하여,
상기 콘텐츠 내의 상기 단락을 선택하는 단계, 및
상기 단락의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 89-
제88항에 있어서, 상기 콘텐츠 내의 단락 상에서 두 손가락에 의한 한번-탭핑 제스처를 인식한 것에 응답하여,
상기 단락에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 90-
제71항에 있어서, 상기 제스처는 상기 콘텐츠 내의 제1 위치에서의 제1 손가락에 의한 접촉 및 상기 콘텐츠 내의 제2 위치에서의 제2 손가락에 의한 동시 접촉을 포함하는 두 손가락에 의한 정지해 있는 누름 제스처이고,
상기 두 손가락에 의한 정지해 있는 누름 제스처를 인식한 것에 응답하여,
상기 제1 위치와 상기 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하는 단계, 및
상기 제1 위치와 상기 제2 위치 사이에 위치하는 상기 콘텐츠의 선택된 부분의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 91-
제90항에 있어서, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하는 단계 후에,
상기 제1 손가락에 의한 접촉의 움직임을 검출하는 단계,
상기 검출된 상기 제1 손가락에 의한 접촉의 움직임에 따라 상기 콘텐츠의 선택된 부분을 업데이트하는 단계,
상기 제2 손가락에 의한 접촉의 움직임을 검출하는 단계,
상기 검출된 상기 제2 손가락에 의한 접촉의 움직임에 따라 상기 콘텐츠의 선택된 부분을 업데이트하는 단계, 및
상기 콘텐츠의 업데이트된 선택된 부분의 각각의 끝부분에 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 92-
제90항에 있어서, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하는 단계 후에,
적어도 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출하는 단계, 및
적어도 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여,
상기 콘텐츠의 선택된 부분을, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 상기 콘텐츠의 부분을 포함하는 문장으로 증가시키는 단계, 및
상기 문장의 각각의 끝부분에 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 93-
제90항에 있어서, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하는 단계 후에,
적어도 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출하는 단계, 및
적어도 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여,
상기 콘텐츠의 선택된 부분을, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 상기 콘텐츠의 부분을 포함하는 단락으로 증가시키는 단계, 및
상기 단락의 각각의 끝부분에 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 94-
제90항에 있어서, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하는 단계 후에,
적어도 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출하는 단계, 및
적어도 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여,
상기 콘텐츠 모두를 선택하는 단계, 및
상기 콘텐츠의 각각의 끝부분에 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 95-
제90항에 있어서, 상기 제1 위치와 상기 제2 위치 사이에 위치하는 콘텐츠의 일부분을 선택하는 단계 후에,
일련의 미리 정의된 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출하는 단계, 및
일련의 미리 정의된 기간 내의 각각의 기간 동안 상기 두 손가락에 의한 정지해 있는 누름 제스처를 계속하여 검출한 것에 응답하여,
상기 콘텐츠의 선택된 부분을 증가시키는 단계 - 상기 증가된 콘텐츠의 선택된 부분은 상기 제1 위치와 상기 제2 위치 사이에 위치하는 상기 콘텐츠의 부분을 포함함 -, 및
상기 증가된 콘텐츠의 선택된 부분의 각각의 끝부분에 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 96-
제90항에 있어서, 상기 두 손가락의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠의 선택된 부분에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 97-
제71항에 있어서, 상기 제스처는 한 손가락에 의한 여백에서 시작된 선택 제스처(margin-initiated selection gesture)이고 - 상기 여백에서 시작된 선택 제스처는 상기 콘텐츠 내의 단어에 인접한 여백에서의 초기 손가락 접촉 및 그에 뒤따른 상기 콘텐츠 내의 위치로의 상기 손가락 접촉의 움직임을 포함하는 한 손가락 제스처임 -,
상기 한 손가락에 의한 여백에서 시작된 선택 제스처를 인식한 것에 응답하여,
상기 콘텐츠의 일부분을 선택하는 단계 - 상기 단어에서 상기 콘텐츠의 선택된 부분이 시작하거나 끝남 -, 및
상기 콘텐츠 내의 상기 위치로의 상기 손가락 접촉의 움직임에 따라 상기 콘텐츠의 선택된 부분을 업데이트하는 단계를 포함하는 방법.
-청구항 98-
제97항에 있어서, 상기 한 손가락에 의한 여백에서 시작된 선택 제스처를 인식한 것에 응답하여,
상기 콘텐츠의 상기 업데이트된 선택된 부분의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 99-
제97항에 있어서, 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠의 상기 업데이트된 선택된 부분에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 100-
제71항에 있어서, 상기 콘텐츠는 상기 터치 스크린 디스플레이 상에서 수평이 아니라 수직으로 스크롤하도록 구성되어 있고,
상기 제스처는 한 손가락에 의한 스와이프로 시작되는 선택 제스처(swipe-initiated selection gesture)이고,
상기 스와이프로 시작되는 선택 제스처는, 처음에 상기 콘텐츠 내의 제1 위치에 있는 손가락 접촉 - 상기 손가락 접촉은 처음에 상기 터치 스크린 디스플레이 상에서 수평축으로부터 미리 정의된 각도 내의 방향으로 움직임 -, 및 상기 콘텐츠 내의 제2 위치로의 상기 손가락 접촉의 움직임을 포함하는 한 손가락 제스처이며,
상기 한 손가락에 의한 스와이프로 시작되는 선택 제스처를 인식한 것에 응답하여,
상기 콘텐츠의 일부분을 선택하는 단계 - 상기 제1 위치에서 상기 콘텐츠의 선택된 부분이 시작하거나 끝남 -, 및
상기 콘텐츠 내의 상기 제2 위치로의 상기 손가락 접촉의 움직임에 따라 상기 콘텐츠의 선택된 부분을 업데이트하는 단계를 포함하는 방법.
-청구항 101-
제100항에 있어서, 상기 콘텐츠의 상기 업데이트된 선택된 부분의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 102-
제100항에 있어서, 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠의 상기 업데이트된 선택된 부분에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함함 - 를 포함하는 방법.
-청구항 103-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어,
상기 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하는 명령어,
상기 터치 스크린 디스플레이 상에서 상기 하나 이상의 손가락에 의해 행해지는 제스처를 인식하는 명령어 - 상기 제스처는 상기 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 미리 정의된 제스처 중 하나의 제스처임 -, 및
상기 제스처를 인식한 것에 응답하여 상기 콘텐츠에 대해 동작을 수행하는 명령어
를 포함하는 다기능 장치.
-청구항 104-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고,
상기 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하며,
상기 터치 스크린 디스플레이 상에서 상기 하나 이상의 손가락에 의해 행해지는 제스처를 인식하고 - 상기 제스처는 상기 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 미리 정의된 제스처 중 하나의 제스처임 -,
상기 제스처를 인식한 것에 응답하여 상기 콘텐츠에 대해 동작을 수행하게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 105-
터치 스크린 디스플레이,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단,
상기 터치 스크린 디스플레이 상에서 하나 이상의 손가락을 검출하는 수단,
상기 터치 스크린 디스플레이 상에서 상기 하나 이상의 손가락에 의해 행해지는 제스처를 인식하는 수단 - 상기 제스처는 상기 콘텐츠의 일부분을 선택하거나 선택하는 것을 돕는 동작을 하는 복수의 미리 정의된 제스처 중 하나의 제스처임 -, 및
상기 제스처를 인식한 것에 응답하여 상기 콘텐츠에 대해 동작을 수행하는 수단
을 포함하는 다기능 장치.
-청구항 106-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계 - 상기 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 단계,
상기 터치 스크린 디스플레이 상에서 상기 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 단계 - 상기 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -,
상기 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하는 단계, 및
상기 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠에 대해 대응하는 동작을 수행하는 단계
를 포함하는 방법.
-청구항 107-
제106항에 있어서, 상기 명령 디스플레이 영역 내의 아이콘은 하나의 행으로 디스플레이되는 방법.
-청구항 108-
제106항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 109-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠를 복사하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠를 복사하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠를 복사하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠를 복사하는 단계를 더 포함하는 방법.
-청구항 110-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠를 잘라내기하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠를 잘라내기하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠를 잘라내기하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠를 잘라내기하는 단계를 더 포함하는 방법.
-청구항 111-
제106항에 있어서, 상기 명령 디스플레이 영역은 이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘을 포함하고, 상기 방법은,
이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘의 활성화를 검출하는 단계, 및
이전에 잘라내기되거나 복사된 콘텐츠를 붙여넣기하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠를 이전에 잘라내기되거나 복사된 콘텐츠로 대체하는 단계를 더 포함하는 방법.
-청구항 112-
제106항에 있어서, 상기 명령 디스플레이 영역은 이전의 동작을 실행 취소하는 아이콘을 포함하고, 상기 방법은,
이전의 동작을 실행 취소하는 아이콘의 활성화를 검출하는 단계, 및
이전의 동작을 실행 취소하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 장치에 의해 수행된 이전의 동작을 실행 취소하는 단계를 더 포함하는 방법.
-청구항 113-
제106항에 있어서, 상기 명령 디스플레이 영역은 부가의 명령 옵션을 디스플레이하는 아이콘을 포함하고, 상기 방법은,
부가의 명령 옵션을 디스플레이하는 아이콘의 활성화를 검출하는 단계, 및
부가의 명령 옵션을 디스플레이하는 아이콘의 활성화를 검출한 것에 응답하여, 부가의 명령 아이콘을 디스플레이하는 단계 - 각각의 부가의 명령 아이콘의 활성화는 상기 선택된 콘텐츠에 대해 대응하는 동작을 시작함 - 를 더 포함하는 방법.
-청구항 114-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 아이콘을 포함하고, 상기 방법은,
상기 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 아이콘의 활성화를 검출하는 단계, 및
상기 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 제공하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠에서의 물리적 위치에 관한 정보를 디스플레이하는 단계를 더 포함하는 방법.
-청구항 115-
제106항에 있어서, 상기 명령 디스플레이 영역은 상기 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 아이콘을 포함하고, 상기 방법은,
상기 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 아이콘의 활성화를 검출하는 단계, 및
상기 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠 내의 전화 번호로 전화 걸기를 하는 단계를 더 포함하는 방법.
-청구항 116-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠 내의 정보를 사용하여 인스턴트 메시지를 시작하는 단계를 더 포함하는 방법.
-청구항 117-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠 내의 이메일 주소를 사용하여 이메일 메시지를 시작하는 단계를 더 포함하는 방법.
-청구항 118-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠 내의 이미지를 사용하여 슬라이드 쇼를 시작하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠 내의 이미지들을 사용하여 슬라이드 쇼를 시작하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠 내의 이미지를 사용하여 슬라이드 쇼를 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠 내의 이미지들을 사용하여 슬라이드 쇼를 시작하는 단계를 더 포함하는 방법.
-청구항 119-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠 내의 웹 주소를 사용하여 웹 페이지를 디스플레이하는 단계를 더 포함하는 방법.
-청구항 120-
제106항에 있어서, 상기 명령 디스플레이 영역은 선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 아이콘을 포함하고, 상기 방법은,
선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 아이콘의 활성화를 검출하는 단계, 및
선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠 내의 정보를 사용하여 검색을 시작하는 단계를 더 포함하는 방법.
-청구항 121-
제106항에 있어서, 상기 명령 디스플레이 영역은 연락처 응용 프로그램에 정보를 추가하는 아이콘을 포함하고, 상기 방법은,
연락처 응용 프로그램에 정보를 추가하는 아이콘의 활성화를 검출하는 단계, 및
연락처 응용 프로그램에 정보를 추가하는 아이콘의 활성화를 검출한 것에 응답하여, 연락처 응용 프로그램에 상기 선택된 콘텐츠 내의 정보를 추가하는 단계를 더 포함하는 방법.
-청구항 122-
제106항에 있어서, 상기 선택된 콘텐츠가 움직일 때 상기 명령 디스플레이 영역은 상기 터치 스크린 디스플레이 상에서 움직이는 방법.
-청구항 123-
제106항에 있어서, 상기 명령 디스플레이 영역 내의 아이콘들은 사용자 구성가능한 적어도 하나의 명령을 포함하는 방법.
-청구항 124-
제106항에 있어서, 상기 명령 디스플레이 영역 내의 아이콘들은 컨텍스트 기반인 적어도 하나의 명령을 포함하는 방법.
-청구항 125-
제106항에 있어서, 상기 콘텐츠는 제1 응용 프로그램 내에서 디스플레이되고, 상기 명령 디스플레이 영역 내의 아이콘들은 미리 정의된 응용 프로그래밍 인터페이스를 통해 상기 제1 응용 프로그램에 연결된 제2 응용 프로그램을 호출하라는 적어도 하나의 명령을 포함하는 방법.
-청구항 126-
제106항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 사용자에 의한 입력을 검출하는 단계, 및
상기 사용자에 의한 입력을 검출한 것에 응답하여,
상기 터치 스크린 디스플레이 상에서 상기 콘텐츠를 스크롤하는 단계, 및
상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계를 포함하는 방법.
-청구항 127-
제126항에 있어서, 상기 콘텐츠의 스크롤을 중단하는 단계, 및
상기 콘텐츠의 스크롤을 중단한 것에 응답하여, 상기 터치 스크린 디스플레이 상에서 상기 선택된 콘텐츠에 인접하여 상기 명령 디스플레이 영역을 다시 디스플레이하는(redisplaying) 단계를 포함하는 방법.
-청구항 128-
제106항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 사용자에 의한 입력을 검출하는 단계, 및
상기 사용자에 의한 입력을 검출한 것에 응답하여,
상기 선택된 콘텐츠를 선택 해제하는 단계, 및
상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계를 포함하는 방법.
-청구항 129-
제106항에 있어서, 상기 명령 디스플레이 영역 내의 상기 명령 아이콘의 활성화를 검출한 것에 응답하여, 상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계를 포함하는 방법.
-청구항 130-
제106항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 사용자에 의한 타이핑 입력을 검출하는 단계, 및
상기 사용자에 의한 타이핑 입력을 검출한 것에 응답하여,
상기 선택된 콘텐츠를 상기 타이핑 입력에 대응하는 문자들로 대체하는 단계, 및
상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계를 포함하는 방법.
-청구항 131-
제106항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 상기 선택된 콘텐츠의 각각의 끝부분 상에서 사용자에 의한 손가락 제스처를 검출하는 단계, 및
상기 선택된 콘텐츠의 각각의 끝부분 상에서 상기 사용자에 의한 손가락 제스처를 검출한 것에 응답하여,
상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계,
상기 선택된 콘텐츠의 각각의 끝부분에 삽입 마커를 디스플레이하는 단계, 및
상기 선택된 콘텐츠를 선택 해제하는 단계를 포함하는 방법.
-청구항 132-
제108항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 상기 시작점 객체 상에서 사용자에 의한 손가락 제스처를 검출하는 단계, 및
상기 시작점 객체 상에서 상기 사용자에 의한 손가락 제스처를 검출한 것에 응답하여,
상기 명령 디스플레이 영역, 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 것을 중단하는 단계,
상기 선택된 콘텐츠의 시작부에 삽입 마커를 디스플레이하는 단계, 및
상기 선택된 콘텐츠를 선택 해제하는 단계를 포함하는 방법.
-청구항 133-
제108항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 상기 끝점 객체 상에서 사용자에 의한 손가락 제스처를 검출하는 단계, 및
상기 끝점 객체 상에서 상기 사용자에 의한 손가락 제스처를 검출한 것에 응답하여,
상기 명령 디스플레이 영역, 상기 시작점 객체 및 상기 끝점 객체를 디스플레이하는 것을 중단하는 단계,
상기 선택된 콘텐츠의 끝부분에 삽입 마커를 디스플레이하는 단계, 및
상기 선택된 콘텐츠를 선택 해제하는 단계를 포함하는 방법.
-청구항 134-
제106항에 있어서, 상기 명령 아이콘의 활성화를 검출하는 단계 전에 상기 선택된 콘텐츠 상에서 사용자에 의한 손가락 제스처를 검출하는 단계, 및
상기 선택된 콘텐츠 상에서 상기 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계를 포함하는 방법.
-청구항 135-
제134항에 있어서, 상기 명령 디스플레이 영역을 디스플레이하는 것을 중단하는 단계 후에 그리고 상기 명령 아이콘의 활성화를 검출하는 단계 전에 상기 선택된 콘텐츠 상에서 사용자에 의한 손가락 제스처를 검출하는 단계, 및
상기 선택된 콘텐츠 상에서 상기 사용자에 의한 손가락 제스처를 검출한 것에 응답하여, 상기 선택된 콘텐츠에 인접하여 상기 명령 디스플레이 영역을 다시 디스플레이하는 단계를 포함하는 방법.
-청구항 136-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분되는 선택된 콘텐츠를 포함하는 콘텐츠, 및
하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역
을 포함하고,
상기 명령 디스플레이 영역은 상기 터치 스크린 디스플레이 상에서 상기 선택된 콘텐츠에 인접하여 디스플레이되고,
상기 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출한 것에 응답하여, 대응하는 동작이 상기 선택된 콘텐츠에 대해 수행되는 그래픽 사용자 인터페이스.
-청구항 137-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어 - 상기 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 명령어,
상기 터치 스크린 디스플레이 상에서 상기 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 명령어 - 상기 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -,
상기 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하는 명령어, 및
상기 명령 디스플레이 영역 내의 상기 명령 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠에 대해 대응하는 동작을 수행하는 명령어
를 포함하는 다기능 장치.
-청구항 138-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고 - 상기 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하며,
상기 터치 스크린 디스플레이 상에서 상기 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하고 - 상기 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -,
상기 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하며,
상기 명령 디스플레이 영역 내의 상기 명령 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠에 대해 대응하는 동작을 수행하게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 139-
터치 스크린 디스플레이,
상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단 - 상기 디스플레이된 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 수단,
상기 터치 스크린 디스플레이 상에서 상기 선택된 콘텐츠에 인접하여 명령 디스플레이 영역을 디스플레이하는 수단 - 상기 명령 디스플레이 영역은 하나 이상의 명령 아이콘을 포함함 -,
상기 명령 디스플레이 영역 내의 명령 아이콘의 활성화를 검출하는 수단, 및
상기 명령 디스플레이 영역 내의 상기 명령 아이콘의 활성화를 검출한 것에 응답하여, 상기 선택된 콘텐츠에 대해 대응하는 동작을 수행하는 수단
을 포함하는 다기능 장치.
-청구항 140-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하는 단계 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 단계,
하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하는 단계 - 상기 명령 디스플레이 영역 요소는 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 상기 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 및
그 전방에 상기 명령 디스플레이 영역 요소가 디스플레이될 수 없는 하나 이상의 미리 정의된 우선순위 요소를 디스플레이하는 단계
를 포함하는 방법.
-청구항 141-
제140항에 있어서, 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계는,
상기 선택된 콘텐츠 위쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 상기 선택된 콘텐츠 위쪽의 인접한 영역이 임의의 미리 정의된 우선순위 요소를 포함하지 않을 때, 상기 선택된 콘텐츠 위쪽의 인접한 영역에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 142-
제141항에 있어서, 선택된 콘텐츠 위쪽의 인접한 영역이 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 임의의 미리 정의된 우선순위 요소들을 포함하지 않을 때, 상기 선택된 콘텐츠 아래쪽의 인접한 영역에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 143-
제141항에 있어서, 상기 선택된 콘텐츠 위쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 명령 디스플레이 영역이 상기 선택된 콘텐츠 내에 들어갈 정도로 충분히 작을 때, 상기 선택된 콘텐츠 내의 영역에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 144-
제142항에 있어서, 상기 선택된 콘텐츠 위쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 명령 디스플레이 영역이 상기 선택된 콘텐츠 내에 들어갈 정도로 충분히 작을 때, 상기 선택된 콘텐츠 내에서 그 전방에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 145-
제143항에 있어서, 상기 선택된 콘텐츠 위쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 명령 디스플레이 영역이 너무 커서 상기 선택된 콘텐츠 내에 들어갈 수 없고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 임의의 미리 정의된 우선순위 요소들을 포함하지 않을 때, 상기 선택된 콘텐츠 아래쪽의 인접한 영역에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 146-
제144항에 있어서, 상기 선택된 콘텐츠 위쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소들을 포함하고, 상기 명령 디스플레이 영역이 너무 커서 상기 선택된 콘텐츠 내에 들어갈 수 없을 때, 상기 명령 디스플레이 영역 요소를 디스플레이하는 것을 금지하는 단계를 포함하는 방법.
-청구항 147-
제145항에 있어서, 상기 선택된 콘텐츠 위쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소를 포함하고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크지 않거나 미리 정의된 우선순위 요소를 포함하고, 상기 명령 디스플레이 영역이 너무 커서 상기 선택된 콘텐츠 내에 들어갈 수 없을 때, 상기 명령 디스플레이 영역 요소를 디스플레이하는 것을 금지하는 단계를 포함하는 방법.
-청구항 148-
제140항에 있어서, 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계는,
상기 선택된 콘텐츠 아래쪽의 인접한 영역이 상기 명령 디스플레이 영역 요소를 디스플레이하기에 충분히 크고, 상기 선택된 콘텐츠 아래쪽의 인접한 영역이 임의의 미리 정의된 우선순위 요소들을 포함하지 않을 때, 상기 선택된 콘텐츠 아래쪽의 인접한 영역에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 149-
제140항에 있어서, 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계는,
상기 명령 디스플레이 영역이 상기 선택된 콘텐츠 내에 들어갈 정도로 충분히 작을 때, 상기 선택된 콘텐츠 내에서 그 전방에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계를 포함하는 방법.
-청구항 150-
제140항에 있어서, 상기 선택된 콘텐츠에 대한 제1 위치에 상기 명령 디스플레이 영역 요소를 디스플레이하는 단계,
상기 선택된 콘텐츠를 움직이는 것을 비롯하여, 상기 터치 스크린 디스플레이 상에서 상기 콘텐츠를 움직이는 단계,
상기 콘텐츠를 움직이는 동안 상기 명령 디스플레이 영역 요소를 디스플레이하는 것을 중단하는 단계, 및
상기 콘텐츠가 움직이는 것을 멈출 때, 상기 선택된 콘텐츠와 관련하여 제2 위치에 상기 명령 디스플레이 영역 요소를 다시 디스플레이하는 단계 - 상기 선택된 콘텐츠에 대한 상기 제2 위치는 상기 선택된 콘텐츠에 대한 상기 제1 위치와 다름 - 를 포함하는 방법.
-청구항 151-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
콘텐츠를 포함하는 사용자 인터페이스 요소 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소, 및
그 전방에 상기 명령 디스플레이 영역 요소가 디스플레이될 수 없는 하나 이상의 미리 정의된 우선순위 요소
를 포함하며,
상기 선택된 콘텐츠는 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분되고,
상기 명령 디스플레이 영역 요소가 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소들의 전방에 디스플레이되고,
명령 아이콘의 활성화가 상기 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작하는 그래픽 사용자 인터페이스.
-청구항 152-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하는 명령어 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 명령어,
하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하는 명령어 - 상기 명령 디스플레이 영역 요소는 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소들의 전방에 디스플레이되고, 명령 아이콘의 활성화는 상기 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 및
그 전방에 상기 명령 디스플레이 영역 요소가 디스플레이될 수 없는 하나 이상의 미리 정의된 우선순위 요소를 디스플레이하는 명령어
를 포함하는 다기능 장치.
-청구항 153-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하고 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하며,
하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하고 - 상기 명령 디스플레이 영역 요소는 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 상기 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -,
그 전방에 상기 명령 디스플레이 영역 요소가 디스플레이될 수 없는 하나 이상의 미리 정의된 우선순위 요소를 디스플레이하게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 154-
터치 스크린 디스플레이,
콘텐츠를 포함하는 사용자 인터페이스 요소를 디스플레이하는 수단 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠를 선택되지 않은 디스플레이된 콘텐츠와 시각적으로 구분하는 수단,
하나 이상의 명령 아이콘을 포함하는 명령 디스플레이 영역 요소를 디스플레이하는 수단 - 상기 명령 디스플레이 영역 요소는 콘텐츠를 디스플레이하는 사용자 인터페이스 요소를 비롯한 사용자 인터페이스 내의 다른 요소의 전방에 디스플레이되고, 명령 아이콘의 활성화는 상기 선택된 콘텐츠에 대해 대응하는 동작의 수행을 시작함 -, 및
그 전방에 상기 명령 디스플레이 영역 요소가 디스플레이될 수 없는 하나 이상의 미리 정의된 우선순위 요소를 디스플레이하는 수단
을 포함하는 다기능 장치.
-청구항 155-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 단계 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하는 단계,
상기 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 단계 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 단계,
상기 선택된 콘텐츠의 각각의 끝부분 및 상기 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하는 단계, 및
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이는 단계
를 포함하는 방법.
-청구항 156-
제155항에 있어서, 상기 콘텐츠는 텍스트를 포함하는 방법.
-청구항 157-
제155항에 있어서, 상기 콘텐츠 확대기는 미리 정의된 형상을 가지는 방법.
-청구항 158-
제155항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분에 인접하여 상기 콘텐츠 확대기를 디스플레이하는 단계는 상기 선택된 콘텐츠의 각각의 끝부분 바로 위에 그를 중심으로 하여 상기 콘텐츠 확대기를 디스플레이하는 단계를 포함하는 방법.
-청구항 159-
제155항에 있어서, 상기 콘텐츠 확대기는 상기 선택된 콘텐츠의 각각의 끝부분 상에서 상기 손가락 접촉을 검출한 것에 응답하여 처음으로 디스플레이되는 방법.
-청구항 160-
제155항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 포함하는 방법.
-청구항 161-
제160항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분이 상기 선택된 콘텐츠의 시작 부분일 때 상기 손가락 접촉의 움직임에 따라 상기 시작점 객체를 움직이는 단계, 및
상기 선택된 콘텐츠의 각각의 끝부분이 상기 선택된 콘텐츠의 끝부분일 때 상기 손가락 접촉의 움직임에 따라 상기 끝점 객체를 움직이는 단계를 포함하는 방법.
-청구항 162-
제155항에 있어서, 상기 콘텐츠 확대기에 의해 디스플레이된 상기 콘텐츠의 확장된 부분은 상기 각각의 끝부분에 인접한 선택된 콘텐츠 및 상기 각각의 끝부분에 인접한 비선택된 콘텐츠를 포함하는 방법.
-청구항 163-
제162항에 있어서, 상기 경계 마커는 상기 각각의 끝부분에 인접한 상기 선택된 콘텐츠와 상기 각각의 끝부분에 인접한 상기 비선택된 콘텐츠 사이에 디스플레이되는 방법.
-청구항 164-
제155항에 있어서, 상기 콘텐츠 확대기는 상기 콘텐츠에서의 단일 텍스트 줄의 확장된 부분을 디스플레이하는 방법.
-청구항 165-
제155항에 있어서, 상기 경계 마커는 상기 콘텐츠 확대기 내에서 고정된 위치를 유지하는 방법.
-청구항 166-
제155항에 있어서, 상기 콘텐츠 확대기는 상기 콘텐츠 확대기의 중앙에 있는 각각의 단어를 포함한 단어들의 시퀀스를 디스플레이하고,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기의 중앙에 있는 상기 각각의 단어를 업데이트하는 단계, 및
상기 콘텐츠 확대기의 중앙에 있는 복수의 연속적인 단어에 대해 상기 콘텐츠 확대기의 중앙에 있는 각각의 단어 내의 상기 경계 마커를 움직임으로써 상기 콘텐츠 확대기 내의 상기 경계 마커를 움직이는 단계를 더 포함하는 방법.
-청구항 167-
제155항에 있어서, 상기 콘텐츠 확대기는 상기 콘텐츠 확대기의 중앙에 있는 각각의 단어를 포함한 단어들의 시퀀스를 디스플레이하고,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기의 중앙에 있는 상기 각각의 단어를 업데이트하는 단계, 및
상기 콘텐츠 확대기의 중앙에 있는 복수의 연속적인 단어에 대해 상기 콘텐츠 확대기의 중앙에 있는 각각의 단어 내의 상기 경계 마커를 문자 단위로 움직임으로써 상기 콘텐츠 확대기 내의 경계 마커를 움직이는 단계를 더 포함하는 방법.
-청구항 168-
제155항에 있어서, 상기 콘텐츠 확대기는 상기 콘텐츠 확대기의 중앙에 있는 각각의 단어를 포함한 단어들의 시퀀스를 디스플레이하고,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기의 중앙에 있는 상기 각각의 단어를 업데이트하는 단계, 및
상기 콘텐츠 확대기의 중앙에 있는 복수의 연속적인 단어에 대해 상기 콘텐츠 확대기의 중앙에 있는 각각의 단어의 끝부분으로 상기 경계 마커를 점프시킴으로써 상기 콘텐츠 확대기 내의 상기 경계 마커를 움직이는 단계를 더 포함하는 방법.
-청구항 169-
제155항에 있어서, 상기 경계 마커는 상기 콘텐츠 확대기 내에서 여전히 중앙에 있는 방법.
-청구항 170-
제155항에 있어서, 상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기를 움직이는 단계는 상기 콘텐츠 확대기를 라인 단위로 움직이는 것을 포함하는 방법.
-청구항 171-
제155항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분은 계속하여 업데이트되는 방법.
-청구항 172-
제155항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분은 문자별로 업데이트되는 방법.
-청구항 173-
제155항에 있어서, 상기 선택된 콘텐츠의 각각의 끝부분은 단어별로 업데이트되는 방법.
-청구항 174-
제155항에 있어서, 상기 손가락 접촉의 움직임이 미리 정의된 시간 구간 내에서 미리 정의된 값을 초과할 때, 상기 선택된 콘텐츠의 각각의 끝부분은 단어별로 업데이트되는 방법.
-청구항 175-
제155항에 있어서, 상기 손가락 접촉의 움직임이 미리 정의된 시간 구간 내에서 미리 정의된 값 미만일 때, 상기 선택된 콘텐츠의 각각의 끝부분은 문자별로 업데이트되고,
상기 손가락 접촉의 움직임이 미리 정의된 시간 구간 내에서 미리 정의된 값을 초과할 때, 상기 선택된 콘텐츠의 각각의 끝부분은 단어별로 업데이트되는 방법.
-청구항 176-
제155항에 있어서, 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출하는 단계, 및
상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 상기 콘텐츠 확대기를 디스플레이하는 것을 종료하는 단계를 포함하는 방법.
-청구항 177-
제155항에 있어서, 상기 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출하는 단계, 및
상기 손가락 접촉의 위치가 상기 현재 단어 내의 상기 현재 위치에 대응할 때 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기를 디스플레이하는 것을 종료하는 단계, 및
상기 선택된 콘텐츠의 각각의 끝부분을 상기 현재 단어 내의 상기 현재 위치에 배치하는 단계를 포함하는 방법.
-청구항 178-
제155항에 있어서, 상기 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출하는 단계, 및
상기 손가락 접촉의 위치가 상기 현재 단어 내의 상기 현재 위치에 대응할 때 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기를 디스플레이하는 것을 종료하는 단계, 및
상기 선택된 콘텐츠의 각각의 끝부분을 상기 현재 단어의 각각의 끝부분에 배치하는 단계를 포함하는 방법.
-청구항 179-
제178항에 있어서, 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 상기 콘텐츠 확대기를 디스플레이하는 것을 종료하는 단계 전에 상기 콘텐츠 확대기가 상기 현재 단어의 각각의 끝부분에 대응하는 위치로 움직이는 애니메이션을 디스플레이하는 단계를 포함하는 방법.
-청구항 180-
제155항에 있어서, 상기 손가락 접촉의 위치가 현재 단어 내의 현재 위치에 대응할 때 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출하는 단계, 및
상기 손가락 접촉의 위치가 상기 현재 단어 내의 상기 현재 위치에 대응할 때 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여,
상기 콘텐츠 확대기를 디스플레이하는 것을 종료하는 단계,
상기 손가락 접촉의 움직임이 미리 정의된 시간 구간 내에서의 미리 정의된 값 미만일 때, 상기 선택된 콘텐츠의 각각의 끝부분을 상기 현재 단어 내의 상기 현재 위치에 배치하는 단계, 및
상기 손가락 접촉의 움직임이 미리 정의된 시간 구간 내에서의 미리 정의된 값을 초과할 때, 상기 선택된 콘텐츠의 각각의 끝부분을 상기 현재 단어의 각각의 끝부분에 배치하는 단계를 포함하는 방법.
-청구항 181-
제180항에 있어서, 상기 터치 스크린 디스플레이로부터의 상기 손가락 접촉의 떨어짐을 검출한 것에 응답하여, 상기 손가락 접촉의 움직임이 미리 정의된 시간 구간 내에서의 미리 정의된 값을 초과할 때, 상기 콘텐츠 확대기를 디스플레이하는 것을 종료하는 단계 전에 상기 콘텐츠 확대기가 상기 현재 단어의 각각의 끝부분에 대응하는 위치로 움직이는 애니메이션을 디스플레이하는 단계를 포함하는 방법.
-청구항 182-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
제1 배율의 콘텐츠 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -, 및
콘텐츠 확대기
를 포함하고,
상기 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉이 검출되고,
상기 선택된 콘텐츠의 각각의 끝부분에 인접하여 상기 콘텐츠 확대기가 디스플레이되며 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 선택된 콘텐츠의 각각의 끝부분 및 상기 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분이 상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임에 따라 업데이트되고,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커가 움직이는 그래픽 사용자 인터페이스.
-청구항 183-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 명령어 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하는 명령어,
상기 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 명령어 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 움직임을 검출하는 명령어,
상기 선택된 콘텐츠의 각각의 끝부분 및 상기 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하는 명령어, 및
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이는 명령어
를 포함하는 다기능 장치.
-청구항 184-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하고 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하며,
상기 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하고 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임을 검출하며,
상기 선택된 콘텐츠의 각각의 끝부분 및 상기 제2 배율로 상기 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하고,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 185-
터치 스크린 디스플레이,
제1 배율로 상기 터치 스크린 디스플레이 상에 콘텐츠를 디스플레이하는 수단 - 상기 콘텐츠는 선택된 콘텐츠를 포함함 -,
상기 선택된 콘텐츠의 각각의 끝부분 상에서 손가락 접촉을 검출하는 수단,
상기 선택된 콘텐츠의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 수단 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 콘텐츠의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 콘텐츠의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임을 검출하는 수단,
상기 선택된 콘텐츠의 각각의 끝부분 및 상기 제2 배율로 상기 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하는 수단, 및
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이는 수단
을 포함하는 다기능 장치.
-청구항 186-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 단계 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하는 단계,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하는 단계,
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 단계,
상기 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 단계,
상기 선택된 제1 콘텐츠 상자 밖의 위치로의 상기 손가락 접촉의 움직임을 검출하는 단계,
상기 선택된 제1 콘텐츠 상자 밖의 위치에서 상기 손가락 접촉의 떨어짐을 검출하는 단계, 및
상기 제1 콘텐츠 상자 밖에서의 상기 손가락 접촉의 위치에 따라 상기 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하는 단계
를 포함하는 방법.
-청구항 187-
제186항에 있어서, 상기 구조화된 전자 문서는 웹 페이지인 방법.
-청구항 188-
제186항에 있어서, 상기 구조화된 전자 문서는 HTML 또는 XML 문서인 방법.
-청구항 189-
제186항에 있어서, 상기 손가락 제스처는 누르고 있기 제스처인 방법.
-청구항 190-
제186항에 있어서, 상기 손가락 제스처는 탭핑 앤 하프 제스처인 방법.
-청구항 191-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 단계는 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 다른 배경 음영을 갖는 상기 제1 콘텐츠 상자를 디스플레이하는 단계를 포함하는 방법.
-청구항 192-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 단계는 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 다른 배경색을 갖는 상기 제1 콘텐츠 상자를 디스플레이하는 단계를 포함하는 방법.
-청구항 193-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 단계는 상기 제1 콘텐츠 상자 주위에 경계를 디스플레이하는 단계를 포함하는 방법.
-청구항 194-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자를 시각적으로 구분하는 단계는 상기 제1 콘텐츠 상자에 대한 하나 이상의 선택 핸들을 디스플레이하는 단계를 포함하는 방법.
-청구항 195-
제186항에 있어서, 상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 손가락 제스처를 검출한 것에 응답하여, 상기 선택된 콘텐츠에 대한 명령 디스플레이 영역을 디스플레이하는 단계를 포함하는 방법.
-청구항 196-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자 상에서 상기 손가락 접촉을 검출하는 단계는 상기 선택된 제1 콘텐츠 상자에 대한 선택 핸들 상에서 상기 손가락 접촉을 검출하는 단계를 포함하는 방법.
-청구항 197-
제186항에 있어서, 상기 손가락 접촉은 상기 손가락 제스처의 일부인 방법.
-청구항 198-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자 밖으로의 상기 손가락 접촉의 움직임을 검출하는 동안, 선택된 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 단계를 포함하는 방법.
-청구항 199-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자 및 상기 선택된 하나 이상의 부가의 콘텐츠 상자를 복사하는 단계를 포함하는 방법.
-청구항 200-
제186항에 있어서, 상기 선택된 제1 콘텐츠 상자 및 상기 선택된 하나 이상의 부가의 콘텐츠 상자를 붙여넣기하는 단계를 포함하는 방법.
-청구항 201-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
구조화된 전자 문서의 적어도 일부분 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -
을 포함하고,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자가 선택되고,
상기 선택된 제1 콘텐츠 상자가 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분되며,
상기 선택된 제1 콘텐츠 상자 상에서 손가락 접촉이 검출되고,
상기 선택된 제1 콘텐츠 상자 밖의 위치로의 상기 손가락 접촉의 움직임이 검출되며,
상기 선택된 제1 콘텐츠 상자 밖의 위치에서 상기 손가락 접촉의 떨어짐이 검출되고,
상기 제1 콘텐츠 상자 밖에서의 상기 손가락 접촉의 위치에 따라 상기 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자가 선택되는 그래픽 사용자 인터페이스.
-청구항 202-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 명령어 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하는 명령어,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하는 명령어,
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 명령어,
상기 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 명령어,
상기 선택된 제1 콘텐츠 상자 밖의 위치로의 상기 손가락 접촉의 움직임을 검출하는 명령어,
상기 선택된 제1 콘텐츠 상자 밖의 위치에서 상기 손가락 접촉의 떨어짐을 검출하는 명령어, 및
상기 제1 콘텐츠 상자 밖에서의 상기 손가락 접촉의 위치에 따라 상기 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하는 명령어
를 포함하는 다기능 장치.
-청구항 203-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하고 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하며,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하고,
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하며,
상기 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하고,
상기 선택된 제1 콘텐츠 상자 밖의 위치로의 상기 손가락 접촉의 움직임을 검출하며,
상기 선택된 제1 콘텐츠 상자 밖의 위치에서 상기 손가락 접촉의 떨어짐을 검출하고,
상기 제1 콘텐츠 상자 밖에서의 상기 손가락 접촉의 위치에 따라 상기 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 204-
터치 스크린 디스플레이,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 수단 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 손가락 제스처를 검출하는 수단,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하는 수단,
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 수단,
상기 선택된 제1 콘텐츠 상자 상에서 손가락 접촉을 검출하는 수단,
상기 선택된 제1 콘텐츠 상자 밖의 위치로의 상기 손가락 접촉의 움직임을 검출하는 수단,
상기 선택된 제1 콘텐츠 상자 밖의 위치에서 상기 손가락 접촉의 떨어짐을 검출하는 수단, 및
상기 제1 콘텐츠 상자 밖에서의 상기 손가락 접촉의 위치에 따라 상기 복수의 콘텐츠 상자 중 하나 이상의 부가의 콘텐츠 상자를 선택하는 수단
을 포함하는 다기능 장치.
-청구항 205-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
제1 배율로 상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 단계 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하는 단계,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 제1 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하는 단계, 및
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 단계,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하는 단계,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 단계 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 선택된 제1 콘텐츠 상자 내에서 상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임을 검출하는 단계,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 상기 제2 배율로 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하는 단계, 및
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이는 단계
를 포함하는 방법.
-청구항 206-
제205항에 있어서, 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 상기 손가락 접촉을 검출하는 단계 전에 제2 손가락 제스처를 검출하는 단계, 및
제2 손가락 제스처를 검출한 것에 응답하여, 하나 이상의 콘텐츠 상자를 선택하도록 구성된 모드에서 하나의 콘텐츠 상자 내의 콘텐츠를 선택하도록 구성된 모드로 상기 장치를 전환하는 단계를 포함하는 방법.
-청구항 207-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
제1 배율의 구조화된 전자 문서의 적어도 일부분 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -, 및
콘텐츠 확대기
를 포함하고,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자가 선택되고,
상기 선택된 제1 콘텐츠 상자가 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분되며,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉이 검출되고,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 상기 콘텐츠 확대기가 디스플레이되며 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 선택된 제1 콘텐츠 상자 내에서 상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임이 검출되며,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 상기 제2 배율로 상기 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분이 상기 손가락 접촉의 움직임에 따라 업데이트되고,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커가 움직이는 그래픽 사용자 인터페이스.
-청구항 208-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
제1 배율로 상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 명령어 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하는 명령어,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 제1 손가락 제스처를 검출한 것에 응답하여, 상기 제1 콘텐츠 상자를 선택하고, 상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 명령어,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하는 명령어,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 명령어 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 선택된 제1 콘텐츠 상자 내에서 상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임을 검출하는 명령어,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 상기 제2 배율로 상기 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하는 명령어, 및
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이는 명령어
를 포함하는 다기능 장치.
-청구항 209-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
제1 배율로 상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하고 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하며,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 제1 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하고,
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하며,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하고,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하며 - 상기 콘텐츠 확대기는 제1 배율보다 큰 제2 배율로 되어 있는, 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 콘텐츠의 확장된 부분, 및 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 선택된 제1 콘텐츠 상자 내에서 상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임을 검출하고,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 상기 제2 배율로 상기 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하며,
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 210-
터치 스크린 디스플레이,
제1 배율로 상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 수단 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 복수의 콘텐츠 상자 중의 제1 콘텐츠 상자 상에서 제1 손가락 제스처를 검출하는 수단,
상기 복수의 콘텐츠 상자 중의 상기 제1 콘텐츠 상자 상에서 상기 제1 손가락 제스처를 검출한 것에 응답하여,
상기 제1 콘텐츠 상자를 선택하는 수단, 및
상기 선택된 제1 콘텐츠 상자를 선택되지 않은 상기 터치 스크린 디스플레이 상의 콘텐츠와 시각적으로 구분하는 수단,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 상에서 손가락 접촉을 검출하는 수단,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 인접하여 콘텐츠 확대기를 디스플레이하는 수단 - 상기 콘텐츠 확대기는 상기 제1 배율보다 큰 제2 배율로 되어 있는, 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분에 근접해 있는 상기 콘텐츠의 확장된 부분, 및 상기 선택된 제1 콘텐츠 상자의 각각의 끝부분의 현재 위치를 나타내는 경계 마커를 디스플레이함 -,
상기 선택된 제1 콘텐츠 상자 내에서 상기 터치 스크린 디스플레이를 가로지르는 상기 손가락 접촉의 움직임을 검출하는 수단,
상기 선택된 제1 콘텐츠 상자의 각각의 끝부분 및 상기 제2 배율로 상기 각각의 끝부분에 근접하여 디스플레이된 상기 콘텐츠의 확장된 부분을 상기 손가락 접촉의 움직임에 따라 업데이트하는 수단, 및
상기 손가락 접촉의 움직임에 따라 상기 콘텐츠 확대기 및 상기 경계 마커를 움직이는 수단
을 포함하는 다기능 장치.
-청구항 211-
터치 스크린 디스플레이를 갖는 다기능 장치에서,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 단계 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 구조화된 전자 문서가 하나 이상의 미리 정의된 문서 복잡성 기준을 만족시키는지를 판정하는 단계,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하는 단계, 및
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하는 단계
를 포함하는 방법.
-청구항 212-
제211항에 있어서, 상기 하나 이상의 미리 정의된 문서 복잡성 기준은 상기 구조화된 전자 문서가 콘텐츠 상자를 포함하는 복수의 열(column)을 포함해야 한다는 요구사항을 포함하는 방법.
-청구항 213-
제211항에 있어서, 상기 하나 이상의 미리 정의된 문서 복잡성 기준은 상기 구조화된 전자 문서가 적어도 하나의 비인라인 이미지(non-inline image)를 포함해야 한다는 요구사항을 포함하는 방법.
-청구항 214-
제211항에 있어서, 상기 하나 이상의 미리 정의된 문서 복잡성 기준은 상기 구조화된 전자 문서가 적어도 미리 정의된 수의 레벨의 내포된 요소(nested element)를 포함해야 한다는 요구사항을 포함하는 방법.
-청구항 215-
제211항에 있어서, 상기 하나 이상의 미리 정의된 문서 복잡성 기준은 상기 구조화된 전자 문서가 캐스케이딩 스타일 시트(cascading style sheet)를 사용해야 한다는 요구사항을 포함하는 방법.
-청구항 216-
제211항에 있어서, 상기 하나 이상의 미리 정의된 문서 복잡성 기준은 상기 구조화된 전자 문서가 부유 객체(floated object)를 포함해야 한다는 요구사항을 포함하는 방법.
-청구항 217-
제211항에 있어서, 상기 하나 이상의 미리 정의된 문서 복잡성 기준은 상기 구조화된 전자 문서가 객체 주변에 부유된 텍스트를 포함해야 한다는 요구사항을 포함하는 방법.
-청구항 218-
터치 스크린 디스플레이를 갖는 다기능 장치 상의 그래픽 사용자 인터페이스로서,
구조화된 전자 문서의 적어도 일부분 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -
을 포함하고,
상기 구조화된 전자 문서가 하나 이상의 미리 정의된 문서 복잡성 기준을 만족시키는지가 판정되고,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자가 선택되며,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분이 선택되는 그래픽 사용자 인터페이스.
-청구항 219-
터치 스크린 디스플레이,
하나 이상의 프로세서,
메모리, 및
하나 이상의 프로그램
을 포함하며,
상기 하나 이상의 프로그램은 상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되어 있으며,
상기 하나 이상의 프로그램은,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 명령어 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 구조화된 전자 문서가 하나 이상의 미리 정의된 문서 복잡성 기준을 만족시키는지를 판정하는 명령어,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하는 명령어, 및
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하는 명령어
를 포함하는 다기능 장치.
-청구항 220-
하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서,
상기 하나 이상의 프로그램은 터치 스크린 디스플레이를 갖는 다기능 장치에 의해 실행될 때, 상기 장치로 하여금,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하고 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 구조화된 전자 문서가 하나 이상의 미리 정의된 문서 복잡성 기준을 만족시키는지를 판정하며,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하고,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하게 하는
명령어를 포함하는 컴퓨터 판독가능 저장 매체.
-청구항 221-
터치 스크린 디스플레이,
상기 터치 스크린 디스플레이 상에 구조화된 전자 문서의 적어도 일부분을 디스플레이하는 수단 - 상기 구조화된 전자 문서는 복수의 콘텐츠 상자를 포함함 -,
상기 구조화된 전자 문서가 하나 이상의 미리 정의된 문서 복잡성 기준을 만족시키는지를 판정하는 수단,
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시킬 때 하나 이상의 손가락 제스처에 응답하여 하나 이상의 전체 콘텐츠 상자를 선택하는 수단, 및
상기 구조화된 전자 문서가 적어도 하나의 미리 정의된 문서 복잡성 기준을 만족시키지 않을 때 적어도 하나의 콘텐츠 상자의 제스처-지정 부분을 선택하는 수단
을 포함하는 다기능 장치.

Claims (24)

  1. 방법으로서, 터치 스크린 디스플레이를 갖는 다기능 장치에서,
    상기 터치 스크린 디스플레이 상에 콘텐츠를 제1 배율로 디스플레이하는 단계;
    상기 콘텐츠 상의 손가락 제스처를 검출하는 단계;
    상기 콘텐츠 상에서 상기 손가락 제스처를 검출하는 것에 응답하여,
    상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서, 상기 터치 스크린 디스플레이상에서 상기 콘텐츠의 일부분을, 상기 제1 배율보다 큰 제2 배율로 확대하는 단계;
    상기 콘텐츠의 확대된 부분 내의 제1 위치에 삽입 마커, 및 상기 콘텐츠의 상기 확대된 부분을 디스플레이하는 콘텐츠 확대기를 디스플레이하는 단계;
    상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 운동을 검출하는 단계;
    상기 손가락 접촉의 상기 검출된 운동에 따라 상기 콘텐츠 확대기를 이동시키고 상기 콘텐츠의 상기 확대된 부분을 변경하는 단계;
    상기 손가락 접촉의 상기 검출된 운동에 따라 상기 제1 위치로부터 상기 콘텐츠의 상기 확대된 부분 내의 제2 위치로 상기 삽입 마커를 이동시키면서, 상기 제1 위치와 상기 제2 위치 사이의 콘텐츠는 선택하지 않는 단계 - 상기 제2 위치는 단어 내에 있음 - ;
    상기 삽입 마커가 상기 콘텐츠의 상기 확대된 부분 내에서 상기 제2 위치에 위치하는 동안 상기 손가락 접촉의 들어올림(lift off)을 검출하는 단계;
    상기 손가락 접촉의 들어올림을 검출하는 것에 응답하여,
    상기 콘텐츠 확대기, 및 상기 콘텐츠의 상기 확대된 부분의 디스플레이를 중지하는 단계; 및
    상기 삽입 마커에 인접하게 제1 명령 디스플레이 영역을 디스플레이하는 단계;
    상기 제1 명령 디스플레이 영역 상의 손가락 제스처를 검출하는 단계; 및
    상기 제1 명령 디스플레이 영역 상의 상기 손가락 제스처를 검출하는 것에 응답하여,
    상기 제2 위치와 연관된 콘텐츠를 선택하는 단계; 및
    상기 선택된 콘텐츠에 인접하게 제2 명령 디스플레이 영역을 디스플레이하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 제1 명령 디스플레이 영역 상의 상기 손가락 제스처를 검출하는 것에 응답하여, 상기 선택된 콘텐츠 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 단계를 더 포함하는 방법.
  3. 제1항에 있어서,
    상기 제2 명령 디스플레이 영역은 상기 선택된 콘텐츠를 복사하기 위한 아이콘을 포함하는, 방법.
  4. 제1항에 있어서,
    상기 콘텐츠 상의 상기 손가락 제스처는 누르고 있기(press and hold) 제스처인, 방법.
  5. 제1항에 있어서,
    상기 콘텐츠 확대기는 미리정의된 형상을 가지는, 방법.
  6. 제1항에 있어서,
    상기 콘텐츠 확대기에 디스플레이되는 상기 콘텐츠의 상기 확대된 부분은 동시에 디스플레이되는 텍스트의 적어도 세 개의 수평 줄들의 일부분들을 포함하는, 방법.
  7. 제1항에 있어서,
    상기 손가락 접촉의 들어올림을 검출하는 것에 응답하여, 상기 콘텐츠의 상기 확대된 부분이 상기 삽입 마커 내로 축소되는 애니메이션을 디스플레이하는 단계를 더 포함하는 방법.
  8. 제1항에 있어서,
    상기 손가락 접촉은 상기 손가락 제스처의 일부인, 방법.
  9. 다기능 장치로서,
    터치 스크린 디스플레이;
    하나 이상의 프로세서;
    메모리; 및
    하나 이상의 프로그램
    을 포함하고, 상기 하나 이상의 프로그램은 상기 메모리에 저장되며, 상기 하나 이상의 프로세서에 의해 실행되도록 구성되며, 상기 하나 이상의 프로그램은,
    상기 터치 스크린 디스플레이 상에 콘텐츠를 제1 배율로 디스플레이하는 것,
    상기 콘텐츠 상의 손가락 제스처를 검출하는 것,
    상기 콘텐츠 상에서 상기 손가락 제스처를 검출하는 것에 응답하여,
    상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서, 상기 터치 스크린 디스플레이상에서 상기 콘텐츠의 일부분을, 상기 제1 배율보다 큰 제2 배율로 확대하고,
    상기 콘텐츠의 확대된 부분 내의 제1 위치에 삽입 마커와, 상기 콘텐츠의 상기 확대된 부분을 디스플레이하는 콘텐츠 확대기를 디스플레이하는 것,
    상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 운동을 검출하는 것,
    상기 손가락 접촉의 상기 검출된 운동에 따라 상기 콘텐츠 확대기를 이동시키고 상기 콘텐츠의 상기 확대된 부분을 변경하는 것,
    상기 손가락 접촉의 상기 검출된 운동에 따라 상기 제1 위치로부터 상기 콘텐츠의 상기 확대된 부분 내의 제2 위치로 상기 삽입 마커를 이동시키면서, 상기 제1 위치와 상기 제2 위치 사이의 콘텐츠는 선택하지 않는 것 - 상기 제2 위치는 단어 내에 있음 - ,
    상기 삽입 마커가 상기 콘텐츠의 상기 확대된 부분 내에서 상기 제2 위치에 위치하는 동안 상기 손가락 접촉의 들어올림을 검출하는 것,
    상기 손가락 접촉의 들어올림을 검출하는 것에 응답하여,
    상기 콘텐츠 확대기, 및 상기 콘텐츠의 상기 확대된 부분의 디스플레이를 중지하고,
    상기 삽입 마커에 인접하게 제1 명령 디스플레이 영역을 디스플레이하는 것,
    상기 제1 명령 디스플레이 영역 상의 손가락 제스처를 검출하는 것, 및
    상기 제1 명령 디스플레이 영역 상의 상기 손가락 제스처를 검출하는 것에 응답하여,
    상기 제2 위치와 연관된 콘텐츠를 선택하고,
    상기 선택된 콘텐츠에 인접하게 제2 명령 디스플레이 영역을 디스플레이하는 것
    을 위한 명령어들을 포함하는, 다기능 장치.
  10. 제9항에 있어서,
    상기 하나 이상의 프로그램은,
    상기 제1 명령 디스플레이 영역 상의 상기 손가락 제스처를 검출하는 것에 응답하여, 상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하는 것을 위한 명령어들을 더 포함하는, 다기능 장치.
  11. 제9항에 있어서,
    상기 제2 명령 디스플레이 영역은 상기 선택된 콘텐츠를 복사하기 위한 아이콘을 포함하는, 다기능 장치.
  12. 제9항에 있어서,
    상기 콘텐츠 상의 상기 손가락 제스처는 누르고 있기(press and hold) 제스처인, 다기능 장치.
  13. 제9항에 있어서,
    상기 콘텐츠 확대기는 미리정의된 형상을 가지는, 다기능 장치.
  14. 제9항에 있어서,
    상기 콘텐츠 확대기에 디스플레이되는 상기 콘텐츠의 상기 확대된 부분은 동시에 디스플레이되는 텍스트의 적어도 세 개의 수평 줄들의 일부분들을 포함하는, 다기능 장치.
  15. 제9항에 있어서,
    상기 하나 이상의 프로그램은,
    상기 손가락 접촉의 들어올림을 검출하는 것에 응답하여, 상기 콘텐츠의 상기 확대된 부분이 상기 삽입 마커 내로 축소되는 애니메이션을 디스플레이하는 것을 위한 명령어들을 더 포함하는, 다기능 장치.
  16. 제9항에 있어서,
    상기 손가락 접촉은 상기 손가락 제스처의 일부인, 다기능 장치.
  17. 하나 이상의 프로그램을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램은, 터치 스크린 디스플레이를 가진 다기능 장치에 의해 실행되는 경우, 상기 장치로 하여금,
    상기 터치 스크린 디스플레이 상에 콘텐츠를 제1 배율로 디스플레이하게 하고,
    상기 콘텐츠 상의 손가락 제스처를 검출하게 하고,
    상기 콘텐츠 상에서 상기 손가락 제스처를 검출하는 것에 응답하여,
    상기 콘텐츠의 적어도 일부를 상기 제1 배율로 계속 디스플레이하면서, 상기 터치 스크린 디스플레이상에서 상기 콘텐츠의 일부분을, 상기 제1 배율보다 큰 제2 배율로 확대하게 하고,
    상기 콘텐츠의 확대된 부분 내의 제1 위치에 삽입 마커, 및 상기 콘텐츠의 상기 확대된 부분을 디스플레이하는 콘텐츠 확대기를 디스플레이하게 하며,
    상기 터치 스크린 디스플레이를 가로지르는 손가락 접촉의 운동을 검출하게 하고,
    상기 손가락 접촉의 상기 검출된 운동에 따라 상기 콘텐츠 확대기를 이동시키고 상기 콘텐츠의 상기 확대된 부분을 변경하게 하고,
    상기 손가락 접촉의 상기 검출된 운동에 따라 상기 제1 위치로부터 상기 콘텐츠의 상기 확대된 부분 내의 제2 위치로 상기 삽입 마커를 이동시키면서, 상기 제1 위치와 상기 제2 위치 사이의 콘텐츠는 선택하지 않게 하고 - 상기 제2 위치는 단어 내에 있음 - ,
    상기 삽입 마커가 상기 콘텐츠의 상기 확대된 부분 내에서 상기 제2 위치에 위치하는 동안 상기 손가락 접촉의 들어올림을 검출하게 하고,
    상기 손가락 접촉의 들어올림을 검출하는 것에 응답하여,
    상기 콘텐츠 확대기, 및 상기 콘텐츠의 상기 확대된 부분의 디스플레이를 중지하게 하고,
    상기 삽입 마커에 인접하게 제1 명령 디스플레이 영역을 디스플레이하게 하며,
    상기 제1 명령 디스플레이 영역 상의 손가락 제스처를 검출하게 하고,
    상기 제1 명령 디스플레이 영역 상의 상기 손가락 제스처를 검출하는 것에 응답하여,
    상기 제2 위치와 연관된 콘텐츠를 선택하게 하고,
    상기 선택된 콘텐츠에 인접하게 제2 명령 디스플레이 영역을 디스플레이하게 하는
    명령어들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
  18. 제17항에 있어서,
    상기 하나 이상의 프로그램은, 상기 장치로 하여금,
    상기 제1 명령 디스플레이 영역 상의 상기 손가락 제스처를 검출하는 것에 응답하여, 상기 선택된 콘텐츠의 각각의 끝부분에 시작점 객체 및 끝점 객체를 디스플레이하게 하는 명령어들을 더 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
  19. 제17항에 있어서,
    상기 제2 명령 디스플레이 영역은 상기 선택된 콘텐츠를 복사하기 위한 아이콘을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
  20. 제17항에 있어서,
    상기 콘텐츠 상의 상기 손가락 제스처는 누르고 있기(press and hold) 제스처인, 비일시적 컴퓨터 판독가능 저장 매체.
  21. 제17항에 있어서,
    상기 콘텐츠 확대기는 미리정의된 형상을 가지는, 비일시적 컴퓨터 판독가능 저장 매체.
  22. 제17항에 있어서,
    상기 콘텐츠 확대기에 디스플레이되는 상기 콘텐츠의 상기 확대된 부분은 동시에 디스플레이되는 텍스트의 적어도 세 개의 수평 줄들의 일부분들을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
  23. 제17항에 있어서,
    상기 하나 이상의 프로그램은, 상기 장치로 하여금, 상기 손가락 접촉의 들어올림을 검출하는 것에 응답하여, 상기 콘텐츠의 상기 확대된 부분이 상기 삽입 마커 내로 축소되는 애니메이션을 디스플레이하게 하는 명령어들을 더 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
  24. 제17항에 있어서,
    상기 손가락 접촉은 상기 손가락 제스처의 일부인, 비일시적 컴퓨터 판독가능 저장 매체.
KR1020177011291A 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스 KR101896996B1 (ko)

Applications Claiming Priority (23)

Application Number Priority Date Filing Date Title
US16069809P 2009-03-16 2009-03-16
US61/160,698 2009-03-16
US12/565,751 US20100235734A1 (en) 2009-03-16 2009-09-24 Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US12/565,753 2009-09-24
US12/565,750 2009-09-24
US12/565,752 2009-09-24
US12/565,759 US8510665B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,757 US20100235784A1 (en) 2009-03-16 2009-09-24 Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US12/565,757 2009-09-24
US12/565,753 US8756534B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,751 2009-09-24
US12/565,754 US9846533B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,759 2009-09-24
US12/565,750 US8255830B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,756 US8661362B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,760 2009-09-24
US12/565,752 US8584050B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,755 US9875013B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,755 2009-09-24
US12/565,756 2009-09-24
US12/565,760 US8370736B2 (en) 2009-03-16 2009-09-24 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US12/565,754 2009-09-24
PCT/US2010/026947 WO2010107653A2 (en) 2009-03-16 2010-03-11 Methods and graphical user interfaces for editing on a multifunction device with a touch screen display

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020137034234A Division KR101732768B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020187025545A Division KR102048650B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스

Publications (2)

Publication Number Publication Date
KR20170048613A KR20170048613A (ko) 2017-05-08
KR101896996B1 true KR101896996B1 (ko) 2018-09-12

Family

ID=42731696

Family Applications (7)

Application Number Title Priority Date Filing Date
KR1020137034234A KR101732768B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020197034003A KR102217119B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020187025545A KR102048650B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020137028483A KR101449358B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020117024282A KR101381063B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020217004239A KR20210019596A (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020177011291A KR101896996B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스

Family Applications Before (6)

Application Number Title Priority Date Filing Date
KR1020137034234A KR101732768B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020197034003A KR102217119B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020187025545A KR102048650B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020137028483A KR101449358B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020117024282A KR101381063B1 (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스
KR1020217004239A KR20210019596A (ko) 2009-03-16 2010-03-11 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스

Country Status (6)

Country Link
US (12) US8255830B2 (ko)
EP (3) EP3644171A1 (ko)
JP (4) JP5453517B2 (ko)
KR (7) KR101732768B1 (ko)
CA (4) CA2927608C (ko)
WO (1) WO2010107653A2 (ko)

Families Citing this family (585)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7856605B2 (en) * 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US20090144667A1 (en) * 2007-11-30 2009-06-04 Nokia Corporation Apparatus, method, computer program and user interface for enabling user input
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8375336B2 (en) * 2008-05-23 2013-02-12 Microsoft Corporation Panning content utilizing a drag operation
US9069418B2 (en) 2008-06-06 2015-06-30 Apple Inc. High resistivity metal fan out
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
USD686637S1 (en) * 2009-03-11 2013-07-23 Apple Inc. Display screen or portion thereof with icon
US10705701B2 (en) 2009-03-16 2020-07-07 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US8255830B2 (en) 2009-03-16 2012-08-28 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
KR101588730B1 (ko) * 2009-04-21 2016-01-26 엘지전자 주식회사 이동 단말기 및 이것의 인스턴트 메시징 서비스를 이용한 대화 방법
KR101553842B1 (ko) * 2009-04-21 2015-09-17 엘지전자 주식회사 멀티 햅틱 효과를 제공하는 휴대 단말기 및 그 제어방법
KR101597553B1 (ko) * 2009-05-25 2016-02-25 엘지전자 주식회사 기능 실행 방법 및 그 장치
US10540976B2 (en) * 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9141768B2 (en) * 2009-06-10 2015-09-22 Lg Electronics Inc. Terminal and control method thereof
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8531410B2 (en) * 2009-08-18 2013-09-10 Fuji Xerox Co., Ltd. Finger occlusion avoidance on touch display devices
KR101640464B1 (ko) * 2009-10-26 2016-07-18 삼성전자 주식회사 터치스크린 기반의 ui 제공방법 및 이를 이용한 휴대 단말기
US8365059B2 (en) * 2009-11-03 2013-01-29 Oto Technologies, Llc E-reader semantic text manipulation
KR101092591B1 (ko) * 2009-11-05 2011-12-13 주식회사 팬택 관통입력을 제공하는 단말 및 그 방법
US8436887B2 (en) * 2009-11-13 2013-05-07 Samsung Electronics Co., Ltd. Mobile terminal, display apparatus and control method thereof
CN102117140A (zh) * 2009-12-30 2011-07-06 联想(北京)有限公司 一种触摸处理方法及移动终端
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US8621380B2 (en) 2010-01-06 2013-12-31 Apple Inc. Apparatus and method for conditionally enabling or disabling soft buttons
US9405449B2 (en) 2010-01-14 2016-08-02 Microsoft Technology Licensing, Llc Layout constraint manipulation via user gesture recognition
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
USD660864S1 (en) 2010-01-27 2012-05-29 Apple Inc. Graphical user interface for a display screen or portion thereof
CA2731772C (en) * 2010-02-15 2014-08-12 Research In Motion Limited Graphical context short menu
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8756522B2 (en) * 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
US9292161B2 (en) * 2010-03-24 2016-03-22 Microsoft Technology Licensing, Llc Pointer tool with touch-enabled precise placement
US8407319B1 (en) 2010-03-24 2013-03-26 Google Inc. Event-driven module loading
US8704783B2 (en) 2010-03-24 2014-04-22 Microsoft Corporation Easy word selection and selection ahead of finger
US9405404B2 (en) * 2010-03-26 2016-08-02 Autodesk, Inc. Multi-touch marking menus and directional chording gestures
US20110238446A1 (en) * 2010-03-27 2011-09-29 Chaudhry Mundeep Medical record entry systems and methods
JP5459031B2 (ja) * 2010-04-13 2014-04-02 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP2011242821A (ja) * 2010-05-14 2011-12-01 Sony Corp 情報処理装置および方法、並びにプログラム
US8453049B1 (en) 2010-05-19 2013-05-28 Google Inc. Delayed code parsing for reduced startup latency
US9542091B2 (en) 2010-06-04 2017-01-10 Apple Inc. Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
US9600153B2 (en) * 2010-07-05 2017-03-21 Lg Electronics Inc. Mobile terminal for displaying a webpage and method of controlling the same
US10015122B1 (en) * 2012-10-18 2018-07-03 Sitting Man, Llc Methods and computer program products for processing a search
JP5510185B2 (ja) * 2010-08-20 2014-06-04 ソニー株式会社 情報処理装置、プログラム及び表示制御方法
JP5614173B2 (ja) * 2010-08-25 2014-10-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9465457B2 (en) * 2010-08-30 2016-10-11 Vmware, Inc. Multi-touch interface gestures for keyboard and/or mouse inputs
JP2012058857A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、操作方法及び情報処理プログラム
TWI408672B (zh) * 2010-09-24 2013-09-11 Hon Hai Prec Ind Co Ltd 具有實現歌詞同步顯示功能的電子裝置及其方法
US9491852B2 (en) 2010-10-15 2016-11-08 Apple Inc. Trace border routing
US20120102401A1 (en) * 2010-10-25 2012-04-26 Nokia Corporation Method and apparatus for providing text selection
US8659562B2 (en) 2010-11-05 2014-02-25 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8614665B2 (en) * 2010-11-19 2013-12-24 Qualcomm Innovation Center, Inc. Touch screen
KR101784317B1 (ko) * 2010-11-19 2017-10-11 삼성전자주식회사 휴대단말에서 전자책 기능 운용 방법 및 장치
EP2641146A4 (en) * 2010-11-20 2017-05-03 Nuance Communications, Inc. Performing actions on a computing device using a contextual keyboard
US20120154295A1 (en) * 2010-12-17 2012-06-21 Microsoft Corporation Cooperative use of plural input mechanisms to convey gestures
US8994646B2 (en) 2010-12-17 2015-03-31 Microsoft Corporation Detecting gestures involving intentional movement of a computing device
US8982045B2 (en) 2010-12-17 2015-03-17 Microsoft Corporation Using movement of a computing device to enhance interpretation of input events produced when interacting with the computing device
US9244545B2 (en) 2010-12-17 2016-01-26 Microsoft Technology Licensing, Llc Touch and stylus discrimination and rejection for contact sensitive computing devices
US8988398B2 (en) 2011-02-11 2015-03-24 Microsoft Corporation Multi-touch input device with orientation sensing
EP2656325B8 (de) * 2010-12-22 2018-11-21 U-NICA Technology AG Verfahren und vorrichtung zur authentizierung von mit fotochromen systemen markierten dokumenten
US20120185787A1 (en) * 2011-01-13 2012-07-19 Microsoft Corporation User interface interaction behavior based on insertion point
US10365819B2 (en) 2011-01-24 2019-07-30 Apple Inc. Device, method, and graphical user interface for displaying a character input user interface
US9092132B2 (en) * 2011-01-24 2015-07-28 Apple Inc. Device, method, and graphical user interface with a dynamic gesture disambiguation threshold
TW201233121A (en) * 2011-01-28 2012-08-01 Hon Hai Prec Ind Co Ltd Method for closing an alarm clock interface on screen
US8825002B2 (en) * 2011-02-08 2014-09-02 Macheen, Inc. Fractional applications product catalog
US8594618B2 (en) * 2011-02-08 2013-11-26 Macheen, Inc. System and method for task specific, metered bandwidth control within shared client environment on mobile communications platforms
US9201520B2 (en) 2011-02-11 2015-12-01 Microsoft Technology Licensing, Llc Motion and context sharing for pen-based computing inputs
US8467663B2 (en) * 2011-02-18 2013-06-18 Apple Inc. Video context popups
EP2676183B1 (en) 2011-02-18 2019-04-10 BlackBerry Limited Methods and apparatus for providing updated content in a user interface
JP5697491B2 (ja) * 2011-03-03 2015-04-08 京セラ株式会社 電子機器、表示方法及びプログラム
KR20120102262A (ko) * 2011-03-08 2012-09-18 삼성전자주식회사 휴대용 단말기가 열람하는 텍스트에서 원하는 내용을 선택하는 방법 및 장치
KR101842457B1 (ko) * 2011-03-09 2018-03-27 엘지전자 주식회사 이동 단말기 및 그의 텍스트 커서 운용방법
US8843844B2 (en) 2011-03-17 2014-09-23 Intellitact Llc Input device enhanced interface
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
JP5697521B2 (ja) * 2011-04-07 2015-04-08 京セラ株式会社 文字入力装置、文字入力制御方法および文字入力プログラム
US20120260290A1 (en) * 2011-04-07 2012-10-11 Sony Corporation User interface for audio video display device such as tv
KR101774316B1 (ko) * 2011-04-18 2017-09-04 엘지전자 주식회사 영상표시장치 및 이를 이용한 콘텐츠 관리방법
US20120272144A1 (en) * 2011-04-20 2012-10-25 Microsoft Corporation Compact control menu for touch-enabled command execution
CN102760028B (zh) * 2011-04-28 2016-05-25 腾讯科技(深圳)有限公司 基于Symbian平台的放大镜实现方法和装置
JP5722696B2 (ja) 2011-05-10 2015-05-27 京セラ株式会社 電子機器、制御方法及び制御プログラム
KR20120126254A (ko) * 2011-05-11 2012-11-21 삼성전자주식회사 아이템 삭제 기능의 gui제공 방법 및 장치
US8971924B2 (en) 2011-05-23 2015-03-03 Apple Inc. Identifying and locating users on a mobile network
US10715380B2 (en) 2011-05-23 2020-07-14 Apple Inc. Setting a reminder that is triggered by a target user device
KR20120132069A (ko) * 2011-05-27 2012-12-05 삼성전자주식회사 다중 선택 및 다중 붙이기를 이용한 텍스트 편집을 위한 방법 및 장치
US8656315B2 (en) 2011-05-27 2014-02-18 Google Inc. Moving a graphical selector
US8826190B2 (en) 2011-05-27 2014-09-02 Google Inc. Moving a graphical selector
EP2530577A3 (en) * 2011-05-30 2017-08-02 Samsung Electronics Co., Ltd. Display apparatus and method
US9032338B2 (en) 2011-05-30 2015-05-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating and editing text
US8661339B2 (en) * 2011-05-31 2014-02-25 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
KR101838260B1 (ko) * 2011-06-03 2018-03-13 구글 엘엘씨 텍스트를 선택하기 위한 제스처들
US20120311444A1 (en) * 2011-06-05 2012-12-06 Apple Inc. Portable multifunction device, method, and graphical user interface for controlling media playback using gestures
US8631317B2 (en) 2011-06-28 2014-01-14 International Business Machines Corporation Manipulating display of document pages on a touchscreen computing device
US8832588B1 (en) * 2011-06-30 2014-09-09 Microstrategy Incorporated Context-inclusive magnifying area
US20130007606A1 (en) * 2011-06-30 2013-01-03 Nokia Corporation Text deletion
KR20130004654A (ko) * 2011-07-04 2013-01-14 삼성전자주식회사 휴대단말기의 텍스트 편집방법 및 장치
US9202297B1 (en) * 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130033418A1 (en) * 2011-08-05 2013-02-07 Qualcomm Incorporated Gesture detection using proximity or light sensors
US9317196B2 (en) * 2011-08-10 2016-04-19 Microsoft Technology Licensing, Llc Automatic zooming for text selection/cursor placement
US8971572B1 (en) 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9245274B2 (en) * 2011-08-30 2016-01-26 Adobe Systems Incorporated Identifying selected dynamic content regions
KR101962445B1 (ko) 2011-08-30 2019-03-26 삼성전자 주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 사용자 인터페이스 제공 방법
US20130055254A1 (en) * 2011-08-31 2013-02-28 Nokia Corporation Methods and apparatuses for providing a virtual machine with dynamic assignment of a physical hardware resource
US9400584B2 (en) * 2011-09-09 2016-07-26 Microsoft Technology Licensing, Llc Alias selection in multiple-aliased animations
US20130063494A1 (en) 2011-09-12 2013-03-14 Microsoft Corporation Assistive reading interface
US9612670B2 (en) * 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
US11099733B2 (en) * 2011-09-30 2021-08-24 Microsoft Technology Licensing, Llc Dynamic command presentation and key configuration for keyboards
US10013152B2 (en) 2011-10-05 2018-07-03 Google Llc Content selection disambiguation
US9305108B2 (en) 2011-10-05 2016-04-05 Google Inc. Semantic selection and purpose facilitation
US9652556B2 (en) 2011-10-05 2017-05-16 Google Inc. Search suggestions based on viewport content
TW201316240A (zh) * 2011-10-06 2013-04-16 Rich Ip Technology Inc 利用圖形用戶介面影像之觸碰處理方法及系統
TWI474252B (zh) * 2011-10-06 2015-02-21 Intelligent GUI touch method and system
US10115217B2 (en) 2011-10-28 2018-10-30 Microsoft Technology Licensing, Llc Layering animation properties in higher level animations
US8490008B2 (en) 2011-11-10 2013-07-16 Research In Motion Limited Touchscreen keyboard predictive display and generation of a set of characters
CA2856209C (en) 2011-11-09 2020-04-07 Blackberry Limited Touch-sensitive display method and apparatus
US9310889B2 (en) 2011-11-10 2016-04-12 Blackberry Limited Touchscreen keyboard predictive display and generation of a set of characters
US9652448B2 (en) 2011-11-10 2017-05-16 Blackberry Limited Methods and systems for removing or replacing on-keyboard prediction candidates
US9122672B2 (en) 2011-11-10 2015-09-01 Blackberry Limited In-letter word prediction for virtual keyboard
US9715489B2 (en) 2011-11-10 2017-07-25 Blackberry Limited Displaying a prediction candidate after a typing mistake
CN102566900A (zh) 2011-11-17 2012-07-11 珠海金山办公软件有限公司 一种上下文工具条的显示控制方法
US20130127904A1 (en) 2011-11-18 2013-05-23 Andrew P. Dove Automatically Displaying Measurement Data Acquired by a Measurement System on a Mobile Device
KR101326991B1 (ko) 2011-12-01 2013-11-13 현대자동차주식회사 노면의 성질 감지 장치 및 그 방법
JP5846887B2 (ja) * 2011-12-13 2016-01-20 京セラ株式会社 携帯端末、編集制御プログラムおよび編集制御方法
USD735736S1 (en) * 2012-01-06 2015-08-04 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
CA2763276C (en) * 2012-01-06 2013-03-19 Microsoft Corporation Input pointer delay and zoom logic
US9152323B2 (en) 2012-01-19 2015-10-06 Blackberry Limited Virtual keyboard providing an indication of received input
US9557913B2 (en) 2012-01-19 2017-01-31 Blackberry Limited Virtual keyboard display having a ticker proximate to the virtual keyboard
US20130191785A1 (en) * 2012-01-23 2013-07-25 Microsoft Corporation Confident item selection using direct manipulation
US8902181B2 (en) 2012-02-07 2014-12-02 Microsoft Corporation Multi-touch-movement gestures for tablet computing devices
US10289660B2 (en) 2012-02-15 2019-05-14 Apple Inc. Device, method, and graphical user interface for sharing a content object in a document
EP2631760A1 (en) 2012-02-24 2013-08-28 Research In Motion Limited Method and apparatus for providing a user interface on a device enabling selection of operations to be performed in relation to content
WO2013123571A1 (en) 2012-02-24 2013-08-29 Research In Motion Limited Virtual keyboard with dynamically reconfigurable layout
EP2631758B1 (en) 2012-02-24 2016-11-02 BlackBerry Limited Touchscreen keyboard providing word predictions in partitions of the touchscreen keyboard in proximate association with candidate letters
EP2631747B1 (en) 2012-02-24 2016-03-30 BlackBerry Limited Method and apparatus for providing a user interface on a device that indicates content operators
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
CN103294657B (zh) * 2012-03-02 2017-10-27 富泰华工业(深圳)有限公司 文本编辑方法及系统
TWI456486B (zh) * 2012-03-06 2014-10-11 Acer Inc 電子裝置及控制電子裝置的方法
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9733707B2 (en) * 2012-03-22 2017-08-15 Honeywell International Inc. Touch screen display user interface and method for improving touch interface utility on the same employing a rules-based masking system
US20130263039A1 (en) * 2012-03-30 2013-10-03 Nokia Corporation Character string shortcut key
KR101880590B1 (ko) * 2012-04-05 2018-07-23 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
JP5619063B2 (ja) * 2012-04-09 2014-11-05 京セラドキュメントソリューションズ株式会社 表示入力装置及びこれを備えた画像形成装置
US8814674B2 (en) 2012-05-24 2014-08-26 Supercell Oy Graphical user interface for a gaming system
GB2511668A (en) 2012-04-12 2014-09-10 Supercell Oy System and method for controlling technical processes
US8954890B2 (en) * 2012-04-12 2015-02-10 Supercell Oy System, method and graphical user interface for controlling a game
US9201510B2 (en) 2012-04-16 2015-12-01 Blackberry Limited Method and device having touchscreen keyboard with visual cues
EP2660727B1 (en) * 2012-04-30 2016-10-26 BlackBerry Limited Method and apparatus for text selection
WO2013164012A1 (en) * 2012-04-30 2013-11-07 Research In Motion Limited Method and apparatus for text selection
EP2660696B1 (en) * 2012-04-30 2014-06-11 BlackBerry Limited Method and apparatus for text selection
US10025487B2 (en) * 2012-04-30 2018-07-17 Blackberry Limited Method and apparatus for text selection
US9354805B2 (en) * 2012-04-30 2016-05-31 Blackberry Limited Method and apparatus for text selection
GB2506956A (en) * 2012-04-30 2014-04-16 Blackberry Ltd Method and apparatus for text selection
CA2821784C (en) * 2012-04-30 2017-01-10 Research In Motion Limited Method and apparatus for text selection
US9292192B2 (en) 2012-04-30 2016-03-22 Blackberry Limited Method and apparatus for text selection
US20130285927A1 (en) * 2012-04-30 2013-10-31 Research In Motion Limited Touchscreen keyboard with correction of previously input text
EP2660697B1 (en) * 2012-04-30 2017-03-01 BlackBerry Limited Method and apparatus for text selection
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
CN104471521B (zh) 2012-05-09 2018-10-23 苹果公司 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
EP3096218B1 (en) 2012-05-09 2018-12-26 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
KR101868352B1 (ko) * 2012-05-14 2018-06-19 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9207860B2 (en) 2012-05-25 2015-12-08 Blackberry Limited Method and apparatus for detecting a gesture
US8843858B2 (en) * 2012-05-31 2014-09-23 Microsoft Corporation Optimization schemes for controlling user interfaces through gesture or touch
CN103412704B (zh) * 2012-05-31 2017-04-26 微软技术许可有限责任公司 用于通过姿势或触摸控制用户界面的优化方案
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
CN103513752B (zh) * 2012-06-18 2017-02-22 华为技术有限公司 一种手势操作的方法、装置及系统
USD729259S1 (en) * 2012-06-20 2015-05-12 Microsoft Corporation Display screen with graphical user interface
USD728613S1 (en) 2012-06-20 2015-05-05 Microsoft Corporation Display screen with graphical user interface
US9116552B2 (en) 2012-06-27 2015-08-25 Blackberry Limited Touchscreen keyboard providing selection of word predictions in partitions of the touchscreen keyboard
US20140002374A1 (en) * 2012-06-29 2014-01-02 Lenovo (Singapore) Pte. Ltd. Text selection utilizing pressure-sensitive touch
US20140007019A1 (en) * 2012-06-29 2014-01-02 Nokia Corporation Method and apparatus for related user inputs
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9423871B2 (en) 2012-08-07 2016-08-23 Honeywell International Inc. System and method for reducing the effects of inadvertent touch on a touch screen controller
US9460416B2 (en) * 2012-08-16 2016-10-04 Microsoft Technology Licensing, Llc Reading mode for interactive slide presentations with accompanying notes
US9507513B2 (en) 2012-08-17 2016-11-29 Google Inc. Displaced double tap gesture
KR102080741B1 (ko) * 2012-08-29 2020-02-24 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR102150289B1 (ko) * 2012-08-30 2020-09-01 삼성전자주식회사 사용자 단말에서 사용자 인터페이스 장치 및 이를 지원하는 방법
CN106843692B (zh) * 2012-08-30 2021-05-18 中兴通讯股份有限公司 触摸屏字符显示方法及装置
US9063653B2 (en) 2012-08-31 2015-06-23 Blackberry Limited Ranking predictions based on typing speed and typing confidence
US9524290B2 (en) 2012-08-31 2016-12-20 Blackberry Limited Scoring predictions based on prediction length and typing speed
KR102147203B1 (ko) * 2012-09-10 2020-08-25 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN102855053B (zh) * 2012-09-13 2016-06-15 惠州Tcl移动通信有限公司 基于移动终端的信息对照输入的方法及移动终端
US20140078275A1 (en) * 2012-09-17 2014-03-20 Gregory Thomas Joao Apparatus and method for providing a wireless, portable, and/or handheld, device with safety features
US20230038025A1 (en) * 2012-09-17 2023-02-09 Gregory Thomas Joao Apparatus and method for providing a wireless, portable, and/or handheld, device with safety features
US9961249B2 (en) * 2012-09-17 2018-05-01 Gregory Thomas Joao Apparatus and method for providing a wireless, portable, and/or handheld, device with safety features
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
JP5620958B2 (ja) * 2012-09-24 2014-11-05 ヤフー株式会社 広告表示制御装置、端末装置、広告表示方法および広告表示プログラム
US8656296B1 (en) * 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
USD734354S1 (en) * 2012-09-28 2015-07-14 Samsung Electronics Co., Ltd. Display screen or portion thereof with generated image
KR20140043644A (ko) * 2012-10-02 2014-04-10 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US9411507B2 (en) * 2012-10-02 2016-08-09 Toyota Motor Engineering & Manufacturing North America, Inc. Synchronized audio feedback for non-visual touch interface system and method
US9557846B2 (en) 2012-10-04 2017-01-31 Corning Incorporated Pressure-sensing touch system utilizing optical and capacitive systems
US9355086B2 (en) * 2012-10-09 2016-05-31 Microsoft Technology Licensing, Llc User interface elements for content selection and extended content selection
US9304683B2 (en) 2012-10-10 2016-04-05 Microsoft Technology Licensing, Llc Arced or slanted soft input panels
US9547430B2 (en) 2012-10-10 2017-01-17 Microsoft Technology Licensing, Llc Provision of haptic feedback for localization and data input
US20140098038A1 (en) * 2012-10-10 2014-04-10 Microsoft Corporation Multi-function configurable haptic device
US9147058B2 (en) 2012-10-12 2015-09-29 Apple Inc. Gesture entry techniques
US9372970B2 (en) 2012-10-12 2016-06-21 Apple Inc. Gesture entry techniques
KR102079174B1 (ko) * 2012-10-15 2020-02-19 삼성전자 주식회사 휴대단말기의 정보 표시장치 및 방법
US20140109016A1 (en) * 2012-10-16 2014-04-17 Yu Ouyang Gesture-based cursor control
US10397150B1 (en) * 2012-10-18 2019-08-27 Gummarus, Llc Methods and computer program products for processing a search query
US9804777B1 (en) 2012-10-23 2017-10-31 Google Inc. Gesture-based text selection
KR102009679B1 (ko) * 2012-11-16 2019-08-13 삼성전자주식회사 입력 장치를 이용한 메모 기능을 수행하는 단말 및 방법
US20140243107A1 (en) * 2012-11-21 2014-08-28 Don't Shake It L.L.C. Novelty device
KR101444202B1 (ko) * 2012-11-27 2014-09-26 주식회사 인프라웨어 터치 스크린을 통한 문서서식 적용방법 및 장치
US20140149935A1 (en) * 2012-11-28 2014-05-29 Michael Dudley Johnson User-Intent-Based Chrome
JP6338318B2 (ja) * 2012-11-30 2018-06-06 キヤノン株式会社 操作装置、画像形成装置及びコンピュータプログラム
KR101446075B1 (ko) * 2012-11-30 2014-10-01 주식회사 인프라웨어 터치 스크린 디스플레이 입력을 통한 객체 서식 복사 방법 및 장치
KR102056189B1 (ko) * 2012-12-05 2019-12-16 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9411510B2 (en) 2012-12-07 2016-08-09 Apple Inc. Techniques for preventing typographical errors on soft keyboards
US9128580B2 (en) 2012-12-07 2015-09-08 Honeywell International Inc. System and method for interacting with a touch screen interface utilizing an intelligent stencil mask
US9483518B2 (en) 2012-12-18 2016-11-01 Microsoft Technology Licensing, Llc Queryless search based on context
US9613011B2 (en) * 2012-12-20 2017-04-04 Cable Television Laboratories, Inc. Cross-reference of shared browser applications
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
AU2013368441B2 (en) 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
KR101988313B1 (ko) * 2013-01-04 2019-06-12 엘지전자 주식회사 이동 단말기 및 이의 제어 방법, 및 이의 기록 매체
CN103076976A (zh) 2013-01-07 2013-05-01 华为终端有限公司 添加应用图标的方法、移除应用图标的方法和装置
AU350072S (en) * 2013-01-09 2013-08-02 Samsung Electronics Co Ltd Display screen for an electronic device
KR102073615B1 (ko) * 2013-01-22 2020-02-05 엘지전자 주식회사 인풋 인터페이스를 제공하는 터치 센서티브 디스플레이 디바이스 및 그 제어 방법
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
US9311756B2 (en) 2013-02-01 2016-04-12 Apple Inc. Image group processing and visualization
KR20240132105A (ko) 2013-02-07 2024-09-02 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
KR102045382B1 (ko) 2013-02-13 2019-11-15 삼성전자주식회사 휴대 단말기에서 문자를 편집하는 장치 및 방법
KR102057629B1 (ko) * 2013-02-19 2020-01-22 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
KR102104910B1 (ko) * 2013-02-28 2020-04-27 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
CN104035701A (zh) * 2013-03-06 2014-09-10 夏普株式会社 在电子设备的触摸屏上编辑对象的方法、装置和电子设备
KR102113272B1 (ko) * 2013-03-11 2020-06-02 삼성전자주식회사 전자장치에서 복사/붙여넣기 방법 및 장치
US11096668B2 (en) 2013-03-13 2021-08-24 Samsung Electronics Co., Ltd. Method and ultrasound apparatus for displaying an object
WO2014142468A1 (en) * 2013-03-13 2014-09-18 Samsung Electronics Co., Ltd. Method of providing copy image and ultrasound apparatus therefor
US9992021B1 (en) 2013-03-14 2018-06-05 GoTenna, Inc. System and method for private and point-to-point communication between computing devices
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
CN105164628B (zh) * 2013-03-14 2018-11-16 华为技术有限公司 移动设备的透镜触摸图形效果
US9317813B2 (en) 2013-03-15 2016-04-19 Apple Inc. Mobile device with predictive routing engine
US9857193B2 (en) 2013-06-08 2018-01-02 Apple Inc. Mapping application with turn-by-turn navigation mode for output to vehicle display
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9176940B2 (en) 2013-03-15 2015-11-03 Blackberry Limited System and method for text editor text alignment control
US9303997B2 (en) 2013-03-15 2016-04-05 Apple Inc. Prediction engine
US9785240B2 (en) * 2013-03-18 2017-10-10 Fuji Xerox Co., Ltd. Systems and methods for content-aware selection
WO2014148215A1 (ja) * 2013-03-21 2014-09-25 株式会社Nttドコモ 端末装置及びオブジェクト選択方法
JP2014203288A (ja) 2013-04-05 2014-10-27 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR102091235B1 (ko) * 2013-04-10 2020-03-18 삼성전자주식회사 휴대 단말기에서 메시지를 편집하는 장치 및 방법
JP2014211701A (ja) * 2013-04-17 2014-11-13 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR102207861B1 (ko) * 2013-04-26 2021-01-26 삼성전자주식회사 디스플레이 방법 및 그 방법을 처리하는 전자 장치
WO2014176742A1 (en) * 2013-04-28 2014-11-06 Tencent Technology (Shenzhen) Company Limited A platform for sharing collected information with third-party applications
US10719224B1 (en) 2013-04-29 2020-07-21 David Graham Boyers Methods and graphical user interfaces for pointing and editing on computing devices with touch-sensitive displays
JP6136568B2 (ja) * 2013-05-23 2017-05-31 富士通株式会社 情報処理装置および入力制御プログラム
US20140359433A1 (en) * 2013-06-04 2014-12-04 Microsoft Corporation Text selection paragraph snapping
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US20140365459A1 (en) 2013-06-08 2014-12-11 Apple Inc. Harvesting Addresses
KR101772152B1 (ko) 2013-06-09 2017-08-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
WO2014200676A2 (en) * 2013-06-09 2014-12-18 Apple Inc. Device, method, and graphical user interface for moving user interface objects
US9442642B2 (en) 2013-06-14 2016-09-13 Microsoft Technology Licensing, Llc Tethered selection handle
US10437350B2 (en) * 2013-06-28 2019-10-08 Lenovo (Singapore) Pte. Ltd. Stylus shorthand
CN104281394A (zh) * 2013-07-05 2015-01-14 腾讯科技(深圳)有限公司 智能选词的方法和装置
WO2015008364A1 (ja) * 2013-07-18 2015-01-22 株式会社東芝 電子機器、表示方法およびプログラム
US20150033188A1 (en) * 2013-07-23 2015-01-29 Microsoft Corporation Scrollable smart menu
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
EP3037938A4 (en) 2013-08-22 2017-05-10 Samsung Electronics Co., Ltd. Application execution method by display device and display device thereof
KR102186815B1 (ko) 2013-08-29 2020-12-04 삼성전자주식회사 컨텐츠 스크랩 방법, 장치 및 기록매체
JP6018996B2 (ja) * 2013-09-04 2016-11-02 シャープ株式会社 情報処理装置
USD771082S1 (en) 2013-09-10 2016-11-08 Apple Inc. Display screen or portion thereof with graphical user interface
US9665206B1 (en) 2013-09-18 2017-05-30 Apple Inc. Dynamic user interface adaptable to multiple input tools
JP2015064697A (ja) * 2013-09-24 2015-04-09 富士通株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP5973405B2 (ja) 2013-09-25 2016-08-23 京セラドキュメントソリューションズ株式会社 入力装置及び電子機器
CN111984165B (zh) * 2013-09-29 2022-07-08 小米科技有限责任公司 一种显示消息的方法、装置及终端设备
KR102143997B1 (ko) * 2013-10-17 2020-08-12 삼성전자 주식회사 단말장치의 정보 리스트 처리장치 및 방법
CN103530056B (zh) * 2013-10-24 2017-05-24 努比亚技术有限公司 一种自由截屏的方法和移动终端
US10990267B2 (en) * 2013-11-08 2021-04-27 Microsoft Technology Licensing, Llc Two step content selection
US9841881B2 (en) * 2013-11-08 2017-12-12 Microsoft Technology Licensing, Llc Two step content selection with auto content categorization
US9383816B2 (en) * 2013-11-15 2016-07-05 Kopin Corporation Text selection using HMD head-tracker and voice-command
US9500867B2 (en) 2013-11-15 2016-11-22 Kopin Corporation Head-tracking based selection technique for head mounted displays (HMD)
US9904360B2 (en) 2013-11-15 2018-02-27 Kopin Corporation Head tracking based gesture control techniques for head mounted displays
US10209955B2 (en) 2013-11-15 2019-02-19 Kopin Corporation Automatic speech recognition (ASR) feedback for head mounted displays (HMD)
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
USD767588S1 (en) * 2013-12-16 2016-09-27 Tencent Technology (Shenzhen) Company Limited Display screen portion with graphical user interface
USD767589S1 (en) * 2013-12-16 2016-09-27 Tencent Technology (Shenzhen) Company Limited Display screen portion with animated graphical user interface
DE102013021576B4 (de) * 2013-12-19 2024-10-02 Audi Ag Verfahren zum Auswählen eines Textabschnitts auf einem berührungssensitiven Bildschirm und Anzeige- und Bedienvorrichtung
USD753680S1 (en) * 2014-01-03 2016-04-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD749130S1 (en) * 2014-01-05 2016-02-09 Makerbot Industries, Llc Display screen with an icon
KR102214437B1 (ko) * 2014-01-10 2021-02-10 삼성전자주식회사 컴퓨팅 디바이스에서 컨텐츠 복사 실행 방법, 컨텐츠 붙여넣기 실행 방법 및 컴퓨팅 디바이스
WO2015109507A1 (zh) * 2014-01-24 2015-07-30 华为终端有限公司 一种输入字符的方法和电子设备
US10168864B2 (en) * 2014-01-24 2019-01-01 Citrix Systems, Inc. Gesture menu
KR102305114B1 (ko) * 2014-03-07 2021-09-27 삼성전자주식회사 데이터 처리 방법 및 그 전자 장치
EP3125088B1 (en) * 2014-03-25 2018-08-22 Fujitsu Limited Terminal device, display control method, and program
JP6249851B2 (ja) * 2014-03-26 2017-12-20 Kddi株式会社 入力制御装置、入力制御方法、およびプログラム
USD768188S1 (en) * 2014-04-08 2016-10-04 Huawei Device Co., Ltd. Display screen or portion thereof with graphical user interface
JP6241356B2 (ja) 2014-04-08 2017-12-06 富士通株式会社 電子機器及び情報表示プログラム
USD756377S1 (en) * 2014-04-17 2016-05-17 Google Inc. Portion of a display panel with an animated computer icon
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
CN110797019B (zh) 2014-05-30 2023-08-29 苹果公司 多命令单一话语输入方法
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9898162B2 (en) 2014-05-30 2018-02-20 Apple Inc. Swiping functions for messaging applications
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9185062B1 (en) 2014-05-31 2015-11-10 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
US9971500B2 (en) * 2014-06-01 2018-05-15 Apple Inc. Displaying options, assigning notification, ignoring messages, and simultaneous user interface displays in a messaging application
USD872119S1 (en) * 2014-06-01 2020-01-07 Apple Inc. Display screen or portion thereof with animated graphical user interface
US9727161B2 (en) 2014-06-12 2017-08-08 Microsoft Technology Licensing, Llc Sensor correlation for pen and touch-sensitive computing device interaction
US9870083B2 (en) 2014-06-12 2018-01-16 Microsoft Technology Licensing, Llc Multi-device multi-user sensor correlation for pen and computing device interaction
FR3022644A1 (fr) * 2014-06-23 2015-12-25 Orange Procede de masquage d'un element parmi une pluralite d'elements
CN116243841A (zh) 2014-06-27 2023-06-09 苹果公司 尺寸减小的用户界面
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
TWI647608B (zh) 2014-07-21 2019-01-11 美商蘋果公司 遠端使用者介面
WO2016022204A1 (en) 2014-08-02 2016-02-11 Apple Inc. Context-specific user interfaces
CN106605201B (zh) 2014-08-06 2021-11-23 苹果公司 用于电池管理的减小尺寸的用户界面
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
AU2015306091B2 (en) * 2014-08-20 2021-04-01 Touchgram Pty Ltd A system and a method for sending a touch message
CN104199609B (zh) * 2014-08-21 2018-02-02 小米科技有限责任公司 光标定位的方法及装置
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
EP3189409B1 (en) 2014-09-02 2020-01-29 Apple Inc. Reduced-size interfaces for managing alerts
US10254948B2 (en) 2014-09-02 2019-04-09 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
CN115665320B (zh) 2014-09-02 2024-10-11 苹果公司 电子设备、存储介质和用于操作电子设备的方法
CN110072131A (zh) 2014-09-02 2019-07-30 苹果公司 音乐用户界面
WO2016036522A2 (en) 2014-09-02 2016-03-10 Apple Inc. User interface for receiving user input
USD735754S1 (en) 2014-09-02 2015-08-04 Apple Inc. Display screen or portion thereof with graphical user interface
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
KR101652446B1 (ko) * 2014-09-16 2016-08-30 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9928570B2 (en) * 2014-10-01 2018-03-27 Calgary Scientific Inc. Method and apparatus for precision measurements on a touch screen
US9824076B2 (en) * 2014-10-14 2017-11-21 Bank Of America Coporation Big file editor
CN104461348B (zh) * 2014-10-31 2018-09-04 小米科技有限责任公司 信息选取方法及装置
KR20160051081A (ko) * 2014-10-31 2016-05-11 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US10007406B1 (en) * 2014-11-24 2018-06-26 Evernote Corporation Adaptive writing interface
US20160157074A1 (en) 2014-11-30 2016-06-02 Raymond Anthony Joao Personal monitoring apparatus and method
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
CN105808080B (zh) * 2014-12-29 2020-12-04 鸿合科技股份有限公司 一种利用手势快速复制对象的方法和装置
EP3040839B1 (en) * 2014-12-31 2020-08-12 Dassault Systèmes Selection of a graphical element
US10534502B1 (en) 2015-02-18 2020-01-14 David Graham Boyers Methods and graphical user interfaces for positioning the cursor and selecting text on computing devices with touch-sensitive displays
USD765098S1 (en) 2015-03-06 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
USD771670S1 (en) 2015-03-09 2016-11-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) * 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US10126846B2 (en) * 2015-04-09 2018-11-13 Blackberry Limited Portable electronic device including touch-sensitive display and method of controlling selection of information
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
CN106201295B (zh) * 2015-04-29 2020-05-12 中兴通讯股份有限公司 一种消息复制方法和装置、以及智能终端
JP6500582B2 (ja) * 2015-05-07 2019-04-17 富士ゼロックス株式会社 画面表示装置及びプログラム
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
USD772269S1 (en) 2015-06-05 2016-11-22 Apple Inc. Display screen or portion thereof with graphical user interface
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
USD768653S1 (en) * 2015-06-12 2016-10-11 Microsoft Corporation Display screen with transparent animated graphical user interface
CN106293444B (zh) * 2015-06-25 2020-07-03 小米科技有限责任公司 移动终端、显示控制方法及装置
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
JP5906344B1 (ja) * 2015-07-06 2016-04-20 ヤフー株式会社 情報処理装置、情報表示プログラムおよび情報表示方法
US10281976B2 (en) * 2015-07-07 2019-05-07 Seiko Epson Corporation Display device, control method for display device, and computer program
CN106648279A (zh) * 2015-07-14 2017-05-10 阿里巴巴集团控股有限公司 一种数据处理的方法和设备
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
EP4321088A3 (en) 2015-08-20 2024-04-24 Apple Inc. Exercise-based watch face
JP2017047781A (ja) * 2015-09-01 2017-03-09 三菱自動車工業株式会社 車載情報処理装置
USD773519S1 (en) * 2015-09-01 2016-12-06 Apriva, Llc Mobile phone with graphical user interface
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10739960B2 (en) * 2015-09-22 2020-08-11 Samsung Electronics Co., Ltd. Performing application-specific searches using touchscreen-enabled computing devices
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US20170131873A1 (en) * 2015-11-09 2017-05-11 Microsoft Technology Licensing, Llc. Natural user interface for selecting a target element
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10324599B2 (en) * 2016-03-30 2019-06-18 Microsoft Technology Licensing, Llc Assistive move handle for object interaction
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10739972B2 (en) 2016-06-10 2020-08-11 Apple Inc. Device, method, and graphical user interface for managing electronic communications
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
KR102580327B1 (ko) * 2016-09-09 2023-09-19 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
CN106569990B (zh) * 2016-10-31 2019-06-07 努比亚技术有限公司 移动终端及文档编辑方法
CN106775392A (zh) * 2016-11-30 2017-05-31 维沃移动通信有限公司 一种移动终端界面的操控方法及移动终端
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US10928980B2 (en) 2017-05-12 2021-02-23 Apple Inc. User interfaces for playing and managing audio items
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10698561B2 (en) * 2017-06-12 2020-06-30 Google Llc Intelligent command batching in an augmented and/or virtual reality environment
USD957448S1 (en) 2017-09-10 2022-07-12 Apple Inc. Electronic device with graphical user interface
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
JP6592056B2 (ja) * 2017-10-17 2019-10-16 株式会社Nttドコモ 情報処理装置
EP3683665B1 (en) 2017-11-07 2023-03-29 Huawei Technologies Co., Ltd. Touch control method and device
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
CN108132752B (zh) * 2017-12-21 2020-02-18 维沃移动通信有限公司 一种文本编辑方法及移动终端
CN107967093B (zh) * 2017-12-21 2020-01-31 维沃移动通信有限公司 一种多段文本复制方法及移动终端
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10895979B1 (en) 2018-02-16 2021-01-19 David Graham Boyers Methods and user interfaces for positioning a selection, selecting, and editing, on a computing device running under a touch-based operating system, using gestures on a touchpad device
US10289152B1 (en) * 2018-02-23 2019-05-14 The Chamberlain Group, Inc. Interactive multimedia assistant device with a swappable personality customizable skin
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
USD861721S1 (en) 2018-04-09 2019-10-01 Palm Ventures Group, Inc. Display screen or portion thereof with a graphical user interface for handling swipe gesture
USD874495S1 (en) 2018-04-09 2020-02-04 Palm Ventures Group, Inc. Display screen or portion thereof with a graphical user interface for an application launcher
USD922997S1 (en) 2018-04-09 2021-06-22 Palm Ventures Group, Inc. Personal computing device
US11320983B1 (en) * 2018-04-25 2022-05-03 David Graham Boyers Methods and graphical user interfaces for positioning a selection, selecting, and editing, on a computing device running applications under a touch-based operating system
DK201870351A1 (en) 2018-05-07 2020-01-13 Apple Inc. Devices and Methods for Measuring Using Augmented Reality
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
EP3901741B1 (en) * 2018-05-07 2024-02-21 Apple Inc. Devices and methods for measuring using augmented reality
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
CN108681531B (zh) * 2018-05-09 2020-11-13 天津字节跳动科技有限公司 文档输入的控制方法及装置
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
USD882615S1 (en) 2018-09-06 2020-04-28 Apple Inc. Electronic device with animated graphical user interface
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10785413B2 (en) 2018-09-29 2020-09-22 Apple Inc. Devices, methods, and graphical user interfaces for depth-based annotation
USD917501S1 (en) * 2018-10-05 2021-04-27 Pear Therapeutics, Inc. Display screen or portion thereof with an animated graphical user interface
USD910051S1 (en) * 2018-10-11 2021-02-09 Ke.Com (Beijing) Technology Co., Ltd. Display screen or portion thereof with graphical user interface
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
USD875114S1 (en) * 2018-11-14 2020-02-11 Facebook, Inc. Display panel of a programmed computer system with a graphical user interface
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
KR102393717B1 (ko) 2019-05-06 2022-05-03 애플 인크. 전자 디바이스의 제한된 동작
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
EP4231124A1 (en) 2019-05-31 2023-08-23 Apple Inc. User interfaces for audio media control
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11379113B2 (en) 2019-06-01 2022-07-05 Apple Inc. Techniques for selecting text
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11765547B2 (en) 2019-07-30 2023-09-19 Raymond Anthony Joao Personal monitoring apparatus and methods
JP6651275B1 (ja) 2019-08-01 2020-02-19 株式会社ディスコ 加工装置
CN110515507B (zh) * 2019-08-16 2021-03-19 维沃移动通信有限公司 一种图标显示方法及终端
DK180684B1 (en) 2019-09-09 2021-11-25 Apple Inc Techniques for managing display usage
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11227446B2 (en) 2019-09-27 2022-01-18 Apple Inc. Systems, methods, and graphical user interfaces for modeling, measuring, and drawing using augmented reality
USD924892S1 (en) * 2019-10-15 2021-07-13 Canva Pty Ltd Display screen or portion thereof with graphical user interface
CN111142750B (zh) * 2019-12-23 2021-07-13 维沃移动通信有限公司 一种信息处理方法及电子设备
CN111158544A (zh) * 2019-12-25 2020-05-15 维沃移动通信有限公司 一种内容添加方法及电子设备
US11080879B1 (en) 2020-02-03 2021-08-03 Apple Inc. Systems, methods, and graphical user interfaces for annotating, measuring, and modeling environments
US11727650B2 (en) 2020-03-17 2023-08-15 Apple Inc. Systems, methods, and graphical user interfaces for displaying and manipulating virtual objects in augmented reality environments
CN115904596B (zh) 2020-05-11 2024-02-02 苹果公司 用于管理用户界面共享的用户界面
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
CN111782032A (zh) * 2020-05-26 2020-10-16 北京理工大学 一种基于手指微手势的输入系统及方法
DE102020003923B3 (de) * 2020-06-30 2021-11-04 Daimler Ag Bedieneinheit mit einer berührungssensitiven Bedienfläche
US11615595B2 (en) 2020-09-24 2023-03-28 Apple Inc. Systems, methods, and graphical user interfaces for sharing augmented reality environments
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
KR102465504B1 (ko) * 2020-10-27 2022-11-11 이장우 디지털 오디오북 제작시스템 및 그 방법
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
USD963406S1 (en) * 2021-03-01 2022-09-13 Dart Industries Inc. Cookware lid handle
US11775780B2 (en) 2021-03-01 2023-10-03 Raymond Anthony Joao Personal monitoring apparatus and methods
US11321153B1 (en) 2021-04-08 2022-05-03 International Business Machines Corporation Contextual copy and paste across multiple devices
US11941764B2 (en) 2021-04-18 2024-03-26 Apple Inc. Systems, methods, and graphical user interfaces for adding effects in augmented reality environments
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
US12099976B2 (en) * 2021-05-24 2024-09-24 Adp, Inc. Group eligibility criteria builder
US20230236547A1 (en) 2022-01-24 2023-07-27 Apple Inc. User interfaces for indicating time

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050076300A1 (en) * 2003-10-02 2005-04-07 International Business Machines Corporation Block marker system
US20070238489A1 (en) * 2006-03-31 2007-10-11 Research In Motion Limited Edit menu for a mobile communication device
US20080165142A1 (en) * 2006-10-26 2008-07-10 Kenneth Kocienda Portable Multifunction Device, Method, and Graphical User Interface for Adjusting an Insertion Point Marker
JP2008243221A (ja) * 2008-04-28 2008-10-09 Sony Corp 文章入力装置及び方法

Family Cites Families (382)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2008A (en) * 1841-03-18 Gas-lamp eok conducting gas pkom ah elevated buhner to one below it
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4077011A (en) 1976-12-20 1978-02-28 International Business Machines Corporation Uncertain interval timer using a variable length shift register
JPS5741731A (en) 1980-08-25 1982-03-09 Fujitsu Ltd Coordinate input device
US4332464A (en) 1980-09-22 1982-06-01 Xerox Corporation Interactive user-machine interface method and apparatus for copier/duplicator
JPS5957336A (ja) 1982-09-27 1984-04-02 Toshiba Corp 画像表示装置
US4698625A (en) 1985-05-30 1987-10-06 International Business Machines Corp. Graphic highlight adjacent a pointing cursor
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US4680429A (en) 1986-01-15 1987-07-14 Tektronix, Inc. Touch panel
US4790028A (en) 1986-09-12 1988-12-06 Westinghouse Electric Corp. Method and apparatus for generating variably scaled displays
US4755811A (en) 1987-03-24 1988-07-05 Tektronix, Inc. Touch controlled zoom of waveform displays
US5053758A (en) 1988-02-01 1991-10-01 Sperry Marine Inc. Touchscreen control panel with sliding touch control
US5079723A (en) 1988-03-04 1992-01-07 Xerox Corporation Touch dialogue user interface for reproduction machines
FI80536C (fi) 1988-04-15 1990-06-11 Nokia Mobira Oy Matrisdisplay.
US5625710A (en) 1988-07-20 1997-04-29 Fujitsu Limited Character recognition apparatus using modification of a characteristic quantity
US5201034A (en) * 1988-09-30 1993-04-06 Hitachi Ltd. Interactive intelligent interface
US5027110A (en) 1988-12-05 1991-06-25 At&T Bell Laboratories Arrangement for simultaneously displaying on one or more display terminals a series of images
JPH02153415A (ja) 1988-12-06 1990-06-13 Hitachi Ltd キーボード装置
JPH03113578A (ja) 1989-09-27 1991-05-14 Fujitsu Ltd 図形出力処理方式
US5266949A (en) 1990-03-29 1993-11-30 Nokia Mobile Phones Ltd. Lighted electronic keyboard
JPH0447358A (ja) 1990-06-01 1992-02-17 Nippon Telegr & Teleph Corp <Ntt> 文章等の編集方法
DE4023318A1 (de) 1990-07-21 1992-02-20 Fraunhofer Ges Forschung Verfahren zur durchfuehrung eines variablen dialogs mit technischen geraeten
US5119079A (en) 1990-09-17 1992-06-02 Xerox Corporation Touch screen user interface with expanding touch locations for a reprographic machine
US5347295A (en) * 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
US5260697A (en) 1990-11-13 1993-11-09 Wang Laboratories, Inc. Computer with separate display plane and user interface processor
FI88345C (fi) * 1991-01-29 1993-04-26 Nokia Mobile Phones Ltd Belyst tastatur
JPH06282400A (ja) 1991-04-23 1994-10-07 Sord Comput Corp ポップアップメニューの自動退避表示方式及びその表示方法
US5341466A (en) 1991-05-09 1994-08-23 New York University Fractal computer user centerface with zooming capability
JP3123558B2 (ja) 1991-05-09 2001-01-15 ソニー株式会社 情報入力処理装置および方法
US5202828A (en) * 1991-05-15 1993-04-13 Apple Computer, Inc. User interface system having programmable user interface elements
US5326270A (en) 1991-08-29 1994-07-05 Introspect Technologies, Inc. System and method for assessing an individual's task-processing style
JPH05165459A (ja) 1991-12-19 1993-07-02 Toshiba Corp 拡大表示方式
US6061062A (en) 1991-12-20 2000-05-09 Apple Computer, Inc. Zooming controller
JPH05189149A (ja) 1992-01-10 1993-07-30 Toshiba Corp 情報処理装置
US5483261A (en) * 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5757358A (en) * 1992-03-31 1998-05-26 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback
US5523775A (en) 1992-05-26 1996-06-04 Apple Computer, Inc. Method for selecting objects on a computer display
US5488204A (en) * 1992-06-08 1996-01-30 Synaptics, Incorporated Paintbrush stylus for capacitive touch sensor pad
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5543588A (en) 1992-06-08 1996-08-06 Synaptics, Incorporated Touch pad driven handheld computing device
AU4013693A (en) 1992-06-16 1993-12-23 Honeywell Inc. A method for utilizing a low resolution touch screen system in a high resolution graphics environment
US5319386A (en) 1992-08-04 1994-06-07 Gunn Gary J Ideographic character selection method and apparatus
US5982352A (en) 1992-09-18 1999-11-09 Pryor; Timothy R. Method for providing human input to a computer
US7084859B1 (en) 1992-09-18 2006-08-01 Pryor Timothy R Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
EP0593062A3 (en) * 1992-10-16 1995-08-30 Siemens Ind Automation Inc Redundant networked database system
US5680629A (en) 1992-12-07 1997-10-21 Microsoft Corporation Method and system for previewing computer output
US5465401A (en) 1992-12-15 1995-11-07 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
EP0605945B1 (en) * 1992-12-15 1997-12-29 Sun Microsystems, Inc. Method and apparatus for presenting information in a display system using transparent windows
US5335276A (en) 1992-12-16 1994-08-02 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
EP0609030B1 (en) 1993-01-26 1999-06-09 Sun Microsystems, Inc. Method and apparatus for browsing information in a computer database
JPH06274586A (ja) 1993-03-22 1994-09-30 Mitsubishi Electric Corp 表示方式
JP2986047B2 (ja) 1993-04-29 1999-12-06 インターナショナル・ビジネス・マシーンズ・コーポレイション ディジタル入力用表示装置並びに入力処理装置および方法
DE69430967T2 (de) * 1993-04-30 2002-11-07 Xerox Corp Interaktives Kopiersystem
EP0626635B1 (en) * 1993-05-24 2003-03-05 Sun Microsystems, Inc. Improved graphical user interface with method for interfacing to remote devices
JPH06332617A (ja) 1993-05-25 1994-12-02 Pfu Ltd タッチパネル入力装置における表示方法
US5521984A (en) 1993-06-10 1996-05-28 Verification Technologies, Inc. System for registration, identification and verification of items utilizing unique intrinsic features
WO1994029788A1 (en) 1993-06-15 1994-12-22 Honeywell Inc. A method for utilizing a low resolution touch screen system in a high resolution graphics environment
JP2648558B2 (ja) 1993-06-29 1997-09-03 インターナショナル・ビジネス・マシーンズ・コーポレイション 情報選択装置及び情報選択方法
JP2899194B2 (ja) 1993-06-30 1999-06-02 キヤノン株式会社 意思伝達支援装置及び意思伝達支援方法
US5710831A (en) 1993-07-30 1998-01-20 Apple Computer, Inc. Method for correcting handwriting on a pen-based computer
US5367453A (en) 1993-08-02 1994-11-22 Apple Computer, Inc. Method and apparatus for correcting words
JP3697276B2 (ja) 1993-10-27 2005-09-21 ゼロックス コーポレイション 画像ディスプレイ方法及び画像ディスプレイ装置並びに画像スケーリング方法
JP2813728B2 (ja) 1993-11-01 1998-10-22 インターナショナル・ビジネス・マシーンズ・コーポレイション ズーム/パン機能付パーソナル通信機
US5422656A (en) 1993-11-01 1995-06-06 International Business Machines Corp. Personal communicator having improved contrast control for a liquid crystal, touch sensitive display
US20010040587A1 (en) 1993-11-15 2001-11-15 E. J. Scheck Touch control of cursonr position
US5977950A (en) 1993-11-29 1999-11-02 Motorola, Inc. Manually controllable cursor in a virtual image
DE69428675T2 (de) 1993-12-30 2002-05-08 Xerox Corp Apparat und Verfahren zur Unterstützung einer impliziten Strukturation von Freiform-Listen, Übersichten, Texten, Tabellen und Diagrammen in einem auf Handzeichen basierenden Eingabesystem und Editiersystem
US5471578A (en) 1993-12-30 1995-11-28 Xerox Corporation Apparatus and method for altering enclosure selections in a gesture based input system
US5732227A (en) 1994-07-05 1998-03-24 Hitachi, Ltd. Interactive information processing system responsive to user manipulation of physical objects and displayed images
JPH07320051A (ja) 1994-05-20 1995-12-08 Nippon Telegr & Teleph Corp <Ntt> 図形の任意領域拡大縮小表示方法及び図形の任意領域拡大縮小表示装置
JPH07320079A (ja) 1994-05-20 1995-12-08 Nippon Telegr & Teleph Corp <Ntt> 図形の部分拡大表示方法及び図形の部分拡大表示装置
US5568536A (en) 1994-07-25 1996-10-22 International Business Machines Corporation Selective reconfiguration method and apparatus in a multiple application personal communications device
CN1059303C (zh) 1994-07-25 2000-12-06 国际商业机器公司 在个人通讯设备的显示屏幕上标记文本的装置和方法
JP3565453B2 (ja) 1994-08-23 2004-09-15 キヤノン株式会社 画像入出力装置
EP0703525B1 (en) * 1994-09-22 2001-12-05 Aisin Aw Co., Ltd. Touch display type information input system
US5553225A (en) 1994-10-25 1996-09-03 International Business Machines Corporation Method and apparatus for combining a zoom function in scroll bar sliders
US5495566A (en) 1994-11-22 1996-02-27 Microsoft Corporation Scrolling contents of a window
JPH08185265A (ja) 1994-12-28 1996-07-16 Fujitsu Ltd タッチパネル制御装置
US5760773A (en) * 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
US5880743A (en) * 1995-01-24 1999-03-09 Xerox Corporation Apparatus and method for implementing visual animation illustrating results of interactive editing operations
US5565888A (en) 1995-02-17 1996-10-15 International Business Machines Corporation Method and apparatus for improving visibility and selectability of icons
JPH08227341A (ja) 1995-02-22 1996-09-03 Mitsubishi Electric Corp ユーザインターフェース
US5543897A (en) 1995-03-07 1996-08-06 Eastman Kodak Company Reproduction apparatus having touch screen operator interface and auxiliary keyboard
US5754873A (en) * 1995-06-01 1998-05-19 Adobe Systems, Inc. Method and apparatus for scaling a selected block of text to a preferred absolute text height and scaling the remainder of the text proportionately
US5790819A (en) * 1995-07-14 1998-08-04 International Business Machines Corporation Mechanism for fine-grained and coarse-grained control of zooming in a display of a one-dimensional data set
US5721939A (en) * 1995-08-03 1998-02-24 Xerox Corporation Method and apparatus for tokenizing text
US5778404A (en) 1995-08-07 1998-07-07 Apple Computer, Inc. String inserter for pen-based computer systems and method for providing same
JPH0981320A (ja) 1995-09-20 1997-03-28 Matsushita Electric Ind Co Ltd ペン入力式選択入力装置及びその方法
US6037939A (en) 1995-09-27 2000-03-14 Sharp Kabushiki Kaisha Method for enabling interactive manipulation of data retained in computer system, and a computer system for implementing the method
JPH09106336A (ja) 1995-10-11 1997-04-22 Sharp Corp 複数の表示画像を情報処理装置の表示窓内に表示する方法
JPH09146708A (ja) 1995-11-09 1997-06-06 Internatl Business Mach Corp <Ibm> タッチパネルの駆動方法及びタッチ入力方法
JPH09152955A (ja) 1995-11-30 1997-06-10 Hitachi Ltd 携帯情報通信端末装置
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
GB9605216D0 (en) 1996-03-12 1996-05-15 Ncr Int Inc Display system and method of moving a cursor of the display system
US6173194B1 (en) 1996-04-15 2001-01-09 Nokia Mobile Phones Limited Mobile terminal having improved user interface
US6493006B1 (en) * 1996-05-10 2002-12-10 Apple Computer, Inc. Graphical user interface having contextual menus
US5835079A (en) 1996-06-13 1998-11-10 International Business Machines Corporation Virtual pointing device for touchscreens
US6054990A (en) 1996-07-05 2000-04-25 Tran; Bao Q. Computer system with handwriting annotation
CA2264167A1 (en) 1996-08-28 1998-03-05 Via, Inc. Touch screen systems and methods
JPH1091382A (ja) 1996-09-13 1998-04-10 Toshiba Corp テキスト編集装置及び方法
US5966135A (en) 1996-10-30 1999-10-12 Autodesk, Inc. Vector-based geographic data
US6157935A (en) 1996-12-17 2000-12-05 Tran; Bao Q. Remote data access and management system
US5926769A (en) * 1997-02-18 1999-07-20 Nokia Mobile Phones Limited Cellular telephone having simplified user interface for storing and retrieving telephone numbers
DE19710612A1 (de) * 1997-03-14 1998-09-17 Haarmann & Reimer Gmbh N-Acyl-hydroxyaminosäureester und ihre Verwendung
US6073036A (en) * 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US6049326A (en) * 1997-05-12 2000-04-11 Siemens Information And Communication Networks, Inc. System and method for dual browser modes
US5956035A (en) 1997-05-15 1999-09-21 Sony Corporation Menu selection with menu stem and submenu size enlargement
JPH10340075A (ja) 1997-06-06 1998-12-22 Matsushita Electric Ind Co Ltd 画像表示方法
US5910800A (en) * 1997-06-11 1999-06-08 Microsoft Corporation Usage tips for on-screen touch-sensitive controls
JPH1153116A (ja) 1997-07-29 1999-02-26 Internatl Business Mach Corp <Ibm> タッチパネル付き情報処理装置及びその制御方法
US6433801B1 (en) 1997-09-26 2002-08-13 Ericsson Inc. Method and apparatus for using a touch screen display on a portable intelligent communications device
CN1122214C (zh) 1997-10-21 2003-09-24 艾利森公司 使用拖放接口联系控制对象与应用的系统和方法
FI109733B (fi) * 1997-11-05 2002-09-30 Nokia Corp Viestin sisällön hyödyntäminen
JPH11143724A (ja) * 1997-11-13 1999-05-28 Sharp Corp 情報処理装置および情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体
US6310610B1 (en) 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US6323846B1 (en) 1998-01-26 2001-11-27 University Of Delaware Method and apparatus for integrating manual input
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US7683888B1 (en) 2004-02-27 2010-03-23 Apple Inc. Shape detecting input device
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7760187B2 (en) * 2004-07-30 2010-07-20 Apple Inc. Visual expander
US20060033724A1 (en) * 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7808479B1 (en) 2003-09-02 2010-10-05 Apple Inc. Ambidextrous mouse
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
CA2325134A1 (en) 1998-03-20 1999-09-30 Nuvomedia, Inc. Electronic book system
US6211856B1 (en) 1998-04-17 2001-04-03 Sung M. Choi Graphical user interface touch screen with an auto zoom feature
US6078036A (en) * 1998-05-06 2000-06-20 Intraop Medical, Inc. Laser soft docking system for medical treatment system
US6188391B1 (en) * 1998-07-09 2001-02-13 Synaptics, Inc. Two-layer capacitive touchpad and method of making same
JP4542637B2 (ja) 1998-11-25 2010-09-15 セイコーエプソン株式会社 携帯情報機器及び情報記憶媒体
JP4547474B2 (ja) 1998-12-31 2010-09-22 俊彦 岡部 Www検索装置
US6552719B2 (en) * 1999-01-07 2003-04-22 Microsoft Corporation System and method for automatically switching between writing and text input modes
US6643824B1 (en) 1999-01-15 2003-11-04 International Business Machines Corporation Touch screen region assist for hypertext links
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
JP3659065B2 (ja) 1999-01-29 2005-06-15 松下電器産業株式会社 画像表示装置
US6411283B1 (en) * 1999-05-20 2002-06-25 Micron Technology, Inc. Computer touch screen adapted to facilitate selection of features at edge of screen
AUPQ439299A0 (en) 1999-12-01 1999-12-23 Silverbrook Research Pty Ltd Interface system
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
AU5087800A (en) 1999-06-02 2000-12-28 Ncr International, Inc. Self-service terminal
US6971071B1 (en) 1999-06-10 2005-11-29 Microsoft Corporation System and method for implementing an image ancillary to a cursor
US6664989B1 (en) 1999-10-18 2003-12-16 Honeywell International Inc. Methods and apparatus for graphical display interaction
US7322524B2 (en) 2000-10-20 2008-01-29 Silverbrook Research Pty Ltd Graphic design software using an interface surface
US20020111990A1 (en) 1999-11-01 2002-08-15 Wood Christopher Noah Internet based message management system
US6731315B1 (en) 1999-11-30 2004-05-04 International Business Machines Corporation Method for selecting display parameters of a magnifiable cursor
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US6664991B1 (en) 2000-01-06 2003-12-16 Microsoft Corporation Method and apparatus for providing context menus on a pen-based device
US6822635B2 (en) 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
AU2001245899B2 (en) * 2000-03-31 2006-06-15 The Scripps Research Institute Human aminoacyl-tRNA synthetase polypeptides useful for the regulation of angiogenesis
US7273844B2 (en) * 2000-03-31 2007-09-25 The Scripps Research Institute Tryptophanyl-tRNA synthetase-derived polypeptides useful for the regulation of angiogenesis
US7009626B2 (en) 2000-04-14 2006-03-07 Picsel Technologies Limited Systems and methods for generating visual representations of graphical data and digital document processing
EP1285330B1 (en) 2000-05-11 2006-08-30 Nes Stewart Irvine Zeroclick
US6459364B2 (en) 2000-05-23 2002-10-01 Hewlett-Packard Company Internet browser facility and method for the visually impaired
CA2310945C (en) 2000-06-05 2009-02-03 Corel Corporation System and method for magnifying and editing images
JP2001350587A (ja) 2000-06-06 2001-12-21 Sony Corp 情報処理装置、情報入力装置および情報処理本体装置
US6563913B1 (en) * 2000-08-21 2003-05-13 Koninklijke Philips Electronics N.V. Selective sending of portions of electronic content
US6788288B2 (en) * 2000-09-11 2004-09-07 Matsushita Electric Industrial Co., Ltd. Coordinate input device and portable information apparatus equipped with coordinate input device
EP1191430A1 (en) * 2000-09-22 2002-03-27 Hewlett-Packard Company, A Delaware Corporation Graphical user interface for devices having small tactile displays
US7218226B2 (en) * 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
JP5039911B2 (ja) 2000-10-11 2012-10-03 インターナショナル・ビジネス・マシーンズ・コーポレーション データ処理装置、入出力装置、タッチパネルの制御方法、記憶媒体及びプログラム伝送装置
US7603632B1 (en) 2000-11-01 2009-10-13 Microsoft Corporation System and method for creating customizable nodes in a network diagram
US6941507B2 (en) * 2000-11-10 2005-09-06 Microsoft Corporation Insertion point bungee space tool
US6891551B2 (en) 2000-11-10 2005-05-10 Microsoft Corporation Selection handles in editing electronic documents
JP4365523B2 (ja) * 2000-11-30 2009-11-18 株式会社東芝 無線通信端末
AU2002231289A1 (en) 2000-12-19 2002-07-01 Coolernet, Inc. System and method for multimedia authoring and playback
US20040039934A1 (en) 2000-12-19 2004-02-26 Land Michael Z. System and method for multimedia authoring and playback
US7190348B2 (en) * 2000-12-26 2007-03-13 International Business Machines Corporation Method for touchscreen data input
US6677932B1 (en) * 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) * 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7030861B1 (en) * 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US6903189B2 (en) * 2001-03-21 2005-06-07 The Scripps Research Institute Human aminoacyl-tRNA synthetase polypeptides useful for the regulation of angiogenesis
US7047503B1 (en) * 2001-03-28 2006-05-16 Palmsource, Inc. Method and apparatus for the selection of records
WO2002088908A2 (en) 2001-05-02 2002-11-07 Bitstream Inc. Methods, systems, and programming for producing and displaying subpixel-optimized font bitmaps using non-linear color balancing
US7219309B2 (en) 2001-05-02 2007-05-15 Bitstream Inc. Innovations for the display of web pages
JP2002342003A (ja) 2001-05-11 2002-11-29 Canon Inc 操作部材、情報処理装置、情報処理装置の制御方法、記録媒体、及び制御プログラム
US20050024341A1 (en) 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
US7246329B1 (en) * 2001-05-18 2007-07-17 Autodesk, Inc. Multiple menus for use with a graphical user interface
JP3800984B2 (ja) 2001-05-21 2006-07-26 ソニー株式会社 ユーザ入力装置
TW521205B (en) 2001-06-05 2003-02-21 Compal Electronics Inc Touch screen capable of controlling amplification with pressure
WO2002101534A1 (en) * 2001-06-12 2002-12-19 Idelix Software Inc. Graphical user interface with zoom for detail-in-context presentations
US6971068B2 (en) 2001-07-26 2005-11-29 International Business Machines Corporation Dialog box positioning
US6690365B2 (en) 2001-08-29 2004-02-10 Microsoft Corporation Automatic scrolling
JP3909230B2 (ja) 2001-09-04 2007-04-25 アルプス電気株式会社 座標入力装置
FI114175B (fi) 2001-09-10 2004-08-31 Myorigo Oy Navigointimenetelmä, ohjelmatuote ja laite tiedon esittämiseksi käyttöliittymässä
JP3872322B2 (ja) * 2001-09-17 2007-01-24 インターナショナル・ビジネス・マシーンズ・コーポレーション タッチパネルに対応した入力方法、入力システムおよびプログラム
JP2003173237A (ja) * 2001-09-28 2003-06-20 Ricoh Co Ltd 情報入出力システム、プログラム及び記憶媒体
US7254775B2 (en) 2001-10-03 2007-08-07 3M Innovative Properties Company Touch panel system and method for distinguishing multiple touch inputs
US6690387B2 (en) * 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
FI116425B (fi) 2002-01-18 2005-11-15 Nokia Corp Menetelmä ja laite laajan näppäimistön integroimiseksi pieneen laitteeseen
US7075512B1 (en) 2002-02-07 2006-07-11 Palmsource, Inc. Method and system for navigating a display screen for locating a desired item of information
US6938222B2 (en) * 2002-02-08 2005-08-30 Microsoft Corporation Ink gestures
JP2003241879A (ja) 2002-02-14 2003-08-29 Sharp Corp 情報処理システム
US7787908B2 (en) 2002-03-19 2010-08-31 Qualcomm Incorporated Multi-call display management for wireless communication devices
US7309707B2 (en) 2002-03-20 2007-12-18 Boehringer Ingelheim Pharma Gmbh & Co. Kg Crystalline micronisate, process for the manufacture thereof and use thereof for the preparation of a medicament
JP2003296022A (ja) 2002-04-01 2003-10-17 Pioneer Electronic Corp タッチパネル一体型表示装置
US20090015596A1 (en) 2002-06-27 2009-01-15 Tele Atlas North America, Inc. System and method for viewing and editing digital maps using a plug-in data abstraction layer for different digital map formats
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
TW591488B (en) 2002-08-01 2004-06-11 Tatung Co Window scrolling method and device thereof
US7002560B2 (en) * 2002-10-04 2006-02-21 Human Interface Technologies Inc. Method of combining data entry of handwritten symbols with displayed character data
JP2004152217A (ja) 2002-11-01 2004-05-27 Canon Electronics Inc タッチパネル付き表示装置
WO2004051392A2 (en) 2002-11-29 2004-06-17 Koninklijke Philips Electronics N.V. User interface with displaced representation of touch area
US20040183817A1 (en) 2002-12-03 2004-09-23 Bitstream Inc. Methods, systems, and programming for scaled display of web pages
TW589577B (en) 2003-01-03 2004-06-01 Tatung Co Method to display software keyboard
US7194699B2 (en) 2003-01-14 2007-03-20 Microsoft Corporation Animating images to reflect user selection
WO2004070604A2 (en) 2003-02-05 2004-08-19 Philips Intellectual Property & Standards Gmbh Method of selecting objects of a user interface on a display screen
US20040155888A1 (en) * 2003-02-11 2004-08-12 Padgitt David Gary Method for displaying the contents of a collection of media objects
US20040160419A1 (en) 2003-02-11 2004-08-19 Terradigital Systems Llc. Method for entering alphanumeric characters into a graphical user interface
KR100575251B1 (ko) * 2003-03-03 2006-05-02 재단법인서울대학교산학협력재단 p38/JTV-1을 유효성분으로 하는 암 치료용 약학적조성물 및 암 치료용 약학적 조성물의 스크리닝 방법
US7185291B2 (en) 2003-03-04 2007-02-27 Institute For Information Industry Computer with a touch screen
US7103852B2 (en) 2003-03-10 2006-09-05 International Business Machines Corporation Dynamic resizing of clickable areas of touch screen applications
JP4215549B2 (ja) 2003-04-02 2009-01-28 富士通株式会社 タッチパネル・モードとポインティング・デバイス・モードで動作する情報処理装置
US7312981B2 (en) 2003-04-16 2007-12-25 Carroll David W Mobile, hand-held personal computer
US8555165B2 (en) 2003-05-08 2013-10-08 Hillcrest Laboratories, Inc. Methods and systems for generating a zoomable graphical user interface
JP2006527439A (ja) 2003-06-13 2006-11-30 ユニヴァーシティ オブ ランカスター ユーザインタフェース
US8373660B2 (en) 2003-07-14 2013-02-12 Matt Pallakoff System and method for a portable multimedia client
AU2004273532B8 (en) * 2003-08-21 2008-08-21 Samsung Electronics Co., Ltd. Method of controlling reverse link in a mobile communication system
US9024884B2 (en) 2003-09-02 2015-05-05 Apple Inc. Touch-sensitive electronic apparatus for media applications, and methods therefor
US7545412B2 (en) * 2003-09-09 2009-06-09 Konica Minolta Holdings, Inc. Image-sensing apparatus with a solid-state image sensor switchable between linear and logarithmic conversion
US20050052427A1 (en) 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
JP4035497B2 (ja) 2003-09-26 2008-01-23 キヤノン株式会社 画像表示システム、画像表示装置、画像表示方法ならびにプログラム
KR100537280B1 (ko) * 2003-10-29 2005-12-16 삼성전자주식회사 휴대용 단말기에서 터치스크린을 이용한 문자 입력 장치및 방법
CA2627989C (en) 2003-12-18 2013-01-29 1626628 Ontario Limited System, apparatus and method for mapping
US7319457B2 (en) 2004-02-12 2008-01-15 Sentelic Corporation Method of scrolling window screen by means of controlling electronic device
US7437005B2 (en) 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
US20050190970A1 (en) 2004-02-27 2005-09-01 Research In Motion Limited Text input system for a mobile electronic device and methods thereof
KR100539904B1 (ko) 2004-02-27 2005-12-28 삼성전자주식회사 터치 스크린을 구비한 단말기에 사용되는 포인팅 디바이스및 그 사용 방법
JP2005257819A (ja) * 2004-03-09 2005-09-22 Clarion Co Ltd 地図表示装置、方法及びプログラム
US7760925B2 (en) 2004-03-16 2010-07-20 Kurashiki Boseki Kabushiki Kaisha Method for automatically detecting degenerated regions in stained thin section slides
US7394453B2 (en) 2004-04-23 2008-07-01 Cirque Corporation Method for scrolling and edge motion on a touchpad
KR100599454B1 (ko) * 2004-04-27 2006-07-12 재단법인서울대학교산학협력재단 종양 억제자로 작용하는 aim3의 신규 용도
WO2005117954A2 (en) * 2004-06-04 2005-12-15 The Scripps Research Institute Compositions and methods for treatment of neovascular diseases
CN100483319C (zh) 2004-06-17 2009-04-29 皇家飞利浦电子股份有限公司 在触摸屏上使用两手指输入
US20080284799A1 (en) 2004-06-29 2008-11-20 Koninklijke Philips Electronics, N.V. Discontinous Zoom
US7743348B2 (en) 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
US20060001654A1 (en) * 2004-06-30 2006-01-05 National Semiconductor Corporation Apparatus and method for performing data entry with light based touch screen displays
US20060005151A1 (en) 2004-07-02 2006-01-05 Adobe Systems Graphical interface for adjustment of text selections
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
EP2000894B1 (en) 2004-07-30 2016-10-19 Apple Inc. Mode-based graphical user interfaces for touch sensitive input devices
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
KR100958490B1 (ko) 2004-07-30 2010-05-17 애플 인크. 사용자 인터페이스 방법, 미디어 항목들을 통해 스크롤하는방법, 디스플레이 및 터치 스크린을 갖는 사용자-조작되는전자 장치 상에서 수행되는 방법, 디스플레이 및 터치감지 입력 장치를 갖는 컴퓨팅 장치 상에서 수행되는 방법,컴퓨팅 시스템, 컴퓨팅 장치, 터치 감지 장치를 통해플로팅 컨트롤을 기동시키는 컴퓨터 구현 방법 및 컴퓨터구현 방법
US7519573B2 (en) 2004-08-23 2009-04-14 Fuji Xerox Co., Ltd. System and method for clipping, repurposing, and augmenting document content
JP2008515052A (ja) 2004-09-24 2008-05-08 アップル インコーポレイテッド 生データ・トラック・パッド・デバイスおよびシステム
US7728823B2 (en) * 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
US8169410B2 (en) * 2004-10-20 2012-05-01 Nintendo Co., Ltd. Gesture inputs for a portable display device
US7683889B2 (en) 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US7629966B2 (en) * 2004-12-21 2009-12-08 Microsoft Corporation Hard tap
US7489306B2 (en) 2004-12-22 2009-02-10 Microsoft Corporation Touch screen accuracy
US8819569B2 (en) 2005-02-18 2014-08-26 Zumobi, Inc Single-handed approach for navigation of application tiles using panning and zooming
US7692637B2 (en) 2005-04-26 2010-04-06 Nokia Corporation User input device for electronic device
US7605804B2 (en) 2005-04-29 2009-10-20 Microsoft Corporation System and method for fine cursor positioning using a low resolution imaging touch screen
KR100703771B1 (ko) 2005-05-17 2007-04-06 삼성전자주식회사 문자 입력판을 디스플레이하는 장치 및 방법
US9785329B2 (en) 2005-05-23 2017-10-10 Nokia Technologies Oy Pocket computer and associated methods
US7886233B2 (en) 2005-05-23 2011-02-08 Nokia Corporation Electronic text input involving word completion functionality for predicting word candidates for partial word inputs
RU2421777C2 (ru) 2005-05-23 2011-06-20 Нокиа Корпорейшн Улучшенный карманный компьютер и связанные с ним способы
US20060277481A1 (en) 2005-06-03 2006-12-07 Scott Forstall Presenting clips of content
JP2006345209A (ja) 2005-06-08 2006-12-21 Sony Corp 入力装置、情報処理装置、情報処理方法、及びプログラム
TW200701082A (en) 2005-06-23 2007-01-01 Elan Microelectronics Corp Scroll control method used in the touch panel
US7665028B2 (en) 2005-07-13 2010-02-16 Microsoft Corporation Rich drag drop user interface
US7694234B2 (en) 2005-08-04 2010-04-06 Microsoft Corporation Virtual magnifying glass with on-the fly control functionalities
US7853868B2 (en) 2005-09-02 2010-12-14 Microsoft Corporation Button for adding a new tabbed sheet
JP4882319B2 (ja) 2005-09-08 2012-02-22 パナソニック株式会社 情報表示装置
JP2009523267A (ja) 2005-09-15 2009-06-18 アップル インコーポレイテッド トラックパッドデバイスの未加工データを処理するシステム及び方法
US20080098331A1 (en) * 2005-09-16 2008-04-24 Gregory Novick Portable Multifunction Device with Soft Keyboards
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US20070152980A1 (en) 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US7542029B2 (en) * 2005-09-20 2009-06-02 Cliff Kushler System and method for a user interface for text editing and menu selection
US7788590B2 (en) * 2005-09-26 2010-08-31 Microsoft Corporation Lightweight reference user interface
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
WO2007036762A1 (en) 2005-09-30 2007-04-05 Nokia Corporation A method, device, computer program and graphical user interface used for the selection, movement and de-selection of an item
US7526737B2 (en) * 2005-11-14 2009-04-28 Microsoft Corporation Free form wiper
US20070109275A1 (en) 2005-11-16 2007-05-17 Chen-Ting Chuang Method for controlling a touch screen user interface and device thereof
US8643605B2 (en) * 2005-11-21 2014-02-04 Core Wireless Licensing S.A.R.L Gesture based document editor
US7565613B2 (en) 2005-12-01 2009-07-21 Microsoft Corporation User interface incorporating data ecosystem awareness
GB2433402B (en) 2005-12-14 2007-11-28 Siemens Plc An input device
US7701440B2 (en) 2005-12-19 2010-04-20 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Pointing device adapted for small handheld devices having two display modes
US8812978B2 (en) 2005-12-22 2014-08-19 Xerox Corporation System and method for dynamic zoom to view documents on small displays
US7650137B2 (en) 2005-12-23 2010-01-19 Apple Inc. Account information display for portable communication device
US7480870B2 (en) 2005-12-23 2009-01-20 Apple Inc. Indication of progress towards satisfaction of a user input condition
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7877685B2 (en) 2005-12-29 2011-01-25 Sap Ag Persistent adjustable text selector
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
CN102169415A (zh) 2005-12-30 2011-08-31 苹果公司 具有多重触摸输入的便携式电子设备
KR100823083B1 (ko) 2006-02-09 2008-04-18 삼성전자주식회사 터치스크린을 구비한 문서 표시장치의 문서 교정 방법 및그 장치
US7966573B2 (en) 2006-02-17 2011-06-21 Microsoft Corporation Method and system for improving interaction with a user interface
FR2898197A1 (fr) 2006-03-02 2007-09-07 Thomas Joseph Pouit Ecran tactile a point d'interaction distinct du point de contact
US20070234235A1 (en) * 2006-03-31 2007-10-04 Research In Motion Limited Activities/applications menu for a mobile communication device
US8077153B2 (en) 2006-04-19 2011-12-13 Microsoft Corporation Precise selection techniques for multi-touch screens
KR100771626B1 (ko) 2006-04-25 2007-10-31 엘지전자 주식회사 단말기 및 이를 위한 명령 입력 방법
JP4876697B2 (ja) 2006-04-28 2012-02-15 ブラザー工業株式会社 画像処理装置および画像処理プログラム
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
KR100813062B1 (ko) 2006-05-03 2008-03-14 엘지전자 주식회사 휴대용 단말기 및 이를 이용한 텍스트 표시 방법
US20070268317A1 (en) 2006-05-18 2007-11-22 Dan Banay User interface system and method for selectively displaying a portion of a display screen
JP4752622B2 (ja) 2006-05-30 2011-08-17 ブラザー工業株式会社 画像処理装置および画像処理プログラム
US8873858B2 (en) * 2006-06-29 2014-10-28 Rpx Corporation Apparatus, method, device and computer program product providing enhanced text copy capability with touch input display
CN101529494B (zh) * 2006-07-03 2012-01-04 克利夫·库什勒 文本编辑和菜单选择用户界面的系统和方法
KR100781706B1 (ko) 2006-08-16 2007-12-03 삼성전자주식회사 휴대 단말기의 리스트 스크롤 장치 및 방법
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7940250B2 (en) 2006-09-06 2011-05-10 Apple Inc. Web-clip widgets on a portable multifunction device
US9304675B2 (en) * 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
TWI300379B (en) * 2006-09-07 2008-09-01 Quanta Comp Inc Insert-molding mold
US7889212B2 (en) 2006-09-07 2011-02-15 Apple Inc. Magnifying visual information using a center-based loupe
KR100754731B1 (ko) 2006-09-13 2007-09-03 삼성전자주식회사 단말기에서 메시지에 포함된 문자열을 단말기 메뉴와연동하기 위한 방법
US9128596B2 (en) * 2006-09-22 2015-09-08 Opera Software Asa Method and device for selecting and displaying a region of interest in an electronic document
US7801721B2 (en) 2006-10-02 2010-09-21 Google Inc. Displaying original text in a user interface with translated text
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
WO2008052100A2 (en) 2006-10-26 2008-05-02 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
EP1918802A1 (en) 2006-10-30 2008-05-07 Research In Motion Limited Method of improved viewing of visual objects on a display by enlarging a focused object
US7653833B1 (en) * 2006-10-31 2010-01-26 Hewlett-Packard Development Company, L.P. Terminating a non-clustered workload in response to a failure of a system with a clustered workload
US7900145B2 (en) 2006-11-08 2011-03-01 Yahoo! Inc. System and method for synchronizing data
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8074172B2 (en) 2007-01-05 2011-12-06 Apple Inc. Method, system, and graphical user interface for providing word recommendations
US8656295B2 (en) * 2007-01-05 2014-02-18 Apple Inc. Selecting and manipulating web content
US7957955B2 (en) 2007-01-05 2011-06-07 Apple Inc. Method and system for providing word recommendations for text input
US8451232B2 (en) 2007-01-07 2013-05-28 Apple Inc. Portable multifunction device, method, and graphical user interface for interacting with user input elements in displayed content
US20080165148A1 (en) 2007-01-07 2008-07-10 Richard Williamson Portable Electronic Device, Method, and Graphical User Interface for Displaying Inline Multimedia Content
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
KR20080078291A (ko) 2007-02-23 2008-08-27 엘지전자 주식회사 브라우저 디스플레이 방법 및 이를 구현할 수 있는 단말기
WO2008092079A2 (en) * 2007-01-25 2008-07-31 Clipmarks Llc System, method and apparatus for selecting content from web sources and posting content to web logs
WO2008098164A2 (en) 2007-02-09 2008-08-14 Novarra, Inc. Method and server for providing a requested portion of a web page to a mobile device
US7768536B2 (en) 2007-04-11 2010-08-03 Sony Ericsson Mobile Communications Ab Methods of displaying information at different zoom settings and related devices and computer program products
US7949935B2 (en) 2007-04-27 2011-05-24 International Business Machines Corporation Selecting and rendering a section of a web page
US20080294974A1 (en) 2007-05-24 2008-11-27 Nokia Corporation Webpage history view
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8009146B2 (en) 2007-06-28 2011-08-30 Nokia Corporation Method, apparatus and computer program product for facilitating data entry via a touchscreen
US8127254B2 (en) 2007-06-29 2012-02-28 Nokia Corporation Unlocking a touch screen device
US20090044124A1 (en) 2007-08-06 2009-02-12 Nokia Corporation Method, apparatus and computer program product for facilitating data entry using an offset connection element
US8471823B2 (en) 2007-08-16 2013-06-25 Sony Corporation Systems and methods for providing a user interface
US8773358B2 (en) 2007-08-31 2014-07-08 Blackberry Limited Handheld electronic device and associated method providing advanced text editing function in a text disambiguation environment
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
WO2009039649A1 (en) 2007-09-28 2009-04-02 Research In Motion Limited Method and apparatus for providing zoom functionality in a portable device display
KR101398134B1 (ko) 2007-10-04 2014-05-20 엘지전자 주식회사 휴대 단말기의 동영상 재생장치 및 방법
US9274698B2 (en) 2007-10-26 2016-03-01 Blackberry Limited Electronic device and method of controlling same
EP2053497A1 (en) 2007-10-26 2009-04-29 Research In Motion Limited Text selection using a touch sensitive screen of a handheld mobile communication device
US20090125848A1 (en) 2007-11-14 2009-05-14 Susann Marie Keohane Touch surface-sensitive edit system
US8078979B2 (en) * 2007-11-27 2011-12-13 Microsoft Corporation Web page editor with element selection mechanism
US8212784B2 (en) 2007-12-13 2012-07-03 Microsoft Corporation Selection and display of media associated with a geographic area based on gesture input
US8610671B2 (en) 2007-12-27 2013-12-17 Apple Inc. Insertion marker placement on touch sensitive display
US8407603B2 (en) 2008-01-06 2013-03-26 Apple Inc. Portable electronic device for instant messaging multiple recipients
JP5001182B2 (ja) 2008-01-10 2012-08-15 パナソニック株式会社 表示制御装置、電子機器、表示制御方法、およびプログラム
WO2009097492A1 (en) 2008-01-30 2009-08-06 Azuki Systems, Inc. Media navigation system
US9772689B2 (en) 2008-03-04 2017-09-26 Qualcomm Incorporated Enhanced gesture-based image manipulation
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8352877B2 (en) 2008-03-06 2013-01-08 Microsoft Corporation Adjustment of range of content displayed on graphical user interface
CN101533320B (zh) * 2008-03-10 2012-04-25 神基科技股份有限公司 触控显示装置区域影像的近接放大显示方法及其装置
US20090235186A1 (en) 2008-03-12 2009-09-17 Microsoft Corporation Limited-scope rendering
KR101494285B1 (ko) 2008-04-15 2015-02-23 오페라 소프트웨어 에이에스에이 전자 문서의 선택 영역 표시 시 텍스트의 동적 래핑 방법 및 장치
US8375336B2 (en) * 2008-05-23 2013-02-12 Microsoft Corporation Panning content utilizing a drag operation
US9030418B2 (en) 2008-06-24 2015-05-12 Lg Electronics Inc. Mobile terminal capable of sensing proximity touch
KR20100001017A (ko) 2008-06-26 2010-01-06 엘지전자 주식회사 근접 터치 감지 기능을 갖는 휴대 단말기
TWI361372B (en) 2008-07-11 2012-04-01 Htc Corp Touch-sensitive control systems and methods
US20100042933A1 (en) 2008-08-15 2010-02-18 International Business Machines Corporation Region selection control for selecting browser rendered elements
US8872847B2 (en) 2008-08-28 2014-10-28 Google Inc. Architectures and methods for creating and representing time-dependent imagery
EP2175354A1 (en) 2008-10-07 2010-04-14 Research In Motion Limited Portable electronic device and method of controlling same
US8493408B2 (en) 2008-11-19 2013-07-23 Apple Inc. Techniques for manipulating panoramas
GB2478230B (en) 2008-12-15 2014-05-14 Hewlett Packard Development Co Gesture based edit mode
JP5240773B2 (ja) 2008-12-18 2013-07-17 シャープ株式会社 情報処理装置、情報処理方法および情報処理プログラム
US8291348B2 (en) 2008-12-31 2012-10-16 Hewlett-Packard Development Company, L.P. Computing device and method for selecting display regions responsive to non-discrete directional input actions and intelligent content analysis
US8261186B2 (en) 2009-01-02 2012-09-04 Apple Inc. Methods for efficient cluster analysis
US8593666B2 (en) 2009-02-11 2013-11-26 Hewlett-Packard Development Company, L.P. Method and system for printing a web page
US8786556B2 (en) * 2009-03-12 2014-07-22 Nokia Corporation Method and apparatus for selecting text information
US8255830B2 (en) 2009-03-16 2012-08-28 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8669945B2 (en) 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
US8438500B2 (en) 2009-09-25 2013-05-07 Apple Inc. Device, method, and graphical user interface for manipulation of user interface objects with activation regions
US8416205B2 (en) 2009-09-25 2013-04-09 Apple Inc. Device, method, and graphical user interface for manipulation of user interface objects with activation regions
US8624933B2 (en) 2009-09-25 2014-01-07 Apple Inc. Device, method, and graphical user interface for scrolling a multi-section document
US20110258563A1 (en) 2010-04-19 2011-10-20 Scott David Lincke Automatic Screen Zoom Level
US9508322B2 (en) 2010-05-28 2016-11-29 Qualcomm Incorporated Text box resizing
US8661339B2 (en) 2011-05-31 2014-02-25 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US9122311B2 (en) 2011-08-24 2015-09-01 Apple Inc. Visual feedback for tactile and non-tactile user interfaces
US8654076B2 (en) 2012-03-15 2014-02-18 Nokia Corporation Touch screen hover input handling
US20140139431A1 (en) 2012-11-21 2014-05-22 Htc Corporation Method for displaying images of touch control device on external display device
KR101371660B1 (ko) 2013-04-17 2014-03-10 인제대학교 산학협력단 가상 트랙볼을 이용한 터치스크린 제어방법
EP3602943A1 (en) 2017-03-24 2020-02-05 Intel IP Corporation Techniques to enable physical downlink control channel communications
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050076300A1 (en) * 2003-10-02 2005-04-07 International Business Machines Corporation Block marker system
US20070238489A1 (en) * 2006-03-31 2007-10-11 Research In Motion Limited Edit menu for a mobile communication device
US20080165142A1 (en) * 2006-10-26 2008-07-10 Kenneth Kocienda Portable Multifunction Device, Method, and Graphical User Interface for Adjusting an Insertion Point Marker
JP2008243221A (ja) * 2008-04-28 2008-10-09 Sony Corp 文章入力装置及び方法

Also Published As

Publication number Publication date
US9846533B2 (en) 2017-12-19
KR101732768B1 (ko) 2017-05-04
KR20110127752A (ko) 2011-11-25
US8756534B2 (en) 2014-06-17
US20100235726A1 (en) 2010-09-16
CA3050448C (en) 2021-05-25
KR101449358B1 (ko) 2014-10-10
JP2014139781A (ja) 2014-07-31
JP6040269B2 (ja) 2016-12-07
KR102217119B1 (ko) 2021-02-18
CA2927608C (en) 2019-09-03
US20100235734A1 (en) 2010-09-16
US20100235729A1 (en) 2010-09-16
US8510665B2 (en) 2013-08-13
JP6336550B2 (ja) 2018-06-06
US20100235778A1 (en) 2010-09-16
KR20140011410A (ko) 2014-01-28
US20100235783A1 (en) 2010-09-16
CA3109612C (en) 2022-08-16
CA3050448A1 (en) 2010-09-23
WO2010107653A3 (en) 2011-08-11
JP2012521048A (ja) 2012-09-10
EP2409213A2 (en) 2012-01-25
JP2015167018A (ja) 2015-09-24
US20100235785A1 (en) 2010-09-16
US10761716B2 (en) 2020-09-01
WO2010107653A2 (en) 2010-09-23
CA2755796A1 (en) 2010-09-23
CA2755796C (en) 2016-06-28
JP5715714B2 (ja) 2015-05-13
KR20130129480A (ko) 2013-11-28
JP5453517B2 (ja) 2014-03-26
KR101381063B1 (ko) 2014-04-11
US20100235784A1 (en) 2010-09-16
US20100235770A1 (en) 2010-09-16
CA3109612A1 (en) 2010-09-23
US8370736B2 (en) 2013-02-05
KR20170048613A (ko) 2017-05-08
EP4152139A1 (en) 2023-03-22
KR20190131149A (ko) 2019-11-25
US8661362B2 (en) 2014-02-25
US20180181276A1 (en) 2018-06-28
KR20180102687A (ko) 2018-09-17
US8584050B2 (en) 2013-11-12
US9875013B2 (en) 2018-01-23
KR20210019596A (ko) 2021-02-22
EP3644171A1 (en) 2020-04-29
CA2927608A1 (en) 2010-09-23
US20100235735A1 (en) 2010-09-16
US20210117063A1 (en) 2021-04-22
US8255830B2 (en) 2012-08-28
US20100235793A1 (en) 2010-09-16
JP2017079073A (ja) 2017-04-27
KR102048650B1 (ko) 2019-11-25

Similar Documents

Publication Publication Date Title
KR101896996B1 (ko) 터치 스크린 디스플레이를 갖는 다기능 장치 상에서의 편집 방법 및 그래픽 사용자 인터페이스

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
GRNT Written decision to grant